天天看点

大数据学习——spark安装

一主多从

1 上传压缩包

大数据学习——spark安装
2 解压

tar -zxvf spark-1.6.2-bin-hadoop2.6.tgz      

删除安装包 

rm -rf spark-1.6.2-bin-hadoop2.6.tgz      

重命名

mv spark-1.6.2-bin-hadoop2.6/ spark       

3 修改配置文件

cp spark-env.sh.template spark-env.sh
 cp slaves.template  slaves 
 vi slaves      
大数据学习——spark安装
vi spark-env.sh      
大数据学习——spark安装

4 分发给另外几台机器

大数据学习——spark安装

5 启动

指定某一台

大数据学习——spark安装

启动所有

大数据学习——spark安装

查看进程

大数据学习——spark安装
大数据学习——spark安装
大数据学习——spark安装

http://mini1:8080/

大数据学习——spark安装

关闭集群

sbin/stop-all.sh 

继续阅读