大数据学习——spark安装

时间:2024-04-29 16:21:31

一主多从

1 上传压缩包

大数据学习——spark安装

2 解压

tar -zxvf spark-1.6.-bin-hadoop2..tgz

删除安装包

rm -rf spark-1.6.-bin-hadoop2..tgz

重命名

mv spark-1.6.2-bin-hadoop2.6/ spark 

3 修改配置文件

 cp spark-env.sh.template spark-env.sh
 cp slaves.template  slaves 
vi slaves

大数据学习——spark安装

vi spark-env.sh

大数据学习——spark安装

4 分发给另外几台机器

大数据学习——spark安装

5 启动

指定某一台

大数据学习——spark安装

启动所有

大数据学习——spark安装

查看进程

大数据学习——spark安装

大数据学习——spark安装

大数据学习——spark安装

http://mini1:8080/

大数据学习——spark安装

关闭集群

sbin/stop-all.sh

多主多从

大数据学习——spark安装