spark集群--standlone.md

。_饼干妹妹 提交于 2019-12-28 15:53:26

1.参见网址:
http://spark.apache.org/docs/latest/spark-standalone.html
2.对自己的服务器做一个规划
在这里插入图片描述
3.准备工作
网络
免密钥
把spark的包四台电脑都复制一份

4.启动主服务器(haodoop102)

sbin/start-master.sh

在这里插入图片描述
会产生log日志 – 要看日志
在这里插入图片描述
5.查看网页
在这里插入图片描述
6.启动小弟(在想当小弟的服务器上执行)

# 参数是大哥的Url
sbin/start-slave.sh spark://node7-2:7077

在这里插入图片描述
在这里插入图片描述
7.推荐的配置方法
要准备一个conf/slaves;写的全部是小弟(复制conf/slaves.template为conf/slaves)

hadoop103
hadoop104

配置文件:(复制conf/spark-env.sh.template为spark-env.sh)
在这里插入图片描述
先停止服务器

sbin/stop-all.sh

再开启服务即可

sbin/start-all.sh
易学教程内所有资源均来自网络或用户发布的内容,如有违反法律规定的内容欢迎反馈
该文章没有解决你所遇到的问题?点击提问,说说你的问题,让更多的人一起探讨吧!