spark正常启动后webui没有worker显示

abcdefg550 2020-02-29 01:11:33
两个slave结点worker都正常运行 但是web就是看不到
...全文
1214 3 打赏 收藏 转发到动态 举报
AI 作业
写回复
用AI写文章
3 条回复
切换为时间正序
请发表友善的回复…
发表回复
DanielMaster 2020-03-06
  • 打赏
  • 举报
回复
配置文件应该是这样的 export JAVA_HOME=/usr/local/jdk1.8.0_73 export SCALA_HOME=/home/hadoop/apps/scala export SPARK_MASTER_IP=hadoop01 export SPARK_MASTER_PORT=7077 ##rpc通信端口,类似hdfs的9000端口,不是50070 export SPARK_WORKER_CORES=2 export SPARK_WORKER_INSTANCES=1 export SPARK_WORKER_MEMORY=1g export HADOOP_CONF_DIR=/home/hadoop/apps/hadoop-2.7.6/etc/hadoop
abcdefg550 2020-02-29
  • 打赏
  • 举报
回复
顶顶顶顶顶顶
abcdefg550 2020-02-29
  • 打赏
  • 举报
回复
有人吗有人吗

1,270

社区成员

发帖
与我相关
我的任务
社区描述
Spark由Scala写成,是UC Berkeley AMP lab所开源的类Hadoop MapReduce的通用的并行计算框架,Spark基于MapReduce算法实现的分布式计算。
社区管理员
  • Spark
  • shiter
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧