ERROR CoarseGrainedExecutorBackend: RECEIVED SIGNAL TERM

wcx945123 2018-04-21 10:28:08
程序大概就是通过spark读取hbase中的数据,对数据进行处理以后,将处理后的数据存到hbase的另一张表中
但是在Executor的日志中有报错,但是Driver里面没有,大家看看是什么原因
错误信息:
8/04/21 21:30:49 INFO ZooKeeper: Session: 0x161cfd1f3362a1b closed
18/04/21 21:30:49 INFO ClientCnxn: EventThread shut down
18/04/21 21:30:49 INFO SparkHadoopMapRedUtil: No need to commit output of task because needsTaskCommit=false: attempt_20180421213012_0000_m_000000_0
18/04/21 21:30:49 INFO Executor: Finished task 0.0 in stage 0.0 (TID 0). 1734 bytes result sent to driver
18/04/21 21:30:49 INFO CoarseGrainedExecutorBackend: Driver commanded a shutdown
18/04/21 21:30:49 ERROR CoarseGrainedExecutorBackend: RECEIVED SIGNAL TERM

代码如下:



Driver日志:


Executor日志:
...全文
4375 1 打赏 收藏 转发到动态 举报
AI 作业
写回复
用AI写文章
1 条回复
切换为时间正序
请发表友善的回复…
发表回复
house1978 2018-04-23
  • 打赏
  • 举报
回复
看日志y应该是Driver挂了

1,270

社区成员

发帖
与我相关
我的任务
社区描述
Spark由Scala写成,是UC Berkeley AMP lab所开源的类Hadoop MapReduce的通用的并行计算框架,Spark基于MapReduce算法实现的分布式计算。
社区管理员
  • Spark
  • shiter
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧