spark streaming 重新启动Exception in thread "main" org.apache.spark.SparkException:

山上的太阳 2016-10-20 04:55:40
Exception in thread "main" org.apache.spark.SparkException: org.apache.spark.streaming.dstream.ShuffledDStream@3e491569 has not been initialized
有人说jar包重新编译后需要删掉checkpoint目录,但是我没有重新编译,我的运行方式是yarn-client方式,请问朋友们知道是什么原因吗
...全文
790 回复 打赏 收藏 转发到动态 举报
AI 作业
写回复
用AI写文章
回复
切换为时间正序
请发表友善的回复…
发表回复

1,270

社区成员

发帖
与我相关
我的任务
社区描述
Spark由Scala写成,是UC Berkeley AMP lab所开源的类Hadoop MapReduce的通用的并行计算框架,Spark基于MapReduce算法实现的分布式计算。
社区管理员
  • Spark
  • shiter
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧