58,454
社区成员
发帖
与我相关
我的任务
分享eclipse中java代码-提交到spark时报错，noclassdeffoundError
public static void submitJob() {
String[] args = new String[] { "--master", "spark://114.55.246.88:7077", "--name", "test java submit job to spark", "--class", "com.example.spark.WordCount", "/opt/spark-example-0.0.1-SNAPSHOT.jar", "hdfs://Master:9000/Hadoop/Input/wordcount.txt" };
SparkSubmit.main(args);
}
环境如下
window
myecplise2015
jdk1.8
linux
spark
mongo
在linux 运行 ./spark-submit 可以执行
String[] args = new String[] { "--master", "spark://114.55.246.88:7077", "--name", "test java submit job to spark", "--class", "com.example.spark.WordCount", "/opt/spark-example-0.0.1-SNAPSHOT.jar", "hdfs://Master:9000/Hadoop/Input/wordcount.txt" };
SparkSubmit.main(args);
}
环境如下
window
myecplise2015
jdk1.8
linux
spark
mongo
在linux 运行 ./spark-submit 可以执行
...全文
请发表友善的回复…
发表回复
qq_42736084 2019-08-01
- 打赏
- 举报
老哥，你MODBUS主机代码写好了吗？，可否指点一下
紫翎观星 2017-12-01
- 打赏
- 举报
如果你是用maven建的项目，在pom.xml中修改dependency下的spark-core，将<scope>provided</scope>注掉就不报这个错了。
