Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/spark/Spar

一流小风一 2015-03-30 10:14:57

Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/spark/SparkConf
求教各位大侠，我在win7上安装的idea，生成jar包之后导入虚拟机，启动spark后在终端输入
：java -jar text.jar text.helloword /datatnt/text1.txt /outputtnt/
就提示如上错误···求教各位大侠，是我的路径写的不对？

...全文

5159 6 打赏收藏转发到动态举报

写回复

6 条回复

切换为时间正序

请发表友善的回复…

发表回复

千山我独行_不需相送 2015-12-06

打赏
举报

回复

idea添加运行环境时jar包路径在哪里可以设置

一流小风一 2015-05-13

打赏
举报

回复

当时我是在配置spark环境时路径添加的有问题。我是用IDEA编译程序再打包成jar包拷贝到linux虚拟机里运行，这样在将程序打包时也要添加相应运行环境的jar包路径。如果你跟我的情况类似的话我觉得问题很有可能出在这两个地方

曹宇 2015-05-13

打赏
举报

回复

引用 2 楼 fenger1943 的回复:

谢谢···我已经解决问题了···

怎么解决的请说下.多谢.

一流小风一 2015-04-24

打赏
举报

回复

谢谢···我已经解决问题了···

UESTC少尉 2015-04-24

打赏
举报

回复

感觉是缺少了哪个包了

前言刚开始使用Scala写代码，经常会遇到报错 Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/spark/sql/SparkSession$ at ScalaStudy.nian.studySpark$.main(studySpark.scala:10) at ScalaStudy.nian.studySpark.main(studySpark.scala) 我是已经开了一个Scala的程序，后面再开一个程

【问题描述】说一件很神奇的事情，今天在使用SparkStreaming进行Scala编程的时候，发生了如下问题： Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/spark/streaming/StreamingContext at com.xzw.sparkstreaming.KafkaToHBase$.main(KafkaToHBase.scala:27) at com.xzw.spar...

1

出现这个问题有两个原因：当maven依赖里去除了对应的jar包（如下图）通过exclusion标签去除了对应的jar包或者是在引入servlet时加入了 <scope>provided</scope> 这个会导致在编译和测试时有用，但在运行时会忽略这个jar包在用tomcat启动一个web应用，在导入servlet后用spark-sql来查询数据时，报出这个错。是因为在tomcat中自带servlet这个jar包，在运行时没有忽略这个servlet jar包会报错，而且在spar

Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/hadoop/fs/FSDataInputStream at org.apache.spark.SparkConf.loadFromSystemProperties(SparkConf.scala:73) at org.apache.spark.Spar...

Hadoop生态社区

20,808

社区成员

4,690

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章