eclipse开发spark应用程序 spark2.1.0 导入哪个jar包?

2017-02-22 08:44:31 3.4k 阅读 AI 写同款 · GEO 优化AI 选题数据监测一键分发 ›
m0_37621648 m0_37621648 墨衍会员 · AI 创作全网分发 墨衍智能分发 通过墨衍一键同步至各平台 可同步平台 CSDN微信公众号微博知乎掘金百家号博客园抖音小红书 你的文章也可以这样分发 墨衍会员 ¥399起/年，写一次发全网 我也要 + 加入社区
使用Eclipse构建Spark Java集成开发环境 最近在eclipse构建spark java开发环境走了很多坑，把步骤记录下来。 第一步、从spark官网上下载spark安装包，我下载的为spark-1.5.1-bin-hadoop2.6 直接解压缩即可，在环境变量path中配置为你解压缩的路径+\bin，我的path为D:\spark-1.5.1-bin-hadoop2.6\bin，在cmd中输入spark-she 阅读详情
最新的spark2.1.0环境应该导入哪个jar包呀，之前版本的spark有lib目录下有spark-assembly-1.3.0-hadoop2.5.0-cdh5.3.0.jar，但是spark2.0没有这个目录啊，那应该导入哪个jar？谢大神指点
...全文
Linux下 Spark Scala IDE工作环境搭建 环境centos 64位 Spark 2.1.0 Scala IDE: http://scala-ide.org （可以认为是装了scala插件的eclipse） jdk1.8.0_111（之前玩hadoop的时候装了，scala基于jvm，理论上应该要装的） 1. 下载好Spark后直接解压，然后运行bin/spark-shell看是否能进入spark shell。Spark自带 阅读详情

相关推荐

spark开发环境搭建(eclipse)

Spark 开发环境搭建 关于scala for eclipse搭建

a13575018718

hadoop的各种jar包

使用ecplice操作hadoop所需要的各种jar包。包括hdfs,maprudce,yarn,httpfs,kms。

black_shooter

Spark简单测试案例

Spark自带案例、代码案例测试! 环境： Hadoop1.2集群和Spark1.0集群 3个节点的Ubuntu12.1系统机器

大盘鸡炒面条

spark所需要的scala jar包依赖

spark所需要的scalajar包依赖

darkchink

Spark源码在Eclipse部署

Spark源码在Eclipse部署 Spark源码在Eclipse部署 Spark源码在Eclipse部署

efatao
评论 5
收藏 已收藏
分享
返回顶部
m0_37621648
m0_37621648
Spark 1,274 成员 1,171 内容
+ 加入社区