spark stand alone 模式集群 如何调用Java程序

andy88421 2017-12-19 03:22:59
各位大神,小弟项目组现在需要部署一个spark stand alone的集群,之前我开发的程序是基于spark local的模式,所以调用spark计算是在代码里面实现的调用的。那么请问如何改为spark 集群,如何调用我需要执行的计算代码逻辑呢?可以通过java应用直接连接上spark 集群进行调用处理吗?请教,请教!坐等解答,如果有参考文章或者实例,烦请给个链接或指个经,感激不尽。
...全文
527 回复 打赏 收藏 转发到动态 举报
写回复
用AI写文章
回复
切换为时间正序
请发表友善的回复…
发表回复

1,258

社区成员

发帖
与我相关
我的任务
社区描述
Spark由Scala写成,是UC Berkeley AMP lab所开源的类Hadoop MapReduce的通用的并行计算框架,Spark基于MapReduce算法实现的分布式计算。
社区管理员
  • Spark
  • shiter
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧