七个pdf理解spark系列_3-JobPhysicalPlan下载

weixin_39821526 2020-08-17 02:00:34

在GitHub上找到的，国内某大牛JerryLead对spark的理解，生动形象，看完这7个pdf，对spark的运行机制，原理，以及后续性能调优有很大的帮助，这是第二个pdf-Job的物理执行图，详细描述了如何生成Job，提交 job 的实现细节，
相关下载链接：//download.csdn.net/download/anjingwunai/9886516?utm_source=bbsseo

...全文

16 回复打赏收藏转发到动态举报

写回复

回复

切换为时间正序

请发表友善的回复…

发表回复

Learning Spark， pdf格式, 为数不多的spark著作，值得细看

compile group: 'org.apache.spark', name: 'spark-streaming-kafka-0-10_2.10', version: '2.2.0' } 详见官网： http://spark.apache.org/docs/latest/streaming-kafka-0-10-integration.html#storing-offsets

背景介绍在日常工作中，我们可以在一个shell脚本里面利用spark-sql -e执行sql脚本，而且可以传参数，但是存在一个问题，shell脚本对格式要求严格，而且shell脚本和spark-sql的脚本混在一起，内容庞大凌乱，不好管理...

在做spark时，有些时候需要加载资源文件，需要在driver或者worker端访问。在client模式下可以使用IO流直接读取,但是在cluster模式下却不能直接读取，需要如下代码： val is: InputStream = this.getClass....

记一次神奇的mongo-spark-connector

下载资源悬赏专区

12,795

社区成员

12,333,145

社区内容

发帖

与我相关

我的任务

其他技术论坛（原bbs）

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章