隐藏侧边栏← 显示侧边栏→

个人资料

username

Spark论坛

版面简介:Spark由Scala写成,是UC Berkeley AMP lab所开源的类Hadoop MapReduce的通用的并行计算框架,Spark基于MapReduce算法实现的分布式计算。
版主: zhong930 Ico_application
标题 分数 提问人 回复数 最后更新时间 功能
[置顶] 2017中国开发者有奖大调查 [推荐] [云计算 OpenStack] 100 CSDN__BBS
2017-12-08 10:39
73 guzi19801130
2018-02-16 02:57
管理
[置顶] 华为云开年采购季 三大惊喜乐不停 [云计算 华为云计算] 50 shere_lin
2018-02-09 16:28
0 shere_lin
2018-02-09 16:28
管理
[置顶] CSDN Spark微信群深度分享预告与总结 [云计算 Spark] 20 zhong930
2015-07-31 18:18
6 zcinfo
2017-06-14 09:58
管理
[置顶] CSDN攒课第二期课题“Spark基础与编程模型”开课啦,快来报名吧! [推荐] [云计算 Spark] 40 rmyymr
2015-10-27 18:29
13 ddjj_1980
2017-07-11 10:25
管理
[置顶] Spark零基础入门系列在线视频培训入口 [云计算 Spark] 40 zhong930
2015-12-08 20:55
7 maks2013
2017-03-21 11:08
管理
[置顶] [重磅]懂行的人都在这里,BDTC 2016将于12月8-10日在京举行 [云计算 Spark] 40 karamos
2016-11-23 13:20
1 GWLCGL520
2016-11-26 09:42
管理
... Spark 中的文本转换为 Parquet 如何控制Parquet文件的数量 [云计算 Spark] 40 chjbiao
2017-09-14 15:45
3 chjbiao
2018-02-06 17:26
管理
× hive udf连接hbase 无限等待问题 [云计算 Spark] 40 chjbiao
2017-10-23 22:27
1 chjbiao
2018-02-06 17:25
管理
scala如何给map里的函数传参 [云计算 Spark] 50 loseryao
2018-01-30 14:13
1 sinat_35045195
2018-01-30 15:03
管理
如何使用spark统计某个value的出现次数,并且统计出出现次数最多的value [云计算 Spark] 50 qq_16046321
2018-01-03 18:39
5 qq_16046321
2018-01-18 16:59
管理
spark性能调优问题(task分布不均衡) [云计算 Spark] 40 zylove2010
2017-08-11 17:38
3 zylove2010
2018-01-10 16:04
管理
× spark 如何从foreachRDD 获取数据 ? [云计算 Spark] 40 hghdown
2016-06-15 16:19
11 jybbh
2017-12-20 14:02
管理
× 关于rdd写入hdfs数据 [云计算 Spark] 100 wjw870907
2017-12-07 16:43
4 wjw870907
2017-12-12 12:02
管理
× 超大矩阵(上亿条数据)的可逆运算?利用Hadoop集群或者其他框架的求解方式? [云计算 Spark] 50 weixin_39628726
2017-12-04 19:57
0 weixin_39628726
2017-12-04 19:57
管理
× rdd.collect()返回错误的值 [云计算 Spark] 50 liuhoukai1
2017-12-03 15:32
2 liuhoukai1
2017-12-04 16:07
管理
请问下大佬们公司开发spark项目用的是java还是scala [云计算 Spark] 100 MrAmity
2017-10-30 13:49
3 chjbiao
2017-12-04 10:42
管理
× spark-shell可以运行,spark-submit就报错了。 [云计算 Spark] 50 u011347604
2017-11-30 16:35
0 u011347604
2017-11-30 16:35
管理
× 【社区问答第四十一期】Apache Spark大数据专题 [云计算 Spark] 100 yixiaof
2016-05-03 10:22
49 suifengTYZ
2017-11-29 11:52
管理
初学者求助一段scala代码,快被它的语法搞疯了。。。多谢! [云计算 Spark] 40 cloudeagle_bupt
2017-09-16 20:02
5 m0_37889105
2017-11-10 17:23
管理
HADOOP mapreduce 中关于 WritableComparable WritableComparator RawComparator的作用。 [云计算 Spark] 40 zou781
2017-02-06 15:54
3 qq_26517369
2017-11-09 16:25
管理
spark的缓存问题 [云计算 Spark] 0 sinat_27634939
2017-10-27 21:41
1 u012424013
2017-10-30 16:52
管理
如何计算spark中某个文件的内存占用情况? [云计算 Spark] 50 sinat_27634939
2017-10-27 21:43
1 xx1710
2017-10-30 09:07
管理
× 格式化namenode,报io异常,请大神帮忙看一下 [云计算 Spark] 50 qq_35468937
2017-10-28 10:11
1 qq_35468937
2017-10-28 10:38
管理
× spark读取hbase时,报出java.lang.NoClassDefFoundError: org/apache/htrace/Trace异常 [云计算 Spark] 25 weixin_35101855
2017-10-18 17:34
2 weixin_35101855
2017-10-19 12:34
管理
× spark Streaming在local 可以运行正常 ,但是在yarn上数据不能处理(只有Ctrl+c)才能执行 这是什么问题 [云计算 Spark] 40 yisun123456
2017-10-10 09:47
4 yisun123456
2017-10-10 18:19
管理
× 使用本地spark-submit命令行的方式远程提交sparkJar到yarn集群 [云计算 Spark] 40 joemw
2017-09-30 11:39
0 joemw
2017-09-30 11:39
管理
Hadoop启动没有明显异常信息,但是启动失败,怎么排错??? [云计算 Spark] 50 the_fool_
2017-09-13 20:31
2 the_fool_
2017-09-15 18:57
管理
spark scala算子内部引用sparkSession属性为空 [云计算 Spark] 100 zenghao5202880
2017-06-05 18:24
8 qixingmoming
2017-09-05 14:09
管理
× spark 中 textFile 、hadoopFile、newAPIHadoopFile等 有什么区别啊? [云计算 Spark] 20 hei854791774
2017-08-30 17:25
0 hei854791774
2017-08-30 17:25
管理
spark scala filter 多条件 如何使用 ? [云计算 Spark] 20 hei854791774
2017-08-29 12:48
5 hei854791774
2017-08-30 15:20
管理
spark集群启动之后,spark-submit提交任务,主类找不到 [云计算 Spark] 100 elan3906
2017-08-23 10:09
5 elan3906
2017-08-27 10:34
管理
accumulator根据官网介绍task不能读取值,只能在Driver中读取,但是我的案例可以在task中读取 [云计算 Spark] 20 kaaosidao
2017-08-21 13:04
2 link0007
2017-08-22 20:28
管理
× cdh hadoop 进程全部 process information unavailable [云计算 Spark] 20 yisun123456
2017-08-22 09:36
0 yisun123456
2017-08-22 09:36
管理
scala 语法 [云计算 Spark] 20 hei854791774
2017-08-21 14:33
1 kaaosidao
2017-08-21 15:49
管理
spark中两个map做嵌套 [云计算 Spark] 20 ly1074106000
2017-08-16 11:20
9 ly1074106000
2017-08-18 10:23
管理
spark 三种运行模式,求大神给讲解一下 [云计算 Spark] 20 hei854791774
2017-08-17 10:43
2 link0007
2017-08-17 22:01
管理
× pyspark中操作spark sql问题 [云计算 Spark] 40 kyo1979
2017-08-17 17:09
0 kyo1979
2017-08-17 17:09
管理
idea spark scala 报错 [云计算 Spark] 20 hei854791774
2017-08-15 14:39
1 u011747152
2017-08-15 16:39
管理
Spark操作mysql出错 [云计算 Spark] 30 k_c_u_f
2017-08-10 18:38
6 javahuoshan
2017-08-14 16:36
管理
× spark on yarn 执行,总是会上传jar包 [云计算 Spark] 40 wang5288
2017-04-27 13:44
2 javahuoshan
2017-08-09 18:05
管理
× spark数据分析 求大神指教 [云计算 Spark] 40 qq_32016235
2017-08-08 10:35
0 qq_32016235
2017-08-08 10:35
管理
悬赏了,spark sql group by sum特别慢,请大牛支持,谢谢 [云计算 Spark] 100 flyaga
2017-01-18 13:59
23 maideclp123
2017-08-07 10:20
管理
× hive on spark一直pending 是什么情况 [云计算 Spark] 100 kazoroth
2017-08-05 10:05
2 kazoroth
2017-08-05 21:52
管理
spark执行R脚本任务,任务时间超过6000秒自动停止 [云计算 Spark] 40 zxbmhy
2017-08-01 23:15
3 zxbmhy
2017-08-04 11:50
管理
× spark dataset 写到postgresql 问题 [云计算 Spark] 40 yihua216
2017-06-14 10:04
2 sinat_30665603
2017-08-02 16:18
管理
× 用myeclipse连接hadoop开发,一直连接不上,报如下错误 [云计算 Spark] 50 wangming917
2017-05-03 15:17
1 qq_39579845
2017-08-01 09:55
管理
× spark 如何解决pv,uv实时数据 [云计算 Spark] 40 u011747152
2017-07-06 16:00
0 u011747152
2017-07-06 16:00
管理
读取parquet文件时间问题 [云计算 Spark] 50 kxg916361108
2017-07-06 09:55
7 kxg916361108
2017-07-06 11:21
管理
× spark ui中executors的storage memory一直在增长,是否正常? [云计算 Spark] 40 book_reinforce
2017-07-05 17:20
0 book_reinforce
2017-07-05 17:20
管理
关于SparkStreaming解析json [云计算 Spark] 20 skinsli
2017-07-04 11:27
5 skinsli
2017-07-04 18:50
管理
新手请教spark scala如何取出rdd中的每一个元素。 [云计算 Spark] 20 q13477027443
2017-02-14 11:58
5 zhangshucheng129
2017-06-22 15:59
管理
关于sparkStreaming 获取数据的问题 [云计算 Spark] 20 skinsli
2017-06-13 17:27
2 link0007
2017-06-14 22:08
管理
标题 分数 提问人 回复数 最后更新时间 功能