隐藏侧边栏← 显示侧边栏→

个人资料

username

Spark论坛

版面简介:Spark由Scala写成,是UC Berkeley AMP lab所开源的类Hadoop MapReduce的通用的并行计算框架,Spark基于MapReduce算法实现的分布式计算。
版主: 仲浩 Ico_application
标题 分数 提问人 回复数 最后更新时间 功能
[置顶] 【福利大放送】下载工业物联网白皮书赢定制奖品! [推荐] [云计算 数字化企业云平台论坛] 50 CSDNhanrui
2018-03-13 11:21
10 u010554564
2018-05-11 23:51
管理
[置顶] 【有奖活动】互联网50%中高危网站,你中招了么? [云计算 虚拟化] 100 蓝染1991
2018-04-26 11:57
1 东方不败耶耶耶1
2018-04-28 14:54
管理
[置顶] AI人工智能时代,在不知道这些你就跟不上时代了! [其他开发语言 脚本语言(Perl/Python)] 50 HXDHXD1
2018-05-10 14:50
0 HXDHXD1
2018-05-10 14:50
管理
[置顶] CSDN Spark微信群深度分享预告与总结 [云计算 Spark] 20 仲浩
2015-07-31 18:18
6 zcinfo
2017-06-14 09:58
管理
[置顶] CSDN攒课第二期课题“Spark基础与编程模型”开课啦,快来报名吧! [推荐] [云计算 Spark] 40 精致女王
2015-10-27 18:29
13 CSDX
2017-07-11 10:25
管理
[置顶] Spark零基础入门系列在线视频培训入口 [云计算 Spark] 40 仲浩
2015-12-08 20:55
7 maks2013
2017-03-21 11:08
管理
[置顶] [重磅]懂行的人都在这里,BDTC 2016将于12月8-10日在京举行 [云计算 Spark] 40 CSDN魏伟
2016-11-23 13:20
1 GWLCGL520
2016-11-26 09:42
管理
CDH5安装过程不能启动YARN (MR2 Included) [云计算 Spark] 100 kent7306
2015-01-28 16:28
9 随风而醒
2018-05-17 13:47
管理
× java客户端连接kafka消费超时问题 [云计算 Spark] 100 Bonsour
2018-04-27 14:19
1 Bonsour
2018-04-27 14:37
管理
× 是否可以配置Apache Flume使用Parquet将我的日志保存在HDFS中? [云计算 Spark] 50 JavaXluo
2018-04-24 11:56
1 JavaXluo
2018-04-24 11:56
管理
× spark job 结束后ui界面还一直有active jobs,小白求各位大神指教~ [云计算 Spark] 50 youngmilk
2018-04-20 12:09
5 dlc1982
2018-04-21 11:03
管理
sqoop2 运行job时报无效的路径问题! [云计算 Spark] 100 狂我之心
2018-04-19 18:14
5 狂我之心
2018-04-20 13:14
管理
spark执行R脚本任务,任务时间超过6000秒自动停止 [云计算 Spark] 40 zxbmhy
2017-08-01 23:15
5 草莓派R语言
2018-04-10 12:38
管理
× 关于Spark DF 缓存的问题 [云计算 Spark] 200 musw
2018-04-02 17:24
4 musw
2018-04-05 09:28
管理
spark性能调优问题(task分布不均衡) [云计算 Spark] 40 raxanne
2017-08-11 17:38
6 sunrising_hill
2018-03-27 17:23
管理
× hadoop 格式化不了 namenode datanode 启动不起来为什么啊? [云计算 Spark] 20 er1182824122
2017-06-23 21:37
2 er1182824122
2018-03-21 17:16
管理
× KafkaUtils.createDirectStream的问题 [云计算 Spark] 50 chen58683632
2018-03-04 13:19
1 LinkSe7en
2018-03-04 22:21
管理
× NLPIR分词器在spark平台实现载入 libNLPIR.so 时出错 [云计算 Spark] 40 Bio_CIT
2017-01-11 16:14
8 馒头夹辣条
2018-03-03 16:05
管理
求教入大数据坑的路线,新人求教 [云计算 Spark] 100 QoiteCover
2016-09-01 23:28
8 fate1995
2018-03-02 01:22
管理
× 本科大四,准备出去找工作了,学习了spark,kafka等,还需要深入学习hadoop吗? [云计算 Spark] 50 ddxygq
2018-02-27 20:51
1 怀揣梦想的大鸡腿
2018-02-27 22:00
管理
Spark 中的文本转换为 Parquet 如何控制Parquet文件的数量 [云计算 Spark] 40 福清仔
2017-09-14 15:45
3 福清仔
2018-02-06 17:26
管理
× hive udf连接hbase 无限等待问题 [云计算 Spark] 40 福清仔
2017-10-23 22:27
1 福清仔
2018-02-06 17:25
管理
scala如何给map里的函数传参 [云计算 Spark] 50 loseryao
2018-01-30 14:13
1 天心有情
2018-01-30 15:03
管理
× 分享一个很好的大数据面试知识点专栏博客 [云计算 Spark] 50 且听_风吟
2018-01-23 18:25
1 且听_风吟
2018-01-23 18:26
管理
如何使用spark统计某个value的出现次数,并且统计出出现次数最多的value [云计算 Spark] 50 qq_16046321
2018-01-03 18:39
5 qq_16046321
2018-01-18 16:59
管理
× spark 如何从foreachRDD 获取数据 ? [云计算 Spark] 40 hghdown
2016-06-15 16:19
11 jybbh
2017-12-20 14:02
管理
× spark stand alone 模式集群 如何调用Java程序 [云计算 Spark] 50 andy88421
2017-12-19 15:22
0 andy88421
2017-12-19 15:22
管理
× 关于rdd写入hdfs数据 [云计算 Spark] 100 wjw870907
2017-12-07 16:43
4 wjw870907
2017-12-12 12:02
管理
× 超大矩阵(上亿条数据)的可逆运算?利用Hadoop集群或者其他框架的求解方式? [云计算 Spark] 50 冠希哥谈程序
2017-12-04 19:57
0 冠希哥谈程序
2017-12-04 19:57
管理
× rdd.collect()返回错误的值 [云计算 Spark] 50 Effpom
2017-12-03 15:32
2 Effpom
2017-12-04 16:07
管理
请问下大佬们公司开发spark项目用的是java还是scala [云计算 Spark] 100 MrAmity
2017-10-30 13:49
3 福清仔
2017-12-04 10:42
管理
× spark-shell可以运行,spark-submit就报错了。 [云计算 Spark] 50 恶魔爱谁
2017-11-30 16:35
0 恶魔爱谁
2017-11-30 16:35
管理
× 【社区问答第四十一期】Apache Spark大数据专题 [云计算 Spark] 100 吃货乙
2016-05-03 10:22
49 Cpp初学者
2017-11-29 11:52
管理
初学者求助一段scala代码,快被它的语法搞疯了。。。多谢! [云计算 Spark] 40 飞火流云
2017-09-16 20:02
5 m0_37889105
2017-11-10 17:23
管理
HADOOP mapreduce 中关于 WritableComparable WritableComparator RawComparator的作用。 [云计算 Spark] 40 zou781
2017-02-06 15:54
3 qq_26517369
2017-11-09 16:25
管理
spark的缓存问题 [云计算 Spark] 0 mumumuyanyanyan
2017-10-27 21:41
1 rebic
2017-10-30 16:52
管理
如何计算spark中某个文件的内存占用情况? [云计算 Spark] 50 mumumuyanyanyan
2017-10-27 21:43
1 成吉思潇
2017-10-30 09:07
管理
× 格式化namenode,报io异常,请大神帮忙看一下 [云计算 Spark] 50 柯南爱上指针
2017-10-28 10:11
1 柯南爱上指针
2017-10-28 10:38
管理
× spark读取hbase时,报出java.lang.NoClassDefFoundError: org/apache/htrace/Trace异常 [云计算 Spark] 25 西红小柿
2017-10-18 17:34
2 西红小柿
2017-10-19 12:34
管理
× spark Streaming在local 可以运行正常 ,但是在yarn上数据不能处理(只有Ctrl+c)才能执行 这是什么问题 [云计算 Spark] 40 yisun123456
2017-10-10 09:47
4 yisun123456
2017-10-10 18:19
管理
× 使用本地spark-submit命令行的方式远程提交sparkJar到yarn集群 [云计算 Spark] 40 joemw
2017-09-30 11:39
0 joemw
2017-09-30 11:39
管理
Hadoop启动没有明显异常信息,但是启动失败,怎么排错??? [云计算 Spark] 50 the_fool_
2017-09-13 20:31
2 the_fool_
2017-09-15 18:57
管理
spark scala算子内部引用sparkSession属性为空 [云计算 Spark] 100 很懒的耗子
2017-06-05 18:24
8 qixingmoming
2017-09-05 14:09
管理
× spark 中 textFile 、hadoopFile、newAPIHadoopFile等 有什么区别啊? [云计算 Spark] 20 linux探索
2017-08-30 17:25
0 linux探索
2017-08-30 17:25
管理
spark scala filter 多条件 如何使用 ? [云计算 Spark] 20 linux探索
2017-08-29 12:48
5 linux探索
2017-08-30 15:20
管理
spark集群启动之后,spark-submit提交任务,主类找不到 [云计算 Spark] 100 elan3906
2017-08-23 10:09
5 elan3906
2017-08-27 10:34
管理
accumulator根据官网介绍task不能读取值,只能在Driver中读取,但是我的案例可以在task中读取 [云计算 Spark] 20 卡奥斯道
2017-08-21 13:04
2 LinkSe7en
2017-08-22 20:28
管理
× cdh hadoop 进程全部 process information unavailable [云计算 Spark] 20 yisun123456
2017-08-22 09:36
0 yisun123456
2017-08-22 09:36
管理
scala 语法 [云计算 Spark] 20 linux探索
2017-08-21 14:33
1 卡奥斯道
2017-08-21 15:49
管理
spark中两个map做嵌套 [云计算 Spark] 20 studyHardYing
2017-08-16 11:20
9 studyHardYing
2017-08-18 10:23
管理
spark 三种运行模式,求大神给讲解一下 [云计算 Spark] 20 linux探索
2017-08-17 10:43
2 LinkSe7en
2017-08-17 22:01
管理
× pyspark中操作spark sql问题 [云计算 Spark] 40 jxk
2017-08-17 17:09
0 jxk
2017-08-17 17:09
管理
idea spark scala 报错 [云计算 Spark] 20 linux探索
2017-08-15 14:39
1 为不为
2017-08-15 16:39
管理
标题 分数 提问人 回复数 最后更新时间 功能