请问下大佬们公司开发spark项目用的是java还是scala

Charcla 2017-10-30 01:49:07

写起代码来scala简洁好多，而且源码也是scala写的，但听说好像公司里做的大项目都是java,为什么？

...全文

2305 3 打赏收藏转发到动态举报

写回复

3 条回复

切换为时间正序

请发表友善的回复…

发表回复

福清仔 2017-12-04

打赏
举报

回复

用scala写是趋势嘛

Charcla 2017-10-31

打赏
举报

回复

引用 1 楼 link0007 的回复:

因为scala小众啊！比如一个会写scala的写好一段，离职交接了，其他人都看不懂，怎么办？

原来是这样，好吧

LinkSe7en 2017-10-30

打赏
举报

回复

因为scala小众啊！比如一个会写scala的写好一段，离职交接了，其他人都看不懂，怎么办？

能够应用Scala进行Spark应用程序开发、掌握Spark的基本运行原理及编程模型，能够熟悉运用Spark SQL进行大数据仓库的开发，掌握Spark流式计算、Spark机器学习及图计算的原理。讲师介绍：周志湖，电子科技大学计算机...

Apache Spark，它是用于大数据分析、处理和计算的通用引擎。与MapReduce相比，它具有几个优点：它更快、更易于使用、简单，并且几乎可以在任何地方运行。它具有用于 SQL、机器学习和流式传输的内置工具，这使其成为 IT 行业中非常流行和最受欢迎的工具之一。那么学习大数据框架Spark，最好学哪种语言呢？关于python和scala，两者一直争论不休。虽然说Spark是用scala进行开发的，但是如果你不做spark源码贡献，二次开发，基本上就不需要学scala，或者你不需要看spark源码，

spark streaming是spark中用来处理流式数据的，用来对接各类消息队列是极好的。spark streaming并不是真正实时的流式处理，它本质上还是批处理，只是每一个批次间隔的时间很短。我是用java来写的。跟大佬们的scala不能比，没有scala简洁。。先是maven需要依赖的spark-kafka包： <dependency> <grou...

开发工具:Intellij IDEA Java版本:JDK1.8以上在pom.xml文件中添加我们需要的jar包:spark-core  <properties> <spark.version>2.2.3</spark.version> </properties>  <dependency> <groupId&

在当今数字化时代，大数据无疑是引领科技和商业领域的重要力量。从智能决策到个性化推荐，再到商业洞察，大数据的应用已经无处不在。因此，学习大数据开发已经成为许多人职业发展中的热门选择。如果你想成为一名大数据开发工程师，那么你可能会面临一个问题：Java和Python哪个更适合大数据开发？你需要同时学习吗？Java和Python都在大数据开发中扮演着重要的角色，让我们来看看它们分别是什么。

1,258

社区成员

1,168

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章