12spark_scala集群演示

zhchzh1000 2023-01-12 18:48:28

课时名称课时知识点
12spark_scala集群演示
...全文
54 回复 打赏 收藏 转发到动态 举报
写回复
用AI写文章
回复
切换为时间正序
请发表友善的回复…
发表回复
## Spark_FPGrowth 基于Hadoop&Spark的关联规则算法实践 --- ### 1. 实践目的 > 此次实践主要目的在于,希望通过亲身实践,加深自己对Hadoop、Spark两类大数据工具的理解,熟悉其从集群部署到运作的基本流程,了解FPGrowth算法的基本原理,掌握算法在关联规则中的基本应用,为日后的大数据学习积累经验。 ### 2. 实践内容 - 搭建Linux系统,部署集群; - 编写scala代码,使用spark对Groceries购物数据进行关联规则的分析; - 模拟故障,分析spark运行情况; ### 3. 实践环境 - Centos 7(一台master, 6台workers) - Hadoop 3.1.1 - JDK 1.8.0_191 - Scala 集群 2.12.8;个人笔记本 2.11.12 - Spark 2.4.0 -------- 不懂运行,下载完可以私聊问,可远程教学 该资源内项目源码是个人的毕设,代码都测试ok,都是运行成功后才上传资源,答辩评审平均分达到96分,放心下载使用! <项目介绍> 1、该资源内项目代码都经过测试运行成功,功能ok的情况下才上传的,请放心下载使用! 2、本项目适合计算机相关专业(如计科、人工智能、通信工程、自动化、电子信息等)的在校学生、老师或者企业员工下载学习,也适合小白学习进阶,当然也可作为毕设项目、课程设计、作业、项目初期立项演示等。 3、如果基础还行,也可在此代码基础上进行修改,以实现其他功能,也可用于毕设、课设、作业等。 下载后请首先打开README.md文件(如有),仅供学习参考, 切勿用于商业用途。 --------

1

社区成员

发帖
与我相关
我的任务
社区管理员
  • zhchzh1000
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧