有没有哪位前辈做过hadoop下的apriori的算法的分析？求指点

freeofit 2017-11-18 04:39:22

有没有哪位前辈做过hadoop下的apriori的算法的分析？求指点。本人已经搭建好开发环境，可是还是不会具体操作，在网上也找了一些资料都没有比较明确的。。。。。

...全文

63 回复打赏收藏转发到动态举报

写回复

回复

切换为时间正序

请发表友善的回复…

发表回复

caibinbupt的Hadoop源码分析完整版，包括 HDFS 和 MapReduce。 HDFS: 41章 MapReduce: 14章

前情回顾：⼤数据是如何产⽣的？什么是数据仓库？目前为止，我们知道了海量数据的存储是使用数据仓库，而为了保证数据的质量呢，我们要有元数据管理，还有数据治理。而为了保证这些数据的性能、还有使用的效率等等，那么我们采取的是分层架构。在目前市面上用的比较广泛的数据仓库是Hive，而Hive又是依存于Hadoop这样一个开源的分布式计算平台上。所以本篇博客我们就来介绍一下Hadoop。 Hadoop概述 1 Hadoop简介 Hadoop是什么？简单来说，Hadoop就是解决⼤数据时代下海量数据的存储和分析计

目录1.1 Hadoop 是什么 1.2 Hadoop 发展历史1.3 Hadoop 三大发行版本 1.4 Hadoop优势（4高） 1.5 Hadoop 组成（面试重点） 1.5.1 HDFS 架构概述 1.5.2 YARN 架构概述 1.5.3 MapReduce 架构概述 1.5.4 HDFS、YARN、MapReduce 三者关系 1.6 大数据技术生态体系 1.7 推荐系统框架图假如说购买一个东西，打开京东首页，购买一个东西，这个购买行为会被记录下来，通过Nginx负载均衡打入到日

压缩数据的优点: 节约磁盘空间加速数据在网络和磁盘上的传输压缩算法的缺点: 会消耗CPU的资源先测试一下是否支持openssl压缩算法 bin/hadoop checknative 如果出现false就安装一下 yum install openssl-devel hadoop支持的压缩算法压缩格式工具算法文件扩展名是否可切分 DEFLATE 无 DEF...

压缩好处文件压缩有两大好处，节约磁盘空间，加速数据在网络和磁盘上的传输前面hadoop的版本经过重新编译之后，可以看到hadoop已经支持所有的压缩格式了，剩下的问题就是该如何选择使用这些压缩格式来对MapReduce程序进行压缩可以使用bin/hadoop checknative 来查看编译之后的hadoop支持的各种压缩，如果出现openssl为false，那么就在线安装一下依赖包 b...

56,678

社区成员

56,708

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章