常用大数据技术框架总结下载

PIPI_333 2018-06-15 12:16:21

对大数据平台技术框架的总结，适合初学者。相对来说都是干货，很好用
相关下载链接：//download.csdn.net/download/woshixiaoerb/10480656?utm_source=bbsseo

...全文

57 回复打赏收藏转发到动态举报

写回复

回复

切换为时间正序

请发表友善的回复…

发表回复

对大数据平台技术框架的总结，适合初学者。相对来说都是干货，很好用

资源包含内容： 1、大数据测试方法 2、大数据测试工具 3、大数据测试质量 4、大数据测试总结 5、接口自动化框架设计思想

目前常见的技术框架，部分列举如下：文件存储：Hadoop HDFS、Tachyon、KFS 离线计算：Hadoop MapReduce、Spark 流式、实时计算：Storm、Spark Streaming、S4、Heron K-V、NOSQL数据库：HBase、Redis、MongoDB 资源管理：YARN、Mesos 日志收集：Flume、Scribe、Logstash、Kibana 消息系统：Kafka、StormMQ、ZeroMQ、RabbitMQ 查询分析：Hive、Impala

Python+大数据技术框架和数仓基础(二)

一、大数据框架： Impala：hadoop的sql平台、支持hbase/hdfs、支持超大数据、支持多并发、sql支持好、对内存依赖比较严重。需要自己优化，并且有的语句超过内存会报错。 Spark：各种格式、各种计算（机器学习、图形计算）、可sql、可代码处理、支持scala/java/python语言开发。提供scala/python代码命令行运行、超大...

下载资源悬赏专区

13,656

社区成员

12,673,480

社区内容

发帖

与我相关

我的任务

其他技术论坛（原bbs）

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章