阿里云上有现成的storm集群吗，还是需要自己动手去部署？

winfield821 2016-07-12 10:59:23

rtttttttttttttttttttt

...全文

769 2 打赏收藏转发到动态举报

写回复

2 条回复

切换为时间正序

请发表友善的回复…

发表回复

LinkSe7en 2016-07-12

打赏
举报

回复

引用 1 楼 link0007 的回复:

E-MR目前貌似只有Hadoop spark hbase

刚刚上阿里云看了下，有storm了 E-MapReduce是构建于阿里云ECS弹性虚拟机之上，利用开源大数据生态系统，包括Hadoop、Spark和HBase等，为用户提供集群、作业、数据等管理的一站式大数据处理分析服务。 E-MapReduce发布全新2.0.0版本更多组件新增Presto、Phoenix、Storm、Oozie、ZooKeeper组件！组件升级 Hadoop从2.6.0升级为2.7.2， JDK从1.7.0升级为1.8.0

LinkSe7en 2016-07-12

打赏
举报

回复

E-MR目前貌似只有Hadoop spark hbase

本文演示如何在E-MapReduce上部署Storm集群和Kafka集群，并运行Storm作业消费Kafka数据。环境准备本文选择在杭州Region进行测试，版本选择EMR-3.8.0，本次测试需要的组件版本有： Kafka：2.11_1.0.0 Storm: 1.0.1 本文使用阿里云EMR服务自动化搭建Kafka集群，详细过程请参考创建集群。...

0. 序言本文演示如何在E-MapReduce上部署Storm集群和Kafka集群，并运行Storm作业消费Kafka数据。 1. 准备环境这里我选择在杭州Region进行测试，版本选择EMR-3.8.0，本次测试需要的组件版本有： Kafka：2.11_1.0.0 Storm: 1.0.1 E-MapReduce的集群管理界面地址：https:...

Kafka是由Apache基金会开发的分布式流处理平台，采用发布-订阅模式，支持高吞吐量、低延迟的数据传输。主要用于处理实时数据管道、数据存储和数据分析等大数据应用场景。Kafka采用高效的数据压缩算法，可以在集群中存储大量的数据，并通过分区机制来实现数据的高可靠性和可扩展性。数据管道：在数据采集和分发过程中构建可扩展的流式数据管道，用于实时数据处理和分析。例如，数据收集、日志聚合、网络追踪、用户活动跟踪等。数据存储。

简介：58 同城的实时 SQL 建设以及如何从 Storm 迁移至 Flink。本文整理自 58 同城实时计算平台负责人冯海涛在 Flink Forward Asia 2020 分享的议题《Flink 在 58 同城应用与实践》，内容包括：实时计算平台架构实时 SQL 建设 Storm 迁移 Flink 实践一站式实时计算平台后续规划一、实时计算平台架构实时计算平台的定位是为 58 集团海量数据提供高效、稳定的实时计算一站式服务。一站式服务主要分为三个方向：第一个方向.

如今，随着诸如互联网以及物联网等技术的不断发展，越来越多的数据被生产出来-据统计，每天大约有超过2.5亿亿字节的各种各样数据产生。这些数据需要被存储起来并且能够被方便的分析和利用。随着大数据技术的不断更新和迭代，数据管理工具得到了飞速的发展，相关概念如雨后春笋一般应运而生，如从最初决策支持系统(DSS)到商业智能(BI)、数据仓库、数据湖、数据中台等，这些概念特别容易混淆，本文对这些名词术语及内涵进行系统的解析，便于读者对数据平台相关的概念有全面的认识。前言随着大数据技术的不断更新和迭代，数据管

Hadoop生态社区

20,848

社区成员

4,696

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章