录入hbase同时写ElasticSearch, 导致慢

changchang97 2017-02-23 05:50:02

我使用thrift2写hbase集群，速度已经调整得比较快了。

后面我搭建ElasticSearch集群用于，提供快速查询与统计。

于是根据以下这位同学的做了：

通过HBase Observer同步数据到ElasticSearch

http://guoze.me/2015/04/23/hbase-observer-sync-elasticsearch/

发现速度慢了10来倍

如何优化，如果是有其他方式不？

...全文

1003 2 打赏收藏转发到动态举报

写回复

2 条回复

切换为时间正序

请发表友善的回复…

发表回复

changchang97 2017-02-24

打赏
举报

回复

自己顶下，有谁知道的吗

HBase的原型是Google的BigTable论文，受到了该论文思想的启发，目前作为Hadoop的子项目来开发维护，用于支持结构化的数据存储.HBase是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBASE技术可在廉价...

HBase作为Hadoop DataBase，除了使用put进行数据导入之外，还有以下几种导入数据的方式：（1）使用importTsv功能将csv文件导入HBase；（2）使用import功能，将数据导入HBase；（3）使用BulkLoad功能将数据导入...

Hbase、Kudu和ClickHouse横向对比

HBase知识点

请先考虑业务是读比写多、还是读比写少，HBase本身是为写优化的，即便是这样，也可能会出现热点问题，而如果我们读比较多的话，除了考虑以上Rowkey设计原则外，还可以考虑HBase的Coprocessor甚至elastic search结合...

7,388

社区成员

6,742

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章