Lily Hbase Indexer 结合 solr实现Hbase的二级索引

矛始 2015-12-17 03:44:59

环境：CDH5.4
描述：使用CDH 的 key-value store index 服务实现 Hbase的二级索引，当在hbase put 数据后索引数据没有立即保存到solr里，而当solr服务重启后，之前在hbase添加的数据的索引数据才保存到solr里，有没有大神指导一下。。

...全文

513 2 打赏收藏转发到动态举报

写回复

2 条回复

切换为时间正序

请发表友善的回复…

发表回复

矛始 2017-06-02

打赏
举报

回复

已解决，是因为Hbase Indexer内存给得太少导致经常自动退出

mooscow 2017-05-24

打赏
举报

回复

这么就都没人回答， 1、打开你的 solrhome/cores/conf/solrconfig.xml ，根据实际目录输入。 2、 <autoCommit> <maxTime>${solr.autoCommit.maxTime:15000}</maxTime> <openSearcher>false</openSearcher> </autoCommit> <autoSoftCommit> <maxTime>${solr.autoSoftCommit.maxTime:5000}</maxTime> </autoSoftCommit>

Lily HBase Indexer 使用 SolrCloud 来存储 HBase 的索引数据，当 HBase 执行写入、更新或删除操作时，Indexer 通过 HBase 的 replication 功能来把这些操作抽象成一系列的 Event 事件，并用来保证写入 Solr 中的 ...

hbase-indexer, 便于通过solr将hbase中的数据变动建立索引

1.HBase基础概念与数据模型 2.HBase的系统架构 3.HBase的安装与配置 4.HBase Shell 5.HBase的Java编程接口 6.HBase协处理器原理 7.HBase 二级索引 8.HBase Bulkload等高级特性 9.HBase与Hive协同工作 10.HBase ...

hbase indexer是负责将hbase的数据自动同步到solr中建立索引，不需要写代码将hbase的数据同步到solr中创建索引。尽少开发工作，和减少在在并发环境下手工创建索引可能带来性能问题。

3.构建二级索引 3.1创建测试表 3.1.1创建测试表（phoenix） drop table “ZJS_ORDER”.”ALADIN_WAYBILLSTATUS”; CREATE TABLE “ZJS_ORDER”.”ALADIN_WAYBILLSTATUS” ( ydh varchar NOT NULL PRIMARY KEY, ...

Hadoop生态社区

20,809

社区成员

4,691

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章