关于solr和hbase集群搭建的问题

m0_37799980 2019-08-28 01:52:53

由于项目要求搭建一个30个节点的solr+hbase的联机查询集群，奈何鄙人只懂一些皮毛，不知道群集如何分配才合理，就是说solr和hbase、zookeeper这些分别分配多少个节点比较合理，为什么。希望大佬们能帮我解答一下。。。

...全文

25 回复打赏收藏转发到动态举报

写回复

回复

切换为时间正序

请发表友善的回复…

发表回复

文档描述了自己使用hbase和solr搭建的简单搜索功能！

集群搭建（zookeeper集群+solr集群）整个步骤本人亲身实践过，如果自身电脑配置高，可以尝试模拟真实服务器进行搭建；

SolrCloud(solr 云)是Solr提供的分布式搜索方案，当你需要大规模，容错，分布式索引和检索能力时使用 SolrCloud。当一个系统的索引数据量少的时候是不需要使用SolrCloud的，当索引量很大，搜索请求并发很高，这时需要使用SolrCloud来满足这些需求。 SolrCloud是基于Solr和Zookeeper的分布式搜索方案，它的主要思想是使用Zookeeper作为集群的配置信息中心。它有几个特色功能： 1）集中式的配置信息 2）自动容错 3）近实时搜索 4）查询时自动负载均衡 zookeeper是个什么玩意？顾名思义zookeeper就是动物园管理员，他是用来管hadoop（大象）、Hive(蜜蜂)、pig(小猪)的管理员， Apache Hbase和 Apache Solr 的分布式集群都用到了zookeeper；Zookeeper:是一个分布式的、开源的程序协调服务，是hadoop项目下的一个子项目。

当数据量达到TB或PB级的时候，传统关系型数据型已力不从心。在大数据热潮中，推出了NoSQL数据库，这种天生就为分布式存储而设计的技术，尤其以Apache HBase为代表，占领海量数据存储技术的大半壁江山。本教视从实战角度出来，向学员们手把手掌握HBase使用精髓，让学员达到如下目标： 1. 了解分布式存储的原理及架构。 2. 掌握如何使用HBase实现海量数据存储与检索。 3. 掌握HBase在开发中常见的技术大坑与调优技术。课时1：HBase简介与部署课时2：HBase架构与索引算法剖析课时3：HBase建库建表与CRUD实战课时4：基于HBase Client API的CRUD实战课时5：批处理与扫描器实战课时6：使用Ganglia监控HBase 课时7：过滤器实战之比较过滤器课时8：过滤器实战之专用过滤器与FilterList 课时9：过滤器实战之自定义过滤器课时10：Observer协处理器实战之Master级别原理剖析课时11：Observer协处理器实战之Region级别原理剖析课时12：Observer协处理器实战之表复制应用实战课时13：Endpoint协处理器实战之原理剖析课时14：Endpoint协处理器实战之数据统计应用实战课时15：使用API管理HBase之核心理论课时16：使用API管理HBase之编程实战课时17：使用API管理HBase之编程实战(续) 课时18：搭建分布式HBase集群之Hadoop部署课时19：搭建分布式HBase集群之HBase部署课时20：sqoop2部署课时21：使用sqoop2将mysql数据导入到HBase 课时22：集群管理之节点管理与数据任务课时23：Rowkey设计与集群常见故障处理课时24：集群调优经验分享课时25：项目介绍与Solr环境搭建课时26：数据层设计与中文分词器配置课时27：Spring集成HBase之核心操作课时28：Spring集成HBase之核心操作(续) 课时29：基于dom4j进行数据文件解析课时30：数据层设计与实现之二级索引开发课时31：数据层设计与实现之二级索引开发(续) 课时32：Spring集成Solrj之入门操作课时33：Spring集成Solrj之高级操作课时34：高亮查询功能开发之一课时35：高亮查询功能开发之二课时36：课程总结

SolrCloud集群搭建和使用步骤

Hadoop生态社区

20,848

社区成员

4,696

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章