社区
Hadoop生态社区
帖子详情
hbase那种表设计方式比较好
狂热的土豆
2015-08-04 09:07:20
hbase做查询,需要按照多个维度进行查询,因为hbase只有rowkey索引,不走rowkey都是全表扫描,为了保证查询速度,是将这些维度拼接作为rowkey还是分多个列族比较好?
...全文
416
4
打赏
收藏
hbase那种表设计方式比较好
hbase做查询,需要按照多个维度进行查询,因为hbase只有rowkey索引,不走rowkey都是全表扫描,为了保证查询速度,是将这些维度拼接作为rowkey还是分多个列族比较好?
复制链接
扫一扫
分享
举报
写回复
配置赞助广告
用AI写文章
4 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
sunandmoxi
2015-09-09
打赏
举报
回复
建立二级索引是最好的办法,可以采用协处理器或者Solr都可以
andyan_2008
2015-08-08
打赏
举报
回复
多列族对于查询没有帮助,可以建立二级索引,或者像楼上说的部分索引保存在其他数据库
atjl
2015-08-06
打赏
举报
回复
建议先按维度分类,时间类的可以用timestamp,主键类的放rowkey,其他条件查询在有rowkey的情况下可以查询出来再过滤,没rowkey条件的在关系数据库里存条件到rowkey的映射,查出rowkey再查hbase
夜无边CN
2015-08-05
打赏
举报
回复
首先多个列簇肯定是不好的。 如果你的“多个维度”如果拼接作为rowkey可以解决问题,可以拼接。 还有可以用solr就更灵活了,但也要多维护一个组件。
大数据处理中
HBase
的
表
设计
最佳实践
对
表
设计
极度敏感。如果把
HBase
比作一个超级仓库,
表
设计
就是仓库的"货架布局图"——布局合理,工人(查询请求)能快速找到货物(数据);布局混乱,即使仓库再大,找东西也像大海捞针。用通俗易懂的语言,带读者从0到1掌握
HBase
表
设计
的核心原则和最佳实践,包括RowKey
设计
、列族划分、Region分区、版本控制等关键环节,同时规避热点写入/查询、数据倾斜等经典问题。
走向云计算之
HBase
模式
设计
及
表
设计
案例
一、概述
HBase
有以下几个特点:
HBase
列的可以动态增加,并且列为空就不存储数据,节省存储空间.
hbase
自动切分数据,使得数据存储自动具有水平scalability.
Hbase
可以提供高并发读写操作的支持。
HBase
不能支持条件查询,只支持按照Row key来查询. 暂时不能支持Master server的故障切换,当Master宕机后,整个存储系统就会挂掉. 因为HBa
HBase
与MapReduce整合及
HBase
表
设计
深度解析
输入格式Table,输出格式Table。Scan巧配置,Filter减负担。Map清洗,Reduce聚合,结果写回
表
。
Hbase
实战处理(一)关于
hbase
的
表
设计
和集成
hbase
集群的HA配置(假如有3台机器(同时是regionserver角色),master、slaver1、slaver2)stop-
hbase
.sh cd /home/hadoop-twq/bigdata/
hbase
-1.2.6/conf vi backup-masters 在master机器上文件增加如下的记录:slave1 ---backup master的节点ip---把backup的信息同步给其余的slave。jps验证访问: http://slave1:16010。
【
Hbase
学习之四】
Hbase
表
设计
案例
环境 虚拟机:VMware 10 Linux版本:CentOS-6.5-x86_64 客户端:Xshell4 FTP:Xftp4 jdk8 hadoop-2.6.5
hbase
-0.98.12.1-hadoop2
HBase
中
表
的
设计
主要是将原来的关系解开 问题: 例子:
表
设计
一:
表
设计
二: 这是一个双向查询,根据人员查角色,根据角...
Hadoop生态社区
20,842
社区成员
4,695
社区内容
发帖
与我相关
我的任务
Hadoop生态社区
Hadoop生态大数据交流社区,致力于有Hadoop,hive,Spark,Hbase,Flink,ClickHouse,Kafka,数据仓库,大数据集群运维技术分享和交流等。致力于收集优质的博客
复制链接
扫一扫
分享
社区描述
Hadoop生态大数据交流社区,致力于有Hadoop,hive,Spark,Hbase,Flink,ClickHouse,Kafka,数据仓库,大数据集群运维技术分享和交流等。致力于收集优质的博客
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章