HBase一条记录存储数据的总空间有限制么？

wangjiamin 2014-02-14 02:00:25

例如，我如果用HBase存储小文件，但大小也不太一定，能超过64K大小限制么？

...全文

1053 2 打赏收藏转发到动态举报

写回复

2 条回复

切换为时间正序

请发表友善的回复…

发表回复

撸大湿 2014-02-14

打赏
举报

回复

没问题阿超过64K，就用2个Hblock存，超过128K就用3个，以此类推 HBASE表可以很宽，几百万个HBlock都没问题在很多应用中，Hbase存取文件比HDFS给力很多

这是HBase入门系列的第1篇文章，介绍HBase的数据模型、适用场景、集群关键角色、建表流程以及所涉及的HBase基础概念，本文内容基于HBase 2.0 beta2版本。本文既适用于HBase新手，也适用于已有一定经验的HBase开发人员。一些常见的HBase新手问题什么样的数据适合用HBase来存储？既然HBase也是一个数据库，能否用它将现有系统中昂贵的Oracle替换掉？存放于HBase...

摘要：HBase数据库的分布式列式存储解析 HBase作为Apache Hadoop生态中的分布式列式数据库，以其卓越的海量数据处理能力解决了传统关系型数据库的扩展瓶颈。本文深入剖析了HBase的核心架构与数据模型：分布式架构：基于HDFS构建的三组件架构（HMaster、RegionServer、Zookeeper）实现高可用与线性扩展，通过客户端连接示例展示服务发现机制列式存储模型：采用行键+列族的多维存储结构，支持稀疏数据存储和单元格多版本控制，以用户行为分析案例演示数据操作逻辑实践价值：通过倒

Hbase的列族式存储列族就是多个数据列的组合，列族式可以说是表的schema的一部分，而列不是。Hbase可以说是列簇数据库，在创建表的时候要指定列族，而不需要指定具体的列。 Hbase Table组成：Table = rowkey + family + column + timestamp + value 数据存储模式：(Table, rowkey , family , column , timestamp) -> Value Hbase数据存储原型 HBase 是一个稀疏的、分布式、

同hdfs的edits日志文件一样，每个regionserver中都存在一个HLog文件，这个文件主要是hbase的操作日志文件，这个文件内的数据会记录的操作，防止集群损坏后恢复用的。我们知道hbase的一个表为了多个机器并行进行管理和查询，将数据按照行进行拆分为多个region部分，多个region的数据会分散到不同的regionserver中进行管理，这个表全部都是元数据信息，但是这个表也会存在很多region信息，我们应该去那个region中查询meta表的数据呢，这个时候。

全网最详细的大数据HBase文章系列，强烈建议收藏加关注！新文章都已经列出历史文章目录，帮助大家回顾前面的知识重点。目录系列历史文章 HBase读取和存储数据的流程一、HBase读取数据的流程二、HBase存储数据的流程客户端的同步流程: 异步服务器端执行过程: 系列历史文章 2021年大数据HBase（十一）：Apache Phoenix的视图操作 2021年大数据HBase（十）：Apache Phoenix的基本入门操作 2021年大数据HBase（九）：Ap..

Hadoop生态社区

20,843

社区成员

4,695

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章