20,842
社区成员
发帖
与我相关
我的任务
分享hbase怎么存储非结构化数据？
结构化数据已经知道是怎么在hbase上存储了。那么，我想问一下，像图片，视频等非结构化数据是怎么在hbase上存储的。我百度了一下，没找到什么例子，资料。hbase不是非结构化数据的存储吗？可为什么基本没资料呢？有一点资料也是说hbase存储图片等有缺陷。那么，生产环境中是怎么存储这些非结构化数据的呢？求例子啊。求大神指点
...全文
请发表友善的回复…
发表回复
cakafuni 2016-07-24
- 打赏
- 举报
深入浅出Hadoop实战开发(升级版)
http://pan.baidu.com/s/1dEVLSOx 密码：lh17
ld5128702 2014-12-19
- 打赏
- 举报
我知道存入二进制是一样的，我看网上的资料，对于图片这种二进制数据，频繁的split和compaction会导致系能的下降等等问题。还有就是将图片存在hdfs上，hbase存储相关的结构化数据信息。但是又会产生大量小文件。现在对于hbase存储图片等数据，以及hdfs的小文件有没有完美的解决方案呢？
少主无翼 2014-12-15
- 打赏
- 举报
是呀，对于hbase来说，什么结构化非结构化都一样，反正是以二进制保存的，存进去什么样，hbase保证你读出来什么样，至于你怎么使用读出来的数据就是你自己的事了，按逗号分隔也好，按冒号分隔也好，自己觉得
yinzhaohui 2014-12-15
- 打赏
- 举报
直接使用二进制的方式存入就可以了
skyWalker_ONLY 2014-12-15
- 打赏
- 举报
楼主对于非结构化数据的理解有点问题，非结构化数据不是指的图片或者视频之类的，而是文件中的内容是没有固定格式的，比如一行有8个字段，之间用逗号分隔，而另一行有6个字段，用空格分隔等。图片如果存储在hadoop中的话，由于图片太小会导致NameNode是元数据过多，如果想在hbase中存储图片或者视屏的话，可以存储二者的hdfs路径，取到后再获取文件
