hbase怎么存储非结构化数据？

ld5128702 2014-12-15 02:58:12

结构化数据已经知道是怎么在hbase上存储了。那么，我想问一下，像图片，视频等非结构化数据是怎么在hbase上存储的。我百度了一下，没找到什么例子，资料。hbase不是非结构化数据的存储吗？可为什么基本没资料呢？有一点资料也是说hbase存储图片等有缺陷。那么，生产环境中是怎么存储这些非结构化数据的呢？求例子啊。求大神指点

...全文

3542 6 打赏收藏转发到动态举报

写回复

用AI写文章

6 条回复

切换为时间正序

请发表友善的回复…

发表回复

cakafuni 2016-07-24

打赏
举报

深入浅出Hadoop实战开发(升级版) http://pan.baidu.com/s/1dEVLSOx 密码：lh17

ld5128702 2014-12-19

打赏
举报

我知道存入二进制是一样的，我看网上的资料，对于图片这种二进制数据，频繁的split和compaction会导致系能的下降等等问题。还有就是将图片存在hdfs上，hbase存储相关的结构化数据信息。但是又会产生大量小文件。现在对于hbase存储图片等数据，以及hdfs的小文件有没有完美的解决方案呢？

少主无翼 2014-12-15

打赏
举报

是呀，对于hbase来说，什么结构化非结构化都一样，反正是以二进制保存的，存进去什么样，hbase保证你读出来什么样，至于你怎么使用读出来的数据就是你自己的事了，按逗号分隔也好，按冒号分隔也好，自己觉得

yinzhaohui 2014-12-15

打赏
举报

直接使用二进制的方式存入就可以了

skyWalker_ONLY 2014-12-15

打赏
举报

楼主对于非结构化数据的理解有点问题，非结构化数据不是指的图片或者视频之类的，而是文件中的内容是没有固定格式的，比如一行有8个字段，之间用逗号分隔，而另一行有6个字段，用空格分隔等。图片如果存储在hadoop中的话，由于图片太小会导致NameNode是元数据过多，如果想在hbase中存储图片或者视屏的话，可以存储二者的hdfs路径，取到后再获取文件