使用mapreduce 往hbase 里面写入内容

zc888168 2013-07-26 05:02:23

java.io.IOException: Pass a Delete or a Put
at org.apache.hadoop.hbase.mapreduce.TableOutputFormat$TableRecordWriter.write(TableOutputFormat.java:123)
at org.apache.hadoop.hbase.mapreduce.TableOutputFormat$TableRecordWriter.write(TableOutputFormat.java:82)
at org.apache.hadoop.mapred.ReduceTask$NewTrackingRecordWriter.write(ReduceTask.java:508)
at org.apache.hadoop.mapreduce.TaskInputOutputContext.write(TaskInputOutputContext.java:80)
at org.apache.hadoop.mapreduce.Reducer.reduce(Reducer.java:156)
at org.apache.hadoop.mapreduce.Reducer.run(Reducer.java:176)
at org.apache.hadoop.mapred.ReduceTask.runNewReducer(ReduceTask.java:566)
at org.apache.hadoop.mapred.ReduceTask.run(ReduceTask.java:408)
at org.apache.hadoop.mapred.Child.main(Child.java:170)

...全文

234 1 打赏收藏转发到动态举报

写回复

1 条回复

切换为时间正序

请发表友善的回复…

发表回复

zc888168 2013-07-26

打赏
举报

回复

加上@Override

该案例中主要使用MapReduce作为处理组件进行数据处理，实现的案例有如通过javaapi实现hbase数据写入hdfs、hbase表数据复制到另一个表中等操作对应（《HBase分布式存储系统应用》胡鑫喆张志刚著）教材中案例

hbase的mapreduce，是Hbase权威指南上面的例子，例7.1： MapReduce作业从一个文件中读取数据并写入Hbase表

通过学习hbase，掌握hbase的体系结构，集群安装，使用hbase shell访问hbase中的数据，使用hbase Java访问hbase，使用mapreduce把数据从HDFS中导入到hbase中，掌握过滤器等工具。

hbase批量加载从RCFile进行HBase批量加载的临时代码这将使用LoadIncrementalFiles从HFileOutputFormat2中Mapreduce写入的数据中加载HBase表。

java mapreduce 读hbase数据写入hdfs 含maven依赖

Hadoop生态社区

20,810

社区成员

4,691

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章