用nutch爬网页时，报store.HBaseStore - Mismatching schema's names，是什么原因？

Helen1978 2016-07-29 09:50:42

WARN store.HBaseStore - Mismatching schema's names. Mappingfile schema: 'webpage'. PersistentClass schema's name: 'chbNutchSpider_webpage'Assuming they are the same
用nutch爬网页时，报上面的错，是什么原因？

...全文

884 3 打赏收藏转发到动态举报

写回复

用AI写文章

3 条回复

切换为时间正序

请发表友善的回复…

发表回复

码上笔记 2017-11-14

打赏
举报

问题解决了吗？遇到同样的问题，环境一样

FeelTouch Labs 2016-07-30

打赏
举报

webpage' chbNutchSpider_webpage 看程序，另外进MySQL不需要走hive吗

Helen1978 2016-07-29

打赏
举报

我的是nutch2.3.1 + hbase0.98.8 + hadoop2.5.2，如果改为用mysql，则报下面的错误： Caused by: java.lang.ClassNotFoundException: org.apache.avro.ipc.ByteBufferOutputStream

nutch不用安装,是个应用程序,下载后为nutch-1.6.tar.gz,双击桌面上的cygwin快捷方式;执行以下命令: $ cd D:/Downloads/Soft $ tar zxvf nutch-1.0.tar.gz 在e盘下面出现nutch-0.9文件夹说明解压成功了.然后环境变量设置为NUTCH_JAVA_HOME=C:\Program Files\Java\jdk1.5.0(也就是说跟JAVA_HOME是相同的).测试nutch是否安装成功,只需要执行以下命令: $cd D:/Downloads/Soft/nutch-1.0/bin $sh nutch

其中内容均为前段时间研究开源搜索引擎时搜集参考的资料，非常齐全包含的内容有： Computing PageRank Using Hadoop.ppt Google的秘密PageRank彻底解说中文版.doc JAVA_Lucene_in_Action教程完整版.doc Java开源搜索引擎.doc Linux下Nutch分布式配置和使用.pdf Lucene+Nutch源码.rar Lucene学习笔记.doc nutch_tutorial.pdf nutch二次开发总结.txt nutch入门.pdf nutch入门学习.pdf Nutch全文搜索学习笔记.doc Yahoo的Hadoop教程.doc [硕士论文]_基于Lucene的Web搜索引擎实现.pdf [硕士论文]_基于MapReduce的分布式智能搜索引擎框架研究.pdf [硕士论文]_基于Nutch的垂直搜索引擎的分析与实现.pdf 一个例子学懂搜索引擎(lucene).doc 中文搜索引擎技术揭密.doc 九大开源搜索引擎介绍.txt 基于Nutch的搜索引擎技术.pdf 基于开源工具搭建小型搜索引擎.pdf 整合开源工具的小型搜索引擎构建.pdf 用_Hadoop_进行分布式并行编程.doc

Hadoop API帮助文档，学习Nutch和Hadoop必备

详情参见：http://nutch.apache.org/apidocs-1.5/org/apache/nutch/crawl/CrawlDatum.html

1 引言 1.1 爬虫的基本分类爬虫基本可以分3类：分布式爬虫：Nutch JAVA单机爬虫：Crawler4j、WebMagic、WebCollector 非JAVA单机爬虫：Scrapy 1.2 Nutch简介 Nutch是apache旗下的一个用Java实现的开源索引引擎项目，通过nutch，诞生了hadoop、tika、gora。Nutch的设计初衷主要是为了解决下述两个问题： ...

Hadoop生态社区

20,808

社区成员

4,690

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章