如何把百科（维基百度互动）条目的标题给抓下来…（有大概思路即可）

liamzhao 2011-05-31 12:39:27

如题。想弄一个词库想了很久觉得可以按照各百科的条目标题来弄…
但是却不知道该怎么抓以前听说过什么网络爬虫现在根本不知道该怎么弄…

请各位大大赐教~谢谢~

...全文

84 回复打赏收藏转发到动态举报

写回复

回复

切换为时间正序

请发表友善的回复…

发表回复

本文介绍如何使用Python的urllib和xpath库从百度百科和维基百科抓取词条解释，包括代码实现和效果演示。

本文介绍如何使用Python的urllib和lxml库爬取百度百科和维基百科的内容。当用户输入词语时，程序通过xpath匹配页面元素，获取解释并展示。示例代码展示了请求设置、响应处理及数据过滤的全过程。

本文通过实例演示如何使用Selenium技术爬取维基百科、百度百科和头条百科的数据，涵盖URL地址、消息盒和摘要信息的抓取方法。

博客介绍了爬取百度百科和维基百科的方法。百度百科是静态网页，请求参数可放 URL 里，给出对应示例及代码；考虑到用户查询英文词条，还介绍了爬取维基百科的思路，即处理请求地址和返回结果，也给出代码，强调代码仅用于学习交流。

其它技术问题

3,881

社区成员

9,044

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章