批量获取豆瓣的书评问题

asdfg48_ 2015-09-04 09:34:18

题目：想通过关联规则做一个图书推荐的算法
数据：各分类下的图书（来源高校图书馆按《中图法》分类检索）
类别册数
A 马列主义、毛邓思想 2425
B 哲学、宗教 3308
C 社会科学总论 16888
.
.
.
Z 综合图书 1579

问题：怎么根据豆瓣提供的 http://api.douban.com/book/subject/isbn/{IDISBN}/reviews
http://api.douban.com/book/subject/isbn/{IDISBN} 获取所有书的评论及书信息，而且现在也不知道上述分类下各个书的ISBN，求助大家

...全文

98 回复打赏收藏转发到动态举报

写回复

回复

切换为时间正序

请发表友善的回复…

发表回复

爬取豆瓣图书TOP250图书信息及图书海报写这篇主要是为了去图书馆不知道看什么书或者不知道该买些什么书的时候可以参考经过众多豆友们点评出的好书推荐，哈哈哈哈哈。上代码（全部代码均在这里，只是分开按照步骤解释一下）第一步：导入需要用到的包。 from bs4 import BeautifulSoup # 网页解析，获取数据 import urllib.request, urllib.error # 指定url，获取网页数据 import re

广告关闭腾讯云双11爆品提前享，精选热门产品助力上云，云服务器首年88元起，买的越多返的越多，最高满返5000元！豆瓣pip源地址 https:pypi.doubanio.com 之前的pypi.douban.com 现已修改为pypi.doubanio.com阿里云pip源地址https:mirrors.aliyun.compypi163 pip源地址https:mirrors.163.comp...

import urllib.request #导入urllib.request包和库 f = urllib.request.urlopen('http://www.baidu.com') #打开网址，返回一个类文件对象 f.read(500) #打印前500字符 print(f.read(500).decode('utf-8')) #打印前500字符，并修改编码为utf-8 import

这是全栈数据工程师养成攻略系列教程的第九期：9 实战爬取豆瓣电影数据。掌握了爬虫的基本原理和代码实现，现在让我们通过实战项目巩固一下。确定目标在写爬虫之前应当想清楚：我需要哪方面的数据？需要包含哪些字段？这些数据需要以何种形式呈现？很多网站往往都是大家爬取的对象，例如提供住房信息的链家网，提供书评和影评信息的豆瓣网，以及提供餐饮生活娱乐信息的大众点评网。当然，这些网站之所以能很容易地被我们爬取，...

简介朋友问我能不能做一个下载他在豆瓣读书上的短评的工具，于是就做了这个“豆瓣用户读书短评下载工具”。 GitHub链接：https://github.com/xiaff/dbc-downloader。这个小工具使用Python3.4编写，其工作流程为：用户输入其豆瓣ID；抓取用户评论列表网页对网页进行解析；存储评论相关信息；将Markdown格式文件转换为...

50,526

社区成员

85,605

社区内容

发帖

与我相关

我的任务

javaspring bootspring cloud 技术论坛（原bbs）

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章