scrapy问题

oSYLVAN 2014-10-13 03:02:45
用scrapy怎么下载网页源代码,所有网页?
...全文
82 3 打赏 收藏 转发到动态 举报
写回复
用AI写文章
3 条回复
切换为时间正序
请发表友善的回复…
发表回复
The_Third_Wave 2014-10-13
  • 打赏
  • 举报
回复
引用 2 楼 oSYLVAN 的回复:
[quote=引用 1 楼 u013171165 的回复:] 建议先去看看demo吧。。。看完了再说其他。
那个我看了,我想问的是下载网页源代码只能用response.body,这只能下载一个,不能把爬取的网站的源代码全部下载下来。[/quote]理论上可以,我没见过,问题是你要的到底什么样的?
oSYLVAN 2014-10-13
  • 打赏
  • 举报
回复
引用 1 楼 u013171165 的回复:
建议先去看看demo吧。。。看完了再说其他。
那个我看了,我想问的是下载网页源代码只能用response.body,这只能下载一个,不能把爬取的网站的源代码全部下载下来。
The_Third_Wave 2014-10-13
  • 打赏
  • 举报
回复
建议先去看看demo吧。。。看完了再说其他。

37,719

社区成员

发帖
与我相关
我的任务
社区描述
JavaScript,VBScript,AngleScript,ActionScript,Shell,Perl,Ruby,Lua,Tcl,Scala,MaxScript 等脚本语言交流。
社区管理员
  • 脚本语言(Perl/Python)社区
  • IT.BOB
加入社区
  • 近7日
  • 近30日
  • 至今

试试用AI创作助手写篇文章吧