有没有会爬虫的大神啊求救

lekeli 2017-11-27 05:35:57

我这边要获取一个需要登录的网站，才能在相关模块提交表单参数查询数据并且爬取进数据库，现在模拟登录成了大问题怎么弄都没有用求大神指出一条活路

...全文

159 2 打赏收藏举报

写回复

2 条回复

切换为时间正序

请发表友善的回复…

发表回复

lekeli 2017-12-05

打赏
举报

回复

已解决了有没有模拟登录有验证码的网站的代码

瓶盖muir 2017-11-27

打赏
举报

回复

具体点啊占点图上来

本毕设需要完成基于微信小程序的应急求救信息发布系统设计与实现，灵活运用软件工程、数据结构、编程语言等知识。通过本毕设，让学生掌握软件系统的开发过程，实践需求分析、功能设计、代码开发等内容，并熟练掌握至少一种开发语言。本毕设预期需要产出一个基于微信小程序的应急求救信息发布系统，可演示，工作量适中。

d:\Python\ajk>scrapy crawl fangjia2017-06-08 20:17:26 [scrapy] INFO: Scrapy 1.0.3 started (bot: ajk)2017-06-08 20:17:26 [scrapy] INFO: Optional features available: ssl, http112017-06-08 20:17:26 [s...

path =r'D:\python爬虫\小说\ 'lxml的版本是最新的4.9.1版本。#设置保存小说的路径。#获取小说内容并保存。

这里写自定义目录标题网络爬虫代码开始调试后如图：网络爬虫代码 # 编写第一个网络爬虫 from urllib3 import * from re import * http = PoolManager() disable_warnings() def download(url): result = http.request('GET', url) htmlStr = result.data.decode('utf-8') return htmlStr def analyse(ht

【新手求救】scrapy：根据xpath爬取爬虫获取的结果为空python新手最近在学习scrapy爬取网站，就先找一个网站爬取一些东西爬取网站为：http://www.acfun.tv/a/ac2643312我想爬取的内容为评论，就爬取评论作者reviewer 和评论内容content可是我print sites的内容发现为空 []sites = sel.xpath('//div[@id=...

67,535

社区成员

225,843

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章