python爬虫求助

m_keke 2019-11-09 08:12:35
http://61.163.88.227:8006/hwsq.aspx

想按日期提取出表格中的数据信息,将表格中的数据保存在excel之中,求各位大佬代码
...全文
123 11 打赏 收藏 转发到动态 举报
写回复
用AI写文章
11 条回复
切换为时间正序
请发表友善的回复…
发表回复
dabingsou 2019-11-11
  • 打赏
  • 举报
回复
还有一个办法你试试,先用get获取这个页面,取到其中的参数,然后再post不同日期,获取历史数据
dabingsou 2019-11-11
  • 打赏
  • 举报
回复
这个是asp.net开发的网站,有个postback策略,用viewstate实现的,不太好破解。取历史数据,最简单的办法是用渲染的方式采集,用js模拟鼠标点击。
jmzl 2019-11-10
  • 打赏
  • 举报
回复
引用 4 楼 m_keke的回复:
[quote=引用 3 楼 jmzl的回复:][quote=引用 2 楼 m_keke的回复:]从2000年开始到现在吧,我参照网上写了一个表格太多了,全是重复信息
网站的数据你们爬下来吗?如果能爬下来我帮你写保存Excel的代码[/quote] 能爬下来,但是只能爬今天的,实现不了爬一段时间的,转到excel中,我也会弄,主要就是这个自动的日期选择难搞[/quote] 当天的根本不用爬,直接获取关键那个Ajax的你用软件获取协议看看提交了什么数据,提交的获取的网址是一个php网页,但是不知道它提交了什么格式的数据,我手机看不到协议
  • 打赏
  • 举报
回复
根据他给的信息,只能按天来爬
m_keke 2019-11-10
  • 打赏
  • 举报
回复
引用 3 楼 jmzl的回复:
[quote=引用 2 楼 m_keke的回复:]从2000年开始到现在吧,我参照网上写了一个表格太多了,全是重复信息
网站的数据你们爬下来吗?如果能爬下来我帮你写保存Excel的代码[/quote] 能爬下来,但是只能爬今天的,实现不了爬一段时间的,转到excel中,我也会弄,主要就是这个自动的日期选择难搞
jmzl 2019-11-10
  • 打赏
  • 举报
回复
引用 2 楼 m_keke的回复:
从2000年开始到现在吧,我参照网上写了一个表格太多了,全是重复信息
网站的数据你们爬下来吗?如果能爬下来我帮你写保存Excel的代码
m_keke 2019-11-10
  • 打赏
  • 举报
回复
从2000年开始到现在吧,我参照网上写了一个表格太多了,全是重复信息
jmzl 2019-11-10
  • 打赏
  • 举报
回复
引用 8 楼 m_keke的回复:
[quote=引用 6 楼 jmzl的回复:][quote=引用 4 楼 m_keke的回复:][quote=引用 3 楼 jmzl的回复:][quote=引用 2 楼 m_keke的回复:]从2000年开始到现在吧,我参照网上写了一个表格太多了,全是重复信息
网站的数据你们爬下来吗?如果能爬下来我帮你写保存Excel的代码[/quote] 能爬下来,但是只能爬今天的,实现不了爬一段时间的,转到excel中,我也会弄,主要就是这个自动的日期选择难搞[/quote] 当天的根本不用爬,直接获取关键那个Ajax的你用软件获取协议看看提交了什么数据,提交的获取的网址是一个php网页,但是不知道它提交了什么格式的数据,我手机看不到协议[/quote] 具体的提交协议我也不清楚是啥[/quote] Ajax的函数在menu.js最后一个函数就是提交申请的
m_keke 2019-11-10
  • 打赏
  • 举报
回复
引用 6 楼 jmzl的回复:
[quote=引用 4 楼 m_keke的回复:][quote=引用 3 楼 jmzl的回复:][quote=引用 2 楼 m_keke的回复:]从2000年开始到现在吧,我参照网上写了一个表格太多了,全是重复信息
网站的数据你们爬下来吗?如果能爬下来我帮你写保存Excel的代码[/quote] 能爬下来,但是只能爬今天的,实现不了爬一段时间的,转到excel中,我也会弄,主要就是这个自动的日期选择难搞[/quote] 当天的根本不用爬,直接获取关键那个Ajax的你用软件获取协议看看提交了什么数据,提交的获取的网址是一个php网页,但是不知道它提交了什么格式的数据,我手机看不到协议[/quote] 具体的提交协议我也不清楚是啥
m_keke 2019-11-10
  • 打赏
  • 举报
回复
引用 6 楼 jmzl的回复:
[quote=引用 4 楼 m_keke的回复:][quote=引用 3 楼 jmzl的回复:][quote=引用 2 楼 m_keke的回复:]从2000年开始到现在吧,我参照网上写了一个表格太多了,全是重复信息
网站的数据你们爬下来吗?如果能爬下来我帮你写保存Excel的代码[/quote] 能爬下来,但是只能爬今天的,实现不了爬一段时间的,转到excel中,我也会弄,主要就是这个自动的日期选择难搞[/quote] 当天的根本不用爬,直接获取关键那个Ajax的你用软件获取协议看看提交了什么数据,提交的获取的网址是一个php网页,但是不知道它提交了什么格式的数据,我手机看不到协议[/quote] 我点完查询按钮之后网站的网址没有发生变化,只有表格里面的数据发生变化啦,那些数据应该是存在后台的,然后每次点查询都会从后台下载一下
  • 打赏
  • 举报
回复
你要几号到几号的

37,720

社区成员

发帖
与我相关
我的任务
社区描述
JavaScript,VBScript,AngleScript,ActionScript,Shell,Perl,Ruby,Lua,Tcl,Scala,MaxScript 等脚本语言交流。
社区管理员
  • 脚本语言(Perl/Python)社区
  • IT.BOB
加入社区
  • 近7日
  • 近30日
  • 至今

试试用AI创作助手写篇文章吧