社区
脚本语言
帖子详情
Python提交query string后得不到正确的响应网页
elmliu
2018-03-11 06:50:30
用的requests.Session() 我想用爬虫查询飞猪上的特价机票价格,就算直接复制浏览器中有查询结果的url,用get()提交,得到的响应网页总是显示没有查询结果。加上了headers也是这样
比如这个url:
http://url: https://sjipiao.alitrip.com/cheap_flight_search.htm?tripType=0&depCityName=%C7%E0%B5%BA&depCity=TAO&arrCityName=%C4%CF%BE%A9&arrCity=NKG&depDate=2018-04-04&range=2&searchGapDay=3
...全文
403
2
打赏
收藏
Python提交query string后得不到正确的响应网页
用的requests.Session() 我想用爬虫查询飞猪上的特价机票价格,就算直接复制浏览器中有查询结果的url,用get()提交,得到的响应网页总是显示没有查询结果。加上了headers也是这样 比如这个url: http://url: https://sjipiao.alitrip.com/cheap_flight_search.htm?tripType=0&depCityName=%C7%E0%B5%BA&depCity=TAO&arrCityName=%C4%CF%BE%A9&arr
复制链接
扫一扫
分享
转发到动态
举报
AI
作业
写回复
配置赞助广告
用AI写文章
2 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
elmliu
2018-03-11
打赏
举报
回复
问题解决了,是因为网页加载未完成,用selenium等待一下就OK了
DarkChampion
2018-03-11
打赏
举报
回复
说明url不对呗。 http://blog.csdn.net/VVBBBBB/article/details/52062694
Python
字符串格式化(三): t-
string
前瞻(
Python
3.14 新特性)
从早期的 `%` 运算符,到后来的 `
string
.format()` 方法,再到
Python
3.6 引入的备受欢迎的 f-
string
,每一次变化都为开发者带来了更便捷的编程体验。而在即将发布的
Python
3.14 中,t-
string
(模板字符串)的引入...
Python
爬虫入门详解
Python
爬虫入门前言前置知识要求(您需要对下面的内容有一定了解才能方便您看懂本文)锦上添花的知识需求(如果还了解一下内容会对您理解底层代码有所帮助)新的改变功能快捷键合理的创建标题,有助于目录的生成如何改变...
python
爬虫——针对
query
爬取百度百科页面
text = i.get_text()#这里,用get_text()就能够提取正文,弄得卤煮很久,本来觉得可以用xpath里面的
string
(.)或者/text(),结果用不上。 text = text.replace("\n","")#包含太多换行,去掉 if text: texts....
python
爬虫学习笔记-requests基础
什么是爬虫就是编写程序...抓取:抓取
网页
数据分两种情况:将一个页面所有的数据抓取到将页面中局部的数据抓取到爬虫在应用场景的分类通用爬虫:将一个页面中所有的数据获取。大部分的搜索引擎中应用比较多。聚焦爬虫。
「
Python
系列」
Python
urllib库(操作
网页
URL对
网页
的内容进行抓取处理)
是
Python
标准库中的一个模块,它提供了用于解析 URL 的各种功能。你可以根据异常的类型执行不同的操作,如记录错误、重试请求或向用户显示友好的错误消息。来打开或读取 URL 时,可能会遇到各种错误,例如网络问题...
脚本语言
37,743
社区成员
34,212
社区内容
发帖
与我相关
我的任务
脚本语言
JavaScript,VBScript,AngleScript,ActionScript,Shell,Perl,Ruby,Lua,Tcl,Scala,MaxScript 等脚本语言交流。
复制链接
扫一扫
分享
社区描述
JavaScript,VBScript,AngleScript,ActionScript,Shell,Perl,Ruby,Lua,Tcl,Scala,MaxScript 等脚本语言交流。
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
试试用AI创作助手写篇文章吧
+ 用AI写文章