网络爬虫获得的html数据提示我Your browse does not support frame!

Gooides 2014-09-24 11:06:28

网络爬虫模拟请求爬取京东类别页面获得页面内容不是我想要的而返回"Your browse does not support！"，是不是京东的页面架构不许爬虫去爬呢？我爬百度之类的网站没有出现过这种情况..说明我写的爬虫程序没有错误求大神解决啊、、、

获得响应后的页面内容：
<html><frameset> <frame id='top' src="http://10.250.250.1/disable/disable.htm"><noframes> <body>Your browse does not support frame!</body> </noframes> </frameset> </html>

...全文

749 2 打赏收藏转发到动态举报

写回复

2 条回复

切换为时间正序

请发表友善的回复…

发表回复

Gooides 2014-09-28

打赏
举报

回复

引用 1 楼 u012280941 的回复:

你的爬蟲僅僅是請求而已的話，並不會解析html 再針對 frame內的src 去發送請求

我爬百度之类或一些普通的网站有涉及html解析的呵呵这个问题是因为我们公司把访问淘宝京东这类的网站禁用掉了然后访问返回的禁用页面的内容就是我碰到的这个所以就是这个原因。现在解决了。。不过还是谢谢你啦、

XZowie 2014-09-24

打赏
举报

回复

你的爬蟲僅僅是請求而已的話，並不會解析html 再針對 frame內的src 去發送請求

Java爬虫，信息抓取的实现详细完整源码实例打包给大家，需要的可以下载下载学习！！！

scrapy错误之KeyError: 'XXX does not support field: xxx'

scrapy进行爬虫练习时运行run.py文件时报错，如下：将：item = GuaziItem 改为：item = GuaziItem() 即可解决问题。 TypeError: ‘ItemMeta’ object does not support item assignment：类型错误：‘项标签’ 对象不支持项分配报错原因：未找到具体item，load出错，item后面需要加()进...

最近在学习爬虫，遇到一些问题，记录下来以供自己回顾。我想调用requests来爬取网址信息，但是发现f-strings方法用不了，百度之后发现是版本原因，f-string 格式化字符串是python 3.6版本新增的格式化字串的方法，而我刚好是3.5.5版本。 ![在这里插入图片描述](https://img-blog.csdnimg.cn/20191127153457...

最近跟着崔大的爬虫实战书学习到scrapy通用爬虫，按书上的步骤把爬虫程序分解后，运行时会出现ItemMeta错误。参考了其他搜索结果，解决方法很简单，只需要在配置的json文件里，NewItem里加上括号就行即 "item": { "class": "NewsItem()", "loader": "ChinaLoader",.......... ...

10,606

社区成员

29,047

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章