关于urlopen中针对不同网站会报错的问题

you896 2016-01-28 09:23:37

在使用python3.4的时候，针对urlopen，我在打开糗事百科(http://www.qiushibaike.com/hot/)的时候会报错，但是在打开百度(jttp://www.baidu.com)的时候可以正常运行，哪位大神能帮忙看下是啥问题。。

...全文

242 3 打赏收藏转发到动态举报

写回复

3 条回复

切换为时间正序

请发表友善的回复…

发表回复

weixin_45054751 2020-01-30

打赏
举报

回复

我也是不知道怎么解决

平常心DT 2019-04-07

打赏
举报

回复

我也碰到这个问题，例如http://www.baidu.com没有问题，但http://baike.baidu.com就有问题，是什么原因？

you896 2016-01-28

打赏
举报

回复

有没有哪位大哥帮忙给看看。。。

python 升级到 2.7.9 之后引入了一个新特性，当使用urllib.urlopen打开一个 https 链接时，会验证一次 SSL 证书。也就是说我们部署的网站使用了自签名的证书时就会抛出一个错误 [SSL: CERTIFICATE_VERIFY_FAILED] 详细信息可以点击这里查看解决方法如下：第一种方法使用ssl创建未经验证的上下文，在urlopen中传入上下文参数 ...

python中我经常使用urllib2.urlopen函数提取网页源码，但是有些时候这个函数返回的却是：HTTP Error 403: Forbidden，这表明源网站不允许爬虫进行爬取，举例说明： [python] view plain copy print? #!/usr/bin/env python # -*- coding: utf-8 -*- impo

seaborn导入数据集报错 <urlopen error [Errno 11004] getaddrinfo failed> 数据集链接超时，获取地址失败错误

将爬虫运行过程中遇到的错误进行整理，方便后来查询运行环境：Python3.6+Pydev 编码错误运行时候报错：UnicodeEncodeError: ‘gbk’ codec can’t encode character ‘\u2022’ in position 16707: illegal multibyte分析：看描述是编码方面的问题；解决方法：项目—>属性将编码改成utf-8

代码： # -*- coding:utf-8 -*- import urllib import urllib2 page = 1 url = 'http://www.qiushibaike.com/hot/page/' + str(page) user_agent = 'Mozilla/5.0 (Windows NT 6.3; Win64; x64; rv:45.0) Gecko/

37,737

社区成员

34,208

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

试试用AI创作助手写篇文章吧

+ 用AI写文章