python爬取维基百科失败，弄了半天了求助！！！！！

m0_50998020 2021-05-26 09:41:43

如下图所示
我明明可以在浏览器打开维基百科，但是为什么在pycharm里访问不了维基百科呀，在本地jyputyer里也是。
老显示什么为响应

...全文

544 7 打赏收藏转发到动态举报

写回复

用AI写文章

7 条回复

切换为时间正序

请发表友善的回复…

发表回复

wave12_mp 2021-06-27

打赏
举报

可以关注这个知识库，经常有爬虫的例子DEMO.

http://kbase.wave12.com/pythoncode/

tianfang 2021-06-24

打赏
举报

wiki不用爬虫

可以直接下载 https://dumps.wikimedia.org/zhwiki/

IT.BOB 版主 2021-05-27

打赏
举报

如果有用的话，请结一下帖吧

m0_50998020 2021-05-27

打赏
举报

感谢大佬的指点啊，今早小白起来尝试了一下，终于成功了！这都是python爬虫权威指南害的啊！

10mAh充电宝 2022-05-13

@m0_50998020 您好，请问是怎么解决的呢？

真是玻璃心 2022-07-17

@m0_50998020 我也是用的这本书，请问是怎么解决的进度卡这里好多天了

IT.BOB 版主 2021-05-26

打赏
举报

你用浏览器访问是开了代理吧，这个页面不开代理是进不去的，所以你代码里面也要加代理才能访问

通过不到1小时的时间帮助学员快速熟悉Python爬虫从入门到案例实战。从零开始敲代码，手把手带领大家感受从无到有的全过程。讲师是以企业里Python程序员的角度出发，换位思考以非常有效、高效的方式对接工作中可能涉及到各类角色，比如产品经理和运营人员等。主要包含：http请求、正则表达式和json、开源分词工具和简单的Web服务等。

开始之前先安装我们需要的库：bs4库内的Beautiful Soup 的方法可以用pip命令：pip install beautifulsoup4或者在pycharm中 settings–>Project:py–>Project interpreter–>点击右侧+ –>查询并install要爬取的维基百科url–>https://zh.wikipedia.org/wiki/Wikipedia:%E

import re from urllib.request import Request from urllib.request import urlopen from bs4 import BeautifulSoup as bs """ 爬取wiki百科词条 1：原理名称： a标签的text属性 url: a标签的href属性 2.使用工具 urllib 获取连接和请求数据 BeautifulSoup 解析数据

Python学习路上有这些论坛、网站、书籍与你同行2019-05-03 18:24:41613点赞9508收藏164评论创作立场声明：希望我的一些经验可以给你少走一些弯路，但人总得走点弯路才可以成长。别怕，在学习python的路上有我陪着你。人生苦短，我用Python。先来谈谈自学Python的一些感受。学习Python时间不是很长，但作为一门容易上手的编程语言，Python给我的感觉就像是一门可...

本课程主要给大家分享基于Python语言的网络爬虫各种工具的使用和实战案例，涉及的知识点requests爬虫库，Python正则表达式，xpath的使用，selenium的使用，进程线程协程，scrapy框架的使用。本课程还有超多的实战，百度,微博,今日头条，网易，boss直聘，豆瓣等网站的爬取，以及用scrapy框架爬取全网数据本教程是由IT兄弟连知名讲师姚青林老师讲解，姚老师讲课非常由代入感，很容易听懂，深受学员的喜爱！这些实战教程肯定会对你的面试加分，让你在面试中脱颖而出！

脚本语言

37,720

社区成员

34,239

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

试试用AI创作助手写篇文章吧

+ 用AI写文章

python爬取维基百科失败，弄了半天了 求助！！！！！

python爬取维基百科失败，弄了半天了求助！！！！！