怎么51job 搜索不了职位了今天???你们发现了吗

hywxm 2007-09-25 07:40:26

发现了吗

...全文

249 2 打赏收藏转发到动态举报

写回复

2 条回复

切换为时间正序

请发表友善的回复…

发表回复

chenhongxin 2007-09-25

打赏
举报

回复

中秋快乐，路过，帮顶！！！可能是他的数据库挂了吧

本文分享了使用Python爬虫技术从51job网站抓取2000条职位信息的过程，包括职位名称、岗位要求、薪资、公司地址等关键数据。文章详细介绍了爬虫的实现步骤，如何利用requests库和lxml库进行网页信息的获取和解析，以及如何通过XPath定位所需数据。

本文详细介绍了如何使用Python的Scrapy爬虫框架抓取51job网站上的职位信息。从预备知识开始，包括Python基础、正则表达式，然后通过抓包分析url地址、页码规律以及数据存储位置，发现数据存在于前端页面的script标签中。接着，通过正则表达式匹配提取json数据，并将其转化为Python字典。在代码编写部分，展示了如何编写start_requests、解析数据和提取职位详情页信息的步骤。最终实现对职位列表和详情页的爬取，获取包括职位名、公司名、工作地点、薪资等信息。

本文介绍了使用Python的Scrapy和Selenium框架抓取51job网站上的职位信息，包括目标设定、网页分析和代码实现。在代码实现部分，作者分享了在城市选择上遇到的挑战和解决方案，以及代码优化，如字段格式调整、去除特殊空白字符等。最后，提到了如何在pipelines.py中定义存储方式。

本文介绍了如何使用Python爬虫从前程无忧(51job)网站上抓取数据挖掘类岗位的招聘信息。首先解析了网络爬虫的基本概念，然后分析了51job搜索页面的URL结构，通过编码转换获取正确的搜索链接。接着，探讨了自动翻页和获取详细页面的方法，并利用页面查看器定位到所需信息。最后，展示了初步的爬取结果，并指出需要进一步处理数据。

本文介绍了一种使用Python爬虫技术从51job网站抓取职位信息的方法，包括职位名称、公司名称、工作地点、薪资和发布时间，并将数据整理后存储到CSV文件中。

23,404

社区成员

70,507

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章