有没有会爬虫的大神啊求救

lekeli 2017-11-27 05:35:57

我这边要获取一个需要登录的网站，才能在相关模块提交表单参数查询数据并且爬取进数据库，现在模拟登录成了大问题怎么弄都没有用求大神指出一条活路

...全文

121 2 打赏收藏转发到动态举报

写回复

2 条回复

切换为时间正序

请发表友善的回复…

发表回复

lekeli 2017-12-05

打赏
举报

回复

已解决了有没有模拟登录有验证码的网站的代码

瓶盖muir 2017-11-27

打赏
举报

回复

具体点啊占点图上来

目标站点：https://www.ncbi.nlm.nih.gov/sra/?term=SRR3301029爬取内容：full内所有字，还需要点开show abstract以下是代码：只挑选主要代码<div><p class="details expand e-hidden"><b><a href="/sra/SRX1664908[accn]">SR...

作为一名数据民工，一直都是从各种系统下载数据，设置查询条件，写写SQL语句，顶多弄个爬虫爬点数据。有一天，老板新助理跑来求救： “xxx大神，你能帮我一个Excel的忙吗？” “说说看” “老板让我跟公司会议的待办事项，每次会议都有几十条，积累下来数量很多。” “嗯” “这些待办事项的负责人，每次都是最后时刻，给我五花八门的材料，很难汇总。” “什么想法呢？” “想规范这个流程，要给大家一个填写...

3852724,最新版墨镜风格模板发布了，有需要的朋友可以进来看看,2759280 3856589,官方手机模板在哪安装,3140684 3856347,手机触摸屏被劫持跳转其它网站,3112842 3856562,终于知道DZ官网为什么没落了,3112900 3856535,主题自带的二级导航怎么修改啊,2578089 3856505,以前有农场这些插件能安装，现在没了吗？,1515035 3856513,请问这个网站用的是什么应用程序,3140310 3856515,萌新想问一下，能否可以实现现在主流素

@rom selenium import webdriver import selenium.webdriver.support.ui as ui driver=webdriver.Firefox() url1=“http://bbs.kaoyan.com/misc.php?mod=ranklist&type=thread&view=replies&orderby=this...

隐藏 1.什么是Scihub？2.为什么我们需要用Python工具下载3.新姿势：用Python写好的API工具超方便下载论文4.论文关键词批量下载5.异步批量下载优化，增加超时控制6.根据DOI号下载文献7.工作原理一、找到sci-hub目前可用的域名二、对用户输入的论文地址进行解析，找到相应论文三、下载文献搜索对于广大学子来说真的是个麻烦事，如果你的学校购买的论文下载权限不够多，或者不在校园内，那就很头痛了。幸好，我们有Python制作的这个论文搜索工具，简化了我们学习的复杂性。 2020-05-2

67,549

社区成员

225,860

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章