请教个问题，python爬数据，需要用post方式，其中的idxlist，如何用传参的方式，可以动态变更，而不是去修改程序-CSDN社区

m0_54534499 2022-01-21 10:07:00

请教个问题，python爬数据，需要用post方式，其中的idxlist，如何用传参的方式，可以动态变更，而不是去修改程序

...全文

767 回复打赏收藏转发到动态举报

写回复

回复

切换为时间正序

请发表友善的回复…

发表回复

Python3.2.3官方文档（中文版）由笔者自己翻译，有不当之处希望在博客上相互交流

一、做python爬虫，在爬取数据前，一般需要对网页进行简单分析。这里推荐用火狐的HttpFox，简单实用。二、爬取查询数据，查询类型的，说明是要post相关数据过去才能get到想要的数据。如下图，巨潮信息网的，通过查询显示想要的数据，然后抓取下来。通过HttpFox分析，要得到相关的数据，post过去的数据相当复杂。如下面这一大串： stoc

一、背景介绍在实际工作中需要使用JsonSchema解析json数据，JsonSchema中的新功能if-then-else在Java中无法生效，但是Python脚本就可以（咱也不知道为什么）。于是自己便生出一个想法，是否可以在Java中执行Python脚本呢？百度一番还真有这种操作 pom.xml文件中需要引入相应的依赖包 <dependency> <groupId>org.python</groupId> <artifactId>jy

很久以前接的单子，分享一下文章目录作业要求数据爬取爬取结果数据处理数据可视化大作业文档作业要求《Python与数据分析》期末大作业要求(2020-2021学年第2学期) 一、期末作业要求: 1、在前期作业爬取的数据基础上，用Python编写代码对爬取的数据进行全面数据分析并可视化，鼓励建立计量模型进行分析; 2、写作期末大作业文档:整体思路，对爬取网站的分析，对数据进行哪些方面的数据分析及数据的可视化，结论。 3、必须自己编写爬虫程序，不允许使用爬虫框架(如scrapy) 爬取数据，严禁抄袭。 .

参考文章： Python多线程3 多线程的传参与返回值 BBJG_001的博客——多线程学习网站：莫烦Python 学习别人的经验：在主线程用一个变量或者直接输出就能获取或使用函数中return的值。但是在多线程中，可以这么理解，多线程之间的变量空间是互相隔绝的，所以return是不能把值返回到主进程的，只能在所在的线程使用，线程结束，值所在空间也就被释放了。所以，多线程之间需要一个更加全局性的存储器来保存所有线程之间的值，这里使用queue（队列）来完成这项工作。什么是队列？简单介绍一下队列，队

派森特给站

1,060

社区成员

51,045

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章