紧急需要制作一个爬取工商公示平台的爬取程序

[lclmxiu]

http://218.57.139.23:10013/iaicweb/jsp/gcloud/iaicweb/indexList/allywList.jsp
爬取这个网站背后的数据 这个页面只显示一部分 有很大一部分是藏在后面的 现在需要制作一个能够爬取隐藏的公司名字

[ski_2019]

服务器端分页限制，且不支持模糊查询，没有好办法。由于该页面展示的是最近50条数据，可做一爬虫实时监控该页面最新数据，若该接口更新的数据是实时的，可获取一部分数据，如果监控的频率大于数据更新的频率，应该可以获取增量数据。

[tianfang]

爬取这个网站背后的数据 这个需求就有很大的法律风险！！！ 很大一部分信息怎么藏在后面的 ？ 你怎么看到的？

[ziyuanxian]

这种没有固定规则的不好做，建议自定义关键字爬。

[weixin_43027409]

楼主，我做了个自动刷新的。你要么？