如何抓取动态页面

zlxx5427 2011-08-03 02:04:36

一个网站分页显示查询结果。

从连接地址看，都是一样。每一页有按钮“下一页”是一个javascript.

请问我如何抓取每一页上面的结果呢？？我如何指定抓取某一页？比如第20页上的东西！

谢谢大家

请大家不吝赐教！

...全文

113 2 打赏收藏转发到动态举报

写回复

2 条回复

切换为时间正序

请发表友善的回复…

发表回复

zlxx5427 2011-08-03

打赏
举报

回复

按钮“下一页”不确定是不是 javascript.

zlxx5427 2011-08-03

打赏
举报

回复

最好有代码，学习！谢谢大家！

网页动态抓取是一种技术，主要用于从互联网上获取实时更新或交互式内容，这些内容在静态抓取时可能无法获取到。这项技术对于数据分析、搜索引擎优化（SEO）、内容监控以及网络研究等多个领域都至关重要。首先，...

而"动态页面抓取"则强调了我们需要关注那些使用JavaScript进行数据加载的网页。总的来说，这个主题涵盖了网络爬虫的基础知识，以及处理现代网页技术的方法，对初学者非常有帮助，同时也提醒我们，随着网页技术的发展...

使用WebBrowser(IE)来抓取动态网页使用Puppeteer来抓取动态网页使用Selenium来抓取动态网页 WebAPI调用获取实时天气调用中国天气网公开API接口来获取天气获取Bing每日图片调用cn bing API接口来获取Bing...

对于JavaScript驱动的动态网页，可能需要使用如Selenium等工具来模拟浏览器行为，以便执行JS并获取最终渲染的页面内容。二、图片抓取图片抓取是爬虫的一个重要部分，主要是找到HTML中的`<img>`标签，提取其`src`...

抓取原网页适用于静态内容，而处理JavaScript返回数据则针对动态交互的网站。在实际项目中，根据目标网页的特点和需求，灵活运用这些方法是关键。在提供的`WebpageCaptureDemo`压缩包文件中，可能包含了实现以上...

65,210

社区成员

250,518

社区内容

发帖

与我相关

我的任务

c++ 技术论坛（原bbs）

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

请不要发布与C++技术无关的贴子
请不要发布与技术无关的招聘、广告的帖子
请尽可能的描述清楚你的问题，如果涉及到代码请尽可能的格式化一下

试试用AI创作助手写篇文章吧

+ 用AI写文章