如何抓取jS动态生成的网页数据

[qq_36244016]

如何抓取jS动态生成的网页数据

[webdiyer]

你可以了解下Selenium Webdriver，可能有点大材小用：http://www.seleniumhq.org/projects/webdriver/

[lovingkiss]

引用 3 楼 sp1234 的回复:

“抓取”失业，互联网的道德水平可以提高一点啊。

假设用户需要数据，国家机关官网存在此数据表，你是抓取还是不抓取呢？ 1、官网是免费的数据，但是没提供批量下载，没提供查询接口，时不时的还不保证速度 2、客户需要的是本地快速反应的情况下 凡事没有一定之规~~ 别“偷”不该“偷”的就好，每个人的道德底线是不一样的。。。 天气预报本来是公众资源，但是官网非要让我花钱买 ——以你的道德标准会认为不该抓取，但是以我的道德标准我会认为无所谓。

[gagadun]

调试js 模拟执行js脚本 获取返回值

[橘子皮...]

分析js,自己模拟生成啊

[以专业开发人员为伍]

所以给偷数据的人提高点难度，在正规论坛上少讨论。