87,910
社区成员
发帖
与我相关
我的任务
分享怎样爬取网页上的用JS显示出来的数据
求助各位大神，我在用jsoup爬去网页数据的时候，发现有些网页上的数据并不是直接显示在源码中，而是通过JS的函数显示的，请问我该怎么抓取这些数据呢？请各位大虾指点，最好有代码示例哈，谢谢 谢谢 谢谢！！！！！！！！
...全文
请发表友善的回复…
发表回复
风卷残云222 2015-10-16
- 打赏
- 举报
。。。。我来挖坟，楼主问题解决了吗，偶也遇到相同的问题
ysj_csdn 2015-04-13
- 打赏
- 举报
楼主的问题解决了吗？我遇到同样的问题，能否给予指点呢
张运领 2013-12-19
- 打赏
- 举报
话说，听说，爬虫好像是爬不到动态加载的数据的。
打字员 2013-12-19
- 打赏
- 举报
JS修改頁面，如果數據來源就是頁面上的一個數組對象撒的，那你乍搞
如果來源是ajax，frame，首先是跨域，即使你有了數據，會怎麼操作數據得到最后的結果，你也不知道
所以如果LZ是對某個網站或某些有共同點的網站專門寫程序，那還有可能，想真做得通用不現實。
tony4geek 2013-12-19
- 打赏
- 举报
模拟请求呢。
struts_hibernate_sp 2013-12-19
- 打赏
- 举报
嗯，谢谢你哈！！
张运领 2013-12-19
- 打赏
- 举报
其实，我没有写过爬虫，也没有用过，看的一些前端开发方面的文章有这么提过一句
说是：重要的内容不要使用js动态加载，那么会导致搜索引擎的蜘蛛无法抓取到，这样网页被搜索引擎收录的概率就会小了。
具体的我也不懂，不知道有没有其他的办法，帮不了你的。
struts_hibernate_sp 2013-12-19
- 打赏
- 举报
......难道你就没办法了么，，，，，，
