jsoup 抓取不到隐藏网页内容.

JeremyChenX 2014-01-07 06:07:13


如果div设置成了 style="visibility: hidden" 则抓取不到div内容?

在网络上搜了一下,说先获取,然后存入到cookie然后读取cookie...

有没有更简单点的方法呢?
...全文
396 4 打赏 收藏 转发到动态 举报
写回复
用AI写文章
4 条回复
切换为时间正序
请发表友善的回复…
发表回复
suciver 2014-01-08
  • 打赏
  • 举报
 回复
不会抓不到吧,jsoup抓取的都是网页的源码,只要他存在网页的源码里面不会抓取不到的.style的隐藏只是在浏览器上看不到了而已,只要源码中存在绝对是能抓取到的
职业驱魔师 2014-01-08
  • 打赏
  • 举报
 回复
引用 1 楼 fangmingshijie 的回复:
jsoup也有getElementById方法。
tony4geek 2014-01-08
  • 打赏
  • 举报
 回复
可以抓取的，
花谢尊前不敢香 2014-01-08
  • 打赏
  • 举报
 回复
jsoup也有getElementById方法。
Java爬虫从入门到精通
本课程是java大数据系列课程的数据采集部分，通过java爬虫技术从互联网进行在线...通过本课的学习，能够掌握爬虫技术原理，数据采集的原则，数据采集的方式，Jsoup页面分析技术，Httpclient工具的使用等爬虫项目实战。
JSoup 爬虫遇到的 404 错误解决方案
在网络爬虫开发中，使用JSoup进行数据抓取是一种常见的方式。然而，当我们尝试使用JSoup来爬虫抓取腾讯新闻网站时，可能会遇到404错误。这种情况可能是由于网站的反面爬虫机制检测到了我们的爬虫行为，从而拒绝了...
【多线程数据采集】使用Jsoup抓取数据+破解屏蔽ip访问。
为什么80%的码农都做不了架构师？>>> ...
【Jsoup】抓取文章并定制
关于Jsoupjsoup 是一款Java 的HTML解析器，可直接解析某个URL地址、HTML文本内容。它提供了一套非常省力的API，可通过DOM，CSS以及类似于jQuery的操作方法来取出和操作数据。同类产品横向对比，从上图咋一看感觉 ...
Java爬虫系列：使用Jsoup解析HTML
一、Jsoup自我介绍 我是一款Java 的HTML解析器，可直接解析某个URL地址、HTML文本内容。它提供了一套非常省力的API，可通过DOM，CSS以及类似于jQuery的操作方法来取出和操作数据，用Java写爬虫的同行们十之八九用过...
Java EE

67,512

社区成员

225,880

社区内容

发帖
与我相关
我的任务
社区描述
J2EE只是Java企业应用。我们需要一个跨J2SE/WEB/EJB的微容器，保护我们的业务核心组件（中间件），以延续它的生命力，而不是依赖J2SE/J2EE版本。
社区管理员
  • Java EE
加入社区
  • 近7日
  • 近30日
  • 至今

加载中

查看更多榜单
社区公告
暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章