社区
Web 开发
帖子详情
Jsoup 爬不了 iframe 中的内容
Eniak
2013-06-17 01:44:41
我正在试图分析一个网页,网页里面,内嵌了一个 iframe。
iframe 里面有 body, 那个 body 里面有想要的内容。
可是每次只能获得 iframe 这个节点,但是节点里面的内容就获得不了了。
...全文
913
6
打赏
收藏
Jsoup 爬不了 iframe 中的内容
我正在试图分析一个网页,网页里面,内嵌了一个 iframe。 iframe 里面有 body, 那个 body 里面有想要的内容。 可是每次只能获得 iframe 这个节点,但是节点里面的内容就获得不了了。
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
6 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
qwlhw
2015-04-16
打赏
举报
回复
我也遇见了这个问题!楼主解决了吗,求分享
奈米奈米
2014-12-22
打赏
举报
回复
我也遇见了这个问题!你解决了吗
Baymax-P
2014-12-18
打赏
举报
回复
在浏览器显示的是这样的
爬出来的是这样的
iframe里面的内容爬不出来了
Eniak
2013-06-19
打赏
举报
回复
自己的东东,自己顶
翟翟2013
2013-06-19
打赏
举报
回复
简单的写了下,运行下试试,这样是可以获取的,不知道符合不? @Test public void aa() { String html = "<html><head><title>First parse</title></head>" + "<body><iframe><html><body>Parsed HTML into a doc.</body></html></iframe></body></html>"; Document doc = Jsoup.parse(html); String body = doc.select("iframe").first().text();// 得到ifrmae下的html字符串 Document ifmDoc = Jsoup.parseBodyFragment(body); // 将html字符串转成Document对象 // System.out.println(ifmDoc); String ibody = ifmDoc.select("body").text(); System.out.println(ibody); }
Eniak
2013-06-18
打赏
举报
回复
自己的东东,自己顶
Jsoup
+selenium
爬
取
iframe
内容
的方法
本文介绍了如何通过引入Selenium和WebDriverManager的Java依赖,下载并安装Chrome驱动,然后利用WebDriverManager自动配置驱动。接着展示了如何切换到页面的
iframe
并抓取其
内容
,最后用
Jsoup
进行解析。示例代码详细演示了整个过程。
网络
爬
虫
jsoup
工具类
该博客介绍了网络
爬
虫
Jsoup
工具类,包含多个实用方法。如makeAbs方法可处理文档链接和资源路径,getImageList方法能从HTML
中
获取图片集合,getDocHtmlAndMakeAbs方法可获取文档并处理,还有查找元素、解析
Iframe
标签等方法,助力网络数据抓取。
HtmlUnit+
Jsoup
的使用记录
本文介绍使用HtmlUnit结合
Jsoup
抓取动态网页和
IFrame
网页的方法,包括软件版本配置、依赖添加、动态页面渲染、
IFrame
内容
抓取及数据处理,适用于非静态页面的数据抓取。
HttpClient模拟登录、HtmlUnit模拟登录,
jsoup
爬
取登录后的
内容
(不带验证码)
本文介绍了使用HttpClient和HtmlUnit进行模拟登录的方法,包括处理
iframe
的情况,并展示了如何利用
jsoup
抓取登录后的页面
内容
。通过 Maven 添加依赖,实现无验证码的网页交互。
jsoup
爬
虫 + android(java)使用详解(入门)+疑难杂症解决
本文详细介绍了使用
JSoup
进行网页
爬
取的过程,包括在Android环境下引入
JSoup
库、结合OkHttpUtils发起网络请求、解析HTML获取特定元素及处理
爬
取过程
中
遇到的疑难问题。
Web 开发
81,111
社区成员
341,726
社区内容
发帖
与我相关
我的任务
Web 开发
Java Web 开发
复制链接
扫一扫
分享
社区描述
Java Web 开发
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章