社区
Java SE
帖子详情
Spider读取网页最快的方法
Brodie
2010-04-26 10:45:36
读取指下载HTML内容和解码成STRING,可以使用JDK包,第三方包(httpclient)
...全文
175
13
打赏
收藏
Spider读取网页最快的方法
读取指下载HTML内容和解码成STRING,可以使用JDK包,第三方包(httpclient)
复制链接
扫一扫
分享
转发到动态
举报
AI
作业
写回复
配置赞助广告
用AI写文章
13 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
OopsJeff
2010-04-27
打赏
举报
回复
第三方?? 又要学怎么用?
不姓贾_请叫我甄先生
2010-04-27
打赏
举报
回复
说具体点撒
zfq642773391
2010-04-26
打赏
举报
回复
apache的项目嘛
据说挺好用
先顶个
24K純帥
2010-04-26
打赏
举报
回复
LZ您也说具体点撒
hjjk123
2010-04-26
打赏
举报
回复
不懂.............
Aniao
2010-04-26
打赏
举报
回复
httpclient的最新版本已经叫http-component了
其实用URLHttpConnection已经很高效了,Spider的性能高效主要体现在多线程的使用上
xooxoo
2010-04-26
打赏
举报
回复
heritrix 啊 又简单又好用
小_Y
2010-04-26
打赏
举报
回复
那怎么个快法?
小糊涂
2010-04-26
打赏
举报
回复
楼主你说的怎么提高读取网页的速度吗??
yugong2009
2010-04-26
打赏
举报
回复
学习……
岁月之梦
2010-04-26
打赏
举报
回复
蜘蛛跟 抓取网页不同吧 蜘蛛只是在网页爬 取meta 和title, 抓取网页是针对哪个网页去取数据!
valen_jia
2010-04-26
打赏
举报
回复
还好,也不算很快的吧
梦_枫
2010-04-26
打赏
举报
回复
没怎么看懂LZ的意思,
友情帮顶下个。。。。
[其他类别]Web
Spi
der
蓝蜘蛛
网页
抓取 v5.1_web
spi
der
.rar
【标题】Web
Spi
der
蓝蜘蛛
网页
抓取 v5.1 是一款功能强大的
网页
抓取工具,专为用户提供了高效、易用的
网页
数据抓取解决方案。该软件版本为v5.1,代表它已经经过多次迭代优化,具备了更加稳定和先进的特性。 在
网页
...
C#2.0(Web
Spi
der
)
网页
抓爬工具 Visual 2005 项目源文件
对于Web
Spi
der
项目,开发者可能需要使用HTTP请求库(如System.Net命名空间中的WebClient或HttpWebRequest类)来发送HTTP请求,获取
网页
内容。然后,通过正则表达式或HTML解析库(如HtmlAgilityPack)解析HTML文档,...
[其他类别]Web
Spi
der
蓝蜘蛛
网页
抓取 v5.1_web
spi
der
.zip
【标题】Web
Spi
der
蓝蜘蛛
网页
抓取 v5.1 是一款功能强大的
网页
抓取工具,专为用户提供了高效、易用的
网页
数据抓取解决方案。该软件版本为v5.1,代表了其在功能和性能上的持续优化与升级。 【描述】这款工具的核心...
spi
der
原理资料
Spi
der
的基本工作原理是通过跟随
网页
上的超链接,像一只蜘蛛在巨大的蜘蛛网上爬行一样,从一个
网页
跳转到另一个
网页
,不断获取新的内容。 网络蜘蛛首先从一个起始
网页
开始,这个起始
网页
通常是网站的首页或其他具有...
Spi
der
用于网络分析
Spi
der
,又称网络爬虫或
网页
蜘蛛,是一种自动浏览互联网并收集
网页
信息的程序。它们遵循HTML
网页
中的超链接,逐个页面抓取,形成一个庞大的
网页
索引。这种索引对于搜索引擎优化(SEO)、市场研究、社交媒体分析等...
Java SE
62,630
社区成员
307,264
社区内容
发帖
与我相关
我的任务
Java SE
Java 2 Standard Edition
复制链接
扫一扫
分享
社区描述
Java 2 Standard Edition
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章