java 实现网络爬虫用哪个爬虫框架比较好?

jywai 2012-05-25 02:34:46
大家哈,我想用java 实现一个网络爬虫的程序,请问用什么爬虫框架比较好,比如说我要抓取一些游戏传媒信息。用什么技术框架好!??请大家帮忙支支招,谢谢!
...全文
30405 7 打赏 收藏 转发到动态 举报
写回复
用AI写文章
7 条回复
切换为时间正序
请发表友善的回复…
发表回复
小傅哥 2013-03-12
  • 打赏
  • 举报
回复
推荐一个Jsoup 看一下,感觉这个不错 http://tieba.baidu.com/p/2114471038
小伙 2013-03-12
  • 打赏
  • 举报
回复
httpclient不错
晴天_设计师 2013-03-11
  • 打赏
  • 举报
回复
共有31款Java 网络爬虫开源软件,网址:http://www.oschina.net/project/tag/64/spider?lang=19&os=0&sort=view&p=1,其中Nutch和Heritrix比较流行
gloomyfish 2012-12-28
  • 打赏
  • 举报
回复
如果你是做项目,建议你用框架 如果你是真的想提高自己能力,作为爱好研究一下,建议你研究框架源码,
muxiaoyu1 2012-12-27
  • 打赏
  • 举报
回复
自己写爬取程序吧 看你业务需求了 你针对的是什么了 最好说的详细点 一般来说 可以通过该网站的API搜索信息,这是最快最准的。如果不行就拼凑连接自己解析。最后还是不行就只有最笨最慢最不稳定的方法爬网页解析。N多方法最好使用API最不好就爬网页。
面包里的代码 2012-12-27
  • 打赏
  • 举报
回复
楼主,我也碰到你这样的问题,不知道你学的怎么样了?求指点
thisisnew 2012-05-29
  • 打赏
  • 举报
回复
爬虫有框架吗?好像只有一些开源的实现吧,Heritrix比较适合,而且用的比较多,可以自由定制,网上相关的中文资料也比较多
内容概要:本文围绕“基于超局部模型与自抗扰ESO观测器的无模型预测电流控制改进策略”展开研究,提出一种结合超局部模型(ULM)与扩张状态观测器(ESO)的无模型预测电流控制(MFPCC)改进方法,旨在提升永磁同步电机(PMSM)电流环的动态响应性能与抗干扰能力。该策略利用超局部模型对系统行为进行局部逼近,避免依赖精确数学模型,同时引入自抗扰控制中的ESO实时观测并补偿系统内外部扰动,有效抑制参数摄动、负载变化及模型不确定性带来的影响。研究通过Simulink搭建完整的控制系统仿真模型,对传统MFPCC与所提改进策略进行对比分析,验证了新方法在电流跟踪精度、响应速度和鲁棒性方面的优越性。; 适合人群:具备电机控制、现代控制理论及Simulink仿真基础的电气工程、自动化及相关专业的研究生、科研人员及工程技术人员。; 使用场景及目标:①用于高性能电机驱动系统中电流环控制器的设计与优化;②为无模型控制与自抗扰控制的融合应用提供技术参考;③支撑相关课题的仿真验证、论文复现与创新方法研究。; 阅读建议:建议读者结合Simulink仿真模型深入理解控制结构与参数整定过程,重点关注ESO的观测性能与扰动补偿机制,并可通过改变负载条件、参数偏差等工况进行鲁棒性测试,进一步掌握该改进策略的核心优势与适用边界。

23,404

社区成员

发帖
与我相关
我的任务
社区描述
Java 非技术区
社区管理员
  • 非技术区社区
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧