C#网络抓取

yaotomo 2014-07-01 11:23:44
PHP里有PHPScrawl,Snoopy
Python有Scrapy

不知道C#有什么网络抓取和解析工具呢?最近对网络爬虫比较感兴趣,想找一下这方面的资料学习一下。
...全文
731 10 打赏 收藏 转发到动态 举报
写回复
用AI写文章
10 条回复
切换为时间正序
请发表友善的回复…
发表回复
祥子爱游戏 2014-07-03
  • 打赏
  • 举报
回复
WebRequest,webclient,webbrowser 正则,HtmlAgilityPack 。 gzip IE的F12,chrome的debug Fiddler,Fiddlercore
myhope88 2014-07-03
  • 打赏
  • 举报
回复
webrequest
puzhichen 2014-07-02
  • 打赏
  • 举报
回复
引用 3 楼 save4me 的回复:
苏飞的C#HttpHelper是挺好的抓取类库 Html Agility Pack是很好用的html解析类库
+1024
Justin-Liu 2014-07-02
  • 打赏
  • 举报
回复
WebRequest,通过网络请求抓取
l9920704 2014-07-02
  • 打赏
  • 举报
回复
抓取就用HttpWebRequest加正则来提取charset就行了 最后别忘了gzip的压缩流格式, 如果是解析就用HtmlAgilityPack 像上面所说的支持XPath,结合chrome的话很方便的
十三- 2014-07-02
  • 打赏
  • 举报
回复
解析html 上面有提到 第三方 HtmlAgilityPack 支持用XPath,效率不错 看这个例子 http://zhoufoxcn.blog.51cto.com/792419/595344/
save4me 2014-07-01
  • 打赏
  • 举报
回复
苏飞的C#HttpHelper是挺好的抓取类库 Html Agility Pack是很好用的html解析类库
jimil 2014-07-01
  • 打赏
  • 举报
回复
webclient,神器中的神器,最好别干坏事。
sunny906 2014-07-01
  • 打赏
  • 举报
回复
httpwebrequest + 正则表达式
  • 打赏
  • 举报
回复
引用 3 楼 save4me 的回复:
苏飞的C#HttpHelper是挺好的抓取类库 Html Agility Pack是很好用的html解析类库
http://download.csdn.net/detail/hsuifengershi/7508819 p哥帖子代码实现 winform版 http://bbs.csdn.net/topics/390420459

62,046

社区成员

发帖
与我相关
我的任务
社区描述
.NET技术交流专区
javascript云原生 企业社区
社区管理员
  • ASP.NET
  • .Net开发者社区
  • R小R
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告

.NET 社区是一个围绕开源 .NET 的开放、热情、创新、包容的技术社区。社区致力于为广大 .NET 爱好者提供一个良好的知识共享、协同互助的 .NET 技术交流环境。我们尊重不同意见,支持健康理性的辩论和互动,反对歧视和攻击。

希望和大家一起共同营造一个活跃、友好的社区氛围。

试试用AI创作助手写篇文章吧