2,760
社区成员
发帖
与我相关
我的任务
分享用C#做的网络爬虫如何抓取动态页面?
正在用C#做一个网络爬虫,对静态页面的抓取已经基本搞定,但不知道动态页面抓取如何入手,希望有高手能够提高一些资料,网站等,能够提供源程序参考则更好!谢谢!
...全文
请发表友善的回复…
发表回复
鲁虾 2012-08-13
- 打赏
- 举报
静态的和动态的有区别么？都是url获取到html代码，你只要分析好url就可以抓取了吧
lanlanjinjinfenfen 2012-08-07
- 打赏
- 举报
正在用C#做一个网络爬虫,对静态页面的抓取已经基本搞定,但不知道动态页面抓取如何入手,希望有高手能够提高一些资料,网站等,能够提供源程序参考则更好!谢谢!
楼主所做程序源码能不能粘出来！
楼主所做程序源码能不能粘出来！
loud1984 2009-04-16
- 打赏
- 举报
[Quote=引用楼主 hevhe 的帖子:]
正在用C#做一个网络爬虫,对静态页面的抓取已经基本搞定,但不知道动态页面抓取如何入手,希望有高手能够提高一些资料,网站等,能够提供源程序参考则更好!谢谢!
[/Quote]网络爬虫好像只能爬取静态的页面内容，动态的内容无法爬取。因为动态网页像PHP，JSP这些都是动态生成的，依靠用户的触发点击，在服务器端执行的。
一般如果用手工保存的网页没有的内容，用爬虫基本上就无法爬取。
正在用C#做一个网络爬虫,对静态页面的抓取已经基本搞定,但不知道动态页面抓取如何入手,希望有高手能够提高一些资料,网站等,能够提供源程序参考则更好!谢谢!
[/Quote]网络爬虫好像只能爬取静态的页面内容，动态的内容无法爬取。因为动态网页像PHP，JSP这些都是动态生成的，依靠用户的触发点击，在服务器端执行的。
一般如果用手工保存的网页没有的内容，用爬虫基本上就无法爬取。
jiangfeng999 2009-04-02
- 打赏
- 举报
楼上的能不能不要到处发广告了.整个CSDN都是你的广告
jiangfeng999 2009-04-02
- 打赏
- 举报
抓取动态网页和静态的没有什么区别的呀,都是向服务器发送web请求
例如你发送XXX.aspx?ID=给服务器,就可以把网页接收回来,要是还有疑问请把代码贴出来继续讨论
例如你发送XXX.aspx?ID=给服务器,就可以把网页接收回来,要是还有疑问请把代码贴出来继续讨论
netwar 2009-03-19
- 打赏
- 举报
呵，我写了一个简单的，可以交流下。
jackyu2008 2008-10-31
- 打赏
- 举报
商业气氛浓
凑热闹:
http://www.webscraping.com.cn
凑热闹:
http://www.webscraping.com.cn
hevhe 2008-10-26
- 打赏
- 举报
许多数据是放在数据库的网站，是否能够获得这些信息？？
hevhe 2008-10-24
- 打赏
- 举报
没人？自己顶下
