62,041
社区成员
发帖
与我相关
我的任务
分享请发表友善的回复…
发表回复
IT0329 2012-10-25
- 打赏
- 举报
[Quote=引用 6 楼 的回复:]
帮顶来了，顺便学习中
WEB线程抓取不熟悉，也觉得不可靠，如果我做，首先考虑用C#写个WIN服务，定时抓取某网站信息
或者干脆写个控制台程序运行在服务器端，定时定向抓取，就像个小蜘蛛，然后存到SQL书库里
最后网站程序再过滤等等
[/Quote]
请教你一个问题，获取html代码中的数据，截取html的代码这个肯定是需要的，截取开始的代码没啥问题，但是截取结尾的如何更简单的处理，html代码中可能结尾的代码很难找到唯一的！
帮顶来了，顺便学习中
WEB线程抓取不熟悉，也觉得不可靠，如果我做，首先考虑用C#写个WIN服务，定时抓取某网站信息
或者干脆写个控制台程序运行在服务器端，定时定向抓取，就像个小蜘蛛，然后存到SQL书库里
最后网站程序再过滤等等
[/Quote]
请教你一个问题，获取html代码中的数据，截取html的代码这个肯定是需要的，截取开始的代码没啥问题，但是截取结尾的如何更简单的处理，html代码中可能结尾的代码很难找到唯一的！
XBodhi. 2012-10-23
- 打赏
- 举报
1.了解你要分析的WEBSITE
2.利用抓包工具 比如 httpWatch 等工具 分析 数据或 接口
3.利用 WebClent 或 HttpWebRequest 和HttpWebResponse 进行数据下载。
4.使用 System.IO 就行文件保存。
2.利用抓包工具 比如 httpWatch 等工具 分析 数据或 接口
3.利用 WebClent 或 HttpWebRequest 和HttpWebResponse 进行数据下载。
4.使用 System.IO 就行文件保存。
gnimgnot 2012-10-23
- 打赏
- 举报
想清楚从哪里采集，用什么方式采集（webserivce?自己抓网页解析html)，采集后怎么保存，怎么展示
wuyq11 2012-10-23
- 打赏
- 举报
webclient获取房产数据，正则特定数据
lys1978900 2012-10-23
- 打赏
- 举报
帮顶来了，顺便学习中
WEB线程抓取不熟悉，也觉得不可靠，如果我做，首先考虑用C#写个WIN服务，定时抓取某网站信息
或者干脆写个控制台程序运行在服务器端，定时定向抓取，就像个小蜘蛛，然后存到SQL书库里
最后网站程序再过滤等等
WEB线程抓取不熟悉，也觉得不可靠，如果我做，首先考虑用C#写个WIN服务，定时抓取某网站信息
或者干脆写个控制台程序运行在服务器端，定时定向抓取，就像个小蜘蛛，然后存到SQL书库里
最后网站程序再过滤等等
IT0329 2012-10-23
- 打赏
- 举报
[Quote=引用 2 楼 的回复:]
想清楚从哪里采集，用什么方式采集（webserivce?自己抓网页解析html)，采集后怎么保存，怎么展示
[/Quote]
大概的流程知道的，对这个东西不大熟悉！
想清楚从哪里采集，用什么方式采集（webserivce?自己抓网页解析html)，采集后怎么保存，怎么展示
[/Quote]
大概的流程知道的，对这个东西不大熟悉！
