28,391
社区成员
发帖
与我相关
我的任务
分享正在用asp做个蜘蛛(抓取整个网站，并生成全新html网站，只要运行一下这个文件，整个asp\php\jsp网站就html化了，爽)，动态网站的福音，,
准备用asp做个蜘蛛(抓取整个网站，并生成全新html网站，只要运行一下这个文件，整个asp\php\jsp网站就html化了
用数据结构中的遍历图的算法和正则表达式找出整个网站的链接URL
并存xml文件
，
根据链接URL，生成文件名
xmlhttp抓取htm文件，并根据链接URL替换成新的链接
成功生成整个html网站
特别象一些公司网站小于1000个页面的，原来是动态网站，只要后台修改后，用一下蜘蛛，就整个网站给html化了，这样访问速度快，也更于搜索引擎访问
用数据结构中的遍历图的算法和正则表达式找出整个网站的链接URL
并存xml文件
，
根据链接URL，生成文件名
xmlhttp抓取htm文件，并根据链接URL替换成新的链接
成功生成整个html网站
特别象一些公司网站小于1000个页面的，原来是动态网站，只要后台修改后，用一下蜘蛛，就整个网站给html化了，这样访问速度快，也更于搜索引擎访问
...全文
请发表友善的回复…
发表回复
luscom 2006-12-16
- 打赏
- 举报
我想知道下 javascript里的数组变量怎么抓去？
这个我想抓去 可是抓去不出来~
向学习一下这方面的知识
这个我想抓去 可是抓去不出来~
向学习一下这方面的知识
wj021chen 2006-07-21
- 打赏
- 举报
学习ing............
fkue23 2006-07-21
- 打赏
- 举报
教教新手们，给点代码之类的啊！
我也想学学呢
我也想学学呢
nayc 2006-07-21
- 打赏
- 举报
来学习~
wanglingg 2006-07-21
- 打赏
- 举报
不过无法抓取button的request page
wanglingg 2006-07-21
- 打赏
- 举报
呵呵 我也正在做 快做完了 我的是java做的
lyfer 2006-07-21
- 打赏
- 举报
确实不算蜘蛛.呵呵,fso搞出来的
net205 2006-07-21
- 打赏
- 举报
不错的思路，
不过用asp做效率有问题，如果页面多，数据库记录多(像文章发布系统)，页面层次深度太就速度是个问题.
不过用asp做效率有问题，如果页面多，数据库记录多(像文章发布系统)，页面层次深度太就速度是个问题.
vance2005 2006-07-21
- 打赏
- 举报
支持中。。。
lstup 2006-07-21
- 打赏
- 举报
只不过是fso整站而已,不算蜘蛛
wwlibin 2006-07-21
- 打赏
- 举报
指导一下
shenpu 2006-07-21
- 打赏
- 举报
我也在期待中....
跑路的蛤蟆 2006-07-21
- 打赏
- 举报
给个代码之类的东东呀
不要自己偷着乐
不要自己偷着乐
chinastorm 2006-07-21
- 打赏
- 举报
相当于webzip的功能？
jspadmin 2006-07-21
- 打赏
- 举报
我也正想做呢
jbj001 2006-07-21
- 打赏
- 举报
mark
heyjude1983 2006-07-21
- 打赏
- 举报
UP，顶了哈
mezzi100 2006-07-21
- 打赏
- 举报
期待ing，要帮忙说一声
jolinkyo 2006-07-21
- 打赏
- 举报
正想做，怎么做啊？
skangming 2006-07-21
- 打赏
- 举报
支持一个！
加载更多回复（19）
