社区
C#
帖子详情
用C#做搜索引擎的蜘蛛程序????
luxboy
2003-08-19 04:45:34
用C#做搜索引擎的蜘蛛程序,由于我使用的地方和互联网断开,所以只能建立一个独立的索引库,我想问一下这可行吗?应该如何入手?最好有个例子!
...全文
31
1
打赏
收藏
用C#做搜索引擎的蜘蛛程序????
用C#做搜索引擎的蜘蛛程序,由于我使用的地方和互联网断开,所以只能建立一个独立的索引库,我想问一下这可行吗?应该如何入手?最好有个例子!
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
1 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
rouser
2003-08-19
打赏
举报
回复
你的起點可以是一個網頁
然后過濾網頁上的HyperLinks,按照一種優先去搜索
然后自己設計需要獲得哪些屬性入庫
并且定期去更新庫中的節點
C#
写的
搜索引擎
代码
用
C#
写的网络搜索
蜘蛛
程序
,可以参考学习。
C#
仿
搜索引擎
爬行演示
程序
源码
C#
仿
搜索引擎
爬行演示
程序
源码,在URL处输入具体的网页地址,不要输入域名,输域名无效,也就是要指定到网页扩展名,这样
程序
就会顺着该页上的链接一个个抓取,在保存目录处设定好输出目录,抓取的文件会存入这个目录,动态文件也可以抓取,但动态代码部分是乱码,这是很正常的,如果不这样,互联网岂不乱哉!
C#
爬虫
程序
C#
蜘蛛
程序
一个
C#
开发的
蜘蛛
程序
,有兴趣的可以研究一下,我在外国网站上找了好久才找到了这资源。。
用
c#
写的一个简单的
蜘蛛
程序
"
蜘蛛
"(Spider)是Internet上一种很有用的
程序
,
搜索引擎
利用
蜘蛛
程序
将Web页面收集到数据库,企业利用
蜘蛛
程序
监视竞争对手的网站并跟踪变动,个人用户用
蜘蛛
程序
下载Web页面以便脱机使用,开发者利用
蜘蛛
程序
扫描自己的Web检查无效的链接……对于不同的用户,
蜘蛛
程序
有不同的用途。那么,
蜘蛛
程序
到底是怎样工作的呢?
用
C#
写的
蜘蛛
程序
也叫小偷
程序
"
蜘蛛
"(Spider)是Internet上一种很有用的
程序
,
搜索引擎
利用
蜘蛛
程序
将Web页面收集到数据库,企业利用
蜘蛛
程序
监视竞争对手的网站并跟踪变动,个人用户用
蜘蛛
程序
下载Web页面以便脱机使用,开发者利用
蜘蛛
程序
扫描自己的Web检查无效的链接……对于不同的用户,
蜘蛛
程序
有不同的用途。那么,
蜘蛛
程序
到底是怎样工作的呢?
蜘蛛
是一种半自动的
程序
,就象现实当中的
蜘蛛
在它的Web(
蜘蛛
网)上旅行一样,
蜘蛛
程序
也按照类似的方式在Web链接织成的网上旅行。
蜘蛛
程序
之所以是半自动的,是因为它总是需要一个初始链接(出发点),但此后的运行情况就要由它自己决定了,
蜘蛛
程序
会扫描起始页面包含的链接,然后访问这些链接指向的页面,再分析和追踪那些页面包含的链接。从理论上看,最终
蜘蛛
程序
会访问到Internet上的每一个页面,因为Internet上几乎每一个页面总是被其他或多或少的页面引用。
C#
110,534
社区成员
642,575
社区内容
发帖
与我相关
我的任务
C#
.NET技术 C#
复制链接
扫一扫
分享
社区描述
.NET技术 C#
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
让您成为最强悍的C#开发者
试试用AI创作助手写篇文章吧
+ 用AI写文章