正则表达式匹配着url

屋顶上的猫Hz 2012-11-05 04:55:58

怎样写这个正则表达式？要包括ip地址形式的url

...全文

91 回复打赏收藏转发到动态举报

写回复

回复

切换为时间正序

请发表友善的回复…

发表回复

本程序是用python编写，无需安装。运行Crawler.exe就可以看到效果。
如果不修改配置是抓取新浪科技的内容，修改配置可以抓取指定的网站。
配置文件采用ini的格式.
spider_config.ini蜘蛛的配置
1. maxThreads 爬虫的线程数
2. startURL 爬虫开始的URL
3. checkFilter 爬虫只抓取指定的URL（采用正则表达式匹配)
4. urlFilter 爬虫提供给分析器的URL（采用正则表达式匹配)
sucker_config.ini 网页分析器的配置
1. maxThreads 分析器的线程数
2. pattern parser匹配的正则表达式
3. parser 指定对应pattern的分析器
本程序支持自定义分析器。可以参照软件包中NewsParser.py的写法自己写个parser，前提是熟悉python。写好后运行compile编译承pyc就可以了

正则表达式很常用，下面是我整理的匹配URL或者网址的一些表达式：正则表达式 (http|ftp|https):\/\/[\w\-_]+(\.[\w\-_]+)+([\w\-\.,@?^=%&:/~\+#]*[\w\-\@?^=%&/~\+#])? 匹配 http://regxlib.com/Default....

最近在做一些关于URL匹配的项目，本来对正则表达式了解的不多，上网搜索了好多前辈写的正则表达式，发现很少能被我使用的，现将我自己写的正则表达式贴出来，供大家参考。 %% 首先，正则表达式： String check = @"((http|ftp|https)://)(([a-zA-Z0-9\._-]+\.[a-zA-Z]{2,6})|([0-9]{1,3}\.[0-9]{1,3

IP地址正则表达式匹配方法，ip正则表达式匹配正则表达式（Regular Expression，在代码中常简写为regex、regexp或RE）是计算机科学的一个概念。正则表达式使用单个字符串来描述、匹配一系列符合某个句法规则的字符串。在很多文本编辑器里，正则表达式通常被用来检索、替换那些符合某个模式的文本。许多程序设计语言都支持利用正则表达式进行字符串操作。在很多文本编辑器里，正则表达式通常被用...

Java使用正则表达式匹配获取链接地址的方法示例发布于 2020-6-14|复制链接摘记: 本文实例讲述了Java使用正则表达式匹配获取链接地址的方法。分享给大家供大家参考，具体如下：获取页面中字符串的url地址我们都会使用正则表达式来匹配获取了，下面我来给大家总结几个匹配获取链接地址示例。1、正则表达式中Matcher中find()方法的应用。2、String对象中的 ..本文实例讲述了Jav...

87,992

社区成员

224,685

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章