求网页正文信息提取思路

mengliu2010 2012-03-09 10:54:59

想做一个软件，可以较为精确地提取出正文信息，但是要除去一些噪声信息

...全文

73 4 打赏收藏转发到动态举报

写回复

4 条回复

切换为时间正序

请发表友善的回复…

发表回复

mengliu2010 2012-03-11

打赏
举报

回复

[Quote=引用 2 楼 woxinfeixian93 的回复:]
我想到的只有readline,转成xml形式,接着就dom4j方式去读取你想要的信息
(或正则进取信息)
[/Quote]
这样噪声信息不少的

mengliu2010 2012-03-11

打赏
举报

回复

[Quote=引用 1 楼 zzt369880281 的回复:]
我也有兴趣，加我ＱＱ吧，我的用户名就是ＱＱ
[/Quote]
加了

love_love 2012-03-10

打赏
举报

回复

我想到的只有readline,转成xml形式,接着就dom4j方式去读取你想要的信息
(或正则进取信息)

zzt369880281 2012-03-10

打赏
举报

回复

我也有兴趣，加我ＱＱ吧，我的用户名就是ＱＱ

掌握了这些标准和规范（广告交易平台的域名、广告位ID、广告位尺寸、广告创意URL及信息、曝光点击及监测地址等），在大多数长尾流量的页面中都可以轻松识别出来，从而摘除与文章正文无关的信息。标签定位的算法简单...

网页正文提取 ...提取操作时可以通过一种或几种算法的叠加应用来获取绝大多数网页的正文信息，从业务应用的角度上看，错误率在可接受方位内，不会对产品和业务产生实质性影响。方法： 1、标签定位：...

页正文提取的思路在不断追踪网页文本提取的技术，这篇文章中提到的做法很有实用价值！网页由于格式千变万化，要找到一种能提取任意网页正文的算法，并能达到应用需要的准确度，具有一定难度。因此，...

网页由于格式千变万化，要找到一种能提取任意网页正文的算法，并能达到应用需要的准确度，具有一定难度。因此，总避免不了在提取程序中添加一些规则，对不同的网页类型作不同处理。另外，有人利用开源的Tidy,把不...

这里所说的正文提取主要是针对新闻页面等网页的主体是文字的HTML页面。在做一些与文本处理相关的实验时往往需要大量的文本，虽然网络上已经存在了一些开放数据集如搜狗语料库，但是有的时候也需要根据具体的需求来...

62,627

社区成员

307,258

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章