哪位高手知道网页消重算法？知道得越多越好

hml_1001 2005-11-18 02:33:33

请大家群策群力，最好是Java方法实现的

...全文

88 2 打赏收藏转发到动态举报

写回复

2 条回复

切换为时间正序

请发表友善的回复…

发表回复

hml_1001 2005-11-21

打赏
举报

回复

就是消除重复的网页啊，比如用网络蜘蛛抓取的网页，大量的网页内容是相同或相似的，要消除。
看来没有什么人知道啊！

「已注销」 2005-11-18

打赏
举报

回复

网页消重算法??什么东西??我知道排序递归..

编者荐语：大家好，我是你们的朋友朋哥，今天聊聊算法，你了解算法为什么这么重要吗？为什么面试少不了算法？为什么算法这么难？带着这些疑问看下面文章把。什么是算法? 我们先不要给算法是否重要就轻易下了一个结论. 到这先不着急给算法下定义做解释. 我们现在先来看看一种现象: 哪种语言是开发者们可以高高兴兴的用来编程的？近日，一位美国的开发者通过Twitter对开发者们进行了一项调查：你是否喜爱XX语言调查结果分析图: 基本上每个月都会有一些相关对语言使用程度做了一个排名. ...

本文主要回顾下几个常用算法的适应场景及其优缺点！机器学习算法太多了，分类、回归、聚类、推荐、图像识别领域等等，要想找到一个合适算法真的不容易，所以在实际应用中，我们一般都是采用启发式学习方式来实验。通常最开始我们都会选择大家普遍认同的算法，诸如SVM，GBDT，Adaboost，现在深度学习很火热，神经网络也是一个不错的选择。假如你在乎精度(accuracy)的话，最好的方法就是通过交叉...

IBM的深蓝战胜国际象棋大师卡斯帕罗夫很大程度上要归功于α-β剪枝算法[2]，那么什么是α-β剪枝算法呢？我们从极小-极大过程开始讲起。 1. 极小-极大过程我们先看看人是如何下棋的。人在下棋时首先根据当前局面考虑若干总可能的走法，再对每种可能的走法考虑对方会如何走，再考虑自己会如何应对……高手会这样往前看很多步，根据最后的局面判断哪种走法是最优的。换句话说，高手会选择那种即使对方正确应对的情况下，己方依然占据最大优势的走法，而不是把希望寄托在对方犯错上。人类棋手的这种思考方法可以用一个“极小极大过程

是不是觉得数据结构和算法，跟os、计网一样，属于脱离实际工作的屠龙术？除了面试，其实这辈子也用不着？尽管计算机专业同学在大学都学过这些课程，甚至很多培训机构也会培训，但很多程序员对数据结构和算法依旧一窍不通。绝大多数人只听说过数组、链表、快排这些最简单的数据结构和算法，稍微复杂一点的就完全没概念。很多人说实际工作中根本用不到数据结构和算法。所以，就算不懂这块知识，只要Java API、开发框架用得熟练，照样可以把代码写得“飞”起来。事实真的是这样吗？想要通关大厂面试，数据结构和算法是开胃菜 B

算法工程师和程序员区别多大？一样吗？程序员从事IT行业人员的统称，而算法工程师是程序员的一个类别，主要设计算法的工程师，能力较多数程序员更为突出。目前算法工程师的待遇整体稍高，岗位要求相对更高。很多人更倾向于选择算法岗位，算法岗的饱和程度比研发岗要求严重建议慎重选择。

62,625

社区成员

307,257

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章