1) detecting near-duplicate in web pages
网页消重
1.
In this paper, the content of the mainly study include with research of detecting near-duplicate in web pages, technology of distributed crawling on web objects and technology of distributed storage on web objects.
本文主要研究的内容分为网页消重技术研究、Web对象分布式抓取技术、Web对象分布式存储技术。
4) Repeated Pages
重复网页
1.
The Application of MD5 to Remove the Repeated Pages;
MD5算法在消除重复网页算法中的应用
6) online duplicate documents detection
网页排重
补充资料：人工消云消雾武器
人工消云、消雾是指采用加热、加冷开播撒催化剂等方法，消除作战空域中的浓雾，以提高和改善空气中的能见度，保证已方目视观察、飞机起飞、着陆和舰艇航行等作战行动的安全。在第二次世界大战中，英军曾使用一种名为“斐多”的加热消雾装置，成功地保障了2500架次飞机在大雾中安全着陆。1968年，美军为保障空军飞机安全着陆，曾使用过人工消雾武器。
说明：补充资料仅用于学习参考，请勿用于其它任何用途。
参考词条