技術(shù)編號(hào)：8258592
提示：您尚未登錄，請(qǐng)點(diǎn) 登 陸 后下載，如果您還沒有賬戶請(qǐng)點(diǎn) 注 冊(cè) ，登陸完成后，請(qǐng)刷新本頁查看技術(shù)詳細(xì)信息。 本發(fā)明涉及信息處理技術(shù)，尤其涉及一種網(wǎng)頁信息排重的方法、裝置及計(jì)算機(jī)可 讀存儲(chǔ)介質(zhì)。背景技術(shù) 隨著互聯(lián)網(wǎng)技術(shù)的迅猛發(fā)展，互聯(lián)網(wǎng)上的網(wǎng)頁信息也越來越多。搜索引擎的索引 數(shù)據(jù)通常可達(dá)百億級(jí)別的網(wǎng)頁信息，有統(tǒng)計(jì)結(jié)果表明，近似重復(fù)網(wǎng)頁信息的數(shù)量占網(wǎng)頁信 息總數(shù)的比例高達(dá)全部頁面的29%，而完全相同的頁面大約占全部頁面的22%，這意味著用 戶每次搜索得到的網(wǎng)頁信息中，有相當(dāng)大比例的內(nèi)容是完全相同或者相似的。目前，網(wǎng)頁信息排重的方法主要有 -、Shingling算法...
注意：該技術(shù)已申請(qǐng)專利，請(qǐng)尊重研發(fā)人員的辛勤研發(fā)付出，在未取得專利權(quán)人授權(quán)前，僅供技術(shù)研究參考不得用于商業(yè)用途。
該專利適合技術(shù)人員進(jìn)行技術(shù)研發(fā)參考以及查看自身技術(shù)是否侵權(quán)，增加技術(shù)思路，做技術(shù)知識(shí)儲(chǔ)備，不適合論文引用。
請(qǐng)注意，此類技術(shù)沒有源代碼，用于學(xué)習(xí)研究技術(shù)思路。