技術(shù)編號：6337904
提示：您尚未登錄，請點 登 陸 后下載，如果您還沒有賬戶請點 注 冊 ，登陸完成后，請刷新本頁查看技術(shù)詳細信息。本發(fā)明涉及一種互聯(lián)網(wǎng)搜索引擎的優(yōu)化方法。背景技術(shù)互聯(lián)網(wǎng)搜索引擎都有網(wǎng)頁抓取程序，這些網(wǎng)頁抓取程序一般稱為網(wǎng)絡爬蟲(Crawler)或網(wǎng)絡蜘蛛(Spider)。這些網(wǎng)頁抓取程序日以繼夜地從互聯(lián)網(wǎng)上抓取各種網(wǎng)頁，為各自搜索引擎形成一個逐步膨脹的網(wǎng)頁庫?？墒?，一方面網(wǎng)頁庫的容量存在上限，無法承受無限制的內(nèi)容增加；另一方面互聯(lián)網(wǎng)上有大量重復網(wǎng)頁，這些內(nèi)容重復的網(wǎng)頁不僅占用了搜索引擎存儲網(wǎng)頁庫的空間，也會導致網(wǎng)頁庫的查詢性能下降。如何在網(wǎng)頁庫中尋找出、并去除掉內(nèi)容重...
注意：該技術(shù)已申請專利，請尊重研發(fā)人員的辛勤研發(fā)付出，在未取得專利權(quán)人授權(quán)前，僅供技術(shù)研究參考不得用于商業(yè)用途。
該專利適合技術(shù)人員進行技術(shù)研發(fā)參考以及查看自身技術(shù)是否侵權(quán)，增加技術(shù)思路，做技術(shù)知識儲備，不適合論文引用。
請注意，此類技術(shù)沒有源代碼，用于學習研究技術(shù)思路。