發布時間:2013-11-19 16:33:43 瀏覽次數:次
眾所周知,搜索引擎的主要工作過程包括:抓取、存儲、頁面分析、索引、檢索等幾個主要過程。過去幾周給大家介紹了抓取相關的簡要過程。今天簡要介紹一下索引系統,以億為單位的網頁庫中查找特定的某些關鍵詞猶如大海里面撈針,也許一定的時間內可以完成查找,但是用戶等不起,從用戶體驗角度我們必須在毫秒級別給予用戶滿意的結果,否則用戶只能流失。怎樣才能達到這種要求呢?
如果能知道用戶查找的關鍵詞(query切詞后)都出現在哪些頁面中,那么用戶檢索的處理過程即可以想象為包含了query中切詞后不同部分的頁面集合求交的過程,而檢索即變成了頁面名稱之間的比較、求交。這樣,在毫秒內以億為單位的檢索成為了可能。這就是通常所說的倒排索引及求交檢索的過程。如下為建立倒排索引的基本過程:
(1)頁面分析的過程實際上是將原始頁面的不同部分進行識別并標記,例如:title、keywords、content、link、anchor、評論、其他非重要區域等等;
(2)分詞的過程實際上包括了切詞分詞同義詞轉換同義詞替換等等,以對某頁面title分詞為例,得到的將是這樣的數據:term文本、termid、詞類、詞性等等;
(3)之前的準備工作完成后,接下來即是建立倒排索引,形成{termàdoc},可以粗略的理解為如下,為什么是【term->doc】,而不是直接應用【doc->term】呢?
上述即是索引系統中的倒排索引過程,是搜索引擎實現毫秒級檢索非常重要的一個環節。
外貿獨立站不僅為企業提供了全新的品牌建設和營銷渠道,還成為了應對市場競爭和提升盈利能力的重要手段。接下來,我們將詳細探討外貿獨立站的重要性以及外貿企業紛紛轉向外貿獨立站的原因和趨勢。...
SSL證書越來越成為網站建設的標配,目前谷歌等瀏覽器都已經把網站默認打開方式調整為https頁面。SSL證書在增強網站安全性、保護用戶隱私和交易數據、提升網站在搜索引擎中的排名以及提升用戶體驗等方面的顯著作用。...
想要在外貿行業中做的風生水起,必定時刻關注著外貿政策的風向,這些政策涉及國內外政策、海關政策、關稅政策、貿易禁令等,記得點贊收藏!中泰3月1日起互免簽證1月28日,中國與泰國在曼谷簽署互免簽證協定。該協定將從2024年3月1日起正式生效。根據協定,泰國普通護照持有者和中國公務、普通護照持有者在對方國家出入境或過境享受3......
如今的跨境電商平臺已經越來越圈,自建外貿獨立站越來越成為商家的銷售渠道的選擇,提到外貿商城系統必然離開不Shopify開店的應用及推廣。下面給大家簡單的介紹一下Shopify外貿商城系統。...
經常會有人問,網站備案都需要什么材料呢?下面小編就給大家簡單介紹一下備案所需要的材料。目前很多備案商已經進行了無紙化操作,不再需要想以前一樣打印核驗單蓋章以及幕布拍照了。僅需下載相關app進行人臉識別操作即可。...
魯ICP備12021464號 | 魯公網安備 37020302370744號 | 營業執照公示
友情鏈接 :青島網站建設