信息「爆炸」時代,搜尋引擎是如何工作的?

2019-09-19     人民網科普

隨著時代的發展,網絡早已融入我們的生活,搜尋引擎讓信息的查找和獲取變得簡單而精確,那麼,其是如何檢索信息的呢?

搜尋引擎的工作過程大體分為四個步驟:爬行和抓取、建立索引、搜索詞處理、展示排名,人們日常使用搜尋引擎查找資料的過程只是搜尋引擎工作過程中的一個環節。首先,搜尋引擎會向全球資訊網派出一個能夠發現新網頁並抓取網頁文件的程序,這個程序通常被稱為蜘蛛(Spider)。其在工作的時候從網站的某一個頁面開始,讀取網頁的內容,找到在網頁中的其它連結地址,然後通過這些連結地址尋找下一個網頁,這樣一直循環下去,直到把這個網站所有的頁面都抓取完為止。如果把整個網際網路當做一張大網,那麼這個程序就像是蜘蛛一樣抓取所有的網頁內容。在蜘蛛程序抓取了網頁文件之後,通過對網頁內容的分析和處理,對網頁信息進行提取並組織建立索引庫,即建立一定的搜索原則,也就是說當用戶查找某一關鍵詞時,搜尋引擎能根據關鍵詞在資料庫中進行查找和搜索,找到相應的位置。

當搜尋引擎對網絡數據建立了資料庫之後,接下來就是用戶使用階段了,當用戶在搜索欄輸入搜索詞,單擊「搜索」按鈕後,搜尋引擎即對輸入的搜索詞進行處理,以提取出相應的關鍵詞,通過關鍵詞在資料庫中進行索引和查找,實際的應用中,搜索詞的處理是十分快速的。

當搜尋引擎根據搜索詞找到相關的網頁之後,接下來就遇到了一個問題,究竟把哪一個網頁的連結呈現在前面,哪些連結放在後面呢?這就涉及到搜尋引擎工作的最後一步——展示排名。在眾多網頁中,搜尋引擎會根據算法計算得出,一個網站所提供信息的有效性,原創性和信息的認可度等指標,結合網站自身權重等綜合算法給出相應的排名顯示,同樣的,會將一些質量較低的垃圾網站進行過濾,以提高用戶檢索的有效性。

在信息「爆炸」的時代,搜尋引擎帶給我們的是快速精準的信息查找方式,這大大節省了人們獲取知識的時間,提高人們的生產效率,相信隨著技術的發展,搜尋引擎在未來必定發揮更大的作用。

本文由北京郵電大學計算機科學與技術研究專業副教授張忠寶進行科學性把關。

(責編:魏思敏、張希)

文章來源: https://twgreatdaily.com/zh-cn/u84xR20BJleJMoPMkyGy.html