『壹』 中文搜索引擎的搜索引擎發展史
90年初當時萬維網(World Wide Web)還未出現,為了查詢散布在各個分散的主機中的文件,曾有過Archie, Gopher等搜索工具,隨著互聯網的迅速發展,基於HTTP訪問的web技術的迅速普及,他們就不再能適應用戶的需要。在1994年1月,第一個既可搜索又可瀏覽的分類目錄EINet Galaxy(Tradewave Galaxy)上線,它還支持Gopher和Telnet搜索。同年4月,Yahoo目錄誕生,隨著訪問量和收錄鏈接數的增長,開始支持簡單的資料庫查詢。這就是我們說的早期的,目錄導航系統,他們的缺點網站收錄/更新都是要考人工維護,所以在信息量劇增的條件下,就不是非常受用了。
1994年7月,Lycos推出了基於robot的數據發現技術,並支持搜索結果相關性排序,並且他第一個開始在搜索結果中使用了網頁自動摘要。Infoseek也是同時期的一個重要代表,他們是搜索引擎史上一個重要的進步。
1995年,一種新的搜索引擎工具出現了——元搜索引擎,第一個元搜索引擎是華盛頓大學的學生開發的Metacrawler。用戶只需提交一次搜索請求,由元搜索引擎負責轉換處理後提交給多個預先選定的獨立搜索引擎,並將從各獨立搜索引擎返回的所有查詢結果,集中起來處理後再返回給用戶。
1995年12月才登場亮相的AltaVista推出了大量的創新功能使它迅速到達當時搜索引擎的頂峰,它第一個支持自然語言搜索的搜索引擎,具備了基於網頁內容分析,智能處理的能力,第一個實現高級搜索語法的搜索引擎(如AND, OR, NOT等), 同時AltaVista還支持搜索新聞群組(Newsgroups),搜索圖片等具有劃時代意義的功能。 同時期還有inktomi,HotBot等搜索引擎。
1997年8月Northernlight 公司正式推出搜索引擎,它第一個支持對搜索結果進行簡單的自動分類,也是當時擁有最大資料庫的搜索引擎之一。
1998年10月,Google誕生。它是目前最流行的搜索引擎之一,具備很多獨特而且優秀的功能,並且在界面等實現了革命性創新。
1999年5月,Fast(Alltheweb)公司發布了自己的搜索引擎AllTheWeb,它的網頁搜索可利用ODP自動分類,支持Flash和pdf搜索,支持多語言搜索,還提供新聞搜索、圖像搜索、視頻、MP3、和FTP搜索,擁有極其強大的高級搜索功能。它曾經是最流行的搜索引擎之一,後在2003年2月被Overture收購。
在中文搜索引擎領域,1996年8月成立的搜狐公司是最早參與作網路信息分類導航的網站,曾一度有「出門找地圖,上網找搜狐的」美譽。由於其人工分類提交的局限性,隨著網路信息的暴增,逐漸被基於robot自動抓取智能分類的新一代信息技術取代。
台灣中正大學吳升教授所領導的GAIS實驗室1998年1月創立了Openfind中文搜索引擎,是最早開發的中文智能搜索引擎,採用GAIS實驗室推出多元排序(PolyRankTM)核心技術,截止2002年6月,宣布累計抓取網頁35億,開始進入英文搜索領域。
北大天網是教育網最流行的搜索引擎,它由北大計算機系網路與分布式系統研究室開發,於1997年10月29日正式在CERNET上提供服務, 2000年初成立天網搜索引擎新課題組,由國家973重點基礎研究發展規劃項目基金資助開發,收錄網頁約6000萬,利用教育網優勢,有強大的ftp搜索功能。
中文搜索由超鏈分析專利發明人、前Infoseek資深工程師李彥宏和好友徐勇2000年1月創建,目前支持網頁信息檢索,圖片,Flash,音樂等多媒體信息的檢索。並且在中文領域第一個開始使用ppc經營模式。
2002年開始進入搜索引擎市場的中搜是由慧聰國際主持開發的,是搜索領域的後起之秀。目前處於起步階段,技術沒有特別見長的優勢。
『貳』 搜索引擎的產生和發展經歷了哪幾個階段
第一個階段是,分類目錄的階段。
分類目錄可以稱之為「網址導航」,hao123和Yahoo是這個階段的代表。通過人工的收集和整理,把屬於各個門類的高質量網站進行羅列,減少了用戶篩選網站的復雜度,直接讓用戶進行訪問。
這是一種沒有技術含量但卻在互聯網發展早期非常好用的方案。
第二個階段是,文本檢索的階段。
文本檢索的階段採用了許多經典的信息檢索模型,如布爾模型、向量空間模型或概率模型,用來計算用戶輸入的查詢詞(Query)與網頁文本內容的相關程度。
相比於第一個階段的分類目錄方法,文本檢索階段向前跨越了「一大步」,奠定了整個搜索引擎的發展大方向。
在效果上,這一階段的解決方案仍然「差強人意」。
第三個階段是,鏈接分析的階段。
這一階段的搜索引擎在文本檢索的基礎上,深入挖掘和利用了網頁中鏈接所隱含的信息。用現在的眼光看來,網頁之間的連接關系代表了一種「推薦關系」,通過對連接的分析可以得到重要的網站。
這一階段的典型代表就是Google所提出的PageRank鏈接分析技術,通過連接分析對網頁重要性進行篩選,再結合文本檢索階段中的相關性,使得搜索質量有了質的飛躍。
第四個階段是,以用戶為中心的階段。
「以用戶為中心」並不是一句空話,而是最近這些年各大互聯網公司一直在實踐的方向。
隨著搜索引擎技術的完善,一些問題逐漸浮出了水面。
『叄』 搜索引擎的產生和發展經歷了哪幾個階段試簡述各階段的特點。.
第一個階段是,分類目錄的階段。
分類目錄可以稱之為「網址導航」,hao123和Yahoo是這個階段的代表。通過人工的收集和整理,把屬於各個門類的高質量網站進行羅列,減少了用戶篩選網站的復雜度,直接讓用戶進行訪問。
這是一種沒有技術含量但卻在互聯網發展早期非常好用的方案。
第二個階段是,文本檢索的階段。
文本檢索的階段採用了許多經典的信息檢索模型,如布爾模型、向量空間模型或概率模型,用來計算用戶輸入的查詢詞(Query)與網頁文本內容的相關程度。
相比於第一個階段的分類目錄方法,文本檢索階段向前跨越了「一大步」,奠定了整個搜索引擎的發展大方向。
在效果上,這一階段的解決方案仍然「差強人意」。
第三個階段是,鏈接分析的階段。
這一階段的搜索引擎在文本檢索的基礎上,深入挖掘和利用了網頁中鏈接所隱含的信息。用現在的眼光看來,網頁之間的鏈接關系代表了一種「推薦關系」,通過對鏈接的分析可以得到重要的網站。
這一階段的典型代表就是Google所提出的PageRank鏈接分析技術,通過鏈接分析對網頁重要性進行篩選,再結合文本檢索階段中的相關性,使得搜索質量有了質的飛躍。
第四個階段是,以用戶為中心的階段。
「以用戶為中心」並不是一句空話,而是最近這些年各大互聯網公司一直在實踐的方向。
隨著搜索引擎技術的完善,一些問題逐漸浮出了水面。比如,同樣一個查詢詞「蘋果」,在果粉和果農心中的目的顯然不同;再比如,同樣一個用戶的查詢詞,也會因為搜索行為的時間和地點的不同而產生變化。
為了提供更好的搜索體驗和搜索質量,理解用戶帶來的信息至關重要。在這個階段,機器學習技術不斷的與搜索引擎技術相融合,並大大改善了搜索質量和搜索體驗。
『肆』 搜索引擎的歷史與發展
發 展(1):世界上第一個Spider程序,是MIT Matthew Gray的World wide Web Wanderer,用於追蹤互聯網發展規模版。
發 展(權2):Excite for Web Servers.
發 展(3):Yahoo!。
發 展(4):元搜索引擎(Meta Search Engine)。
發 展(5):智能檢索的產生
發 展(6):個性化定製
發 展(7):網格技術
『伍』 搜索引擎的發展史
【第一代:分類目錄時代(人工時代)】
在自己的搜索引擎首頁設置導航網站作為自己的首頁,這個網址就是搜索引擎第一代的代表。可以從這個導航網站裡面看到,裡面幾乎都是一些分類網址,幾乎是所有在互聯網上的,這個網站裡面都一應俱全,從這里可以看出,這個網站是一個導航網站,也可以說分類目錄網站,用戶可以從這個分類目錄里找到自己想要的東西,這就是搜索引擎第一代。
【第二代:文本檢索時代(海量自動獲取與排序清單)】
到了這一代,搜索引擎查詢信息的方法則是通過用戶所輸入的查詢信息提交給伺服器,伺服器通過查閱,返回給用戶一些相關程度高的信息。這代的搜索引擎的信息檢索模型主要包括例如布爾模型、概率模型或者向量空間模型。通過這些模型來計算用戶輸入的查詢信息是否與網頁內容相關程度高低,將相關度高的則返回給用戶。採取這種模式的搜索引擎主要是一些早期的搜索引擎,例如像Alta Vista、Excite等等。這就是搜索引擎第二代。
【第三代:整合分析時代(立體搜索與結果整合)】
這一代的搜索引擎所使用的方法大概是和今天的網站的外部鏈接形式基本相同,在當時,外部鏈接代表的是一種推薦的含義,通過每個網站的推薦鏈接的數量來判斷一個網站的流行性和重要性。然後搜索引擎再結合網頁內容的重要性來和相似程度來改善用戶搜索的信息質量。這種模式的首先使用者是google,google不僅為首次使用並且大獲成功,這一成就在當時引起了學術界和其他商業搜索引擎的極度關注。後來,學術界以此成就為基礎,提出了更多的改進的鏈接分析演算法。大多數的主流搜索引擎都在使用分析鏈接技術演算法。這就是第三代搜索引擎
將用戶輸入關鍵字,反饋回來的海量信息,智能整合成一個門戶網站式的界面,讓用戶感覺每個關鍵字,都是一個完整的信息世界。而不是第二代一樣返回一個清單,整個清單夾雜著大量用戶不關心、且沒有分類的鏈接。
第三代搜索引擎的典型特徵就是:智慧整合第二代返回的信息為立體的界面。讓用戶能輕易地一眼進入到最相關的分類區域去獲取信息。
【第四代:用戶中心時代(以移動互聯網為標志的個人需求精準搜索)】
第四代,也就是大家所用的搜索引擎技術也是互聯網上面用的最普遍的,主要是以用戶為中心。當客戶輸入查詢的請求時候,同一個查詢的請求關鍵詞在用戶的背後可能是不同查詢要求。例如用戶輸入的是「蘋果」,那麼作為一個想要購買iPhone的用戶和一個果農來說,那麼要求就是大大的不一樣。甚至是同一個用戶,所查詢的關鍵詞一樣,也會因為所在的時間和所在的場合不同而返回的結果不同的所有主流搜索引擎,都在致力於解決同一個問題:怎樣才能從用戶所輸入的一個簡短的關鍵詞來判斷用戶的真正查詢請求。這一代搜索引擎主要是以用戶為中心。這就是第四代搜索引擎。
移動設備的使用者,即使不向移動搜索互聯網授權任何特徵信息,移動搜索互聯網仍然可以通過移動設備使用者在的搜索時的大量特徵,比如上網的時間習慣,操作習慣,內容歸類去逐漸勾勒出這人使用者的特徵信息,這種「推測式」演算法的可能性也是由於移動設備具有唯一性、隨身性而產生的。這好比是警察可能通過「嫌疑人」的行為習慣,去推測出他的「作案動機」與「體貌特徵」一樣。那麼,這些使用者的蛛絲馬跡,都是未來移動互聯網搜索引擎進行「商業數據挖掘」的巨大寶藏。
移動互聯網搜索的必然使命就是:提供精準到個人的搜索。可以說前三代搜索引擎,都是基於PC互聯網的搜索,而精準到個人需求的移動互聯網搜索,為「第四代搜索引擎」,那麼,最有可能實現這個第四代搜索引擎的人才,可能不來自於網路,甚至不來自於GOOGLE,而很有可能來自於亞馬遜、淘寶這些掌握了大量個人信息的商業巨頭,或者來自於跨界研究行為心理學、消費心理學、社會心理學等背景的IT研究機構或IT創業團隊,因為這些公司或機構,對人們的行為習慣背後的「動機」與「特徵」更加了如指掌。
【第五代:生活生態圈搜索時代(以物聯網為標志的實體搜索)】
第五代搜索引擎應該是基於物聯網的搜索,物聯網搜索擁有更廣闊的搜索空間,現在能預測到物聯網一個最典型的應用就是:找東西。比如遠程看管小孩、老人,或搜索走失小孩,包括精確到厘米的GPS定位,比如要去一個陌生的地方,找廁所,找窗口,甚至找警察。同時,不僅僅是找東西,甚至還有可能被找,比如泊車後超過某個時間點,讓車主動呼叫,飯煮好了,電飯堡呼叫,提前打開的空調使用室溫保持到預定溫度後,空調呼叫等等。
『陸』 搜索引擎技術發展史
搜索引擎的發展歷史
1990年,加拿大麥吉爾大學(University of McGill)計算機學院的師生開發出Archie。當時,萬維網(World Wide Web)還沒有出現,人們通過FTP來共享交流資源。Archie能定期搜集並分析FTP伺服器上的文件名信息,提供查找分別在各個FTP主機中的文件。用戶必須輸入精確的文件名進行搜索,Archie告訴用戶哪個FTP伺服器能下載該文件。雖然Archie搜集的信息資源不是網頁(HTML文件),但和搜索引擎的基本工作方式是一樣的:自動搜集信息資源、建立索引、提供檢索服務。所以,Archie被公認為現代搜索引擎的鼻祖。
Robot(機器人)一詞對編程者有特殊的意義。Computer Robot是指某個能以人類無法達到的速度不斷重復執行某項任務的自動程序。由於專門用於檢索信息的Robot程序象蜘蛛(spider)一樣在網路間爬來爬去,因此,搜索引擎的Robot程序被稱為spider程序。
1993年Matthew Gray開發了 World Wide Web Wanderer,這是第一個利用HTML網頁之間的鏈接關系來檢測萬維網規模的「機器人(Robot)」程序。開始,它僅僅用來統計互聯網上的伺服器數量,後來也能夠捕獲網址(URL)。
1994年4月,斯坦福大學(Stanford University)的兩名博士生,美籍華人Jerry Yang(楊致遠)和David Filo共同創辦了Yahoo。隨著訪問量和收錄鏈接數的增長,Yahoo目錄開始支持簡單的資料庫搜索。因為Yahoo!的數據是手工輸入的,所以不能真正被歸為搜索引擎,事實上只是一個可搜索的目錄。雅虎於2002年12月23日收購inktomi,2003年7月14日收購包括Fast和Altavista在內的Overture,2003年11月,Yahoo全資收購3721公司。
1994年初,華盛頓大學(University of Washington )的學生Brian Pinkerton開始了他的小項目WebCrawler。1994年4月20日,WebCrawler正式亮相時僅包含來自6000個伺服器的內容。WebCrawler是互聯網上第一個支持搜索文件全部文字的全文搜索引擎,在它之前,用戶只能通過URL和摘要搜索,摘要一般來自人工評論或程序自動取正文的前100個字。
1994年7月,卡內基•梅隆大學(Carnegie Mellon University) 的Michael Mauldin將John Leavitt的spider程序接入到其索引程序中,創建了Lycos。除了相關性排序外,Lycos還提供了前綴匹配和字元相近限制,Lycos第一個在搜索結果中使用了網頁自動摘要,而最大的優勢還是它遠勝過其它搜索引擎的數據量。
1994年底,Infoseek正式亮相。其友善的界面,大量的附加功能,使之和Lycos一樣成為搜索引擎的重要代表。
1995年,一種新的搜索引擎形式出現了——元搜索引擎(A Meta Search Engine Rounp)。用戶只需提交一次搜索請求,由元搜索引擎負責轉換處理,提交給多個預先選定的獨立搜索引擎,並將從各獨立搜索引擎返回的所有查詢結果,集中起來處理後再返回給用戶。第一個元搜索引擎,是Washington大學碩士生 Eric Selberg 和 Oren Etzioni 的 Metacrawler。
1995年12月,DEC的正式發布AltaVista。AltaVista是第一個支持自然語言搜索的搜索引擎,第一個實現高級搜索語法的搜索引擎(如AND, OR, NOT等)。用戶可以用AltaVista搜索新聞組(Newsgroups)的內容並從互聯網上獲得文章,還可以搜索圖片名稱中的文字、搜索Titles、搜索Java applets、搜索ActiveX objects。AltaVista也聲稱是第一個支持用戶自己向網頁索引庫提交或刪除URL的搜索引擎,並能在24小時內上線。AltaVista最有趣的新功能之一,是搜索有鏈接指向某個URL的所有網站。在面向用戶的界面上,AltaVista也作了大量革新。它在搜索框區域下放了「tips」以幫助用戶更好的表達搜索式,這些小tip經常更新,這樣,在搜索過幾次以後,用戶會看到很多他們可能從來不知道的的有趣功能。這系列功能,逐漸被其它搜索引擎廣泛採用。1997年,AltaVista發布了一個圖形演示系統LiveTopics,幫助用戶從成千上萬的搜索結果中找到想要的。
1995年9月26日,加州伯克利分校助教Eric Brewer、博士生Paul Gauthier創立了Inktomi,1996年5月20日,Inktomi公司成立,強大的HotBot出現在世人面前。聲稱每天能抓取索引1千萬頁以上,所以有遠超過其它搜索引擎的新內容。HotBot也大量運用cookie儲存用戶的個人搜索喜好設置。
1997年8月,Northernlight搜索引擎正式現身。它曾是擁有最大資料庫的搜索引擎之一,它沒有Stop Words,它有出色的Current News、7,100多出版物組成的Special Collection、良好的高級搜索語法,第一個支持對搜索結果進行簡單的自動分類。
1998年10月之前,Google只是斯坦福大學(Stanford University)的一個小項目BackRub。1995年博士生Larry Page開始學習搜索引擎設計,於1997年9月15日注冊了google.com的域名,1997年底,在Sergey Brin和Scott Hassan、Alan Steremberg的共同參與下,BachRub開始提供Demo。1999年2月,Google完成了從Alpha版到Beta版的蛻變。Google公司則把1998年9月27日認作自己的生日。Google以網頁級別(Pagerank)為基礎,判斷網頁的重要性,使得搜索結果的相關性大大增強。Google公司的奇客(Geek)文化氛圍、不作惡(Don』t be evil)的理念,為Google贏得了極高的口碑和品牌美譽。2006年4月,Google宣布其中文名稱「谷歌」,這是Google第一個在非英語國家起的名字。
Fast(Alltheweb)公司創立於1997年,是挪威科技大學(NTNU)學術研究的副產品。1999年5月,發布了自己的搜索引擎AllTheWeb。Fast創立的目標是做世界上最大和最快的搜索引擎,幾年來庶幾近之。Fast(Alltheweb)的網頁搜索可利用ODP自動分類,支持Flash和pdf搜索,支持多語言搜索,還提供新聞搜索、圖像搜索、視頻、MP3、和FTP搜索,擁有極其強大的高級搜索功能。(2003年2月25日,Fast的互聯網搜索部門被Overture收購)。
1996年8月,sohu公司成立,製作中文網站分類目錄,曾有「出門找地圖,上網找搜狐」的美譽。隨著互聯網網站的急劇增加,這種人工編輯的分類目錄已經不適應。sohu於2004年8月獨立域名的搜索網站「搜狗」,自稱「第三代搜索引擎」。
Openfind 創立於1998年1月,其技術源自台灣中正大學吳升教授所領導的GAIS實驗室。Openfind起先只做中文搜索引擎,鼎盛時期同時為三大著名門戶新浪、奇摩、雅虎提供中文搜索引擎,但2000年後市場逐漸被Bai和Google瓜分。2002年6月,Openfind重新發布基於GAIS30 Project的Openfind搜索引擎Beta版,推出多元排序(PolyRankTM),宣布累計抓取網頁35億,開始進入英文搜索領域。
2000年1月,兩位北大校友,超鏈分析專利發明人、前Infoseek資深工程師李彥宏與好友徐勇(加州伯克利分校博士後)在北京中關村創立了網路(Bai)公司。2001年8月發布Bai.com搜索引擎Beta版(此前Bai只為其它門戶網站搜狐新浪Tom等提供搜索引擎),2001年10月22日正式發布Bai搜索引擎,專注於中文搜索。Bai搜索引擎的其它特色包括:網路快照、網頁預覽/預覽全部網頁、相關搜索詞、錯別字糾正提示、mp3搜索、Flash搜索。2002年3月閃電計劃(Blitzen Project)開始後,技術升級明顯加快。後推出貼吧、知道、地圖、國學、網路等一系列產品,深受網民歡迎。2005年8月5日在納斯達克上市,發行價為USD 27.00,代號為BIDU。開盤價USD 66.00,以USD 122.54收盤,漲幅353.85%,創下了5年以來美國股市上市新股當日漲幅最高紀錄。
『柒』 搜索引擎發展的歷史包括哪幾個時期,分別有什麼不同特點
第一代
分類目錄時代
不知道大家時候在自己的搜索引擎首頁是否有設置過導航網站這個網址作為自己的首頁呢?其實這個網址就是搜索引擎第一代的代表。我們可以從這個導航網站這個網站裡面看到,裡面幾乎都是一些分類網址,幾乎在互聯網上的,這個網站裡面都一應俱全,從這里我們可以看出,這個網站是一個導航網站,也可以說分類目錄網站,用戶可以從這個分類目錄里找到自己想要的東西,這就是搜索引擎第一代。
第二代
文本檢索時代
到了這一代,搜索引擎查詢信息的方法則是通過用戶所輸入的查詢信息提交給伺服器,伺服器通過查閱,返回給用戶一些相關程度高的信息。這代的搜索引擎的信息檢索模型主要包括例如布爾模型、概率模型或者向量空間模型。通過這些模型來計算用戶輸入的查詢信息是否與網頁內容相關程度高低,將相關度高的則返回給用戶。採取這種模式的搜索引擎主要是一些早期的搜索引擎,例如像Alta Vista、Excite等等。這就是搜索引擎第二代。
第三代
整合分析時代
這一代的搜索引擎所使用的方法大概是和我們今天的網站的外部鏈接形式基本相同,在當時,外部鏈接代表的是一種推薦的含義,通過每個網站的推薦鏈接的數量來判斷一個網站的流行性和重要性。然後搜索引擎再結合網頁內容的重要性來和相似程度來改善用戶搜索的信息質量。這種模式的首先使用者是google,google不僅為首次使用並且大獲成功,這一成就在當時引起了學術界和其他商業搜索引擎的極度關注。後來,學術界以此成就為基礎,提出了更多的改進的鏈接分析演算法。大多數的主流搜索引擎都在使用分析鏈接技術演算法。這就是第三代搜索引擎
將用戶輸入關鍵字,反饋回來的海量信息,智能整合成一個門戶網站式的界面,讓用戶感覺每個關鍵字,都是一個完整的信息世界。而不是第二代一樣返回一個清單,整個清單夾雜著大量用戶不關心、且沒有分類的鏈接。第三代搜索引擎的典型特徵就是:智慧整合第二代返回的信息為立體的界面。讓用戶能輕易地一眼進入到最相關的分類區域去獲取信息。
第四代
編輯
用戶中心時代
第四代,也就是我們所用的搜索引擎技術也是互聯網上面用的最普遍的。主要是以用戶為中心。當客戶輸入查詢的請求時候,同一個查詢的請求關鍵詞在用戶的背後可能是不同查詢要求。例如用戶輸入的是「蘋果」,那麼作為一個想要購買iPhone的用戶和一個果農來說,那麼要求就是大大的不一樣。甚至是同一個用戶,所查詢的關鍵詞一樣,也會因為所在的時間和所在的場合不同而返回的結果不同的所有主流搜索引擎,都在致力於解決同一個問題:怎樣才能從用戶所輸入的一個簡短的關鍵詞來判斷用戶的真正查詢請求。這一代搜索引擎主要是以用戶為中心。這就是第四代搜索引擎。
移動設備的使用者,即使不向移動搜索互聯網授權任何特徵信息,移動搜索互聯網仍然可以通過移動設備使用者在的搜索時的大量特徵,比如上網的時間習慣,操作習慣,內容歸類去逐漸勾勒出這人使用者的特徵信息,這種「推測式」演算法的可能性也是由於移動設備具有唯一性、隨身性而產生的。這好比是警察可能通過「嫌疑人」的行為習慣,去推測出他的「作案動機」與「體貌特徵」一樣。那麼,這些使用者的蛛絲馬跡,都是未來移動互聯網搜索引擎進行「商業數據挖掘」的巨大寶藏。
移動互聯網搜索的必然使命,就是:提供精準到個人的搜索。可以說前三代搜索引擎,都是基於PC互聯網的搜索,而精準到個人需求的移動互聯網搜索,為「第四代搜索引擎」,那麼,最有可能實現這個第四代搜索引擎的人才,可能不來自於網路,甚至不來自於GOOGLE,而很有可能來自於亞馬遜、淘寶這些掌握了大量個人信息的商業巨頭,或者來自於跨界研究行為心理學、消費心理學、社會心理學等背景的IT研究機構或IT創業團隊,因為這些公司或機構,對人們的行為習慣背後的「動機」與「特徵」更加了如指掌。
第五代
生活生態圈
第五代搜索引擎應該是基於物聯網的搜索,物聯網搜索擁有更廣闊的搜索空間,能預測到物聯網一個最典型的應用就是:找東西!比如遠程看管小孩、老人,或搜索走失小孩,包括精確到厘米的GPS定位,比如你去一個陌生的地方,找廁所,找窗口,甚至找警察。同時,不僅僅是你找東西,甚至還有可能東西找你,比如泊車後超過某個時間點,讓車主動呼叫你,飯煮好了,電飯堡呼叫你,提前打開的空調使用室溫保持到預定溫度後,空調呼叫你等等。
總結
基於第四代搜索引擎未能解決的問題,很多主流的搜索引擎都做了許多的技術嘗試,比如像根據用戶所輸入的查詢請求和用戶所處在的地理位置來判斷用戶的真正查詢請求,又或者根據用戶輸入的查詢信息和用戶之前訪問的歷史記錄相結合來判斷用戶的真正查詢請求,但是在效果上卻是微乎其微。這個問題何時才能突破,讓我們拭目以待吧。
『捌』 誰知道互聯網搜索引擎的發展歷史
在互聯網發展初期,網站相對較少,信息查找比較容易。然而伴隨互聯網爆炸性的發展,普通網路用戶想找到所需的資料簡直如同大海撈針,這時為滿足大眾信息檢索需求的專業搜索網站便應運而生了。
現代意義上的搜索引擎的祖先,是1990年由蒙特利爾大學學生Alan Emtage發明的Archie。雖然當時World Wide Web還未出現,但網路中文件傳輸還是相當頻繁的,而且由於大量的文件散布在各個分散的FTP主機中,查詢起來非常不便,因此Alan Archie工作原理與現在的搜索引擎已經很接近,它依靠腳本程序自動搜索網上的文件,然後對有關信息進行索引,供使用者以一定的表達式查詢。由於Archie深受用戶歡迎,受其啟發,美國內華達System Computing Services大學於1993年開發了另一個與之非常相似的搜索工具,不過此時的搜索工具除了索引文件外,已能檢索網頁。
當時,「機器人」一詞在編程者中十分流行。電腦「機器人」(Computer Robot)是指某個能以人類無法達到的速度不間斷地執行某項任務的軟體程序。由於專門用於檢索信息的「機器人」程序象蜘蛛一樣在網路間爬來爬去,因此,搜索引擎的「機器人」程序就被稱為「蜘蛛」程序。世界上第一個用於監測互聯網發展規模的「機器人」程序是Matthew Gray開發的World wide Web Wanderer。剛開始它只用來統計互聯網上的伺服器數量,後來則發展為能夠檢索網站域名。與Wanderer相對應,Martin Koster於1993年10月創建了ALIWEB,它是Archie的HTTP版本。ALIWEB不使用「機器人」程序,而是靠網站主動提交信息來建立自己的鏈接索引,類似於現在我們熟知的Yahoo。
隨著互聯網的迅速發展,使得檢索所有新出現的網頁變得越來越困難,因此,在Matthew Gray的Wanderer基礎上,一些編程者將傳統的「蜘蛛」程序工作原理作了些改進。其設想是,既然所有網頁都可能有連向其他網站的鏈接,那麼從跟蹤一個網站的鏈接開始,就有可能檢索整個互聯網。到1993年底,一些基於此原理的搜索引擎開始紛紛涌現,其中以JumpStation、The World Wide Web Worm(Goto的前身,也就是今天Overture),和Repository-Based Software Engineering (RBSE) spider最負盛名。然而JumpStation和WWW Worm只是以搜索工具在資料庫中找到匹配信息的先後次序排列搜索結果,因此毫無信息關聯度可言。而RBSE是第一個在搜索結果排列中引入關鍵字串匹配程度概念的引擎 最早現代意義上的搜索引擎出現於1994年7月。當時Michael Mauldin將John Leavitt的蜘蛛程序接入到其索引程序中,創建了大家現在熟知的Lycos。同年4月,斯坦福(Stanford)大學的兩名博士生,David Filo和美籍華人楊致遠(Gerry Yang)共同創辦了超級目錄索引Yahoo,並成功地使搜索引擎的概念深入人心。從此搜索引擎進入了高速發展時期。目前,互聯網上有名有姓的搜索引擎已達數百家,其檢索的信息量也與從前不可同日而語。比如最近風頭正勁的Google,其資料庫中存放的網頁已達30億之巨!
隨著互聯網規模的急劇膨脹,一家搜索引擎光靠自己單打獨斗已無法適應目前的市場狀況,因此現在搜索引擎之間開始出現了分工協作,並有了專業的搜索引擎技術和搜索資料庫服務提供商。象國外的Inktomi,它本身並不是直接面向用戶的搜索引擎,但向包括Overture(原GoTo)、LookSmart、MSN、HotBot等在內的其他搜索引擎提供全文網頁搜索服務。國內的網路也屬於這一類(注),搜狐和新浪用的就是它的技術。因此從這個意義上說,它們是搜索引擎的搜索引擎。
『玖』 搜索引擎發展歷程誰知道具體的
1990年:第一個互聯網上的搜索引擎Archie出現,用於搜索FTP伺服器上的文件。
1993年:6月,第一個Web搜索引擎World Wide Web Wandere出現,它只用來收集網址。10月,第二個Web搜索引擎ALIWEB出現。開始索引標題標簽等信息。
1994年:1月,早起最重要的搜索引擎之一Infoseek創立。(網路創始人李彥宏就是其核心工程師之一)
4月,雅虎Yahoo!創立。同月,第一個全文搜索引擎(索引文件全部內容)WebCrawler推出。
6月,Lycos創立。迅速成為最受歡迎的搜索引擎之一。
1995年:4月,雅虎Yahoo!正式成立。
12月,Infoseek成為網景瀏覽器的默認搜索引擎。同月,Alta Vista創立,迅速成為搜索引擎發展中最受歡迎的,堪稱當時的谷歌Glloge。
1996年:4月,雅虎Yahoo!上市。
1997年:4月,Ask Jeeves上線,唯一一個至今仍真實存在並有一定市場份額的早起搜索引擎。
1998年:9月,谷歌Google正式成立。
1999年:6月,曾經流行一時的搜索引擎Infoseek消失。
2000年:1月18日:網路成立。
7月,雅虎Yahoo!使用谷歌Google搜索數據。
2001年:10月,網路作為搜索引擎正式上線。
2002年:3月,谷歌Google Adwords 推出PPC形式,也就是按點擊付費。
2003年:7月,雅虎Yahoo!將除了谷歌Google之外的幾乎所有主流搜索技術收歸旗下。2004年:8月,谷歌Google上市。
2005年:8月,網路上市。
2006年:9月,MSN網路品牌全部改為Live、並做了大量推廣,Google仍然占最大地位。
2007年:3月,谷歌Google開始提供類似網站聯盟的按轉化付費的廣告形式。
2009年:6月,微軟Live Search 改名為必應(Bing)
7月29,雅虎Yahoo!被自己親手培養的Google谷歌徹底打敗在搜索引擎戰場。
2010年:8月,Yahoo!雅虎開始使用必應Bing搜索數據。
2011年:2月,Google谷歌推出Panda更新,旨在減少搜索結果中低質量頁面。對seo優化業績影響深遠。
2010年8月,NetMarketShare 統計數據,全球搜索引擎市場份額中谷歌Google占據�.73,佔世界絕對領先地位,網路由於中國搜索用戶數量龐大,搜索量排在第三位。但是國外使用網路者很少。
『拾』 請講一下搜索引擎的歷史
搜索引擎的發展歷史
1990年,加拿大麥吉爾大學(University of McGill)計算機學院的師生開發出Archie。當時,萬維網(World Wide Web)還沒有出現,人們通過FTP來共享交流資源。Archie能定期搜集並分析FTP伺服器上的文件名信息,提供查找分別在各個FTP主機中的文件。用戶必須輸入精確的文件名進行搜索,Archie告訴用戶哪個FTP伺服器能下載該文件。雖然Archie搜集的信息資源不是網頁(HTML文件),但和搜索引擎的基本工作方式是一樣的:自動搜集信息資源、建立索引、提供檢索服務。所以,Archie被公認為現代搜索引擎的鼻祖。
Robot(機器人)一詞對編程者有特殊的意義。Computer Robot是指某個能以人類無法達到的速度不斷重復執行某項任務的自動程序。由於專門用於檢索信息的Robot程序象蜘蛛(spider)一樣在網路間爬來爬去,因此,搜索引擎的Robot程序被稱為spider程序。
1993年Matthew Gray開發了 World Wide Web Wanderer,這是第一個利用HTML網頁之間的鏈接關系來檢測萬維網規模的「機器人(Robot)」程序。開始,它僅僅用來統計互聯網上的伺服器數量,後來也能夠捕獲網址(URL)。
1994年4月,斯坦福大學(Stanford University)的兩名博士生,美籍華人Jerry Yang(楊致遠)和David Filo共同創辦了Yahoo。隨著訪問量和收錄鏈接數的增長,Yahoo目錄開始支持簡單的資料庫搜索。因為Yahoo!的數據是手工輸入的,所以不能真正被歸為搜索引擎,事實上只是一個可搜索的目錄。雅虎於2002年12月23日收購inktomi,2003年7月14日收購包括Fast和Altavista在內的Overture,2003年11月,Yahoo全資收購3721公司。
1994年初,華盛頓大學(University of Washington )的學生Brian Pinkerton開始了他的小項目WebCrawler。1994年4月20日,WebCrawler正式亮相時僅包含來自6000個伺服器的內容。WebCrawler是互聯網上第一個支持搜索文件全部文字的全文搜索引擎,在它之前,用戶只能通過URL和摘要搜索,摘要一般來自人工評論或程序自動取正文的前100個字。
1994年7月,卡內基·梅隆大學(Carnegie Mellon University) 的Michael Mauldin將John Leavitt的spider程序接入到其索引程序中,創建了Lycos。除了相關性排序外,Lycos還提供了前綴匹配和字元相近限制,Lycos第一個在搜索結果中使用了網頁自動摘要,而最大的優勢還是它遠勝過其它搜索引擎的數據量。
1994年底,Infoseek正式亮相。其友善的界面,大量的附加功能,使之和Lycos一樣成為搜索引擎的重要代表。
1995年,一種新的搜索引擎形式出現了——元搜索引擎(A Meta Search Engine Rounp)。用戶只需提交一次搜索請求,由元搜索引擎負責轉換處理,提交給多個預先選定的獨立搜索引擎,並將從各獨立搜索引擎返回的所有查詢結果,集中起來處理後再返回給用戶。第一個元搜索引擎,是Washington大學碩士生 Eric Selberg 和 Oren Etzioni 的 Metacrawler。
1995年12月,DEC的正式發布AltaVista。AltaVista是第一個支持自然語言搜索的搜索引擎,第一個實現高級搜索語法的搜索引擎(如AND, OR, NOT等)。用戶可以用AltaVista搜索新聞組(Newsgroups)的內容並從互聯網上獲得文章,還可以搜索圖片名稱中的文字、搜索Titles、搜索Java applets、搜索ActiveX objects。AltaVista也聲稱是第一個支持用戶自己向網頁索引庫提交或刪除URL的搜索引擎,並能在24小時內上線。AltaVista最有趣的新功能之一,是搜索有鏈接指向某個URL的所有網站。在面向用戶的界面上,AltaVista也作了大量革新。它在搜索框區域下放了「tips」以幫助用戶更好的表達搜索式,這些小tip經常更新,這樣,在搜索過幾次以後,用戶會看到很多他們可能從來不知道的的有趣功能。這系列功能,逐漸被其它搜索引擎廣泛採用。1997年,AltaVista發布了一個圖形演示系統LiveTopics,幫助用戶從成千上萬的搜索結果中找到想要的。
1995年9月26日,加州伯克利分校助教Eric Brewer、博士生Paul Gauthier創立了Inktomi,1996年5月20日,Inktomi公司成立,強大的HotBot出現在世人面前。聲稱每天能抓取索引1千萬頁以上,所以有遠超過其它搜索引擎的新內容。HotBot也大量運用cookie儲存用戶的個人搜索喜好設置。
1997年8月,Northernlight搜索引擎正式現身。它曾是擁有最大資料庫的搜索引擎之一,它沒有Stop Words,它有出色的Current News、7,100多出版物組成的Special Collection、良好的高級搜索語法,第一個支持對搜索結果進行簡單的自動分類。
1998年10月之前,Google只是斯坦福大學(Stanford University)的一個小項目BackRub。1995年博士生Larry Page開始學習搜索引擎設計,於1997年9月15日注冊了google.com的域名,1997年底,在Sergey Brin和Scott Hassan、Alan Steremberg的共同參與下,BachRub開始提供Demo。1999年2月,Google完成了從Alpha版到Beta版的蛻變。Google公司則把1998年9月27日認作自己的生日。Google以網頁級別(Pagerank)為基礎,判斷網頁的重要性,使得搜索結果的相關性大大增強。Google公司的奇客(Geek)文化氛圍、不作惡(Don』t be evil)的理念,為Google贏得了極高的口碑和品牌美譽。2006年4月,Google宣布其中文名稱「谷歌」,這是Google第一個在非英語國家起的名字。
Fast(Alltheweb)公司創立於1997年,是挪威科技大學(NTNU)學術研究的副產品。1999年5月,發布了自己的搜索引擎AllTheWeb。Fast創立的目標是做世界上最大和最快的搜索引擎,幾年來庶幾近之。Fast(Alltheweb)的網頁搜索可利用ODP自動分類,支持Flash和pdf搜索,支持多語言搜索,還提供新聞搜索、圖像搜索、視頻、MP3、和FTP搜索,擁有極其強大的高級搜索功能。(2003年2月25日,Fast的互聯網搜索部門被Overture收購)。
1996年8月,sohu公司成立,製作中文網站分類目錄,曾有「出門找地圖,上網找搜狐」的美譽。隨著互聯網網站的急劇增加,這種人工編輯的分類目錄已經不適應。sohu於2004年8月獨立域名的搜索網站「搜狗」,自稱「第三代搜索引擎」。
Openfind 創立於1998年1月,其技術源自台灣中正大學吳升教授所領導的GAIS實驗室。Openfind起先只做中文搜索引擎,鼎盛時期同時為三大著名門戶新浪、奇摩、雅虎提供中文搜索引擎,但2000年後市場逐漸被Bai和Google瓜分。2002年6月,Openfind重新發布基於GAIS30 Project的Openfind搜索引擎Beta版,推出多元排序(PolyRankTM),宣布累計抓取網頁35億,開始進入英文搜索領域。
2000年1月,兩位北大校友,超鏈分析專利發明人、前Infoseek資深工程師李彥宏與好友徐勇(加州伯克利分校博士後)在北京中關村創立了網路(Bai)公司。2001年8月發布Bai.com搜索引擎Beta版(此前Bai只為其它門戶網站搜狐新浪Tom等提供搜索引擎),2001年10月22日正式發布Bai搜索引擎,專注於中文搜索。Bai搜索引擎的其它特色包括:網路快照、網頁預覽/預覽全部網頁、相關搜索詞、錯別字糾正提示、mp3搜索、Flash搜索。2002年3月閃電計劃(Blitzen Project)開始後,技術升級明顯加快。後推出貼吧、知道、地圖、國學、網路等一系列產品,深受網民歡迎。2005年8月5日在納斯達克上市,發行價為USD 27.00,代號為BIDU。開盤價USD 66.00,以USD 122.54收盤,漲幅353.85%,創下了5年以來美國股市上市新股當日漲幅最高紀錄。
2003年12月23日,原慧聰搜索正式獨立運做,成立了中國搜索。2004年2月,中國搜索發布桌面搜索引擎網路豬1.0,2006年3月中搜將網路豬更名為IG(Internet Gateway) 。
2005年6月,新浪正式推出自主研發的搜索引擎「愛問」。