從百度李彥宏看世界搜索引擎技術(shù)發(fā)展史

從百度李彥宏看世界搜索引擎技術(shù)發(fā)展史

33歲的李彥宏剛做了一個(gè)小手術(shù)，正在醫(yī)院療養(yǎng)。躺在病床上，雖然身體不舒服，可這并不能阻止他思考百度的未來。此前，百度一直以"在你成功背后"作為公司的經(jīng)營信條，但這種模式的局限性已經(jīng)顯現(xiàn)，他要為百度找到一個(gè)最適合自己的、最有潛力的發(fā)展模式。這也是李彥宏從純粹的技術(shù)工程師轉(zhuǎn)化為公司的創(chuàng)建者和領(lǐng)導(dǎo)者的關(guān)鍵一環(huán)。在商業(yè)素養(yǎng)方面的積累絲毫不遜色于專業(yè)的管理人才，這使李彥宏和其他技術(shù)工程師有了顯著不同。這與他在硅谷的工作經(jīng)歷和思考亦密不可分。在硅谷，李彥宏親眼目睹了Infoseek在股市上的無限風(fēng)光及后來的慘淡經(jīng)營，他曾經(jīng)對(duì)該公司及硅谷IT業(yè)變遷進(jìn)行了深刻思考。這些思考集中體現(xiàn)在1998年李彥宏撰寫的《硅谷商戰(zhàn)》中，該書對(duì)1994年以來硅谷幾家大企業(yè)之間的商業(yè)競爭進(jìn)行了深刻探討，書中分析道："技術(shù)本身不是唯一的決定性因素，商戰(zhàn)策略才是決勝千里的關(guān)鍵；要允許失?。蛔尯弥饕庥袟l件孵化；要容忍有創(chuàng)造性的混亂；要有福同享……"可能是寫作《硅谷商戰(zhàn)》而獲得了敏銳的商業(yè)觸覺，憑借對(duì)搜索引擎行業(yè)的深刻理解，33歲的李彥宏覺得百度必須擺脫只給門戶網(wǎng)站提供技術(shù)、過度依賴門戶網(wǎng)站的狀態(tài)，獨(dú)立做面向終端用戶的搜索引擎公司，才可能有大的發(fā)展。認(rèn)準(zhǔn)了做獨(dú)立搜索引擎公司做獨(dú)立搜索引擎公司的商業(yè)模式是什么？李彥宏選定了競價(jià)排名。提到競價(jià)排名，我們必須回顧一下世界搜索引擎技術(shù)的發(fā)展歷史。1996年左右，真正意義上的互聯(lián)網(wǎng)搜索引擎技術(shù)才開始為人所接受。但是，搜索引擎技術(shù)馬上遇到了一個(gè)傳統(tǒng)的情報(bào)檢索、信息檢索從沒遇到過的問題--作弊。某個(gè)網(wǎng)頁的擁有者或這個(gè)網(wǎng)站的站長，都希望自己的網(wǎng)頁、網(wǎng)站在搜索結(jié)果里排在最前面，讓人家最先看到。由于當(dāng)時(shí)的搜索引擎技術(shù)主要是基于詞頻統(tǒng)計(jì)原理設(shè)計(jì)的，知道了這個(gè)原理，網(wǎng)站擁有者就很容易作弊了--比如說，對(duì)于IBM這個(gè)詞匯，雖然我不是IBM公司的，但是我做的業(yè)務(wù)與其有關(guān)，我就在自己的網(wǎng)頁上輸入IBM這個(gè)詞，重復(fù)100遍，或者在自己的網(wǎng)頁題目中多寫幾遍，就很容易排在以IBM為關(guān)鍵詞的搜索結(jié)果首頁的最前面了。這給搜索結(jié)果的客觀性帶來了巨大挑戰(zhàn)。1996年，李彥宏負(fù)責(zé)《華爾街日?qǐng)?bào)》網(wǎng)絡(luò)版實(shí)時(shí)金融信息系統(tǒng)的設(shè)計(jì)。李彥宏很喜歡用當(dāng)時(shí)的搜索引擎，但他也發(fā)現(xiàn)了搜索引擎作弊的問題很嚴(yán)重。1996年4月，李彥宏最先創(chuàng)建了超鏈分析(ESP)技術(shù)，并將它成功地應(yīng)用到Infoseek的G的搜索引擎中，這個(gè)技術(shù)率先解決了如何將基于網(wǎng)頁質(zhì)量的排序與基于相關(guān)性的排序完美結(jié)合的問題，并獲得了美國專利。G圖像搜索引擎是他的另一項(xiàng)極具應(yīng)用價(jià)值的技術(shù)創(chuàng)新。超鏈分析技術(shù)的實(shí)質(zhì)是，通過別人引用你的網(wǎng)站內(nèi)容的次數(shù)，來確定你在搜索引擎里的排序，被引用的次數(shù)越多，排名就越靠前。這有點(diǎn)類似判斷一篇學(xué)術(shù)論文價(jià)值的方法，發(fā)表的論文質(zhì)量高不高，不是作者說了算，而是看你的論文被引用了多少次、有多少人引用，被引用的次數(shù)越多，論文質(zhì)量就較高，影響力就較大。超鏈分析標(biāo)志著世界互聯(lián)網(wǎng)搜索引擎進(jìn)入了第二個(gè)技術(shù)時(shí)代。1999年底，全世界主流的搜索引擎基本上都使用了超鏈分析技術(shù)。但是，搜索引擎發(fā)展到這個(gè)階段，并沒有解決搜索引擎公司的發(fā)展動(dòng)力，也就是商業(yè)模式問題。擁有一項(xiàng)技術(shù)，無論多么先進(jìn)，如果不能夠產(chǎn)生相應(yīng)的經(jīng)濟(jì)回報(bào)，還是不能生存下去。早期的網(wǎng)民或許會(huì)記得一些曾經(jīng)知名的搜索引擎公司，如Infoseek、LookSmart、Inktomi，但后來這些公司先后都消失了。是它們的搜索引擎技術(shù)做得不好嗎？不是！而是因?yàn)榈谝淮偷诙夹g(shù)都沒有解決搜索引擎的商業(yè)模式問題。轉(zhuǎn)機(jī)出現(xiàn)在20世紀(jì)90年代末。此時(shí)，美國有一家名叫G的搜索引擎公司，它發(fā)明了付費(fèi)排名的商業(yè)模式：對(duì)于商業(yè)類詞匯，以關(guān)鍵詞競價(jià)，按競價(jià)網(wǎng)站的出價(jià)多少，決定搜索結(jié)果的排列順序；在搜索結(jié)果被點(diǎn)擊時(shí)支付競價(jià)費(fèi)用，也稱PPC(payperclick)。這實(shí)質(zhì)上是一種按效果付費(fèi)的網(wǎng)絡(luò)推廣方式，用少量的投入就可以給企業(yè)帶來大量的潛在客戶，有效地提升企業(yè)的銷售額和品牌知名度。比如，當(dāng)有人輸入一個(gè)"鮮花速遞"檢索請(qǐng)求的時(shí)候，那些愿意為鮮花速遞付費(fèi)的網(wǎng)站，理論上講就是跟鮮花速遞相關(guān)的網(wǎng)站，而這些網(wǎng)站有可能通過被檢索而獲得商業(yè)回報(bào)。報(bào)紙、電視等傳統(tǒng)媒體，固定成本和制作成本很高，因此投放廣告的門檻也很高。G發(fā)明的這種網(wǎng)絡(luò)推廣模式，大大降低了企業(yè)的推廣成本，讓中小企業(yè)也能負(fù)擔(dān)得起。在任何社會(huì)中，大企業(yè)總是少數(shù)，中小企業(yè)群非常龐大，雖然它們的推廣投放額度不高，但由于數(shù)量龐大，而互聯(lián)網(wǎng)又能以很低的成本支持這種小額消費(fèi)，因此這種商業(yè)模式產(chǎn)生的商業(yè)回報(bào)非常驚人。這種針對(duì)中小企業(yè)的商業(yè)模式，其實(shí)暗合了一個(gè)美國人的理論。美國《連線》雜志主編克里斯·安德森是一個(gè)喜歡從數(shù)字中發(fā)現(xiàn)趨勢(shì)的人。一天，他和朋友，eCast首席執(zhí)行官范·阿迪布會(huì)面，范·阿迪布說他從數(shù)字音樂點(diǎn)唱統(tǒng)計(jì)數(shù)字中發(fā)現(xiàn)了一個(gè)秘密：聽眾對(duì)98%的非熱門音樂有著無限的需求，非熱門的音樂集合市場無比巨大。他把這稱為"98法則"。這個(gè)有悖常識(shí)的"98法則"改變了安德森的研究方向，他開始系統(tǒng)研究亞馬遜、狂想曲公司、Blog、Google、eBay、Netflix等互聯(lián)網(wǎng)零售商的銷售數(shù)據(jù)，并與沃爾瑪?shù)葌鹘y(tǒng)零售商的銷售數(shù)據(jù)進(jìn)行對(duì)比，最后他觀察到一種符合統(tǒng)計(jì)規(guī)律的現(xiàn)象--大數(shù)定律。這并不稀奇，因?yàn)樵S多現(xiàn)象都符合大數(shù)定律，即呈山峰狀中間高兩端低的概率分布模式。安德森的新發(fā)現(xiàn)是：從前那些因概率低或需求少而不被關(guān)注的尾巴部分，卻成了新興互聯(lián)網(wǎng)產(chǎn)業(yè)的商機(jī)。這就是后來風(fēng)靡全球的著名的"長尾理論"：由于成本和效率的因素，過去人們只關(guān)注重要的人或重要的事，如果用正態(tài)分布曲線來描繪這些人或事，人們只關(guān)注曲線的"頭部"，而將曲線"尾部"忽略。在網(wǎng)絡(luò)時(shí)代，由于關(guān)注的成本大大降低，人們有可能關(guān)注"尾部"，關(guān)注"尾部"產(chǎn)生的總體效益甚至?xí)^"頭部"。傳統(tǒng)的營銷理論認(rèn)為，80%的利潤是由20%的客戶提供的，即所謂的"二八定律"。在此指導(dǎo)下，企業(yè)的服務(wù)資源主要放在20%的VIP客戶上。而長尾理論是對(duì)傳統(tǒng)"二八定律"的徹底顛覆，被硅谷奉為圭臬。1998年2月，G首推付費(fèi)排名獲得巨大成功。1999年，G在納斯達(dá)克上市，因比其他搜索引擎公司收入高，股價(jià)曾達(dá)30多美元。2001年，G更名為Overture。付費(fèi)排名模式扭轉(zhuǎn)了搜索引擎的敗局，也使搜索引擎獨(dú)立出來、以專門的商業(yè)機(jī)構(gòu)進(jìn)行運(yùn)作成為可能。這給了李彥宏啟示，百度要想做獨(dú)立的搜索引擎網(wǎng)站，其商業(yè)模式可以借鑒G的付費(fèi)排名模式。經(jīng)過縝密思考，結(jié)合中國市場的實(shí)際，李彥宏將百度即將采取的商業(yè)模式定為了競價(jià)排名。今天看來，"競價(jià)排名"這個(gè)詞，也有不準(zhǔn)確的地方。比如，可以上競價(jià)排名，并不全