DIV CSS 佈局教程網

深度揭秘:Google究竟是如何運轉的?
編輯:谷歌搜索算法     
這篇文章名叫How Google Works,網上分成14頁,非常全面地解釋了Google是怎麼轉起來的,而且還相當深入——對於報刊而言來說已屬不易。不過它實在太長,看完之後再也不想往前翻了,所以就憑記憶寫點有趣的內容吧,有任何問題还请參考原文。

正如文章所說的那樣:我們知道許多人進了Google,然後就消失了。這正是Google的神秘之處,也是它保持神秘的方法。所以文章的素材來源包括一些公開發表的論文、演講,數量也很少,其餘則多為推測。

先說硬件。Google用的是大量普通電腦,文中猜測的數字約為45萬台(這個數字或有出入,但隨著時間推移只會不斷增長,應該八九不離十)。曾有報道說某位Google高管表示這些並非隨便的PC,而是很高檔的服務器,但這一說法並未得到其他佐證。這些機器分布在全球眾多數據中心,都柏林、弗吉尼亞、加州、俄勒崗等地都有,Google的所有服務都依賴於它們。2005年,Google在服務器及數據中心上花費了8.38億美元。

而且Google已研發出快速部署這些服務器的技術:它把機器組裝在20英尺或40英尺長的集裝箱中,往卡車上一放就能運走,一個箱子裡可能裝著5000個Opteron處理器和3.5PB的存儲設備。

為了利用這些機器——首先自然是為了滿足網頁索引計算的需求——Google還開發了自己的文件系統,最早叫BigFile,後來改稱GFS。這個系統單個分塊就有64MB,而且據說很少出現小文件,利用率很高。最初當Google只索引2500個網頁時,總容量就已超過100GB。不過一般網頁都很小,整站扒下來也就以MB計,不知道是不是一個網站算一個文件?

在這個系統中,有一台主服務器掌管文件名、存放位置等數據,真正的文件則放在文件服務器上。一台主服務器加上成千上萬台文件服務器構成一個GFS集群,據說大約有50個這樣的集群。為了兼顧可靠與速度,每個文件至少備份3份,一份壞了另外兩份立即響應,延遲不過幾毫秒。為了存儲結構化數據,Google還開發了BigTable這個數據庫系統,它把表分成塊存放在GFS上,從而得以處理超大規模的數據表。

為了在這樣的分布式平台上編程,Google又開發了MapReduce,它是一個中間層或接口,用C++完成,另提供Java和Python接口。它能將計算分散到多台機器上,讓應用工程師不必再操心這件事。據說新入職的工程師第一週的培訓,就是用這個工具寫一個統計某組網頁中詞彙出現頻率的程序。去年10月,這套系統每天要處理3000項作業,比如分析最新網頁、更新索引等。

在如此複雜的體系下,Google仍保持著出眾的性價比:通常對手花3美元才能辦成的事,它只花1美元。

文中提到,現任CEO當初去Google時,發現兩位創始人還在用Quicken記帳,而當時他們已經有200名員工、2000萬美元收入。Google的項目管理與績效考評也頗有意思:每週系統會給員工發一封郵件,問他們這週做了什麼、下週打算做什麼,員工回復;到了下週,系統又發信追問「你上週說要做123,那麼做完了嗎?」這些全是自然語言、且可被搜索,大家因此能互相發現新點子。

文中引用較多的話,來自Google的CIO、普林斯頓心理學博士Doug Merrill。

XML學習教程| jQuery入門知識| AJAX入門| Dreamweaver教程| Fireworks入門知識| SEO技巧| SEO優化集錦|
Copyright © DIV+CSS佈局教程網 All Rights Reserved