分享

先進的Google技術核心GFS

 又见飞刀 2007-01-11

先進的Google技術核心GFS
 
 cmplabs  2007/1/10
 
 
台灣恆春大地震引發的網絡大災難中,只有Google能在短時間內恢復服務,估計與其全球分散儲存系統Google File System〔GFS〕有關。

Google在全球設有17萬台伺服器〔2005年數字〕 採用自行研製的分散式檔案系統Google File System,這是一套能快速穩定及安全的資料儲存系統。

Google中國區總裁李開復說:「Google最厲害的技術是其檔案儲存系統,我認為電腦系的學生都應該看看GFS,Google的搜尋器、Gmail、Video、Blog等都是用這個技術做的。」

以Gmail系統為例,使用GFS,資料被分散至全球多個地方,每個用戶的電郵分三處備份,當一處的資料損毀時,另外兩處的備份則自動補上。數萬台伺服器同時運作,壞了一台,對系統沒有影響,只要換進一台,電腦便會自動取得Linux OS,自動安裝並起機,自動取回失去的資料備份,又變成網絡的一部分了。這種環球分散式檔案系統,才是Google的技術核心。

Google這套由十多萬台電腦組成的集群,每日自動搜尋新網頁、處理電郵、播放影片、提供衛星地圖、搜尋服務,並會自動分析網頁內容,自動刊出相關的文字廣告。在電纜中斷時,其他入門網站只能望天打卦、空等電纜修復,但Google就可轉存資料,自我逐步回復正常,GFS技術先進可見一斑。 ■

相關鏈接

Google GFS的技術論文

維基Google File System
 

    本站是提供个人知识管理的网络存储空间,所有内容均由用户发布,不代表本站观点。请注意甄别内容中的联系方式、诱导购买等信息,谨防诈骗。如发现有害或侵权内容,请点击一键举报。
    转藏 分享 献花(0

    0条评论

    发表

    请遵守用户 评论公约

    类似文章 更多