在陽泉,探密百度AI“心臟”

美劇《紙牌屋》中曾有這樣一個畫面。男記者Lucas以采訪之名受黑客之托前往FBI的云計算中心,把一枚帶有病毒的U盤插入了服務器上。意圖借此感染服務器網絡,盜取其中的數據。FBI的探員眼疾手快,Lucas因此被捕。

事實上,這只是美劇常用的夸張表述。這種場景基本不可能實現。但是云計算中心的重要性在這個畫面中被體現得淋漓盡致。

是的,云計算中心是科技企業(yè)、政府組織最為神秘的一個組成部分,是這家絕對的“心臟”。每一個科技公司都一定會有多個云計算中心,它們承載了企業(yè)的所有業(yè)務。

這一次,我進入了百度的“心臟”——百度陽泉計算中心。它既是百度AI技術的基石,也是百度AI商業(yè)化的基石。

為什么說是心臟?

百度在陽泉、順義、南京等地區(qū)都已部署數據中心,而陽泉是百度最大的云計算中心,也是亞洲單體規(guī)模最大的計算中心。

它在2014年投入使用,建成投產12萬平米,服務器超過15萬臺,擁有超過300萬顆CPU核、6EB級存儲容量,可存儲信息量相當30多萬個中國國家圖書館的藏書總量。

陽泉云計算中心據說是百度的“心臟”毫不為過。

覆蓋全球的互聯(lián)網和無數機構的業(yè)務實際上是在成千上萬臺服務器支持下運轉的,承載龐大服務器資源的就是數據中心。數據中心已經成為交通、能源一樣的經濟基礎設施。

不管你是刷百度、聊微信、搶紅包、看網劇,都離不開數據中心在背后做支撐。你在手機上的每一次操作,都和數據中心有關系。

陽泉云計算中心既是百度AI技術的心臟,也是百度AI商業(yè)化的心臟。

1、AI技術的心臟

百度App、百度地圖、百度智能云、智能城市、小度、Apollo等AI業(yè)務的數據都在這里傳輸、存儲、計算。

今年春節(jié)為例,百度APP的全球觀眾互動次數達到208億次,春晚數據流量為每秒峰值5000萬次,每分鐘峰值10億次。

搶紅包的人春晚之夜輕松愉快,但對數據中心來說可不是如此。

我在《BAT春晚暗戰(zhàn)云計算》這篇文章中很早就提到:大家明面上能看到是三家發(fā)了多少紅包、撒了多少現金,背后牽扯到的技術、資源等配置確是錯綜復雜——這都要靠數據中心做支撐。

在這次探秘陽泉云計算中心的過程中,百度系統(tǒng)部總監(jiān)張炳華用了“數據海嘯、驚濤駭浪”這八個字來形容今年百度春晚紅包帶來的數據挑戰(zhàn)。

在陽泉的全部百度員工以及十余家供應商技術支持人員在除夕當晚守在“數據海嘯”面前,最終抵擋住了億級流量??梢哉f,沒有陽泉、順義、南京在內的幾個云計算中心,就沒有今年百度春晚紅包的正常運轉。

2、AI商業(yè)化的心臟

去年12月,百度組織架構整合,決定升級“ABC智能云”業(yè)務戰(zhàn)略、加速推進“云上百度”的進程。ABC智能云事業(yè)部升級為智能云事業(yè)群組(ACG),同時承載AI To B業(yè)務和云業(yè)務,越來越多地為互聯(lián)網、娛樂、金融、教育、交通、安防、能源等行業(yè)的客戶提供全棧ABC+IoT產品與解決方案。

以能源工業(yè)等行業(yè)為例,煉鋼廠、發(fā)電廠需要在高溫的生產車間部署攝像頭、傳感器等IoT設備,這些設備會對運轉溫度、壓力等數據的實時采集。像寶鋼和百度智能云的合作中,就要通過百度智能云的AI、大數據平臺,對各種數據進行分析和處理。

百度智能云在為這些客戶提供服務的時候,則是有賴于云計算中心在背后做支撐。

心臟到底有多強?

走進百度陽泉云計算中心的機房之內,就會發(fā)現一排排機柜統(tǒng)一排列,機柜上的服務器的風扇聲嗡嗡作響。機房的溫度明顯比室外高了一截。

這是百度“心臟”的聲音與溫度。百度的“心臟”到底有多強,我們可以從這幾個維度來進行解析。

1、性能和效率

“心臟”想要跳的快,一方面需要“心臟”本身有力度,另外一方面則是需要血管供血足。對AI的“心臟”來說則是兩個點,一是算力強,另一方面也要數據傳輸快。

百度陽泉云計算中心目前已上線服務器超過15萬臺。包括了天蝎整機柜服務器、“冰山”冷存儲服務器、X-MAN超級AI計算平臺等多種百度自研計算系統(tǒng)。像去年年底百度最新發(fā)布AI計算平臺X-MAN3.0每秒可完成2000萬億次深度神經網絡計算。這種強大的計算能力都是為了適應AI時代的運算要求。

為這種強大算力“供血”的“血管”則是百度自主研發(fā)高性能交換機。提供超大規(guī)模的網絡吞吐,支持10G、25G的通用計算網絡接入和100G的AI高速無損網絡互聯(lián)技術。百度通過大帶寬、低時延、無損網絡,讓數據中心數十萬臺服務器連接成了一個超級計算機。

2、容災和備災

“心臟”作為人最重要的器官當然一刻都不能停止,數據中心作為心臟當然也不能停。云計算中心里設備價格昂貴,一旦發(fā)生不可預知的災難,對企業(yè)將造成嚴重損失。設備損壞等有形的損失可以彌補,而寶貴的數據丟失造成的損失則是無法計算的。

在移動互聯(lián)網時代,一個數據中心的服務器一旦出現短時間抖動,就會導致刷不了淘寶、付不了支付寶,在全網產生討論。

AI時代服務器出問題,可能會導致自動駕駛車輛失控,鋼鐵能源工業(yè)客戶面臨數以億計的經濟損失。

因此,數據中心的容災備災顯得及其重要。而百度陽泉云計算中心通過AI控制,數據中心的運維從人工走向智能,可以實現大數據分析和診斷,迅速縮短故障維修時間。過去30分鐘的網絡故障排查直接縮減到了5分鐘。

當問到一旦出現自然災害、意外火災等極端意外情況下百度陽泉云計算中心要如何應對時,百度系統(tǒng)部總監(jiān)張炳華提到:

從業(yè)務部署角度,百度數據中心計算資源采用了N+1的冗余設計,用戶的流量有多個入口,可以繞道其他數據中心。在入口層面也有一套智能調度的系統(tǒng)。

百度內部甚至做過這樣一個極端測試——關掉任何一個數據中心,用戶端也不會有任何感知,服務也不會受到任何影響。

我簡單翻譯一下這段話。大概相當于百度有好幾顆“心臟”,即使是一顆“心臟“出現故障,其他心臟也可以在故障的那一瞬間隨時頂上。

事實上,截止4月8日,百度陽泉云計算中心已安全運行1744天。目前也還尚未遇到這些極端意外情況。

3、能耗和環(huán)保

某種意義上說,科技企業(yè)也是高能耗企業(yè)。因為龐大的服務器群組每天處理各種數據,產生了龐大的能源消耗。

國家層面在今年9月發(fā)布了《關于加強綠色云計算中心建設的指導意見》,提出到2022年全國新建大型、超大型云計算中心PUE(云計算中心總設備能耗/IT設備能耗,越接近1表明能效越高,是云計算中心領域衡量能源效率的權威指標)需達到1.4以下。

這個指導意見的目的在于逼迫科技企業(yè)提高自身技術,做到節(jié)能環(huán)保。

2018年8月,Uptime Institute發(fā)布的《2018數據中心調查報告》顯示2018年全球數據中心PUE為1.58。

阿里所有自研云計算中心平均PUE已經低于1.3,即使是谷歌業(yè)務關鍵應用和廣告系統(tǒng)也都運行在PUE 1.2的云計算中心上。

令人意外的是,百度陽泉云計算中心的PUE突破了1.10,達到1.09,能源效率國內第一,每年可節(jié)電量可達2.5億度,相當于13萬戶居民一年的用電量。

為AI+5G+IoT未雨綢繆

百度陽泉云計算中心可以說是目前國內云計算中心的頂級水準,而且和百度目前的AI戰(zhàn)略以及面向未來的業(yè)務布局高度匹配。

我曾在《春晚紅包宕機史,也是半部中國互聯(lián)網技術進步史》中提到:

春晚的流量規(guī)模,未來可能正是5G和IoT時代的“常規(guī)需求”。提前排兵布陣,百利無一害。

2017年,微軟CEO納德拉在曾經提到過一個信息,在1992年互聯(lián)網每天流量總量是100G。今天一個手機就能存下所有的數據。

服務器和計算中心的算力、存儲進化史,其實也是世界互聯(lián)網的技術進步史?;ヂ?lián)網的發(fā)展,伴隨著IT算力、存儲能力的指數級提升。

2018年全球有70億臺IoT 設備,有機構預測到2020年全球將有500億臺設備同時連接網絡,2023年則是有790億設備連接到物聯(lián)網。5G時代流量每小時所產生的數據高達數百GB,預計將處理比4G多1000倍的數據。

當代哲學家西閃在《國家的計算》中對計算有過這樣一個論述:

在現實世界的“賭局”中,帕斯卡的上帝已經隱退,取而代之的,是作為信仰的“未來”。它像一個永恒的獎杯,在時間的盡頭閃閃發(fā)光。而計算則取代了程式化的行為訓練,演變成為一種新的思維習慣。

百度作為一家面向AI的企業(yè),它的業(yè)務同樣無處不體現著計算的魅力——信息流、智能云、無人車……所有數據都要經過服務器存儲、計算、傳輸,最終實現業(yè)務落地。

百度陽泉云計算中心恰恰是在為AI+5G+IoT時代做準備。

免責聲明:本網站內容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網站出現的信息,均僅供參考。本網站將盡力確保所提供信息的準確性及可靠性,但不保證有關資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責。本網站對有關資料所引致的錯誤、不確或遺漏,概不負任何法律責任。任何單位或個人認為本網站中的網頁或鏈接內容可能涉嫌侵犯其知識產權或存在不實內容時,應及時向本網站提出書面權利通知或不實情況說明,并提供身份證明、權屬證明及詳細侵權或不實情況證明。本網站在收到上述法律文件后,將會依法盡快聯(lián)系相關文章源頭核實,溝通刪除相關內容或斷開相關鏈接。

2019-04-09
在陽泉,探密百度AI“心臟”
美劇《紙牌屋》中曾有這樣一個畫面。男記者Lucas以采訪之名受黑客之托前往FBI的云計算中心,把一枚帶有病毒的U盤插入了服務器上。

長按掃碼 閱讀全文