雙十一背后的云計(jì)算技術(shù)奇跡

雙十一當(dāng)天,我坐在阿里巴巴雙十一主會(huì)場(chǎng)的媒體中心里,真真切切地體會(huì)到了一次由數(shù)據(jù)帶來(lái)的巨大震撼感。當(dāng)雙十一零點(diǎn)時(shí)刻來(lái)臨,在數(shù)據(jù)大屏幕上,代表著交易數(shù)據(jù)的光束密集而快速地飛馳,全球無(wú)數(shù)個(gè)國(guó)家和地區(qū)被相繼點(diǎn)亮,交易額的數(shù)字瘋狂地在變化,18秒過(guò)億,1分12秒過(guò)十億,12分28秒過(guò)百億……從之前的“剁手黨”變身為俯視這場(chǎng)商業(yè)盛宴的“旁觀者”,在驚嘆阿里取得巨大商業(yè)成功的同時(shí),也深深為支撐這場(chǎng)商業(yè)史上規(guī)模最大,參與人數(shù)最多,交易最頻繁的電商狂歡節(jié)的阿里云計(jì)算的實(shí)力所折服。當(dāng)然也引起了我的好奇,要怎樣強(qiáng)大的云計(jì)算能力,才能馴服全世界“剁手黨”的瘋狂?

被“逼”出來(lái)的世界級(jí)技術(shù)創(chuàng)新

OceanBase是由阿里巴巴自主研發(fā),中國(guó)首個(gè)具有自主知識(shí)產(chǎn)權(quán)的數(shù)據(jù)庫(kù),也是全球首個(gè)應(yīng)用在金融業(yè)務(wù)的分布式關(guān)系數(shù)據(jù)庫(kù)。今年它承載了雙十一100%的交易流量,支付寶整個(gè)核心鏈路是運(yùn)行在OceanBase上面,14萬(wàn)每秒的訂單創(chuàng)建,8.59萬(wàn)筆每秒支付,以交易系統(tǒng)為例,在“雙十一”一天寫(xiě)進(jìn)數(shù)據(jù)庫(kù)的數(shù)據(jù)量有10TB,再次驗(yàn)證了低成本數(shù)據(jù)庫(kù)OceanBase的高效與穩(wěn)定。而阿里的技術(shù)人員在被問(wèn)及研發(fā)OceanBase的初衷時(shí),竟坦稱(chēng)時(shí)被逼出來(lái)的。為了擺脫對(duì)個(gè)別固定廠商的依懶性,降低成本,以及滿(mǎn)足云計(jì)算技術(shù)的發(fā)展和阿里業(yè)務(wù)的擴(kuò)展需求,逼迫著他們?nèi)パ邪l(fā)探尋成本更低、更穩(wěn)定、更安全、更高效的新型數(shù)據(jù)庫(kù)技術(shù)。

除了OceanBase,為了支撐起阿里電商平臺(tái)在雙十一產(chǎn)生的驚人交易量,阿里巴巴的工程師們搭建了全球最大規(guī)模的混合云架構(gòu),將淘寶、天貓核心交易鏈條和支付寶核心支付鏈條的部分流量,直接切換到了阿里云的公共云計(jì)算平臺(tái),通過(guò)公共云和專(zhuān)有暈的無(wú)縫連接支撐起了雙十一的天量交易量,不僅在全球首家實(shí)現(xiàn)了核心交易系統(tǒng)的上云,還成就了一場(chǎng)全球最大規(guī)模的混合云彈性架構(gòu)實(shí)踐,讓全世界見(jiàn)識(shí)了中國(guó)強(qiáng)大的計(jì)算能力。混合云的彈性架構(gòu)真正實(shí)現(xiàn)了云計(jì)算能力的“削峰填谷”,極大地降低了IT采購(gòu)成本,檢驗(yàn)了阿里各系統(tǒng)軟件間的兼容性問(wèn)題,為未來(lái)整體計(jì)算能力的輸出奠定基礎(chǔ)。當(dāng)然,混合云的架構(gòu)也是“逼”出來(lái)的,它是基于雙十一峰值的特性和電商交易各環(huán)節(jié)的特性催生出的“標(biāo)準(zhǔn)化”產(chǎn)品,正如阿里的技術(shù)人員所講,阿里不可能為了雙十一當(dāng)天的峰值而無(wú)限地采購(gòu)IT資源。

“異地多活”作為阿里的主要?jiǎng)?chuàng)新技術(shù),在今年的雙十一實(shí)現(xiàn)首秀。數(shù)據(jù)顯示:阿里雙十一訂單創(chuàng)建峰值指標(biāo)從2009年每秒鐘400筆飆升至14萬(wàn)筆,支付峰值從每秒200筆提高到8.59萬(wàn)筆,從2009年到2015年,“雙11”訂單創(chuàng)建峰值增長(zhǎng)了350倍,支付峰值增長(zhǎng)了430倍。在交易和支付峰值不斷攀高的情況下,要做到平穩(wěn)度過(guò)峰值,就必須要求阿里進(jìn)一步提升容災(zāi)能力和計(jì)算水平的伸縮能力,業(yè)內(nèi)通用的“兩地三中心”做法已經(jīng)相形見(jiàn)拙,而系統(tǒng)可以根據(jù)業(yè)務(wù)需要,在多個(gè)數(shù)據(jù)中心之間調(diào)度流量,彈性利用服務(wù)器資源的“異地多活”技術(shù)將成為未來(lái)主流技術(shù)。從2014年雙十一的“異地雙活”到今年雙十一的“異地多活”,電商對(duì)數(shù)據(jù)的同步性和一致性要求,迫使阿里攻克開(kāi)源技術(shù)在“異地多活”方面的技術(shù)空白,形成自己的技術(shù)體系,并有意將這一技術(shù)逐步開(kāi)放出來(lái)讓更多企業(yè)用戶(hù)受益。

中小企業(yè)和創(chuàng)業(yè)者將再不會(huì)經(jīng)歷阿里的“痛苦”

在今年的雙十一熱賣(mài)榜單里,除了手機(jī),服飾、牛奶、食品……之外,出乎意料的是計(jì)算服務(wù)成為企業(yè)采購(gòu)爭(zhēng)搶的對(duì)象。阿里云在其官網(wǎng),設(shè)有“云產(chǎn)品”、“域名與網(wǎng)站”、“云市場(chǎng)”、“行業(yè)云”、“國(guó)際站”、“學(xué)生站”等六個(gè)分會(huì)場(chǎng),幾乎囊括了用戶(hù)一站式上云所需的所有產(chǎn)品與服務(wù),在雙十一當(dāng)天狂歡售賣(mài)。來(lái)自阿里的數(shù)據(jù)顯示:截止11月11日24時(shí),超過(guò)3萬(wàn)家創(chuàng)新創(chuàng)業(yè)企業(yè)通過(guò)阿里云官網(wǎng)搶購(gòu)計(jì)算資源,采購(gòu)量相當(dāng)于一座大型數(shù)據(jù)中心,較傳統(tǒng)方式節(jié)省了上億元的IT成本。其中,還包括了不少新疆、甘肅、寧夏、青海、西藏等中西部地區(qū)的創(chuàng)業(yè)者??梢?jiàn),云計(jì)算不再是經(jīng)濟(jì)發(fā)達(dá)地區(qū)的“奢侈品”,越來(lái)越多偏遠(yuǎn)地區(qū)的創(chuàng)新創(chuàng)業(yè)者,開(kāi)始利用其打破IT成本的桎梏,與其他創(chuàng)業(yè)者站在了同一起跑線上。對(duì)此,阿里云總裁胡曉明表示,以往只有大眾消費(fèi)品才是雙11的熱門(mén)商品,計(jì)算資源的熱賣(mài),恰恰說(shuō)明了云計(jì)算已經(jīng)成為普惠科技。阿里巴巴的技術(shù)能力,不僅僅只屬于天貓和淘寶,而應(yīng)該服務(wù)更多創(chuàng)新創(chuàng)業(yè)者。

上文提到的阿里自主研發(fā)的數(shù)據(jù)庫(kù)OceanBase,在今年6月助力網(wǎng)商銀行完全擺脫商業(yè)數(shù)據(jù)庫(kù),成為第一家低層數(shù)據(jù)庫(kù)全部采用OceanBase的金融機(jī)構(gòu),這項(xiàng)技術(shù)也將有望明年通過(guò)阿里云的公共云計(jì)算平臺(tái)正式對(duì)外界開(kāi)放。阿里關(guān)于混合云架構(gòu)的輸出,在業(yè)界早有成功案例。我們熟知的鐵路售票官方網(wǎng)站12306同樣采用了阿里云技術(shù)構(gòu)建起了龐大的混合云,它所面臨的問(wèn)題和雙十一是一樣的,峰值的考驗(yàn)和IT成本的平衡。去年春運(yùn)售票高峰期,阿里云公共計(jì)算平臺(tái)分流了12306高達(dá)75%的余票查詢(xún)流量。12306采用的混合云架構(gòu)是完全基于阿里云官網(wǎng)在售的標(biāo)準(zhǔn)化產(chǎn)品搭建,也就是說(shuō),通過(guò)阿里云的這些標(biāo)準(zhǔn)化產(chǎn)品,完全可以搭建起像淘寶、天貓、12306專(zhuān)業(yè)的萬(wàn)億級(jí)的企業(yè)應(yīng)用,讓中小企業(yè)和創(chuàng)業(yè)者可以從容應(yīng)對(duì)各種極端業(yè)務(wù)的挑戰(zhàn),而不會(huì)再經(jīng)歷當(dāng)年阿里受限于擴(kuò)容性的“痛苦”。

阿里每年的雙十一,如果從技術(shù)角度來(lái)看,更像是一年一度世界上最頂尖IT技術(shù)的演兵場(chǎng),阿里的技術(shù)團(tuán)隊(duì)要千方百計(jì)地研發(fā)新技術(shù)應(yīng)對(duì)因?yàn)殡娚虡I(yè)務(wù)的增長(zhǎng)帶來(lái)的各種挑戰(zhàn),而這些技術(shù)都要經(jīng)過(guò)雙十一的嚴(yán)格考驗(yàn),只有通過(guò)考驗(yàn)的技術(shù)才會(huì)被沉淀下來(lái),進(jìn)而形成標(biāo)準(zhǔn)化產(chǎn)品對(duì)外輸出。一舉創(chuàng)造4項(xiàng)世界紀(jì)錄阿里云大數(shù)據(jù)處理平臺(tái)ODPS就是其中的典型。ODPS最早用于支撐阿里系內(nèi)部所有大數(shù)據(jù)處理工作,而現(xiàn)在外部開(kāi)發(fā)者可享受同阿里工程師無(wú)差別的技術(shù)體驗(yàn)。而此次經(jīng)過(guò)雙十一考驗(yàn)并計(jì)劃輸出的技術(shù)將包括:應(yīng)用于異地多活的數(shù)據(jù)傳輸產(chǎn)品Data Transmission、全球首個(gè)應(yīng)用在金融業(yè)務(wù)的分布式關(guān)系數(shù)據(jù)庫(kù)OceanBase、實(shí)時(shí)計(jì)算系統(tǒng)StreamSQL、數(shù)據(jù)可視化引擎dataV等。阿里云的愿景正是要將這些世界頂尖的技術(shù)加速對(duì)外輸出,讓這些技術(shù)變成普惠科技,將來(lái)甚至可以催生出無(wú)數(shù)個(gè)阿里巴巴。

作者微博:@小編也瘋狂 微信訂閱號(hào):小編也瘋狂(id:xiaobianyefengkuang)

小編也瘋狂的文章也出現(xiàn)在:百度百家、今日頭條、艾瑞專(zhuān)欄、界面、速途網(wǎng)、虎嗅、藍(lán)鯨TMT、鞭牛士、搜狐IT、搜狐新聞客戶(hù)端等媒體

免責(zé)聲明:此文內(nèi)容為第三方自媒體作者發(fā)布的觀察或評(píng)論性文章,所有文字和圖片版權(quán)歸作者所有,且僅代表作者個(gè)人觀點(diǎn),與極客網(wǎng)無(wú)關(guān)。文章僅供讀者參考,并請(qǐng)自行核實(shí)相關(guān)內(nèi)容。投訴郵箱:editor@fromgeek.com。

免責(zé)聲明:本網(wǎng)站內(nèi)容主要來(lái)自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書(shū)面權(quán)利通知或不實(shí)情況說(shuō)明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開(kāi)相關(guān)鏈接。

2015-11-18
雙十一背后的云計(jì)算技術(shù)奇跡
雙十一當(dāng)天,我坐在阿里巴巴雙十一主會(huì)場(chǎng)的媒體中心里,真真切切地體會(huì)到了一次由數(shù)據(jù)帶來(lái)的巨大震撼感。當(dāng)雙十一零點(diǎn)時(shí)刻來(lái)臨,在數(shù)據(jù)大屏

長(zhǎng)按掃碼 閱讀全文