杭州的云棲小鎮(zhèn),，樹立著一尊飛天5K紀(jì)念碑，記錄了一段阿里云為自研大數(shù)據(jù)平臺(tái)奮斗的歷史,。

這座紀(jì)念碑的底座,，在一側(cè)刻著參與“戰(zhàn)斗”的227個(gè)工程師的名字,，另一側(cè)刻著王堅(jiān)的一段話：“一群有理想的平凡人經(jīng)歷了1757個(gè)日日夜夜,，用生命和熱血寫成代碼，為云計(jì)算開啟了未來之勢,。堅(jiān)持你相信的,，相信你堅(jiān)持的?！?/span>

這就是2013年,，被阿里云內(nèi)部稱做“5K戰(zhàn)役”的4個(gè)月無休的研發(fā)經(jīng)歷。經(jīng)過連續(xù)4個(gè)多月的努力,，阿里云成功的將原有的數(shù)據(jù)處理平臺(tái)全部遷移到基于飛天5K的MaxCompute上,，這就是飛天大數(shù)據(jù)平臺(tái)的由來。

作為目前中國唯一自主研發(fā)的計(jì)算引擎,，也是全球集群規(guī)模最大的計(jì)算平臺(tái)。阿里云飛天大數(shù)據(jù)平臺(tái)的算力,，也遠(yuǎn)遠(yuǎn)超過了當(dāng)初的5K,。數(shù)據(jù)顯示，飛天大數(shù)據(jù)平臺(tái)目前已經(jīng)可以擴(kuò)展至10萬臺(tái)計(jì)算集群,，規(guī)模全球第一,。

被“逼出來”的飛天

2008年，王堅(jiān)從微軟亞洲技術(shù)研究院空降阿里,，擔(dān)任首席架構(gòu)師,。這個(gè)在阿里內(nèi)部尊稱為“博士”的首席架構(gòu)師并非程序員出身，是一個(gè)不會(huì)寫代碼的架構(gòu)師,，但他對(duì)技術(shù)方向的前瞻性,，給阿里云的自研之路奠定了堅(jiān)實(shí)的基礎(chǔ)。

王堅(jiān)在他的《在線》一書中寫道：不是 “去IOE”,，而是計(jì)算去掉了計(jì)算機(jī),。為了完成這樣一個(gè)目標(biāo)，阿里云自己的大數(shù)據(jù)在2008年緊鑼密鼓的在籌備,，并在2009年寫下了第一行代碼,。這才有了2013年5K的故事,，有了今天的飛天大數(shù)據(jù)平臺(tái)。

事實(shí)上,，在當(dāng)時(shí)大數(shù)據(jù)這條路線的選擇面是很狹窄的，要么繼續(xù)建Oracle集群,，要么走開源的Greenplum或是Hadoop路線。但是這個(gè)方向?qū)Π⒗飦碚f,，似乎都不夠好。

首先,，以O(shè)racle集群為代表的IOE架構(gòu)很難滿足當(dāng)時(shí)淘寶快速的業(yè)務(wù)拓展需求,，盡管當(dāng)時(shí)阿里已開始把數(shù)據(jù)遷移到更大規(guī)模的開源平臺(tái)，但后者在百臺(tái)機(jī)器規(guī)模時(shí)就遇到瓶頸,，給業(yè)務(wù)增長造成極大阻礙,。

其次，Greenplum,、Hadoop之類的開源技術(shù)在可靠性,、安全性上也遭遇了天花板。

可以這樣理解,，當(dāng)初阿里決定自研大數(shù)據(jù)平臺(tái)，本質(zhì)是被“逼出來”的決定,。

如當(dāng)初王堅(jiān)所說,，“將單一集群做到數(shù)千乃至更高，技術(shù)上是國家和企業(yè)競爭力的標(biāo)志,。阿里巴巴必須攻克這道難關(guān),。”飛天大數(shù)據(jù)平臺(tái)也的確做到了這一定,，飛天也是中國云計(jì)算,，乃至中國科技界的驕傲。

屹立世界之巔

不想做將軍的士兵,，不是一個(gè)好士兵,，不想成為世界第一的公司,，也不是一個(gè)好公司。

客觀的說,，以今天的眼光看,，能夠走獨(dú)立自研大數(shù)據(jù)平臺(tái)路線的公司，無一不是世界級(jí)的科技巨頭,，如Google,、亞馬遜AWS、微軟以及阿里云,。

2013年8月15日,，阿里云歷史性地突破了同一個(gè)集群內(nèi)5000臺(tái)服務(wù)器同時(shí)計(jì)算的局限，為未來的大規(guī)模服務(wù)奠定基礎(chǔ),。

今天的飛天大數(shù)據(jù)平臺(tái),，不僅以10萬臺(tái)計(jì)算集群達(dá)到規(guī)模全球第一，同時(shí)單日數(shù)據(jù)處理量從2015年100PB,、2016年180PB,、2017年320PB,，一直到2018年超過600PB,，僅用三年時(shí)間便提升了5倍。如今,，能做到這一能力的科技公司在全球都寥寥可數(shù),。

應(yīng)該說從2009年的第一行代碼，到2019年,，整整十年里,，飛天都在不斷的進(jìn)化之中。

比如,，基于這套創(chuàng)新技術(shù),，2015、2016年,，阿里云刷新世界計(jì)算奧運(yùn)會(huì)之稱的SortBenchmark多個(gè)世界紀(jì)錄,。在2017年10月，阿里云將TPC的benchmark適配到MaxCompute,，進(jìn)行了全球首次基于公共云的bigbench大數(shù)據(jù)基準(zhǔn)測試,，數(shù)據(jù)規(guī)模被拓展到100TB，并成為首個(gè)突破7000分的引擎,，性能達(dá)到 7830QPM,。2018年9月，性能較2017年10月提升一倍多,，達(dá)到18176.71QPM,。另外,，在超小型10TB規(guī)模的指標(biāo)上，MaxCompute與其他開源競品進(jìn)行了比對(duì)分析,，性能超過開源競品3倍,。

在我看來，如果將2008年到2013年看做是飛天創(chuàng)世的第一階段,，那么從2015年到2019年就是飛天大數(shù)據(jù)平臺(tái)頻頻登上世界舞臺(tái),，通向巔峰的第二階段。

在這個(gè)階段,，隨著技術(shù)創(chuàng)新能力的不斷突破,，飛天也收獲了很多權(quán)威機(jī)構(gòu)的認(rèn)可。比如,，2018年3月,，Gartner發(fā)布《2017年分析型數(shù)據(jù)管理解決方案（DMSA）魔力象限》報(bào)告，對(duì)各大廠商的大數(shù)據(jù)服務(wù)能力進(jìn)行了全面評(píng)估,。全球共20家頂尖廠商入選,。阿里云作為云服務(wù)商成功沖進(jìn)Gartner魔力象限；同時(shí),，2018年11月,，MaxCompute，DataWorks和AnalyticDB代表阿里云入選Forrester Wave? Q4 2018云數(shù)據(jù)倉庫研究報(bào)告,，產(chǎn)品能力綜合得分全球第7,，中國第一，并在產(chǎn)品功能（Current Offering）方面力壓微軟,。今年5月,，阿里云自研大數(shù)據(jù)計(jì)算平臺(tái) MaxCompute 獲得浙江省科技進(jìn)步一等獎(jiǎng)。

飛天就如同它的名字所代表的含義一樣,，一步一個(gè)腳印,，從零起步，十年一個(gè)輪回,，實(shí)現(xiàn)了從0到1的跨越,。

腳踏實(shí)地，實(shí)踐出飛天

毫無疑問,，任何技術(shù)的有效性,，都需要實(shí)踐來驗(yàn)證。飛天的十年,，不僅是技術(shù)創(chuàng)新的十年,，更是實(shí)踐落地的十年。

首先，飛天最初的實(shí)踐舞臺(tái)就是阿里巴巴自己,。雙11,，就像是阿里巴巴永不落幕的旗幟，創(chuàng)造了中國零售的巔峰,，也給阿里云帶來了世界級(jí)的技術(shù)試煉場,。客觀的說,，如果沒有雙11這么巨大的業(yè)務(wù)壓力,，王堅(jiān)當(dāng)初也不會(huì)毫不猶豫做出放棄Oracle路線和開源路線，走向自研,。

在2018年的雙11狂歡節(jié)中,，MaxCompute單日數(shù)據(jù)處理超過600PB，同時(shí)平穩(wěn)支撐電商混布單元在線流量洪峰12萬筆/s交易,，穩(wěn)定承載45%導(dǎo)購流量,，順利完成1200臺(tái)DB業(yè)務(wù)混部的目標(biāo)，為雙11交易峰值提供了有力保障和平滑支撐,。

我認(rèn)為,，飛天今日之成就，雙11居功至偉,，雙11和飛天兩個(gè)“符號(hào)”,，最為充分的表達(dá)了技術(shù)與業(yè)務(wù)之間，相互促進(jìn)的典型模式,。

其次,，飛天在行業(yè)市場也取得了非常多的突破,。例如,，在政務(wù)領(lǐng)域，飛天大數(shù)據(jù)平臺(tái)支撐下,，杭州“最多跑一次”打通與辦事最密切相關(guān)的100個(gè)事項(xiàng)70多億條數(shù)據(jù),，老百姓甚至有可能一次都不跑；在交通領(lǐng)域,，杭州城市大腦實(shí)時(shí)指揮1300個(gè)紅綠燈路口,、200多名交警，從2016年到2018年,，杭州從全國最擁堵城市排行榜上下跌52名,；在工業(yè)領(lǐng)域，阿里云的大數(shù)據(jù)處理技術(shù)幫助制造企業(yè)尋找上千個(gè)參數(shù)的最優(yōu)搭配,，提升制造的良品率,。協(xié)鑫光伏、天合光能等行業(yè)龍頭企業(yè),，都在嘗試這一全新的生產(chǎn)模式,；在海外市場,，MaxCompute也已進(jìn)入新加坡、歐洲等市場,，將這一技術(shù)服務(wù)給更多用戶,。

第三，作為中國唯一自主研發(fā)的計(jì)算引擎,，也是全球集群規(guī)模最大的計(jì)算平臺(tái),。飛天這十年不斷對(duì)實(shí)體經(jīng)濟(jì)的賦能，其實(shí)為中國的數(shù)字經(jīng)濟(jì)的發(fā)展,，提供了一個(gè)很好的表率：我們有能力用自己的核心技術(shù),，推動(dòng)符合自身特色的經(jīng)濟(jì)增長模式。

文/鄭凱

科技正能量,，推動(dòng)新科技