7月25日，阿里云飛天大數(shù)據(jù)平臺亮相阿里云峰會上海站，擁有中國唯一自主研發(fā)的計(jì)算引擎，是全球集群規(guī)模最大的計(jì)算平臺，最大可擴(kuò)展至10萬臺計(jì)算集群，支撐海量數(shù)據(jù)存儲和計(jì)算。在民生服務(wù)領(lǐng)域，飛天大數(shù)據(jù)平臺已經(jīng)“最多跑一次”、城市大腦等場景中，協(xié)助政府優(yōu)化服務(wù)模式，實(shí)現(xiàn)更智能便捷的服務(wù)能力，保障信息安全。

數(shù)據(jù)顯示，目前飛天大數(shù)據(jù)平臺可擴(kuò)展至10萬臺計(jì)算集群，集群規(guī)模全球第一。單日數(shù)據(jù)處理量從2015年100PB、2016年180PB、2017年320PB，到2018年超過600PB，僅用三年時(shí)間提升5倍。

在浙江，飛天大數(shù)據(jù)平臺支撐下，“最多跑一次”打通與老百姓辦事最密切相關(guān)的100個(gè)事項(xiàng)70多億條數(shù)據(jù)，老百姓甚至有可能一次都不跑。在杭州，城市大腦實(shí)時(shí)指揮1300個(gè)紅綠燈路口、200多名交警，從2016年到2018年，杭州從全國最擁堵城市排行榜上下跌52名。

原來需要跑5個(gè)窗口、耗時(shí)2天才能拿到的新生兒出生證，現(xiàn)在只需在手機(jī)上動動手指，填9項(xiàng)信息，一個(gè)出生證就辦好了;原來看一次病排隊(duì)付幾次費(fèi)，現(xiàn)在可以看完回家再付錢……這樣的場景正在越來越多的城市變?yōu)楝F(xiàn)實(shí)，背后有飛天大數(shù)據(jù)平臺的支撐。

據(jù)了解，該平臺的研發(fā)源自阿里巴巴的自身實(shí)踐。十年前，新興互聯(lián)網(wǎng)業(yè)態(tài)蓬勃發(fā)展，中小企業(yè)在阿里巴巴電商平臺上爆發(fā)式增長，商家第一次具備直接觸達(dá)消費(fèi)者的普惠渠道，激發(fā)龐大的消費(fèi)者需求，海量數(shù)據(jù)擊垮傳統(tǒng)IT架構(gòu)。在此背景下，阿里巴巴開始探索全新的技術(shù)來支撐爆發(fā)式增長的數(shù)據(jù)存儲和計(jì)算需求。

大部分企業(yè)的慣例是直接使用國際開源的數(shù)據(jù)計(jì)算框架Hadoop。在阿里巴巴內(nèi)部，也曾出現(xiàn)過激烈的爭論，究竟是直接使用開源Hadoop，還是從每一行代碼寫起，自主研發(fā)一個(gè)大數(shù)據(jù)平臺。

當(dāng)時(shí)，電子商務(wù)蓬勃發(fā)展，人類社會從未有過如此規(guī)模的商業(yè)交易在一個(gè)互聯(lián)網(wǎng)平臺上進(jìn)行，如果用Hadoop搭建的大數(shù)據(jù)平臺，必將在不久的未來再次遇到挑戰(zhàn)，更別提為外部企業(yè)提供服務(wù)，成為普惠的IT基礎(chǔ)設(shè)施。

由此，阿里巴巴堅(jiān)定投入飛天大數(shù)據(jù)平臺研發(fā)，將成千上萬臺服務(wù)器組成一臺超級計(jì)算機(jī)，向社會提供水電煤一樣的公共服務(wù)。早在2012年初，阿里巴巴技術(shù)委員會主席王堅(jiān)就表示，“從戰(zhàn)略上來說，阿里云想做的事情實(shí)際上可以解讀為Amazon+Google并有所超越。將單一集群做到數(shù)千乃至更高，技術(shù)上是國家和企業(yè)競爭力的標(biāo)志。阿里巴巴必須攻克這道難關(guān)。”

也正是因?yàn)檫@一堅(jiān)持，才有了今天中國唯一自主研發(fā)的飛天大數(shù)據(jù)平臺。過去十年，飛天大數(shù)據(jù)平臺打破了多個(gè)記錄：2013年，突破了單集群內(nèi)5000臺服務(wù)器同時(shí)計(jì)算的局限，如今單集群已超過1萬臺的規(guī)模;2015年，打破計(jì)算界奧運(yùn)會SortBenchmark的4個(gè)世界紀(jì)錄，用不到7分鐘便完成了100TB的數(shù)據(jù)排序，刷新了ApacheSpark 23.4分鐘的紀(jì)錄。

[責(zé)任編輯：于雷 PT032]