-
阿里CTO張建鋒:雙11背后是中國唯一自研的飛天云
最后更新: 2019-11-12 06:53:11(觀察者網(wǎng)訊)
“不是任何一朵云都能撐住這個流量。如果說中國有兩朵云,一朵是阿里云,一朵是其他云?!?1月11日晚,阿里巴巴集團CTO張建鋒表示,“阿里云不一樣,10年前我們從第一行代碼寫起,構建了中國唯一自研的云操作系統(tǒng)飛天。”
2019天貓雙11再次刷新世界紀錄,訂單創(chuàng)新峰值達到54.4萬筆/秒,單日數(shù)據(jù)處理量達到970PB。今年阿里巴巴核心系統(tǒng)100%上云,撐住了雙11的世界級流量洪峰。
“阿里巴巴是一架高速飛行中的飛機,我們成功在此過程中換上了全新的引擎?!睆埥ㄤh說,用公共云來承載這樣一個萬億規(guī)模的核心系統(tǒng),阿里云是第一個做到的,“很多云廠商自己的業(yè)務系統(tǒng),不在自己的云上,今后阿里全部系統(tǒng)都在阿里云上?!?
據(jù)了解,阿里巴巴是全球首家將核心系統(tǒng)100%運行在公共云上的大型互聯(lián)網(wǎng)公司。同為云計算巨頭的亞馬遜、微軟、Google,都尚未邁出這一步。
——附錄:張建鋒演講核心觀點
從去年開始,我們決定把整個阿里巴巴核心系統(tǒng)全部上云,上云還要加一個定語,是上“阿里云”,并不是上任何一朵云都能撐得住這個流量。在中國,我們經(jīng)常說中國有兩朵云,一朵叫做“阿里云”,還有一朵叫做“其它云”。
為什么講阿里云跟其它云不一樣?因為在中國只有阿里云是完全從頭研發(fā)的一朵云,從頭是從每一行代碼,從十年前開始寫,今年是阿里云的第10年,所以我們的云有一個特別的名字,叫做“飛天操作系統(tǒng)”,當初王堅博士創(chuàng)辦阿里云的時候,對我們這個云下面的調(diào)度系統(tǒng),整個云的基礎平臺,取名叫做“飛天操作系統(tǒng)”。
我們的云完全是中國自研的一朵云,其它很多云從開源軟件改造過來的,這是非常大的不一樣。
第二個,今年雙11,阿里仍然是一家在高速飛行中的飛機,我們成功的在這個過程中換上了全新的引擎。以前大家把非核心負載放在云上,現(xiàn)在阿里巴巴最核心的系統(tǒng)放在了云上?,F(xiàn)在我們的云把原來專用的技術變成公共云,大家都可以來享受普惠服務。我們有最好的系統(tǒng),你們也可以在上面跟我們一樣使用。
阿里云承載阿里巴巴自己100%的核心系統(tǒng),這個是我們?nèi)虻谝粋€做到的。很多云廠商自己也有業(yè)務系統(tǒng),但是自己的系統(tǒng)不在自己的云上。我們以后所有阿里系統(tǒng)全部都在阿里云的飛天操作系統(tǒng)上面。
大家一定會想,這是一個簡單的替換還是技術上非常大的一個進步、非常大的挑戰(zhàn)?我簡單說一下,我們有幾個方面做得非常好,它不是簡單的替換,上云之后性能有了一個非常大的提高。
今天大家可能有感覺,我們前十分鐘,基本上消費者沒有感受到任何抖動,大家購物非常順暢。
第一、我們在核心虛擬機系統(tǒng)上,自研神龍架構,用自研的服務器來做虛擬化。一般的服務器隨著壓力增長,最終負載能力會慢慢下降,它不是線性的。我們神龍服務器壓力越大,輸出也是非常線性的,這是非常難做到的。
第二、我們自研了云原生的數(shù)據(jù)庫。今年有兩個數(shù)據(jù)庫,一個是自研的OceanBase,大家知道我們在TPC-C測試里面拿下了全球第一。第二是PolarDB,也廣泛用在這次雙11上,沒有任何問題,我們每秒峰值也是遠遠超越于原來Oracle這樣傳統(tǒng)的數(shù)據(jù)庫。
第三、我們的計算與存儲做了分離,現(xiàn)在阿里巴巴存儲是有一個地方專門存數(shù)據(jù)。數(shù)據(jù)都是從遠端存取的,所以存儲可以很方便的擴容,因為它有一個專門的池。原來做不到。因為原來遠端存儲,訪問網(wǎng)絡速度就跟不上。
第四、之所以現(xiàn)在能夠做到在遠端存儲,能夠比本地讀寫磁盤更快,是因為我們做了RDMA網(wǎng)絡,這是全球第一個大規(guī)模做RDMA網(wǎng)絡的公司。
我們這四個方面都做了核心突破。
今天,飛天操作系統(tǒng)能夠在10萬臺級別以上的服務器里面做調(diào)度,今天雙11有非常多的應用,但是它并不是說每一個時間點,所有應用負載都是一樣的。我們在零點把大部分計算機資源分配給交易等應用,過了一點之后,我們把數(shù)據(jù)分配給數(shù)據(jù)處理系統(tǒng)。數(shù)據(jù)處理今年創(chuàng)了一個新高,2017年當天處理了300PB的數(shù)據(jù),2018年處理了600PB的數(shù)據(jù),今年要處理970P左右的數(shù)據(jù)。
大家可能沒有概念,一個P到底有多少數(shù)據(jù),我上次跟央視的人交流,央視拍了這么多年電視新聞節(jié)目,幾十年下來他了大概80P的數(shù)據(jù)。雙11一天,我們要處理970P的數(shù)據(jù),非常大的量,沒有一個先進的系統(tǒng)是撐不住的。
第二個是非常實時,大家看到了,今天在秒殺,在會場全部都是個性化、千人千面的,這里的數(shù)據(jù)不僅是大,而且是要做到非常實時。到目前為止,我們菜鳥物流系統(tǒng)已經(jīng)產(chǎn)生了超過10億筆的物流單,這個數(shù)據(jù)還在很快的上漲,這些都需要依靠阿里云背后大量的計算能力。
我們今年的數(shù)據(jù),除了批處理之外,還有流處理,就是實時處理所有數(shù)據(jù),就像你們看到的交易數(shù)據(jù),每分鐘、每秒鐘都在變,它并不是從數(shù)據(jù)庫里面統(tǒng)計出來的,它是每生成一筆訂單,系統(tǒng)自動一層層把數(shù)據(jù)匯集上來。我們這個系統(tǒng)每秒能處理25億筆記錄,這是流式的系統(tǒng)。
我們這么多服務器,要把它全部管理起來,除了飛天系統(tǒng)之外,還要管理所有的消息流轉(zhuǎn),所以我們自己開發(fā)了一個叫做MQ的消息系統(tǒng),這也是全球目前最大的一個消息系統(tǒng)。
今天,從飛天系統(tǒng)、大數(shù)據(jù)處理平臺到智能化應用,這些技術疊加起來打造了一個新的分布式的基于云的平臺,才使得阿里整個經(jīng)濟體所有核心應用都能夠跑在上面。
最后,我們今年發(fā)布了自研的芯片含光800。明年雙11,阿里大量人工智能應用都會跑在自研芯片上面。
今天從飛天云操作系統(tǒng)到神龍服務器、數(shù)據(jù)庫、交換機、交換機操作系統(tǒng)、RDMA網(wǎng)絡,全部是阿里自研的。我們今天已經(jīng)積累了非常豐富、非常強的能力,從硬件、數(shù)據(jù)庫、云計算操作系統(tǒng),到上面的核心應用平臺,四位一體,這是這次雙11跟往年最大不一樣的地方。
本文系觀察者網(wǎng)獨家稿件,未經(jīng)授權,不得轉(zhuǎn)載。
- 原標題:京東11月1日-11日累計下單金額達2044億元
- 責任編輯: 弘毅 
-
蘋果供貨商良品率低遭棄?回應:不實,臺媒炒作6月舊事
2019-11-11 12:34 股市 -
鄔賀銓:中國5G輻射遠低于歐美 但老百姓愛看養(yǎng)生節(jié)目
2019-11-10 22:44 5G -
石墨烯再“立功”!中國科學家成功研制高速晶體管
2019-11-10 21:02 科技前沿 -
川藏鐵路拉林段跨雅魯藏布江大橋合龍,明年鋪軌
2019-11-10 17:11 科技前沿 -
日本數(shù)碼巨頭奧林巴斯將退出相機市場 三星or索尼接盤
2019-11-10 16:25 科技前沿 -
華為入場,能否幫中國破局車載雷達市場?
2019-11-10 09:30 汽車工業(yè) -
國內(nèi)首套!華工科技向印度出口大型激光切焊一體機
2019-11-09 20:31 -
華為Mate X不能在-5℃及低于該溫度的環(huán)境下彎折
2019-11-08 21:06 -
從差1萬到反超20萬,平板電腦銷量冠軍3個季度后易主
2019-11-08 17:10 消費 -
華為在華優(yōu)勢擴大之際,聯(lián)想將手機下個戰(zhàn)場放往歐洲
2019-11-08 13:59 手機 -
不止是導航!北斗高精準燃氣泄漏檢測系統(tǒng)首發(fā)
2019-11-08 13:56 北斗照耀 -
中國新一代智能B型地鐵通過無人駕駛測試 內(nèi)置“黑科技”
2019-11-08 11:09 -
我科學家研獲高性能柔性有機太陽能電池
2019-11-07 07:39 科技前沿 -
我國正式啟動6G研發(fā)
2019-11-06 19:59 科技前沿 -
直播:任正非對話馬凱碩
2019-11-06 16:21 華為 -
三星折疊屏手機國行上架,不支持5G,售價15999元
2019-11-06 13:24 手機 -
我國開發(fā)出高能量密度的柔性鈉離子微型超級電容器
2019-11-05 21:53 -
并列DxOMark第一,雷軍:有友商華為,是小米最大幸運
2019-11-05 20:43 手機 -
任正非:研發(fā)基層管理不改革,我們就是下一個惠普
2019-11-05 10:23 華為 -
三星中國回應裁員傳言:相關業(yè)務調(diào)整 順應5G時代發(fā)展需求
2019-11-05 09:38 手機
相關推薦 -
“顯然特朗普先退一步,雖尷尬但有用” 評論 27歐盟深吸一口氣:這也太荒謬了 評論 185陣容龐大!關鍵時刻,拉美伙伴“力挺”中國 評論 89轉(zhuǎn)頭,特朗普就炮轟歐盟 評論 310“中美會談成果遠超預期,是一個非常好的起點” 評論 262最新聞 Hot
-
“顯然特朗普先退一步,雖尷尬但有用”
-
變調(diào)了,“印度這次要對美國來真的”
-
“澤連斯基堅持只跟普京談”,俄方最新回應
-
面對中國和拉美,美國還停留在200年前
-
歐盟深吸一口氣:這也太荒謬了
-
美企開啟瘋狂囤貨,問題又來了
-
陣容龐大!關鍵時刻,拉美伙伴“力挺”中國
-
美國這就期待上了
-
日本:中美聲明,在研究了
-
120%→54%,這項對華關稅也改了
-
“特朗普敗了,更像是投降”
-
“美國技術封鎖迫使中國全速發(fā)展”
-
迷之自信、張口就來:更愿意和中國打,而非巴基斯坦…
-
哥倫比亞總統(tǒng)在華表態(tài):確認加入!
-
以色列要求國際刑事法院撤銷對內(nèi)塔尼亞胡逮捕令
-
消息傳出,美企CEO“蹦下床打電話”:趕緊發(fā)貨!
-