中國移動(dòng)大數據中心：緊抓“東數西算”新機遇

在全國“一盤(pán)棋”的算力總體規劃下，推動(dòng)實(shí)施“東數西算”工程意義深遠。

算力作為當今時(shí)代的核心生產(chǎn)力，其對于數字經(jīng)濟時(shí)代發(fā)展的重要性，如同水利之于農業(yè)、電力之于工業(yè)，已經(jīng)成為推動(dòng)經(jīng)濟社會(huì )數字化發(fā)展的重要驅動(dòng)力，也正成為全球戰略競爭的新焦點(diǎn)。國家在全社會(huì )算力需求激增、算力資源區域分布不均衡的背景下，推出了“東數西算”這一超級工程?！皷|數西算”對于整合優(yōu)化我國算力資源，推動(dòng)東西部地區算力需求與土地、能源等資源的互補與匹配具有重要戰略意義。

東數西算超級工程的實(shí)施對國家和企業(yè)而言都具有深遠意義。從宏觀(guān)層面看，全國“一盤(pán)棋”的算力總體規劃，對我國數字經(jīng)濟發(fā)展具有重要的戰略引導作用。既有利于促進(jìn)合理布局、綠色集約、互聯(lián)互通的數據中心發(fā)展，又肩負著(zhù)戰略性保障國家數據安全、調整全國產(chǎn)業(yè)布局的使命?；谒懔傮w規劃，實(shí)施“東數西算”工程，有利于促進(jìn)國家整體經(jīng)濟協(xié)調發(fā)展。既有助于提升國家整體算力水平，促進(jìn)國家整體經(jīng)濟發(fā)展，又有利于推動(dòng)區域協(xié)調發(fā)展，通過(guò)算力樞紐和數據中心集群建設，有力帶動(dòng)產(chǎn)業(yè)上下游投資，形成東西部協(xié)同發(fā)展新格局。

從企業(yè)層面看，實(shí)施“東數西算”工程是促進(jìn)企業(yè)綠色集約、降本增效、自主創(chuàng )新發(fā)展的新機遇。一方面，數據中心能耗高、占地多，而西部綠色能源、土地資源充裕，將數據中心統籌布局至西部，可大幅節約企業(yè)電力和土地成本。另一方面，當前我國信息產(chǎn)業(yè)在關(guān)鍵核心能力自主創(chuàng )新上仍存在較大不足，表現在基礎軟件過(guò)度依賴(lài)國外技術(shù)，新技術(shù)突破引領(lǐng)不足。實(shí)施“東數西算”工程，為企業(yè)推進(jìn)關(guān)鍵核心技術(shù)攻關(guān)，構建科技領(lǐng)先優(yōu)勢，進(jìn)而實(shí)現產(chǎn)業(yè)創(chuàng )新發(fā)展帶來(lái)歷史性契機。

推進(jìn)實(shí)施“東數西算”工程，大數據領(lǐng)域需要做好頂層設計，實(shí)現基礎設施革新。

在各種算力需求中，大數據是對算力需求更旺盛的領(lǐng)域。隨著(zhù)數字經(jīng)濟的深入發(fā)展，數據規模持續膨脹，大數據中心負責海量數據的匯聚、加工及開(kāi)放，表現出算力資源消耗大、服務(wù)時(shí)效多樣化、數據安全要求高等特點(diǎn)。推進(jìn)實(shí)施“東數西算”工程，大數據領(lǐng)域需要解決三個(gè)主要問(wèn)題。

一是如何在“東數西算”新格局下繼續保障數據服務(wù)的時(shí)效性。隨著(zhù)大數據產(chǎn)業(yè)的蓬勃發(fā)展，大型數據中心日數據接入處理量已達PB級，且數據服務(wù)的時(shí)效性要求越來(lái)越高。在高時(shí)效性要求下，數據遠距離傳輸再加工難以滿(mǎn)足要求，因此在大數據領(lǐng)域，一方面要強調數據的預先布局，將承載離線(xiàn)、非實(shí)時(shí)、備份等業(yè)務(wù)的算力布局在西部，將承載實(shí)時(shí)性業(yè)務(wù)的算力布局在東部，做到東西算力協(xié)同。另一方面，要強化數據貼源處理和分層管理，對于能就近處理的原始數據，可在區域數據中心就近加工，降低網(wǎng)絡(luò )傳輸壓力?？傮w上要統籌考慮數據源分布、數據價(jià)值密度、數據服務(wù)時(shí)效性、算力布局，做好數據架構的總體規劃。

二是如何在“東數西算”新格局下繼續保障數據生產(chǎn)的高效性。隨著(zhù)“東數西算”的推進(jìn)，數據采集和加工呈現多區域分布的特點(diǎn)，傳統的大數據技術(shù)架構難以承載跨中心數據統一處理需求，必須要創(chuàng )新構建新型大數據基礎設施:一要算力協(xié)同，具備對分布在不同區域中心的計算任務(wù)統一調度管控的能力;二要統一治理，具備對物理分散、邏輯分層的數據實(shí)施統一元數據管理的能力;三要統一服務(wù)，具備在新型復雜架構下用戶(hù)服務(wù)體驗保持一致的能力?？傮w上要綜合運用分布式協(xié)同計算、湖倉融合、存算分離、大數據PaaS等技術(shù)，做好大數據計算架構的整體升級。

三是如何在“東數西算”新格局下繼續保障數據安全性。算力網(wǎng)絡(luò )具有算力泛化、融通東西、算網(wǎng)共生、靈活連接等特點(diǎn)，將會(huì )產(chǎn)生更多的資產(chǎn)暴露面和更高的連接頻次，數據傳輸的規模更大，路徑更多，服務(wù)面更廣，數據安全風(fēng)險也隨之增加。企業(yè)需進(jìn)一步加強數據安全管理，通過(guò)數據分級治理，體系性提升數據安全防護水平，持續完善安全治理架構。

中國移動(dòng)立足自主創(chuàng )新，構建大數據分布式協(xié)同計算新架構，推動(dòng)“東數西算”逐步落地。

為應對大數據領(lǐng)域面臨的挑戰，更好地實(shí)現大數據場(chǎng)景下計算、存儲向西部的高效轉移，除了要充分發(fā)揮傳統運營(yíng)商優(yōu)勢，構建大帶寬、低時(shí)延、智能化、安全高效的傳輸網(wǎng)絡(luò )，中國移動(dòng)大數據中心還結合業(yè)務(wù)發(fā)展，運用貼源計算、協(xié)同計算、存算分離、湖倉融合等新技術(shù)新思路，積極推進(jìn)大數據基礎設施架構全面升級。

隨著(zhù)數據規模逐年增長(cháng)，中國移動(dòng)原有物理集中的大數據平臺難以承載持續增長(cháng)的業(yè)務(wù)壓力。為滿(mǎn)足全網(wǎng)日益增長(cháng)的業(yè)務(wù)需求，中國移動(dòng)大數據中心創(chuàng )新性規劃構建大數據分布式協(xié)同計算平臺，將原有物理集中的計算架構升級為分布式多中心協(xié)同計算的處理架構，實(shí)現海量數據的分布式貼源處理，解決了業(yè)務(wù)集中承載難、優(yōu)秀能力推廣難等問(wèn)題。計劃到2023年底建成包括貴陽(yáng)、重慶、呼和浩特等西部節點(diǎn)在內共九大區域中心的大數據分布式協(xié)同計算平臺，接入中國移動(dòng)全網(wǎng)數據，高效支撐大數據業(yè)務(wù)創(chuàng )新發(fā)展。

中國移動(dòng)大數據分布式協(xié)同計算平臺的建設是中國移動(dòng)在結合自身業(yè)務(wù)發(fā)展的前提下，為“東數西算”的全面落地做好技術(shù)儲備和初步驗證的重要工程。中國移動(dòng)大數據中心堅持自主創(chuàng )新，突破跨中心兩級協(xié)同調度、智能調度、跨DC高速傳輸、協(xié)同計算等多項技術(shù)難題，已完成中國移動(dòng)大數據分布式協(xié)同計算平臺1.0版本研發(fā)，具備一點(diǎn)觸發(fā)、多中心協(xié)同計算的能力。

在數據分布管理層面，構建數據分層管理體系，按層次按熱度進(jìn)行數據的統籌分布管理。明細數據實(shí)時(shí)就近接入區域中心實(shí)現貼源處理，離線(xiàn)匯總數據向西部統一匯聚、計算，滿(mǎn)足多場(chǎng)景數據時(shí)效要求。

在技術(shù)架構層面，一是構建統一元數據、統一開(kāi)發(fā)調度能力，實(shí)現任務(wù)一點(diǎn)編排，多中心協(xié)同調度；二是構建協(xié)同計算引擎，實(shí)現基于執行計劃拆分、算子下推的跨域計算及分析；三是構建統一資源管控層，實(shí)現對多中心的分布式資源進(jìn)行統一管控統一開(kāi)放能力；四是應用大數據存算分離、湖倉融合架構，實(shí)現多模態(tài)數據的一點(diǎn)接入，隨處可見(jiàn)、隨處可算。

在安全管理層面，全面落實(shí)三法一條例要求，構建全方位全流程數據安全管控體系，進(jìn)一步強化跨中心數據流動(dòng)一致性稽核能力，具備完備的敏感操作攔截、敏感日志審計、敏感數據加密等能力，確保全生命周期數據安全。

當前分布式協(xié)同計算架構已在寧波、蘇州、汕頭、株洲、鄭州五大區域節點(diǎn)完成平臺部署，支撐位置洞察、內容洞察等應用創(chuàng )新，實(shí)現中國移動(dòng)近三分之一的大數據算力分流。2022年，中國移動(dòng)大數據中心將進(jìn)一步在貴陽(yáng)、重慶、呼和浩特、哈爾濱等區域節點(diǎn)開(kāi)展平臺建設工作，并持續開(kāi)展技術(shù)創(chuàng )新，強化數據智能分布管理，動(dòng)態(tài)感知各數據中心資源使用情況、數據“冷熱”規律、業(yè)務(wù)容災需要，實(shí)現基于資源狀態(tài)和業(yè)務(wù)特點(diǎn)的數據副本跨域智能分布、作業(yè)智能化調度，高效釋放數據要素價(jià)值，有力支撐“東數西算”的全國布局。

未來(lái)，中國移動(dòng)大數據中心將緊抓“東數西算”歷史機遇，踐行自主創(chuàng )新，持續做大做強做優(yōu)大數據分布式協(xié)同計算平臺，構筑大數據計算平臺領(lǐng)域核心競爭力。同時(shí)中國移動(dòng)還將借助超級工程的廣泛影響力，進(jìn)一步發(fā)揮產(chǎn)業(yè)引領(lǐng)作用，協(xié)同產(chǎn)業(yè)合作伙伴，體系化推進(jìn)大數據產(chǎn)業(yè)基礎設施革新，全力服務(wù)國家“東數西算”戰略工程順利落地。