中國移動(dòng)大數(shù)據(jù)中心:緊抓“東數(shù)西算”新機(jī)遇,創(chuàng)新驅(qū)動(dòng)大數(shù)據(jù)基礎(chǔ)設(shè)施革新

發(fā)布時(shí)間:2022-03-16 21:05:07  |  來源:通信世界全媒體  

在全國“一盤棋”的算力總體規(guī)劃下,推動(dòng)實(shí)施“東數(shù)西算”工程意義深遠(yuǎn)。

算力作為當(dāng)今時(shí)代的核心生產(chǎn)力,其對(duì)于數(shù)字經(jīng)濟(jì)時(shí)代發(fā)展的重要性,如同水利之于農(nóng)業(yè)、電力之于工業(yè),已經(jīng)成為推動(dòng)經(jīng)濟(jì)社會(huì)數(shù)字化發(fā)展的重要驅(qū)動(dòng)力,也正成為全球戰(zhàn)略競(jìng)爭(zhēng)的新焦點(diǎn)。國家在全社會(huì)算力需求激增、算力資源區(qū)域分布不均衡的背景下,推出了“東數(shù)西算”這一超級(jí)工程。“東數(shù)西算”對(duì)于整合優(yōu)化我國算力資源,推動(dòng)?xùn)|西部地區(qū)算力需求與土地、能源等資源的互補(bǔ)與匹配具有重要戰(zhàn)略意義。

東數(shù)西算超級(jí)工程的實(shí)施對(duì)國家和企業(yè)而言都具有深遠(yuǎn)意義。從宏觀層面看,全國“一盤棋”的算力總體規(guī)劃,對(duì)我國數(shù)字經(jīng)濟(jì)發(fā)展具有重要的戰(zhàn)略引導(dǎo)作用。既有利于促進(jìn)合理布局、綠色集約、互聯(lián)互通的數(shù)據(jù)中心發(fā)展,又肩負(fù)著戰(zhàn)略性保障國家數(shù)據(jù)安全、調(diào)整全國產(chǎn)業(yè)布局的使命?;谒懔傮w規(guī)劃,實(shí)施“東數(shù)西算”工程,有利于促進(jìn)國家整體經(jīng)濟(jì)協(xié)調(diào)發(fā)展。既有助于提升國家整體算力水平,促進(jìn)國家整體經(jīng)濟(jì)發(fā)展,又有利于推動(dòng)區(qū)域協(xié)調(diào)發(fā)展,通過算力樞紐和數(shù)據(jù)中心集群建設(shè),有力帶動(dòng)產(chǎn)業(yè)上下游投資,形成東西部協(xié)同發(fā)展新格局。

從企業(yè)層面看,實(shí)施“東數(shù)西算”工程是促進(jìn)企業(yè)綠色集約、降本增效、自主創(chuàng)新發(fā)展的新機(jī)遇。一方面,數(shù)據(jù)中心能耗高、占地多,而西部綠色能源、土地資源充裕,將數(shù)據(jù)中心統(tǒng)籌布局至西部,可大幅節(jié)約企業(yè)電力和土地成本。另一方面,當(dāng)前我國信息產(chǎn)業(yè)在關(guān)鍵核心能力自主創(chuàng)新上仍存在較大不足,表現(xiàn)在基礎(chǔ)軟件過度依賴國外技術(shù),新技術(shù)突破引領(lǐng)不足。實(shí)施“東數(shù)西算”工程,為企業(yè)推進(jìn)關(guān)鍵核心技術(shù)攻關(guān),構(gòu)建科技領(lǐng)先優(yōu)勢(shì),進(jìn)而實(shí)現(xiàn)產(chǎn)業(yè)創(chuàng)新發(fā)展帶來歷史性契機(jī)。

推進(jìn)實(shí)施“東數(shù)西算”工程,大數(shù)據(jù)領(lǐng)域需要做好頂層設(shè)計(jì),實(shí)現(xiàn)基礎(chǔ)設(shè)施革新。

在各種算力需求中,大數(shù)據(jù)是對(duì)算力需求更旺盛的領(lǐng)域。隨著數(shù)字經(jīng)濟(jì)的深入發(fā)展,數(shù)據(jù)規(guī)模持續(xù)膨脹,大數(shù)據(jù)中心負(fù)責(zé)海量數(shù)據(jù)的匯聚、加工及開放,表現(xiàn)出算力資源消耗大、服務(wù)時(shí)效多樣化、數(shù)據(jù)安全要求高等特點(diǎn)。推進(jìn)實(shí)施“東數(shù)西算”工程,大數(shù)據(jù)領(lǐng)域需要解決三個(gè)主要問題。

一是如何在“東數(shù)西算”新格局下繼續(xù)保障數(shù)據(jù)服務(wù)的時(shí)效性。隨著大數(shù)據(jù)產(chǎn)業(yè)的蓬勃發(fā)展,大型數(shù)據(jù)中心日數(shù)據(jù)接入處理量已達(dá)PB級(jí),且數(shù)據(jù)服務(wù)的時(shí)效性要求越來越高。在高時(shí)效性要求下,數(shù)據(jù)遠(yuǎn)距離傳輸再加工難以滿足要求,因此在大數(shù)據(jù)領(lǐng)域,一方面要強(qiáng)調(diào)數(shù)據(jù)的預(yù)先布局,將承載離線、非實(shí)時(shí)、備份等業(yè)務(wù)的算力布局在西部,將承載實(shí)時(shí)性業(yè)務(wù)的算力布局在東部,做到東西算力協(xié)同。另一方面,要強(qiáng)化數(shù)據(jù)貼源處理和分層管理,對(duì)于能就近處理的原始數(shù)據(jù),可在區(qū)域數(shù)據(jù)中心就近加工,降低網(wǎng)絡(luò)傳輸壓力??傮w上要統(tǒng)籌考慮數(shù)據(jù)源分布、數(shù)據(jù)價(jià)值密度、數(shù)據(jù)服務(wù)時(shí)效性、算力布局,做好數(shù)據(jù)架構(gòu)的總體規(guī)劃。

二是如何在“東數(shù)西算”新格局下繼續(xù)保障數(shù)據(jù)生產(chǎn)的高效性。隨著“東數(shù)西算”的推進(jìn),數(shù)據(jù)采集和加工呈現(xiàn)多區(qū)域分布的特點(diǎn),傳統(tǒng)的大數(shù)據(jù)技術(shù)架構(gòu)難以承載跨中心數(shù)據(jù)統(tǒng)一處理需求,必須要?jiǎng)?chuàng)新構(gòu)建新型大數(shù)據(jù)基礎(chǔ)設(shè)施:一要算力協(xié)同,具備對(duì)分布在不同區(qū)域中心的計(jì)算任務(wù)統(tǒng)一調(diào)度管控的能力;二要統(tǒng)一治理,具備對(duì)物理分散、邏輯分層的數(shù)據(jù)實(shí)施統(tǒng)一元數(shù)據(jù)管理的能力;三要統(tǒng)一服務(wù),具備在新型復(fù)雜架構(gòu)下用戶服務(wù)體驗(yàn)保持一致的能力。總體上要綜合運(yùn)用分布式協(xié)同計(jì)算、湖倉融合、存算分離、大數(shù)據(jù)PaaS等技術(shù),做好大數(shù)據(jù)計(jì)算架構(gòu)的整體升級(jí)。

三是如何在“東數(shù)西算”新格局下繼續(xù)保障數(shù)據(jù)安全性。算力網(wǎng)絡(luò)具有算力泛化、融通東西、算網(wǎng)共生、靈活連接等特點(diǎn),將會(huì)產(chǎn)生更多的資產(chǎn)暴露面和更高的連接頻次,數(shù)據(jù)傳輸?shù)囊?guī)模更大,路徑更多,服務(wù)面更廣,數(shù)據(jù)安全風(fēng)險(xiǎn)也隨之增加。企業(yè)需進(jìn)一步加強(qiáng)數(shù)據(jù)安全管理,通過數(shù)據(jù)分級(jí)治理,體系性提升數(shù)據(jù)安全防護(hù)水平,持續(xù)完善安全治理架構(gòu)。

中國移動(dòng)立足自主創(chuàng)新,構(gòu)建大數(shù)據(jù)分布式協(xié)同計(jì)算新架構(gòu),推動(dòng)“東數(shù)西算”逐步落地。

為應(yīng)對(duì)大數(shù)據(jù)領(lǐng)域面臨的挑戰(zhàn),更好地實(shí)現(xiàn)大數(shù)據(jù)場(chǎng)景下計(jì)算、存儲(chǔ)向西部的高效轉(zhuǎn)移,除了要充分發(fā)揮傳統(tǒng)運(yùn)營(yíng)商優(yōu)勢(shì),構(gòu)建大帶寬、低時(shí)延、智能化、安全高效的傳輸網(wǎng)絡(luò),中國移動(dòng)大數(shù)據(jù)中心還結(jié)合業(yè)務(wù)發(fā)展,運(yùn)用貼源計(jì)算、協(xié)同計(jì)算、存算分離、湖倉融合等新技術(shù)新思路,積極推進(jìn)大數(shù)據(jù)基礎(chǔ)設(shè)施架構(gòu)全面升級(jí)。

隨著數(shù)據(jù)規(guī)模逐年增長(zhǎng),中國移動(dòng)原有物理集中的大數(shù)據(jù)平臺(tái)難以承載持續(xù)增長(zhǎng)的業(yè)務(wù)壓力。為滿足全網(wǎng)日益增長(zhǎng)的業(yè)務(wù)需求,中國移動(dòng)大數(shù)據(jù)中心創(chuàng)新性規(guī)劃構(gòu)建大數(shù)據(jù)分布式協(xié)同計(jì)算平臺(tái),將原有物理集中的計(jì)算架構(gòu)升級(jí)為分布式多中心協(xié)同計(jì)算的處理架構(gòu),實(shí)現(xiàn)海量數(shù)據(jù)的分布式貼源處理,解決了業(yè)務(wù)集中承載難、優(yōu)秀能力推廣難等問題。計(jì)劃到2023年底建成包括貴陽、重慶、呼和浩特等西部節(jié)點(diǎn)在內(nèi)共九大區(qū)域中心的大數(shù)據(jù)分布式協(xié)同計(jì)算平臺(tái),接入中國移動(dòng)全網(wǎng)數(shù)據(jù),高效支撐大數(shù)據(jù)業(yè)務(wù)創(chuàng)新發(fā)展。

中國移動(dòng)大數(shù)據(jù)分布式協(xié)同計(jì)算平臺(tái)的建設(shè)是中國移動(dòng)在結(jié)合自身業(yè)務(wù)發(fā)展的前提下,為“東數(shù)西算”的全面落地做好技術(shù)儲(chǔ)備和初步驗(yàn)證的重要工程。中國移動(dòng)大數(shù)據(jù)中心堅(jiān)持自主創(chuàng)新,突破跨中心兩級(jí)協(xié)同調(diào)度、智能調(diào)度、跨DC高速傳輸、協(xié)同計(jì)算等多項(xiàng)技術(shù)難題,已完成中國移動(dòng)大數(shù)據(jù)分布式協(xié)同計(jì)算平臺(tái)1.0版本研發(fā),具備一點(diǎn)觸發(fā)、多中心協(xié)同計(jì)算的能力。

在數(shù)據(jù)分布管理層面,構(gòu)建數(shù)據(jù)分層管理體系,按層次按熱度進(jìn)行數(shù)據(jù)的統(tǒng)籌分布管理。明細(xì)數(shù)據(jù)實(shí)時(shí)就近接入?yún)^(qū)域中心實(shí)現(xiàn)貼源處理,離線匯總數(shù)據(jù)向西部統(tǒng)一匯聚、計(jì)算,滿足多場(chǎng)景數(shù)據(jù)時(shí)效要求。

在技術(shù)架構(gòu)層面,一是構(gòu)建統(tǒng)一元數(shù)據(jù)、統(tǒng)一開發(fā)調(diào)度能力,實(shí)現(xiàn)任務(wù)一點(diǎn)編排,多中心協(xié)同調(diào)度;二是構(gòu)建協(xié)同計(jì)算引擎,實(shí)現(xiàn)基于執(zhí)行計(jì)劃拆分、算子下推的跨域計(jì)算及分析;三是構(gòu)建統(tǒng)一資源管控層,實(shí)現(xiàn)對(duì)多中心的分布式資源進(jìn)行統(tǒng)一管控統(tǒng)一開放能力;四是應(yīng)用大數(shù)據(jù)存算分離、湖倉融合架構(gòu),實(shí)現(xiàn)多模態(tài)數(shù)據(jù)的一點(diǎn)接入,隨處可見、隨處可算。

在安全管理層面,全面落實(shí)三法一條例要求,構(gòu)建全方位全流程數(shù)據(jù)安全管控體系,進(jìn)一步強(qiáng)化跨中心數(shù)據(jù)流動(dòng)一致性稽核能力,具備完備的敏感操作攔截、敏感日志審計(jì)、敏感數(shù)據(jù)加密等能力,確保全生命周期數(shù)據(jù)安全。

當(dāng)前分布式協(xié)同計(jì)算架構(gòu)已在寧波、蘇州、汕頭、株洲、鄭州五大區(qū)域節(jié)點(diǎn)完成平臺(tái)部署,支撐位置洞察、內(nèi)容洞察等應(yīng)用創(chuàng)新,實(shí)現(xiàn)中國移動(dòng)近三分之一的大數(shù)據(jù)算力分流。2022年,中國移動(dòng)大數(shù)據(jù)中心將進(jìn)一步在貴陽、重慶、呼和浩特、哈爾濱等區(qū)域節(jié)點(diǎn)開展平臺(tái)建設(shè)工作,并持續(xù)開展技術(shù)創(chuàng)新,強(qiáng)化數(shù)據(jù)智能分布管理,動(dòng)態(tài)感知各數(shù)據(jù)中心資源使用情況、數(shù)據(jù)“冷熱”規(guī)律、業(yè)務(wù)容災(zāi)需要,實(shí)現(xiàn)基于資源狀態(tài)和業(yè)務(wù)特點(diǎn)的數(shù)據(jù)副本跨域智能分布、作業(yè)智能化調(diào)度,高效釋放數(shù)據(jù)要素價(jià)值,有力支撐“東數(shù)西算”的全國布局。

未來,中國移動(dòng)大數(shù)據(jù)中心將緊抓“東數(shù)西算”歷史機(jī)遇,踐行自主創(chuàng)新,持續(xù)做大做強(qiáng)做優(yōu)大數(shù)據(jù)分布式協(xié)同計(jì)算平臺(tái),構(gòu)筑大數(shù)據(jù)計(jì)算平臺(tái)領(lǐng)域核心競(jìng)爭(zhēng)力。同時(shí)中國移動(dòng)還將借助超級(jí)工程的廣泛影響力,進(jìn)一步發(fā)揮產(chǎn)業(yè)引領(lǐng)作用,協(xié)同產(chǎn)業(yè)合作伙伴,體系化推進(jìn)大數(shù)據(jù)產(chǎn)業(yè)基礎(chǔ)設(shè)施革新,全力服務(wù)國家“東數(shù)西算”戰(zhàn)略工程順利落地。



關(guān)鍵詞: 通信世界網(wǎng) 中國移動(dòng) 東數(shù)西算

 

網(wǎng)站介紹  |  版權(quán)說明  |  聯(lián)系我們  |  網(wǎng)站地圖 

星際派備案號(hào):京ICP備2022016840號(hào)-16 營(yíng)業(yè)執(zhí)照公示信息版權(quán)所有 郵箱聯(lián)系:920 891 263@qq.com