創(chuàng)新是國(guó)產(chǎn)數(shù)據(jù)庫(kù)的唯一出路 | DTCC2022

2022年12月14日~16日，由IT168聯(lián)合旗下ITPUB、ChinaUnix兩大技術(shù)社區(qū)主辦的第13屆中國(guó)數(shù)據(jù)庫(kù)技術(shù)大會(huì)(DTCC2022)在線上隆重召開(kāi)。大會(huì)以“數(shù)據(jù)智能 價(jià)值創(chuàng)新”為主題，設(shè)置2大主會(huì)場(chǎng)，20+技術(shù)專場(chǎng)，超百位行業(yè)專家，為廣大數(shù)據(jù)領(lǐng)域從業(yè)人士提供了一場(chǎng)年度的饕餮盛宴。

正如ITPUB總經(jīng)理、中國(guó)數(shù)據(jù)庫(kù)技術(shù)大會(huì)創(chuàng)辦人唐川所說(shuō)，從2010年開(kāi)始到目前為止，DTCC中國(guó)數(shù)據(jù)庫(kù)技術(shù)大會(huì)可謂是見(jiàn)證了數(shù)據(jù)庫(kù)技術(shù)的發(fā)展與變革。ITPUB社區(qū)也走過(guò)了二十二個(gè)年頭，伴隨著多少技術(shù)人一起走過(guò)青春年華。近12年來(lái)，國(guó)內(nèi)數(shù)據(jù)庫(kù)市場(chǎng)不斷有新的廠商涌現(xiàn)，而本次數(shù)據(jù)庫(kù)技術(shù)大會(huì)更是匯集了華為、騰訊、阿里、達(dá)夢(mèng)、亞馬遜等國(guó)內(nèi)外主流的數(shù)據(jù)庫(kù)廠商，可謂是百花齊放。

如今的DTCC已然成為國(guó)內(nèi)數(shù)據(jù)庫(kù)領(lǐng)域的技術(shù)風(fēng)向標(biāo)，今年云原生數(shù)據(jù)庫(kù)、分布式數(shù)據(jù)庫(kù)是行業(yè)重點(diǎn)發(fā)展趨勢(shì)，金融業(yè)的數(shù)據(jù)庫(kù)探索實(shí)踐更是引發(fā)廣泛討論和關(guān)注。本次大會(huì)設(shè)置了金融行業(yè)數(shù)據(jù)庫(kù)技術(shù)實(shí)踐、云原生數(shù)據(jù)庫(kù)開(kāi)發(fā)與實(shí)踐、分布式數(shù)據(jù)庫(kù)應(yīng)用最佳實(shí)踐、圖數(shù)據(jù)庫(kù)技術(shù)與應(yīng)用創(chuàng)新等專場(chǎng)，分享數(shù)據(jù)庫(kù)最前沿的技術(shù)動(dòng)態(tài)和探索實(shí)踐。

金融業(yè)數(shù)據(jù)庫(kù)升級(jí)提速

在主會(huì)場(chǎng)，渤海銀行生產(chǎn)運(yùn)行中心副主任、首席數(shù)據(jù)庫(kù)專家王飛鵬帶來(lái)“商業(yè)銀行核心數(shù)據(jù)庫(kù)從集中式到分布式架構(gòu)轉(zhuǎn)型最佳實(shí)踐”的主題演講，介紹了商業(yè)銀行數(shù)據(jù)庫(kù)架構(gòu)演進(jìn)趨勢(shì)，王飛鵬指出，金融科技的本質(zhì)是利用信息科技為金融發(fā)展全面賦能。在金融科技潮流之下，數(shù)據(jù)庫(kù)做為商業(yè)銀行承載業(yè)務(wù)數(shù)據(jù)的核心，其在選型規(guī)劃中務(wù)必堅(jiān)持戰(zhàn)略思維，要從根本性、全局性、長(zhǎng)遠(yuǎn)性的問(wèn)題進(jìn)行科學(xué)謀劃，具體來(lái)說(shuō)，穩(wěn)定優(yōu)先，數(shù)據(jù)庫(kù)架構(gòu)要首先滿足銀行對(duì)系統(tǒng)可用性、數(shù)據(jù)一致性、系統(tǒng)安全性等核心要求;隨著銀行對(duì)業(yè)務(wù)快速創(chuàng)新的要求日益迫切，數(shù)據(jù)庫(kù)系統(tǒng)應(yīng)支撐業(yè)務(wù)快速上線投產(chǎn);還要滿足自主可控要求，數(shù)據(jù)庫(kù)架構(gòu)要從傳統(tǒng)商業(yè)封閉式向開(kāi)源、開(kāi)放、自主可控的架構(gòu)轉(zhuǎn)型;隨著銀行交易量和數(shù)據(jù)量的爆發(fā)式增長(zhǎng)，數(shù)據(jù)庫(kù)架構(gòu)從集中式向分布式轉(zhuǎn)型已成為必然趨勢(shì);還有降本增效，銀行經(jīng)營(yíng)環(huán)境的變化，要求運(yùn)行數(shù)據(jù)庫(kù)的基礎(chǔ)設(shè)施從昂貴的IBM小型機(jī)向PC服務(wù)器、從EMC集中式存儲(chǔ)向本地盤等低成本設(shè)施轉(zhuǎn)型。

王飛鵬介紹，銀行引入分布式數(shù)據(jù)庫(kù)面臨著選型、開(kāi)發(fā)、遷移、運(yùn)維四個(gè)方面的挑戰(zhàn)。選型方面，目前分布式數(shù)據(jù)庫(kù)在國(guó)內(nèi)取得快速發(fā)展，初步具備對(duì)國(guó)外數(shù)據(jù)庫(kù)的替換能力，但也面臨各廠商能力參差不齊的問(wèn)題，需要對(duì)分布式數(shù)據(jù)庫(kù)進(jìn)行選型，選擇最合適的產(chǎn)品;開(kāi)發(fā)方面，對(duì)行內(nèi)的應(yīng)用開(kāi)發(fā)人員而言，大家習(xí)慣使用Oracle等數(shù)據(jù)庫(kù)，應(yīng)用都是基于Oracle進(jìn)行開(kāi)發(fā)，遷移到分布式數(shù)據(jù)庫(kù)面臨代碼的應(yīng)用和遷移問(wèn)題;遷移方面，把一些系統(tǒng)從集中式遷移到分布式技術(shù)棧，存在比較多的工作和風(fēng)險(xiǎn);運(yùn)維方面，不同信創(chuàng)數(shù)據(jù)庫(kù)的實(shí)際功能、高可用能力、可擴(kuò)展能力和災(zāi)備能力存在差異，為在生產(chǎn)運(yùn)維環(huán)境做好數(shù)據(jù)庫(kù)運(yùn)維提出了挑戰(zhàn)。分布式數(shù)據(jù)庫(kù)產(chǎn)品的成熟度、穩(wěn)定性還需要經(jīng)過(guò)真實(shí)生產(chǎn)環(huán)境的打磨，才能真正穩(wěn)定。

武漢達(dá)夢(mèng)數(shù)據(jù)庫(kù)股份有限公司技術(shù)總監(jiān)黃海明指出，當(dāng)前外部形勢(shì)非常動(dòng)蕩，金融數(shù)據(jù)庫(kù)的安全風(fēng)險(xiǎn)和供應(yīng)鏈風(fēng)險(xiǎn)值得關(guān)注。當(dāng)前時(shí)間緊、任務(wù)重，金融數(shù)據(jù)庫(kù)國(guó)產(chǎn)化轉(zhuǎn)型的關(guān)鍵因素在于解決工程化難題，要以工程化方式快速、大批量替代海外數(shù)據(jù)庫(kù)，需要考慮風(fēng)險(xiǎn)、效率和成本等多方面因素。達(dá)夢(mèng)的解決方案可以在架構(gòu)層面實(shí)現(xiàn)同等替代，可以最大程度上降低替代的風(fēng)險(xiǎn)，保護(hù)用戶既有投資。

創(chuàng)新是國(guó)產(chǎn)數(shù)據(jù)庫(kù)發(fā)展的唯一

達(dá)夢(mèng)數(shù)據(jù)技術(shù)(江蘇)有限公司總經(jīng)理付新指出，當(dāng)下，數(shù)據(jù)庫(kù)甚至整個(gè)軟件領(lǐng)域最流行的兩個(gè)技術(shù)架構(gòu)相關(guān)的關(guān)鍵詞是分布式和云原生。此外，可以看到數(shù)據(jù)庫(kù)技術(shù)發(fā)展的重要趨勢(shì)是融合，從不同的角度都可以看到融合趨勢(shì)。在軟件和硬件一體化方面，當(dāng)下國(guó)內(nèi)數(shù)據(jù)庫(kù)一體機(jī)的熱度開(kāi)始增加，特別是基于國(guó)產(chǎn)軟硬件平臺(tái)的數(shù)據(jù)庫(kù)一體機(jī)非常契合當(dāng)下黨政、央企等用戶的需要。此外還有多模數(shù)據(jù)庫(kù)、HTAP、湖倉(cāng)一體、流批一體等數(shù)據(jù)技術(shù)融合發(fā)展。在融合之外，數(shù)據(jù)庫(kù)技術(shù)還向著專精特新的細(xì)分方向發(fā)展。

付新強(qiáng)調(diào)，數(shù)據(jù)庫(kù)技術(shù)發(fā)展的最終目標(biāo)是持續(xù)不斷降低運(yùn)維成本、降低運(yùn)行成本，最終降低用戶的數(shù)據(jù)庫(kù)總體擁有成本。對(duì)于未來(lái)國(guó)產(chǎn)數(shù)據(jù)庫(kù)的發(fā)展，達(dá)夢(mèng)認(rèn)為創(chuàng)新才是國(guó)產(chǎn)數(shù)據(jù)庫(kù)發(fā)展的唯一出路，自主創(chuàng)新是達(dá)夢(mèng)公司堅(jiān)定不移的技術(shù)發(fā)展路線。創(chuàng)新離不開(kāi)人才、技術(shù)、資本和需求四大要素，而中國(guó)已經(jīng)具備了所有的基礎(chǔ)條件。

云數(shù)據(jù)庫(kù)加速融合發(fā)展

騰訊云數(shù)據(jù)庫(kù)總經(jīng)理王義成帶來(lái)了題為“騰訊云數(shù)據(jù)庫(kù)賦能企業(yè)釋放數(shù)據(jù)生產(chǎn)力”的主題演講，王義成指出，云數(shù)據(jù)庫(kù)的發(fā)展經(jīng)歷了三個(gè)發(fā)展階段，云數(shù)據(jù)庫(kù)1.0，是云數(shù)據(jù)庫(kù)發(fā)展初期，特征是原生數(shù)據(jù)庫(kù)的平臺(tái)化和自動(dòng)化。云數(shù)據(jù)庫(kù)2.0，是云原生數(shù)據(jù)庫(kù)+國(guó)產(chǎn)化數(shù)據(jù)庫(kù)多樣化發(fā)展。云數(shù)據(jù)庫(kù)3.0，即下一代數(shù)據(jù)庫(kù)的核心趨勢(shì)是自研+融合一體化輸出。騰訊云數(shù)據(jù)庫(kù)堅(jiān)持自研和融合兩個(gè)戰(zhàn)略。其中，融合分為產(chǎn)品能力融合和生態(tài)融合，產(chǎn)品能力融合包括HTAP、軟件硬件等融合，產(chǎn)業(yè)融合則要做到產(chǎn)業(yè)上下游體系真正地融合。

華為云計(jì)算技術(shù)有限公司華為云數(shù)據(jù)庫(kù)服務(wù)產(chǎn)品部總經(jīng)理蘇光牛指出，數(shù)據(jù)庫(kù)的發(fā)展需要自主創(chuàng)新，就像攀登珠穆朗瑪峰時(shí)，一種是從北坡攀登，一種是從南坡攀登，數(shù)據(jù)庫(kù)技術(shù)需要迎難而上，克服最核心的技術(shù)來(lái)攀上珠峰。蘇光牛指出，從數(shù)據(jù)庫(kù)角度來(lái)說(shuō)，分布式和云基礎(chǔ)能力的結(jié)合將是數(shù)據(jù)庫(kù)市場(chǎng)的未來(lái)。他表示，在技術(shù)實(shí)踐上，在面向金融政企的國(guó)產(chǎn)分布式數(shù)據(jù)領(lǐng)域，GaussDB在高可靠、安全、性能方面進(jìn)行多項(xiàng)新特性發(fā)布，全面超越國(guó)外主流數(shù)據(jù)庫(kù)產(chǎn)品;在面向互聯(lián)網(wǎng)的云原生領(lǐng)域，云原生數(shù)據(jù)庫(kù)完成三大轉(zhuǎn)變，實(shí)現(xiàn)Serverless、Regionless、Modeless的全新架構(gòu)演進(jìn)。

阿里巴巴集團(tuán)副總裁、阿里云數(shù)據(jù)庫(kù)產(chǎn)品事業(yè)部負(fù)責(zé)人李飛飛在“PolarDB向云原生一體化的演進(jìn)和發(fā)展”的主題演講中表示，PolarDB向云原生一體化方向快速演進(jìn)，提供企業(yè)級(jí)云原生數(shù)據(jù)處理能力，例如serverless、共享內(nèi)存、多租戶多寫、分布式等，針對(duì)海量數(shù)據(jù)提供實(shí)時(shí)融合分析與計(jì)算的云原生HTAP能力以及結(jié)合ADB提供一體化HTAP能力。

阿里云認(rèn)為數(shù)據(jù)庫(kù)將向云原生一站式數(shù)據(jù)管理與服務(wù)縱深發(fā)展，并提出云原生化、平臺(tái)化、一體化、智能化“四化”趨勢(shì)，其中云原生化中最關(guān)鍵的能力是serverless。未來(lái)，云原生要持續(xù)做強(qiáng)，基于資源池化、資源解耦、微服務(wù)化、容器化等構(gòu)建下一代原生數(shù)據(jù)庫(kù)。隨著物理世界數(shù)字化、生物世界數(shù)字化，如何更好支持多模態(tài)數(shù)據(jù)也將面臨挑戰(zhàn)。接下來(lái)三到五年，數(shù)據(jù)庫(kù)市場(chǎng)需要關(guān)注云原生、多模、智能化、集中分布式一體化，以及軟硬結(jié)合創(chuàng)新，未來(lái)有競(jìng)爭(zhēng)力的數(shù)據(jù)庫(kù)系統(tǒng)一定是和云基礎(chǔ)設(shè)施、云平臺(tái)深度融合，做軟硬協(xié)同平臺(tái)化創(chuàng)新。未來(lái)數(shù)據(jù)庫(kù)需要提升數(shù)據(jù)的可信與安全，最終實(shí)現(xiàn)搭積木式的高性能、低成本、多場(chǎng)景一站式能力。

分布式數(shù)據(jù)庫(kù)大有可為

OceanBase首席架構(gòu)師楊志豐在“OceanBase 4.0：?jiǎn)螜C(jī)分布式一體化的技術(shù)演進(jìn)”的主題演講中表示，從2014年OceanBase 0.5版本開(kāi)始，經(jīng)過(guò)多年多版本的更新，OceanBase逐漸演進(jìn)的越來(lái)越成熟，并在TPC-C國(guó)際權(quán)威的OLTP評(píng)測(cè)中表現(xiàn)突出，具有很好的擴(kuò)展性。OceanBase 4.0作為單機(jī)分布式一體化數(shù)據(jù)庫(kù)，實(shí)現(xiàn)了單機(jī)部署并兼顧分布式架構(gòu)的擴(kuò)展性與集中式架構(gòu)的性能優(yōu)勢(shì)，不僅突破了分布式數(shù)據(jù)庫(kù)單機(jī)性能的瓶頸，還實(shí)現(xiàn)了單機(jī)性能趕超集中式數(shù)據(jù)庫(kù)的跨越，可以更好支持不同規(guī)模的企業(yè)應(yīng)用。

金篆信科副總經(jīng)理秦延濤介紹了中興通訊專為拓展分布式數(shù)據(jù)庫(kù)產(chǎn)業(yè)而成立的控股子公司——金篆信科，分享了GoldenDB的發(fā)展歷程、v7.0技術(shù)優(yōu)勢(shì)等。GoldenDB在金融、運(yùn)營(yíng)商等行業(yè)積累了大量的數(shù)據(jù)庫(kù)遷移實(shí)踐經(jīng)驗(yàn)，秦延濤介紹，在系統(tǒng)遷移過(guò)程中，除了需要做數(shù)據(jù)全量遷移、增量遷移比對(duì)以外，一般推薦客戶做回流方案，即設(shè)計(jì)逃生通道，當(dāng)老系統(tǒng)遷移到新系統(tǒng)以后，GoldenDB支持?jǐn)?shù)據(jù)回流到老系統(tǒng)數(shù)據(jù)庫(kù)，如果新系統(tǒng)里出現(xiàn)異常，可以返回到原來(lái)的老系統(tǒng)里，確保業(yè)務(wù)不受影響，為客戶增強(qiáng)遷移的信心，此外，從集中式系統(tǒng)遷移到分布式架構(gòu)，需要一個(gè)好的運(yùn)維管控平臺(tái)，需要一套完善的運(yùn)維體系來(lái)做支撐，確保運(yùn)維團(tuán)隊(duì)快速了解系統(tǒng)運(yùn)行狀態(tài)。

圖數(shù)據(jù)庫(kù)的未來(lái)在于生態(tài)發(fā)展

在圖數(shù)據(jù)技術(shù)與應(yīng)用創(chuàng)新專場(chǎng)，來(lái)自字節(jié)跳動(dòng)、螞蟻集團(tuán)、等方面的專家重點(diǎn)介紹了圖數(shù)據(jù)庫(kù)技術(shù)的前沿發(fā)展與創(chuàng)新應(yīng)用。去年的圖數(shù)據(jù)庫(kù)專場(chǎng)，大家談?wù)摫容^多的技術(shù)細(xì)節(jié)，比如萬(wàn)億大圖的點(diǎn)切以及邊切等，今年談?wù)摳嗟氖菆D數(shù)據(jù)庫(kù)的應(yīng)用以及生態(tài)建設(shè)等。

字節(jié)跳動(dòng)研發(fā)工程師陳超帶來(lái)了“字節(jié)跳動(dòng)圖數(shù)據(jù)架構(gòu)演進(jìn)——索引和執(zhí)行優(yōu)化”的主題演講，聚焦于圖數(shù)據(jù)庫(kù)中的索引加速和執(zhí)行優(yōu)化，分享 ByteGraph 在性能優(yōu)化方面的一些進(jìn)展。ByteGraph是字節(jié)跳動(dòng)自研的分布式圖數(shù)據(jù)庫(kù)存儲(chǔ)系統(tǒng)，采用計(jì)算存儲(chǔ)分離架構(gòu)，支持有效圖模型，支持Gremlin圖查詢語(yǔ)言，讀寫吞吐可以擴(kuò)展到千萬(wàn)QPS，目前ByteGraph已經(jīng)部署了1000多個(gè)集群，遍布全球多個(gè)機(jī)房，支持頭條、抖音、西瓜視頻、電商風(fēng)控圖譜等多個(gè)業(yè)務(wù)。在社交網(wǎng)絡(luò)中，圖計(jì)算系統(tǒng)會(huì)存在超級(jí)節(jié)點(diǎn)問(wèn)題，例如抖音中網(wǎng)紅大V會(huì)有千萬(wàn)或者上億粉絲，超級(jí)節(jié)點(diǎn)會(huì)影響單機(jī)的可用性，針對(duì)超級(jí)節(jié)點(diǎn)，ByteGraph會(huì)對(duì)每條查詢分為輕查詢和重查詢兩類，同時(shí)會(huì)把單機(jī)資源劃分到新查詢池和重查詢池，查詢時(shí)將對(duì)應(yīng)類別查詢，通過(guò)這種方式，限制重查詢使用的資源量，避免少量重查詢打滿單機(jī)CPU，后續(xù)ByteGraph也會(huì)持續(xù)優(yōu)化自適應(yīng)限流機(jī)制。針對(duì)超級(jí)節(jié)點(diǎn)，除了限流，還會(huì)做一些自適應(yīng)局部索引，在系統(tǒng)內(nèi)部會(huì)衡量識(shí)別查詢代價(jià)和構(gòu)建索引后的執(zhí)行代價(jià)。

螞蟻集團(tuán)圖數(shù)據(jù)庫(kù)負(fù)責(zé)人洪春濤帶來(lái)了“螞蟻高性能圖數(shù)據(jù)庫(kù)TuGraph-DB技術(shù)思考及實(shí)踐”的主題演講，關(guān)聯(lián)數(shù)據(jù)爆炸性增長(zhǎng)對(duì)圖計(jì)算高效處理提出迫切需求，圖計(jì)算利用圖形結(jié)構(gòu)描述事物聯(lián)系，成為分析復(fù)雜關(guān)系數(shù)據(jù)的重要使能技術(shù)。螞蟻集團(tuán)聯(lián)合清華大學(xué)研發(fā)了大規(guī)模圖計(jì)算系統(tǒng)TuGraph。TuGraph圖計(jì)算系統(tǒng)由圖數(shù)據(jù)庫(kù)TuGraph-DB，流式圖計(jì)算系統(tǒng)TuGraph-DataFlow，離線圖計(jì)算系統(tǒng)TuGraph-Compute等多個(gè)子系統(tǒng)構(gòu)成。其中TuGraph-DB是一個(gè)高性能分布式圖數(shù)據(jù)庫(kù)，它歷經(jīng)螞蟻萬(wàn)億級(jí)業(yè)務(wù)的實(shí)際場(chǎng)景錘煉，已經(jīng)成熟應(yīng)用于金融風(fēng)控、搜索推薦、設(shè)備管理等內(nèi)外部場(chǎng)景。

洪春濤指出，圖計(jì)算是一種很通用的、更高層次的抽象計(jì)算方法，上個(gè)世紀(jì)70年代末80年代初其實(shí)就已經(jīng)有圖數(shù)據(jù)庫(kù)概念，后來(lái)關(guān)系型數(shù)據(jù)庫(kù)得以快速發(fā)展，而圖數(shù)據(jù)庫(kù)沒(méi)有那么快發(fā)展起來(lái)，主要原因在于彼時(shí)計(jì)算機(jī)還沒(méi)有那么強(qiáng)大，關(guān)系數(shù)據(jù)庫(kù)這種二維表的表達(dá)對(duì)計(jì)算機(jī)會(huì)更友好，而現(xiàn)在多跳查詢等復(fù)雜關(guān)系的查詢，SQL會(huì)有挑戰(zhàn)，圖計(jì)算在多跳查詢等方面會(huì)有很大的優(yōu)勢(shì)。洪春濤認(rèn)為目前圖計(jì)算系統(tǒng)的發(fā)展還處于一個(gè)比較早期的階段，未來(lái)走向普及還有很多工作要做，包括易用性、性能和成本以及標(biāo)準(zhǔn)化等問(wèn)題。圖計(jì)算系統(tǒng)的發(fā)展最重要的是生態(tài)，需要有更多的用戶、更多的場(chǎng)景來(lái)應(yīng)用，才能不斷推動(dòng)圖計(jì)算系統(tǒng)的發(fā)展。

第十三屆中國(guó)數(shù)據(jù)庫(kù)技術(shù)大會(huì)(DTCC2022)獲得了圓滿成功，有太多的不易，有太多需要感謝，有太多值得被記錄。一點(diǎn)一滴，創(chuàng)新永無(wú)止境，眾志成城，未來(lái)必將行遠(yuǎn)。中國(guó)數(shù)據(jù)庫(kù)技術(shù)發(fā)展的新歷史正在被書(shū)寫，創(chuàng)新是國(guó)產(chǎn)數(shù)據(jù)庫(kù)的唯一出路，未來(lái)的輝煌需要每一個(gè)數(shù)據(jù)庫(kù)從業(yè)者共同去創(chuàng)造。我們有幸是時(shí)代的見(jiàn)證者，我們有幸是時(shí)代的參與者，在這個(gè)數(shù)據(jù)庫(kù)的好時(shí)代，我們滿懷熱情，腳踏實(shí)地。我們期待下一次相遇，因?yàn)槊恳淮蜗嘤龆紩?huì)有前進(jìn)的歡喜。DTCC2023，第十四屆中國(guó)數(shù)據(jù)庫(kù)技術(shù)大會(huì)，不見(jiàn)不散!

免責(zé)聲明：市場(chǎng)有風(fēng)險(xiǎn)，選擇需謹(jǐn)慎!此文僅供參考，不作買賣依據(jù)。

關(guān)鍵詞：