2020年中國資料庫技術大會亮點搶先看

qing_yun發表於2020-11-19

2020年是一個充滿變數的年份,疫情的肆虐改變了很多,企業加快了數字化程式,中美貿易戰讓我們意識到基礎軟體的短板。與此同時,2020年也有其確定性的一面,國家把資料作為五大生產要素之一,進一步凸顯了資料的重要性,十四五規劃提出科技自立自強成為國家發展的戰略支撐,信創與自主可控的東風為以資料庫為代表的基礎軟體帶來了新的發展機遇。

國內資料庫迎來了屬於自己的風口,肩負著新時代所賦予的使命。資料海量爆發以及其重要性不斷促進資料庫架構的革新與效能提升,自主可控的信創大潮也激勵著國產資料庫廠商奮發圖強。在此背景下可以看到,正在百花齊放的中國資料庫市場更加爭奇鬥豔,也贏得了重量級客戶的青睞,素有“宇宙行”之稱的中國工商銀行重要業務系統——對公(法人)理財系統完成從大型主機到分散式架構改造,執行在分散式資料庫OceanBase之上,騰訊雲分散式資料庫TBase將為中國人保集團在數字化提供支援,達夢資料庫中標中國石油天然氣股份有限公司管道分公司的國產化改造一期專案等,資本也紛紛看好,2020年7月,人大金倉宣佈完成近億元融資,10月,巨杉宣佈完成數億元人民幣D輪融資,日前偶數科技完成B輪融資,PingCAP 宣佈完成 2.7 億美元的D輪融資等,一系列的融資加速了國產資料庫市場的推進。

在紛繁的資料庫技術潮流中,分散式、雲原生、開源、圖、AI等成為新的發展趨勢,在各行業的落地應用中,金融業尤其是銀行成為兵家必爭之地。2020年第十一屆中國資料庫技術大會(DTCC2020)將以“架構革新 高效可控”為主題,帶你去看最前沿的資料庫技術趨勢與實踐。

2020年12月21日~12月23日,由 IT168 旗下 ITPUB 企業社群平臺主辦的第十一屆中國資料庫技術大會(DTCC2020),將在北京隆重召開。大會以“架構革新 高效可控”為主題,設定2大主會場,20+技術專場,將邀請超百位行業專家,重點圍繞資料架構、AI與大資料、傳統企業資料庫實踐和國產開源資料庫等內容展開分享和探討,為廣大資料領域從業人士提供一場年度盛會和交流平臺。

為了幫助更多企業落地資料專案實施方案,今年將繼續開設多門深度培訓課程,內容涵蓋資料中臺、去IOE實踐、區塊鏈技術、核心開發實踐等。3天傳統技術演講+1天深度主題,將匯聚各行業精英、技術領袖、行業專家和資料英雄,帶來超過100場主題演講和超5場培訓課程的頭腦風暴。大會官網:http://dtcc.it168.com

歷經十年的積累與沉澱,如今的DTCC已然成為國內資料庫領域的技術風向標,見證了整個行業的發展與演變。作為頂級的資料領域技術盛會,今年又有哪些亮點?

亮點一:架構革新之分散式資料庫

在海量資料的爆發之下,傳統的集中式架構出現了瓶頸,有業內人士指出未來如果量子計算機突破了硬體的極限,會迴歸到集中式架構,當下來看分散式架構依然是大勢所趨。

在雲端計算時代,雲原生分散式資料庫開始崛起,提供彈性擴充套件、高可用、分散式等特性。為了滿足彈性擴充套件、彈性計算、以及按需按量使用等企業級應用需求,雲原生資料庫需要利用軟硬體一體化設計,同時探索新的體系架構例如通過分散式shared-storage來實現shared-everything和儲存計算分離,一寫多讀的擴充套件能力。在高併發、對水平擴充有強需求的應用場景下,雲原生資料庫同時也需要探索基於shared-nothing的分散式架構來提供分散式資料庫能力來處理分散式查詢和分散式事務處理。同時,金融級高可用、異地多活等技術挑戰也是雲原生資料庫所必須提供的關鍵能力。同時也深度結合了大資料技術、機器學習以及安全可信等最新技術,提供面對未來下一代企業級雲原生分散式資料庫系統。

在DTCC2020主會場1,阿里巴巴集團副總裁,阿里雲智慧資料庫事業部總負責人李飛飛將帶來《企業級雲原生分散式資料庫系統:機遇與挑戰》的主題演講,分享雲原生分散式資料庫的機遇與挑戰。

亮點二:資料庫核心如何優化?

根據中國資訊通訊研究院釋出的《開源生態白皮書(2020年)》,2019年我國企業已經使用開源技術的企業佔比為87.4%,同比增長10.7%,我國企業使用開源技術已成主流。根據信通院的資料,我國超半數企業使用開源軟體應用於資料庫方向。企業在資料庫方面對開源軟體的使用比例最高,佔比為58.7%,其次企業對大資料和儲存的開源軟體使用佔比也均超過五成,分別為52.4%和51.2%。

使用開源資料庫,資料庫核心優化非常重要。開源資料庫(MySQL/PostgreSQL)核心有什麼可以修改的地方嗎?如何修改?要回答這些問題,有一個最佳參考物件:Oracle。雖然2019年Oracle在國內歷經風雨,但Oracle資料庫的核心仍十分優秀,而且積累了大量高併發、海量資料場景下的最佳方式。研究、參考Oracle的核心,將它的成熟經驗用於基於開源或自研的資料庫,是師夷長技以制夷的一種很好方式。

在DTCC2020專場1,美創科技技術專家首席研究員呂海波將帶來《借鑑Oracle,深入修改MySQL/PostgreSQL核心程式碼》的主題演講,以除錯資料庫技術為方式,深入資料庫中最核心的SQL解析、邏輯與物理I/O、事務處理、資料儲存為例,比較Oracle、MySQL、PostgreSQL三種主流關聯式資料庫核心的異同,以及如何參考Oracle的成熟經驗修改MySQL、PostgreSQL核心。

亮點三:金融行業資料庫落地實踐

在再造一個農業銀行的資料化轉型戰略部署下,農業銀行在基礎設施領域經過充分調研和決策,在資料庫領域制定了“自主可控為主+商業產品為輔”的應用策略,不斷加大資料庫團隊建設,積極增加人力投入,利用銀行金融業務場景豐富、監管要求嚴格等需求特點,不斷加深對多種資料庫的研究探索和功能試用。一方面充分利用現有商業資料庫的各種功能,滿足在資源管理、兩地三中心執行、實時資料匯流排、資料遷移等多個方面的實際需求,具備了成熟的生產應用經驗;一方面不斷深入研究開源資料庫MySQL、圖資料庫等多種型別資料庫,積極探索高可用架構、擴充套件業務應用場景,選取多種業務場景進行生產試點應用,具備了一定的生產使用經驗。

在DTCC2020專場3,中國農業銀行研發中心資料庫團隊負責人張剛將帶來《農行在商業/開源資料庫方面的探索和實踐》的主題演講,為你奉上乾貨滿滿的金融業資料庫落地實踐。

亮點四:資料架構設計與實踐

去IOE的浪潮已經持續多年,近兩年在信創和自主可控的大背景下,去IOE之聲更為響亮。傳統企業如何降本增效,從傳統商業封閉的IOE系統遷移到開源分散式系統,一直都是系統建設的難點。

在DTCC2020專場5,浙江移動雲智慧中心平臺架構部主管郭嶽將帶來《浙江移動業務系統去IOE經驗》的主題演講,將從去IOE的技術路線選擇、組織架構適配,到目前進展,全面揭示傳統企業去IOE可行路徑,對於傳統企業如何進行去IOE工作提供了可借鑑的路徑,同時對未來系統規劃和演進進行了思考。

亮點五:圖資料庫技術的落地與應用

隨著大資料、人工智慧、5G、IoT等技術發展,帶來了資料量的激增、資料關聯的複雜化以及資料處理需求的提升,發掘複雜關聯資料的內在價值成為巨大挑戰。與此同時,Gartner 指出:圖分析是未來公司可持續競爭力唯一且最有效的資料處理手段。圖資料庫以事物和事物間關係的資料結構儲存資料,專門針對複雜關聯深鏈查詢優化,成為了近年崛起速度最快的資料庫技術。包括沃爾瑪、亞馬遜、CISCO、HP、eBay在內的75%的全球百強企業已開始使用圖資料庫解決生產問題,提升運營效率、節約運營成本、創造客戶價值。

然而,伴隨圖資料庫賦能帶來的業務增長,客戶在資料價值轉化過程中又遇到了新的挑戰。面對體量激增的超大規模海量圖資料以及業務驅動的對關聯資料實時查詢、計算分析的需求,現有圖資料庫技術暴露出了效能低、擴充套件差、資源佔用效率低等問題,催生了新一代圖資料庫技術的發展。

在DTCC2020專場6,創鄰科技 CEO張晨 將帶來《Galaxybase分散式圖資料庫》的主題演講,介紹以Galaxybase為代表的具備大圖資料實時查詢計算效能的新一代圖資料庫技術,以及圖資料庫整體生態等。

亮點六:雲原生資料庫時代已來

根據Gartner 2019年的資料來看,2018年全球Cloud DBMS收入佔據全球DBMS市場份額的22.75%,預計到2022年75%的資料庫將會在雲上,雲資料庫的使用將會變得越來越普遍。傳統資料庫到雲資料庫有哪些不同,如何解決完整的生命週期管理,服務高可用以及資料高可靠如何保證,在資料安全越來越受重視的今天,雲資料庫產品在這方面與傳統模式又有哪些不同。在雲資料庫建設的過程中需要解決哪些問題,如何從1條產品線逐步去完善打造一個雲資料庫生態體系,如何讓資料庫上雲以及資料在雲間如何更好地流轉。

在DTCC2020專場9,京東雲專家架構師&雲資料庫技術負責人張成遠將帶來《雲資料庫建設實踐》的主題分享,通過這些實踐幫助大家更好地去理解雲資料庫背後的技術原理以及思考未來雲資料技術的發展趨勢。

亮點七:AI與大資料技術應用

近年來,眾多零售行業打破傳統的銷售模式,以網際網路為依託,通過運用大資料及人工智慧的技術能力對商品的生產、流通與銷售過程進行升級改造,深度融合線上服務、線下體驗以及現代物流,逐步形成了新零售模式。在新零售背景下,將商品相關的資料進行立體化、智慧化、常識化的理解對於相關業務來說至關重要,因此催生了商品知識圖譜相關的研究方向。在商品圖譜構建方面,零散的資料來源、異構資料的整合、多模態資料的資訊融合等都對圖譜的構建提出了巨大的挑戰。在應用方面,由於新零售領域中業務覆蓋廣泛,包括線上購物、線下配送、倉儲、供應鏈等,在不同業務中商品知識圖譜都有不同的應用方式,需要更加緊密地和業務進行對接。

在DTCC2020專場11,美團搜尋與NLP部技術專家曹雪智將帶來《美團大腦系列:新零售場景下商品知識圖譜的構建及應用》的主題分享,基於美團點評的應用場景,介紹美團大腦中的商品知識圖譜是如何進行構建並賦能新零售行業。

亮點八:撥開資料中臺的迷霧

資料中臺自2018年在國內逐漸興起以來,掌聲和質疑從未間斷。誇讚者認為資料中臺是企業挖掘資料價值的關鍵,質疑者稱其毀了不少企業的CIO。資料中臺是“李鬼”還是“李逵”?

資料在機器學習中的作用舉足輕重,微博機器學習平臺資料中臺以自身強大的資料工程能力,提高了資料生成與獲取效率,增強資料價值,在資料儲存與資料計算上支撐了微博業務的機器學習實施。

在DTCC2020專場12,微博機器學習資料中臺資料架構童學敏將帶來《微博機器學習平臺資料中臺實踐》的主題演講,從微博機器學習平臺、資料中臺架構、實時資料計算、高效能資料服務等方面分享微博的資料中臺。

亮點九:資料庫智慧運維

資料庫的高可用,是為了保證在發生一些異常情況時,資料庫能夠繼續對外提供資料庫服務,保證資料庫服務的連續性,所以資料庫的高可用也是非常重要、非常基礎的資料庫架構。目前網際網路公司中關係型資料庫使用MySQL和PostgreSQL資料庫比較多,這兩類資料庫都支援主從複製功能,可以將資料庫例項從單例項變成主從複製多例項,使資料和服務從一份變為多份,這為高可用奠定了基礎。但僅僅有主從複製是不夠的,在生產環境中,要保證業務和資料服務的高可用,在主從複製的基礎上,還需要先從整體上對高可用的本質、架構要點、實現細節、功能效能等方面進行綜合權衡和考慮,才可以實現一個相對完備的高可用架構。

在DTCC2020專場14,Airwallex(空中雲匯) 資深DBA趙飛祥將帶來《MySQL資料庫與PostgreSQL資料庫高可用分析與實踐》的主題演講,分享他在MySQL和PostgreSQL高可用方面的思考和實踐。

亮點十:NoSQL資料庫技術實踐

Redis作為一款高效能、易擴充套件、資料結構豐富的記憶體型NoSQL資料庫,憑藉其開源、高效、易用的特性,擁有著廣泛的使用者基礎。

UPRedis是銀聯基於Redis+TwemProxy的分散式快取產品,目前在公司內廣泛應用,線上部署超過1000例項,支撐了公司內無卡、二維碼、全渠道及雲閃付等關鍵應用。隨著公司內技術架構逐步從單中心升級為多中心,為保持應用層無狀態,需要對異地中心的快取、關係型資料庫等實時同步。因此需要UPRedis支援異地多活。

在DTCC2020專場17,中國銀聯·雲端計算中心分散式快取產品UPRedis研發負責人趙仕榮將帶來《銀聯分散式快取的異地多活實踐》的主題演講,介紹異地多活帶來的技術挑戰以及UPRedis的解決方案,比如,Redis並不支援主主同步,UPRedis如何防止資料迴圈同步等。

除此之外,本次大會還設有資料治理、儲存與計算專場,講述企業的最佳實踐。更多精彩歡迎關注DTCC2020大會官網,作為頂級的資料領域技術盛會,DTCC2020將繼續秉承一貫的乾貨分享和實踐指導原則,期待大家的熱情參與!

來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/69925873/viewspace-2735382/,如需轉載,請註明出處,否則將追究法律責任。

相關文章