在新技術(shù)浪潮中,數(shù)據(jù)庫作為數(shù)據(jù)存儲和管理的核心系統(tǒng),其重要性不言而喻。數(shù)據(jù)庫不僅要保證數(shù)據(jù)的安全可靠,還要能夠高效地處理海量數(shù)據(jù),為企業(yè)決策提供有力支持。

 尤其在信息技術(shù)自主可控的背景下,面對快速變化的市場,以及復(fù)雜的業(yè)務(wù)場景需求,國產(chǎn)數(shù)據(jù)庫發(fā)展態(tài)勢如何?是否能肩負(fù)起數(shù)智化轉(zhuǎn)型的重任?

 2024年4月26日,由騰訊云數(shù)據(jù)庫、開放原子開源基金會、OpenTenBase、ITPUB聯(lián)合主辦的騰訊云數(shù)據(jù)庫城市行活動,在上海完美收官。會議以“數(shù)據(jù)庫技術(shù)與應(yīng)用深度探索”為主題,匯聚了業(yè)界頂尖的數(shù)據(jù)庫專家和企業(yè)代表,共同探討數(shù)據(jù)庫技術(shù)的最新發(fā)展、應(yīng)用實踐以及未來趨勢。

 騰訊云數(shù)據(jù)庫開源專家耿航在開場中表示,在企業(yè)數(shù)智化升級過程中,國產(chǎn)數(shù)據(jù)庫呈現(xiàn)出蓬勃發(fā)展態(tài)勢。騰訊云數(shù)據(jù)庫以多樣化產(chǎn)品滿足不同用戶需求,目前已廣泛覆蓋金融、交通、能源等行業(yè)。同時,生態(tài)建設(shè)是國產(chǎn)數(shù)據(jù)庫發(fā)展的重中之重,騰訊云數(shù)據(jù)庫通過生態(tài)伙伴賦能、賽事、人才培養(yǎng)等方式,與上下游伙伴通力合作。去年,TDSQL社區(qū)版OpenTenBase已捐給國內(nèi)的開放原子開源基金會,不久前,OpenTenBase挑戰(zhàn)賽在南京成功舉辦,得到了業(yè)界很多企業(yè)的支持,如天翼云,中軟國際等,未來也希望業(yè)界伙伴與騰訊云數(shù)據(jù)庫攜手共同打造國產(chǎn)數(shù)據(jù)庫新生態(tài)。

 01 解鎖空間數(shù)據(jù)價值,OpenTenBase引領(lǐng)未來趨勢

 那么,以騰訊云為代表的國產(chǎn)數(shù)據(jù)庫是如何在企業(yè)應(yīng)用場景中發(fā)揮關(guān)鍵作用的呢?騰訊云數(shù)據(jù)庫內(nèi)核研發(fā)高級工程師、OpenAtom OpenTenBase社區(qū)貢獻(xiàn)者張文杰,以《OpenTenBase助力空間數(shù)據(jù)分析》為主題,揭秘了空間數(shù)據(jù)處理這一重要方向!

 隨著車聯(lián)網(wǎng)、物聯(lián)網(wǎng)的發(fā)展,空間數(shù)據(jù)處理需求激增。所謂“空間數(shù)據(jù)”,是描述物體空間特征的數(shù)據(jù),大體可以分為兩類:一類是矢量數(shù)據(jù),通常指日常生活中經(jīng)常遇到的點線面這種類型的數(shù)據(jù);另外一類是柵格數(shù)據(jù),包括像素/位圖和圖層等。

 空間數(shù)據(jù)處理方案經(jīng)歷三個階段:第一階段,采用專用的GIS數(shù)據(jù)引擎,通常和空間數(shù)據(jù)處理的應(yīng)用綁定在一起,然后把空間數(shù)據(jù)存儲在一些平面文件里面,必須是專業(yè)人員才能做相應(yīng)的開發(fā)。第二階段,把一部分?jǐn)?shù)據(jù)存儲在關(guān)系型數(shù)據(jù)庫當(dāng)中,會做一些簡單的查詢和聚合,但是存儲在數(shù)據(jù)庫中的數(shù)據(jù)不是真正的空間數(shù)據(jù)類型,查詢效率比較低,同樣需要專用的GIS數(shù)據(jù)處理引擎。第三階段,直接通過空間數(shù)據(jù)庫來對外提供服務(wù),用戶可以通過簡單的SQL查詢存儲在空間數(shù)據(jù)庫當(dāng)中的空間數(shù)據(jù)。

 目前業(yè)界公認(rèn)的功能最豐富且免費開源的空間數(shù)據(jù)庫是PostGIS。PostGIS是一個開源數(shù)據(jù)庫插件,通過添加空間數(shù)據(jù)類型、空間索引、空間函數(shù),使關(guān)系型數(shù)據(jù)庫直接轉(zhuǎn)換為空間數(shù)據(jù)庫。

 OpenTenBase將在最新的2.6版本里面集成PostGIS最新版本,支持OGC的SFA標(biāo)準(zhǔn)中的空間數(shù)據(jù)類型,空間數(shù)據(jù)處理函數(shù),并且支持多種空間數(shù)據(jù)索引。

 PostGIS集成到OpenTenBase中之后,可以借助OpenTenBase的分布式架構(gòu),支持大容量的空間數(shù)據(jù)存儲,支持跨機(jī)并行高效的空間數(shù)據(jù)處理能力,更好地助力企業(yè)對空間數(shù)據(jù)的分析和應(yīng)用。

 OpenTenBase是騰訊云數(shù)據(jù)庫團(tuán)隊研發(fā)的企業(yè)級分布式HTAP開源數(shù)據(jù)庫,是騰訊云企業(yè)級分布式數(shù)據(jù)庫TDSQL PG的社區(qū)發(fā)行版,具有高擴(kuò)展性、商業(yè)數(shù)據(jù)庫語法兼容、分布式HTAP引擎、多級容災(zāi)和多維度資源隔離等能力,已成功應(yīng)用在金融、政府、電信、醫(yī)療、航天等行業(yè)的核心業(yè)務(wù)系統(tǒng)。在2023開放原子開發(fā)者大會上,騰訊云OpenTenBase正式捐贈給開放原子基金會。通過開源共創(chuàng)的方式,與上下游產(chǎn)業(yè)鏈以及開發(fā)者共同打造繁榮數(shù)據(jù)庫技術(shù)生態(tài)。

 02 企業(yè)降本增效的利器,TDSQL-C Serverless開啟云原生新篇章

 在數(shù)智化浪潮席卷全球的今天,如何實現(xiàn)成本優(yōu)化與效率提升,成為眾多企業(yè)亟待解決的問題。TDSQL-C Serverless以其獨特的云原生優(yōu)勢和能力,助力企業(yè)實現(xiàn)降本增效,開啟智能化新篇章。

 騰訊云數(shù)據(jù)庫產(chǎn)品陳昊,在《TDSQL-C Serverless助力企業(yè)降本增效》主題分享中表示,在云計算發(fā)展浪潮中,有越來越多的業(yè)務(wù)對數(shù)據(jù)庫的高彈性、高可用性和可擴(kuò)展性提出了更為嚴(yán)苛的要求,企業(yè)愈發(fā)渴望實現(xiàn)資源的按需使用。順應(yīng)這一需求,Serverless架構(gòu)成為降本增效的優(yōu)選。Serverless發(fā)揮了云原生數(shù)據(jù)庫高性能優(yōu)勢,通過更靈活的資源調(diào)配和成本優(yōu)化,為企業(yè)提供了更為經(jīng)濟(jì)高效的解決方案。

 從應(yīng)用角度來看,云原生數(shù)據(jù)庫TDSQL-C具有重要的市場價值和廣闊的應(yīng)用前景。TDSQL-C推出了全球首個可釋放存儲架構(gòu)的Serverless服務(wù),徹底解決了業(yè)內(nèi)Serverless服務(wù)無法完全實現(xiàn)不使用不付費的痛點。當(dāng)實例暫停后,數(shù)據(jù)將進(jìn)行歸檔存儲,降低存儲費用高達(dá)80%,無需再為高昂的存儲進(jìn)行付費。此外,新版本還推出了集群版Serverless,支持只讀節(jié)點和Proxy彈性能力,打破了Serverless應(yīng)用場景的局限,全面承載著企業(yè)的核心業(yè)務(wù)。

 值得一提的是,TDSQL-C Serverles實現(xiàn)了縮容場景無慢查詢,確保彈性擴(kuò)縮容過程無延遲,為關(guān)鍵業(yè)務(wù)提供有力保障。目前,TDSQL-C已助力多家企業(yè)降本增效,讓業(yè)務(wù)穩(wěn)定運行在新架構(gòu)上。相信,隨著云原生數(shù)據(jù)庫的不斷演進(jìn),會有越來越多的企業(yè)看到Serverless數(shù)據(jù)庫帶來的實實在在的價值和效益。

 03 高可用架構(gòu)探索,基于k8s的云原生數(shù)據(jù)庫架構(gòu)實踐

 在金融領(lǐng)域,很多企業(yè)都在使用騰訊云的TDSQL數(shù)據(jù)庫。為了實現(xiàn)降本增效目標(biāo),領(lǐng)先企業(yè)是如何把傳統(tǒng)的MySQL數(shù)據(jù)庫遷移到Kubernetes(k8s)平臺上,實現(xiàn)云原生數(shù)據(jù)庫轉(zhuǎn)型的呢?

 平安銀行數(shù)據(jù)庫專家李家好,在《平安銀行數(shù)據(jù)庫上云之路》主題分享中,詳細(xì)介紹了基于k8s的MySQL遷移之旅。面對基于虛擬機(jī)的傳統(tǒng)數(shù)據(jù)庫架構(gòu),平安銀行開始思考如何基于k8s實現(xiàn)云原生數(shù)據(jù)庫轉(zhuǎn)型。

 在轉(zhuǎn)型初期,嘗試過很多方案,但都很難保證跨兩地三中心需求。后來,企業(yè)決定把pod當(dāng)虛機(jī)看,利用k8s的快速恢復(fù)能力、擴(kuò)容能力,在兩地三中心的每個中心,部署自己的小k8s集群。這意味著,一個MySQL的主從集群會跨多個k8s,底層用的是共享存儲,一套k8s集群部署一套存儲,可靠性會高出很多個數(shù)量級。

 一旦遇到pod故障,首先借助k8s的自恢復(fù)能力,在限定時間內(nèi)自己拉起來。如果沒有恢復(fù),會發(fā)起一個跨k8s的切換,換到另外一個機(jī)房的機(jī)器去做處理。

 目前,云原生數(shù)據(jù)庫轉(zhuǎn)型成果顯著提升,基于k8s的擴(kuò)縮容能力已經(jīng)做到分鐘級,資源利用率明顯提升,對低利用的DB可以實現(xiàn)自動關(guān)停。

 04 智能化創(chuàng)新,AI數(shù)據(jù)庫浪潮下的SQL優(yōu)化實踐

 與降本增效、技術(shù)升級密切相關(guān)的另一個話題是智能化創(chuàng)新。在這個全新的數(shù)字化時代,人工智能憑借其卓越的智能處理和分析能力,正在深刻改變著我們的生活方式和工作模式。而數(shù)據(jù)庫,作為企業(yè)業(yè)務(wù)的核心支撐能力,已成為數(shù)字化基石。當(dāng)數(shù)據(jù)庫與人工智能相遇,兩者相互融合,將會迸發(fā)出怎樣的火花呢?

 數(shù)據(jù)庫高級技術(shù)專家薛曉剛,以《AI數(shù)據(jù)庫浪潮下的SQL優(yōu)化》為主題進(jìn)行了干貨分享。在他看來,AI在數(shù)據(jù)庫領(lǐng)域的應(yīng)用在國外的數(shù)據(jù)庫上已經(jīng)有了落地實現(xiàn)。2018年Oracle就率先實現(xiàn)了自治數(shù)據(jù)庫,而其他的數(shù)據(jù)庫也在這個賽道上發(fā)力,這讓我們看到了新的可能。我們利用AI技術(shù)對數(shù)據(jù)庫進(jìn)行智能優(yōu)化和管理,提升數(shù)據(jù)庫的穩(wěn)定性和性能。在AI帶來的收益同時,我們也看到了,還有一些常見問題,尤其是非互聯(lián)網(wǎng)行業(yè)中的場景,是AI短期甚至長期都還不能解決的。同時,我們也可以從更宏觀的角度去考慮數(shù)據(jù)庫的架構(gòu)和整合,以適應(yīng)不斷變化的業(yè)務(wù)需求。

 05 小結(jié)

 此次論壇的成功舉辦,為國產(chǎn)數(shù)據(jù)庫技術(shù)創(chuàng)新帶來新思維、新視角,也讓我們看到了引領(lǐng)未來發(fā)展的新趨勢。國內(nèi)數(shù)據(jù)庫技術(shù)的持續(xù)創(chuàng)新與突破,不僅體現(xiàn)在性能優(yōu)化、安全性提升等方面,更體現(xiàn)在對業(yè)務(wù)需求的深刻理解和精準(zhǔn)滿足上。我們期待在不久的將來,以騰訊云為代表的國產(chǎn)數(shù)據(jù)庫能夠成為全球數(shù)據(jù)庫領(lǐng)域的一支重要力量,為中國的信息技術(shù)發(fā)展注入新的活力。同時,我們也希望更多的人能夠關(guān)注國產(chǎn)數(shù)據(jù)庫的發(fā)展,共同見證其成長,推動數(shù)據(jù)庫技術(shù)不斷向前發(fā)展!