10月20日,一年一度的數(shù)據(jù)庫技術(shù)交流盛會——DTCC 2021(第十二屆中國數(shù)據(jù)庫技術(shù)大會)在京圓滿落幕。
大會以“數(shù)造未來”為主題,重點圍繞數(shù)據(jù)架構(gòu)、人工智能與大數(shù)據(jù)應(yīng)用、傳統(tǒng)企業(yè)數(shù)據(jù)庫實踐和國產(chǎn)開源數(shù)據(jù)庫等內(nèi)容展開分享和探討。
在本次數(shù)據(jù)庫年度盛會交流平臺上,騰訊云數(shù)據(jù)庫團隊集結(jié)多位頂級技術(shù)達人亮相,針對當前熱門數(shù)據(jù)庫技術(shù)主題,共同為大家?guī)砹藵M滿技術(shù)干貨分享。
錯過現(xiàn)場?沒關(guān)系,一文帶你回顧騰訊云數(shù)據(jù)庫大咖演講要點~
數(shù)造未來
HTAP數(shù)據(jù)庫解決方案、應(yīng)用實踐和未來發(fā)展
林曉斌,騰訊云數(shù)據(jù)庫總經(jīng)理,數(shù)據(jù)庫領(lǐng)域資深技術(shù)專家。
演講要點:為應(yīng)對大規(guī)模事務(wù)和分析型需求,TP&AP融合是數(shù)據(jù)庫技術(shù)發(fā)展的重要方向之一,而構(gòu)建HTAP數(shù)據(jù)庫面臨著數(shù)據(jù)一致性和計算實時性等挑戰(zhàn)。本次大會林曉斌老師和大家共同探討了HTAP數(shù)據(jù)庫解決方案,并詳細解讀了HTAP數(shù)據(jù)庫應(yīng)用實踐場景和未來發(fā)展趨勢。
數(shù)據(jù)存儲與加速
實時存儲時代的數(shù)據(jù)庫變革
羅云,騰訊云數(shù)據(jù)庫副總經(jīng)理,騰訊云NoSQL和SaaS團隊整體業(yè)務(wù)負責人
演講要點:互聯(lián)網(wǎng)已經(jīng)進入了實時服務(wù)的時代,實時計算、實時存儲、實時的響應(yīng),這一切對數(shù)據(jù)庫來說都是全新的挑戰(zhàn),怎么樣為企業(yè)提供實時、高效、低成本的數(shù)據(jù)庫服務(wù),騰訊云NoSQL團隊在新硬件、新引擎、新服務(wù)方向上進行了諸多的探索,推出了兼顧性能與成本的高性能分布式KV數(shù)據(jù)庫Tendis,具備高并發(fā)、超低延時、數(shù)據(jù)安全可靠、熱冷數(shù)據(jù)分級存儲等特性,為企業(yè)客戶帶來了全新的高性能實時存儲解決方案。
數(shù)據(jù)庫內(nèi)核技術(shù)
數(shù)據(jù)異常的本質(zhì)和價值
李海翔,騰訊金融云數(shù)據(jù)庫資深技術(shù)專家,騰訊TDSQL分布式數(shù)據(jù)庫首席架構(gòu)師。中國人民大學信息學院工程碩士企業(yè)導師,CCF數(shù)據(jù)庫專委會委員,DTCC(中國數(shù)據(jù)庫技術(shù)大會)專家委員會委員。
演講要點:數(shù)據(jù)異常是打開并發(fā)訪問控制技術(shù)大門的金鑰匙,尤其是在認知了所有數(shù)據(jù)異常(己有的技術(shù)是case by case的方式提出了有限個數(shù)的異常)后(TDSQL團隊系統(tǒng)地提出了所有的數(shù)據(jù)異常并進行分類),可探究到數(shù)據(jù)異常的本質(zhì)和內(nèi)在規(guī)律,并揭示出隔離級別和并發(fā)算法的本質(zhì),進而可對ACID的C進行定義。
數(shù)據(jù)庫內(nèi)核技術(shù)
HTAP系統(tǒng)的問題與主義之爭
朱閱岸,畢業(yè)于中國人民大學數(shù)據(jù)庫技術(shù)專業(yè),DTCC數(shù)據(jù)庫內(nèi)核場技術(shù)分享嘉賓,先后在螞蟻金服Oceanbase、騰訊云數(shù)據(jù)庫、華為云數(shù)據(jù)庫等部門從事數(shù)據(jù)庫前沿技術(shù)的研究和內(nèi)核技術(shù)的開發(fā)工作。
演講要點:學術(shù)界與工業(yè)界對HTAP系統(tǒng)的研究已經(jīng)開展了十多年之久,爭論的焦點在于:是否采用一個大而全的系統(tǒng),同時響應(yīng)OLTP與OLAP查詢請求。本次大會朱閱岸老師將HTAP的系統(tǒng)實現(xiàn)分為兩種方向,一種是one size fits all模型;另外一種是loosely couple系統(tǒng)。分別為大家分享了兩種實現(xiàn)方案的優(yōu)缺點,以及現(xiàn)有產(chǎn)品的對應(yīng)的技術(shù)實現(xiàn)細節(jié)。
金融行業(yè)數(shù)據(jù)庫技術(shù)實踐
TDSQL全局一致性讀技術(shù)詳解
張文,騰訊云數(shù)據(jù)庫專家工程師,擁有多年分布式數(shù)據(jù)庫系統(tǒng)研發(fā)經(jīng)驗,目前在TDSQL團隊負責集群管理以及數(shù)據(jù)庫內(nèi)核方面研發(fā),同時擁有大量金融行業(yè)客戶遷移割接案例經(jīng)驗。
演講要點:分布式數(shù)據(jù)庫通過引入分布式事務(wù),解決了各節(jié)點之間數(shù)據(jù)的最終一致性問題。對于部分較為苛刻的銀行業(yè)務(wù)系統(tǒng)來說,不僅要求數(shù)據(jù)的最終一致性,更要求能夠獲取到數(shù)據(jù)庫的全局一致性快照。
這種全局一致性快照要求:針對一個分布式事務(wù)不允許讀取到該事務(wù)的中間狀態(tài),即讀取到涉及該事務(wù)的部分節(jié)點提交,部分節(jié)點未提交的數(shù)據(jù)狀態(tài)。TDSQL通過對計算節(jié)點和存儲引擎進行深度改造,同時引入高性能全局時間戳組件,并對整個方案持續(xù)調(diào)優(yōu),以一種高性能且輕量的方式解決了分布式場景下的一致性讀問題。
云原生數(shù)據(jù)庫開發(fā)與實踐
騰訊云原生自研數(shù)據(jù)庫內(nèi)核深度優(yōu)化最佳實踐
李昕龍,騰訊云高級工程師,擁有多年分布式數(shù)據(jù)庫研發(fā)經(jīng)驗,目前在TDSQL-C團隊負責內(nèi)核優(yōu)化以及數(shù)據(jù)庫內(nèi)核方面研發(fā)。
演講要點:騰訊云TDSQL-C(原CynosDB)分布式關(guān)系型云原生數(shù)據(jù)庫,是一款面向海量在線數(shù)據(jù)存儲和實時數(shù)據(jù)分析通用型高性能數(shù)據(jù)庫系統(tǒng)。該數(shù)據(jù)庫騰訊云TDSQL-C(原CynosDB)采用計算存儲分離結(jié)構(gòu),所有計算節(jié)點共享一份數(shù)據(jù),提供分鐘級的配置升降級、秒級的故障恢復、全局數(shù)據(jù)一致性和極速的數(shù)據(jù)備份容災(zāi)服務(wù)。
TDSQL-C融合了傳統(tǒng)數(shù)據(jù)庫、云計算與新硬件技術(shù)的優(yōu)勢,在可用性,可靠性,可擴展性和性能方面做了深度優(yōu)化。面對多變復雜的業(yè)務(wù)場景,數(shù)據(jù)庫提供最大15個備機讀擴展能力;面對不定性數(shù)據(jù)爆炸需求,數(shù)據(jù)庫提供PB級別的存儲擴招能力;在資源受限的高壓力場景,數(shù)據(jù)庫優(yōu)化事務(wù)、鎖系統(tǒng),同時提供多級緩存機制,滿足用戶性能需求。
數(shù)據(jù)架構(gòu)設(shè)計與實踐
企業(yè)級與智能化的MySQL云服務(wù)
劉迪,騰訊云數(shù)據(jù)庫高級產(chǎn)品經(jīng)理,中國計算機行業(yè)協(xié)會開源數(shù)據(jù)庫專業(yè)委員會副會長、北京航空航天大學特聘講師。
演講要點:在云計算發(fā)展浪潮不斷涌入的今天,我們不難預(yù)測,云上的MySQL在未來的數(shù)據(jù)庫市場也將是主流。隨著時代的發(fā)展,數(shù)據(jù)量井噴式增長,開源版本的MySQL很難滿足很多企業(yè)的業(yè)務(wù)需求,在某些場景下,無論是性能、安全還是穩(wěn)定性,都面臨著各種各樣的問題。
騰訊云數(shù)據(jù)庫MySQL為用戶提供安全可靠,性能卓越、易于維護的企業(yè)級云數(shù)據(jù)庫服務(wù)。其具備6大企業(yè)級特性,包括企業(yè)級定制內(nèi)核、企業(yè)級高可用、企業(yè)級高可靠、企業(yè)級安全、企業(yè)級擴展以及企業(yè)級智能運維。
云原生數(shù)據(jù)庫開發(fā)與實踐
DBbrain:新一代量化指標驅(qū)動的云上數(shù)據(jù)庫自治平臺
雷尚順,騰訊云數(shù)據(jù)庫高級工程師,騰訊云DBbrain產(chǎn)品負責人。
演講要點:當前數(shù)據(jù)庫智能運維已經(jīng)步入深水區(qū),騰訊云DBbrain產(chǎn)品針對數(shù)據(jù)庫自治服務(wù)率先提出實時閉環(huán)診斷,系統(tǒng)負載監(jiān)測以及業(yè)務(wù)領(lǐng)域建模幾大重點方向。
本次分享雷尚順老師介紹了對數(shù)據(jù)庫自治的一些思考以及騰訊云DBbrain產(chǎn)品的設(shè)計思想和能力評估方法,并重點解讀了騰訊云DBbrain產(chǎn)品如何通過量化指標幫助用戶精準的定位和解決深層次問題。
分布式數(shù)據(jù)庫技術(shù)實踐
TDSQL在國產(chǎn)化及HTAP領(lǐng)域的最佳實踐
陳愛聲,騰訊云數(shù)據(jù)庫高級工程師,騰訊云TDSQL PG首席架構(gòu)師,Postgresql中國社區(qū)七星之一。
演講要點:騰訊TDSQL-PG(原TBase)分布式關(guān)系型數(shù)據(jù)庫是一款面向海量在線實時分布式事務(wù)交易和MPP實時數(shù)據(jù)分析通用型高性能數(shù)據(jù)庫系統(tǒng)。面對應(yīng)用業(yè)務(wù)產(chǎn)生的不定性數(shù)據(jù)爆炸需求,不管是高并發(fā)的交易還是海量的實時數(shù)據(jù)分析,TDSQL-PG都有足夠能力處理。TDSQL-PG產(chǎn)品原型起源于技術(shù)成熟,功能強大的PostgreSQL。
騰訊公司對TDSQL-PG完全自主可控,具有完全自主知識產(chǎn)權(quán)。具備在中高端市場可以規(guī)模替代國外數(shù)據(jù)庫的能力,在數(shù)據(jù)庫基礎(chǔ)軟件層面支撐國家自主可控戰(zhàn)略發(fā)展。當前TDSQL-PG已經(jīng)在騰訊微信支付、金融、保險、稅務(wù)、公安、消防、政務(wù)等行業(yè)的核心交易系統(tǒng)上線運行。
正如羅云老師所言,互聯(lián)網(wǎng)已經(jīng)進入了實時服務(wù)的時代,騰訊云數(shù)據(jù)庫也將持續(xù)探索,打造新的時代下更便捷易用的數(shù)據(jù)庫產(chǎn)品。同時騰訊云數(shù)據(jù)庫也在回饋社區(qū)、擁抱開源。在未來,面對開發(fā)者,騰訊云數(shù)據(jù)庫也將繼續(xù)攜手各領(lǐng)域大咖,為各位數(shù)據(jù)庫愛好者帶來數(shù)據(jù)庫領(lǐng)域最前沿的洞察與實踐經(jīng)驗分享。