女人久久久,最近更新中文字幕在线,成人国内精品久久久久影院vr,中文字幕亚洲综合久久综合,久久精品秘?一区二区三区美小说

原創(chuàng)生活

國內(nèi) 商業(yè) 滾動(dòng)

基金 金融 股票

期貨金融

科技 行業(yè) 房產(chǎn)

銀行 公司 消費(fèi)

生活滾動(dòng)

保險(xiǎn) 海外 觀察

財(cái)經(jīng) 生活 期貨

當(dāng)前位置:科技 >

微動(dòng)態(tài)丨騰訊云TDSQL登頂數(shù)據(jù)庫“奧林匹克”背后

文章來源:鈦媒體APP  發(fā)布時(shí)間: 2023-04-06 16:16:46  責(zé)任編輯:cfenews.com
+|-

“你們不懂銀行?!?/p>

2014年,騰訊云數(shù)據(jù)庫第一次走出騰訊之外,試圖敲定一個(gè)關(guān)系不那么遠(yuǎn)的客戶——微眾銀行,微眾銀行CTO看著眼前這套完全基于互聯(lián)網(wǎng)的分布式架構(gòu)方案,兩個(gè)小時(shí)后,雙方誰也沒說服誰,留給騰訊云數(shù)據(jù)庫的只有這么一句話。

時(shí)過境遷,如今國產(chǎn)數(shù)據(jù)庫進(jìn)入到越來越多的核心場景,集中式、分布式已經(jīng)不再是問題,問題是是誰能更好地接住大規(guī)模替代需求,在Oracle和IBM DB2等西方數(shù)據(jù)庫生態(tài)的圍墻之外,新的高塔聳立入云。


(相關(guān)資料圖)

3月30日,據(jù)數(shù)據(jù)庫領(lǐng)域權(quán)威測評機(jī)構(gòu)國際事務(wù)處理性能委員會(TPC,Transaction Processing Performance Council)官網(wǎng)披露,騰訊云數(shù)據(jù)庫TDSQL順利通過TPC-C基準(zhǔn)測試,性能達(dá)到每分鐘8.14億筆交易(tpmC)。

TPC-C基礎(chǔ)測試榜單有數(shù)據(jù)庫“奧林匹克”之稱,此前,OceanBase分別在2019、2020年兩次打榜成功,更早之前,TPC-C基準(zhǔn)測試榜單都是海外數(shù)據(jù)庫廠商如Oracle、IBM的名字。

TDSQL實(shí)現(xiàn)了每分鐘8.14億筆交易(tpmC)的成績,相比過去的7.07億的tpmC有不小的提升,并且在成本上,單位成本合1.27元/tpmC,只有過去的三分之一。

“必須要去打一次榜”

“我們認(rèn)為,國產(chǎn)數(shù)據(jù)庫走到一定階段之后,必須要去打一次榜。不過打榜不是我們的核心目的,而是對TDSQL產(chǎn)品能力和過去15年在數(shù)據(jù)庫發(fā)展過程中的階段性總結(jié)。目前,TDSQL在應(yīng)用場景上已經(jīng)有了非常深厚的技術(shù)積累,產(chǎn)品能力和性能都達(dá)到了階段性突破,并在一些大型銀行核心系統(tǒng)中穩(wěn)定運(yùn)行?;诖?,今年TDSQL團(tuán)隊(duì)花費(fèi)了兩個(gè)月的時(shí)間去參加打榜,期望借助權(quán)威的TPC-C測試審計(jì)對產(chǎn)品做一次全面的驗(yàn)證?!彬v訊云數(shù)據(jù)庫技術(shù)負(fù)責(zé)人潘安群表示。

以騰訊云數(shù)據(jù)庫TDSQL為例,其發(fā)展可以分為三個(gè)階段:

1、支撐騰訊集團(tuán)自身的業(yè)務(wù),比如Q幣充值和消費(fèi)等;

2、TDSQL Inside,隨著騰訊云的發(fā)展,給各行各業(yè)的產(chǎn)業(yè)互聯(lián)網(wǎng)服務(wù);

3、攻堅(jiān)金融標(biāo)桿,金融行業(yè)是數(shù)據(jù)庫領(lǐng)域里最難的場景。

第一個(gè)階段,騰訊的海量業(yè)務(wù)如騰訊廣告、騰訊視頻等業(yè)務(wù),需要高可用性、海量并發(fā)的數(shù)據(jù)庫,對數(shù)據(jù)庫的彈性伸縮要求很高。騰訊云數(shù)據(jù)庫在這一階段主要做到數(shù)據(jù)不能有錯(cuò),同時(shí)支持海量的并發(fā),騰訊自身的業(yè)務(wù)決定了TDSQL的發(fā)展。

“零幾年的時(shí)候,DBA是最苦惱的,因?yàn)樾枰粩鄶U(kuò)容才能夠滿足業(yè)務(wù),而用戶一上來,整個(gè)系統(tǒng)又被沖垮,需要不斷地處理,每天晚上都在做擴(kuò)容,當(dāng)時(shí)真的是血與淚的經(jīng)歷”,潘安群表示。

第二個(gè)階段,2009年之后,騰訊云開始對外提供服務(wù),如前所述微眾銀行的金融場景,還有數(shù)字廣東等政務(wù)場景。此外,第七次人口普查、騰訊會議等需要大量復(fù)雜數(shù)據(jù)查詢、分析、儲存的能力,騰訊云數(shù)據(jù)庫系統(tǒng)變得越來越復(fù)雜,業(yè)務(wù)場景變廣,系統(tǒng)要求也變得更高。

第三個(gè)階段,金融領(lǐng)域被視為數(shù)據(jù)庫應(yīng)用的標(biāo)桿場景,如果一家數(shù)據(jù)庫能夠在金融場景立住,基本上就可以勝任大部分的業(yè)務(wù)場景。因此,銀行核心系統(tǒng)等數(shù)據(jù)庫的替換,也是國產(chǎn)數(shù)據(jù)庫最難啃下的一塊骨頭。

挑戰(zhàn)越大,意味著收益越大,國產(chǎn)數(shù)據(jù)庫一般是從周邊業(yè)務(wù)、創(chuàng)新業(yè)務(wù)入手,從小銀行到大銀行逐步遞進(jìn),一邊積累經(jīng)驗(yàn),一邊打下標(biāo)桿。盡管騰訊云數(shù)據(jù)庫TDSQL在微眾銀行得到證明,但想贏得傳統(tǒng)銀行的信任還需要更多的案例、更多的時(shí)間。

“他們認(rèn)為,互聯(lián)網(wǎng)銀行和傳統(tǒng)銀行不一樣,無論是架構(gòu)的復(fù)雜度,還是業(yè)務(wù)的復(fù)雜度,雖然有微眾銀行的案例打底,他們依然對我們的數(shù)據(jù)庫缺乏信心。張家港農(nóng)商行是我們做的第一個(gè)標(biāo)桿,他們是國內(nèi)第一家敢吃‘螃蟹’的人,幾乎把銀行科技線所有人的職業(yè)生涯,都押在我們TDSQL身上?!迸税踩赫f道。

張家港農(nóng)商行是騰訊云數(shù)據(jù)庫TDSQL在國內(nèi)第一個(gè)完成傳統(tǒng)銀行數(shù)據(jù)庫國產(chǎn)化的案例。此后,TDSQL持續(xù)深入金融核心,打造標(biāo)桿產(chǎn)品,騰訊云逐漸在金融場景,目前已服務(wù)了國內(nèi)排行前十銀行中的七家,助力20余家金融機(jī)構(gòu)完成了核心系統(tǒng)替換,這一個(gè)不斷交互、不斷打磨、不斷信任的過程。

TDSQL產(chǎn)品第一階段主要解決強(qiáng)一致、高可用、彈性伸縮;第二階段加上了高性能、低成本、產(chǎn)品化;第三階段更多是在可用性、一致性等方面有了更高要求。

目前,可以理解為TDSQL的第四階段。“從政策推動(dòng)和國家戰(zhàn)略來說,大規(guī)模復(fù)制已經(jīng)開始了?!彬v訊云數(shù)據(jù)庫總經(jīng)理王義成表示。

王義成坦率地表示,過去騰訊云數(shù)據(jù)庫在跟一些友商在項(xiàng)目上POC、壓測過程中,其實(shí)有很多性能都遠(yuǎn)超出客戶的要求,對于這些成果我們也期望能通過更權(quán)威的評測機(jī)構(gòu)來做一次證明。

言而總之,騰訊云TDSQL希望借這次打榜,傳遞出自己的技術(shù)先進(jìn)性,更希望能夠在金融客戶中實(shí)現(xiàn)規(guī)模復(fù)制,如何在客戶場景做傳統(tǒng)數(shù)據(jù)庫的兼容,國產(chǎn)化的快速替換,進(jìn)而提升產(chǎn)品和運(yùn)維的易用性,都是未來TDSQL的方向。

如何“打榜”?

TPC-C是OLTP數(shù)據(jù)庫性能測試唯一的國際權(quán)威榜單,整個(gè)過程模擬電商交易系統(tǒng),核心有兩個(gè)指標(biāo),第一是每分鐘能夠處理的事務(wù)數(shù)tpmC,第二是性價(jià)比,通常依靠硬件的冗余,數(shù)據(jù)庫可以做到更高的性能,但客戶要看現(xiàn)實(shí)的性價(jià)比,不可能無限堆硬件,硬件成本、軟件成本、服務(wù)成本平攤之后的單位性價(jià)比,就很有參考意義。

測試主要分為四部分,一是8小時(shí)的滿壓力測試,要求整個(gè)系統(tǒng)處在穩(wěn)定的狀態(tài),能夠避免數(shù)據(jù)庫為了打榜故意短時(shí)間拉高性能指標(biāo),8小時(shí)足以看出數(shù)據(jù)庫的性能。此外,TPC-C要求性能標(biāo)準(zhǔn)規(guī)范要求波動(dòng)率在2%以內(nèi),騰訊云TDSQL做到了0.2%以內(nèi)。

二是故障容災(zāi)測試。在滿載測試期間,模擬各種硬件的故障,比如審計(jì)員隨機(jī)選擇機(jī)器斷電,要保證數(shù)據(jù)不丟失,觀察系統(tǒng)在無任何人工干預(yù)下,請求量多久能完全恢復(fù)并且快速恢復(fù)到8.14億tpmC的極值。從實(shí)際測試結(jié)果來看,TDSQL在18秒就完成HA切換,對于大盤整體影響微乎其微。

后兩個(gè)測試是ACID測試,即數(shù)據(jù)庫的四大特性:Atomicity原子性、Consistency一致性、Isolation隔離性、Durablilty耐久性,以及最后的50%、80%壓力測試,這兩部分的難度,相比前兩部分較小。

從開始測試到測試完成,騰訊云數(shù)據(jù)庫TDSQL用了兩個(gè)月的時(shí)間,整個(gè)過程大概分為三個(gè)階段。首先,把單機(jī)性能做到極致;其次,轉(zhuǎn)到分布式水平擴(kuò)展,讓數(shù)據(jù)庫性能隨機(jī)器數(shù)量線性增長;最后,利用1650臺物理機(jī)和1000臺虛擬機(jī)進(jìn)行了8小時(shí)的壓力測試,確保系統(tǒng)穩(wěn)定無故障,對數(shù)據(jù)庫的內(nèi)存管理、鎖的機(jī)制、網(wǎng)絡(luò)模型、復(fù)制模型都進(jìn)行了大量優(yōu)化。

TPC-C的榜首位置已經(jīng)許久沒有變化,在OceanBase之前,前二紀(jì)錄由Oracle和IBM保持,分別是2011年和2010的記錄。

行業(yè)觀點(diǎn)認(rèn)為,采用集中式架構(gòu)的傳統(tǒng)數(shù)據(jù)庫,性能無法達(dá)到目前的水準(zhǔn),分布式數(shù)據(jù)庫系統(tǒng)的擴(kuò)展性要足夠好,才能解決傳統(tǒng)IOE集中式架構(gòu)擴(kuò)展性不足的問題。

而且從成本角度考量,不是每個(gè)數(shù)據(jù)庫廠商都愿意投入如此多的人力、時(shí)間和硬件資源成本。這些也是國外廠商沒有持續(xù)打榜的因素之一。

王義成介紹,TPC-C的榜單提供了相對公平的測試環(huán)境,當(dāng)我們關(guān)注總榜的情況下也需要看單位成本。此次TDSQL創(chuàng)造的紀(jì)錄是每分鐘8.14億的交易量,對于這個(gè)量級,打個(gè)比方來說,目前銀行最大的業(yè)務(wù)系統(tǒng)峰值可能就是20億筆的交易(當(dāng)天),20億筆的峰值平均在4-5個(gè)小時(shí)內(nèi)完成,每分鐘處理的交易量遠(yuǎn)遠(yuǎn)低于8.14億。因此,8.14億的這個(gè)性能指標(biāo)足以支撐全國所有核心系統(tǒng)的性能要求。

“雖然未來榜單的成績遲早會被超越,但實(shí)現(xiàn)單價(jià)(price/tpmC)1.27元人民幣是很有挑戰(zhàn)的?!彼f。

騰訊云數(shù)據(jù)庫的行業(yè)策略

國產(chǎn)數(shù)據(jù)庫正在迎來最好的時(shí)代,從技術(shù)更替維度,亦或是產(chǎn)業(yè)環(huán)境維度,都是如此。

于技術(shù)維度,云計(jì)算開辟了一條新的賽道,沿著Oracle的車轍,其他數(shù)據(jù)庫廠商很難越過經(jīng)驗(yàn)和生態(tài)筑就的高墻,不論在國內(nèi)和國外,AWS、騰訊云等云廠商,都走上了云數(shù)據(jù)庫這條賽道。

于產(chǎn)業(yè)環(huán)境維度,國內(nèi)第一批數(shù)據(jù)庫興起于21世紀(jì)初的“核高基”等政策,完成了從無到有的過程,而在近年來波詭云翳的技術(shù)脫鉤潮流之下,數(shù)據(jù)庫作為現(xiàn)代企業(yè)的核心軟件,也迎來政策的又一波加持。

MySQL,PostgreSQL,MongoDB,Redis和Neo4j,關(guān)系型或者非關(guān)系型,所有數(shù)據(jù)庫都是時(shí)代的產(chǎn)物,每代數(shù)據(jù)庫都有自己的長征,而現(xiàn)在,到了國產(chǎn)數(shù)據(jù)庫攻堅(jiān)的關(guān)鍵時(shí)期。

王義成表示,騰訊云的策略是內(nèi)部先全面做好金融場景的整體復(fù)制,廣泛規(guī)模復(fù)制瞄準(zhǔn)幾個(gè)子賽道,銀行、資管、保險(xiǎn)。

“打標(biāo)桿可以投入不少人‘死磕’,但真正到了復(fù)制階段,就要拼誰的業(yè)務(wù)質(zhì)量更高,誰的效率更高,2022年下半年,我們已經(jīng)開始大量投入關(guān)于精細(xì)化運(yùn)營質(zhì)量的打磨、升級的方案,并且在金融行業(yè)已經(jīng)起到了初步復(fù)制效果,在能源、交通等行業(yè)賽道,正在做標(biāo)桿案例的突破。”他表示。

王義成介紹,從行業(yè)傳導(dǎo)來看,2021-2022年,國有大行基本已經(jīng)完成技術(shù)選型,現(xiàn)在12家股份制加6家國有大行和3家政策性銀行,大多數(shù)都做了整體框架的選擇。騰訊在大行和股份制銀行里數(shù)量相對占優(yōu),但大行和股份制銀行在選型時(shí)一般并不會只選一家。

城商行和農(nóng)商行體系大多數(shù)并沒有完成選型的替換,今年騰訊云大批量復(fù)制的重點(diǎn)就是城商行和農(nóng)商行,依靠大行的成熟案例和ISV的配合,爭取在城商行和農(nóng)商行領(lǐng)域?qū)崿F(xiàn)全面覆蓋。

一個(gè)銀行的核心系統(tǒng)至少十年以上才會做更新?lián)Q代,如果不在這個(gè)周期內(nèi),該行的預(yù)算和更換動(dòng)力就不會特別充足。

保險(xiǎn)領(lǐng)域和銀行稍有不同,銀行更看重產(chǎn)品穩(wěn)定性、產(chǎn)品精細(xì)化運(yùn)營等能力,保險(xiǎn)領(lǐng)域的國產(chǎn)化替換并不換核心業(yè)務(wù)系統(tǒng),只是更換數(shù)據(jù)庫。大多數(shù)保險(xiǎn)公司看重和Oracle的兼容性,騰訊云的策略是把Oracle兼容性的能力做得更豐富,圍繞數(shù)據(jù)遷移體系、Oracle評估體系,來切保險(xiǎn)的市場。

金融資管賽道和保險(xiǎn)、銀行不太一樣,重Oracle兼容性的同時(shí)又很重ISV,騰訊云在資管行業(yè)會在ISV的培訓(xùn)中做更多投入,在相關(guān)子賽道做前續(xù)適配。其它托管的行業(yè)賽道主要還是以打標(biāo)桿為主。

“就復(fù)制而言,金融行業(yè)是一個(gè)可以更好地進(jìn)行批量復(fù)制的行業(yè),對于行業(yè)know-how,我們還在學(xué)習(xí)階段,等看到行業(yè)有復(fù)制機(jī)會的點(diǎn)來投入,做客戶攻堅(jiān)。”王義成說。

(本文首發(fā)鈦媒體APP,作者 | 張帥)

關(guān)鍵詞:

專題首頁|財(cái)金網(wǎng)首頁

投資
探索

精彩
互動(dòng)

獨(dú)家
觀察

京ICP備2021034106號-38   營業(yè)執(zhí)照公示信息  聯(lián)系我們:55 16 53 8 @qq.com  財(cái)金網(wǎng)  版權(quán)所有  cfenews.com