點(diǎn)擊關(guān)注
文丨劉雨琦?
“數(shù)據(jù)庫(kù)的國(guó)產(chǎn)替代，必須經(jīng)過(guò)嚴(yán)格的考慮，保證不會(huì)出錯(cuò)，所以大多數(shù)企業(yè)的領(lǐng)導(dǎo)層選擇按兵不動(dòng)或者簡(jiǎn)單擴(kuò)容。因?yàn)椴粨Q就不會(huì)錯(cuò)，選了很久如果選錯(cuò)，還可能會(huì)出現(xiàn)重大事故?！?
某銀行數(shù)據(jù)庫(kù)技術(shù)人員曾對(duì)光錐智能一語(yǔ)道出了在數(shù)據(jù)庫(kù)的國(guó)產(chǎn)替代中的核心難點(diǎn)?！罢娴囊蟮堕煾母母?，需要領(lǐng)導(dǎo)層有魄力和決心，否則只能是邊緣試探?！?/p>
下定決心全面替換，一方面是企業(yè)對(duì)國(guó)產(chǎn)數(shù)據(jù)庫(kù)有足夠的開(kāi)放程度，另一方面，也要國(guó)產(chǎn)數(shù)據(jù)庫(kù)有超過(guò)Oracle等老牌數(shù)據(jù)庫(kù)的性能。一次改革，不僅完成“平替”，更能升級(jí)，幫助企業(yè)降本增效。
2022年，中國(guó)太平洋保險(xiǎn)集團(tuán)（以下簡(jiǎn)稱(chēng)：太保）面臨著一樣的十字路口，作為國(guó)內(nèi)頭部的綜合性保險(xiǎn)集團(tuán)，太保核心業(yè)務(wù)系統(tǒng)的數(shù)據(jù)庫(kù)要比其他的要求更高、更困難，但同時(shí)，也更具代表性，一旦擁有成功經(jīng)驗(yàn)，也將為整個(gè)保險(xiǎn)行業(yè)建立新的行業(yè)標(biāo)準(zhǔn)。?太保集團(tuán)科技管理部總經(jīng)理馬波勇曾公開(kāi)分享過(guò)替換經(jīng)歷：“太保從業(yè)務(wù)場(chǎng)景出發(fā)，通過(guò)梳理保險(xiǎn)業(yè)務(wù)的典型場(chǎng)景，選擇了兩類(lèi)數(shù)據(jù)庫(kù)。既有高并發(fā)、大數(shù)據(jù)量、具備互聯(lián)網(wǎng)業(yè)務(wù)特征的場(chǎng)景，又有大量以?xún)?nèi)部用戶(hù)為主的業(yè)務(wù)場(chǎng)景。比如在核心的P17客戶(hù)服務(wù)系統(tǒng)中，我們經(jīng)過(guò)兩年多的調(diào)研、測(cè)試和評(píng)估，選擇了之前服務(wù)過(guò)金融行業(yè)的螞蟻集團(tuán)數(shù)據(jù)庫(kù)OceanBase，進(jìn)行分布式轉(zhuǎn)型?！?
“數(shù)據(jù)庫(kù)的國(guó)產(chǎn)替代，正在從邊緣的OA系統(tǒng)，深入到核心的業(yè)務(wù)系統(tǒng)。如今國(guó)產(chǎn)數(shù)據(jù)庫(kù)占20%的市場(chǎng)份額，傳統(tǒng)數(shù)據(jù)庫(kù)占80%的份額，這樣的‘二八’分布將在三年之內(nèi)顛倒過(guò)來(lái)?！?/strong>OceanBase副總裁王爽認(rèn)為，國(guó)產(chǎn)數(shù)據(jù)庫(kù)已經(jīng)經(jīng)歷了磨礪產(chǎn)品性能、攻克替代難關(guān)的過(guò)程，將在三年內(nèi)加速進(jìn)入全面升級(jí)的階段。
據(jù)光錐智能了解到，很多企業(yè)制定了內(nèi)部戰(zhàn)略，要在2027年做到數(shù)據(jù)庫(kù)的“應(yīng)替盡替”。國(guó)內(nèi)企業(yè)逐漸對(duì)國(guó)產(chǎn)數(shù)據(jù)庫(kù)重新認(rèn)知并抱有開(kāi)放態(tài)度，尤其在數(shù)據(jù)庫(kù)最核心的金融場(chǎng)景，也有更多企業(yè)愿意“押注”在國(guó)產(chǎn)數(shù)據(jù)庫(kù)上。?國(guó)產(chǎn)數(shù)據(jù)庫(kù)，從金融行業(yè)里“殺”出了一條路。
金融行業(yè)升級(jí)的三座大山
?“沒(méi)有經(jīng)歷過(guò)金融行業(yè)歷練的數(shù)據(jù)庫(kù)，不算合格的數(shù)據(jù)庫(kù)?！?
一直以來(lái)，金融場(chǎng)景都是數(shù)據(jù)庫(kù)的最大練兵場(chǎng)，不僅是因?yàn)閿?shù)據(jù)量龐大，同時(shí)，交易、分析、事故更加復(fù)雜，高頻高并發(fā)是金融數(shù)據(jù)庫(kù)的特性，更因?yàn)榻鹑谛袠I(yè)本身7×24小時(shí)不間斷，對(duì)數(shù)據(jù)庫(kù)安全性、穩(wěn)定性都有更高要求，運(yùn)維也更加復(fù)雜。
王爽舉了一個(gè)例子：“以前銀行的交易來(lái)自于營(yíng)業(yè)網(wǎng)點(diǎn)，存錢(qián)、取錢(qián)、轉(zhuǎn)錢(qián)，但現(xiàn)在已經(jīng)互聯(lián)網(wǎng)化了，頻率大大增加。以前一年去營(yíng)業(yè)廳也就三五次，但現(xiàn)在用戶(hù)每天都在交易，每天點(diǎn)外賣(mài)、坐公交/地鐵，每刷一次都會(huì)產(chǎn)生數(shù)據(jù)。這就造成了爆炸性的數(shù)據(jù)量增長(zhǎng)，傳統(tǒng)數(shù)據(jù)庫(kù)處理起來(lái)，成本非常巨大。所以，并不只是為了國(guó)產(chǎn)替代，更是為了升級(jí)。”
此前，企業(yè)在選擇國(guó)產(chǎn)數(shù)據(jù)庫(kù)時(shí)，第一考慮的是與Oracle的適配和兼容關(guān)系，以降低應(yīng)用和遷移成本。“2020年之前，幾乎所有的國(guó)產(chǎn)數(shù)據(jù)庫(kù)對(duì)企業(yè)宣傳的核心價(jià)值就是兼容Oracle和MySQL。”一位數(shù)據(jù)庫(kù)廠(chǎng)商對(duì)光錐智能講道。
但在真正落地時(shí)發(fā)現(xiàn)，兼容是不夠的，在適配時(shí)必須要取舍。Oracle數(shù)據(jù)庫(kù)壟斷了近20年，有很多特性逐漸落后，國(guó)產(chǎn)數(shù)據(jù)庫(kù)的單純替代沒(méi)有意義，底層架構(gòu)發(fā)生改變之后，性能要做到更加優(yōu)化。
更重要的是，銀行、保險(xiǎn)、券商過(guò)去與Oracle進(jìn)行了深度綁定，包括?定義鎖、?治事務(wù)、嵌套表、索引組織表、PLSQL包、物化視圖、DBlink、觸發(fā)器、系統(tǒng)視圖，改造難度極?，如何提升龐?存儲(chǔ)過(guò)程中的識(shí)別效率?關(guān)重要。
這不只依賴(lài)數(shù)據(jù)庫(kù)廠(chǎng)商一家來(lái)完成，更需要使用方一起深度改造。太保集團(tuán)與OceanBase打磨的過(guò)程中，馬波勇總結(jié)了升級(jí)過(guò)程中的三大挑戰(zhàn)：
第一是國(guó)產(chǎn)數(shù)據(jù)庫(kù)的性能，能否滿(mǎn)足業(yè)務(wù)需求。“由于之前大部分系統(tǒng)使用傳統(tǒng)數(shù)據(jù)庫(kù)做支撐，在制定數(shù)據(jù)庫(kù)的選型策略和升級(jí)方案方面，系統(tǒng)的兼容性、穩(wěn)定性，數(shù)據(jù)遷移的便捷性、完整性是我們考慮的首要問(wèn)題。第二，要考慮它在金融行業(yè)的應(yīng)用案例是否廣泛，是否具備足夠的成熟度。第三個(gè)是在運(yùn)維方面，需要具備較強(qiáng)的自主營(yíng)運(yùn)能力和支撐能力”，馬波勇談道。
第二是數(shù)據(jù)庫(kù)的安全性和彈性伸縮能力。銀行保險(xiǎn)業(yè)數(shù)據(jù)量大、私密性強(qiáng)、波峰波谷期動(dòng)蕩，本地部署的數(shù)據(jù)庫(kù)能保證安全性，但是相應(yīng)的成本也會(huì)更高，且彈性伸縮能力差，無(wú)法靈活應(yīng)變銀行互聯(lián)網(wǎng)化后的高頻和多發(fā)需求。
第三是平滑遷移的能力。遷移的過(guò)程中保證業(yè)務(wù)不停，同時(shí)要高度兼容，節(jié)省調(diào)試時(shí)間。馬波勇談到：“太保集團(tuán)作為32年的國(guó)企，數(shù)據(jù)量及業(yè)務(wù)量都很大，如何在有限的時(shí)間窗口，完成數(shù)據(jù)遷移，成為擺在太保集團(tuán)面前的一大難題?！?
那么，這三座“大山”，太保和OceanBase是如何攜手跨過(guò)的？
最難的P17系統(tǒng)，OceanBase如何搞定？
OceanBase所升級(jí)的太保P17核心系統(tǒng)，同時(shí)面臨著上述的三座大山。
在太保的業(yè)務(wù)系統(tǒng)中，有P20的級(jí)別之分，P17是集團(tuán)排名中的高級(jí)別，因此，該系統(tǒng)的成功升級(jí)具有標(biāo)桿作用和里程碑意義?！癙17客戶(hù)服務(wù)系統(tǒng)”是太平洋保險(xiǎn)產(chǎn)、壽、健康、長(zhǎng)江等所有子公司客戶(hù)服務(wù)系統(tǒng)的整合，為公司6地8個(gè)電話(huà)中心超過(guò)2000坐席提供系統(tǒng)服務(wù)?！碧＜瘓F(tuán)數(shù)智研究院首席數(shù)據(jù)庫(kù)專(zhuān)家林春介紹道。
“與一般熱線(xiàn)系統(tǒng)相比，‘P17客戶(hù)服務(wù)系統(tǒng)’涵蓋了太平洋保險(xiǎn)幾乎所有子公司業(yè)務(wù)的服務(wù)入口功能，包括車(chē)險(xiǎn)報(bào)案、車(chē)險(xiǎn)增值服務(wù)、非車(chē)人意報(bào)案、道路救援、壽險(xiǎn)保單查詢(xún)、壽險(xiǎn)保全受理、投保預(yù)約等等，對(duì)接周邊系統(tǒng)超過(guò)200個(gè)，是太平洋保險(xiǎn)關(guān)聯(lián)關(guān)系最為復(fù)雜的系統(tǒng)之一。”?
同時(shí)，作為太平洋保險(xiǎn)的服務(wù)品牌，“P17客戶(hù)服務(wù)系統(tǒng)”需要提供7*24?時(shí)的全天服務(wù)，系統(tǒng)可?性要求全年99.9%以上，對(duì)停機(jī)時(shí)間有著嚴(yán)苛的控制。因此，也是太平洋保險(xiǎn)運(yùn)維保障最?的核?系統(tǒng)之?。
毫無(wú)疑問(wèn)，對(duì)于P17的升級(jí)，是最為慎重的決定。2021年初，太保對(duì)國(guó)產(chǎn)分布式數(shù)據(jù)庫(kù)，從功能、性能、易用性、完整性、可移植性、可靠性、擴(kuò)展性、安全性等指標(biāo)進(jìn)行了全方位評(píng)估，最終選擇了OceanBase升級(jí)傳統(tǒng)數(shù)據(jù)庫(kù)。
2022年上半年，在不少項(xiàng)目暫停、放緩之時(shí)，太保和OceanBase正在緊鑼密鼓的遠(yuǎn)程協(xié)作，加班加點(diǎn)，只為搞定P17。
據(jù)林春回憶，2022年初啟動(dòng)項(xiàng)目到8月31號(hào)，核心業(yè)務(wù)場(chǎng)景就完成了數(shù)據(jù)功能的開(kāi)發(fā)；12月18日，P17第一個(gè)子系統(tǒng)成功上線(xiàn)，并完成了全量數(shù)據(jù)庫(kù)遷移；2023年5月6日，核心交易、相關(guān)的報(bào)表庫(kù)遷移上線(xiàn)；5月13日核心系統(tǒng)中最難的核心交易庫(kù)上線(xiàn)。至今，P17核心系統(tǒng)已經(jīng)成功運(yùn)行了200多天，確保交易成功率達(dá)到99.99%。
“項(xiàng)目剛開(kāi)始時(shí)，正是上海管控最緊張的時(shí)刻。大家沒(méi)辦法到場(chǎng)地，造成了很多困難，但是OB在產(chǎn)業(yè)側(cè)和技術(shù)側(cè)聯(lián)合攻堅(jiān)，把這塊硬骨頭啃了下來(lái)?！绷执赫勂鸬巾?xiàng)目的全過(guò)程，仍然不禁感慨。
OceanBase的系統(tǒng)整體架構(gòu)圖
整個(gè)升級(jí)的流程，可以分為四個(gè)階段：
第一階段的重點(diǎn)，是通過(guò)OceanBase的分布式架構(gòu)徹底升級(jí)傳統(tǒng)商用的主備架構(gòu)，破除傳統(tǒng)數(shù)據(jù)庫(kù)與操作系統(tǒng)、中間件的耦合。據(jù)了解，與Oracle配套的DS、Cognos等產(chǎn)品對(duì)于Oracle深度依賴(lài)，適配改造復(fù)雜度很?，將數(shù)據(jù)庫(kù)分庫(kù)分表，從集中式拆分成分布式，每個(gè)分片都能夠獨(dú)立執(zhí)行讀寫(xiě)，這個(gè)過(guò)程中需不斷拆解中間件和操作系統(tǒng)之間的關(guān)系。
第二階段，OceanBase和太保并沒(méi)有急著對(duì)業(yè)務(wù)進(jìn)行升級(jí)，而是建立了遷移“標(biāo)準(zhǔn)”，一次次探索形成行業(yè)經(jīng)驗(yàn)，破除替換升級(jí)的壁壘。
OceanBase華東區(qū)金融技術(shù)服務(wù)總監(jiān)郭文講道：“廠(chǎng)商和用戶(hù)側(cè)的目標(biāo)是希望效果穩(wěn)定的與傳統(tǒng)數(shù)據(jù)庫(kù)兼容，標(biāo)準(zhǔn)化、流程化、制式化能夠降低雙方的人力投入，少走彎路，同時(shí)能夠復(fù)制工具和經(jīng)驗(yàn)?！?
郭文介紹道：“OceanBase通過(guò)制定33類(lèi)標(biāo)準(zhǔn)規(guī)范和28類(lèi)最佳實(shí)踐，以及打磨了16款數(shù)據(jù)庫(kù)轉(zhuǎn)向工具，實(shí)現(xiàn)了標(biāo)準(zhǔn)化的Oracle兼容，這會(huì)極大程度破除遷移的不透明性，讓企業(yè)更有信心，意識(shí)到升級(jí)不再是一件特別困難的事情?！?
比如創(chuàng)新研發(fā)的“指南針”工具，能夠?qū)鹘y(tǒng)數(shù)據(jù)庫(kù)進(jìn)?改造評(píng)估預(yù)掃描，包括近20個(gè)檢查?類(lèi)，近200多個(gè)檢查項(xiàng)，評(píng)估項(xiàng)全??效，極?提升項(xiàng)?組問(wèn)題排查的效率，縮短項(xiàng)?周期從?降低應(yīng)?改造成本。以“P17客戶(hù)服務(wù)系統(tǒng)”為例，掃描出改造項(xiàng)約6000個(gè)，假設(shè)???式排查2個(gè)問(wèn)題/?時(shí)，單個(gè)項(xiàng)?即節(jié)約??成本12.6?/?。
第三階段，對(duì)P17中的業(yè)務(wù)場(chǎng)景進(jìn)行逐個(gè)點(diǎn)測(cè)。對(duì)壽險(xiǎn)保監(jiān)會(huì)稽核接口系統(tǒng)、壽險(xiǎn)營(yíng)銷(xiāo)員系統(tǒng)的傭金計(jì)算、智能決策服務(wù)平臺(tái)和壽險(xiǎn)統(tǒng)一承保平臺(tái)等“一事一議”的替換。
第四階段，從點(diǎn)測(cè)到全面升級(jí)。這里的全面升級(jí)，并不只是P17系統(tǒng)的全面升級(jí)，而是太保秉持著“先難后易”的原則，以P17這套最復(fù)雜的系統(tǒng)為模版，對(duì)周邊配套系統(tǒng)進(jìn)行分布式升級(jí)。
在全面升級(jí)后，國(guó)產(chǎn)數(shù)據(jù)庫(kù)的優(yōu)異性能開(kāi)始展現(xiàn)出來(lái)。據(jù)太保反饋數(shù)據(jù)，在保持了高運(yùn)行性能、高可用能力的同時(shí)，數(shù)據(jù)庫(kù)軟件的運(yùn)維費(fèi)用大幅降低，每年可節(jié)省設(shè)備投入數(shù)億元。特別是OceanBase的高級(jí)壓縮技術(shù)，結(jié)合“數(shù)據(jù)庫(kù)瘦身”，將存儲(chǔ)容量節(jié)省80%以上。
可以說(shuō)，升級(jí)后的應(yīng)?系統(tǒng)彈性擴(kuò)縮容、處理速度、數(shù)據(jù)加?能?均實(shí)現(xiàn)?幅提升。
長(zhǎng)于金融的數(shù)據(jù)庫(kù)，更懂金融
?OceanBase與太保的探索經(jīng)驗(yàn)，也帶動(dòng)著金融數(shù)據(jù)庫(kù)發(fā)展進(jìn)入下一個(gè)階段。
在整個(gè)實(shí)踐的過(guò)程中能夠明顯發(fā)現(xiàn)，金融場(chǎng)景考驗(yàn)的不只是性能，更多還在于復(fù)雜業(yè)務(wù)中的靈活應(yīng)變能力和適應(yīng)能力。顯然，誕生于金融場(chǎng)景的OceanBase更懂行業(yè)的需求和痛點(diǎn)，也有機(jī)會(huì)能將實(shí)驗(yàn)室的解決方案，搬到了業(yè)務(wù)中去。
2013年，OceanBase開(kāi)始應(yīng)用于螞蟻集團(tuán)的支付業(yè)務(wù)，當(dāng)時(shí)大部分互聯(lián)網(wǎng)企業(yè)都在采買(mǎi)Oracle，但隨著雙十一交易量的瞬時(shí)爆發(fā)，成本高企壓力之下，促使了云廠(chǎng)商們開(kāi)始自研數(shù)據(jù)庫(kù)。
彼時(shí)OceanBase最核心的任務(wù)，是完成降本增效和彈性伸縮。在這兩個(gè)方面的經(jīng)驗(yàn)，也在太保案例中得以體現(xiàn)。
正如前文所講，之所以將存儲(chǔ)容量節(jié)省至80%以上，來(lái)源于OceanBase獨(dú)創(chuàng)的高壓縮比的分布式存儲(chǔ)引擎，在提升業(yè)務(wù)系統(tǒng)穩(wěn)定性和安全性的前提下，存儲(chǔ)成本為70%-90%，同時(shí)硬件和維保資源投入顯著降低。
林春就算過(guò)一筆賬：“1TB的存儲(chǔ)成本傳統(tǒng)數(shù)據(jù)庫(kù)要4500塊錢(qián)，OceanBase壓縮到了三分之一，成本會(huì)大幅減少。另外數(shù)據(jù)庫(kù)加密之后，對(duì)場(chǎng)地成本要求就沒(méi)有那么高，也能降低硬件成本。”?
2020年山東移動(dòng)計(jì)費(fèi)業(yè)務(wù)系統(tǒng)接入OceanBase，其計(jì)費(fèi)業(yè)務(wù)詳單處理時(shí)長(zhǎng)縮短至5分鐘，處理效率提升30%，數(shù)據(jù)由7T壓縮至0.7T，存儲(chǔ)投入成本降低90%。
另一方面，OceanBase的單機(jī)一體化分布式架構(gòu)也能夠在硬件存儲(chǔ)資源幫助企業(yè)控制成本和靈活擴(kuò)縮容。顧名思義，單機(jī)一體化的數(shù)據(jù)庫(kù)，既能夠適應(yīng)大型企業(yè)的系統(tǒng)逐步替換需求，在不需要分布式架構(gòu)時(shí)，也可以作為一個(gè)完整的集中數(shù)據(jù)庫(kù)提供，讓企業(yè)能夠部署更靈活。
同時(shí)，HTAP集TP（交易）和AP（分析）于一體的數(shù)據(jù)庫(kù)架構(gòu)，也能夠同時(shí)適應(yīng)TP場(chǎng)景和AP場(chǎng)景，單一引擎支持高性能混合負(fù)載應(yīng)用，通過(guò)基于時(shí)間片的混合負(fù)載調(diào)度技術(shù)，解決混合負(fù)載的資源隔離問(wèn)題。一個(gè)典型案例是太保的壽險(xiǎn)需要與保監(jiān)會(huì)稽核系統(tǒng)接口，以前該系統(tǒng)夜間批處理占據(jù)整體計(jì)算資源的90%以上，現(xiàn)在，相同資源的批處理節(jié)省了時(shí)間62%，監(jiān)管報(bào)送批量場(chǎng)景的性能提升了3倍。
除此之外，全自研數(shù)據(jù)庫(kù)也成為了OceanBase換道超車(chē)的關(guān)鍵。
OceanBase數(shù)據(jù)庫(kù)創(chuàng)始人、首席科學(xué)家陽(yáng)振坤此前提到，“全自研是個(gè)苦活累活，OceanBase數(shù)據(jù)庫(kù)是從第一行代碼開(kāi)始，到現(xiàn)在積累了幾百萬(wàn)行代碼量，但是好處也顯而易見(jiàn)?！?
讓林春印象最深刻的是OceanBase對(duì)Bug的修復(fù)速度非常震撼。常常很多問(wèn)題，大致是第一天發(fā)現(xiàn)，第二天就能更新一個(gè)修復(fù)版本，這就體現(xiàn)了OceanBase全自研數(shù)據(jù)庫(kù)，將內(nèi)核代碼都掌握在自己手中的特點(diǎn)。Bug修復(fù)速度是技術(shù)兜底的一個(gè)很好的驗(yàn)證，如果沒(méi)有對(duì)核心代碼的掌控，從排查問(wèn)題到解決問(wèn)題，就做不到閃電速度。
也正是因?yàn)樯鲜鲈颍尨笮豌y行、保險(xiǎn)業(yè)開(kāi)始對(duì)國(guó)產(chǎn)數(shù)據(jù)庫(kù)充滿(mǎn)信心。
但這也只是萬(wàn)里長(zhǎng)征的第二階段，數(shù)字化、智能化的車(chē)輪滾滾向前，國(guó)產(chǎn)數(shù)據(jù)庫(kù)從金融場(chǎng)景“殺”出來(lái)之后，千行百業(yè)中還有更廣闊的星辰大海。文章來(lái)源：http://www.zghlxwxcb.cn/news/detail-589621.html
歡迎關(guān)注光錐智能CSDN號(hào)，獲取更多前沿科技知識(shí)！文章來(lái)源地址http://www.zghlxwxcb.cn/news/detail-589621.html
到了這里，關(guān)于金融數(shù)據(jù)庫(kù)的戰(zhàn)場(chǎng)，太平洋保險(xiǎn)和OceanBase打了場(chǎng)勝仗的文章就介紹完了。如果您還想了解更多內(nèi)容，請(qǐng)?jiān)谟疑辖撬阉鱐OY模板網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章，希望大家以后多多支持TOY模板網(wǎng)！
