作者:深耕行業(yè)的 SmartX 金融團隊?張德敏
近年來隨著金融行業(yè)的高速發(fā)展,經(jīng)營決策者及監(jiān)管機構(gòu)對信息時效性的要求越來越高,科技部門面臨諸多挑戰(zhàn)。例如,不少金融機構(gòu)使用數(shù)倉業(yè)務(wù)系統(tǒng),為公司高層提供日常經(jīng)營報表,同時支持監(jiān)管報送等應(yīng)用。該業(yè)務(wù)系統(tǒng)通常是 I/O 密集型應(yīng)用,對 IT 基礎(chǔ)架構(gòu)的性能有極高的要求。
在《Oracle 數(shù)據(jù)倉庫在超融合架構(gòu)下的跑批性能驗證》文章中,我們分享了金融機構(gòu)利用 SmartX 超融合優(yōu)化 Oracle 數(shù)據(jù)倉庫跑批效率的實踐經(jīng)驗。超融合部署架構(gòu)如下:
?編輯
本期,我們將進一步驗證 SmartX 分布式存儲 SMTX ZBS 對數(shù)倉業(yè)務(wù)系統(tǒng)的支持能力,通過金融客戶的實際測試,對比 SmartX 分布式存儲與全閃集中式存儲執(zhí)行數(shù)倉跑批任務(wù)的效率。部署架構(gòu)方式請參考下文。
測試背景
某金融機構(gòu)使用傳統(tǒng)架構(gòu)支撐數(shù)倉業(yè)務(wù)系統(tǒng),其中存儲使用 EMC PowerStore 全閃存儲,雖然現(xiàn)階段可滿足經(jīng)營決策者及監(jiān)管機構(gòu)對信息時效性的要求,但科技部門認(rèn)為該架構(gòu)仍然面臨一些挑戰(zhàn):
- 全閃中高端集中式存儲成本居高不下。
- 集中式存儲彈性擴展能力有限,無法做到容量及性能同步線性增長。
- 新舊集中式存儲替換帶來龐大的數(shù)據(jù)遷移工作和開銷,且無法保證業(yè)務(wù)零中斷。
得益于分布式的架構(gòu)和彈性擴展能力,分布式存儲能很好地解決以上問題。但讓科技部門顧慮的是:分布式存儲性能能否對標(biāo)全閃中高端集中式存儲?能否有效支撐數(shù)倉業(yè)務(wù)系統(tǒng)對報表輸出時效性的要求?為此,該金融客戶使用 SmartX 分布式存儲在測試環(huán)境部署數(shù)倉業(yè)務(wù)系統(tǒng),進行了相關(guān)課題的驗證。
測試架構(gòu)
?編輯
測試架構(gòu)如圖所示:
- 計算端采用裸金屬(Intel x86 服務(wù)器)部署 Oracle 數(shù)據(jù)庫,測試環(huán)境使用一臺 2 路服務(wù)器 ,當(dāng)前生產(chǎn)環(huán)境使用一臺 4 路服務(wù)器。
- 網(wǎng)絡(luò)端測試環(huán)境使用以太網(wǎng)交換機和 NVMe over RDMA 協(xié)議,當(dāng)前生產(chǎn)環(huán)境使用光纖交換機和 FC 協(xié)議。
- 存儲端測試環(huán)境使用 SMTX ZBS 分布式存儲和 3 臺通用 Intel x86 服務(wù)器(混閃),當(dāng)前生產(chǎn)環(huán)境使用 1 套 PowerStore 1000T 全閃存儲。
軟硬配置
?編輯
測試過程與結(jié)果
- 將生產(chǎn)數(shù)據(jù)導(dǎo)入到測試環(huán)境,導(dǎo)入數(shù)據(jù)量為 3.9TB。
- 數(shù)倉業(yè)務(wù)系統(tǒng)跑批的內(nèi)容是 Oracle 執(zhí)行一系列存儲過程集,通過 linux 腳本自動化運行。
- 從所有數(shù)據(jù)里分別提取和處理 4、5、6 三個月的數(shù)據(jù),記錄每個月從執(zhí)行開始到結(jié)束的時間,時間越短越好。
結(jié)果顯示,相比生產(chǎn)環(huán)境,SmartX 分布式存儲執(zhí)行全部存儲過程集,3 個月平均跑批時間縮短?45%;其中,某耗時最長存儲過程,3 個月平均跑批時間縮短?55%,其他存儲過程集 3 個月平均跑批時間縮短?31%。
?編輯
數(shù)倉業(yè)務(wù)跑批期間統(tǒng)計了 SMTX ZBS 在該業(yè)務(wù)下的負(fù)載峰值,與 SMTX ZBS 基準(zhǔn)性能做了進一步對比。從數(shù)據(jù)可以看出,SMTX ZBS 除了支撐該數(shù)倉工作負(fù)載外,仍有很大的余力。
?編輯
注:
基準(zhǔn)數(shù)據(jù)指 SMTX ZBS 在該硬件配置下的最佳性能。
本次測試數(shù)據(jù)指數(shù)倉業(yè)務(wù)跑批期間 SMTX ZBS 的負(fù)載峰值。
綠色數(shù)據(jù)表示受限于網(wǎng)卡帶寬,SMTX ZBS 存儲實際的能力沒有完整發(fā)揮出來。
測試結(jié)論
本次測試由客戶全程自己操作完成,從測試結(jié)果看,SMTX ZBS 分布式存儲已經(jīng)具備承載客戶現(xiàn)有的數(shù)倉應(yīng)用的能力。這意味著,客戶可以在不改變上層數(shù)倉應(yīng)用的情況下,通過優(yōu)化基礎(chǔ)架構(gòu)設(shè)施進一步提升跑批的效率,縮短跑批時間,從而以更少的成本帶來更大的應(yīng)用價值的提升。
更多應(yīng)用場景持續(xù)探索中
科技產(chǎn)品價值終究要提升業(yè)務(wù)支撐價值。目前,SmartX 已聯(lián)合多家來自銀行、保險、證券、基金、期貨、資管等金融細分行業(yè)的頭部企業(yè),針對超融合在 TA 注冊登記、估值、BI 報表、O32、柜臺交易系統(tǒng)等多種金融核心業(yè)務(wù)系統(tǒng)下的表現(xiàn),開展全方位評測與驗證。欲了解更多金融應(yīng)用場景探索實踐,請閱讀往期文章:
- 金融場景探索|以分布式存儲驅(qū)動金融資管估值系統(tǒng)效率提升
- 空中換發(fā)動機:中信建投如何實現(xiàn)超融合操作系統(tǒng)“0”業(yè)務(wù)停機的信創(chuàng)轉(zhuǎn)換
- 金融客戶基于超融合信創(chuàng)平臺構(gòu)建微分段防護的實踐及驗證
- Oracle 數(shù)據(jù)倉庫在超融合架構(gòu)下的跑批性能驗證
- 金融信創(chuàng)場景下 SmartX 超融合存儲性能評測與支撐業(yè)務(wù)綜述
- SmartX 超融合金融行業(yè)數(shù)據(jù)庫支撐評測合集與長期落地案例綜述
您還可掃描下方二維碼,獲取《金融核心生產(chǎn)業(yè)務(wù)場景探索文章合集》,全面了解超融合如何支持金融核心業(yè)務(wù)系統(tǒng)、數(shù)據(jù)庫、IT 基礎(chǔ)架構(gòu)云化轉(zhuǎn)型與信創(chuàng)轉(zhuǎn)型。
文章來源:http://www.zghlxwxcb.cn/news/detail-734131.html
近期,我們將為您帶來更多金融行業(yè)場景探索和驗證文章,敬請期待!文章來源地址http://www.zghlxwxcb.cn/news/detail-734131.html
到了這里,關(guān)于分布式存儲 vs. 全閃集中式存儲:金融數(shù)據(jù)倉庫場景下的性能對比的文章就介紹完了。如果您還想了解更多內(nèi)容,請在右上角搜索TOY模板網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章,希望大家以后多多支持TOY模板網(wǎng)!