PB 級數(shù)據(jù)倉庫 | GaussDB(DWS) 超大規(guī)模數(shù)據(jù)保護最佳實踐
發(fā)布人：scutech 發(fā)布日期：2025-03-25 12:06:15 點擊數(shù)：72
隨著數(shù)字化轉型的加速，各行業(yè)業(yè)務場景日趨豐富，海量數(shù)據(jù)從交易系統(tǒng)、物聯(lián)網(wǎng)設備、用戶行為等渠道持續(xù)涌入，數(shù)據(jù)規(guī)模呈現(xiàn)爆炸式增長，數(shù)據(jù)倉庫應運而生。華為云數(shù)據(jù)倉庫GaussDB(DWS)憑借高并發(fā)查詢能力、行列混合存儲、向量化引擎等技術，可實現(xiàn) PB 級數(shù)據(jù)秒級分析，目前已廣泛服務于金融、電信、能源等行業(yè)，成為國產(chǎn)首選的數(shù)據(jù)倉庫解決方案。
而超大規(guī)模 GaussDB(DWS)的數(shù)據(jù)保護方案，往往面臨備份數(shù)據(jù)巨大、備份窗口過長、恢復準確度低、性能調(diào)優(yōu)不便等困難。鼎甲 DBackup 作為華為長期的合作伙伴，與華為云深度融合開發(fā)，推出 XBSA 流式 GaussDB(DWS)數(shù)據(jù)倉庫保護方案，打破上述備份難題，并于兩年前順利上線國內(nèi)頭部銀行 1.6PB 超大規(guī)模 GaussDB(DWS)，且穩(wěn)定運行至今。
1. DBackup × GaussDB(DWS)?，保護方案四大核心優(yōu)勢
一、精細化備份恢復
支持庫、表、schema 級的靈活備份恢復，精準定位目標數(shù)據(jù)，恢復效率提升 80%。
二、云原生性能調(diào)優(yōu)
深度融合的云原生備份工具 Roach，專為多種業(yè)務場景設計，提供了 10 項關鍵的性能調(diào)優(yōu)參數(shù)，以確保卓越的性能表現(xiàn)。
三、分布式重復數(shù)據(jù)刪除
采用分布式重刪架構，為多節(jié)點模式下的 GaussDB(DWS) 集群提供數(shù)據(jù)保護，并支持負載均衡調(diào)度、故障容錯機制和在線擴展能力。項目實測數(shù)據(jù)顯示，備份重刪比平均可達 86%。
四、官方認證解決方案
國內(nèi)頭部銀行在其核心業(yè)務中采用 GaussDB(DWS)，系統(tǒng)架構超 150 個數(shù)據(jù)節(jié)點，日需高效處理數(shù)十億級別的交易記錄，累積高達 1.6PB 的數(shù)據(jù)量。面對如此超大規(guī)模集群，客戶期望數(shù)據(jù)保護能實現(xiàn)以下優(yōu)化目標：
●?快速備份恢復——2 小時備份窗口，TB 級數(shù)據(jù)在分鐘級恢復；
● 精準數(shù)據(jù)保護——需支持細粒度恢復，如：單表恢復；
●?高效存儲管理——重刪比高，大幅度節(jié)省備份數(shù)據(jù)的存儲成本。
實施方案
鼎甲 DBackup 結合客戶實際組網(wǎng)架構與軟硬件要求，打造如下部署方案：
國內(nèi)頭部銀行在其核心業(yè)務中采用 GaussDB(DWS)，系統(tǒng)架構超 150 個數(shù)據(jù)節(jié)點，日需高效處理數(shù)十億級別的交易記錄，累積高達 1.6PB 的數(shù)據(jù)量。面對如此超大規(guī)模集群，客戶期望數(shù)據(jù)保護能實現(xiàn)以下優(yōu)化目標：
1、非侵入式部署：備份組網(wǎng)無需在 GaussDB(DWS) 節(jié)點上安裝代理軟件，僅需要在獨立的服務器或存儲服務器上配置備份主機，用于連接 GaussDB(DWS) 和備份系統(tǒng)?，F(xiàn)場實施中，僅部署 12 臺備份主機，即滿足 150+ GaussDB(DWS) 集群節(jié)點的并行備份要求。
2、分布式重刪： 備份系統(tǒng)采用分布式重刪架構，通過構建 48 節(jié)點的重刪存儲池和極致的重刪比，有效承載 1.6PB 業(yè)務數(shù)據(jù)經(jīng)備份生成的多份歷史副本。
3、TCO 低：項目采用萬兆網(wǎng)卡和低成本的機械硬盤，而非 25/40G 高性能網(wǎng)絡和 SSD 硬盤，通過高效的備份軟件，實現(xiàn)備份數(shù)據(jù)高速傳輸與持久化存儲。
實現(xiàn)效果
●?高吞吐備份：生產(chǎn)環(huán)境增量備份平均速度可達 9.62 GiB/s
●?分鐘級恢復：1 分鐘內(nèi)精準恢復 200GB 表，滿足金融行業(yè)嚴苛的 RPO 要求
●?極致重刪壓縮比：完全備份重刪率最高可達 99%
●?上線至今 0 故障，穩(wěn)定運行超 18 個月！
面對蓬勃發(fā)展的大數(shù)據(jù)浪潮，數(shù)據(jù)保護已成為永恒的話題。鼎甲推出的華為云數(shù)據(jù)倉庫 GaussDB(DWS) 保護方案，在功能細化與性能方面表現(xiàn)卓越，并歷經(jīng)超大規(guī)模場景下的打磨，成為業(yè)界數(shù)倉保護的新標桿！
更多 DBackup 支持 GaussDB(DWS) 功能細節(jié)，可閱讀：
DBackup 新版：高性能 GaussDB(DWS) 非侵入式方案，引領業(yè)界國產(chǎn)數(shù)倉保護！
