上訊敏捷數(shù)據(jù)管理平臺(ADM)支持重復數(shù)據(jù)刪除技術(shù),在典型的重復數(shù)據(jù)刪除技術(shù)中,,根據(jù)不同的數(shù)據(jù)備份場景選擇適合的重刪策略與粒度方案,。在確定重刪策略與粒度后,,會根據(jù)輸入側(cè)不同粒度(卷級、文件級,、塊級)的數(shù)據(jù)采取不同的數(shù)據(jù)切分策略,,并依據(jù)任務(wù)級與全局指紋庫提供自適應(yīng)源端的全局重刪算法與策略,當前支持源端塊級,、文件級重刪和并行重刪技術(shù),。源端重刪是采用基于內(nèi)容的可變長數(shù)據(jù)切分算法,通過對數(shù)據(jù)塊進行哈希算法的標記,,即指紋(Fingerprint),,在指紋庫中尋找相同的指紋,。如果存在相同指紋,,則表示已保存了相同的數(shù)據(jù)塊,ADM則不再保存此數(shù)據(jù)塊,,而是引用已存在的數(shù)據(jù)塊,,從而節(jié)省更多的備份空間,。該算法還可以智能識別已修改的數(shù)據(jù)和未修改的數(shù)據(jù),,從而避免因修改數(shù)據(jù)位移而導致的未修改數(shù)據(jù)切分到新數(shù)據(jù)塊中的問題,較大限度地提升重刪性能和重刪率,,為避免數(shù)據(jù)備份過程中冗余網(wǎng)絡(luò)傳輸與存儲開銷,,在源端設(shè)置粗粒度前置數(shù)據(jù)校驗可以明顯縮小備份傳輸過程中的數(shù)據(jù)冗余,,目的在于不備份任意一個冗余數(shù)據(jù)。數(shù)據(jù)安全領(lǐng)域的CDM是指拷貝數(shù)據(jù)管理,。數(shù)據(jù)庫虛擬化收益對比
l應(yīng)用數(shù)據(jù)一致性保障ADM主要應(yīng)用原生備份接口獲取具有應(yīng)用一致性保障的數(shù)據(jù),,如針對Oracle,利用OracleRMAN和歸檔日志來保障備份數(shù)據(jù)庫數(shù)據(jù)的一致性,;針對VMware虛擬化,,利用VMwareSnapshot技術(shù)來保障備份虛擬機數(shù)據(jù)的一致性。l事務(wù)日志同步技術(shù)支持數(shù)據(jù)庫的事務(wù)日志備份,,事務(wù)日志是數(shù)據(jù)庫中已發(fā)生的所有修改和執(zhí)行每次修改的事務(wù)的一連串記錄,,事務(wù)日志備份可將數(shù)據(jù)恢復到精確的故障點。例如:Oracle支持歸檔日志備份和刪除,,MySQL數(shù)據(jù)庫支持redo日志備份和刪除等,。l文件系統(tǒng)數(shù)據(jù)保護ADM支持備份非結(jié)構(gòu)化的文件系統(tǒng)。支持全量備份和長久增量備份與全量快照合成,,備份策略采用定時執(zhí)行備份任務(wù),,恢復策略支持細粒度恢復,**小粒度為恢復單個文件,。支持跨文件系統(tǒng)恢復,,例如恢復到EXT3,、EXT4、NTFS等文件系統(tǒng),。一手數(shù)據(jù)資產(chǎn)上訊信息敏捷數(shù)據(jù)管理平臺ADM是創(chuàng)新型數(shù)據(jù)備份管理解決方案,。
ADM產(chǎn)品數(shù)據(jù)安全***ADM平臺支持靜態(tài)數(shù)據(jù)脫敏(涉及數(shù)據(jù)庫、格式化文件,、數(shù)據(jù)庫對象,、消息隊列等),內(nèi)置104條***算法,、47條敏感信息類型匹配庫,,覆蓋個人身份信息、組織機構(gòu)信息,、資質(zhì)資格證信息,、金融數(shù)據(jù)信息、醫(yī)療數(shù)據(jù)信息,、車輛數(shù)據(jù)信息等眾多類別的敏感數(shù)據(jù)類型識別與仿真***,。具備廣義的通用型***規(guī)則,包括字符替換,、隨機生成,、截短、加權(quán)生成,、加密等,;支持保留原有數(shù)據(jù)含義的仿真型***規(guī)則,支持中文字典庫與編碼字典庫,,保證姓名,、身份證號、證件號,、地址,、組織機構(gòu)代碼等***后數(shù)據(jù)的有效性、可用性,。提供基于數(shù)據(jù)庫的庫內(nèi)***和基于ETL的抽取***,,提供文件***添加水印功能,提供國產(chǎn)化操作系統(tǒng)的加密算法,,滿足用戶多種***需求,。
ADM產(chǎn)品測試數(shù)據(jù)多副本快速交付ADM是國內(nèi)**早的副本數(shù)據(jù)管理(CDM)產(chǎn)品,采用數(shù)據(jù)庫虛擬化技術(shù)對原始數(shù)據(jù)庫副本(黃金副本)快速生成多個虛擬數(shù)據(jù)庫作為測試數(shù)據(jù)副本,,滿足開發(fā)測試場景的測試數(shù)據(jù)快速供應(yīng),。?100倍數(shù)據(jù)交付效率提升10TB的數(shù)據(jù)恢復時間由原來的小時級縮短至分鐘級;?10倍工作效率提升在開發(fā),、測試環(huán)境中,,使用者可隨時對虛擬庫做快照標記,,快照對應(yīng)著不同時間的數(shù)據(jù)版本。數(shù)據(jù)版本管理可進行任意標記的快照切換,,降低數(shù)據(jù)導入或恢復產(chǎn)生的時間成本,,大幅提升工作效率。?10倍存儲空間節(jié)省首先內(nèi)置存儲池存儲即壓縮的機制可實現(xiàn)約3:1的數(shù)據(jù)存儲壓縮,,同時交付的多個虛擬數(shù)據(jù)庫由于共享于一份原始數(shù)據(jù),,因此基本不占用額外的存儲空間,隨著交付虛擬數(shù)據(jù)庫的數(shù)量增加,,節(jié)約的存儲空間會成倍增加,,實際應(yīng)用場景中至少為用戶節(jié)約10倍的存儲空間。敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品數(shù)據(jù)信創(chuàng)產(chǎn)品,,實現(xiàn)了國產(chǎn)數(shù)據(jù)庫的備份與國產(chǎn)操作系統(tǒng)的兼容,。
數(shù)據(jù)流程管理是ADM功能模塊之一,主要通過靈活配置數(shù)據(jù)流轉(zhuǎn)環(huán)節(jié)實現(xiàn)數(shù)據(jù)管理流程的自動化作業(yè)編排,,ADM采用基于畫布的方式默認作業(yè)流程的起止節(jié)點,,根據(jù)實際需求將數(shù)據(jù)的獲取,、恢復,、傳輸、共享,、交付,、銷毀等各個環(huán)節(jié)對應(yīng)的任務(wù)組件靈活拖動到作業(yè)畫布,組成一個完整的任務(wù)流程,,各任務(wù)之間支持依賴關(guān)系,、延時機制以及斷點處理機制,實現(xiàn)數(shù)據(jù)管理流程任務(wù)的串聯(lián)組建和并行執(zhí)行,,達到數(shù)據(jù)管理流程的自動化執(zhí)行,,協(xié)助用戶將數(shù)據(jù)交付流程的各個工作環(huán)節(jié)靈活地組合起來,實現(xiàn)數(shù)據(jù)交付的自動化,,從而擺脫人工值守,,達到縮減時間成本和人力成本的目標。敏捷數(shù)據(jù)管理平臺虛擬數(shù)據(jù)秒級分發(fā),,提升了環(huán)境準備效率,,數(shù)據(jù)交付時間整體節(jié)約100倍以上。備份恢復業(yè)務(wù)供給側(cè)
上訊信息敏捷數(shù)據(jù)管理平臺ADM包括PDM,、BDM,、SDM、CDM四大功能模塊,。數(shù)據(jù)庫虛擬化收益對比
當前,,有效的保障數(shù)據(jù)安全的方式仍然是數(shù)據(jù)備份,,即企業(yè)針對生產(chǎn)業(yè)務(wù)的數(shù)據(jù)、文件制定備份策略生成備份數(shù)據(jù),,一旦業(yè)務(wù)數(shù)據(jù)發(fā)生丟失或損壞,,則恢復備份數(shù)據(jù)提供業(yè)務(wù)訪問,傳統(tǒng)的數(shù)據(jù)備份方案并未提供數(shù)據(jù)的恢復驗證手段,,因此企業(yè)在發(fā)生數(shù)據(jù)丟失時,,啟用備份數(shù)據(jù)恢復失敗的案例屢見不鮮,這也給各行業(yè)客戶造成了巨大的經(jīng)濟損失和不良的社會影響,,為滿足法律的合規(guī)性要求,,備份數(shù)據(jù)的恢復驗證成為備份恢復解決方案的必要需求,但由于備份數(shù)據(jù)量巨大,、涉及業(yè)務(wù)系統(tǒng)繁多,、專業(yè)人員數(shù)量有限,定期的備份數(shù)據(jù)恢復驗證仍然是一道難題,,上訊敏捷數(shù)據(jù)備份恢復驗證解決方案為備份數(shù)據(jù)的恢復驗證提供了創(chuàng)新的技術(shù)手段,,包括備份數(shù)據(jù)的分鐘級快速恢復、秒級可用性驗證,、按計劃周期性定時自動恢復驗證,,保障了備份數(shù)據(jù)的可恢復性與可用性。數(shù)據(jù)庫虛擬化收益對比