上訊敏捷數(shù)據管理平臺(ADM)支持并行重刪技術,,通過在多個不同的節(jié)點上構建指紋庫,,并將指紋并行分布于多個節(jié)點,,采用內存級指紋庫進行重刪,,所有指紋讀寫全部保存于內存中,,從而提升指紋查詢和處理效率,,并且減少了因磁盤中指紋庫增大所導致的隨機IO壓力,。以此識別并消除數(shù)據備份過程中數(shù)據源中重復的數(shù)據,,該技術適用于不同平臺中的文件,、數(shù)據庫、虛擬機等不同應用類型的數(shù)據,,可以大幅度減少需要傳輸?shù)臄?shù)據量,,從而極大地節(jié)省數(shù)據傳輸帶寬,解決單點性能和存儲空間壓力,。上訊信息敏捷數(shù)據管理平臺ADM是創(chuàng)新型數(shù)據備份管理解決方案,。日志校驗技術
通過智能定義敏感數(shù)據類型,自動發(fā)現(xiàn)和識別敏感數(shù)據,,包括數(shù)據類型,、內容、約束關系,靈活排序減少人為篩選,,定位敏感數(shù)據源,。豐富的算法與仿真的字典庫相結合,保證處理后數(shù)據仍具有業(yè)務屬性,,數(shù)據表間關系仍具有業(yè)務一致性,,不影響數(shù)據挖掘分析數(shù)據價值。對涉及企業(yè),、個人信息的隱私數(shù)據,,包括資金財產、個人,、企業(yè)隱私的對照關系進行敏感數(shù)據識別,,通過內置的規(guī)則進行處理,將數(shù)據敏感部分去隱私化,,但并不失去數(shù)據挖掘的價值特征,,減少數(shù)據隱私泄露帶來的風險和損失,甚至降低可能發(fā)生的人身傷害和違法犯罪事件,。日志校驗技術數(shù)據安全領域的CDM是指copy data management。
上訊信息敏捷數(shù)據管理平臺(Agile Data Management)簡稱ADM,,是采用基于CDM(副本數(shù)據管理)的數(shù)據庫虛擬化技術,,為企業(yè)上中下游數(shù)據的備份恢復、數(shù)據驗證,、安全***,、分發(fā)交付提供的面向數(shù)據全生命周期的安全管理解決方案,在保證數(shù)據安全使用的同時,,提高了數(shù)據使用效率并降低了數(shù)據存儲成本,。ADM由數(shù)據備份管理、備份校驗管理,、數(shù)據副本管理,、數(shù)據脫敏管理組成,實現(xiàn)了數(shù)據復制容災,、數(shù)據存儲管理和數(shù)據流程管理,,通過自動化流程任務編排的方式實現(xiàn)了數(shù)據使用的成本控制、版本管理與開發(fā)利用,,充分發(fā)揮了數(shù)據資產的潛在價值,。
管理控制中心(Master)是ADM的集中管理和調度控制中心,是進行可視化管理的Web操作平臺,。它負責集中管理ADM中的所有模塊組件,,系統(tǒng)管理員、安全管理員、操作員通過管理控制中心的Web管理頁面協(xié)調并執(zhí)行各個角色對應的操作,;數(shù)據服務節(jié)點(CDMServer)是提供數(shù)據備份與恢復,、備份數(shù)據恢復驗證、副本數(shù)據創(chuàng)建和交付,、數(shù)據復制容災功能的服務節(jié)點,。用于記錄數(shù)據服務任務的配置信息、存儲情況,、歷史記錄等,,數(shù)據服務節(jié)點統(tǒng)一通過MasterIP訪問;***服務節(jié)點(SDMServer)是提供數(shù)據脫敏的服務節(jié)點,,用于記錄接入平臺的敏感數(shù)據源,、數(shù)據脫敏策略、***任務記錄等信息,,***服務節(jié)點統(tǒng)一通過MasterIP訪問,。客戶端(Client)*針對數(shù)據服務節(jié)點(CDMServer)需要保護及管理的生產服務器,、目標服務器,,如物理服務器、虛擬機等都統(tǒng)稱為客戶端,。為方便與管理控制中心進行網絡通信和數(shù)據傳輸,,一般會在客戶端上安裝客戶端軟件??蛻舳塑浖撠燀憫芾砜刂浦行模∕aster)的命令,,執(zhí)行數(shù)據備份和恢復等指令??蛻舳塑浖赏ㄟ^管理控制中心(Master)進行Web頁面的推送安裝與注冊,。***服務節(jié)點(SDMServer)無需安裝客戶端軟件。上訊ADM通過數(shù)據備份后獲取到的黃金副本開啟數(shù)據開發(fā)利用的創(chuàng)新流程,,充分發(fā)揮數(shù)字資產價值,。
傳統(tǒng)的備份方案大多采用周期性的“全量備份+增量備份”策略,其增量備份大多不可持續(xù),,經過一段時間就必須執(zhí)行一次全量備份,。因而傳統(tǒng)的備份方案經常面臨備份窗口過大的問題,而且其增量備份數(shù)據的恢復效率相對低下,,因為每個時間點的恢復都依賴于上一次全備副本和上一次全備副本后的所有增量數(shù)據,,恢復操作需要進行逐個迭代恢復。此外,,過期增量數(shù)據的清理操作也受限于備份副本之間的依賴關系,,不一定能及時被***。而長久增量備份與全量快照合成技術,即***執(zhí)行全量備份,,之后只對新增或改動過的數(shù)據進行增量備份,,此增量備份數(shù)據是持續(xù)的,而且每個增量備份的數(shù)據副本將自動合成為全量快照副本,,便于恢復,。因此,長久增量備份與全量快照合成技術能夠大幅度減少備份時間,,節(jié)省備份數(shù)據所需的存儲空間,,且提升了恢復效率。長久增量備份與全量快照合成技術適用于單個應用數(shù)據量大,,執(zhí)行一次完全備份比較費時費力的應用場景,。若用戶備份數(shù)據量小,也可使用傳統(tǒng)的全備+增備技術方式,,ADM無掛載備份能夠實現(xiàn)此方式,。海量數(shù)據供數(shù)于下游開發(fā)測試統(tǒng)計分析場景的數(shù)據使用需求該如何滿足?數(shù)據壓縮存儲
上訊ADM產品通過虛擬數(shù)據秒級分發(fā)功能實現(xiàn)測試數(shù)據的同時在線交付,,縮短了數(shù)據交付的時間,。日志校驗技術
上訊敏捷數(shù)據管理平臺ADM產品是一款企業(yè)級CDM產品,通過以數(shù)據為中心,,以安全為前提,,以使用為導向,以敏捷為目的的產品理念,,為企業(yè)提供一套面向上中下游數(shù)據高效使用與安全管控的數(shù)據安全治理解決方案,在保證數(shù)據安全使用的同時,,提高數(shù)據使用效率,、降低數(shù)據存儲成本。ADM產品的應用解決了數(shù)據開發(fā)利用需求下,,數(shù)據使用流轉環(huán)節(jié)遇到的安全性和效率問題,,為企業(yè)在開發(fā)測試場景中快速供應測試數(shù)據提供了一種新的解決方案,主要應用于開發(fā)測試部門中對開發(fā)測試團隊的功能測試,、回歸測試等具體的測試場景提供靈活的測試數(shù)據版本,,通過一鍵切換立即調取適用于當前業(yè)務版本的數(shù)據版本,明顯縮短了業(yè)務開發(fā)的測試周期.日志校驗技術