上訊敏捷數(shù)據(jù)管理平臺(Agile Data Management)簡稱ADM,是采用基于CDM架構(gòu)的數(shù)據(jù)庫虛擬化等**技術(shù),,為企業(yè)上中下游數(shù)據(jù)的備份恢復(fù),、數(shù)據(jù)驗證、安全***,、分發(fā)交付提供的面向數(shù)據(jù)全生命周期的安全管理解決方案,。該產(chǎn)品通過自動化流程任務(wù)編排的方式實現(xiàn)了數(shù)據(jù)使用的成本控制,、版本管理與開發(fā)利用,,充分發(fā)揮了備份數(shù)據(jù)的潛在價值。實現(xiàn)生產(chǎn)數(shù)據(jù)備份恢復(fù)與異地容災(zāi),、備份數(shù)據(jù)自動化恢復(fù)與有效性驗證,、測試數(shù)據(jù)多副本快速交付、數(shù)據(jù)安全***,。
敏捷數(shù)據(jù)管理平臺ADM的核*專*技術(shù)——數(shù)據(jù)庫虛擬化技術(shù),。備份業(yè)務(wù)需求側(cè)
功能節(jié)點(diǎn)統(tǒng)一管理,支持彈性擴(kuò)展ADM采用多節(jié)點(diǎn)高可用部署架構(gòu),,保障數(shù)據(jù)服務(wù)高可用,,并消除單節(jié)點(diǎn)故障導(dǎo)致的業(yè)務(wù)不可用問題,確保數(shù)據(jù)服務(wù)連續(xù)性,。采用Scale-out架構(gòu),,根據(jù)業(yè)務(wù)發(fā)展規(guī)模,按需擴(kuò)展集群節(jié)點(diǎn),,無需停止服務(wù),,靈活滿足業(yè)務(wù)需求。同時,,ADM支持存儲池容量的彈性擴(kuò)充,,滿足不斷增長的數(shù)據(jù)存儲需求,。(2)數(shù)據(jù)存儲成本倍數(shù)級節(jié)約,提升數(shù)據(jù)存儲環(huán)節(jié)的效能首先,,數(shù)據(jù)備份面臨存儲成本高的問題,,ADM采用內(nèi)置高效的壓縮存儲池存放數(shù)據(jù),壓縮比約為3:1,,存儲即壓縮,,***降低了備份數(shù)據(jù)的存儲成本;其次,,通過ADM的數(shù)據(jù)庫虛擬化技術(shù),,一份基礎(chǔ)數(shù)據(jù)即可快速拉起多份虛擬數(shù)據(jù)庫,由于虛擬數(shù)據(jù)庫90%的數(shù)據(jù)均與原始數(shù)據(jù)相同,,因此拉起時幾乎不占用額外的物理存儲空間,,*對新增的寫操作計入容量占用,因此,,隨著數(shù)據(jù)分發(fā)使用的場景和頻率增加,,虛擬庫的數(shù)量越來越多,而存儲成本將會呈倍數(shù)級節(jié)約,,例如針對同一份數(shù)據(jù)創(chuàng)建N個虛擬庫,,傳統(tǒng)方法需要N倍的存儲空間占用,而通過ADM只需要占用近乎0TB的存儲空間,,**節(jié)約了數(shù)據(jù)存儲環(huán)節(jié)的資源和成本,。高質(zhì)量發(fā)展ADM針對數(shù)據(jù)的獲取采用壓縮存儲的方式,存儲池可壓縮至原來的三分之一,,大*節(jié)約了數(shù)據(jù)存儲的成本,。
敏捷數(shù)據(jù)管理平臺(Agile Data Management)簡稱ADM,是采用基于CDM(副本數(shù)據(jù)管理)的數(shù)據(jù)庫虛擬化技術(shù),,為企業(yè)上中下游數(shù)據(jù)的備份恢復(fù),、數(shù)據(jù)驗證、敏感數(shù)據(jù)處理,、分發(fā)交付提供的面向數(shù)據(jù)全生命周期的安全管理解決方案,,在保證數(shù)據(jù)安全使用的同時,提高了數(shù)據(jù)使用效率并降低了數(shù)據(jù)存儲成本,。ADM由數(shù)據(jù)備份管理,、備份校驗管理、數(shù)據(jù)副本管理,、敏感數(shù)據(jù)處理管理組成,,實現(xiàn)了數(shù)據(jù)復(fù)制容災(zāi)、數(shù)據(jù)存儲管理和數(shù)據(jù)流程管理,,通過自動化流程任務(wù)編排的方式實現(xiàn)了數(shù)據(jù)使用的成本控制,、版本管理與開發(fā)利用,,充分發(fā)揮了數(shù)據(jù)資產(chǎn)的潛在價值。
ADM產(chǎn)品數(shù)據(jù)安全***ADM平臺支持靜態(tài)數(shù)據(jù)脫敏(涉及數(shù)據(jù)庫,、格式化文件,、數(shù)據(jù)庫對象、消息隊列等),,內(nèi)置104條***算法,、47條敏感信息類型匹配庫,覆蓋個人身份信息,、組織機(jī)構(gòu)信息,、資質(zhì)資格證信息、金融數(shù)據(jù)信息,、醫(yī)療數(shù)據(jù)信息,、車輛數(shù)據(jù)信息等眾多類別的敏感數(shù)據(jù)類型識別與仿真***。具備廣義的通用型***規(guī)則,,包括字符替換,、隨機(jī)生成、截短,、加權(quán)生成,、加密等;支持保留原有數(shù)據(jù)含義的仿真型***規(guī)則,,支持中文字典庫與編碼字典庫,,保證姓名、身份證號,、證件號,、地址、組織機(jī)構(gòu)代碼等***后數(shù)據(jù)的有效性,、可用性。提供基于數(shù)據(jù)庫的庫內(nèi)***和基于ETL的抽取***,,提供文件***添加水印功能,,提供國產(chǎn)化操作系統(tǒng)的加密算法,滿足用戶多種***需求,。ADM的數(shù)據(jù)遠(yuǎn)程復(fù)制主要解決數(shù)據(jù)全生命周期管理中數(shù)據(jù)傳輸流轉(zhuǎn)的安全問題,,實現(xiàn)數(shù)據(jù)安全跨域傳輸?shù)哪繕?biāo)。
上訊敏捷數(shù)據(jù)管理平臺適用場景:數(shù)據(jù)交付速度慢的開發(fā)測試部門企業(yè)通過交付生產(chǎn)數(shù)據(jù)輔助第三方業(yè)務(wù)決策,,如開發(fā)/測試環(huán)境,、統(tǒng)計分析、準(zhǔn)業(yè)務(wù)系統(tǒng)環(huán)境搭建等,,交付生產(chǎn)數(shù)據(jù)的方式是通過生成業(yè)務(wù)系統(tǒng)數(shù)據(jù)副本,,而副本的準(zhǔn)備通常需要幾小時,,甚至幾天不等,嚴(yán)重拖延了項目進(jìn)度,。
備份數(shù)據(jù)的有效性驗證效率低的運(yùn)維部門,,大部分企業(yè)對其**業(yè)務(wù)系統(tǒng)進(jìn)行了數(shù)據(jù)備份,為了檢驗備份數(shù)據(jù)的有效性,,以及滿足相關(guān)法律法規(guī)的要求,,企業(yè)對備份數(shù)據(jù)采取周期性的恢復(fù)驗證;由于企業(yè)的業(yè)務(wù)系統(tǒng)繁多,,而人員相對緊缺,,驗證工作需要大量重復(fù)性動作,成為企業(yè)當(dāng)前面臨的一大挑戰(zhàn),。
數(shù)據(jù)副本分散存放難以管理的數(shù)據(jù)中心數(shù)據(jù)副本一旦被交付使用,,就**存在于使用環(huán)境中,隨著數(shù)據(jù)使用場景的日益增多,,數(shù)據(jù)副本在非生產(chǎn)環(huán)境中逐漸累積,,**分散的存放方式導(dǎo)致副本的辨識度不高,后續(xù)使用與銷毀難度明顯增大,。同時,,重復(fù)存放現(xiàn)象嚴(yán)重造成了存儲資源的浪費(fèi)。u隱私數(shù)據(jù)泄露風(fēng)險高的用戶無論是通過生產(chǎn)數(shù)據(jù)庫導(dǎo)出,,還是通過備份系統(tǒng)恢復(fù),,都能夠直接獲取到企業(yè)的**生產(chǎn)數(shù)據(jù),其中包含企業(yè)內(nèi)部機(jī)密數(shù)據(jù)和客戶個人隱私信息,,一旦發(fā)生泄露將帶來嚴(yán)重后果,,不僅影響企業(yè)的名譽(yù),也會造成一定的經(jīng)濟(jì)損失,。 ADM可使數(shù)據(jù)分鐘級提供,,提升數(shù)據(jù)交付效率縮短開發(fā)周期。CDM應(yīng)用在金融行業(yè)開發(fā)測試場景
ADM主要由數(shù)據(jù)備份管理,、備份校驗管理,、數(shù)據(jù)副本管理、數(shù)據(jù)脫*管理四大功能模塊組成,。備份業(yè)務(wù)需求側(cè)
數(shù)據(jù)資源可視化管理,,有效滿足上中下游數(shù)據(jù)的政策合規(guī)ADM平臺具備根據(jù)管理人員、測試需求等內(nèi)容的不同進(jìn)行分組劃分的功能,,將***過的數(shù)據(jù)進(jìn)行分組管理,,從下游測試數(shù)據(jù)管理的源頭管控數(shù)據(jù)資源的類別,做到從源頭劃分類別,使下游測試數(shù)據(jù)管理形成上游數(shù)據(jù)源----中游數(shù)據(jù)中轉(zhuǎn)----下游數(shù)據(jù)目標(biāo)的閉環(huán)式數(shù)據(jù)使用流程,,規(guī)范化的數(shù)據(jù)流程使數(shù)據(jù)管理者成為數(shù)據(jù)的負(fù)責(zé)人,,自動化的資源管理也更有效地為金融行業(yè)用戶提供安全的數(shù)據(jù)管理方案。同時,,ADM提供對數(shù)據(jù)流轉(zhuǎn)的樹狀拓?fù)浣Y(jié)構(gòu)圖,,可詳細(xì)了解數(shù)據(jù)的來源、所屬存儲池,、掛載的測試服務(wù)器,,以及數(shù)據(jù)快照的層級關(guān)系,方便對系統(tǒng)全局的數(shù)據(jù)使用結(jié)構(gòu)進(jìn)行預(yù)覽,,通過可視化的結(jié)構(gòu)拓?fù)鋱D,,**幫助用戶了解下游測試網(wǎng)中測試數(shù)據(jù)的歸屬關(guān)系,完善數(shù)據(jù)流轉(zhuǎn)路徑,,優(yōu)化數(shù)據(jù)資源的合理分配,,可視化功能的動態(tài)展示將助力企業(yè)向著智能化數(shù)據(jù)安全治理的方向轉(zhuǎn)型。備份業(yè)務(wù)需求側(cè)