在數(shù)據(jù)收集和使用上,,通過(guò)獲取一份具有應(yīng)用一致性保證的“黃金副本”,,分鐘級(jí)虛擬化為多個(gè)副本直接掛載使用,,數(shù)據(jù)使用效率明顯得到提升;在數(shù)據(jù)存儲(chǔ)和傳輸上,這些虛擬數(shù)據(jù)副本相對(duì)原始存儲(chǔ)幾乎不占用存儲(chǔ)空間(約為0),,且ADM產(chǎn)品將全部數(shù)據(jù)集中存放在統(tǒng)一的存儲(chǔ)池中,既保證了數(shù)據(jù)傳輸流轉(zhuǎn)的閉環(huán)管控,又降低了數(shù)據(jù)的存儲(chǔ)成本,;在數(shù)據(jù)加工上,數(shù)據(jù)脫離生產(chǎn)環(huán)境之前增設(shè)了敏感數(shù)據(jù)處理環(huán)節(jié),,保障數(shù)據(jù)公開后的隱私安全,,防止核心數(shù)據(jù)泄露;在數(shù)據(jù)的提供和公開上,,虛擬數(shù)據(jù)副本可用于準(zhǔn)生產(chǎn),、測(cè)試環(huán)境等場(chǎng)景的數(shù)據(jù)交付,每一份虛擬數(shù)據(jù)都是互不影響的,,并且可讀可寫,,數(shù)據(jù)在經(jīng)過(guò)變更后可標(biāo)記快照,多個(gè)快照之間可以任意切換實(shí)現(xiàn)數(shù)據(jù)版本的管理,。上訊敏捷數(shù)據(jù)管理平臺(tái)ADM產(chǎn)品支持仿真的敏感數(shù)據(jù)處理,。醫(yī)療國(guó)產(chǎn)化備份
上訊敏捷數(shù)據(jù)管理平臺(tái)(ADM)的主要技術(shù)是(1)ADM內(nèi)置獨(dú)有的高效壓縮存儲(chǔ)池,壓縮比高達(dá)3:1,,存儲(chǔ)即壓縮,,降低了基礎(chǔ)數(shù)據(jù)源獲取的存儲(chǔ)成本與持續(xù)增長(zhǎng)的副本數(shù)據(jù)存儲(chǔ)成本。(2)ADM的數(shù)據(jù)庫(kù)虛擬化技術(shù),,是通過(guò)獲取一份基礎(chǔ)數(shù)據(jù)源,,快速拉起多份虛擬數(shù)據(jù)庫(kù)掛載給目標(biāo)業(yè)務(wù)使用,虛擬數(shù)據(jù)庫(kù)拉起時(shí)幾乎不占用物理存儲(chǔ)空間,,在實(shí)驗(yàn)室測(cè)試環(huán)境下拉起一個(gè)10TB數(shù)據(jù)量的虛擬數(shù)據(jù)庫(kù),,只占用1GB左右的存儲(chǔ)空間,明顯節(jié)約了存儲(chǔ)成本和時(shí)間周期,,因此針對(duì)開發(fā)測(cè)試場(chǎng)景,,需要對(duì)同一份數(shù)據(jù)創(chuàng)建N份副本數(shù)據(jù)時(shí),存儲(chǔ)成本節(jié)約近乎N倍,。高效壓縮比國(guó)內(nèi)較早發(fā)布CDM領(lǐng)域的平臺(tái)型產(chǎn)品是上訊敏捷數(shù)據(jù)管理平臺(tái)ADM產(chǎn)品,。
敏捷數(shù)據(jù)管理平臺(tái)ADM的關(guān)鍵技術(shù)如下:l***數(shù)據(jù)獲取方式數(shù)據(jù)獲取的目的是將不同的數(shù)據(jù)源實(shí)時(shí)或者按需同步到平臺(tái)內(nèi),,根據(jù)不同類型的數(shù)據(jù)源,數(shù)據(jù)獲取方式分為三種,,保證覆蓋全部數(shù)據(jù)源獲取方式:①支持實(shí)時(shí)同步應(yīng)用數(shù)據(jù)庫(kù),;②支持按需同步關(guān)系型數(shù)據(jù)庫(kù);③支持與備份系統(tǒng)對(duì)接恢復(fù)數(shù)據(jù),。l核心專利技術(shù)—數(shù)據(jù)庫(kù)虛擬化技術(shù)ADM內(nèi)置一套數(shù)據(jù)庫(kù)虛擬化管理程序,,虛擬數(shù)據(jù)庫(kù)是通過(guò)一份基礎(chǔ)數(shù)據(jù)源創(chuàng)建的數(shù)據(jù)副本,一份基礎(chǔ)數(shù)據(jù)源可以生成多個(gè)虛擬數(shù)據(jù)庫(kù),,虛擬數(shù)據(jù)庫(kù)可讀可寫,,虛擬數(shù)據(jù)庫(kù)狀態(tài)可實(shí)時(shí)保存。虛擬數(shù)據(jù)庫(kù)創(chuàng)建時(shí)間為分鐘級(jí),,且不占用額外的存儲(chǔ)空間,。
上訊敏捷數(shù)據(jù)管理平臺(tái)(ADM)既可以封裝在敏捷數(shù)據(jù)管理流程的中間環(huán)節(jié),也可以單獨(dú)作為敏感數(shù)據(jù)處理的抽取平臺(tái),,兩種模式滿足了當(dāng)前用戶對(duì)數(shù)據(jù)處理的全部需求,。 提供系統(tǒng)用戶角色權(quán)限的配置管理,負(fù)責(zé)系統(tǒng)角色用戶功能的劃分,,操作權(quán)限的分配,,負(fù)責(zé)處理任務(wù)向上級(jí)的申請(qǐng),上級(jí)用戶負(fù)責(zé)審批,、轉(zhuǎn)發(fā),、會(huì)簽或駁回以及復(fù)核工作的需求。當(dāng)前系統(tǒng)內(nèi)置豐富的算法,,具備廣義的通用型規(guī)則,,包括字符替換、隨機(jī)生成,、截短,、加權(quán)生成、加密等,;支持保留原有數(shù)據(jù)含義的仿真型規(guī)則,,支持中文字典庫(kù)與編碼字典庫(kù),保證姓名,、身份證號(hào),、證件號(hào)、地址,、組織機(jī)構(gòu)代碼等數(shù)據(jù)的有效性,、可用性,算法經(jīng)優(yōu)化已處理超長(zhǎng)字符截?cái)嗪椭貜?fù)數(shù)據(jù)的問(wèn)題。上訊ADM產(chǎn)品通過(guò)虛擬數(shù)據(jù)秒級(jí)分發(fā)功能實(shí)現(xiàn)測(cè)試數(shù)據(jù)的同時(shí)在線交付,,縮短了數(shù)據(jù)交付的時(shí)間,。
企業(yè)開發(fā)需求更新頻繁,對(duì)測(cè)試環(huán)境和測(cè)試數(shù)據(jù)提出了同步變更的要求,,ADM的虛擬數(shù)據(jù)庫(kù)快照功能解決了測(cè)試數(shù)據(jù)版本迭代的問(wèn)題,,通過(guò)對(duì)數(shù)據(jù)庫(kù)狀態(tài)進(jìn)行定時(shí)或即時(shí)的記錄,保留當(dāng)前虛擬數(shù)據(jù)庫(kù)的狀態(tài)作為測(cè)試數(shù)據(jù)版本,,一旦需要調(diào)用某個(gè)版本時(shí),,只需切換到不同時(shí)間點(diǎn)的虛擬庫(kù)快照即可,靈活實(shí)現(xiàn)測(cè)試數(shù)據(jù)版本的任意切換,,ADM還支持創(chuàng)建和維護(hù)虛擬庫(kù)級(jí)聯(lián)快照,,滿足回歸測(cè)試等具體應(yīng)用場(chǎng)景,通過(guò)這一功能明顯提升了開發(fā)測(cè)試效率,、升級(jí)迭代效率,。國(guó)內(nèi)排名靠前的CDM廠商是哪家?kafka地址
上訊ADM產(chǎn)品采用副本數(shù)據(jù)管理CDM面向數(shù)據(jù)全生命周期進(jìn)行數(shù)據(jù)安全管理,。醫(yī)療國(guó)產(chǎn)化備份
上訊敏捷數(shù)據(jù)管理平臺(tái)ADM功能支持自適應(yīng)源端的全局重刪算法與策略,支持任務(wù)級(jí)與全局指紋庫(kù),;針對(duì)文件備份提供文件粒度與塊級(jí)粒度的全域重刪且支持重刪指紋庫(kù)重建功能,,支持多線程文件備份,支持海量小文件場(chǎng)景下的聚合策略,,提供并行掃描和高速索引,,從而減少需要備份的數(shù)據(jù)量、縮短備份窗口,、節(jié)省備份數(shù)據(jù)傳輸所消耗的網(wǎng)絡(luò)帶寬以及節(jié)約備份數(shù)據(jù)存儲(chǔ)空間,;備份傳輸過(guò)程采用壓縮加密處理,緩解網(wǎng)絡(luò)傳輸?shù)膲毫?,增加網(wǎng)絡(luò)抖動(dòng)或短時(shí)間斷鏈的超時(shí)容錯(cuò)機(jī)制,,確保備份數(shù)據(jù)的安全。醫(yī)療國(guó)產(chǎn)化備份