上訊敏捷數(shù)據(jù)管理平臺(tái)(ADM)支持并行重刪技術(shù),通過(guò)在多個(gè)不同的節(jié)點(diǎn)上構(gòu)建指紋庫(kù),并將指紋并行分布于多個(gè)節(jié)點(diǎn),采用內(nèi)存級(jí)指紋庫(kù)進(jìn)行重刪,所有指紋讀寫全部保存于內(nèi)存中,從而提升指紋查詢和處理效率,并且減少了因磁盤中指紋庫(kù)增大所導(dǎo)致的隨機(jī)IO壓力。以此識(shí)別并消除數(shù)據(jù)備份過(guò)程中數(shù)據(jù)源中重復(fù)的數(shù)據(jù),該技術(shù)適用于不同平臺(tái)中的文件、數(shù)據(jù)庫(kù)、虛擬機(jī)等不同應(yīng)用類型的數(shù)據(jù),可以大幅度減少需要傳輸?shù)臄?shù)據(jù)量,從而極大地節(jié)省數(shù)據(jù)傳輸帶寬,解決單點(diǎn)性能和存儲(chǔ)空間壓力。上訊信息敏捷數(shù)據(jù)管理平臺(tái)ADM是創(chuàng)新型數(shù)據(jù)備份管理解決方案。日志校驗(yàn)技術(shù)
通過(guò)智能定義敏感數(shù)據(jù)類型,自動(dòng)發(fā)現(xiàn)和識(shí)別敏感數(shù)據(jù),包括數(shù)據(jù)類型、內(nèi)容、約束關(guān)系,靈活排序減少人為篩選,定位敏感數(shù)據(jù)源。豐富的算法與仿真的字典庫(kù)相結(jié)合,保證處理后數(shù)據(jù)仍具有業(yè)務(wù)屬性,數(shù)據(jù)表間關(guān)系仍具有業(yè)務(wù)一致性,不影響數(shù)據(jù)挖掘分析數(shù)據(jù)價(jià)值。對(duì)涉及企業(yè)、個(gè)人信息的隱私數(shù)據(jù),包括資金財(cái)產(chǎn)、個(gè)人、企業(yè)隱私的對(duì)照關(guān)系進(jìn)行敏感數(shù)據(jù)識(shí)別,通過(guò)內(nèi)置的規(guī)則進(jìn)行處理,將數(shù)據(jù)敏感部分去隱私化,但并不失去數(shù)據(jù)挖掘的價(jià)值特征,減少數(shù)據(jù)隱私泄露帶來(lái)的風(fēng)險(xiǎn)和損失,甚至降低可能發(fā)生的人身傷害和違法犯罪事件。日志校驗(yàn)技術(shù)數(shù)據(jù)安全領(lǐng)域的CDM是指copy data management。
上訊信息敏捷數(shù)據(jù)管理平臺(tái)(Agile Data Management)簡(jiǎn)稱ADM,是采用基于CDM(副本數(shù)據(jù)管理)的數(shù)據(jù)庫(kù)虛擬化技術(shù),為企業(yè)上中下游數(shù)據(jù)的備份恢復(fù)、數(shù)據(jù)驗(yàn)證、安全***、分發(fā)交付提供的面向數(shù)據(jù)全生命周期的安全管理解決方案,在保證數(shù)據(jù)安全使用的同時(shí),提高了數(shù)據(jù)使用效率并降低了數(shù)據(jù)存儲(chǔ)成本。ADM由數(shù)據(jù)備份管理、備份校驗(yàn)管理、數(shù)據(jù)副本管理、數(shù)據(jù)脫敏管理組成,實(shí)現(xiàn)了數(shù)據(jù)復(fù)制容災(zāi)、數(shù)據(jù)存儲(chǔ)管理和數(shù)據(jù)流程管理,通過(guò)自動(dòng)化流程任務(wù)編排的方式實(shí)現(xiàn)了數(shù)據(jù)使用的成本控制、版本管理與開發(fā)利用,充分發(fā)揮了數(shù)據(jù)資產(chǎn)的潛在價(jià)值。
管理控制中心(Master)是ADM的集中管理和調(diào)度控制中心,是進(jìn)行可視化管理的Web操作平臺(tái)。它負(fù)責(zé)集中管理ADM中的所有模塊組件,系統(tǒng)管理員、安全管理員、操作員通過(guò)管理控制中心的Web管理頁(yè)面協(xié)調(diào)并執(zhí)行各個(gè)角色對(duì)應(yīng)的操作;數(shù)據(jù)服務(wù)節(jié)點(diǎn)(CDMServer)是提供數(shù)據(jù)備份與恢復(fù)、備份數(shù)據(jù)恢復(fù)驗(yàn)證、副本數(shù)據(jù)創(chuàng)建和交付、數(shù)據(jù)復(fù)制容災(zāi)功能的服務(wù)節(jié)點(diǎn)。用于記錄數(shù)據(jù)服務(wù)任務(wù)的配置信息、存儲(chǔ)情況、歷史記錄等,數(shù)據(jù)服務(wù)節(jié)點(diǎn)統(tǒng)一通過(guò)MasterIP訪問(wèn);***服務(wù)節(jié)點(diǎn)(SDMServer)是提供數(shù)據(jù)脫敏的服務(wù)節(jié)點(diǎn),用于記錄接入平臺(tái)的敏感數(shù)據(jù)源、數(shù)據(jù)脫敏策略、***任務(wù)記錄等信息,***服務(wù)節(jié)點(diǎn)統(tǒng)一通過(guò)MasterIP訪問(wèn)??蛻舳耍–lient)*針對(duì)數(shù)據(jù)服務(wù)節(jié)點(diǎn)(CDMServer)需要保護(hù)及管理的生產(chǎn)服務(wù)器、目標(biāo)服務(wù)器,如物理服務(wù)器、虛擬機(jī)等都統(tǒng)稱為客戶端。為方便與管理控制中心進(jìn)行網(wǎng)絡(luò)通信和數(shù)據(jù)傳輸,一般會(huì)在客戶端上安裝客戶端軟件。客戶端軟件負(fù)責(zé)響應(yīng)管理控制中心(Master)的命令,執(zhí)行數(shù)據(jù)備份和恢復(fù)等指令。客戶端軟件可通過(guò)管理控制中心(Master)進(jìn)行Web頁(yè)面的推送安裝與注冊(cè)。***服務(wù)節(jié)點(diǎn)(SDMServer)無(wú)需安裝客戶端軟件。上訊ADM通過(guò)數(shù)據(jù)備份后獲取到的黃金副本開啟數(shù)據(jù)開發(fā)利用的創(chuàng)新流程,充分發(fā)揮數(shù)字資產(chǎn)價(jià)值。
傳統(tǒng)的備份方案大多采用周期性的“全量備份+增量備份”策略,其增量備份大多不可持續(xù),經(jīng)過(guò)一段時(shí)間就必須執(zhí)行一次全量備份。因而傳統(tǒng)的備份方案經(jīng)常面臨備份窗口過(guò)大的問(wèn)題,而且其增量備份數(shù)據(jù)的恢復(fù)效率相對(duì)低下,因?yàn)槊總€(gè)時(shí)間點(diǎn)的恢復(fù)都依賴于上一次全備副本和上一次全備副本后的所有增量數(shù)據(jù),恢復(fù)操作需要進(jìn)行逐個(gè)迭代恢復(fù)。此外,過(guò)期增量數(shù)據(jù)的清理操作也受限于備份副本之間的依賴關(guān)系,不一定能及時(shí)被***。而長(zhǎng)久增量備份與全量快照合成技術(shù),即***執(zhí)行全量備份,之后只對(duì)新增或改動(dòng)過(guò)的數(shù)據(jù)進(jìn)行增量備份,此增量備份數(shù)據(jù)是持續(xù)的,而且每個(gè)增量備份的數(shù)據(jù)副本將自動(dòng)合成為全量快照副本,便于恢復(fù)。因此,長(zhǎng)久增量備份與全量快照合成技術(shù)能夠大幅度減少備份時(shí)間,節(jié)省備份數(shù)據(jù)所需的存儲(chǔ)空間,且提升了恢復(fù)效率。長(zhǎng)久增量備份與全量快照合成技術(shù)適用于單個(gè)應(yīng)用數(shù)據(jù)量大,執(zhí)行一次完全備份比較費(fèi)時(shí)費(fèi)力的應(yīng)用場(chǎng)景。若用戶備份數(shù)據(jù)量小,也可使用傳統(tǒng)的全備+增備技術(shù)方式,ADM無(wú)掛載備份能夠?qū)崿F(xiàn)此方式。海量數(shù)據(jù)供數(shù)于下游開發(fā)測(cè)試統(tǒng)計(jì)分析場(chǎng)景的數(shù)據(jù)使用需求該如何滿足?數(shù)據(jù)壓縮存儲(chǔ)
上訊ADM產(chǎn)品通過(guò)虛擬數(shù)據(jù)秒級(jí)分發(fā)功能實(shí)現(xiàn)測(cè)試數(shù)據(jù)的同時(shí)在線交付,縮短了數(shù)據(jù)交付的時(shí)間。日志校驗(yàn)技術(shù)
上訊敏捷數(shù)據(jù)管理平臺(tái)ADM產(chǎn)品是一款企業(yè)級(jí)CDM產(chǎn)品,通過(guò)以數(shù)據(jù)為中心,以安全為前提,以使用為導(dǎo)向,以敏捷為目的的產(chǎn)品理念,為企業(yè)提供一套面向上中下游數(shù)據(jù)高效使用與安全管控的數(shù)據(jù)安全治理解決方案,在保證數(shù)據(jù)安全使用的同時(shí),提高數(shù)據(jù)使用效率、降低數(shù)據(jù)存儲(chǔ)成本。ADM產(chǎn)品的應(yīng)用解決了數(shù)據(jù)開發(fā)利用需求下,數(shù)據(jù)使用流轉(zhuǎn)環(huán)節(jié)遇到的安全性和效率問(wèn)題,為企業(yè)在開發(fā)測(cè)試場(chǎng)景中快速供應(yīng)測(cè)試數(shù)據(jù)提供了一種新的解決方案,主要應(yīng)用于開發(fā)測(cè)試部門中對(duì)開發(fā)測(cè)試團(tuán)隊(duì)的功能測(cè)試、回歸測(cè)試等具體的測(cè)試場(chǎng)景提供靈活的測(cè)試數(shù)據(jù)版本,通過(guò)一鍵切換立即調(diào)取適用于當(dāng)前業(yè)務(wù)版本的數(shù)據(jù)版本,明顯縮短了業(yè)務(wù)開發(fā)的測(cè)試周期.日志校驗(yàn)技術(shù)