上訊敏捷數(shù)據(jù)管理平臺(ADM)支持重復(fù)數(shù)據(jù)刪除技術(shù),在典型的重復(fù)數(shù)據(jù)刪除技術(shù)中,根據(jù)不同的數(shù)據(jù)備份場景選擇適合的重刪策略與粒度方案。在確定重刪策略與粒度后,會根據(jù)輸入側(cè)不同粒度(卷級、文件級、塊級)的數(shù)據(jù)采取不同的數(shù)據(jù)切分策略,并依據(jù)任務(wù)級與全局指紋庫提供自適應(yīng)源端的全局重刪算法與策略,當(dāng)前支持源端塊級、文件級重刪和并行重刪技術(shù)。源端重刪是采用基于內(nèi)容的可變長數(shù)據(jù)切分算法,通過對數(shù)據(jù)塊進(jìn)行哈希算法的標(biāo)記,即指紋(Fingerprint),在指紋庫中尋找相同的指紋。如果存在相同指紋,則表示已保存了相同的數(shù)據(jù)塊,ADM則不再保存此數(shù)據(jù)塊,而是引用已存在的數(shù)據(jù)塊,從而節(jié)省更多的備份空間。該算法還可以...
基于CDM(CopyDataManagement,數(shù)據(jù)副本管理)技術(shù),通過對該技術(shù)的運(yùn)用,我們整合了CDM和***相關(guān)工具,實(shí)現(xiàn)了生產(chǎn)到開發(fā)測試環(huán)境的數(shù)據(jù)快速復(fù)制,以及備份數(shù)據(jù)的自動校驗(yàn)。通過CDM解決方案的實(shí)施,我們實(shí)現(xiàn)了一個平臺、一站式解決數(shù)據(jù)獲取、數(shù)據(jù)存儲、數(shù)據(jù)構(gòu)建、數(shù)據(jù)使用、數(shù)據(jù)銷毀,在保證合規(guī)性基礎(chǔ)上,以敏捷的數(shù)據(jù)全生命周期管理,更好地實(shí)現(xiàn)數(shù)據(jù)共享和數(shù)據(jù)利用。上訊敏捷數(shù)據(jù)管理平臺可以實(shí)現(xiàn)以上功能,歡迎登錄官網(wǎng)了解詳情.上訊敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品能實(shí)現(xiàn)敏感數(shù)據(jù)的自動化掃描發(fā)現(xiàn)。模糊化敏捷數(shù)據(jù)管理平臺(Agile Data Management)簡稱ADM,是采用基于CDM(副本數(shù)據(jù)...
ADM平臺具備根據(jù)管理人員、測試需求等內(nèi)容的不同進(jìn)行分組劃分的功能,將處理過的數(shù)據(jù)進(jìn)行分組管理,從下游測試數(shù)據(jù)管理的源頭管控?cái)?shù)據(jù)資源的類別,做到從源頭劃分類別,使下游測試數(shù)據(jù)管理形成上游數(shù)據(jù)源-中游數(shù)據(jù)中轉(zhuǎn)-下游數(shù)據(jù)目標(biāo)的閉環(huán)式數(shù)據(jù)使用流程,規(guī)范化的數(shù)據(jù)流程使數(shù)據(jù)管理者成為數(shù)據(jù)的負(fù)責(zé)人,自動化的資源管理也更有效地為金融行業(yè)用戶提供安全的數(shù)據(jù)管理方案。同時(shí),ADM提供對數(shù)據(jù)流轉(zhuǎn)的樹狀拓?fù)浣Y(jié)構(gòu)圖,可詳細(xì)了解數(shù)據(jù)的來源、所屬存儲池、掛載的測試服務(wù)器,以及數(shù)據(jù)快照的層級關(guān)系,方便對系統(tǒng)全局的數(shù)據(jù)使用結(jié)構(gòu)進(jìn)行預(yù)覽,通過可視化的結(jié)構(gòu)拓?fù)鋱D,幫助用戶了解下游測試網(wǎng)中測試數(shù)據(jù)的歸屬關(guān)系,完善數(shù)據(jù)流轉(zhuǎn)路徑,優(yōu)化...
數(shù)字化時(shí)代,企業(yè)進(jìn)行數(shù)據(jù)保護(hù),不僅希望能夠?qū)崿F(xiàn)本地?cái)?shù)據(jù)保護(hù),也要有災(zāi)備中心進(jìn)行異地?cái)?shù)據(jù)保護(hù)。如此,即便本地?cái)?shù)據(jù)中心遭遇地震、火災(zāi)等重大自然災(zāi)害或人為操作失誤等事故,導(dǎo)致本地備份數(shù)據(jù)或生產(chǎn)數(shù)據(jù)發(fā)生損壞或丟失時(shí),能夠通過異地?cái)?shù)據(jù)災(zāi)備,確保數(shù)據(jù)可恢復(fù)。ADM支持通過遠(yuǎn)程復(fù)制技術(shù),將本地?cái)?shù)據(jù)同步到異地災(zāi)備中心,實(shí)現(xiàn)異地?cái)?shù)據(jù)容災(zāi)。基于備份任務(wù),將生產(chǎn)數(shù)據(jù)備份到本地的存儲池,基于遠(yuǎn)程復(fù)制任務(wù),將本地存儲池中的備份數(shù)據(jù)同步到異地存儲池中,從而為生產(chǎn)數(shù)據(jù)提供雙重保護(hù),當(dāng)本地生產(chǎn)數(shù)據(jù)、或備份數(shù)據(jù)丟失、損壞時(shí),通過預(yù)先設(shè)置的容災(zāi)策略,在容災(zāi)端進(jìn)行應(yīng)急接管。上訊敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品可對數(shù)據(jù)進(jìn)行清洗漂白處理,保...
傳統(tǒng)的備份方案大多采用周期性的“全量備份+增量備份”策略,其增量備份大多不可持續(xù),經(jīng)過一段時(shí)間就必須執(zhí)行一次全量備份。因而傳統(tǒng)的備份方案經(jīng)常面臨備份窗口過大的問題,而且其增量備份數(shù)據(jù)的恢復(fù)效率相對低下,因?yàn)槊總€時(shí)間點(diǎn)的恢復(fù)都依賴于上一次全備副本和上一次全備副本后的所有增量數(shù)據(jù),恢復(fù)操作需要進(jìn)行逐個迭代恢復(fù)。此外,過期增量數(shù)據(jù)的清理操作也受限于備份副本之間的依賴關(guān)系,不一定能及時(shí)被***。而長久增量備份與全量快照合成技術(shù),即***執(zhí)行全量備份,之后只對新增或改動過的數(shù)據(jù)進(jìn)行增量備份,此增量備份數(shù)據(jù)是持續(xù)的,而且每個增量備份的數(shù)據(jù)副本將自動合成為全量快照副本,便于恢復(fù)。因此,長久增量備份與全量快照...
數(shù)據(jù)流程管理是ADM功能模塊之一,主要通過靈活配置數(shù)據(jù)流轉(zhuǎn)環(huán)節(jié)實(shí)現(xiàn)數(shù)據(jù)管理流程的自動化作業(yè)編排,ADM采用基于畫布的方式默認(rèn)作業(yè)流程的起止節(jié)點(diǎn),根據(jù)實(shí)際需求將數(shù)據(jù)的獲取、恢復(fù)、***、傳輸、共享、交付、銷毀等各個環(huán)節(jié)對應(yīng)的任務(wù)組件靈活拖動到作業(yè)畫布,組成一個完整的任務(wù)流程,各任務(wù)之間支持依賴關(guān)系、延時(shí)機(jī)制以及斷點(diǎn)處理機(jī)制,**終實(shí)現(xiàn)數(shù)據(jù)管理流程任務(wù)的串聯(lián)組建和并行執(zhí)行,達(dá)到數(shù)據(jù)管理流程的自動化執(zhí)行,協(xié)助用戶將數(shù)據(jù)交付流程的各個工作環(huán)節(jié)靈活地組合起來,實(shí)現(xiàn)數(shù)據(jù)交付的自動化,從而擺脫人工值守,達(dá)到縮減時(shí)間成本和人力成本的目標(biāo)。上訊信息敏捷數(shù)據(jù)管理平臺ADM包括PDM、BDM、SDM、CDM四大功能...
ADM貫穿數(shù)據(jù)收集、數(shù)據(jù)存儲、數(shù)據(jù)加工、數(shù)據(jù)傳輸、數(shù)據(jù)使用、數(shù)據(jù)提供、數(shù)據(jù)回收的各個環(huán)節(jié),集中管理存儲資源、服務(wù)器資源,實(shí)現(xiàn)閉環(huán)式自動化管理流程,統(tǒng)一授權(quán)和全程監(jiān)控,節(jié)省大量人力資源開銷,減少了數(shù)據(jù)恢復(fù)的重復(fù)性工作,自動化流程任務(wù)編排降低了人為因素導(dǎo)致的數(shù)據(jù)泄露風(fēng)險(xiǎn)。基于數(shù)據(jù)庫虛擬化技術(shù),ADM實(shí)現(xiàn)了對數(shù)據(jù)庫、文件、虛擬機(jī)等副本的分鐘級創(chuàng)建,通過存儲級快照快速保留數(shù)據(jù)副本的狀態(tài),實(shí)現(xiàn)數(shù)據(jù)版本的保留,跟蹤數(shù)據(jù)流向。同時(shí),數(shù)據(jù)副本支持時(shí)效性設(shè)置,當(dāng)數(shù)據(jù)副本超出使用期限,ADM平臺會自動停止使用或回收資源,實(shí)現(xiàn)對數(shù)據(jù)資產(chǎn)的全生命周期統(tǒng)一管理。CDM主要應(yīng)用于金融、運(yùn)營商、能源、交通、衛(wèi)生、事業(yè)單位等...
《中華人民共和國數(shù)據(jù)安全法》中明確指出數(shù)據(jù)處理,包括數(shù)據(jù)的收集、存儲、使用、加工、傳輸、提供、公開等。數(shù)據(jù)安全,是指通過采取必要措施,確保數(shù)據(jù)處于有效保護(hù)和合法利用的狀態(tài),以及具備保障持續(xù)安全狀態(tài)的能力。當(dāng)前,有效的保障數(shù)據(jù)安全的方式仍然是數(shù)據(jù)備份,即企業(yè)針對生產(chǎn)業(yè)務(wù)的數(shù)據(jù)、文件制定備份策略生成備份數(shù)據(jù),一旦業(yè)務(wù)數(shù)據(jù)發(fā)生丟失或損壞,則恢復(fù)備份數(shù)據(jù)提供業(yè)務(wù)訪問,傳統(tǒng)的數(shù)據(jù)備份方案并未提供數(shù)據(jù)的恢復(fù)驗(yàn)證手段,因此企業(yè)在發(fā)生數(shù)據(jù)丟失時(shí),啟用備份數(shù)據(jù)恢復(fù)失敗的案例屢見不鮮,這也給各行業(yè)客戶造成了巨大的經(jīng)濟(jì)損失和不良的社會影響,為滿足法律的合規(guī)性要求,備份數(shù)據(jù)的恢復(fù)驗(yàn)證成為備份恢復(fù)解決方案的必要需求,但...
數(shù)據(jù)備份面臨存儲成本高的問題,ADM采用內(nèi)置高效的壓縮存儲池存放數(shù)據(jù),壓縮比約為3:1,存儲即壓縮,降低了備份數(shù)據(jù)的存儲成本;其次,通過ADM的數(shù)據(jù)庫虛擬化技術(shù),一份基礎(chǔ)數(shù)據(jù)即可快速拉起多份虛擬數(shù)據(jù)庫,由于虛擬數(shù)據(jù)庫90%的數(shù)據(jù)均與原始數(shù)據(jù)相同,因此拉起時(shí)幾乎不占用額外的物理存儲空間,只對新增的寫操作計(jì)入容量占用,因此,隨著數(shù)據(jù)分發(fā)使用的場景和頻率增加,虛擬庫的數(shù)量越來越多,而存儲成本將會呈倍數(shù)級節(jié)約,例如針對同一份數(shù)據(jù)創(chuàng)建N個虛擬庫,傳統(tǒng)方法需要N倍的存儲空間占用,而通過ADM只需要占用近乎0TB的存儲空間,節(jié)約了數(shù)據(jù)存儲環(huán)節(jié)的資源和成本。上訊ADM產(chǎn)品能解決數(shù)據(jù)備份恢復(fù)、備份數(shù)據(jù)恢復(fù)驗(yàn)證、...
通過部署敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品的數(shù)據(jù)副本管理模塊,實(shí)現(xiàn)了測試數(shù)據(jù)版本迭代管理,提升了數(shù)據(jù)使用過程中的應(yīng)用效率。隨著移動互聯(lián)網(wǎng)技術(shù)的不斷革新,移動應(yīng)用業(yè)務(wù)不斷擴(kuò)張,企業(yè)面臨著前臺業(yè)務(wù)頻繁更新升級的現(xiàn)狀,為保證既有業(yè)務(wù)穩(wěn)定,需要對新提出的升級需求開展仿真測試與回歸測試,因此亟需一套能夠?qū)y試環(huán)境的測試數(shù)據(jù)進(jìn)行版本靈活切換的解決方案,便于測試數(shù)據(jù)版本的即時(shí)調(diào)用,迅速適應(yīng)不同業(yè)務(wù)程序提供不同版本的測試數(shù)據(jù)。ADM的虛擬數(shù)據(jù)庫快照功能解決了這一問題,通過對數(shù)據(jù)庫狀態(tài)進(jìn)行定時(shí)或即時(shí)的記錄,管理和維護(hù)當(dāng)前虛擬數(shù)據(jù)庫的數(shù)據(jù),使用人員可以隨時(shí)通過記錄的虛擬數(shù)據(jù)庫快照提供一個版本的測試數(shù)據(jù),經(jīng)過測試后保存當(dāng)前...
上訊信息敏捷數(shù)據(jù)管理平臺的備份數(shù)據(jù)管理模塊,突破了傳統(tǒng)備份理念,基于特有的CDM數(shù)據(jù)庫虛擬化技術(shù),不僅可以實(shí)現(xiàn)對數(shù)據(jù)庫的實(shí)時(shí)性持續(xù)備份以及本機(jī)、異機(jī)的快速恢復(fù),還可以同時(shí)對備份數(shù)據(jù)的有效性進(jìn)行驗(yàn)證。對于已經(jīng)部署了NBU/CommVault等備份系統(tǒng)的用戶,可以對接備份系統(tǒng),實(shí)現(xiàn)存儲空間、恢復(fù)服務(wù)器和恢復(fù)任務(wù)的自動調(diào)度,從而實(shí)現(xiàn)備份數(shù)據(jù)有效性驗(yàn)證的全自動化,并根據(jù)驗(yàn)證結(jié)果生成詳細(xì)的恢復(fù)驗(yàn)證報(bào)告。在恢復(fù)驗(yàn)證任務(wù)結(jié)束后,自動清理恢復(fù)環(huán)境,釋放存儲資源和恢復(fù)服務(wù)器資源,以用于下一個恢復(fù)驗(yàn)證任務(wù)的使用,使整個數(shù)據(jù)備份恢復(fù)驗(yàn)證工作能夠周期性地循環(huán)運(yùn)轉(zhuǎn).上訊ADM產(chǎn)品采用副本數(shù)據(jù)管理CDM面向數(shù)據(jù)全生命周期...
l數(shù)據(jù)壓縮存儲ADM支持同步數(shù)據(jù)壓縮,自動化地將同步數(shù)據(jù)按照3:1的比例壓縮,系統(tǒng)存儲空間顯示已壓縮的容量大小,存儲即壓縮。l自助式數(shù)據(jù)服務(wù)ADM不僅可以靈活地提供任意時(shí)間點(diǎn)的數(shù)據(jù),還可以對虛擬數(shù)據(jù)庫進(jìn)行圖形化、自助式的管理。l虛擬數(shù)據(jù)庫集中管控虛擬數(shù)據(jù)庫集中管控是對虛擬數(shù)據(jù)庫在使用過程中的狀態(tài)進(jìn)行管理,包括如下功能:①虛擬數(shù)據(jù)庫版本管理②虛擬數(shù)據(jù)庫共享管理③虛擬數(shù)據(jù)庫記錄查詢l敏感信息智能掃描ADM內(nèi)置敏感信息匹配庫,對數(shù)據(jù)庫的敏感信息進(jìn)行智能定義掃描,成功發(fā)現(xiàn)后自動匹配成敏感類型,以匹配度和敏感信息類型進(jìn)行靈活排序,避免漏掃。l關(guān)聯(lián)關(guān)系保持一致支持對數(shù)據(jù)庫中表間和表內(nèi)的約束信息和索引信息進(jìn)...
隨著信息化程度的不斷深入,數(shù)據(jù)作為企業(yè)的資產(chǎn)越來越被重視,虛擬化、云化的不斷應(yīng)用,帶來了業(yè)務(wù)系統(tǒng)及數(shù)據(jù)的增長,大數(shù)據(jù)在這種環(huán)境中也有了發(fā)展和應(yīng)用。新技術(shù)的不斷創(chuàng)新與應(yīng)用,促使著數(shù)據(jù)不斷的被拷貝使用,如何能更好的使用這些數(shù)據(jù),如何更好的管理越來越多的拷貝數(shù)據(jù),如何能節(jié)省新需求下的存儲空間,這些都成了當(dāng)下亟待解決的問題。信息化時(shí)代,“數(shù)據(jù)”的應(yīng)用較為頻繁,海量數(shù)據(jù)的組成中,備份數(shù)據(jù)占有很大比例,而這些備份數(shù)據(jù)在沒有發(fā)生故障時(shí)往往是被擱置不用的,被稱為“暗數(shù)據(jù)”。而對業(yè)務(wù)數(shù)據(jù)的分析、統(tǒng)計(jì)、運(yùn)維等操作都會直接作用在業(yè)務(wù)服務(wù)器,如此將會對業(yè)務(wù)性能產(chǎn)生影響,不利于業(yè)務(wù)系統(tǒng)的高效使用。如何做到解放業(yè)務(wù)系統(tǒng),...
敏捷數(shù)據(jù)管理平臺(Agile Data Management)簡稱ADM,是采用基于CDM(副本數(shù)據(jù)管理)的數(shù)據(jù)庫虛擬化技術(shù),為企業(yè)上中下游數(shù)據(jù)的備份恢復(fù)、數(shù)據(jù)驗(yàn)證、敏感數(shù)據(jù)處理、分發(fā)交付提供的面向數(shù)據(jù)全生命周期的安全管理解決方案,在保證數(shù)據(jù)安全使用的同時(shí),提高了數(shù)據(jù)使用效率并降低了數(shù)據(jù)存儲成本。ADM由數(shù)據(jù)備份管理、備份校驗(yàn)管理、數(shù)據(jù)副本管理、敏感數(shù)據(jù)處理管理組成,實(shí)現(xiàn)了數(shù)據(jù)復(fù)制容災(zāi)、數(shù)據(jù)存儲管理和數(shù)據(jù)流程管理,通過自動化流程任務(wù)編排的方式實(shí)現(xiàn)了數(shù)據(jù)使用的成本控制、版本管理與開發(fā)利用,充分發(fā)揮了數(shù)據(jù)資產(chǎn)的潛在價(jià)值。國內(nèi)排名靠前的CDM廠商是哪家?隨機(jī)生成上訊信息敏捷數(shù)據(jù)管理平臺的備份數(shù)據(jù)管理...
上訊信息敏捷數(shù)據(jù)管理平臺的備份數(shù)據(jù)管理模塊,突破了傳統(tǒng)備份理念,基于特有的CDM數(shù)據(jù)庫虛擬化技術(shù),不僅可以實(shí)現(xiàn)對數(shù)據(jù)庫的實(shí)時(shí)性持續(xù)備份以及本機(jī)、異機(jī)的快速恢復(fù),還可以同時(shí)對備份數(shù)據(jù)的有效性進(jìn)行驗(yàn)證。對于已經(jīng)部署了NBU/CommVault等備份系統(tǒng)的用戶,可以對接備份系統(tǒng),實(shí)現(xiàn)存儲空間、恢復(fù)服務(wù)器和恢復(fù)任務(wù)的自動調(diào)度,從而實(shí)現(xiàn)備份數(shù)據(jù)有效性驗(yàn)證的全自動化,并根據(jù)驗(yàn)證結(jié)果生成詳細(xì)的恢復(fù)驗(yàn)證報(bào)告。在恢復(fù)驗(yàn)證任務(wù)結(jié)束后,自動清理恢復(fù)環(huán)境,釋放存儲資源和恢復(fù)服務(wù)器資源,以用于下一個恢復(fù)驗(yàn)證任務(wù)的使用,使整個數(shù)據(jù)備份恢復(fù)驗(yàn)證工作能夠周期性地循環(huán)運(yùn)轉(zhuǎn).數(shù)據(jù)安全領(lǐng)域數(shù)據(jù)安全治理的產(chǎn)品有哪些?醫(yī)學(xué)影響圖片變形...
上訊敏捷數(shù)據(jù)管理平臺ADM對接用戶現(xiàn)有集中式備份系統(tǒng)服務(wù)器,實(shí)現(xiàn)恢復(fù)服務(wù)器、數(shù)據(jù)恢復(fù)策略、數(shù)據(jù)驗(yàn)證策略和存儲資源的集中管理,包括:(1)存儲池自動準(zhǔn)備存儲空間、自動調(diào)度創(chuàng)建恢復(fù)服務(wù)器;(2)按照參數(shù)設(shè)置恢復(fù)策略、自動執(zhí)行恢復(fù)計(jì)劃、自動驗(yàn)證恢復(fù)數(shù)據(jù);(3)恢復(fù)驗(yàn)證任務(wù)結(jié)束后,自動清理恢復(fù)環(huán)境,釋放存儲資源和恢復(fù)服務(wù)器資源,用于下一個恢復(fù)驗(yàn)證任務(wù)的使用,使整個數(shù)據(jù)備份恢復(fù)驗(yàn)證工作能夠高效節(jié)能地循環(huán)利用,達(dá)到集中統(tǒng)一的安全管理。上訊ADM產(chǎn)品的數(shù)據(jù)備份模塊實(shí)現(xiàn)了數(shù)據(jù)庫、文件、虛擬化平臺的備份恢復(fù)。敏捷數(shù)據(jù)恢復(fù)驗(yàn)證信息化時(shí)代,“數(shù)據(jù)”的應(yīng)用較為頻繁,海量數(shù)據(jù)的組成中,備份數(shù)據(jù)占有很大比例,而這些備份數(shù)...
通過敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品的部署實(shí)施,采用數(shù)據(jù)庫虛擬化技術(shù),快速將數(shù)據(jù)交付到開發(fā)、測試網(wǎng),有效減少開發(fā)、測試場景中測試數(shù)據(jù)的準(zhǔn)備時(shí)間,提高了開發(fā)、測試環(huán)境搭建的效率。ADM內(nèi)置獨(dú)有的高效壓縮存儲池,平均壓縮比3:1,存儲即壓縮,降低了基礎(chǔ)數(shù)據(jù)源獲取的存儲成本,只需一份基礎(chǔ)數(shù)據(jù)源,即可快速拉起多份虛擬數(shù)據(jù)庫,節(jié)約了存儲成本10倍以上。ADM通過虛擬數(shù)據(jù)庫快照功能,可以靈活地對虛擬數(shù)據(jù)庫的狀態(tài)進(jìn)行管理和維護(hù)。使用人員可以隨時(shí)保存當(dāng)前的數(shù)據(jù)庫使用狀態(tài),用于開發(fā)、測試的數(shù)據(jù)版本迭代。上訊信息的自主產(chǎn)品敏捷數(shù)據(jù)管理平臺ADM是國內(nèi)副本數(shù)據(jù)管理CDM領(lǐng)域的重要產(chǎn)品。接收日志記錄上訊敏捷數(shù)據(jù)管理平臺AD...
敏捷數(shù)據(jù)管理平臺(ADM)由管理控制中心(Master)、數(shù)據(jù)服務(wù)節(jié)點(diǎn)(CDMServer)、***服務(wù)節(jié)點(diǎn)(SDMServer)、客戶端(Client)組成,服務(wù)節(jié)點(diǎn)可通過主備節(jié)點(diǎn)部署實(shí)現(xiàn)高可用,通過靈活的橫向節(jié)點(diǎn)擴(kuò)展實(shí)現(xiàn)功能擴(kuò)展和容量擴(kuò)充,每個服務(wù)節(jié)點(diǎn)可以安裝在物理服務(wù)器或虛擬服務(wù)器中。一個或多個客戶端連接到服務(wù)節(jié)點(diǎn),組成一個完整的數(shù)據(jù)管理平臺,客戶端負(fù)責(zé)收集數(shù)據(jù)、傳輸數(shù)據(jù),服務(wù)節(jié)點(diǎn)負(fù)責(zé)接收數(shù)據(jù)、存儲數(shù)據(jù)、數(shù)據(jù)脫敏以及管理數(shù)據(jù)。敏捷數(shù)據(jù)管理平臺(ADM)由4個模塊組成:數(shù)據(jù)服務(wù)節(jié)點(diǎn)(CDMServer)包括數(shù)據(jù)備份模塊(PDM)、數(shù)據(jù)校驗(yàn)?zāi)K(BDM)、數(shù)據(jù)交付模塊(TDM)3個模塊;**...
上訊敏捷數(shù)據(jù)管理平臺(ADM)支持增量備份與全量快照合成技術(shù),傳統(tǒng)的備份方案大多采用周期性的“全量備份+增量備份”策略,其增量備份大多不可持續(xù),經(jīng)過一段時(shí)間就必須執(zhí)行一次全量備份。因而傳統(tǒng)的備份方案經(jīng)常面臨備份窗口過大的問題,而且其增量備份數(shù)據(jù)的恢復(fù)效率相對低下,因?yàn)槊總€時(shí)間點(diǎn)的恢復(fù)都依賴于上一次全備副本和上一次全備副本后的所有增量數(shù)據(jù),恢復(fù)操作需要進(jìn)行逐個迭代恢復(fù)。此外,過期增量數(shù)據(jù)的清理操作也受限于備份副本之間的依賴關(guān)系,不一定能及時(shí)被清理。而增量備份與全量快照合成技術(shù),即首先執(zhí)行全量備份,之后只對新增或改動過的數(shù)據(jù)進(jìn)行增量備份,此增量備份數(shù)據(jù)是持續(xù)的,而且每個增量備份的數(shù)據(jù)副本將自動合成...
上訊敏捷數(shù)據(jù)管理平臺(ADM)支持重復(fù)數(shù)據(jù)刪除技術(shù),在典型的重復(fù)數(shù)據(jù)刪除技術(shù)中,根據(jù)不同的數(shù)據(jù)備份場景選擇適合的重刪策略與粒度方案。在確定重刪策略與粒度后,會根據(jù)輸入側(cè)不同粒度(卷級、文件級、塊級)的數(shù)據(jù)采取不同的數(shù)據(jù)切分策略,并依據(jù)任務(wù)級與全局指紋庫提供自適應(yīng)源端的全局重刪算法與策略,當(dāng)前支持源端塊級、文件級重刪和并行重刪技術(shù)。源端重刪是采用基于內(nèi)容的可變長數(shù)據(jù)切分算法,通過對數(shù)據(jù)塊進(jìn)行哈希算法的標(biāo)記,即指紋(Fingerprint),在指紋庫中尋找相同的指紋。如果存在相同指紋,則表示已保存了相同的數(shù)據(jù)塊,ADM則不再保存此數(shù)據(jù)塊,而是引用已存在的數(shù)據(jù)塊,從而節(jié)省更多的備份空間。該算法還可以...
l分鐘級掛載恢復(fù)技術(shù)ADM壓縮保存源端數(shù)據(jù)庫的數(shù)據(jù),并保留時(shí)間線,方便恢復(fù)任意時(shí)間點(diǎn)數(shù)據(jù)。ADM備份的全量快照為原格式,無需格式轉(zhuǎn)換和IO拷貝,可直接掛載到目標(biāo)主機(jī)上快速拉起應(yīng)用恢復(fù),**技術(shù)采用自研的數(shù)據(jù)庫虛擬化技術(shù)通過一份數(shù)據(jù)快照作為基礎(chǔ)數(shù)據(jù)生成黃金副本,快速掛載恢復(fù)多個虛擬副本。掛載恢復(fù)的方式**縮短了數(shù)據(jù)恢復(fù)的時(shí)間,通常業(yè)務(wù)RTO時(shí)間由小時(shí)級甚至天級,縮短到分鐘級;掛載恢復(fù)降低了數(shù)據(jù)恢復(fù)所占用的存儲空間,*對新寫入的數(shù)據(jù)計(jì)入資源占用;由于掛載恢復(fù)速度快增加了數(shù)據(jù)恢復(fù)演練的頻率,提高了備份數(shù)據(jù)有效性驗(yàn)證的工作效率。上訊信息的敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品怎么樣?自定義敏感類型數(shù)據(jù)副本管理是上...
ADM敏捷數(shù)據(jù)管理平臺產(chǎn)品是一款企業(yè)級CDM產(chǎn)品,通過以數(shù)據(jù)為中心,以安全為前提,以使用為導(dǎo)向,以敏捷為目的的產(chǎn)品理念,為企業(yè)提供一套面向上中下游數(shù)據(jù)高效使用與安全管控的數(shù)據(jù)安全治理解決方案。該解決方案在保證數(shù)據(jù)安全使用的前提下,可有力提高數(shù)據(jù)使用效率、降低數(shù)據(jù)存儲成本。ADM產(chǎn)品可幫助企業(yè)解決數(shù)據(jù)開發(fā)利用需求下,數(shù)據(jù)使用流轉(zhuǎn)環(huán)節(jié)遇到的安全性和效率問題,為企業(yè)的數(shù)據(jù)使用和管理建立了一套閉環(huán)式的數(shù)據(jù)安全流轉(zhuǎn)體系,為數(shù)據(jù)安全治理提供技術(shù)支撐.市面上的敏感數(shù)據(jù)管理產(chǎn)品有哪些?科技立行數(shù)據(jù)副本管理是ADM功能模塊之一,可單獨(dú)作為企業(yè)級副本數(shù)據(jù)管理(CDM)產(chǎn)品。為應(yīng)對當(dāng)前復(fù)雜的IT環(huán)境,ADM提出集云...
敏捷數(shù)據(jù)管理平臺ADM測試數(shù)據(jù)管理場景及價(jià)值場景:測試環(huán)境是數(shù)據(jù)使用**為頻繁的一個場景,涉及到數(shù)據(jù)交付、數(shù)據(jù)版本管理、數(shù)據(jù)安全管控等問題,也是數(shù)據(jù)治理**容易忽視的一個場景,做好測試數(shù)據(jù)的管理工作才會使得數(shù)據(jù)治理方案更加完善。價(jià)值:采用ADM實(shí)現(xiàn)測試數(shù)據(jù)管理,可以幫助用戶實(shí)現(xiàn)測試數(shù)據(jù)的分鐘級交付,提升百倍以上的數(shù)據(jù)交付能力;同時(shí)也可以幫助用戶節(jié)約十倍以上的存儲資源;可以幫助用戶實(shí)現(xiàn)測試數(shù)據(jù)的版本管理,杜絕僵尸數(shù)據(jù);同時(shí)也可以實(shí)現(xiàn)測試數(shù)據(jù)的集中統(tǒng)一管理,降低數(shù)據(jù)泄露的風(fēng)險(xiǎn).上訊信息的敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品可應(yīng)用于數(shù)據(jù)安全治理領(lǐng)域。非生產(chǎn)存儲l數(shù)據(jù)庫數(shù)據(jù)保護(hù)ADM采用圖形化向?qū)讲僮鳎瑹o需用...
ADM通過對管理人員、測試需求等內(nèi)容的不同進(jìn)行分組劃分,將已經(jīng)數(shù)據(jù)進(jìn)行分組管理,從測試數(shù)據(jù)管理的源頭管控?cái)?shù)據(jù)資源的類別,做到從源頭劃分類別,使測試數(shù)據(jù)管理形成數(shù)據(jù)源----數(shù)據(jù)中轉(zhuǎn)----數(shù)據(jù)目標(biāo)的閉環(huán)式數(shù)據(jù)使用流程,規(guī)范化的數(shù)據(jù)流程使數(shù)據(jù)管理者成為數(shù)據(jù)的負(fù)責(zé)人,自動化的資源管理也更有效地為用戶提供安全的測試數(shù)據(jù)管理方案。敏捷數(shù)據(jù)管理平臺ADM提供對虛擬數(shù)據(jù)庫的樹狀拓?fù)浣Y(jié)構(gòu)圖,可詳細(xì)了解測試數(shù)據(jù)的來源、所屬存儲池、掛載的測試服務(wù)器,以及虛擬數(shù)據(jù)庫快照的上下級關(guān)系,方便對系統(tǒng)全局的數(shù)據(jù)使用結(jié)構(gòu)進(jìn)行預(yù)覽,幫助用戶了解測試網(wǎng)中測試數(shù)據(jù)的使用關(guān)系,完善測試數(shù)據(jù)的組織結(jié)構(gòu),優(yōu)化測試數(shù)據(jù)的資源分配。上訊A...
上訊敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品是一款企業(yè)級CDM產(chǎn)品,通過以數(shù)據(jù)為中心,以安全為前提,以使用為導(dǎo)向,以敏捷為目的的產(chǎn)品理念,為企業(yè)提供一套面向上中下游數(shù)據(jù)高效使用與安全管控的數(shù)據(jù)安全治理解決方案,在保證數(shù)據(jù)安全使用的同時(shí),提高數(shù)據(jù)使用效率、降低數(shù)據(jù)存儲成本。ADM產(chǎn)品的應(yīng)用解決了數(shù)據(jù)開發(fā)利用需求下,數(shù)據(jù)使用流轉(zhuǎn)環(huán)節(jié)遇到的安全性和效率問題,為企業(yè)在開發(fā)測試場景中快速供應(yīng)測試數(shù)據(jù)提供了一種新的解決方案,主要應(yīng)用于開發(fā)測試部門中對開發(fā)測試團(tuán)隊(duì)的功能測試、回歸測試等具體的測試場景提供靈活的測試數(shù)據(jù)版本,通過一鍵切換立即調(diào)取適用于當(dāng)前業(yè)務(wù)版本的數(shù)據(jù)版本,明顯縮短了業(yè)務(wù)開發(fā)的測試周期.數(shù)據(jù)備份產(chǎn)品構(gòu)建了數(shù)...
在典型的重復(fù)數(shù)據(jù)刪除技術(shù)中,根據(jù)不同的數(shù)據(jù)備份場景選擇適合的重刪策略與粒度方案。在確定重刪策略與粒度后,會根據(jù)輸入側(cè)不同粒度(卷級、文件級、塊級)的數(shù)據(jù)采取不同的數(shù)據(jù)切分策略,并依據(jù)任務(wù)級與全局指紋庫提供自適應(yīng)源端的全局重刪算法與策略,當(dāng)前支持源端塊級、文件級重刪和并行重刪技術(shù)。源端重刪是采用基于內(nèi)容的可變長數(shù)據(jù)切分算法,通過對數(shù)據(jù)塊進(jìn)行哈希算法的***標(biāo)記,即指紋(Fingerprint),在指紋庫中尋找相同的指紋。如果存在相同指紋,則表示已保存了相同的數(shù)據(jù)塊,ADM則不再保存此數(shù)據(jù)塊,而是引用已存在的數(shù)據(jù)塊,從而節(jié)省更多的備份空間。該算法還可以智能識別已修改的數(shù)據(jù)和未修改的數(shù)據(jù),從而避免因...
通過部署敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品的數(shù)據(jù)副本管理模塊,實(shí)現(xiàn)了測試數(shù)據(jù)版本迭代管理,提升了數(shù)據(jù)使用過程中的應(yīng)用效率。隨著移動互聯(lián)網(wǎng)技術(shù)的不斷革新,移動應(yīng)用業(yè)務(wù)不斷擴(kuò)張,企業(yè)面臨著前臺業(yè)務(wù)頻繁更新升級的現(xiàn)狀,為保證既有業(yè)務(wù)穩(wěn)定,需要對新提出的升級需求開展仿真測試與回歸測試,因此亟需一套能夠?qū)y試環(huán)境的測試數(shù)據(jù)進(jìn)行版本靈活切換的解決方案,便于測試數(shù)據(jù)版本的即時(shí)調(diào)用,迅速適應(yīng)不同業(yè)務(wù)程序提供不同版本的測試數(shù)據(jù)。ADM的虛擬數(shù)據(jù)庫快照功能解決了這一問題,通過對數(shù)據(jù)庫狀態(tài)進(jìn)行定時(shí)或即時(shí)的記錄,管理和維護(hù)當(dāng)前虛擬數(shù)據(jù)庫的數(shù)據(jù),使用人員可以隨時(shí)通過記錄的虛擬數(shù)據(jù)庫快照提供一個版本的測試數(shù)據(jù),經(jīng)過測試后保存當(dāng)前...
上訊敏捷數(shù)據(jù)管理平臺(ADM)支持并行重刪技術(shù),通過在多個不同的節(jié)點(diǎn)上構(gòu)建指紋庫,并將指紋并行分布于多個節(jié)點(diǎn),采用內(nèi)存級指紋庫進(jìn)行重刪,所有指紋讀寫全部保存于內(nèi)存中,從而提升指紋查詢和處理效率,并且減少了因磁盤中指紋庫增大所導(dǎo)致的隨機(jī)IO壓力。以此識別并消除數(shù)據(jù)備份過程中數(shù)據(jù)源中重復(fù)的數(shù)據(jù),該技術(shù)適用于不同平臺中的文件、數(shù)據(jù)庫、虛擬機(jī)等不同應(yīng)用類型的數(shù)據(jù),可以大幅度減少需要傳輸?shù)臄?shù)據(jù)量,從而極大地節(jié)省數(shù)據(jù)傳輸帶寬,解決單點(diǎn)性能和存儲空間壓力。上訊信息敏捷數(shù)據(jù)管理平臺ADM是創(chuàng)新型數(shù)據(jù)備份管理解決方案。日志校驗(yàn)技術(shù)通過智能定義敏感數(shù)據(jù)類型,自動發(fā)現(xiàn)和識別敏感數(shù)據(jù),包括數(shù)據(jù)類型、內(nèi)容、約束關(guān)系,靈...
測試數(shù)據(jù)版本迭代管理,提升開發(fā)測試業(yè)務(wù)的變更效率企業(yè)開發(fā)需求更新頻繁,對測試環(huán)境和測試數(shù)據(jù)提出了同步變更的要求,ADM的虛擬數(shù)據(jù)庫快照功能解決了測試數(shù)據(jù)版本迭代的問題,通過對數(shù)據(jù)庫狀態(tài)進(jìn)行定時(shí)或即時(shí)的記錄,保留當(dāng)前虛擬數(shù)據(jù)庫的狀態(tài)作為測試數(shù)據(jù)版本,一旦需要調(diào)用某個版本時(shí),只需切換到不同時(shí)間點(diǎn)的虛擬庫快照即可,靈活實(shí)現(xiàn)測試數(shù)據(jù)版本的任意切換,ADM還支持創(chuàng)建和維護(hù)虛擬庫級聯(lián)快照,滿足回歸測試等具體應(yīng)用場景,通過這一功能明顯提升了開發(fā)測試效率、升級迭代效率。上訊信息的敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品可應(yīng)用于數(shù)據(jù)安全治理領(lǐng)域。數(shù)據(jù)庫字符編碼上訊敏捷數(shù)據(jù)管理平臺ADM對接用戶現(xiàn)有集中式備份系統(tǒng)服務(wù)器,實(shí)現(xiàn)恢...
備份是一個長期的過程,恢復(fù)往往只在事故發(fā)生后進(jìn)行,且備份數(shù)據(jù)的可恢復(fù)性、可用性在很大程度上依賴于備份數(shù)據(jù)的完整性。為了保證備份數(shù)據(jù)的可用性,很多企事業(yè)單位會定期進(jìn)行數(shù)據(jù)庫備份的恢復(fù)演練,也就是從備份數(shù)據(jù)中恢復(fù)出一套完整的數(shù)據(jù)庫。執(zhí)行備份數(shù)據(jù)的恢復(fù)操作,需要備份系統(tǒng)管理人員或者數(shù)據(jù)庫管理人員(DBA)對數(shù)據(jù)的備份恢復(fù)實(shí)現(xiàn)原理有深入的了解,并周期性地對備份數(shù)據(jù)進(jìn)行恢復(fù)操作,以保證備份數(shù)據(jù)的可恢復(fù)性與可用性。這種長期機(jī)械性、重復(fù)性的備份、恢復(fù)及驗(yàn)證工作,無疑會占用DBA大量的時(shí)間和精力。在DBA界還流傳著這么一句話:“故障一定會發(fā)生,只是早晚的問題!”。作為一名DBA,只有時(shí)刻記得進(jìn)行備份和恢復(fù)...