敏捷數(shù)據(jù)管理平臺(tái)是國內(nèi)較早發(fā)布的副本數(shù)據(jù)管理(CDM)產(chǎn)品,純國產(chǎn)化技術(shù)自主研發(fā),**國內(nèi)CDM廠商率先應(yīng)用在大型頭部金融機(jī)構(gòu)和運(yùn)營商企業(yè),在金融、能源、運(yùn)營商、交通、物流等行業(yè)擁有***的實(shí)踐。與眾多銀行用戶建立全方位、多層次的深度合作,結(jié)合不同國產(chǎn)數(shù)據(jù)庫的特性采用自動(dòng)化的數(shù)據(jù)獲取方式,為銀行在國產(chǎn)化替換進(jìn)程中解決配套的信息安全產(chǎn)品問題,在實(shí)現(xiàn)金融服務(wù)質(zhì)效提升的同時(shí),幫助銀行實(shí)現(xiàn)數(shù)字化、智能化發(fā)展,實(shí)現(xiàn)國產(chǎn)信創(chuàng)的快速推進(jìn),促進(jìn)以數(shù)據(jù)為關(guān)鍵要素的數(shù)字經(jīng)濟(jì)發(fā)展.上訊信息敏捷數(shù)據(jù)管理平臺(tái)ADM產(chǎn)品支持全域重刪技術(shù),從而減少需要備份的數(shù)據(jù)量、縮短備份窗口。下游測試數(shù)據(jù)快速交付ADM支持Oracle/...
ADM產(chǎn)品數(shù)據(jù)安全***ADM平臺(tái)支持靜態(tài)數(shù)據(jù)脫敏(涉及數(shù)據(jù)庫、格式化文件、數(shù)據(jù)庫對象、消息隊(duì)列等),內(nèi)置104條***算法、47條敏感信息類型匹配庫,覆蓋個(gè)人身份信息、組織機(jī)構(gòu)信息、資質(zhì)資格證信息、金融數(shù)據(jù)信息、醫(yī)療數(shù)據(jù)信息、車輛數(shù)據(jù)信息等眾多類別的敏感數(shù)據(jù)類型識(shí)別與仿真***。具備廣義的通用型***規(guī)則,包括字符替換、隨機(jī)生成、截短、加權(quán)生成、加密等;支持保留原有數(shù)據(jù)含義的仿真型***規(guī)則,支持中文字典庫與編碼字典庫,保證姓名、身份證號(hào)、證件號(hào)、地址、組織機(jī)構(gòu)代碼等***后數(shù)據(jù)的有效性、可用性。提供基于數(shù)據(jù)庫的庫內(nèi)***和基于ETL的抽取***,提供文件***添加水印功能,提供國產(chǎn)化操作系...
數(shù)據(jù)孤島指的是數(shù)據(jù)被分散、隔離和存儲(chǔ)在不同的系統(tǒng)、應(yīng)用程序或部門中,使得數(shù)據(jù)之間無法有效地交流、共享或整合的情況。這些數(shù)據(jù)島嶼形成了一個(gè)個(gè)孤立的實(shí)體,難以互相連接或進(jìn)行有效的數(shù)據(jù)分析。上訊敏捷數(shù)據(jù)管理平臺(tái)(ADM)通過有效整合企業(yè)內(nèi)各業(yè)務(wù)系統(tǒng)的數(shù)據(jù),實(shí)現(xiàn)數(shù)據(jù)采集、存儲(chǔ)、交付和管理的無縫對接,同時(shí)利用多項(xiàng)自有技術(shù)如數(shù)據(jù)庫虛擬化、數(shù)據(jù)備份恢復(fù)、敏感數(shù)據(jù)脫敏等,打破了企業(yè)內(nèi)數(shù)據(jù)孤島現(xiàn)象,促進(jìn)了數(shù)據(jù)資源的共享和高效利用.ADM支持多線程文件備份,支持海量小文件場景下的聚合策略進(jìn)行文件備份。敏捷數(shù)據(jù)備份恢復(fù)驗(yàn)證數(shù)據(jù)副本管理是ADM功能模塊之一,可單獨(dú)作為企業(yè)級副本數(shù)據(jù)管理(CDM)產(chǎn)品。為應(yīng)對當(dāng)前復(fù)雜的...
ADM平臺(tái)具備根據(jù)管理人員、測試需求等內(nèi)容的不同進(jìn)行分組劃分的功能,將處理過的數(shù)據(jù)進(jìn)行分組管理,從下游測試數(shù)據(jù)管理的源頭管控?cái)?shù)據(jù)資源的類別,做到從源頭劃分類別,使下游測試數(shù)據(jù)管理形成上游數(shù)據(jù)源-中游數(shù)據(jù)中轉(zhuǎn)-下游數(shù)據(jù)目標(biāo)的閉環(huán)式數(shù)據(jù)使用流程,規(guī)范化的數(shù)據(jù)流程使數(shù)據(jù)管理者成為數(shù)據(jù)的負(fù)責(zé)人,自動(dòng)化的資源管理也更有效地為金融行業(yè)用戶提供安全的數(shù)據(jù)管理方案。同時(shí),ADM提供對數(shù)據(jù)流轉(zhuǎn)的樹狀拓?fù)浣Y(jié)構(gòu)圖,可詳細(xì)了解數(shù)據(jù)的來源、所屬存儲(chǔ)池、掛載的測試服務(wù)器,以及數(shù)據(jù)快照的層級關(guān)系,方便對系統(tǒng)全局的數(shù)據(jù)使用結(jié)構(gòu)進(jìn)行預(yù)覽,通過可視化的結(jié)構(gòu)拓?fù)鋱D,幫助用戶了解下游測試網(wǎng)中測試數(shù)據(jù)的歸屬關(guān)系,完善數(shù)據(jù)流轉(zhuǎn)路徑,優(yōu)化...
l數(shù)據(jù)壓縮存儲(chǔ)ADM支持同步數(shù)據(jù)壓縮,自動(dòng)化地將同步數(shù)據(jù)按照3:1的比例壓縮,系統(tǒng)存儲(chǔ)空間顯示已壓縮的容量大小,存儲(chǔ)即壓縮。l自助式數(shù)據(jù)服務(wù)ADM不僅可以靈活地提供任意時(shí)間點(diǎn)的數(shù)據(jù),還可以對虛擬數(shù)據(jù)庫進(jìn)行圖形化、自助式的管理。l虛擬數(shù)據(jù)庫集中管控虛擬數(shù)據(jù)庫集中管控是對虛擬數(shù)據(jù)庫在使用過程中的狀態(tài)進(jìn)行管理,包括如下功能:①虛擬數(shù)據(jù)庫版本管理②虛擬數(shù)據(jù)庫共享管理③虛擬數(shù)據(jù)庫記錄查詢l敏感信息智能掃描ADM內(nèi)置敏感信息匹配庫,對數(shù)據(jù)庫的敏感信息進(jìn)行智能定義掃描,成功發(fā)現(xiàn)后自動(dòng)匹配成敏感類型,以匹配度和敏感信息類型進(jìn)行靈活排序,避免漏掃。l關(guān)聯(lián)關(guān)系保持一致支持對數(shù)據(jù)庫中表間和表內(nèi)的約束信息和索引信息進(jìn)...
l分鐘級掛載恢復(fù)技術(shù)ADM壓縮保存源端數(shù)據(jù)庫的數(shù)據(jù),并保留時(shí)間線,方便恢復(fù)任意時(shí)間點(diǎn)數(shù)據(jù)。ADM備份的全量快照為原格式,無需格式轉(zhuǎn)換和IO拷貝,可直接掛載到目標(biāo)主機(jī)上快速拉起應(yīng)用恢復(fù),**技術(shù)采用自研的數(shù)據(jù)庫虛擬化技術(shù)通過一份數(shù)據(jù)快照作為基礎(chǔ)數(shù)據(jù)生成黃金副本,快速掛載恢復(fù)多個(gè)虛擬副本。掛載恢復(fù)的方式**縮短了數(shù)據(jù)恢復(fù)的時(shí)間,通常業(yè)務(wù)RTO時(shí)間由小時(shí)級甚至天級,縮短到分鐘級;掛載恢復(fù)降低了數(shù)據(jù)恢復(fù)所占用的存儲(chǔ)空間,*對新寫入的數(shù)據(jù)計(jì)入資源占用;由于掛載恢復(fù)速度快增加了數(shù)據(jù)恢復(fù)演練的頻率,提高了備份數(shù)據(jù)有效性驗(yàn)證的工作效率。上訊信息敏捷數(shù)據(jù)管理平臺(tái)ADM產(chǎn)品的數(shù)據(jù)備份模塊通過數(shù)據(jù)重刪可節(jié)省傳輸占用...
上訊敏捷數(shù)據(jù)管理平臺(tái)ADM產(chǎn)品是一款企業(yè)級CDM產(chǎn)品,通過以數(shù)據(jù)為中心,以安全為前提,以使用為導(dǎo)向,以敏捷為目的的產(chǎn)品理念,為企業(yè)提供一套面向上中下游數(shù)據(jù)高效使用與安全管控的數(shù)據(jù)安全治理解決方案,在保證數(shù)據(jù)安全使用的同時(shí),提高數(shù)據(jù)使用效率、降低數(shù)據(jù)存儲(chǔ)成本。ADM產(chǎn)品的應(yīng)用解決了數(shù)據(jù)開發(fā)利用需求下,數(shù)據(jù)使用流轉(zhuǎn)環(huán)節(jié)遇到的安全性和效率問題,為企業(yè)在開發(fā)測試場景中快速供應(yīng)測試數(shù)據(jù)提供了一種新的解決方案,主要應(yīng)用于開發(fā)測試部門中對開發(fā)測試團(tuán)隊(duì)的功能測試、回歸測試等具體的測試場景提供靈活的測試數(shù)據(jù)版本,通過一鍵切換立即調(diào)取適用于當(dāng)前業(yè)務(wù)版本的數(shù)據(jù)版本,明顯縮短了業(yè)務(wù)開發(fā)的測試周期.數(shù)據(jù)管理領(lǐng)域的CDM...
l數(shù)據(jù)庫數(shù)據(jù)保護(hù)ADM采用圖形化向?qū)讲僮?,無需用戶手動(dòng)執(zhí)行備份和恢復(fù)腳本,簡化了備份恢復(fù)的難度。既支持傳統(tǒng)的無掛載備份,也支持***全量備份、后續(xù)長久增量備份與全量快照合成、事務(wù)日志同步相結(jié)合的方式。數(shù)據(jù)庫備份的基本流程如下:通過管理控制中心(Master)的Web管理頁面推送客戶端(Client)軟件到需要保護(hù)的生產(chǎn)服務(wù)器上,自動(dòng)完成客戶端軟件的安裝和注冊,與Server服務(wù)器端保持通訊??蛻舳藢⒆R(shí)別生產(chǎn)服務(wù)器中的數(shù)據(jù)庫數(shù)據(jù),并通過備份API讀取數(shù)據(jù)庫數(shù)據(jù),然后將其傳輸至數(shù)據(jù)服務(wù)節(jié)點(diǎn)完成備份。管理控制中心(Master)負(fù)責(zé)向客戶端軟件和服務(wù)節(jié)點(diǎn)發(fā)送控制信息,管理整個(gè)備份任務(wù)的運(yùn)行。例如:...
備份需要從業(yè)務(wù)系統(tǒng)中獲取數(shù)據(jù),統(tǒng)計(jì)、分析需要從業(yè)務(wù)系統(tǒng)中獲取數(shù)據(jù),研發(fā)、測試需要從業(yè)務(wù)系統(tǒng)中獲取數(shù)據(jù)。這些數(shù)據(jù)從業(yè)務(wù)系統(tǒng)中拷貝出來后,如果得不到有效的管控,將會(huì)給企業(yè)帶來安全隱患,這也是用戶需要考慮解決的又一現(xiàn)實(shí)問題。基于上述問題的考慮,I T負(fù)責(zé)人迫切需要一種既可以解放業(yè)務(wù)系統(tǒng),又可以對測試環(huán)境數(shù)據(jù)的采集、傳輸、存儲(chǔ)、使用及流轉(zhuǎn)等關(guān)鍵環(huán)節(jié)進(jìn)行效率和安全雙重保障的平臺(tái)化產(chǎn)品,由此上訊敏捷數(shù)據(jù)管理平臺(tái)ADM應(yīng)運(yùn)而生。備份數(shù)據(jù)的開發(fā)利用是喚醒大量淪為暗數(shù)據(jù)的備份數(shù)據(jù),讓數(shù)據(jù)備份即可用。預(yù)估任務(wù)時(shí)間ADM平臺(tái)具備根據(jù)管理人員、測試需求等內(nèi)容的不同進(jìn)行分組劃分的功能,將處理過的數(shù)據(jù)進(jìn)行分組管理,從下游...
l虛擬化平臺(tái)數(shù)據(jù)保護(hù)ADM為用戶提供***且有針對性的虛擬化平臺(tái)保護(hù)方案,包括VMware/SmartX/浪潮/華為FC/云宏WinStack/OpenStack/浪潮云InCloudOpenStack虛擬化平臺(tái),幫助用戶解決商業(yè)和國產(chǎn)虛擬化的備份和恢復(fù)業(yè)務(wù)。例如:VMware是通過調(diào)用管理虛擬機(jī)和讀寫數(shù)據(jù)的API備份接口VADP(VstorageAPISforDataProtection)進(jìn)行備份。VMware備份實(shí)現(xiàn)了無代理備份,即無需在虛擬化平臺(tái)或者各個(gè)虛擬機(jī)上安裝客戶端代理,只需通過代理客戶端連接虛擬化平臺(tái)即可,因此幾乎不占用主機(jī)資源,不影響生產(chǎn)性能。支持虛擬機(jī)自動(dòng)發(fā)現(xiàn)功能,當(dāng)虛擬機(jī)發(fā)...
敏捷數(shù)據(jù)管理平臺(tái)ADM能夠?qū)⑸嫌蔚臄?shù)據(jù)收集、存儲(chǔ),中游的數(shù)據(jù)處理、傳輸,下游的數(shù)據(jù)分發(fā)和交付全流程貫通,形成一套自動(dòng)化、智能化的副本數(shù)據(jù)全生命周期管理解決方案,為銀行業(yè)實(shí)現(xiàn)測試業(yè)務(wù)多場景的數(shù)據(jù)覆蓋,實(shí)現(xiàn)業(yè)務(wù)版本的高質(zhì)量交付和快速迭代提供了行之有效的工具。ADM的數(shù)據(jù)庫虛擬化功能與GoldenDB高可用、高可靠的數(shù)據(jù)庫服務(wù)相結(jié)合,為該行提供了敏捷的副本數(shù)據(jù)交付能力與靈活的副本數(shù)據(jù)管理能力,對銀行測試數(shù)據(jù)管理體系的構(gòu)建起到了強(qiáng)有力的助推作用,助力打造數(shù)字化業(yè)務(wù)增長新模式.數(shù)據(jù)備份產(chǎn)品關(guān)注數(shù)據(jù)備份,上訊敏捷數(shù)據(jù)管理平臺(tái)ADM產(chǎn)品能用于數(shù)據(jù)的備份與快速恢復(fù)驗(yàn)證。刪除過期數(shù)據(jù)基于CDM(CopyData...
傳統(tǒng)的備份方案大多采用周期性的“全量備份+增量備份”策略,其增量備份大多不可持續(xù),經(jīng)過一段時(shí)間就必須執(zhí)行一次全量備份。因而傳統(tǒng)的備份方案經(jīng)常面臨備份窗口過大的問題,而且其增量備份數(shù)據(jù)的恢復(fù)效率相對低下,因?yàn)槊總€(gè)時(shí)間點(diǎn)的恢復(fù)都依賴于上一次全備副本和上一次全備副本后的所有增量數(shù)據(jù),恢復(fù)操作需要進(jìn)行逐個(gè)迭代恢復(fù)。此外,過期增量數(shù)據(jù)的清理操作也受限于備份副本之間的依賴關(guān)系,不一定能及時(shí)被***。而長久增量備份與全量快照合成技術(shù),即***執(zhí)行全量備份,之后只對新增或改動(dòng)過的數(shù)據(jù)進(jìn)行增量備份,此增量備份數(shù)據(jù)是持續(xù)的,而且每個(gè)增量備份的數(shù)據(jù)副本將自動(dòng)合成為全量快照副本,便于恢復(fù)。因此,長久增量備份與全量快照...
管理控制中心(Master)是ADM的集中管理和調(diào)度控制中心,是進(jìn)行可視化管理的Web操作平臺(tái)。它負(fù)責(zé)集中管理ADM中的所有模塊組件,系統(tǒng)管理員、安全管理員、操作員通過管理控制中心的Web管理頁面協(xié)調(diào)并執(zhí)行各個(gè)角色對應(yīng)的操作;數(shù)據(jù)服務(wù)節(jié)點(diǎn)(CDMServer)是提供數(shù)據(jù)備份與恢復(fù)、備份數(shù)據(jù)恢復(fù)驗(yàn)證、副本數(shù)據(jù)創(chuàng)建和交付、數(shù)據(jù)復(fù)制容災(zāi)功能的服務(wù)節(jié)點(diǎn)。用于記錄數(shù)據(jù)服務(wù)任務(wù)的配置信息、存儲(chǔ)情況、歷史記錄等,數(shù)據(jù)服務(wù)節(jié)點(diǎn)統(tǒng)一通過MasterIP訪問;***服務(wù)節(jié)點(diǎn)(SDMServer)是提供數(shù)據(jù)脫敏的服務(wù)節(jié)點(diǎn),用于記錄接入平臺(tái)的敏感數(shù)據(jù)源、數(shù)據(jù)脫敏策略、***任務(wù)記錄等信息,***服務(wù)節(jié)點(diǎn)統(tǒng)一通過Mas...
數(shù)據(jù)流程管理是ADM功能模塊之一,主要通過靈活配置數(shù)據(jù)流轉(zhuǎn)環(huán)節(jié)實(shí)現(xiàn)數(shù)據(jù)管理流程的自動(dòng)化作業(yè)編排,ADM采用基于畫布的方式默認(rèn)作業(yè)流程的起止節(jié)點(diǎn),根據(jù)實(shí)際需求將數(shù)據(jù)的獲取、恢復(fù)、***、傳輸、共享、交付、銷毀等各個(gè)環(huán)節(jié)對應(yīng)的任務(wù)組件靈活拖動(dòng)到作業(yè)畫布,組成一個(gè)完整的任務(wù)流程,各任務(wù)之間支持依賴關(guān)系、延時(shí)機(jī)制以及斷點(diǎn)處理機(jī)制,**終實(shí)現(xiàn)數(shù)據(jù)管理流程任務(wù)的串聯(lián)組建和并行執(zhí)行,達(dá)到數(shù)據(jù)管理流程的自動(dòng)化執(zhí)行,協(xié)助用戶將數(shù)據(jù)交付流程的各個(gè)工作環(huán)節(jié)靈活地組合起來,實(shí)現(xiàn)數(shù)據(jù)交付的自動(dòng)化,從而擺脫人工值守,達(dá)到縮減時(shí)間成本和人力成本的目標(biāo)。ADM可實(shí)現(xiàn)備份數(shù)據(jù)任意時(shí)間點(diǎn)掛載恢復(fù)快速對恢復(fù)數(shù)據(jù)進(jìn)行驗(yàn)證。節(jié)點(diǎn)hos...
數(shù)據(jù)流程管理是ADM功能模塊之一,主要通過靈活配置數(shù)據(jù)流轉(zhuǎn)環(huán)節(jié)實(shí)現(xiàn)數(shù)據(jù)管理流程的自動(dòng)化作業(yè)編排,ADM采用基于畫布的方式默認(rèn)作業(yè)流程的起止節(jié)點(diǎn),根據(jù)實(shí)際需求將數(shù)據(jù)的獲取、恢復(fù)、***、傳輸、共享、交付、銷毀等各個(gè)環(huán)節(jié)對應(yīng)的任務(wù)組件靈活拖動(dòng)到作業(yè)畫布,組成一個(gè)完整的任務(wù)流程,各任務(wù)之間支持依賴關(guān)系、延時(shí)機(jī)制以及斷點(diǎn)處理機(jī)制,**終實(shí)現(xiàn)數(shù)據(jù)管理流程任務(wù)的串聯(lián)組建和并行執(zhí)行,達(dá)到數(shù)據(jù)管理流程的自動(dòng)化執(zhí)行,協(xié)助用戶將數(shù)據(jù)交付流程的各個(gè)工作環(huán)節(jié)靈活地組合起來,實(shí)現(xiàn)數(shù)據(jù)交付的自動(dòng)化,從而擺脫人工值守,達(dá)到縮減時(shí)間成本和人力成本的目標(biāo)。副本數(shù)據(jù)管理CDM產(chǎn)品能解決軟件開發(fā)測試部門的供數(shù)需求。變形規(guī)則模板上訊...
上訊敏捷數(shù)據(jù)管理平臺(tái)(ADM)的主要技術(shù)是(1)ADM內(nèi)置獨(dú)有的高效壓縮存儲(chǔ)池,壓縮比高達(dá)3:1,存儲(chǔ)即壓縮,降低了基礎(chǔ)數(shù)據(jù)源獲取的存儲(chǔ)成本與持續(xù)增長的副本數(shù)據(jù)存儲(chǔ)成本。(2)ADM的數(shù)據(jù)庫虛擬化技術(shù),是通過獲取一份基礎(chǔ)數(shù)據(jù)源,快速拉起多份虛擬數(shù)據(jù)庫掛載給目標(biāo)業(yè)務(wù)使用,虛擬數(shù)據(jù)庫拉起時(shí)幾乎不占用物理存儲(chǔ)空間,在實(shí)驗(yàn)室測試環(huán)境下拉起一個(gè)10TB數(shù)據(jù)量的虛擬數(shù)據(jù)庫,只占用1GB左右的存儲(chǔ)空間,明顯節(jié)約了存儲(chǔ)成本和時(shí)間周期,因此針對開發(fā)測試場景,需要對同一份數(shù)據(jù)創(chuàng)建N份副本數(shù)據(jù)時(shí),存儲(chǔ)成本節(jié)約近乎N倍。ADM支持多線程文件備份,支持海量小文件場景下的聚合策略進(jìn)行文件備份。前后數(shù)據(jù)對比備份校驗(yàn)管理是A...
上訊敏捷數(shù)據(jù)管理平臺(tái)(ADM)數(shù)據(jù)復(fù)制容災(zāi)模塊主要包括數(shù)據(jù)遠(yuǎn)程復(fù)制、數(shù)據(jù)異地容災(zāi)兩大功能點(diǎn),是基于ADM系統(tǒng)底層的數(shù)據(jù)塊增量復(fù)制功能,全量復(fù)制傳輸,后續(xù)增量復(fù)制與全量快照合成傳輸,實(shí)現(xiàn)本地和異地均可以同時(shí)提供虛擬庫對外訪問。主要解決數(shù)據(jù)全生命周期管理中數(shù)據(jù)傳輸流轉(zhuǎn)的安全問題,基于數(shù)據(jù)備份任務(wù)和虛擬副本任務(wù),將源數(shù)據(jù)和副本數(shù)據(jù)存儲(chǔ)到本地ADM的存儲(chǔ)池中,在本地ADM和遠(yuǎn)端ADM之間創(chuàng)建遠(yuǎn)程復(fù)制鏈路,根據(jù)遠(yuǎn)程復(fù)制策略,將本地存儲(chǔ)池中的數(shù)據(jù)同步到遠(yuǎn)端ADM存儲(chǔ)池中,從而為副本數(shù)據(jù)提供從上游到下游的安全傳輸路徑。上訊敏捷數(shù)據(jù)管理平臺(tái)ADM產(chǎn)品能對接NBU自動(dòng)恢復(fù)。面向數(shù)據(jù)使用的應(yīng)用場景上訊敏捷數(shù)據(jù)管理...
在典型的重復(fù)數(shù)據(jù)刪除技術(shù)中,根據(jù)不同的數(shù)據(jù)備份場景選擇適合的重刪策略與粒度方案。在確定重刪策略與粒度后,會(huì)根據(jù)輸入側(cè)不同粒度(卷級、文件級、塊級)的數(shù)據(jù)采取不同的數(shù)據(jù)切分策略,并依據(jù)任務(wù)級與全局指紋庫提供自適應(yīng)源端的全局重刪算法與策略,當(dāng)前支持源端塊級、文件級重刪和并行重刪技術(shù)。源端重刪是采用基于內(nèi)容的可變長數(shù)據(jù)切分算法,通過對數(shù)據(jù)塊進(jìn)行哈希算法的***標(biāo)記,即指紋(Fingerprint),在指紋庫中尋找相同的指紋。如果存在相同指紋,則表示已保存了相同的數(shù)據(jù)塊,ADM則不再保存此數(shù)據(jù)塊,而是引用已存在的數(shù)據(jù)塊,從而節(jié)省更多的備份空間。該算法還可以智能識(shí)別已修改的數(shù)據(jù)和未修改的數(shù)據(jù),從而避免因...
信息化時(shí)代,“數(shù)據(jù)”的應(yīng)用較為頻繁,海量數(shù)據(jù)的組成中,備份數(shù)據(jù)占有很大比例,而這些備份數(shù)據(jù)在沒有發(fā)生故障時(shí)往往是被擱置不用的,被稱為“暗數(shù)據(jù)”。而對業(yè)務(wù)數(shù)據(jù)的分析、統(tǒng)計(jì)、運(yùn)維等操作都會(huì)直接作用在業(yè)務(wù)服務(wù)器,如此將會(huì)對業(yè)務(wù)性能產(chǎn)生影響,不利于業(yè)務(wù)系統(tǒng)的高效使用。如何做到解放業(yè)務(wù)系統(tǒng),使其專注于業(yè)務(wù)處理上,也是IT管理者需要考慮的另一個(gè)現(xiàn)實(shí)問題。備份需要從業(yè)務(wù)系統(tǒng)中獲取數(shù)據(jù),統(tǒng)計(jì)、分析需要從業(yè)務(wù)系統(tǒng)中獲取數(shù)據(jù),研發(fā)、測試需要從業(yè)務(wù)系統(tǒng)中獲取數(shù)據(jù)。這些數(shù)據(jù)從業(yè)務(wù)系統(tǒng)中拷貝出來后,如果得不到有效的管控,將會(huì)給企業(yè)帶來安全隱患,這也是用戶需要考慮解決的又一現(xiàn)實(shí)問題。ADM支持多線程文件備份,支持海量小文...
數(shù)據(jù)備份管理是ADM功能模塊之一,主要用于實(shí)現(xiàn)云環(huán)境、物理環(huán)境、虛擬化平臺(tái)下的***數(shù)據(jù)保護(hù)。包括支持各種主流平臺(tái)下的系統(tǒng)、數(shù)據(jù)庫及文件數(shù)據(jù)的保護(hù),支持主流的虛擬化平臺(tái)、國產(chǎn)化云服務(wù)器以及容器的保護(hù),并可對物理服務(wù)器及虛擬化平臺(tái)下的備份數(shù)據(jù)進(jìn)行即時(shí)掛載恢復(fù),提供業(yè)務(wù)應(yīng)急的能力和數(shù)據(jù)快速恢復(fù)能力;針對數(shù)據(jù)備份的存儲(chǔ)資源類型,ADM***支持DAS(包括SSD/HDD)、SAN(包括IP-SAN/FC-SAN)、對象存儲(chǔ)等存儲(chǔ)資源。支持接入第三方云存儲(chǔ)、對象存儲(chǔ)等作為大容量數(shù)據(jù)存儲(chǔ)池,具備較強(qiáng)的擴(kuò)展能力。數(shù)據(jù)備份產(chǎn)品構(gòu)建了數(shù)據(jù)保護(hù)的基礎(chǔ)防線。建表近年來,證券業(yè)務(wù)快速發(fā)展,信息系統(tǒng)變更日益頻繁,敏捷...
管理控制中心(Master)是ADM的集中管理和調(diào)度控制中心,是進(jìn)行可視化管理的Web操作平臺(tái)。它負(fù)責(zé)集中管理ADM中的所有模塊組件,系統(tǒng)管理員、安全管理員、操作員通過管理控制中心的Web管理頁面協(xié)調(diào)并執(zhí)行各個(gè)角色對應(yīng)的操作;數(shù)據(jù)服務(wù)節(jié)點(diǎn)(CDMServer)是提供數(shù)據(jù)備份與恢復(fù)、備份數(shù)據(jù)恢復(fù)驗(yàn)證、副本數(shù)據(jù)創(chuàng)建和交付、數(shù)據(jù)復(fù)制容災(zāi)功能的服務(wù)節(jié)點(diǎn)。用于記錄數(shù)據(jù)服務(wù)任務(wù)的配置信息、存儲(chǔ)情況、歷史記錄等,數(shù)據(jù)服務(wù)節(jié)點(diǎn)統(tǒng)一通過MasterIP訪問;***服務(wù)節(jié)點(diǎn)(SDMServer)是提供數(shù)據(jù)脫敏的服務(wù)節(jié)點(diǎn),用于記錄接入平臺(tái)的敏感數(shù)據(jù)源、數(shù)據(jù)脫敏策略、***任務(wù)記錄等信息,***服務(wù)節(jié)點(diǎn)統(tǒng)一通過Mas...
l應(yīng)用數(shù)據(jù)一致性保障ADM主要應(yīng)用原生備份接口獲取具有應(yīng)用一致性保障的數(shù)據(jù),如針對Oracle,利用OracleRMAN和歸檔日志來保障備份數(shù)據(jù)庫數(shù)據(jù)的一致性;針對VMware虛擬化,利用VMwareSnapshot技術(shù)來保障備份虛擬機(jī)數(shù)據(jù)的一致性。l事務(wù)日志同步技術(shù)支持?jǐn)?shù)據(jù)庫的事務(wù)日志備份,事務(wù)日志是數(shù)據(jù)庫中已發(fā)生的所有修改和執(zhí)行每次修改的事務(wù)的一連串記錄,事務(wù)日志備份可將數(shù)據(jù)恢復(fù)到精確的故障點(diǎn)。例如:Oracle支持歸檔日志備份和刪除,MySQL數(shù)據(jù)庫支持redo日志備份和刪除等。l文件系統(tǒng)數(shù)據(jù)保護(hù)ADM支持備份非結(jié)構(gòu)化的文件系統(tǒng)。支持全量備份和長久增量備份與全量快照合成,備份策略采用定時(shí)...
功能節(jié)點(diǎn)統(tǒng)一管理,支持彈性擴(kuò)展ADM采用多節(jié)點(diǎn)高可用部署架構(gòu),保障數(shù)據(jù)服務(wù)高可用,并消除單節(jié)點(diǎn)故障導(dǎo)致的業(yè)務(wù)不可用問題,確保數(shù)據(jù)服務(wù)連續(xù)性。采用Scale-out架構(gòu),根據(jù)業(yè)務(wù)發(fā)展規(guī)模,按需擴(kuò)展集群節(jié)點(diǎn),無需停止服務(wù),靈活滿足業(yè)務(wù)需求。同時(shí),ADM支持存儲(chǔ)池容量的彈性擴(kuò)充,滿足不斷增長的數(shù)據(jù)存儲(chǔ)需求。(2)數(shù)據(jù)存儲(chǔ)成本倍數(shù)級節(jié)約,提升數(shù)據(jù)存儲(chǔ)環(huán)節(jié)的效能首先,數(shù)據(jù)備份面臨存儲(chǔ)成本高的問題,ADM采用內(nèi)置高效的壓縮存儲(chǔ)池存放數(shù)據(jù),壓縮比約為3:1,存儲(chǔ)即壓縮,***降低了備份數(shù)據(jù)的存儲(chǔ)成本;其次,通過ADM的數(shù)據(jù)庫虛擬化技術(shù),一份基礎(chǔ)數(shù)據(jù)即可快速拉起多份虛擬數(shù)據(jù)庫,由于虛擬數(shù)據(jù)庫90%的數(shù)據(jù)均與原...
當(dāng)前,有效的保障數(shù)據(jù)安全的方式仍然是數(shù)據(jù)備份,即企業(yè)針對生產(chǎn)業(yè)務(wù)的數(shù)據(jù)、文件制定備份策略生成備份數(shù)據(jù),一旦業(yè)務(wù)數(shù)據(jù)發(fā)生丟失或損壞,則恢復(fù)備份數(shù)據(jù)提供業(yè)務(wù)訪問,傳統(tǒng)的數(shù)據(jù)備份方案并未提供數(shù)據(jù)的恢復(fù)驗(yàn)證手段,因此企業(yè)在發(fā)生數(shù)據(jù)丟失時(shí),啟用備份數(shù)據(jù)恢復(fù)失敗的案例屢見不鮮,這也給各行業(yè)客戶造成了巨大的經(jīng)濟(jì)損失和不良的社會(huì)影響,為滿足法律的合規(guī)性要求,備份數(shù)據(jù)的恢復(fù)驗(yàn)證成為備份恢復(fù)解決方案的必要需求,但由于備份數(shù)據(jù)量巨大、涉及業(yè)務(wù)系統(tǒng)繁多、專業(yè)人員數(shù)量有限,定期的備份數(shù)據(jù)恢復(fù)驗(yàn)證仍然是一道難題,上訊敏捷數(shù)據(jù)備份恢復(fù)驗(yàn)證解決方案為備份數(shù)據(jù)的恢復(fù)驗(yàn)證提供了創(chuàng)新的技術(shù)手段,包括備份數(shù)據(jù)的分鐘級快速恢復(fù)、秒級可...
上訊敏捷數(shù)據(jù)管理平臺(tái)(Agile Data Management)簡稱ADM,是采用基于CDM架構(gòu)的數(shù)據(jù)庫虛擬化等**技術(shù),為企業(yè)上中下游數(shù)據(jù)的備份恢復(fù)、數(shù)據(jù)驗(yàn)證、安全***、分發(fā)交付提供的面向數(shù)據(jù)全生命周期的安全管理解決方案。該產(chǎn)品通過自動(dòng)化流程任務(wù)編排的方式實(shí)現(xiàn)了數(shù)據(jù)使用的成本控制、版本管理與開發(fā)利用,充分發(fā)揮了備份數(shù)據(jù)的潛在價(jià)值。實(shí)現(xiàn)生產(chǎn)數(shù)據(jù)備份恢復(fù)與異地容災(zāi)、備份數(shù)據(jù)自動(dòng)化恢復(fù)與有效性驗(yàn)證、測試數(shù)據(jù)多副本快速交付、數(shù)據(jù)安全***。 通過網(wǎng)絡(luò)遠(yuǎn)程掛載的方式,ADM將TB量級數(shù)據(jù)拉起時(shí)間控制在分鐘級,數(shù)據(jù)恢復(fù)的響應(yīng)速度極快。自動(dòng)生成表名備份校驗(yàn)管理是ADM功能模塊之一,...
備份是一個(gè)長期的過程,恢復(fù)往往只在事故發(fā)生后進(jìn)行,且備份數(shù)據(jù)的可恢復(fù)性、可用性在很大程度上依賴于備份數(shù)據(jù)的完整性。為了保證備份數(shù)據(jù)的可用性,很多企事業(yè)單位會(huì)定期進(jìn)行數(shù)據(jù)庫備份的恢復(fù)演練,也就是從備份數(shù)據(jù)中恢復(fù)出一套完整的數(shù)據(jù)庫。執(zhí)行備份數(shù)據(jù)的恢復(fù)操作,需要備份系統(tǒng)管理人員或者數(shù)據(jù)庫管理人員(DBA)對數(shù)據(jù)的備份恢復(fù)實(shí)現(xiàn)原理有深入的了解,并周期性地對備份數(shù)據(jù)進(jìn)行恢復(fù)操作,以保證備份數(shù)據(jù)的可恢復(fù)性與可用性。這種長期機(jī)械性、重復(fù)性的備份、恢復(fù)及驗(yàn)證工作,無疑會(huì)占用DBA大量的時(shí)間和精力。在DBA界還流傳著這么一句話:“故障一定會(huì)發(fā)生,只是早晚的問題!”。作為一名DBA,只有時(shí)刻記得進(jìn)行備份和恢復(fù)...
在國家大力發(fā)展信創(chuàng)的背景下,實(shí)現(xiàn)國產(chǎn)化軟硬件部署已成為企業(yè)的**訴求,其中逐步建立覆蓋國產(chǎn)化數(shù)據(jù)庫、操作系統(tǒng)、虛擬化平臺(tái)的國產(chǎn)化數(shù)據(jù)保護(hù)體系,實(shí)現(xiàn)備份數(shù)據(jù)自動(dòng)化恢復(fù)驗(yàn)證成為當(dāng)前數(shù)據(jù)保護(hù)系統(tǒng)的迫切需求。同時(shí),以金融和運(yùn)營商行業(yè)為例,其開發(fā)測試部門需要頻發(fā)測試驗(yàn)證,對數(shù)據(jù)使用頻率較高,因此形成了大量不同版本的測試數(shù)據(jù),這部分?jǐn)?shù)據(jù)體量龐大,動(dòng)輒幾百GB甚至幾十TB,管理難度較大。國家日趨重視對數(shù)據(jù)隱私的安全管控,數(shù)據(jù)脫敏成為企業(yè)數(shù)據(jù)安全治理的重要方向。ADM在處理數(shù)據(jù)上中下游流轉(zhuǎn)的過程是集中統(tǒng)一的,通過全閉環(huán)式的傳輸保證了數(shù)據(jù)的安全。如何過濾不需要變形的數(shù)據(jù)傳統(tǒng)的備份方案大多采用周期性的“全量備份+...
組織內(nèi)部應(yīng)建立一套完善的數(shù)據(jù)備份恢復(fù)體系,部署相應(yīng)的數(shù)據(jù)備份恢復(fù)平臺(tái),實(shí)現(xiàn)對生產(chǎn)數(shù)據(jù)的定期備份和恢復(fù)驗(yàn)證。該平臺(tái)應(yīng)包括對備份數(shù)據(jù)進(jìn)行定期的恢復(fù)驗(yàn)證,周期間隔跨越日、月、季度、半年、年等,恢復(fù)驗(yàn)證策略設(shè)置完畢可自動(dòng)執(zhí)行,確保數(shù)據(jù)的可恢復(fù)性和可用性;該平臺(tái)應(yīng)能對長期存儲(chǔ)的備份數(shù)據(jù)進(jìn)行時(shí)效性管理,針對數(shù)據(jù)的分享、存儲(chǔ)、使用和刪除設(shè)定有效期,過期存儲(chǔ)數(shù)據(jù)可進(jìn)行刪除或再次授權(quán)使用;該平臺(tái)應(yīng)能對備份數(shù)據(jù)進(jìn)行壓縮或加密存儲(chǔ),保證存儲(chǔ)空間的有效利用.敏捷數(shù)據(jù)管理平臺(tái)ADM為企業(yè)上、中、下游數(shù)據(jù)的高效使用提供了一套綜合數(shù)據(jù)安全治理解決方案。文件到庫ADM支持Oracle/MySQL/DB2/SQLServer/...
在數(shù)據(jù)收集和使用上,通過獲取一份具有應(yīng)用一致性保證的“黃金副本”,分鐘級虛擬化為多個(gè)副本直接掛載使用,數(shù)據(jù)使用效率明顯得到提升;在數(shù)據(jù)存儲(chǔ)和傳輸上,這些虛擬數(shù)據(jù)副本相對原始存儲(chǔ)幾乎不占用存儲(chǔ)空間(約為0),且ADM產(chǎn)品將全部數(shù)據(jù)集中存放在統(tǒng)一的存儲(chǔ)池中,既保證了數(shù)據(jù)傳輸流轉(zhuǎn)的閉環(huán)管控,又降低了數(shù)據(jù)的存儲(chǔ)成本;在數(shù)據(jù)加工上,數(shù)據(jù)脫離生產(chǎn)環(huán)境之前增設(shè)了敏感數(shù)據(jù)處理環(huán)節(jié),保障數(shù)據(jù)公開后的隱私安全,防止核心數(shù)據(jù)泄露;在數(shù)據(jù)的提供和公開上,虛擬數(shù)據(jù)副本可用于準(zhǔn)生產(chǎn)、測試環(huán)境等場景的數(shù)據(jù)交付,每一份虛擬數(shù)據(jù)都是互不影響的,并且可讀可寫,數(shù)據(jù)在經(jīng)過變更后可標(biāo)記快照,多個(gè)快照之間可以任意切換實(shí)現(xiàn)數(shù)據(jù)版本的管理...
管理控制中心(Master)是ADM的集中管理和調(diào)度控制中心,是進(jìn)行可視化管理的Web操作平臺(tái)。它負(fù)責(zé)集中管理ADM中的所有模塊組件,系統(tǒng)管理員、安全管理員、操作員通過管理控制中心的Web管理頁面協(xié)調(diào)并執(zhí)行各個(gè)角色對應(yīng)的操作;數(shù)據(jù)服務(wù)節(jié)點(diǎn)(CDMServer)是提供數(shù)據(jù)備份與恢復(fù)、備份數(shù)據(jù)恢復(fù)驗(yàn)證、副本數(shù)據(jù)創(chuàng)建和交付、數(shù)據(jù)復(fù)制容災(zāi)功能的服務(wù)節(jié)點(diǎn)。用于記錄數(shù)據(jù)服務(wù)任務(wù)的配置信息、存儲(chǔ)情況、歷史記錄等,數(shù)據(jù)服務(wù)節(jié)點(diǎn)統(tǒng)一通過MasterIP訪問;***服務(wù)節(jié)點(diǎn)(SDMServer)是提供數(shù)據(jù)脫敏的服務(wù)節(jié)點(diǎn),用于記錄接入平臺(tái)的敏感數(shù)據(jù)源、數(shù)據(jù)脫敏策略、***任務(wù)記錄等信息,***服務(wù)節(jié)點(diǎn)統(tǒng)一通過Mas...