上訊信息 爲CDM敏捷數據而生

統計顯示，平均每個企業要爲應用開(kāi)發(fā)、QA、用戶驗收、産品支持、報告和備份等，從生産數據源創建8-10份數據副本。因此，以一個5TB的生産數據庫爲例，往往要爲下遊創建出40-50TB的數據副本。一家500強企業甚至擁有超過(guò)上千個生産數據庫，數據副本達到PB級規模。

大量的數據副本存在不可避免地造成(chéng)了一定程度的資源浪費以及維護開(kāi)銷的增長(cháng)，有數據表明，企業80%的存儲能(néng)力都(dōu)被(bèi)次級數據所使用。

援引自IDC的數據也顯示，目前每年在Copy Data上的開(kāi)銷達到460億美元，企業内的數據副本消耗了60%的存儲空間，并且65%的存儲軟件和85%存儲采購由此産生。

資料來源：IDC

不僅如此，在傳統的生産協作流程中，當開(kāi)發(fā)和測試人員想要獲取必須的數據副本時(shí)，往往需要從提交申請，到完全準備好(hǎo)環境，耗時(shí)幾天甚至以月爲單位（數據交付時(shí)間視數據規模，環境準備情況等而定）。

這(zhè)樣的數據管理實踐并非最佳，不僅大量浪費了存儲資源，而且還(hái)帶來了數據合規和敏捷性等方面(miàn)的問題，影響了用戶應用程序的快速叠代，這(zhè)對(duì)于今天追求敏捷轉型和DevOps轉型的企業而言難以接受。

爲了幫助企業統一管理海量的非關鍵性數據，尤其是冗餘的數據副本，業界采用了CDM技術。什麼(me)是CDM？它的主要應用場景又是什麼(me)？Gartner對(duì)此提出：它從生産環境通過(guò)快照技術獲取有應用一緻性保證的數據，在非生産存儲上生成(chéng)“黃金副本”（Golden Image），這(zhè)個“黃金副本”數據格式是原始的磁盤格式，可再虛拟化成(chéng)多個副本直接挂載給服務器，分别用于備份恢複、容災或開(kāi)發(fā)測試。

Gartner《Hype Cycle for Storage and Data Protection Technologies, 2020》報告指出，CDM技術已經(jīng)度過(guò)了了早期的技術炒作期，目前處于“泡沫化的低谷期”（trough of disillusionment），這(zhè)從側面(miàn)說(shuō)明一些客戶開(kāi)始在非關鍵性業務場景集中部署這(zhè)項技術，而且Gartner也預測CDM技術將(jiāng)在未來5-10年内進(jìn)入“實質生産的高峰期”（plateau of productivity）。

聚焦到CDM技術實現的業務價值，主要體現在以下幾個方面(miàn)：

第一，降低存儲成(chéng)本。利用數據虛拟化技術，單個數據副本即可滿足開(kāi)發(fā)、測試、備份、恢複、數據脫敏、統計分析等多種(zhǒng)工作負載需求，同時(shí)利用高效的數據壓縮技術，進(jìn)一步節省了存儲空間，減少企業不必要的存儲開(kāi)支（以下圖上訊信息ADM産品數據拷貝方式爲例）。

ADM數據拷貝方式，資料來源：上訊信息

第二，縮短數據交付周期。數據準備從原來的按天或者月爲單位，縮短到分鍾級，數據分發(fā)達到秒級。基于CDM技術的數據副本的交付與管理，大大節省了數據交付的時(shí)間，爲企業構建了更加敏捷的數據管理基礎架構，加速了企業的DevOps建設，縮短了業務的開(kāi)發(fā)測試周期，實現了産品的快速叠代。

第三，降低人力時(shí)間投入。傳統方式下，數據的導入和導出無法自動完成(chéng)，面(miàn)對(duì)開(kāi)發(fā)和測試人員的需求，需要通過(guò)人爲的傳遞才能(néng)完成(chéng)數據從生産環境到測試環境的遷移，而且這(zhè)個過(guò)程中還(hái)可能(néng)需要持續的獲取增量數據資源。CDM技術實現了全流程的自動化配置和編排，從審批到數據的導入和導出，這(zhè)個過(guò)程隻需要在統一的管理界面(miàn)上鼠标點擊操作，幾步即可自動完成(chéng)，極大減輕了存儲管理員和DBA的工作負荷，降低人力時(shí)間投入。

第四，提升數據集中管控能(néng)力。過(guò)去，數據移交到使用部門之後(hòu)，管控權利完全在使用部門，隻能(néng)用流程來控制數據的用後(hòu)銷毀，存在較高的安全管控風險。CDM融合了數據動态和靜态脫敏，權限管控，合規審計等多種(zhǒng)數據保護策略，以集中的數據管控，防範敏感數據洩露，杜絕不當或者誤操作，以及保留事(shì)後(hòu)的可追溯。交付使用的數據，可以通過(guò)CDM管控平台實現數據的統一集中管控，杜絕測試數據出現數據孤島，在數據使用完之後(hòu)，可以實現數據的快速回收以釋放占用資源，杜絕暗數據的出現。

在國(guó)内，備份和CDM容易被(bèi)混淆，有不少備份廠商在其備份産品上通過(guò)增加一些CDM功能(néng)，作爲備份的補充，比如用作快速拉起(qǐ)恢複或者備份校驗，也許從用戶肉眼可見的角度看，功能(néng)上都(dōu)歸整到了統一的界面(miàn)上，但實際上二者的後(hòu)台邏輯相差甚遠。

備份從根本上是作爲數據的保底存在，一旦發(fā)生物理或邏輯故障，爲用戶提供了災難恢複的手段。而CDM側重于對(duì)數據的生命周期管理，是牽涉到用戶數據獲取，數據存儲，數據使用的全流程的生産力工具。

傳統備份技術是將(jiāng)數據恢複後(hòu)交付使用，恢複的過(guò)程很長(cháng)，而CDM保存的是原始格式數據，可以直接交付使用。

從功能(néng)上看，備份更多是作爲CDM其中的一項數據獲取手段。CDM副本數據管理基于數據虛拟化等核心技術，自動化實現了從數據獲取到數據使用再到數據歸檔，數據銷毀的全生命周期管理。其中，在數據獲取環節既可以通過(guò)用戶既有備份系統内獲取數據，也可以通過(guò)從生産環境實時(shí)獲取數據，又或者用戶以腳本的方式自助上傳數據等多種(zhǒng)方式。相比備份，CDM更加關心的是數據的交付使用與管理。

過(guò)去的十多年時(shí)間，CDM的主要玩家分布在北美。在國(guó)内，從上訊信息2016年發(fā)布了國(guó)内第一款真正意義上的CDM産品開(kāi)始，近兩(liǎng)年CDM技術在金融和運營商這(zhè)兩(liǎng)個行業的蓬勃發(fā)展，推動了開(kāi)發(fā)測試場景的數據架構轉型，并且大有替代傳統備份之勢。

1、Actifio

Actifio成(chéng)立于2009年。2020年，谷歌宣布收購Actifio，收購完成(chéng)後(hòu)，Actifio會(huì)并入Google Cloud。

Actifio的多雲複制數據管理（Copy Data Management）軟件平台虛拟化拷貝數據，允許以原生格式對(duì)數據的虛拟副本進(jìn)行完整的生命周期管理。通過(guò)一套豐富的API，Actifio的軟件可以無縫地集成(chéng)到任何IT服務管理工具、DevOps工具鏈或定制的腳本和應用程序中。

Actifio數據虛拟化IT架構及實現原理

2、Cohesity

Cohesity成(chéng)立于2013年，公司CEO兼聯合創始人Mohit Aron，之前還(hái)聯合創立過(guò)Nutanix，目前該公司最新的市場估值達到37億美元。

對(duì)于Cohesity公司來說(shuō)，在線備份隻是其完整數據管理平台的一部分，該平台專注于解決大規模數據碎片所造成(chéng)的問題。它側重于幫助企業保護和管理位于許多不同位置的二級數據。

3、Rubrik

Rubrik也是由前Nutanix的人員發(fā)起(qǐ)創立，提供跨越本地、雲端和混合雲環境中的企業數據管理和備份服務。

全球有2500多家企業和政府使用Rubrik公司的Cloud Data Management解決方案來管理和協調跨數據中心和雲的數據。其提供一個單一的數據平台，可以跨數據中心和雲安全地提供備份，恢複，分析和合規性。承諾快速恢複，提供接近0的RTO。另外還(hái)提供SLA自動化和API優先的架構。

4、Delphix

Delphix成(chéng)立于2008年。Delphix提供了一個API優先的數據平台，該平台跨越多雲并支持從雲原生主機到舊式大型機的所有應用程序。Delphix可自動執行一系列關鍵的複雜數據操作，包括遵守GDPR和CCPA等隐私法規。

Delphix聲稱借助其平台，可將(jiāng)數據占用空間減少10倍，將(jiāng)資源調配速度提高100倍。借助Delphix虛拟化，用戶可在幾分鍾内大規模配置輕量級虛拟數據庫副本，大規模地將(jiāng)數據從生産環境複制到非生産環境，以及使用刷新，回滾和快照功能(néng)管理虛拟數據庫等操作。

5、Catalogic

Catalogic 2013年成(chéng)立，總部位于美國(guó)新澤西州。ECX是該公司提供的CDM軟件産品，大大簡化了副本數據管理，實現了數據副本的自動化和編排，可以在整個企業和雲中利用該副本進(jìn)行各種(zhǒng)創造價值的用例。借助Catalogic ECX，將(jiāng)開(kāi)發(fā)/測試基礎架構管理時(shí)間減少了多達99％。

ECX還(hái)可以幫助用戶將(jiāng)數據移動到雲中，利用雲中成(chéng)本更低，更具彈性的計算基礎架構，借助ECX，在某些用例中利用雲時(shí)，用戶的投資回報率超過(guò)300％。

6、上訊信息

上訊信息2010年成(chéng)立，2016年率先發(fā)布了國(guó)内首款CDM産品—敏捷數據管理平台（ADM），這(zhè)是一款集數據驗證恢複、數據虛拟化、數據脫敏和數據庫審計爲一體的數據全生命周期管理産品。通過(guò)一個平台，解決數據獲取，數據存儲，數據構建，數據使用，數據歸檔，數據銷毀的所有數據問題。

數據使用的全生命周期管理，資料來源：上訊信息

ADM核心技術-數據虛拟化技術，可以通過(guò)一份數據的“黃金副本”快速創建出多份數據副本交付使用，所交付的數據都(dōu)是可讀可寫的，并且可以達到分鍾級的數據交付效率，以及實現10倍以上的存儲成(chéng)本節省。目前，ADM獲得了金融和運營商行業多家頭部客戶的使用和持續複購。

對(duì)每一家緻力于數據驅動的企業和組織而言，CDM技術無疑重塑了其過(guò)去臃腫的數據架構和繁冗的數據管理流程，以敏捷的數據架構就(jiù)緒企業數字化轉型，加速業務交付，提高企業的決策效率以及生産力水平。

但這(zhè)并不是CDM的全部，這(zhè)項令人著(zhe)迷不已的技術未來又將(jiāng)擁有怎樣的蛻變？做一些預測：

第一，跨越本地數據中心，邊緣和多公有雲的數據流動和存儲。CDM需要滿足混合多雲時(shí)代用戶對(duì)數據在不同端的流動和統一管理的需求，支持不同位置的基礎環境，例如可利用公有雲更加經(jīng)濟、彈性的存儲資源，進(jìn)一步降低OPEX。而無論是部署于邊緣，本地還(hái)是多公有雲，都(dōu)需要滿足一緻性和可用性服務體驗。

第二，以數據爲中心，打通數據上中下遊鏈條，實現數據的全生命周期管理。從産品的角度，可以基于靈活的license授權，爲用戶按需交付備份容災，備份校驗，數據虛拟化，數據脫敏，合規審計等不同功能(néng)，而從後(hòu)台邏輯來看，支持一個統一的數據平台，能(néng)夠無縫連通數據的全生命周期統一管理。

第三，CDM技術與垂直應用場景的緊耦合，強關聯。例如，開(kāi)發(fā)測試場景下，能(néng)否基于一套數據平台，跑通所有的開(kāi)發(fā)測試作業，而無需額外使用第三方平台，例如測試版本控制，以降低額外的資源消費，提高開(kāi)發(fā)測試效率。

相信随著(zhe)技術的不斷完善以及生态的成(chéng)熟，CDM，未來可期！