就當(dāng)前而言,移動PB級的數(shù)據(jù)對企業(yè)來說仍然是一件難事,可以按照以下步驟來操作,盡量減少風(fēng)險和成本,并最大程度地提高靈活性。
接受云部署的企業(yè)需要具有成本效益和實(shí)用性的將企業(yè)數(shù)據(jù)遷移到云端的方法。鑒于將大規(guī)模企業(yè)數(shù)據(jù)集無間斷地和準(zhǔn)確地移動到任何地方,這將面臨很大的挑戰(zhàn),其任務(wù)可能是一個漫長,復(fù)雜,危險的過程。
并不是每個組織都有足夠的專用帶寬來傳輸數(shù)PB的數(shù)據(jù),而不會導(dǎo)致核心業(yè)務(wù)的性能下降,也并不具有足夠的備用硬件遷移到云端。在某些情況下,處于物理隔離位置的組織或不具有成本效益的高速互聯(lián)網(wǎng)連接的組織面臨著進(jìn)入目標(biāo)云的障礙。數(shù)據(jù)必須被保護(hù)和備份,并且需要在生產(chǎn)環(huán)境中進(jìn)行遷移而不遺漏任何一個環(huán)節(jié)。
2016年秋季,AWS公司通過Snowball(一種使用AWS提供的一臺或多臺設(shè)備的PB級數(shù)據(jù)傳輸服務(wù))和Snowmobile(一款使用18輪卡車進(jìn)行數(shù)據(jù)傳輸?shù)腅B規(guī)模的運(yùn)輸服務(wù))進(jìn)行了品牌推廣。這些車輛可以輕松地為駐留在AWS云端實(shí)施數(shù)據(jù)購買和部署遷移服務(wù)。使用專用的100Mbps連接遷移100TB的數(shù)據(jù)需要120天。使用多個Snowball進(jìn)行同樣的遷移將只需要大約一個星期的時間。
然而,對于尚未使用AWS云計(jì)算服務(wù)的55%的公共云市場,或者那些具有私有云,混合云或多云部署需要更多靈活性的企業(yè)來說,其他云遷移選項(xiàng)可能比AWS的產(chǎn)品更具吸引力。遷移生產(chǎn)數(shù)據(jù)時尤其如此,其中將靜態(tài)數(shù)據(jù)上傳到設(shè)備上,在遷移過程中將部分副本復(fù)制給IT團(tuán)隊(duì)。他們需要一種重新同步數(shù)據(jù)的方法。
以下是云數(shù)據(jù)遷移最佳實(shí)踐的指南,這取決于企業(yè)數(shù)據(jù)是否是靜態(tài)的,因此資源是離線的或正在產(chǎn)生的。以下還將提供有助于與新數(shù)據(jù)中心資源集成,以及適應(yīng)混合或多云體系結(jié)構(gòu)的有用提示。
靜態(tài)數(shù)據(jù)
除非數(shù)據(jù)量低于1TB,否則將需要利用物理介質(zhì)(如設(shè)備)來加速文件,塊或?qū)ο?a href='http://www.qzkangyuan.com/cnidc/dc/jhcc/' target='_blank'>存儲的遷移過程。這樣數(shù)據(jù)在不需要連續(xù)在線的環(huán)境中,或者傳輸需要使用緩慢,不可靠或昂貴的互聯(lián)網(wǎng)連接中可以很好地運(yùn)行。
(1)將靜態(tài)數(shù)據(jù)復(fù)制到本地遷移設(shè)備。使用一個小型便攜式,易于運(yùn)輸?shù)腘AS設(shè)備,在RAID期間配置RAID,以保證站點(diǎn)之間的持久性。設(shè)備應(yīng)包括加密 - 128位AES,或優(yōu)選256位AES,以防止在NAS離開客戶端設(shè)施后未經(jīng)授權(quán)的訪問。
使用非常快的10G網(wǎng)絡(luò)連接,團(tuán)隊(duì)可以將每秒100MB到200MB的數(shù)據(jù)上傳到NAS設(shè)備上。設(shè)備應(yīng)支持目標(biāo)環(huán)境(Windows,Linux等)和文件訪問機(jī)制(NFS,CIFS,光纖通道等)。一個設(shè)備通常足以傳輸高達(dá)30TB的數(shù)據(jù)。對于較大的數(shù)據(jù)量,團(tuán)隊(duì)可以使用多個設(shè)備或重復(fù)該過程多次以邏輯塊或段移動數(shù)據(jù)。
(2)將設(shè)備運(yùn)送到云端環(huán)境。運(yùn)送目的地可能是目標(biāo)云或云數(shù)據(jù)中心本身附近的協(xié)同設(shè)施。無論目標(biāo)是公共云還是混合云/多云設(shè)置,還有兩個考慮因素將平滑遷移和容易遷移區(qū)分開來。
(3)將數(shù)據(jù)復(fù)制到云中的存儲目標(biāo)。存儲目標(biāo)應(yīng)通過高速光纖使用VPN訪問連接到AWS,Azure,Google或其他目標(biāo)云基礎(chǔ)架構(gòu)。
例如,在訴訟期間,律師事務(wù)所常常需要從客戶端發(fā)送所有電子郵件以進(jìn)行電子發(fā)現(xiàn)。通常,電子郵件捕獲從幾個月或幾年前跨越一個靜態(tài)的,定義的日期范圍。律師事務(wù)所將其云計(jì)算供應(yīng)商向當(dāng)事人的數(shù)據(jù)中心安裝設(shè)備,指示他們根據(jù)需要復(fù)制所有電子郵件,然后將設(shè)備運(yùn)送到云計(jì)算供應(yīng)商進(jìn)行處理。
雖然一些供應(yīng)商需要購買該設(shè)備,但其他供應(yīng)商允許在遷移過程中一次性使用該設(shè)備,之后退還設(shè)備,IT團(tuán)隊(duì)將以每TB計(jì)費(fèi)。不需要資本支出或長期承諾。
生產(chǎn)數(shù)據(jù)
一旦數(shù)據(jù)移動到云端,此過程需要一些移動數(shù)據(jù)并重新同步的方法。其鏡像代表了遷移生產(chǎn)數(shù)據(jù)的答案。
使用鏡像的云遷移需要兩個本地的內(nèi)部部署設(shè)備,它們能夠跟蹤生產(chǎn)環(huán)境的增量變化,同時將數(shù)據(jù)移動到新的云端目標(biāo)。
(1)生產(chǎn)數(shù)據(jù)被鏡像到第一個設(shè)備,創(chuàng)建數(shù)據(jù)集的在線副本。然后從第一個鏡像創(chuàng)建第二個鏡像,創(chuàng)建第二個在線副本。
(2)如果第二個鏡像是“損壞”的,directadmin下載 美國虛擬主機(jī),需要將設(shè)備運(yùn)送到云端環(huán)境。
(3)然后在本地復(fù)制和遠(yuǎn)程副本之間重新連接鏡像,并重新建立數(shù)據(jù)同步。
(4)數(shù)據(jù)的在線副本現(xiàn)在在云中,服務(wù)器可以故障轉(zhuǎn)移到云端。
例如,美國的一個機(jī)構(gòu)有2PB的內(nèi)部部署數(shù)據(jù),它希望部署在私有云中。該機(jī)構(gòu)的IT團(tuán)隊(duì)在一個數(shù)據(jù)中心內(nèi)建立了彼此相鄰的兩個本地存儲資源,將數(shù)據(jù)移動到一個鏡像上,然后設(shè)置了第二個鏡像,以便復(fù)制所有內(nèi)容。然后,團(tuán)隊(duì)將整個機(jī)架運(yùn)送到數(shù)千英里外的第二個數(shù)據(jù)中心,其云計(jì)算供應(yīng)商(Zadara Storage)重新建立了鏡像。