西瓜哥 發(fā)表于:14年08月05日 00:27 [原創(chuàng)] DOIT.com.cn
存儲在線 專欄文章:隨著性觀念的開放,大家的觀念都很開放了,比如現(xiàn)在上海的拆奶罩(ChinaJoy)展會上,無數(shù)的ShowGirls的“秀溝”行為,活脫脫的辦成了一個硅膠展。西瓜哥對這種乳溝隆胸秀的行為非常氣憤,怎么不在北京搞一場,弄得我都沒有機會看看。
不說了,現(xiàn)在的青年男女嘛也是很開放,高校都可以結(jié)婚了。哎,西瓜哥又沒有趕上好時候。但年輕人嘛,容易一時沖動,偶爾可能邪惡了一把。
但是邪惡過后發(fā)現(xiàn)慘了,忘記做保護措施了。因此,做無痛人流的廣告現(xiàn)在都發(fā)到高校了。當(dāng)然,無痛人流的廣告也充斥著電視、電梯甚至電線桿。因此,小孩子都懂。網(wǎng)上流傳的一個笑話是這樣的:
朋友研究生畢業(yè),找不到合適工作,一日在家正發(fā)愁。
小侄子走近說:“叔叔,你去做個人流吧。”
朋友驚問“為什么?”
答:“廣播上說今天做人流明天就可以上班。”……
這個無痛人流廣告做的太好了,可把不少人都害慘了。無數(shù)的慘痛經(jīng)歷告訴我們,還是應(yīng)該選擇正規(guī)的機構(gòu)。
在存儲界,也上演了相似的一幕。
隨著存儲競爭的白熱化,新的存儲廠商采用激進的價格攻勢和也許夸大的功能搶占市場,忽悠用戶拋棄舊的存儲,購買他們的新存儲。因此,大量的數(shù)據(jù)遷移(數(shù)據(jù)流動)產(chǎn)生了,就算是同一個廠商,由于更新?lián)Q代,也可能造成復(fù)雜的數(shù)據(jù)遷移問題。隨著存儲技術(shù)的發(fā)展,很多廠商開始宣傳無痛的數(shù)據(jù)遷移過程,就如無痛人流一樣,吸引了很多用戶的注意力。
這些新技術(shù)的出現(xiàn),使得“無痛數(shù)流”成為現(xiàn)實,甚至可以實現(xiàn)不中斷業(yè)務(wù)的數(shù)據(jù)遷移。今天,西瓜哥就來談?wù)勈袌錾铣R姷臒o痛遷移的技術(shù)。
根據(jù)IDC的統(tǒng)計,大企業(yè)有60%的IT項目是數(shù)據(jù)遷移,其中又只有60%的數(shù)據(jù)遷移項目能夠按時完成。根據(jù)451 Research公司的研究,企業(yè)有 一半的IT費用用在運維方面。因此,如何進行無痛的數(shù)據(jù)遷移就是對企業(yè)非常有意義的一個話題,怪不得現(xiàn)在無痛遷移比無痛人流還火。
數(shù)據(jù)遷移市場目前常用的主流手段還是基于主機的遷移,第二是采用虛擬化網(wǎng)關(guān),第三是用存儲本身的復(fù)制技術(shù)。
遷移的風(fēng)險,用戶最擔(dān)心的就是非計劃的停機,第二是遷移的成本超過預(yù)算,第三是對公司品牌和公共形象的影響。
從技術(shù)的角度,遷移最頭痛的原因有:
復(fù)雜性。現(xiàn)在的存儲環(huán)境很復(fù)雜,各種網(wǎng)絡(luò)連接技術(shù),陣列上實現(xiàn)的各種增值功能,使得遷移后能否保持原有功能變得更加不確定。
技術(shù)依賴性。系統(tǒng)的軟硬件經(jīng)過多年開發(fā)測試,兼容性很好。如果遷移到新存儲,其他相關(guān)的配套硬件和軟件是否可以工作,是一個問題。
業(yè)務(wù)依賴性。大部分的企業(yè)IT環(huán)境都是全天候工作,一個應(yīng)用停止工作,可能影響到相關(guān)系統(tǒng)的正常運行。
規(guī)模。現(xiàn)在的遷移數(shù)據(jù)量都非常大,經(jīng)常會達到PB級別。這個對遷移的時間和性能都是一個巨大的挑戰(zhàn)。
成本。遷移的成本是巨大的,經(jīng)常會超過購買成本的一本以上。這個成本分析我們以前分享過,具體可以參看西瓜哥以前的帖子。
當(dāng)然,這些問題主要是設(shè)備到設(shè)備間遷移的問題。如果遷移到公共云上,還有其他的問題,如安全問題等等。
還好,現(xiàn)在科技在發(fā)展。一些相關(guān)的遷移技術(shù)出現(xiàn)并且逐漸成熟。
陳列到陣列的遷移
陳列間的遷移主要就是塊協(xié)議數(shù)據(jù)的遷移,典型的方法有:
基于主機。數(shù)據(jù)在主機級別進行遷移,通過數(shù)據(jù)的卷到卷的復(fù)制,主機可以看到老的卷和新的卷。這個可以利用主機的邏輯卷管理功能來實現(xiàn)。
基于陣列。數(shù)據(jù)的移動使用陣列級的遷移工具。如果新舊設(shè)備是一個廠商的,用陣列的復(fù)制功能就可以了。如果是異構(gòu)的遷移就比較麻煩了,但也有一些工具,如HP 3PAR Online Import可以支持把第三方的陣列的數(shù)據(jù)遷移到3PAR陣列上。EMC和華為也提供了類似的工具。
基于Hypervisor。服務(wù)器虛擬化現(xiàn)在都有能力實現(xiàn)VM的數(shù)據(jù)遷移,如 VMware's vSphere Storage vMotion和 Microsoft Hyper-V Live Migration;贖ypervisor的遷移雖然需要增加License費用,但可以實現(xiàn)block到NFS的遷移,對業(yè)務(wù)的運維影響也比較少。
基于虛擬化網(wǎng)關(guān)。IBM的SVC,EMC的VPLEX和華為的VIS這些虛擬化網(wǎng)關(guān)都可以實現(xiàn)數(shù)據(jù)的遷移。大部分情況下需要中斷一下業(yè)務(wù),把虛擬化網(wǎng)關(guān)接入到數(shù)據(jù)路徑中,然后就可以實現(xiàn)遷移,F(xiàn)在一些新興的存儲廠商已經(jīng)實現(xiàn)了無中斷的數(shù)據(jù)遷移技術(shù),可惜目前這些存儲大廠們都沒有集成進去。具體實現(xiàn)原理就是利用數(shù)據(jù)的多路徑技術(shù),多條數(shù)據(jù)路徑順序逐步切換,保證系統(tǒng)的連續(xù)性。預(yù)計這些存儲大廠很快會收購或者自己開發(fā)這個不中斷業(yè)務(wù)的遷移功能,幫助用戶實現(xiàn)不停機遷移問題。
基于虛擬陣列。這個也容易理解,就如HDS的高端存儲VSP G1000,本身就集成了虛擬化網(wǎng)關(guān)的功能。
文件到文件的遷移
使用基于文件的協(xié)議,數(shù)據(jù)遷移也一樣復(fù)雜。文件共享一般采用統(tǒng)一命名空間來進行管理,如Microsoft的Distributed File System,抽取文件共享名并且使用全局命名空間,允許無縫的數(shù)據(jù)遷移。
對象存儲遷移
對象存儲現(xiàn)在非常流行,是保存非結(jié)構(gòu)化數(shù)據(jù)的非常理想的方式。不僅僅用在云存儲方面,甚至很多地方也用來代替NAS設(shè)備。一般對象存儲都采用REST API接口來進行數(shù)據(jù)訪問和遷移。對象存儲一般采用糾刪碼或者多副本技術(shù),任意節(jié)點的更換都不需要中斷業(yè)務(wù)。
遷移數(shù)據(jù)到公有云
使用混合云的企業(yè)越來越多。有許多的方法可以使用公有云,包括整個VM遷移到公有云或者把block或者file級別的數(shù)據(jù)遷移到云里。
需要云服務(wù)提供商提供VM導(dǎo)入功能,如Amazon Web Services' VM Import功能允許各種VM image導(dǎo)入到AWS中。不幸的是,這種方式限制比較多,因此現(xiàn)在比較常見的還是把數(shù)據(jù)遷移到全新的VM中。
現(xiàn)在EMC收購了一個云網(wǎng)關(guān)產(chǎn)品,將在VMAX3上集成云網(wǎng)關(guān)功能,可以把公有云作為數(shù)據(jù)的一層進行分層管理。而NETAPP也集成把數(shù)據(jù)遷移到Azure的能力。因此,傳統(tǒng)陣列和云網(wǎng)關(guān)結(jié)合是一個大趨勢。
Scale-out存儲和大數(shù)據(jù)
云和傳統(tǒng)的存儲不再是當(dāng)今唯一的數(shù)據(jù)存儲平臺。我們看到scale-out存儲和數(shù)據(jù)湖泊(data lake)也用來存儲大量的數(shù)據(jù)。
開源的平臺如Ceph和Gluster提供scale-out文件和塊能力,數(shù)據(jù)遷移相對容易。節(jié)點可以按需增加或者減少。
Hadoop是一個最著名的流行大數(shù)據(jù)平臺,其內(nèi)置工具DistCp可以用來在Hadoop集群間復(fù)制數(shù)據(jù)。當(dāng)然,Hadoop不是真正為數(shù)據(jù)移動而設(shè)計的,因此把數(shù)據(jù)導(dǎo)入和遷出Hadoop集群不是給用戶一個文件系統(tǒng)或者LUN那么簡單。
新的架構(gòu)一樣有新的遷移問題
從Facebook的經(jīng)驗來看,大型的數(shù)據(jù)湖泊增長很快讓物理的數(shù)據(jù)中心空間成為問題,而集群的移動需要大量的規(guī)劃和努力。這讓我們的討論一下子又回到傳統(tǒng)存儲一樣的問題,即如果更簡單和減少成本。然而,新的存儲技術(shù)在管理數(shù)據(jù)移動性方面還相對幼稚,這將是一個巨大的創(chuàng)新領(lǐng)域,聚焦這方面的技術(shù)將變得更加流行。
雖然不是小公司看起來有很好的遷移技術(shù),但遷移過程其實比人流還復(fù)雜。人流都需要選擇正規(guī)的機構(gòu),數(shù)據(jù)的遷移也是如此。技術(shù)是以方面,專業(yè)的遷移規(guī)劃和流程,包括應(yīng)急措施,遷移的經(jīng)驗也一樣重要。因此,數(shù)據(jù)遷移請選擇專業(yè)廠商的服務(wù)。
到那個時候,也許我們才有可能像無痛人流的廣告詞一樣說,“痛苦,再見!幸福重現(xiàn)!“。
希望大家積極反饋你的意見和建議,微信掃描如下二維碼,關(guān)注微信公眾號“高端存儲知識”,與作者微信互動。通過掌上DOIT移動客戶端,您可以訂閱西瓜哥專欄,第一時間獲得知名專家和業(yè)界領(lǐng)袖的深度剖析與趨勢分析。
公司簡介 | 媒體優(yōu)勢 | 廣告服務(wù) | 客戶寄語 | DOIT歷程 | 誠聘英才 | 聯(lián)系我們 | 會員注冊 | 訂閱中心
Copyright © 2013 DOIT Media, All rights Reserved. 北京楚科信息技術(shù)有限公司 版權(quán)所有.