国产精品一区二区av交换,中文字幕人成无码免费视频,永久免费av无码网站性色av,欧美一道本一区二区三区,樱桃熟了a级毛片

作為一家像VMware這樣的服務(wù)器虛擬化供應(yīng)商，其眼中恐怕沒有哪種工作負載不能（或者說不應(yīng)該），被以抽象形式剝離底層硬件、從而使其變得更具可塑性與便攜性。從這個角度出發(fā)，VMware理所當然地把Hadoop作為下一個進軍目標——順便賺點經(jīng)濟回報。

過去幾年，VMware一直建議稱Hadoop不應(yīng)運行于x86服務(wù)器裸機當中。直到一年前，VMware的這種言論才有所止息，并開始著手通過代號為Serengeti的項目開發(fā)一整套工具，旨在最終加快Hadoop的部署與實施速度。

Serengeti項目最初亮相于去年六月的Hadoop World大會，它采用Spring Java框架（目前已經(jīng)歸EMC與VMware的子公司Pivotal所有）。這套框架由Java編寫，專門用于Hadoop調(diào)整工作。

服務(wù)器虛擬化技術(shù)在效率方面的優(yōu)勢可謂眾所周知，而且目前已經(jīng)被廣泛應(yīng)用于企業(yè)級數(shù)據(jù)中心領(lǐng)域。Hadoop方案的效果卻未得到如此廣泛的認同，這主要是因為與其它以CPU利用率為主要難點的通用服務(wù)器工作負載不同、大數(shù)據(jù)處理有著自己的一套資源要求。大家都知道，Hadoop對于I/O及存儲容量的要求更嚴苛（CPU要求則相對較低），因此提高CPU利用率無法給Hadoop方案帶來任何幫助；事實上，這可能反而會擾亂Hadoop集群節(jié)點中磁盤驅(qū)動器與CPU核心間的平衡關(guān)系。

不過虛擬化技術(shù)卻正是解決這一難題的良方。它不僅能夠維持計算與存儲之間的平衡，而且能夠取代處理數(shù)據(jù)所需要的龐大物理設(shè)備——這將顯著提升企業(yè)的運營效益，也正是虛擬化技術(shù)的最大優(yōu)勢。

將Hadoop集群中的管理、查詢、數(shù)據(jù)抽象工具以及各種節(jié)點設(shè)備匯總在同一套虛擬機系統(tǒng)中絕對是個好語音，這樣一來整個體系將可以像其它虛擬基礎(chǔ)設(shè)施一樣實現(xiàn)復(fù)制與故障轉(zhuǎn)移功能。而對開發(fā)人員來說，Serengeti項目則足以幫助他們將整套虛擬Hadoop集群安裝在單一物理設(shè)備上，從而簡化編碼、測試等流程，何樂而不為呢？

Serengeti項目概述

更重要的是，我們可以通過對Hadoop進行虛擬化將工作負載轉(zhuǎn)移至其它虛擬化服務(wù)器池當中，從而使Hadoop集群使用與網(wǎng)絡(luò)、應(yīng)用以及數(shù)據(jù)庫相同的基礎(chǔ)設(shè)施，這對于企業(yè)用戶接納新生方案來說意義非凡。El Reg網(wǎng)站去年就曾撰文指出，優(yōu)秀的虛擬化Hadoop集群應(yīng)用將擁有兩套不同的Task Tracker與JobTracker節(jié)點，從而實現(xiàn)兩套不同Hadoop集群共享同一組數(shù)據(jù)節(jié)點，并與單一NameNode協(xié)同運作。

NameNode是幫助Hadoop分布式文件系統(tǒng)實現(xiàn)對整個集群內(nèi)非結(jié)構(gòu)化數(shù)據(jù)塊追蹤任務(wù)的關(guān)鍵所在；它類似于磁盤驅(qū)動器中的文件分配表。一旦失去NameNode，我們就失去了整個HDFS；正如沒有FAT，也就沒有磁盤驅(qū)動器上的數(shù)據(jù)一樣。

舉例來說，大家可以讓一號虛擬集群使用物理節(jié)點上的一組副本數(shù)據(jù)而讓二號虛擬集群使用另一組數(shù)據(jù)，這樣整個集群的數(shù)據(jù)吞吐量就瞬間翻了一倍。

Serengeti項目結(jié)構(gòu)圖

Serengeti項目不僅了解如何對核心Hadoop服務(wù)器進行虛擬化及復(fù)制，在處理HDFS之上的HBase數(shù)據(jù)庫倉儲系統(tǒng)方面同樣得心應(yīng)手。它能以主動及熱備份副本方式處理HMaster節(jié)點的數(shù)據(jù)倉儲內(nèi)容，更能在數(shù)據(jù)倉儲與HDFS相結(jié)合時實現(xiàn)HBase RegionaServer的向外擴展。這些功能都已經(jīng)在今年四月Serengeti 0.8.0版本中出現(xiàn)。

現(xiàn)在，VMware正加緊時間將Serengeti投付生產(chǎn)。在今天于圣何塞舉辦的Hadoop峰會上，虛擬化巨頭將公布一套ESXi管理程序子集的測試版本以及名為Big Data Extensions的vSphere插件（這是第一款針對Serengeti的商用支持方案）。VMware公司產(chǎn)品管理高級主管Fausto Ibarra在接受El Reg網(wǎng)站采訪時指出，Big Data Extensions將以免費形式出現(xiàn)在vSphere的下一個版本中——“免費”這個詞從VMware嘴里說出來可有點新鮮。預(yù)計vSphere新版本（可能是5.2）將在8月底的VMworld大會上亮相，并于秋末正式上市。

大家可以點擊此處下載該插件，并將其與ESXi及vSphere 5.1配合使用。

根據(jù)Ibarra的說明，商用Serengeti軟件無需VMware的分布式資源調(diào)度（簡稱DRS）插件的支持即可直接與ESXi或者vCenter控制機制協(xié)作，從而在HDFS及HBase上實現(xiàn)彈性功能。但配合DRS，“它將可以更好地發(fā)揮作用。”其中含義目前尚不明確。

Big Data Extensions已經(jīng)確定可與開源Apache Hadoop 1.2堆棧、Cloudera CDH 3.X與4.2、MapR 2.1.3、Hortonworks Data Platform 1.3以及Pivotal 1.3全系列并行協(xié)作。

零售商、高科技客戶以及金融機構(gòu)已經(jīng)開始使用該項目

Ibarra同時指出，有趣的是客戶們已經(jīng)開始通過兩種途徑接納Serengeti。那些對ESXi較為熟悉的客戶利用它對服務(wù)器進行虛擬化，從而將Hadoop引入虛擬存儲池。而另一些擁有物理Hadoop集群的客戶則開始嘗試利用VMware的管理程序及工具對Hadoop及其它工作負載進行虛擬化。

Ibarra并未透露將Serengeti作為原型方案或引入生產(chǎn)系統(tǒng)的企業(yè)客戶的具體數(shù)量，但大型零售商、高科技產(chǎn)品制造商、金融服務(wù)企業(yè)以及新興企業(yè)已經(jīng)開始在商業(yè)版本推出之前著手嘗試。

鑒于Hadoop的開源特性，Serengeti在起步階段的表現(xiàn)至關(guān)重要。開源項目對于客戶往往具備強大的吸引力，而Hadoop發(fā)行商Hortonworks、Linux發(fā)行商紅帽以及OpenStack云控制器發(fā)行商Mirantis已經(jīng)準備聯(lián)手推出Svanna項目，旨在以O(shè)penStack及KVM管理程序為基礎(chǔ)實現(xiàn)Hadoop虛擬化。

除了帶來生產(chǎn)級Serengeti工具前瞻之外，VMware還將在今天公布大型大數(shù)據(jù)處理方案Pivotal HD 1.0發(fā)行版，這是VMware開發(fā)的首個支持Hadoop Virtual Extensions（簡稱HVE）代碼的商用版本，可以算作贈予Apache Hadoop項目的一份厚禮。HVE不僅能使Hadoop模塊實現(xiàn)虛擬化識別能力，更是Serengeti良好起效的必要前提。

下面我們通過實例看看HVE的工作機制。如果大家在Hadoop集群中擁有兩個虛擬數(shù)據(jù)節(jié)點，且二者處于同一臺物理服務(wù)器當中，那么它們彼此能夠識別出對方的存在；這意味著它們可以通過內(nèi)存總線進行通信，從而獲得比傳統(tǒng)虛擬化網(wǎng)絡(luò)端口更快的溝通速度。

再來看另一個例子。Hadoop習慣為數(shù)據(jù)塊保留三份副本，這主要是出于性能及可靠性的考量。HVE會將其中兩份數(shù)據(jù)副本保存在同一臺物理服務(wù)器當中，但對于第三份副本則會刻意保存在另一臺位于其它機架中的服務(wù)器端。

Ibarra表示，HVE代碼是Apache Hadoop項目的一部分，所有發(fā)行版都將在未來幾個月內(nèi)將其納為自身方案的組成部分。我們還不清楚HVE會對Savanna項目造成何種影響，但它也許能夠以相同的方式與KVM及OpenStack相對接。

通過上周MapR Hadoop發(fā)行版及數(shù)周前Cloudera的認證，Pivotal HD 1.0已經(jīng)確定能夠運行在ESXi環(huán)境下。目前Hortonworks發(fā)行版是否受到支持還沒有定論，但鑒于Savanna項目與Serengeti/BDE的競爭關(guān)系，二者之間恐怕很難攜起手來。