2014年7月31日，由DOIT傳媒和存儲(chǔ)在線舉辦的首屆中國(guó)閃存峰會(huì)在亮馬河飯店盛大召開，樂視網(wǎng) 高級(jí)總監(jiān)/國(guó)內(nèi)知名云存儲(chǔ)、大數(shù)據(jù)專家薛偉發(fā)表了題為《基于閃存云存儲(chǔ)的樂視生態(tài)有機(jī)云建設(shè) 》的演講。

以下是現(xiàn)場(chǎng)文字實(shí)錄：

薛偉：各位領(lǐng)導(dǎo)，大家上午好，剛才這么多廠商都介紹了關(guān)于閃存陣列的一些優(yōu)勢(shì)，包括技術(shù)指標(biāo)，下面我們從用戶的角度談?wù)勯W存在互聯(lián)網(wǎng)公司，特別是在一個(gè)存儲(chǔ)大戶的視頻網(wǎng)站公司的具體應(yīng)用情況。

第 一個(gè)方面，對(duì)互聯(lián)網(wǎng)用戶來講，我們不是閃存專家，我們也不是硬件專家，但是我們需要透徹的理解，廠商說的哪些是真的，哪些是市場(chǎng)測(cè)試的。但是，實(shí)際上我們 選一種產(chǎn)品，不管自研設(shè)備，還是用廠商的設(shè)備，都是為了滿足我們自己的場(chǎng)景。所以，今天第一步先把我們對(duì)于閃存技術(shù)以及傳統(tǒng)的存儲(chǔ)技術(shù)對(duì)我們的環(huán)境應(yīng)用以 及重要的關(guān)注點(diǎn)和他們的一些特征在哪里?

第 二部分部分介紹整個(gè)樂視生態(tài)，樂視網(wǎng)不僅僅是一個(gè)視頻網(wǎng)站，樂視現(xiàn)在正在從一個(gè)單純的垂直通道的視頻網(wǎng)站公司，變成一個(gè)平臺(tái)級(jí)的服務(wù)公司，比如業(yè)務(wù)層的需 要，應(yīng)用層組裝的服務(wù)，應(yīng)用的基礎(chǔ)設(shè)施，以及網(wǎng)絡(luò)的設(shè)施，數(shù)據(jù)中心、帶寬，等等存儲(chǔ)計(jì)算都是基于云平臺(tái)的方式介紹的。所以機(jī)在后面的環(huán)節(jié)我們會(huì)更多的介紹 關(guān)于我們場(chǎng)景的一些內(nèi)容。

我 們下面把整個(gè)的存儲(chǔ)架構(gòu)的演進(jìn)，其實(shí)前面提到很多的一般的最原始的一些管理方案，其實(shí)都已經(jīng)過時(shí)了，但是在企業(yè)級(jí)，不同的場(chǎng)景有不同的需求，而且互聯(lián)網(wǎng)企 業(yè)和企業(yè)級(jí)的用戶，特別是廣電用戶，它的基本訴求和歷史的發(fā)展是不一樣的。所以，這里面基于老的設(shè)備，以及未來的延展性，特別是有的公司，有的用戶不受到 空間的限制，而在我們今天資源巨缺的情況下，實(shí)際上很多的IDC的服務(wù)提供商，包括數(shù)據(jù)中心，包括云的服務(wù)商，很多還涉及到一些機(jī)柜方面的限制，如何使高密度的方案進(jìn)行設(shè)置，我們這兒就有一塊過程的演進(jìn)。

其實(shí)中間這一塊，分布式存儲(chǔ)到來，今天我們談閃存存儲(chǔ)，特別是兩年前，我記得電信等很多公司都在測(cè)關(guān)于Hadoop的體驗(yàn)，看到多個(gè)數(shù)據(jù)節(jié)點(diǎn)讀的性能的提升，測(cè)完之后發(fā)現(xiàn)這是一個(gè)量變到質(zhì)變的過程。今天我們看云存儲(chǔ)平臺(tái)，我們?cè)谇扒昂蠛螅�包括我在樂視之前其�?shí)做的也是一個(gè)數(shù)據(jù)密集型的公司，叫115.com，有 10PB的存儲(chǔ)，今天我們的帶寬有3.5T，全球有350個(gè)CDN節(jié)點(diǎn)，整個(gè)存儲(chǔ)容量已經(jīng)有超過百萬的PB級(jí)的情況。選用什么樣的技術(shù)，在哪一個(gè)環(huán)節(jié)，這已經(jīng)不只是一個(gè)廠商的話題，因?yàn)閺S商的產(chǎn)品只能用到我們某一個(gè)架構(gòu)里的某一個(gè)節(jié)點(diǎn)，或者某一個(gè)場(chǎng)景，而我們今天看到的，比如采用我們的云平臺(tái)，大家會(huì)猜，樂視里的云平臺(tái)是通過OpenStack這種方式嗎?其實(shí)不是，但是我們會(huì)參考很多特性。所以，大家很多人會(huì)覺得，你這個(gè)有點(diǎn)過于深?yuàn)W，什么叫有機(jī)云，這也是我們?cè)谇把匚�收的一個(gè)我們國(guó)際化的公司叫做環(huán)狀存儲(chǔ)有機(jī)云的一個(gè)公司，它是跟戴爾收購的那個(gè)DX 6000差不多的公司。

我們?cè)跒闃芬暰W(wǎng)這樣一個(gè)全網(wǎng)服務(wù)的公司搭建一個(gè)云存儲(chǔ)的平臺(tái)，由于中國(guó)的互聯(lián)網(wǎng)環(huán)境很復(fù)雜，我們必須要說我們的聯(lián)通、電信、鐵通，全網(wǎng)環(huán)境的用戶如何實(shí)現(xiàn)視頻服務(wù)的直播點(diǎn)播的高可靠，以及企業(yè)級(jí)對(duì)外的服務(wù)，以及個(gè)人云的一些服務(wù)，這些都在我們的場(chǎng)景之中。

最后，我們?nèi)绾未罱ㄎ覀冏约旱脑拼鎯?chǔ)平臺(tái)，今天的云存儲(chǔ)平臺(tái)，絕對(duì)不是怎么做一個(gè)解決方案，而且這個(gè)平臺(tái)你的可靠性要提高多少，Google的可靠性是999，你們是999999，為什么?你們肯定是短版，因?yàn)樗麄兪钦麄�(gè)系統(tǒng)服務(wù)的999，樂視還沒有到999，我所服務(wù)的還是在99。

關(guān)于傳統(tǒng)的SAN和NAS的問題，這實(shí)際上是傳統(tǒng)的講分布式的云的存儲(chǔ)和架構(gòu)會(huì)提出的一個(gè)例子，但是實(shí)際上很多公司還是用別的一些公司做，這引發(fā)我們對(duì)存儲(chǔ)架構(gòu)演進(jìn)的一個(gè)思考。比如今天我們講AFA，我們AFA整 個(gè)的全閃存架構(gòu)，我們?cè)趺纯创�全閃存，其實(shí)我們?cè)谫I之前會(huì)有一個(gè)評(píng)估，全閃存并不是一個(gè)新的東西，它實(shí)際上是一套基于硬件和軟件，包括軟件定義網(wǎng)絡(luò)，軟件 定義存儲(chǔ)，包括軟件定義工作空間。今天我們看到，我們自己用我們自己的業(yè)務(wù)定義閃存陣列。我們自己看什么是閃存的時(shí)候，樂視之前用了很多的場(chǎng)景，我們對(duì)于 數(shù)據(jù)的二級(jí)存儲(chǔ)包括很多自動(dòng)的分級(jí)存儲(chǔ)，包括冷熱數(shù)據(jù)的自動(dòng)分離已經(jīng)做了很多方案。今天我們看到隨著技術(shù)的發(fā)展，當(dāng)然有一個(gè)技術(shù)我們比較關(guān)注，在兩年前， 叫做光連接，就是網(wǎng)絡(luò)通道的速度一直沒有改善，其實(shí)我們今天看到，我們?cè)陉P(guān)鍵場(chǎng)景上的一些磁盤的延遲，這時(shí)候單一的磁盤SSD已經(jīng)無法解決這個(gè)問題了，這是我們看到更新的技術(shù)。所以，我們會(huì)通過三個(gè)層面來看，通過三個(gè)層面可以回顧一下剛才幾個(gè)廠商講的共同點(diǎn)。

第一、固態(tài)硬盤，你要關(guān)注的點(diǎn)是什么?實(shí)際上它就是一個(gè)芯片，加上存儲(chǔ)，沒什么，對(duì)我們來看就是一些物料成本。大家也都知道，樂視最近特別熱衷于做物料，不過大家可以放心，我們不會(huì)做我們不擅長(zhǎng)的東西，但是我們會(huì)對(duì)消費(fèi)者提供更多的可能會(huì)產(chǎn)生的一些純閃存的應(yīng)用。

第二、Flash的一些架構(gòu)和類型，通過包括工藝、生產(chǎn)成本，可能都是用NOR的形式做閃存，NOR的形式，我們做了一個(gè)排名，通過排名大家可以看到，你不做價(jià)格考慮的情況下，哪一個(gè)更好一些?

熱心觀眾回答道：AFA。

薛偉：你說的太高級(jí)了，我指的是單層單元閃存，eSLC、每單元存儲(chǔ)兩位數(shù)據(jù)，還有eMLC。

回答：我覺得可能是第四個(gè)好一些。

薛偉：每單元存儲(chǔ)兩位數(shù)據(jù)和每單元存儲(chǔ)一位數(shù)據(jù)，誰的性能更高一些。我們以用戶的觀點(diǎn)出發(fā)會(huì)看一些設(shè)備廠商，看他們提供哪一類的閃存的技術(shù)。實(shí)際上我們從廠商的觀點(diǎn)，我相信他們過多會(huì)中庸之道解決問題，你們一定會(huì)選擇主流的設(shè)備。實(shí)際上我們發(fā)現(xiàn)，X86時(shí)代，發(fā)現(xiàn)整個(gè)磁盤速度已經(jīng)出現(xiàn)瓶頸，這時(shí)候我們實(shí)際上有一個(gè)簡(jiǎn)單的方案，就是把原來的磁盤陣列換成閃存陣列，全閃存陣列并不是多復(fù)雜，只是一個(gè)成本的增加。而這個(gè)成本增加，樂視到今天非常維護(hù)廣大網(wǎng)民和股東的利益，我們的TCO一定考慮的非常精細(xì)，我們成本增加一定是在其他方面去換得的這種價(jià)值，這里面有那些價(jià)值呢?

其實(shí)剛才很多專家都講了。第一、我們對(duì)于IOPS的價(jià)值，還有一個(gè)是節(jié)能的價(jià)值，我們可能會(huì)自建我們自己的數(shù)據(jù)中心，第三個(gè)就是低延遲的價(jià)值。

我 們看一下具體優(yōu)化了哪些層面?第一個(gè)層面，核心存儲(chǔ)層。什么是核心存儲(chǔ)層?就是我了給用戶提供上傳，如果大家都上傳，這個(gè)路就堵了，所以我們用異步存儲(chǔ)， 就是第一步存到一個(gè)位置，第二步再把這個(gè)位置異步往整個(gè)數(shù)據(jù)中心。第一步存儲(chǔ)的時(shí)候，就要有數(shù)據(jù)存儲(chǔ)成功的技術(shù)。我們另一個(gè)高手前兩天講了一個(gè)他們?nèi)绾蝺?yōu) 化他們阿里云的存儲(chǔ)，你如何定義一個(gè)副本的成功，我們考慮全閃存之前，遇到很多極致的軟性的方案，只要有兩個(gè)副本成功了，就認(rèn)為你是成功了，它是在一定程 度上提升性能。但是，提升和優(yōu)化是一個(gè)軟硬兼施的過程。這時(shí)候就通過全閃存陣列提升我們的性能，五倍到十倍。第二、對(duì)讀的優(yōu)化，這時(shí)候我們也是通過我們的AFA的解決方案提供產(chǎn)品的需求。

第 二、包括我們的核心數(shù)據(jù)中心的部署，剛才我們看到外邊很多的廠商列出了，包括數(shù)據(jù)庫閃存的加速方案。數(shù)據(jù)庫在互聯(lián)網(wǎng)公司是哪個(gè)場(chǎng)景都會(huì)有但是是不是所有的 都會(huì)涉及到，并不見得。我們?cè)谝恍╆P(guān)鍵的通過軟件集成的解決方案仍然發(fā)現(xiàn)它有瓶頸的地方，比如個(gè)人云的服務(wù)中心，比如我們對(duì)整個(gè)的上傳的神經(jīng)網(wǎng)絡(luò)的管理， 這時(shí)候我們發(fā)現(xiàn)通過軟件剛才介紹的什么讀寫分離，包括加緩存等等都解決不了，包括優(yōu)化數(shù)據(jù)之后引擎也解決不了，我們還回到軟硬兼施，通過硬件的方案把核心 數(shù)據(jù)中心部署在AFA的基礎(chǔ)上，這可以提高很大的性能。其他的方案特別多了，包括磁盤性能的效率降低，比如說我們?cè)谙到y(tǒng)設(shè)計(jì)的時(shí)候就考慮到如何幫磁盤的操作完成內(nèi)存的操作。

下面看一下我們作為樂視的云存儲(chǔ)平臺(tái)它能提供的場(chǎng)景。一個(gè)相當(dāng)于混合云狀況，面向企業(yè)，面向個(gè)人云。一個(gè)是，樂視云給個(gè)人用戶提供的一個(gè)樂視云的產(chǎn)品，包括樂視云盤，TV版，包括Pad版， 每一個(gè)應(yīng)用接口的后面必然會(huì)導(dǎo)致一個(gè)應(yīng)用的需求。如果讓你設(shè)計(jì)一個(gè)樂視的云存儲(chǔ)平臺(tái)，你關(guān)注的點(diǎn)是什么?首先，一定要支持視頻網(wǎng)站的上傳原理，然后能夠被 大家播放。視頻從上傳到播放整個(gè)的環(huán)節(jié)都是跟存儲(chǔ)有關(guān)。從云存儲(chǔ)的角度來講，比如我們今天解決了自己的問題，樂視網(wǎng)其實(shí)還有一個(gè)對(duì)外的SaaS平臺(tái)，京東、淘寶，他們所能提供的視頻都是由樂視支持的。今天云存儲(chǔ)肯定是一個(gè)多點(diǎn)上傳的系統(tǒng)，這一點(diǎn)實(shí)際上跟我們個(gè)人存儲(chǔ)還不太一樣。大家知道4399是一個(gè)做游戲的，游戲的視頻肯定每個(gè)人跟每個(gè)人不一樣。但如果將來有個(gè)人云存儲(chǔ)，比如說我們今天可能看過《變形金剛4》，很多人并沒有去現(xiàn)場(chǎng)看，你可以看看你的云里有沒有?當(dāng)云里還沒有的時(shí)候，在場(chǎng)的人可能有十個(gè)人都在上傳《變形金剛4》，如果當(dāng)十個(gè)人都在同時(shí)上傳，因?yàn)橹�容量的大小可能需要傳幾個(gè)小時(shí)，通過我們?cè)诤笈_(tái)的全網(wǎng)調(diào)度的跨度和判斷，我們把《變形金剛4》分開，假如分200片，每一片的數(shù)據(jù)50兆或者100兆，用戶分開上傳。

在整個(gè)視頻存儲(chǔ)里邊，包括對(duì)外企業(yè)的一些提供的存儲(chǔ)服務(wù)，剛剛說給企業(yè)提供存儲(chǔ)服務(wù)，包括云視頻的網(wǎng)頁播放的，還有包括S3的API，像我們一直講亞馬遜的服務(wù)。其實(shí)我們真正發(fā)現(xiàn)單服務(wù)于亞馬遜的用戶其實(shí)并不多，還有包括個(gè)人云盤的SDK的服務(wù)，這時(shí)候我們會(huì)創(chuàng)造一些云服務(wù)的場(chǎng)景。

關(guān) 于我們?cè)O(shè)計(jì)場(chǎng)景時(shí)候的思考，第一、如何把我們的場(chǎng)景形成一個(gè)通用場(chǎng)景，我們會(huì)把一些業(yè)務(wù)特殊的內(nèi)容通過調(diào)度，通過一些組件的借口擴(kuò)展的方式增強(qiáng);第二個(gè)， 存儲(chǔ)永遠(yuǎn)是一個(gè)時(shí)間換空間的問題，這個(gè)理論是不是大家認(rèn)同?這個(gè)時(shí)間換空間的問題，今天硬件廉價(jià)到一定程度，我們通過硬件的堆積解決我考慮到的這個(gè)問題。 第三個(gè)問題是運(yùn)維的難度，每一個(gè)新的基礎(chǔ)運(yùn)用都會(huì)對(duì)運(yùn)維提出挑戰(zhàn)，實(shí)際上我們?cè)诤笈_(tái)也是通過自動(dòng)化的運(yùn)維通訊，通過運(yùn)維的分節(jié)管理解決這些問題。

還有一點(diǎn)就是有中心，無單點(diǎn)的雙環(huán)有機(jī)云存儲(chǔ)架構(gòu)思路。它整個(gè)就是一級(jí)存儲(chǔ)，一級(jí)存儲(chǔ)環(huán)會(huì)用到AFA的技術(shù)。里面介紹了一些全網(wǎng)的上傳方式，包括多線程的，包括POST的方式。所以引發(fā)這么為什么樂視云要用全閃存的討論?這其實(shí)就是我們對(duì)機(jī)型的考慮重點(diǎn)是什么。以前我們考慮SSD、SAS、SATA，后來我們考慮通過SSD的分級(jí)。這是我們對(duì)環(huán)狀存儲(chǔ)的介紹，這是我們講用戶在上傳下載和企業(yè)用戶上傳下載中，涉及到的網(wǎng)絡(luò)多通道的概念。

我們看到很多云視頻架構(gòu)，包括國(guó)美都在用我們的云平臺(tái)，做一個(gè)視頻網(wǎng)站非常簡(jiǎn)單，但是為什么這個(gè)簡(jiǎn)單的背后實(shí)際上有大量的基礎(chǔ)支撐，這是因?yàn)槟闼�上傳的位置一定有我們的云的上傳�?jié)點(diǎn)，這個(gè)上傳節(jié)點(diǎn)我們之所以提供可以提供低延遲，高的IOPS是因?yàn)橛蠥FA的技術(shù)。下載的時(shí)候，之所以能加速，也是因?yàn)楹芏嗟募?xì)節(jié)會(huì)遇AFA。樂視生態(tài)后面這幾塊，包括樂視的體育，樂視影業(yè)其實(shí)都在做這樣一個(gè)事情，通過云去實(shí)現(xiàn)。

最 后就是個(gè)人云場(chǎng)景，個(gè)人云場(chǎng)景比企業(yè)云場(chǎng)景還要復(fù)雜，還要提供高可靠。這個(gè)需求的場(chǎng)景，包括數(shù)據(jù)在線的一站式的服務(wù)體驗(yàn)，比如數(shù)據(jù)的音樂的可播放，視頻的 可播放，以及之間的文檔的在線編輯等等一系列需求，這種個(gè)人生產(chǎn)的數(shù)據(jù)與后面一些控制流，數(shù)據(jù)流，以及日志流，還要進(jìn)行分析數(shù)據(jù)。這里面如何通過AFA支持大數(shù)據(jù)中心，有三個(gè)分類。第一、我們對(duì)于個(gè)人云比如一個(gè)相冊(cè)圖片來講，我們有算法的識(shí)別，數(shù)據(jù)的聚合，包括資源的推薦等等。最后樂視把基于AFA的實(shí)時(shí)的一些吞吐技術(shù)應(yīng)用到很多行業(yè)，最后通過大數(shù)據(jù)的精準(zhǔn)定位，提高我們投資行業(yè)影視的把握，剛剛我們獲得《小時(shí)代3》的熱播的喜訊，后續(xù)還會(huì)投資的一些片子，謝謝大家!