實(shí)際上,隨著“新基建”戰(zhàn)略全面拉開(kāi),大型政企紛紛按下創(chuàng)新發(fā)展的加速鍵。作為向上承接豐富應(yīng)用(人工智能、物聯(lián)網(wǎng)),向下對(duì)接計(jì)算力的大數(shù)據(jù),自然是其中不可或缺的一部分,華為云EI智能數(shù)據(jù)湖FusionInsight亮相峰會(huì)并吸引關(guān)注。
FusionInsight是一個(gè)融合開(kāi)放的大數(shù)據(jù)平臺(tái),提供了貫穿數(shù)據(jù)采、存、算、管、用全生命周期的大數(shù)據(jù)平臺(tái)解決方案。FusionInsight基于X86、Taishan等CPU芯片構(gòu)建PaaS、IaaS資源,實(shí)現(xiàn)云化集約建設(shè)、彈性發(fā)放、存算分離、融合分析等,使能數(shù)據(jù)協(xié)同,簡(jiǎn)化用數(shù)方式,釋放數(shù)據(jù)價(jià)值,促進(jìn)業(yè)務(wù)增長(zhǎng),為政企客戶(hù)提供“建得快、存得省、用得好”的智能數(shù)據(jù)湖,構(gòu)建大數(shù)據(jù)基礎(chǔ)設(shè)施的黑土地,驅(qū)動(dòng)企業(yè)數(shù)字化轉(zhuǎn)型。
FusionInsight又是如何助力政企數(shù)字化轉(zhuǎn)型的呢?
一、化繁為簡(jiǎn) 大數(shù)據(jù)中心建設(shè)還能這么玩
為應(yīng)對(duì)業(yè)務(wù)浪涌,大數(shù)據(jù)中心在高峰時(shí)期的資源需快速擴(kuò)容。傳統(tǒng)大數(shù)據(jù)中心搭建一般需要22天,中間還涉及到一系列復(fù)雜而繁瑣的人為操作部署,費(fèi)時(shí)費(fèi)力且跟不上業(yè)務(wù)多變的需求。
FusionInsight實(shí)現(xiàn)全面云化,支持資源的彈性發(fā)放,彈性伸縮服務(wù)可根據(jù)業(yè)務(wù)需求自動(dòng)調(diào)整資源伸縮的配置和策略,幫助企業(yè)節(jié)約資源和人力成本輕松應(yīng)對(duì)業(yè)務(wù)浪涌,簡(jiǎn)化了大數(shù)據(jù)中心建設(shè)的步驟,資源申請(qǐng)周期也從原來(lái)的22天縮短至1小時(shí),保障了業(yè)務(wù)的穩(wěn)定高效運(yùn)作,實(shí)現(xiàn)了快速的大數(shù)據(jù)中心建設(shè)。
同時(shí),大數(shù)據(jù)上云后,數(shù)據(jù)的分析與運(yùn)維效率得到極大提升,FusionInsight還支持多集群統(tǒng)一運(yùn)維,問(wèn)題定位提效30%。
二、好鋼用在刀刃上 發(fā)揮成本價(jià)值有妙招
隨著5G、IoT、AI的高速發(fā)展導(dǎo)致數(shù)據(jù)量的暴增,傳統(tǒng)大數(shù)據(jù)中心使用原生Hadoop架構(gòu)存儲(chǔ)數(shù)據(jù),1:3的備份方式,存儲(chǔ)與計(jì)算耦合按等比例同步擴(kuò)展,業(yè)務(wù)負(fù)載不均易導(dǎo)致存儲(chǔ)利用率高、CPU利用率低,加之系統(tǒng)建設(shè)煙囪林立,數(shù)據(jù)冗余現(xiàn)象嚴(yán)重,使得存儲(chǔ)成本居高不下。
FusionInsight采用OBS存算分離技術(shù)替代Hadoop傳統(tǒng)的本地HDFS存儲(chǔ),結(jié)合華為獨(dú)有的企業(yè)級(jí)EC將副本率降低至1:1.09,存儲(chǔ)資源利用率由傳統(tǒng)的33%提升至91%,數(shù)據(jù)存儲(chǔ)周期提升2倍+,TCO下降30%,極大的降低了數(shù)據(jù)存儲(chǔ)成本,讓數(shù)據(jù)每bit性?xún)r(jià)比最優(yōu)。
三、算以致用 釋放數(shù)據(jù)價(jià)值
大數(shù)據(jù)技術(shù)涉及的組件繁雜,需要專(zhuān)業(yè)的技術(shù)開(kāi)發(fā)人員和運(yùn)維人員進(jìn)行開(kāi)發(fā)和維護(hù)。很多大數(shù)據(jù)中心低水平運(yùn)營(yíng),數(shù)據(jù)使用雜亂無(wú)章,無(wú)法跨源跨域協(xié)同分析,導(dǎo)致資源無(wú)法充分發(fā)揮價(jià)值,造成了數(shù)據(jù)中心資源的浪費(fèi)。加上運(yùn)維人才的短缺、運(yùn)維能力跟不上數(shù)據(jù)中心建設(shè)速度,使得數(shù)據(jù)中心持續(xù)發(fā)展面臨著嚴(yán)峻的挑戰(zhàn)。
FusionInsight采用湖倉(cāng)一體技術(shù),把批量處理、實(shí)時(shí)處理、交互查詢(xún)、實(shí)時(shí)查詢(xún)等20+大數(shù)據(jù)分析技術(shù)統(tǒng)一資源池,結(jié)合數(shù)據(jù)虛擬化技術(shù),實(shí)現(xiàn)一個(gè)接口、一個(gè)目錄、一份數(shù)據(jù),解決政企客戶(hù)的取數(shù)難、找數(shù)難、用數(shù)難問(wèn)題,提高分析效率2-10倍,助力政企釋放數(shù)據(jù)價(jià)值,加速數(shù)字化轉(zhuǎn)型。
FusionInsight為業(yè)界提供全融合、智能化、云化的湖倉(cāng)一體解決方案。方案包含MRS大數(shù)據(jù)、DWS數(shù)據(jù)倉(cāng)庫(kù)、CSS云搜索、GES圖計(jì)算、DAYU數(shù)據(jù)運(yùn)營(yíng)等云服務(wù);支持大數(shù)據(jù)離線(xiàn)分析、實(shí)時(shí)流處理、實(shí)時(shí)檢索、交互查詢(xún)等常見(jiàn)大數(shù)據(jù)使用場(chǎng)景,為政府、金融、運(yùn)營(yíng)商、公共安全、大企業(yè)等政企客戶(hù),提供建得快、存得省、用得好的智能數(shù)據(jù)湖,從海量數(shù)據(jù)中發(fā)現(xiàn)數(shù)據(jù)價(jià)值,加速政企智能升級(jí)。