大數(shù)據(jù)應(yīng)具備什么樣的解決方案
中關(guān)村在線 發(fā)表于:13年02月27日 10:23 [轉(zhuǎn)載] 中關(guān)村在線
海量數(shù)據(jù)的時(shí)代正在到來(lái),在這種環(huán)境下,需要有新的技術(shù)手段來(lái)應(yīng)對(duì)大數(shù)據(jù)帶來(lái)的挑戰(zhàn),并充分挖掘其潛在價(jià)值,實(shí)現(xiàn)業(yè)務(wù)的進(jìn)一步發(fā)展和保持企業(yè)的競(jìng)爭(zhēng)優(yōu)勢(shì)。作為半導(dǎo)體領(lǐng)導(dǎo)廠商,英特爾擁有完整的涵蓋軟硬件平臺(tái)的大數(shù)據(jù)解決方案。
根據(jù)IDC預(yù)測(cè),全球的數(shù)據(jù)使用量到2020將將會(huì)增長(zhǎng)44倍,達(dá)到35.2ZB(1ZB=10億TB)。Facebook、Twitter、微博等各種社交平臺(tái)的海量數(shù)據(jù),以及視頻通訊、醫(yī)療影像、地理信息和監(jiān)控錄像等視頻內(nèi)容也會(huì)極具增加,加之傳感器、RFID閱讀器、導(dǎo)航終端等非傳統(tǒng)IT設(shè)備和移動(dòng)設(shè)備,都將產(chǎn)生越來(lái)越多的數(shù)據(jù)。增加的這些數(shù)據(jù)當(dāng)中,有80%的數(shù)據(jù)屬于非結(jié)構(gòu)化。
面對(duì)這些巨變,傳統(tǒng)的IT技術(shù)并不足以應(yīng)對(duì)這種新挑戰(zhàn),傳統(tǒng)的關(guān)系型數(shù)據(jù)庫(kù)以及桌面BI分析軟件處理的結(jié)構(gòu)化數(shù)據(jù),其容量一般都在GB級(jí)別,無(wú)法從更大的數(shù)據(jù)集中發(fā)現(xiàn)有意義的信息。另外,需要處理的目標(biāo)數(shù)據(jù)也一直在增長(zhǎng),傳統(tǒng)技術(shù)無(wú)法適應(yīng)這種擴(kuò)展性。
那么,究竟什么樣的技術(shù)和解決方案才能勝任這種挑戰(zhàn)呢,我們認(rèn)為,適合大數(shù)據(jù)時(shí)代需求的解決方案,一般要具備以下條件:
支持PB級(jí)別數(shù)據(jù)的處理和分析
支持結(jié)構(gòu)和非結(jié)構(gòu)化數(shù)據(jù)
支持萬(wàn)級(jí)每秒數(shù)據(jù)查詢
支持高可靠性系統(tǒng)
支持高頻率統(tǒng)計(jì)分析
也就是說(shuō),對(duì)于大量的結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù),支持可變的數(shù)據(jù)結(jié)構(gòu)和高效的數(shù)據(jù)導(dǎo)入、查詢、統(tǒng)計(jì)分析。作為引領(lǐng)服務(wù)器發(fā)展方向的英特爾來(lái)說(shuō),目前它擁有在Apache開(kāi)源版基礎(chǔ)上修訂的發(fā)行版和免費(fèi)版兩個(gè)Hadoop版本,并在GitHub維護(hù)著Project Panthera開(kāi)源項(xiàng)目,其中包括即時(shí)分析、基于HBase的文檔存儲(chǔ)、基于Hive/MapReduce的分析SQL引擎、HiBench和 HiTune等子項(xiàng)目。
英特爾Hadoop發(fā)行版組成
為何談大數(shù)據(jù)的時(shí)候我們要重點(diǎn)談Hadoop呢?因?yàn)镠adoop是目前為止大數(shù)據(jù)解決方案的主流平臺(tái),也是順應(yīng)未來(lái)大數(shù)據(jù)和云計(jì)算環(huán)境的平臺(tái)。接下來(lái),我們將為大家介紹英特爾發(fā)行版Hadoop在應(yīng)對(duì)大數(shù)據(jù)挑戰(zhàn)方面的獨(dú)特優(yōu)勢(shì)。
公司簡(jiǎn)介 | 媒體優(yōu)勢(shì) | 廣告服務(wù) | 客戶寄語(yǔ) | DOIT歷程 | 誠(chéng)聘英才 | 聯(lián)系我們 | 會(huì)員注冊(cè) | 訂閱中心
Copyright © 2013 DOIT Media, All rights Reserved. 北京楚科信息技術(shù)有限公司 版權(quán)所有.