近日，南大通用再次刷新國(guó)內(nèi)MPP數(shù)據(jù)庫(kù)集群記錄。由其構(gòu)建的國(guó)產(chǎn)新型大數(shù)據(jù)平臺(tái)規(guī)模由之前的80節(jié)點(diǎn)提升到120節(jié)點(diǎn)，平臺(tái)數(shù)據(jù)處理量達(dá)到真正的PB級(jí)，萬(wàn)億條數(shù)據(jù)處理可在小時(shí)級(jí)水平完成。這是繼2013年國(guó)內(nèi)首個(gè)超大規(guī)模行業(yè)大數(shù)據(jù)平臺(tái)問世以來(lái)，南大通用在國(guó)產(chǎn)數(shù)據(jù)庫(kù)領(lǐng)域?qū)崿F(xiàn)的又一次技術(shù)飛躍。

 

圍繞行業(yè)大數(shù)據(jù)應(yīng)用構(gòu)建全數(shù)據(jù)處理基礎(chǔ)軟件平臺(tái)，MPP數(shù)據(jù)庫(kù)及其計(jì)算框架是核心組成部分。Gbase行業(yè)大數(shù)據(jù)大規(guī)模集群處理平臺(tái)，主要面向電信、金融、安全和政務(wù)等行業(yè)的經(jīng)營(yíng)分析類業(yè)務(wù)場(chǎng)景，對(duì)海量的結(jié)構(gòu)化和半結(jié)構(gòu)化數(shù)據(jù)進(jìn)行高效存儲(chǔ)、管理，并對(duì)上層應(yīng)用提供統(tǒng)一的數(shù)據(jù)服務(wù)接口支撐。與擁有海量非結(jié)構(gòu)化數(shù)據(jù)的互聯(lián)網(wǎng)及電商企業(yè)使用Hadoop構(gòu)建大數(shù)據(jù)平臺(tái)不同，MPP技術(shù)在保證關(guān)系數(shù)據(jù)庫(kù)強(qiáng)一致性要求的同時(shí)，可實(shí)現(xiàn)復(fù)雜的大表關(guān)聯(lián)等分析功能，更好地滿足電信、金融等行業(yè)對(duì)大數(shù)據(jù)分析類應(yīng)用的需求。

Gbase新型大數(shù)據(jù)平臺(tái)是目前國(guó)內(nèi)外唯一達(dá)到百節(jié)點(diǎn)以上的單一數(shù)據(jù)庫(kù)測(cè)試平臺(tái)，在120臺(tái)國(guó)產(chǎn)中高端服務(wù)器上部署Gbase 8a MPP Cluster單一集群，使用萬(wàn)兆網(wǎng)絡(luò)互聯(lián)，支撐PB級(jí)數(shù)據(jù)查詢與分析處理，整體運(yùn)算能力和數(shù)據(jù)吞吐能力達(dá)到20TB/小時(shí)。采用Gbase 8a MPP Cluster分布式并行數(shù)據(jù)庫(kù)集群構(gòu)建新型大數(shù)據(jù)平臺(tái)，南大通用不僅能幫助用戶解決數(shù)據(jù)“大”的難題，還能實(shí)現(xiàn)數(shù)據(jù)“高”的價(jià)值。

高速度：處理萬(wàn)億條數(shù)據(jù)在小時(shí)級(jí)水平完成，數(shù)據(jù)加載性能每小時(shí)平均幾十TB;

高可用：系統(tǒng)穩(wěn)定性高，千并發(fā)級(jí)可平穩(wěn)運(yùn)行，出現(xiàn)問題節(jié)點(diǎn)可快速恢復(fù);

高擴(kuò)展：可動(dòng)態(tài)擴(kuò)展運(yùn)算節(jié)點(diǎn)，且查詢性能保持良好的線性增長(zhǎng);

高價(jià)值：成本低廉，使用X86服務(wù)器 + Linux + SAS磁盤，系統(tǒng)擴(kuò)展能力從容應(yīng)對(duì)數(shù)據(jù)膨脹挑戰(zhàn)。

Gbase新型大數(shù)據(jù)平臺(tái)采用自主可控的全國(guó)產(chǎn)軟硬件搭建，已完成內(nèi)測(cè)并實(shí)現(xiàn)穩(wěn)定運(yùn)行，是目前國(guó)內(nèi)唯一能夠支撐多行業(yè)大數(shù)據(jù)應(yīng)用的通用可靠平臺(tái)。電信運(yùn)營(yíng)商已率先啟用Gbase新型大數(shù)據(jù)平臺(tái)進(jìn)行全國(guó)經(jīng)營(yíng)分析業(yè)務(wù)的集中測(cè)試，系統(tǒng)實(shí)測(cè)800TB萬(wàn)億條數(shù)據(jù)處理可在小時(shí)級(jí)別完成。南大通用下一步將大數(shù)據(jù)平臺(tái)的測(cè)試與應(yīng)用擴(kuò)展到金融、國(guó)防、安全、海關(guān)、稅務(wù)等關(guān)系國(guó)計(jì)民生的行業(yè)中。

基于新型大數(shù)據(jù)平臺(tái)的成功搭建，南大通用近期已啟動(dòng)企業(yè)測(cè)試培訓(xùn)中心的籌建工作。測(cè)試培訓(xùn)中心現(xiàn)階段主要服務(wù)于行業(yè)用戶與合作伙伴，為其提供專業(yè)的大數(shù)據(jù)技術(shù)咨詢、系統(tǒng)軟硬件平臺(tái)測(cè)試及定制化培訓(xùn)等一體化解決方案。未來(lái)中心將發(fā)展成為產(chǎn)學(xué)研用的技術(shù)孵化器，面向科研機(jī)構(gòu)、高校及全產(chǎn)業(yè)鏈開放。