該項目采用“1+1+1+N”的架構(gòu),也就是一個云資源中心、一個城市大腦、一個運營中心和N個智慧應(yīng)用體系架構(gòu),涉及了城市全景、城市治理、生態(tài)環(huán)境等6個主題庫,通過多維度可視化的數(shù)據(jù),為城市運行科學決策提供數(shù)據(jù)依據(jù)。
智慧大腦的項目很多,但是“霍山縣智慧大腦”項目緊緊抓住數(shù)據(jù)這個核心主體,通過數(shù)據(jù)的匯聚、治理,用全面可視化的方式,實現(xiàn)了城市數(shù)字化運行、管理和監(jiān)管體系。
鑒于該項目的優(yōu)異表現(xiàn),今年霍山縣智慧城市項目被成功推廣并復(fù)制到了安徽葉集縣智慧城市的項目。
第三個是海南數(shù)據(jù)產(chǎn)品超市項目。
作為國務(wù)院頒布的全國公共數(shù)據(jù)資源開發(fā)利用試點省市,海南省大數(shù)據(jù)管理局充分利用海南省已建成的“七個一”大數(shù)據(jù)能力支撐底座,并基于天翼云技術(shù)能力,搭建全省統(tǒng)一,功能強大的數(shù)據(jù)產(chǎn)品開發(fā)利用平臺,推出了海南數(shù)據(jù)產(chǎn)品超市,有序開放公共數(shù)據(jù)資源和電子政務(wù)平臺能力資源。中國電信獲得特許期內(nèi)項目的獨家運營權(quán)。
這是全國首例,也是一個探索性的實施工程。天翼云結(jié)合自身多年的數(shù)據(jù)治理和運營經(jīng)驗,與海南省大數(shù)據(jù)管理局聯(lián)合打造了數(shù)據(jù)業(yè)務(wù)運營服務(wù)平臺建設(shè)方案。在保障數(shù)據(jù)安全的前提下,引進多方安全計算、聯(lián)邦學習等多種前沿技術(shù),實現(xiàn)多路徑多元化融合技術(shù)創(chuàng)新,提升數(shù)據(jù)應(yīng)用價值。
該項目以“前店后廠”架構(gòu)新模式,實現(xiàn)數(shù)據(jù)交易全流程閉環(huán)。其中,“后廠”由大數(shù)據(jù)平臺、數(shù)據(jù)中臺構(gòu)成,搭載隱私計算、機器學習等技術(shù),實現(xiàn)數(shù)據(jù)的匯聚、治理,以及數(shù)據(jù)產(chǎn)品開發(fā)全流程?!扒暗辍敝浮皵?shù)據(jù)交易服務(wù)平臺”,通過用戶、產(chǎn)品、需求、交易、計費等管理模塊,拉通數(shù)據(jù)供需匹配、交易撮合、風險防控、交易結(jié)算等環(huán)節(jié)。
先行者的這些案例,代表著當今行業(yè)大數(shù)據(jù)應(yīng)用水平。
他們或重視基礎(chǔ)平臺的搭建,或者重視基于大數(shù)據(jù)的應(yīng)用實踐,從數(shù)據(jù)開放的高度,對于數(shù)字創(chuàng)新和應(yīng)用進行部署,是行業(yè)大數(shù)據(jù)應(yīng)用現(xiàn)狀的真實寫照,也是天翼云大數(shù)據(jù)能力的真實展示。
探班基礎(chǔ)設(shè)施架構(gòu)
先行者的案例固然精彩,但是未必可以照搬,所謂臨淵羨魚不如退而結(jié)網(wǎng),打好大數(shù)據(jù)應(yīng)用的基礎(chǔ)仍然至關(guān)重要,對此,天翼云大數(shù)據(jù)做了什么?又是如何做的呢?
如今,天翼云被稱為國家隊云服務(wù)商,作為國家隊大數(shù)據(jù)需要具備業(yè)界領(lǐng)先的技術(shù)水平和實力,用一個詞形容就是“頂天立地”。
“頂天”意味著要圍繞國家重大戰(zhàn)略需求,實現(xiàn)技術(shù)上持續(xù)創(chuàng)新突破,要充分考慮到芯片基礎(chǔ)設(shè)施自主可控等因素;“立地”則是圍繞行業(yè)應(yīng)用場景,實現(xiàn)大數(shù)據(jù)產(chǎn)品的應(yīng)用落地。
侯圣文表示:“我們經(jīng)歷了起步、創(chuàng)新、突破三個階段,我們大數(shù)據(jù)綜合解決方案核心優(yōu)勢,總結(jié)起來有三個關(guān)鍵詞:強底座、建生態(tài)、重場景?!?/p>
什么樣的大數(shù)據(jù)底座可以稱為強呢?對此,天翼云將其概括為下幾個方面:
(1)一云多芯:核心引擎滿足國內(nèi)外主流CPU、操作系統(tǒng)、數(shù)據(jù)庫應(yīng)用適配,實現(xiàn)信息技術(shù)應(yīng)用創(chuàng)新;
(2)智能運維:依托專家經(jīng)驗沉淀智能運維平臺,滿足大數(shù)據(jù)集群80%的運維需求,助力集群管理效率至少提升5倍以上;
(3)高安全高穩(wěn)定:采用Kerberos+Ranger高安全方案,實現(xiàn)數(shù)據(jù)底座全域身份認證以及庫、表、字段級數(shù)據(jù)細粒度的權(quán)限管控;提供完備的數(shù)據(jù)安全治理方案,包括數(shù)據(jù)脫敏、分級分類、數(shù)據(jù)操作審計等數(shù)據(jù)安全防護能力;提供高性能高穩(wěn)定的大數(shù)據(jù)核心組件,滿足實時及離線存算需求。
(4)跨地域多中心架構(gòu)容災(zāi)能力:設(shè)計跨地域多中心架構(gòu),研發(fā)遷移工具實現(xiàn)數(shù)據(jù)安全穩(wěn)定遷移,保證數(shù)據(jù)安全高效流轉(zhuǎn)與容災(zāi)。
這個起點非常高。僅國內(nèi)外主流CPU適配并且保障高性能就不是一件簡單的事情,這就是所謂國家隊需要有的底蘊和實力。
“建生態(tài)“就是要把底座的基礎(chǔ)能力轉(zhuǎn)化為大數(shù)據(jù)的生產(chǎn)力,天翼云大數(shù)據(jù)為此攜手生態(tài)合作伙伴,構(gòu)建了大數(shù)據(jù)平臺、實時計算平臺、數(shù)據(jù)管理中臺、數(shù)據(jù)資產(chǎn)、BI等全棧的產(chǎn)品體系,為行業(yè)綜合性大數(shù)據(jù)應(yīng)用項目奠定了堅實的軟硬件平臺基礎(chǔ)。
有了這個生態(tài)平臺的基礎(chǔ),行業(yè)用戶、開發(fā)者就可以利用他們所熟悉的硬件、開源軟件和工具,為上層的應(yīng)用場景提供支持。
“重場景”,天翼云的思路是逐步建立從行業(yè)“通用”技術(shù)方案到行業(yè)“專用”解決方案,如今已經(jīng)沉淀了眾多的行業(yè)解決方案,隨時為行業(yè)企業(yè)用戶提供選擇和服務(wù)。
數(shù)據(jù)治理實現(xiàn)升華
技術(shù)平臺也僅僅是萬里長征的第一步,用好數(shù)據(jù)、發(fā)揮數(shù)據(jù)創(chuàng)新價值,還需要從行業(yè)大數(shù)據(jù)實際應(yīng)用情況出發(fā),解決一些具體卡脖子的難題。
分析了行業(yè)大數(shù)據(jù)應(yīng)用現(xiàn)狀,天翼云大數(shù)據(jù)總結(jié)了大數(shù)據(jù)行業(yè)應(yīng)用面臨的主要問題:大數(shù)據(jù)行業(yè)新工具、新算法、新引擎不斷涌現(xiàn),需要用戶跟上技術(shù)發(fā)展步伐,不斷創(chuàng)新數(shù)據(jù)處理、分析的方法,為業(yè)務(wù)創(chuàng)新提供思路和支撐。
侯圣文指出:如果用戶自研大數(shù)據(jù)平臺、數(shù)據(jù)中臺等產(chǎn)品,去解決數(shù)據(jù)開發(fā)、治理、分析、處理等方面的問題,成本高、難度大;尤其涉及多源異構(gòu)數(shù)據(jù)的準確性、完整性、一致性等問題,數(shù)據(jù)治理難度很大,需要數(shù)據(jù)清洗、去重、糾錯等方面的經(jīng)驗積累。
此外,數(shù)據(jù)增長快也給存儲與計算技術(shù)帶來很大的挑戰(zhàn)。隨著數(shù)據(jù)規(guī)模增長、開放程度擴大、共享需求的凸顯,數(shù)據(jù)安全和隱私保護要求越來越高,需要數(shù)據(jù)加解密、訪問控制、審計跟蹤、隱私計算等技術(shù)應(yīng)用的支持,對數(shù)據(jù)使用政策、隱私保護法規(guī)、監(jiān)管也提出了更高要求。
為了讓行業(yè)用戶更加專注業(yè)務(wù),通過屏蔽底層復(fù)雜技術(shù),天翼云推出了大數(shù)據(jù)平臺、數(shù)據(jù)中臺等產(chǎn)品。其中,天翼云大數(shù)據(jù)平臺可提供快速部署、便捷維護的HDFS、YARN、Hudi、Hive和Flink等高性能的大數(shù)據(jù)組件以及智能運維管理平臺,并完成鯤鵬、海光、麒麟、CTyunOS、統(tǒng)信等國產(chǎn)化適配,具備湖倉一體、一云多芯、智能化運維等功能特點,解決使用者在數(shù)據(jù)存儲、計算、集群運維等方面難題。
相比,天翼云大數(shù)據(jù)管理平臺以全托管方式,為行業(yè)用戶提供一站式、開箱即用的大數(shù)據(jù)開發(fā)與數(shù)據(jù)資產(chǎn)管理工具,解決了數(shù)據(jù)集成、數(shù)據(jù)建模、數(shù)據(jù)處理、數(shù)據(jù)治理、數(shù)據(jù)服務(wù)等關(guān)鍵技術(shù)問題,解決企業(yè)轉(zhuǎn)型時面臨的數(shù)據(jù)采集、開發(fā)、管理、安全等需求。目前,天翼云結(jié)合公安行業(yè)場景,成功打造了公安行業(yè)數(shù)據(jù)中臺,并通過公安三所測評認證,成為全國4家通過該認證企業(yè)之一。
“對企業(yè)用戶來說,我們建議,積極擁抱變化,破除傳統(tǒng)思路,一方面需進一步思考如何利用好、管理好數(shù)據(jù),實現(xiàn)數(shù)據(jù)提升企業(yè)內(nèi)部管理;另一方面,結(jié)合自身優(yōu)勢,引入大數(shù)據(jù)等先進技術(shù)與產(chǎn)品,拓展更多創(chuàng)新應(yīng)用場景,促進企業(yè)業(yè)務(wù)高質(zhì)量發(fā)展。”侯圣文說。
小結(jié)
從基礎(chǔ)支撐平臺,到數(shù)據(jù)開發(fā)和應(yīng)用平臺,再到先行者的應(yīng)用實踐,天翼云大數(shù)據(jù)用自己能力描繪了行業(yè)大數(shù)據(jù)應(yīng)用的畫像。都說這個世界并不缺乏美,缺乏的是發(fā)現(xiàn)美的眼睛。如今行業(yè)大數(shù)據(jù)應(yīng)用也是如此,隱藏在數(shù)據(jù)背后的價值有待行業(yè)用戶的發(fā)現(xiàn),天翼云大數(shù)據(jù)國家隊實力將經(jīng)受哪些其他行業(yè)用戶的考驗,讓我們拭目以待!