(圖為李立松參與制作《HBase企業(yè)應用開發(fā)實戰(zhàn)》書籍)
《HBase企業(yè)應用開發(fā)實戰(zhàn)》主要是系統(tǒng)講解HBase理論和實戰(zhàn)的書籍,書中重點強調了HBase在企業(yè)的實際應用,立足于企業(yè)的實際生產環(huán)境,旨在幫助企業(yè)切實解決大數據技術如何落地的問題。
作者李立松畢業(yè)于黑龍江科技大學信息與科學技術專業(yè),畢業(yè)后一直從事數據開發(fā)相關工作,對Hadoop、Hive、Hbase等有深入透徹的研究和濃厚的興趣。2013年李立松加入締元信.網絡數據,負責締元信DMP平臺的開發(fā)工作。
據李立松介紹,目前Hbase在締元信的主集群存儲了超過2萬多億結果數據,23000多個在線region,最大的單表有5000多個region,達到每天新增入庫量上百億條的規(guī)模。龐大的入庫壓力迫使締元信不斷優(yōu)化Hbase,為此開發(fā)人員們開發(fā)了Hbase分布式入庫系統(tǒng),同時還開發(fā)了hbase監(jiān)控報警系統(tǒng),對Hbase的關鍵指標進行閥值監(jiān)控,發(fā)現(xiàn)超標問題,報警系統(tǒng)會把相關信息投遞到運維部門,運維值班人員會立即通知相關人員進行故障排除。
附:
一、公司介紹
北京締元信互聯(lián)網數據技術有限公司(以下簡稱:締元信)是中國領先的第三方互聯(lián)網數據服務提供商,是行業(yè)中唯一一家國家級高新技術企業(yè)。 締元信的數據產品有SiteRating網站流量監(jiān)測系統(tǒng)、AdRating網絡廣告效果監(jiān)測系統(tǒng)、ClickRating用戶點擊統(tǒng)計系統(tǒng)等。 此外,締元信已積累4億以上可連續(xù)分析的網民行為數據,日平均數據處理能力達30億條,客戶群覆蓋國內主流媒體網站、政府行業(yè)主管機構、頂級4A代理機構及汽車、IT、快消、家電等行業(yè)的一線品牌企業(yè)。
二、DDMP(締元信數據管理平臺)介紹
締元信自主研發(fā)的DDMP數據管理平臺,基于締元信的數據統(tǒng)計業(yè)務,對中國互聯(lián)網用戶行為數據進行集中化、標準化、屬性化管理。采用了云存儲、云計算及智能語義分析技術,根據用戶的網上瀏覽和消費行為,對用戶進行消費傾向特征標識,并可通過多種API接口,將數據輸出給各種應用領域。DDMP是網絡數據挖掘分析的基礎,是各種定向廣告平臺、個性化推薦系統(tǒng)、在線商務智能分析的支撐系統(tǒng)。