唯品會及才云科技在微軟全球頂級技術(shù)峰會BUILD 2018上向全球介紹其AI創(chuàng)新
唯品會:關(guān)注核心業(yè)務(wù),用AI降本增效
競爭激烈的電商行業(yè)向來是技術(shù)創(chuàng)新的最前沿,基于大數(shù)據(jù)與人工智能的用戶畫像與商品推薦系統(tǒng)并非新鮮事物,甚至已經(jīng)成為行業(yè)標(biāo)配。通過這些最新的技術(shù),用戶可以獲得更個性化與精準(zhǔn)的內(nèi)容與服務(wù)。
“當(dāng)我們走向海外拓展全球市場時,業(yè)務(wù)對AI系統(tǒng)的要求與經(jīng)典電商有非常大的差異。我們會面臨很多獨特的挑戰(zhàn)” 唯品會海外出口事業(yè)部總經(jīng)理鐘衛(wèi)介紹到:“通常我們希望技術(shù)平臺能深度理解用戶的需求,同時對商品與內(nèi)容快速充分解構(gòu)。這種對用戶的理解與供給的解構(gòu)需要是多維度的,例如我們每個人在不同的場合與場景有非常不同的需求;同時覆蓋超廣范圍,并提供超精準(zhǔn)的描述?!?/p>
然而,在面對陌生而全新的海外市場時,由于語言、環(huán)境、生活方式、消費習(xí)慣、文化背景與商品系統(tǒng)等諸多方面的巨大差異,所有數(shù)字化精準(zhǔn)營銷系統(tǒng)中的標(biāo)簽、畫像、推薦算法,都必須要根據(jù)當(dāng)?shù)厥袌龅膶嶋H情況進(jìn)行重新篩選、跟蹤和定制。
另一方面,面向不同區(qū)域市場,電商平臺的商品布局也有著天壤之別:瑞士的奶酪與韓國的辣白菜在歐洲和東南亞市場上顯然占有截然不同的權(quán)重。因此,面向全球各地市場,平臺需要分門別類地對各地上架商品的每一張圖片信息進(jìn)行識別和標(biāo)簽登記,確保消費者能夠準(zhǔn)確、快速地檢索到真正滿足自己需要的商品。
“無論在中國還是海外市場,推薦算法都是用來確保電商平臺高效運營,以及良好用戶體驗的核心業(yè)務(wù)系統(tǒng),是我們進(jìn)軍海外的重中之重?!蔽ㄆ窌娦l(wèi)介紹說,“這其中涉及到極大的數(shù)據(jù)處理量和很多重復(fù)性的篩選工作,因此我們希望能夠交給云計算和人工智能來完成,并且要求解決方案能夠具有面向各地市場的靈活適應(yīng)能力,可以將一次開發(fā)的成果復(fù)制到全球各地?!?/p>
才云科技:讓天下沒有難用的AI
最終承接唯品會全球化AI項目的團(tuán)隊,是微軟合作伙伴才云科技。才云科技成立于2015年,雖然成立不久,但其核心團(tuán)隊在人工智能領(lǐng)域有著深厚的技術(shù)積累與國際影響力。才云科技的核心創(chuàng)始團(tuán)隊的六名成員有的出自卡耐基梅隆大學(xué),有的曾在谷歌、亞馬遜一線從事人工智能、容器、云計算研究?,F(xiàn)在,才云科技是微軟合作伙伴,目前服務(wù)的客戶也是清一色的“500強”企業(yè)。
“我們的志向是讓天下沒有難用的AI?!辈旁瓶萍糃EO張鑫介紹說,“我們開發(fā)的算法,能夠?qū)⑵髽I(yè)數(shù)據(jù)中的價值發(fā)掘出來,以人工智能推動企業(yè)的數(shù)字化轉(zhuǎn)型?!?/p>
微軟全球執(zhí)行副總裁沈向洋博士將促成今天人工智能爆發(fā)式發(fā)展的三大因素歸納為:豐富的數(shù)據(jù)積累、大規(guī)模的云計算基礎(chǔ)設(shè)施,以及強大的算法。
張鑫分析說:“唯品會本身的業(yè)務(wù)都在線上,已經(jīng)積累了非常豐富的數(shù)據(jù)金礦;微軟的Azure云服務(wù)提供了覆蓋全球,特別是針對AI優(yōu)化的人工智能服務(wù)和工具;而我們所做的,就是發(fā)揮我們的技術(shù)優(yōu)勢,打造出滿足唯品會業(yè)務(wù)需求的人工智能算法, 打通將AI技術(shù)送達(dá)業(yè)務(wù)場景的‘最后一公里’。”
畢業(yè)于卡耐基梅隆的張鑫博士介紹說:”才云的長項是容器化AI技術(shù),底層容器化的微服務(wù)平臺產(chǎn)品是才云Compass;其上是我們企業(yè)級AI平臺Clever;而我們將其與Microsoft Azure深度整合,整體為唯品會全球化項目提供了堅實的基礎(chǔ)?!?/p>
“唯品會全球化AI系統(tǒng)開發(fā)中有很多獨特的挑戰(zhàn),結(jié)合才云在AI算法與產(chǎn)品上的積累與微軟開放高效的最新技術(shù)Azure Batch AI,我們最終滿足了唯品會全部四項核心需求”才云科技AI解決方案負(fù)責(zé)人李一帆介紹道: ”全球化業(yè)務(wù)需要AI系統(tǒng)對超大數(shù)據(jù)量進(jìn)行極快速處理。即以之前百分之一的時間,處理數(shù)十倍的數(shù)據(jù),而這些數(shù)據(jù)的來源與最終精煉的結(jié)果針對每個國家與地區(qū)都不同;很高興能結(jié)合微軟Azure與Azure Batch AI技術(shù),經(jīng)過六個月的艱苦開發(fā),我們最終滿足了唯品會的需求?!?/p>
Azure Batch AI:以極簡方式提高算力
實現(xiàn)人工智能的基礎(chǔ)是對于大量數(shù)據(jù)的機器學(xué)習(xí),為了實現(xiàn)更高的效率和更低的成本,唯品會和才云科技選擇了微軟智能云Azure作為運行平臺。
唯品會早在2016年就已經(jīng)與微軟達(dá)成戰(zhàn)略合作,利用微軟智能云Azure的PaaS級數(shù)據(jù)庫服務(wù)、大數(shù)據(jù)服務(wù)、CDN服務(wù)和虛擬機支持其電商業(yè)務(wù)在國內(nèi)的運行。面對唯品會進(jìn)軍全球市場的需要,微軟智能云Azure廣泛覆蓋全球52個區(qū)域、并且能夠?qū)崿F(xiàn)技術(shù)平臺無縫銜接的種種優(yōu)勢再次體現(xiàn)了出來。
唯品會海外出口事業(yè)部總經(jīng)理鐘衛(wèi)介紹說:“在進(jìn)軍海外的過程中選擇微軟智能云Azure來部署人工智能解決方案幾乎是個必然的選擇。舉例來說,如果我選擇自建數(shù)據(jù)中心的方式進(jìn)行部署,首先就涉及到采購設(shè)備和人員的大筆開銷。比如說購能買3臺服務(wù)器、按照每臺機器5個虛機計算,那么同時只能有15個并行任務(wù),而且到第二年,硬件升級、機器折價,硬件虧損就是很大的成本。而現(xiàn)在采用Azure Batch AI服務(wù),只需按照用量付費,以很低的成本就可以選擇配置最好、最新的GPU資源,只要有需要,我隨時可以調(diào)用上千個GPU的資源,何樂而不為呢?”
“Azure Batch AI服務(wù)是微軟智能云上的一項托管服務(wù),允許數(shù)據(jù)科學(xué)家和人工智能開發(fā)者以極簡方式利用包括GPU在內(nèi)的Azure算力資源對人工智能模型進(jìn)行訓(xùn)練。數(shù)據(jù)科學(xué)家可以專注于算法,而對于算力調(diào)用只需明確任務(wù)需求,輸入、存儲、輸出等設(shè)置,其它所有與基礎(chǔ)設(shè)施管理、規(guī)??s放、批量工作任務(wù)等等繁雜的后臺工作都能可以交給Azure Batch AI自動完成?!蔽④浌竟こ虉F(tuán)隊首席項目經(jīng)理Alex Sutton介紹說。
“從我們的實際操作感受來看,我們的人員只懂業(yè)務(wù),并不需要去關(guān)心和管理配置多少臺虛機、如何搭建容器這樣的細(xì)節(jié),系統(tǒng)會根據(jù)我們的工作負(fù)載自動部署、自動縮放來完成我們的訓(xùn)練任務(wù)?!?鐘衛(wèi)介紹說。
而對于必須要關(guān)注底層方案的才云科技來說,他們對于Azure Batch AI 的好感度更高:“影響AI的速度其實來自三個方面:運算速度、網(wǎng)絡(luò)速度、存儲速度。我們自己的平臺也可以通過部署GPU加速運算,但我們發(fā)現(xiàn)最后的瓶頸出現(xiàn)在網(wǎng)絡(luò)上。在分布式計算中,瓶頸變成了帶寬而不是處理器。雖然我們將網(wǎng)卡升級到千兆、萬兆,但最后發(fā)現(xiàn),還是Azure Batch AI更好用,因為它在網(wǎng)絡(luò)和存儲方面做了很多真正有技術(shù)含量的底層優(yōu)化,不僅是提升了處理速度,更確保了綜合性能,這樣的優(yōu)勢是無可替代的?!?/p>
通過在Azure Batch AI服務(wù)上運行才云科技的容器化AI解決方案,如今唯品會的海外業(yè)務(wù)團(tuán)隊效率提升了85%;系統(tǒng)對100萬張圖片進(jìn)行分析標(biāo)簽化處理,耗時縮短到之前的1%;而才云科技在開發(fā)算法模型上通常需要耗時2個月完成的深度學(xué)習(xí)訓(xùn)練,現(xiàn)在只要1周就能完成,AI系統(tǒng)的迭代速度獲得了極大的提升。
“Azure的云平臺、Azure Batch AI服務(wù)與我們開發(fā)的系統(tǒng)之間都有非常清晰的API接口、SDK接口,讓我們可以像搭積木一樣構(gòu)建定制化的人工智能解決方案,方便高效地滿足用戶的需求。”才云科技張鑫說。
與微軟合作,開源和時差都不是障礙
張鑫領(lǐng)導(dǎo)的才云科技從骨子里是一支熱愛開源的頂級極客創(chuàng)業(yè)團(tuán)隊,但在唯品會項目的合作中,他們卻實現(xiàn)了與微軟這家軟件巨頭的無障礙溝通和業(yè)務(wù)的無縫銜接。
唯品會海外項目始于2017年10月,微軟中國負(fù)責(zé)合作伙伴的OCP ( One Commercial Partner)團(tuán)隊經(jīng)過多番權(quán)衡,向唯品會推薦了其合作伙伴才云科技。在過去的幾個月中,唯品會、才云科技,微軟中國OCP團(tuán)隊及微軟總部Azure Batch AI產(chǎn)品組專家進(jìn)行了頻繁的技術(shù)溝通。
為了盡快將各方需求和技術(shù)能力統(tǒng)一起來,在解決方案上達(dá)成一致,微軟中國OCP團(tuán)隊,唯品會、才云科技派出最好的工程師團(tuán)隊,前往美國雷德蒙德的微軟總部,與Azure Batch AI產(chǎn)品組頂尖科學(xué)家一起,進(jìn)行了整整三天的Hackfest駭客聚會。在不斷的相互挑戰(zhàn)與合作中,在一行行的代碼開發(fā)與驗證中,這些來自全球最頂尖的數(shù)據(jù)科學(xué)家徹夜不停的研究。“那天我們從微軟Building 11出來已經(jīng)是雷德蒙德凌晨3點,在那個時刻,我們與客戶唯品會及合作伙伴才云科技相互敬佩,惺惺相惜,難忘我們同心協(xié)力找到解決項目核心挑戰(zhàn)的方案。”來自微軟Azure Batch AI的李笠博士介紹說。
唯品會、才云科技與微軟開展Hackfest至凌晨三點
“這個項目能夠取得今天的進(jìn)展,是各方共同努力的結(jié)果,包括作為客戶的唯品會的大力支持,鐘衛(wèi)作為負(fù)責(zé)人也和微軟在美國的技術(shù)團(tuán)隊我們一起熬夜到了凌晨?!睆場慰偨Y(jié)說,“就像華山論劍,高手過招,如此開誠布公的討論與合作,讓我們各方都能真誠相待,同舟共濟(jì)。這次合作徹底改變了我們傳統(tǒng)觀念中對微軟的認(rèn)識。”
作為特別演講嘉賓,飛往美國參加微軟年度全球技術(shù)盛宴BUILD 2018的路上。張鑫博士讀了微軟CEO Satya Nadella的新書《Hit Refresh》 – “今日的微軟如此開放,讓我們印象深刻。以唯品會的合作為起點,我們期待與微軟不斷加強了解與合作,為更多客戶提供更好的服務(wù)?!?– 天下沒有難用的AI。