從互聯(lián)網(wǎng)廣告誕生開(kāi)始，精準(zhǔn)的概念就一直為業(yè)界所討論，因?yàn)榛ヂ?lián)網(wǎng)的技術(shù)性特征使得網(wǎng)絡(luò)廣告具備了實(shí)時(shí)投放管理優(yōu)化以及針對(duì)海量數(shù)據(jù)挖掘的基礎(chǔ)。目前，在美國(guó)精準(zhǔn)廣告已經(jīng)由最初基于媒體主題頻道和頁(yè)面內(nèi)容定向，演進(jìn)到基于Cookie交換等數(shù)據(jù)分析服務(wù)，實(shí)現(xiàn)統(tǒng)一平臺(tái)管理跨網(wǎng)絡(luò)媒體并通過(guò)大數(shù)據(jù)技術(shù)實(shí)現(xiàn)精準(zhǔn)廣告投放的階段。精準(zhǔn)廣告營(yíng)銷(xiāo)已經(jīng)成為主流的營(yíng)銷(xiāo)手段。而在中國(guó)，精準(zhǔn)廣告營(yíng)銷(xiāo)方興未艾。根據(jù)相關(guān)數(shù)據(jù)統(tǒng)計(jì)，廣告精準(zhǔn)程度、受眾覆蓋規(guī)模和廣告平臺(tái)擁有的媒體資源是廣告主考量廣告平臺(tái)的三大關(guān)鍵要素，而廣告精準(zhǔn)程度以69%的比例位列廣告主考量廣告平臺(tái)的要素之首，精準(zhǔn)廣告的重要性由此可見(jiàn)一斑。

(資料來(lái)源，媒介360，2015廣告主投放數(shù)據(jù)報(bào)告)

要實(shí)現(xiàn)精準(zhǔn)廣告營(yíng)銷(xiāo)，通常需要借助DSP來(lái)進(jìn)行。由于DSP可大幅提升投放的精準(zhǔn)度，為廣告主提供跨媒介、跨平臺(tái)、跨終端的廣告投放平臺(tái)，通過(guò)數(shù)據(jù)整合、分析實(shí)現(xiàn)基于受眾的精準(zhǔn)投放，并且實(shí)時(shí)監(jiān)控不斷優(yōu)化，因此所有對(duì)廣告的真實(shí)效果有追求的行業(yè)都適合DSP。但隨著廣告主對(duì)精準(zhǔn)廣告的要求越來(lái)越高， 以及大數(shù)據(jù)技術(shù)對(duì)精準(zhǔn)廣告的巨大推動(dòng)作用，DSP平臺(tái)對(duì)實(shí)時(shí)數(shù)據(jù)處理效率的要求和對(duì)大數(shù)據(jù)技術(shù)的引入成為了當(dāng)務(wù)之急。因此，選擇合適的大數(shù)據(jù)處理平臺(tái)成為了精準(zhǔn)廣告營(yíng)銷(xiāo)用戶面臨的難題。

來(lái)自DSP的業(yè)務(wù)挑戰(zhàn)

眾成就數(shù)字傳媒集團(tuán)是央視***的廣告代理公司—三人行的母公司(以下簡(jiǎn)稱“眾成就”)，集團(tuán)下屬三人行、聞成就、在身邊三家子公司。業(yè)務(wù)覆蓋電視廣告、大內(nèi)容策劃、投資與代理、全媒體數(shù)字營(yíng)銷(xiāo)以及大數(shù)據(jù)研究與移動(dòng)產(chǎn)品開(kāi)發(fā)服務(wù)。基于19年積累的豐富廣告服務(wù)經(jīng)驗(yàn)，不斷延伸互聯(lián)網(wǎng)發(fā)展下數(shù)字營(yíng)銷(xiāo)領(lǐng)域的觸角，致力于成為提供全媒體服務(wù)的綜合性傳媒集團(tuán)。

從2012年至今，眾成就文娛內(nèi)容合作已超過(guò)220個(gè)IP;從2015年開(kāi)始，獨(dú)立投資打造《黃金線路》、《車(chē)神駕到》、《全家好拍檔》、《魅力廚房》等熱門(mén)IP，并以聯(lián)合投資、內(nèi)容代理等方式共同打造數(shù)十檔IP內(nèi)容;而伴隨著大數(shù)據(jù)時(shí)代的來(lái)臨，2015年啟動(dòng)以人為中心的IP文娛產(chǎn)業(yè)鏈布局，希望通過(guò)大數(shù)據(jù)分析產(chǎn)品開(kāi)發(fā)，構(gòu)建精準(zhǔn)DSP平臺(tái)，打通線上與線下，鏈接用戶全媒體軌跡，獲取大內(nèi)容策劃與制作的內(nèi)容方向反哺與全平臺(tái)投放策略。眾成就DMP(數(shù)據(jù)管理平臺(tái))提供數(shù)字廣告營(yíng)銷(xiāo)從曝光到轉(zhuǎn)化全流程中集數(shù)據(jù)采集、存儲(chǔ)、分析的解決方案，對(duì)外提供統(tǒng)計(jì)結(jié)果的前端展示和報(bào)表輸出功能。眾成就DMP致力于幫助廣告主圍繞用戶受眾優(yōu)化媒體資源分配，輔助廣告投放創(chuàng)意和落地頁(yè)內(nèi)容制作，并使數(shù)字廣告投放策略實(shí)時(shí)調(diào)優(yōu)成為可能，從而提升最終的銷(xiāo)售轉(zhuǎn)化。通過(guò)積累廣告主歷史投放數(shù)據(jù)并提供深度的數(shù)據(jù)全景洞察，廣告公司和廣告主結(jié)成戰(zhàn)略伙伴關(guān)系。構(gòu)建眾成就的精準(zhǔn)DSP平臺(tái)，對(duì)數(shù)據(jù)的實(shí)時(shí)處理能力提出了很高的要求：

首先，眾成就DSP平臺(tái)由于具有接入用戶眾多，用戶數(shù)量級(jí)達(dá)到了十億量級(jí)，而頁(yè)面也達(dá)到了百萬(wàn)量級(jí)，如此大規(guī)模的用戶和頁(yè)面處理對(duì)數(shù)據(jù)處理平臺(tái)的性能是一個(gè)巨大的考驗(yàn)。

其次，眾成就DSP平臺(tái)具有高并發(fā)的特性，在線投放系統(tǒng)每天需要處理百億次廣告交易，這對(duì)數(shù)據(jù)處理平臺(tái)的并發(fā)性能又提出了很高的要求。

***，AD Exchange要求競(jìng)價(jià)在100ms內(nèi)完成，這就要求數(shù)據(jù)處理平臺(tái)具有低延時(shí)的特性，因此，網(wǎng)絡(luò)帶寬的質(zhì)量有較高的需求。

華為企業(yè)云應(yīng)對(duì)挑戰(zhàn)

 

該系統(tǒng)主要包括前端投放集群和后端大數(shù)據(jù)計(jì)算集群兩部分，前端投放機(jī)業(yè)務(wù)集群使用物理機(jī)實(shí)現(xiàn)，后端計(jì)算集群部分使用彈性大數(shù)據(jù)服務(wù)(云服務(wù)器)，采用混合托管形式搭建。眾成就面向大數(shù)據(jù)后臺(tái)接入功能做了大量測(cè)試，屬于高級(jí)功能群的用戶，使用spark Client向大數(shù)據(jù)集群提交作業(yè)，后臺(tái)JDBC和Hbase client連接使用大數(shù)據(jù)。同時(shí)基于大數(shù)據(jù)+OBS的方案解決了客戶對(duì)于本地kafka和數(shù)據(jù)存儲(chǔ)的維護(hù)成本，壓力峰值滿足了眾成就的業(yè)務(wù)場(chǎng)景，最終獲得了眾成就的認(rèn)可。

該系統(tǒng)中，眾成就主要使用的業(yè)務(wù)包括hadoop client、spark client、hive+hbase，為此，華為企業(yè)云進(jìn)一步完善了功能驗(yàn)證、可擴(kuò)展性和用戶資料，同時(shí)通過(guò)測(cè)試以及個(gè)性化的定制方案滿足了客戶運(yùn)行態(tài)作業(yè)后臺(tái)監(jiān)控和多用戶使用場(chǎng)景功能需求，這些個(gè)性化的定制包括：

 混合托管搭建：前端投放集群使用物理機(jī)，后端集群使用 大數(shù)據(jù)服務(wù)

 使用多種大數(shù)據(jù)服務(wù)：hadoop 、spark 、hive+hbase

 高質(zhì)量5線全動(dòng)態(tài)BGP網(wǎng)絡(luò)保障

除此之外，華為企業(yè)云大數(shù)據(jù)解決方案還具有以下特點(diǎn)：

一，海量存儲(chǔ)，功能豐富，管理簡(jiǎn)單

PB級(jí)存儲(chǔ)容量，云端***擴(kuò)容;全面支持采集、存儲(chǔ)、分析、挖掘、深度學(xué)習(xí);一站式可視化管理，簡(jiǎn)化部署及運(yùn)維。

二，高度兼容開(kāi)源，商用性保障

全面兼容開(kāi)源技術(shù);整合主流開(kāi)源軟件，性能穩(wěn)定性提升30%以上;具有多種在線、離線分析工具。

三、企業(yè)級(jí)數(shù)據(jù)安全保護(hù)

VPC 私有網(wǎng)絡(luò)隔離、數(shù)據(jù)冗余保護(hù)，11個(gè)9存儲(chǔ)持久性、256位傳輸加密、永不進(jìn)行數(shù)據(jù)變現(xiàn)。

客戶收益

通過(guò)華為企業(yè)云大數(shù)據(jù)解決方案，眾成就DSP平臺(tái)交出了每天17億條數(shù)據(jù)記錄處理，10分鐘完成2萬(wàn)次TPS查詢，競(jìng)價(jià)的延時(shí)在60ms以內(nèi)，充分滿足了眾成就的業(yè)務(wù)需求，贏得了用戶的高度贊譽(yù)和信任。

眾成就大數(shù)據(jù)產(chǎn)品副總監(jiān)馬益民表示：“華為企業(yè)云提供靈活的云計(jì)算資源選擇，按需的資源模式可以幫助我們?cè)诹髁扛叻鍟r(shí)動(dòng)態(tài)擴(kuò)展系統(tǒng)前端投放機(jī)，并在高峰過(guò)后刪除以節(jié)省資費(fèi)，達(dá)到資源的利用***化。在大數(shù)據(jù)系統(tǒng)的搭建方面，Mapreduce服務(wù)和對(duì)象存儲(chǔ)服務(wù)幫助我們快速的實(shí)現(xiàn)了數(shù)據(jù)從流入、存儲(chǔ)、分析、展示的整個(gè)流程。其中對(duì)象存儲(chǔ)服務(wù)良好的數(shù)據(jù)高可用性，給了以數(shù)據(jù)為核心資產(chǎn)的團(tuán)隊(duì)足夠的安全感，同時(shí)比起將數(shù)據(jù)存儲(chǔ)在本地云硬盤(pán)上又節(jié)省了很大一筆開(kāi)支。而Mapreduce服務(wù)與對(duì)象存儲(chǔ)服務(wù)良好的兼容性使得我們?cè)谇逑春头治鰯?shù)據(jù)時(shí)體驗(yàn)更加流暢，清洗處理后的數(shù)據(jù)可以***時(shí)間存入RDS做后續(xù)分析。另外，Mapreduce服務(wù)天然支持Spark內(nèi)存運(yùn)算，幫助我們?cè)跀?shù)據(jù)挖掘算法的應(yīng)用上提供了非常好的支持。通過(guò)深入的合作，華為企業(yè)云與眾成就達(dá)成了良好的合作模式與長(zhǎng)期信賴。華為企業(yè)云迅速的服務(wù)反饋機(jī)制讓人佩服，眾多項(xiàng)目的高效及時(shí)上線為眾成就的客戶帶來(lái)切實(shí)有效的營(yíng)銷(xiāo)服務(wù)與有價(jià)值的項(xiàng)目參考數(shù)據(jù)，成功為用戶、品牌與媒體搭建了廣告效果卓越且具有高度信任的服務(wù)平臺(tái)。希望與華為企業(yè)云的合作能繼續(xù)取得更大進(jìn)展，雙方共同成長(zhǎng)。“