今天，有一群程序員像往常一樣穿梭在西二旗的地鐵，不一樣的是他們?cè)诒几耙粓?chǎng)大咖分享、硬通貨十足的“技術(shù)盛宴”。 4月4日，以“揭秘春晚紅包背后的技術(shù)”為主題的第七屆百度技術(shù)開放日舉行。一如往年，開放日現(xiàn)場(chǎng)十分火爆，吸引了來自英特爾、IBM、清華、北航、北科大等產(chǎn)學(xué)研用機(jī)構(gòu)的專家、學(xué)者和技術(shù)愛好者，500余人的會(huì)場(chǎng)座無虛席，過道也站滿了人。

[[261534]]

百度高級(jí)副總裁、AI技術(shù)平臺(tái)體系(AIG)和基礎(chǔ)技術(shù)體系（TG）總負(fù)責(zé)人王海峰

春晚紅包項(xiàng)目對(duì)百度而言是一次大考，背后是強(qiáng)大的技術(shù)積累。現(xiàn)場(chǎng)，百度高級(jí)副總裁、AI技術(shù)平臺(tái)體系(AIG)和基礎(chǔ)技術(shù)體系（TG）總負(fù)責(zé)人王海峰在致辭中表示，“春晚紅包項(xiàng)目的成功，是百度綜合技術(shù)實(shí)力的成功，是多年來在云計(jì)算、大數(shù)據(jù)、人工智能等多方面的技術(shù)積累，以及春節(jié)前一個(gè)多月時(shí)間大家共同努力的成果。百度在積累和提升技術(shù)實(shí)力的同時(shí)，也致力于技術(shù)的平臺(tái)化。我們所有的技術(shù)不僅僅要滿足特定產(chǎn)品的業(yè)務(wù)需求，也要把平臺(tái)化做得更好。我們整合基礎(chǔ)技術(shù)體系和AI技術(shù)平臺(tái)體系，打造百度在AI時(shí)代的技術(shù)平臺(tái)，加強(qiáng)平臺(tái)化當(dāng)中技術(shù)平臺(tái)的能力。這樣的話，百度的技術(shù)一方面更加靈活高效地服務(wù)于百度自己的業(yè)務(wù)，同時(shí)我們也希望把這些技術(shù)與社會(huì)各界，尤其是我們的合作伙伴、開發(fā)者朋友以及學(xué)術(shù)界分享，我們一起推動(dòng)技術(shù)的進(jìn)步，也推動(dòng)社會(huì)的進(jìn)步。”

技術(shù)分享環(huán)節(jié)，侯震宇率先為在場(chǎng)觀眾詳解保障整場(chǎng)春晚項(xiàng)目不宕機(jī)的技術(shù)“頂層設(shè)計(jì)”。他指出在時(shí)間短、技術(shù)難、場(chǎng)景復(fù)雜、要求高四大挑戰(zhàn)的情況下，百度春晚搶紅包環(huán)節(jié)的流暢進(jìn)行，得益于百度全系統(tǒng)全鏈路的優(yōu)化設(shè)計(jì)、優(yōu)良技術(shù)積累的護(hù)航、以及大規(guī)模工程能力的保障。

百度副總裁 侯震宇

百度技術(shù)委員會(huì)理事長(zhǎng)陳尚義表示，技術(shù)開放日始于2012年，是百度與合作伙伴、開發(fā)者、學(xué)術(shù)和產(chǎn)業(yè)研究機(jī)構(gòu)之間的交流平臺(tái)。

[[261535]]
百度技術(shù)委員會(huì)理事長(zhǎng)陳尚義

全系統(tǒng)全鏈路的優(yōu)化設(shè)計(jì)：整體架構(gòu)設(shè)計(jì)與優(yōu)化、統(tǒng)一前端接入優(yōu)化、極端并發(fā)的數(shù)據(jù)庫(kù)優(yōu)化

春晚極端并發(fā)場(chǎng)景是對(duì)技術(shù)實(shí)力最高級(jí)別的檢驗(yàn)。春晚直播期間，數(shù)億用戶參與互動(dòng)，每秒鐘千萬級(jí)并發(fā)請(qǐng)求，全球觀眾參與百度春晚紅包互動(dòng)次數(shù)達(dá)208億。基于此，百度在這次春晚紅包項(xiàng)目架構(gòu)設(shè)計(jì)中采用的是以大化小、隔離、彈性、智能、動(dòng)態(tài)、自愈，同時(shí)高效控制總成本的設(shè)計(jì)理念。

[[261536]]

在架構(gòu)設(shè)計(jì)方面，百度架構(gòu)師及工程師將整體系統(tǒng)拆解成四大業(yè)務(wù)系統(tǒng)和大量基礎(chǔ)設(shè)施與服務(wù)。為了提升觀眾參與的質(zhì)量，百度提出了多項(xiàng)具有針對(duì)性的優(yōu)化方案。在春晚紅包環(huán)節(jié)，觀眾可以通過搖一搖、信息流、視頻、語音、搜索等多樣化形式參與。

除了這些基本的架構(gòu)設(shè)計(jì)與優(yōu)化外，還有統(tǒng)一前端接入優(yōu)化、安全防攻擊、資源協(xié)調(diào)和動(dòng)態(tài)調(diào)度能力，全鏈路壓測(cè)與攻防，以及內(nèi)測(cè)、預(yù)案與劇本等關(guān)鍵技術(shù)和方案，才保證了春晚“如絲般順滑”的搖紅包體驗(yàn)。

據(jù)介紹，BFE（百度統(tǒng)一前端）是百度統(tǒng)一的七層流量轉(zhuǎn)發(fā)平臺(tái)。在春晚紅包項(xiàng)目中，BFE是IDC流量的統(tǒng)一入口，提供流量調(diào)度、接入轉(zhuǎn)發(fā)、限流、應(yīng)用層防火墻等能力。每日轉(zhuǎn)發(fā)請(qǐng)求數(shù)接近1萬億。基于BFE的快速開發(fā)能力，可以通過將部分業(yè)務(wù)邏輯前置到BFE，降低了整體的系統(tǒng)開銷。同時(shí)基于自研專用流式計(jì)算系統(tǒng)，提供實(shí)時(shí)報(bào)表能力，在億級(jí)別流量下可以實(shí)時(shí)反饋系統(tǒng)狀況。

在春晚紅包活動(dòng)中，數(shù)據(jù)庫(kù)服務(wù)處于業(yè)務(wù)鏈路的最底層，具有相當(dāng)重要的作業(yè)，對(duì)其穩(wěn)定性、可靠性及并發(fā)能力提出了更高的要求和需求。百度DBA十多年的探索和沉淀，形成的完整的數(shù)據(jù)庫(kù)技術(shù)體系和解決方案，從架構(gòu)上完美適配春晚項(xiàng)目的業(yè)務(wù)需求，通過set化等關(guān)鍵技術(shù)方案，達(dá)到對(duì)業(yè)務(wù)透明且靈活擴(kuò)展、故障最小化隔離能力；在流量管控上，基于流量畫像能力，結(jié)合安全檢測(cè)及攔截能力、多維度多層級(jí)流控能力，達(dá)到對(duì)整體服務(wù)的過載保護(hù)和安全防護(hù)能力，能有效保障整體服務(wù)的可用性、數(shù)據(jù)的安全性，達(dá)到數(shù)據(jù)庫(kù)千萬級(jí)QPS處理能力；最后結(jié)合近百項(xiàng)的劇本及自動(dòng)監(jiān)控預(yù)案措施，進(jìn)一步加固了春晚數(shù)據(jù)庫(kù)服務(wù)保障能力，助力春晚活動(dòng)順利進(jìn)行。

優(yōu)良技術(shù)積累的護(hù)航：服務(wù)的混部調(diào)度、彈性的資源供給、極速穩(wěn)定的CDN服務(wù)

春晚期間，億級(jí)別用戶同時(shí)啟動(dòng)，上億的用戶同時(shí)與百度云服務(wù)發(fā)起建連；相較于以往簡(jiǎn)單的搖一搖，這次用戶同時(shí)訪問的業(yè)務(wù)覆蓋搜索、推薦、語音、視頻等復(fù)雜業(yè)務(wù)。兩周時(shí)間內(nèi)要實(shí)現(xiàn)數(shù)萬級(jí)別規(guī)模服務(wù)器的資源快速籌備與使用方案制定。

技術(shù)方案上，重點(diǎn)通過百度云集群內(nèi)部全混部，利用集群流轉(zhuǎn)支持，滿足春晚活動(dòng)資源需求。混部調(diào)度意味著選擇合適資源，部署合適任務(wù)，并做好安全的隔離與服務(wù)保護(hù)機(jī)制。百度春晚活動(dòng)服務(wù)混部調(diào)度采用BestEffort（BE）模式，彈性使用全百度云的集群資源。BE模式對(duì)原正常業(yè)務(wù)實(shí)現(xiàn)了無侵入使用，滿足了春晚服務(wù)提前進(jìn)場(chǎng)與快速便捷退場(chǎng)的需求，順利通過了活動(dòng)的多輪壓測(cè)工作與最終線上的效率與質(zhì)量考驗(yàn)。同時(shí)圍繞潛在問題場(chǎng)景，設(shè)計(jì)了秒級(jí)彈性伸縮的方案，為潛在的未知春晚力量做足萬全準(zhǔn)備。

百度云的媒體云平臺(tái)是一個(gè)涵蓋了視頻/圖片類數(shù)據(jù)的采集、生產(chǎn)、上傳、存儲(chǔ)、處理、分發(fā)、播放的一體基礎(chǔ)設(shè)施云平臺(tái)，具備國(guó)內(nèi)最大的萬億文件千P數(shù)據(jù)的存儲(chǔ)、每天千萬級(jí)媒資處理、數(shù)百節(jié)點(diǎn)50T+帶寬的分發(fā)網(wǎng)絡(luò)和一站式智能視頻解決方案。

[[261537]]

大規(guī)模工程能力的保障：高效的工程能力、自動(dòng)化、自助化壓測(cè)平臺(tái)、全要素鏈路壓測(cè)與攻防

春晚紅包項(xiàng)目涉及數(shù)十個(gè)產(chǎn)品和平臺(tái)，110+種場(chǎng)景，280+個(gè)預(yù)案，百余團(tuán)隊(duì)參與，上千人協(xié)同，平均每天新增需求和任務(wù)千余個(gè)，自動(dòng)化測(cè)試上萬次。在如此大規(guī)模協(xié)同開發(fā)的挑戰(zhàn)下，春晚紅包項(xiàng)目能夠高效、高質(zhì)量交付，離不開百度長(zhǎng)期積累的技術(shù)文化和工程能力、集團(tuán)統(tǒng)一的工程標(biāo)準(zhǔn)和研發(fā)規(guī)范、可靠高效的開發(fā)工具和協(xié)作平臺(tái)。同時(shí)百度發(fā)布了《百度方法+白皮書》、《百度工程能力白皮書》,并開放了“百度效率云”DevOps工具平臺(tái)，與業(yè)界共享工程能力建設(shè)經(jīng)驗(yàn)，共同推進(jìn)工程效能的提升。

再好的架構(gòu)設(shè)計(jì)，也需要上戰(zhàn)場(chǎng)真實(shí)規(guī)模演練，絕不能讓系統(tǒng)未經(jīng)驗(yàn)證而直面用戶。春晚藍(lán)軍就是這樣一支隊(duì)伍，負(fù)責(zé)為春晚系統(tǒng)制造各種麻煩。首當(dāng)其沖的就是全要素全鏈路壓測(cè)，用來模擬真實(shí)用戶行為，構(gòu)造大于春晚極限并發(fā)的壓力洪峰，驗(yàn)證從供電、網(wǎng)絡(luò)等基礎(chǔ)設(shè)施，到上層軟件架構(gòu)的服務(wù)能力。據(jù)介紹，壓測(cè)的核心是要摒棄正向思維模式，強(qiáng)調(diào)機(jī)械的覆蓋與驗(yàn)證，不放過任何一個(gè)“絕對(duì)不會(huì)出問題”的環(huán)節(jié)。與此同時(shí)，為了驗(yàn)證春晚系統(tǒng)應(yīng)對(duì)異常的能力，百度主動(dòng)構(gòu)造隨機(jī)異常。基于對(duì)高可用架構(gòu)的豐富經(jīng)驗(yàn)，百度架構(gòu)師專門選取系統(tǒng)的“七寸”發(fā)起主動(dòng)攻擊，來驗(yàn)證系統(tǒng)的架構(gòu)容災(zāi)能力和應(yīng)急指揮機(jī)制。

不難看出，百度多方面聯(lián)動(dòng)以技術(shù)之力在春晚“戰(zhàn)場(chǎng)”打了漂亮的一仗。去年12月，百度宣布將基礎(chǔ)架構(gòu)、集團(tuán)級(jí)共享平臺(tái)、運(yùn)維等整合到“TG”（基礎(chǔ)技術(shù)體系），希望能夠集中核心技術(shù)優(yōu)勢(shì)，打造AI時(shí)代最領(lǐng)先的技術(shù)平臺(tái)，實(shí)現(xiàn)前端業(yè)務(wù)和技術(shù)平臺(tái)資源高效統(tǒng)籌及全面協(xié)同，強(qiáng)化集中資源“打大仗、打硬仗”的能力。百度架構(gòu)調(diào)整后的成果，已在春晚舞臺(tái)上得到了最好的驗(yàn)證。

未來，技術(shù)開放日將持續(xù)為各界技術(shù)關(guān)注者帶來最新的技術(shù)進(jìn)展，希望與大家共享百度的技術(shù)創(chuàng)新，共同推動(dòng)技術(shù)進(jìn)步。