12 月 20 日，2023 百度云智大會?智算大會在北京舉辦，大會以「大模型重構(gòu)云計算，Cloud for AI」為主題，深度聚焦大模型引發(fā)的云計算變革。

百度智能云表示，為滿足大模型落地需求，正在基于「云智一體」戰(zhàn)略重構(gòu)云計算服務(wù)，目前已完成從底層基礎(chǔ)設(shè)施 — 大模型開發(fā)與應(yīng)用 —AI 原生應(yīng)用開發(fā)的端到端升級重構(gòu)：全面升級百舸等 20 多個云計算基礎(chǔ)設(shè)施、千帆大模型平臺再升級、AI 原生應(yīng)用開發(fā)工作臺“千帆 AppBuilder ”全面開放。

智算大會現(xiàn)場，百度智能云還公布了最新“成績單”。自 8 月 31 日文心大模型向全社會全面開放以來，在千帆大模型平臺上，大模型 API 日調(diào)用量增長 10 倍。目前千帆平臺已經(jīng)累計服務(wù)超過 4 萬家企業(yè)用戶，累計幫助企業(yè)用戶精調(diào)近 1 萬個大模型。相較于自建系統(tǒng)訓(xùn)練大模型，使用千帆平臺訓(xùn)練的成本最高可以下降 90%。

大模型正在重構(gòu)云計算

“AI 原生時代開啟，大模型正在驅(qū)動云計算產(chǎn)業(yè)創(chuàng)新變革。”百度集團副總裁侯震宇表示：“大模型重構(gòu)云計算主要體現(xiàn)在三個層面：AI 原生云將改變云計算的格局，模型即服務(wù)（MaaS ）會成為新的基礎(chǔ)服務(wù)，AI 原生應(yīng)用催生新的研發(fā)范式 。”

首先，在云基礎(chǔ)設(shè)施層，移動互聯(lián)網(wǎng)時代的應(yīng)用，底層大多依賴 CPU 算力，而 AI 應(yīng)用對 GPU 或異構(gòu)計算的需求大幅增加，云市場的底層算力需求將逐漸轉(zhuǎn)向以 GPU 為主。

其次，在模型層，大模型正在成為通用的服務(wù)能力，即 MaaS。MaaS 將大幅降低 Al 落地的門檻，實現(xiàn)真正的 Al 普惠。

最后，在應(yīng)用層，應(yīng)用開發(fā)的范式已經(jīng)被徹底顛覆。大模型理解、生成、邏輯、記憶的獨特能力會催生 A 原生應(yīng)用研發(fā)新范式，整個應(yīng)用技術(shù)棧、數(shù)據(jù)流和業(yè)務(wù)流都將被改變。

▲ 百度集團副總裁侯震宇

侯震宇表示，總體來說，構(gòu)建繁榮的 A 原生應(yīng)用生態(tài)，需要大模型、智能算力、AI 原生應(yīng)用研發(fā)新范式三要素相輔相成。大模型是 AI 原生應(yīng)用的“大腦”，智能計算則為 A 原生應(yīng)用運行提供堅實支撐，新研發(fā)范式助力開發(fā)者高效基于大模型能力開發(fā)應(yīng)用。數(shù)據(jù)飛輪是成功的 AI 原生應(yīng)用的充分必要條件，讓大模型能力高速迭代，產(chǎn)品體驗持續(xù)進步。

云計算全面升級：五大領(lǐng)域 20 余款全棧產(chǎn)品集中發(fā)布

AI 原生時代，面向大模型的云計算基礎(chǔ)設(shè)施體系將全面重構(gòu)。侯震宇表示，百度智能云將在三大方面重構(gòu)云計算服務(wù)，即：面向模型的智算基礎(chǔ)設(shè)施、面向數(shù)據(jù)的數(shù)據(jù)基礎(chǔ)設(shè)施、面向應(yīng)用的云基礎(chǔ)設(shè)施，以支撐 AI 原生應(yīng)用落地。

大會現(xiàn)場，百度智能云密集發(fā)布和升級了 20 多款云計算產(chǎn)品，涵蓋智能計算、通用計算、數(shù)據(jù)庫和大數(shù)據(jù)、分布式云、應(yīng)用開發(fā)平臺五大領(lǐng)域。

在智能計算領(lǐng)域，算力是大模型落地的基礎(chǔ)條件，當前大模型訓(xùn)練、推理、部署對高速互聯(lián)、計算效率、算力成本等都提出了高要求，需要打造新型的智算基礎(chǔ)設(shè)施。但目前的計算集群還面臨不少挑戰(zhàn)，大模型訓(xùn)練時間長、易出錯、穩(wěn)定性差，算力集群規(guī)模大、系統(tǒng)復(fù)雜度高也增加了運維難度。

全新發(fā)布的百度百舸?AI 異構(gòu)計算平臺 3.0，針對 AI 原生應(yīng)用以及大模型的訓(xùn)練、推理等環(huán)節(jié)進行了專項優(yōu)化。百舸 3.0 在穩(wěn)定、高效、易運維三個方面大幅升級產(chǎn)品能力，實現(xiàn)萬卡級別任務(wù)有效訓(xùn)練時長達到 98% 以上，帶寬有效性可達 95%。相比自建智算基礎(chǔ)設(shè)施，可以實現(xiàn)模型訓(xùn)、推吞吐分別最高提升 30% 和 60% 。

▲ 百度百舸 3.0 發(fā)布

針對 AI 原生時代智能算力的供給平衡問題，百度智能云發(fā)布智算網(wǎng)絡(luò)平臺。在算力資源層面，智算網(wǎng)絡(luò)平臺支持將百度及第三方建設(shè)的智算中心、超算中心、邊緣節(jié)點等智算節(jié)點進行全域接入，將分散和異構(gòu)的算力資源連接起來，形成統(tǒng)一的算力網(wǎng)絡(luò)資源池，再通過百度自主研發(fā)的算力調(diào)度算法，智能分析各類算力資源的狀態(tài)、性能和利用率等指標，統(tǒng)一調(diào)度算力，讓智算資源靈活、穩(wěn)定、高效地交付給有需求的用戶，實現(xiàn)智算資源的“南水北調(diào)”。

在通用計算領(lǐng)域，計算、存儲、網(wǎng)絡(luò)等云原生基礎(chǔ)設(shè)施也需要面向 AI 原生時代重構(gòu)升級，提供更具彈性、高性能和智能化的運維能力。

本次大會，百度太行?計算新增了三款計算實例：全新推出第 7 代（通用計算型）云服務(wù)器實例 G7，綜合性能較上一代產(chǎn)品提升 10%；發(fā)布昆侖芯彈性裸金屬實例 NKL5，搭載了百度自研的昆侖芯 R300 加速處理器，在大模型推理場景綜合性能較業(yè)界主流加速卡可提升達 50%；發(fā)布基于昇騰 910B 加速處理器打造的彈性高性能計算實例 NH6T，在大模型訓(xùn)練場景中，綜合性能較業(yè)界主流加速卡提升可達 40%。

同時，高性能計算平臺 CHPC（Cloud HPC）正式發(fā)布，為用戶提供的一站式公共云 HPC 服務(wù)。在資源使用層面，CHPC 支持用戶一鍵創(chuàng)建高性能計算環(huán)境，并根據(jù)業(yè)務(wù)變化靈活使用云上資源；在業(yè)務(wù)應(yīng)用層面，CHPC 支持集成藥物研發(fā)、基因測序等行業(yè)的應(yīng)用。此外，結(jié)合集成在 VPC 內(nèi)的百度網(wǎng)盤等服務(wù)，用戶可以輕松實現(xiàn) HPC 源文件從提交、上傳、處理、結(jié)果回傳，到分發(fā)的數(shù)據(jù)全鏈路打通，助力研發(fā)提效。

?在分布式云方面，百度智能云帶來三大升級：邊緣計算節(jié)點 BEC 產(chǎn)品能力升級，打造全球統(tǒng)一的邊緣計算網(wǎng)絡(luò)和產(chǎn)品體驗，打造 AI 原生應(yīng)用時代能力最完善的“云邊一體”；專有云 ABC Stack 新能力發(fā)布，支持本地部署百度智能云千帆大模型平臺；本地計算集群 LCC 新能力發(fā)布，支持全新一代 CPU / GPU 實例以及完整的百度智能云 AI&HPC 集群管理能力，進一步豐富完善基礎(chǔ)設(shè)施與云產(chǎn)品支持能力矩陣。

?大模型落地不僅需要算力支持，還需要對各類數(shù)據(jù)和海量的知識進行存儲、管理和分析工作。百度智能云在云存儲、云原生數(shù)據(jù)庫、大數(shù)據(jù)平臺等數(shù)據(jù)基礎(chǔ)設(shè)施領(lǐng)域發(fā)布了一系列重磅新品。

百度滄海?存儲，統(tǒng)一技術(shù)底座正式發(fā)布，能夠支持各類存儲產(chǎn)品，同時滿足 AI 原生時代的大規(guī)模、高性能、低成本的存儲要求。全新升級的對象存儲 BOS、云磁盤 CDS、并行文件存儲 PFS 等產(chǎn)品，面向數(shù)據(jù)湖存儲和 AI 存儲能力進行了全面增強，加速智能計算，釋放數(shù)據(jù)價值。

云原生數(shù)據(jù)庫 GaiaDB 4.0 版本正式發(fā)布，增強并行查詢能力，突破單機計算瓶頸，實現(xiàn)跨機多核并行查詢，在混合負載和實時分析業(yè)務(wù)場景中性能提升超過 10 倍；針對不同的工作負載推出列存索引和列存引擎，提升不同規(guī)模數(shù)據(jù)的查詢速度，其中列存引擎最大可支持 PB 級數(shù)據(jù)的復(fù)雜分析，并且與事務(wù)處理業(yè)務(wù)嚴格復(fù)雜隔離；通過共識協(xié)議優(yōu)化、鏈路優(yōu)化、自適應(yīng)動態(tài)回放存儲多版本等一些列數(shù)據(jù)流深度優(yōu)化，大幅提升 GaiaDB 整體性能 60% 以上。

大會期間，杭州吉利易云科技有限公司總經(jīng)理成品耀，分享了吉利集團攜手百度智能云的打造集團專有云，打造數(shù)字基建底座。目前吉利集團已實現(xiàn)車聯(lián)網(wǎng)、生產(chǎn)制造業(yè)務(wù)上云，且正在基于這套高效、穩(wěn)定的基礎(chǔ)設(shè)施平臺構(gòu)建企業(yè)級 AI 大模型能力，全方位賦能集團業(yè)務(wù)。

▲ ?杭州吉利易云科技有限公司總經(jīng)理成品耀

模型即服務(wù)（MaaS）：千帆大模型平臺再升級

在 AI 原生時代，大模型將作為新的通用服務(wù)能力，由模型即服務(wù)（MaaS）平臺提供給廣大用戶。百度智能云千帆大模型平臺（以下簡稱“千帆平臺”）作為業(yè)界領(lǐng)先的 MaaS 服務(wù)平臺，預(yù)置了包括百度文心大模型在內(nèi)的、國內(nèi)最多的 54 個主流基礎(chǔ)大模型和行業(yè)大模型，還為大模型的持續(xù)預(yù)訓(xùn)練、精調(diào)、評估、壓縮和部署等環(huán)節(jié)提供最完善易用的工具鏈，幫助客戶針對自身業(yè)務(wù)場景快速定制專屬大模型。相較于自建系統(tǒng)訓(xùn)練大模型，使用千帆平臺訓(xùn)練的成本最高可以下降 90%。

▲ 百度智能云千帆大模型平臺

目前，千帆平臺已經(jīng)累計服務(wù)超過 40000 家企業(yè)用戶，精調(diào)近 10000 個大模型。本次智算大會，針對客戶應(yīng)用大模型最關(guān)心的“提效”和“降本”兩大核心訴求，千帆平臺發(fā)布一系列全新功能。

?在數(shù)據(jù)方面，千帆平臺提供完善、高效的大模型數(shù)據(jù)管理工具鏈，包括數(shù)據(jù)采集，清洗、自動標注、自動增強與推理數(shù)據(jù)多位評估等功能，助力用戶快速構(gòu)建自身業(yè)務(wù)“數(shù)據(jù)飛輪”，實現(xiàn)反饋驅(qū)動增長。全新發(fā)布的數(shù)據(jù)統(tǒng)計分析、數(shù)據(jù)質(zhì)量檢查等功能，支持用戶獲取全方位的數(shù)據(jù)洞察信息，結(jié)合數(shù)據(jù)清洗可視化 Pipeline，能夠構(gòu)建出面向大模型場景的高質(zhì)量數(shù)據(jù)燃料，為大模型訓(xùn)練“保駕護航”，千帆也因此成為國內(nèi)首個支持大模型多方位數(shù)據(jù)分析的 MaaS 服務(wù)平臺。

作為模型部署上線前的“最后一公里”，模型評估能夠?qū)Υ竽Ｐ偷妮敵鲂Ч⒂嬎阈阅艿冗M行全方位評估，確保大模型上線后 AI 原生應(yīng)用的效果穩(wěn)定可靠。千帆平臺創(chuàng)新性地引入自動化與人工結(jié)合的雙重評估機制，充分發(fā)揮雙方優(yōu)勢，大幅提升模型評估效率與質(zhì)量。一方面，百度文心大模型作為 AI 裁判員，能夠?qū)Ρ辉u估模型的回答進行自動化打分，極大程度地減少海量重復(fù)性人工作業(yè)；另一方面，由數(shù)據(jù)標注員 / 業(yè)務(wù)專家對大模型回答進行打分，則能夠?qū)崿F(xiàn)對大模型回答質(zhì)量的精細化衡量。

此外，千帆平臺靈活的計價方式，如 Tokens（適用靈活性要求較高的業(yè)務(wù)）、TPM（Tokens per Minute，適用于較大并發(fā)量業(yè)務(wù)）、批量計算（適用于離線內(nèi)容生產(chǎn)等對實時性要求較低，吞吐較大的任務(wù)）、算力單元（適用于需要專享硬件部署模型的客戶）等，可以輕松滿足客戶的多種業(yè)務(wù)場景需要，助力企業(yè)低成本用好大模型。

賦能 AI 原生應(yīng)用開發(fā)：千帆 AppBuilder 正式開放服務(wù)

為了滿足企業(yè)敏捷、高效地進行 AI 原生應(yīng)用開發(fā)的需求，降低 AI 原生應(yīng)用開發(fā)門檻，百度智能云千帆 AppBuilder 正式開放服務(wù)。

?AppBuilder 將大模型開發(fā) AI 原生應(yīng)用的常見模式、工具、流程，沉淀成一個工作臺，幫助開發(fā)者聚焦業(yè)務(wù)本身，而無需為開發(fā)過程牽扯多余精力。具體來講，AppBuilder 主要由組件、框架兩層服務(wù)構(gòu)成。

「組件」服務(wù)由多模態(tài)的 AI 能力組件（如文字識別、文生圖等）、基于大語言模型的能力組件（如長文總結(jié)、nl2sql 等）、基礎(chǔ)組件（如向量數(shù)據(jù)庫、對象存儲等）三部分組成，是對底層服務(wù)能力的組件化封裝，讓每個組件完成一個特定的功能。

「框架」則是通過將上述這些組件有選擇地串聯(lián)、組合起來，讓它們能夠比較完整地完成一個特定場景的任務(wù)。目前，AppBuilder 提供的檢索增強生成（RAG）、智能體（Agent）、智能數(shù)據(jù)分析（GBI）就是常用的 AI 原生應(yīng)用框架。

AppBuilder 提供兩種產(chǎn)品形態(tài)，代碼態(tài)與低代碼態(tài)。對于有深度 AI 原生應(yīng)用開發(fā)需求的用戶，AppBuilder 代碼態(tài)提供包括 SDK、開發(fā)環(huán)境、調(diào)試工具、應(yīng)用示例代碼等各種開發(fā)套件和應(yīng)用組件；而 AppBuilder 低碼態(tài)則提供可視化工具，用戶只需簡單點選，即可快速定制、上線 AI 原生應(yīng)用。

▲ 百度智能云千帆 AppBuilder

百度創(chuàng)始人、董事長兼首席執(zhí)行官李彥宏認為，繁榮的 AI 原生應(yīng)用生態(tài)，會驅(qū)動經(jīng)濟增長。今年 10 月，百度智能云推出了國內(nèi)首個大模型全鏈路生態(tài)支持體系，為合作伙伴提供包括賦能培訓(xùn)、AI 原生應(yīng)用孵化、銷售商機、市場營銷等全方位的支持，致力于繁榮 AI 原生應(yīng)用生態(tài)。

侯震宇預(yù)判，2024 年將成為 AI 原生應(yīng)用的元年，迎來 AI 原生應(yīng)用的爆發(fā)式增長。百度智能云將持續(xù)推出有競爭力的產(chǎn)品方案，與伙伴一起深耕客戶應(yīng)用場景，讓更多的 AI 原生應(yīng)用創(chuàng)新涌現(xiàn)。