1月22日，百度發(fā)布并上線原生全模態(tài)大模型文心5.0正式版。該模型參數(shù)達2.4萬億，采用原生全模態(tài)統(tǒng)一建模技術(shù)，具備全模態(tài)理解與生成能力，支持文本、圖像、音頻、視頻等多種信息的輸入與輸出。目前，個人用戶可在文心APP、文心一言官網(wǎng)體驗，企業(yè)與開發(fā)者可通過百度千帆平臺進行調(diào)用。

　　據(jù)百度集團副總裁、深度學(xué)習(xí)技術(shù)及應(yīng)用國家工程研究中心副主任吳甜介紹，與業(yè)界多數(shù)采用“后期融合”的多模態(tài)方案不同，文心5.0的技術(shù)路線采用統(tǒng)一的自回歸架構(gòu)進行原生全模態(tài)建模，將文本、圖像、視頻、音頻等多源數(shù)據(jù)在同一模型框架中進行聯(lián)合訓(xùn)練，使得多模態(tài)特征在統(tǒng)一架構(gòu)下充分融合并協(xié)同優(yōu)化，實現(xiàn)原生的全模態(tài)統(tǒng)一理解與生成。

　　此外，文心5.0采用超大規(guī)�；旌蠈＜医Y(jié)構(gòu)，具備超稀疏激活參數(shù)，激活參數(shù)比低于3%，在保持模型強大能力的同時，有效提升推理效率。同時，基于大規(guī)模工具環(huán)境，合成長程任務(wù)軌跡數(shù)據(jù)，并采用基于思維鏈和行動鏈的端到端多輪強化學(xué)習(xí)訓(xùn)練，顯著提升了模型的智能體和工具調(diào)用能力。

　　基于強大的原生全模態(tài)統(tǒng)一建模技術(shù)，與2.4萬億參數(shù)的海量算力，“文心5.0”已具備讓AI應(yīng)用走進真實行業(yè)與復(fù)雜場景，提供更高效解決方案的能力。全球AI行業(yè)經(jīng)歷過去幾年快速發(fā)展，正進入一個新的快車道，但在AI應(yīng)用領(lǐng)域，以對話或文字輸入為主的Chatbot仍是主流形式。AI如何應(yīng)用于真實世界與行業(yè)，從而進一步產(chǎn)生價值，是行業(yè)都在探索的方向。

　　作為國內(nèi)最早發(fā)布大模型的企業(yè)之一，百度正基于多年積累的技術(shù)實力，形成以芯片為底座，智能云為平臺框架，以模型支撐各類智能體應(yīng)用的“芯云模體”全棧自研生態(tài)閉環(huán)，持續(xù)探索賦能行業(yè)的AI解決方案。(張偉)

(新媒體責(zé)編：wa123)