在大模型時(shí)代一起贏(yíng)未來(lái)!

過(guò)去一年，大語(yǔ)言模型的浪潮，讓越來(lái)越多人看到了通向通用人工智能的道路，整個(gè)科技界、產(chǎn)業(yè)界也非常興奮。數據顯示，目前中國10億參數規模以上的大模型已經(jīng)發(fā)布了70多個(gè)。

那么，大模型價(jià)值在哪？如何做出AI時(shí)代的爆款應用？

卷大模型沒(méi)意義，卷應用機會(huì )更大

【資料圖】

百度集團執行副總裁、百度智能云事業(yè)群總裁沈抖表示，對于組織和企業(yè)來(lái)講，大模型會(huì )帶來(lái)新的智能生產(chǎn)范式。員工不用花大量的時(shí)間死記硬背常規的知識，有問(wèn)題問(wèn)大模型，大模型就會(huì )給出答案。同樣，大模型會(huì )改變人和機器之間的關(guān)系，可以顯著(zhù)提升專(zhuān)家的工作效率，專(zhuān)家就可以把時(shí)間花在真正有創(chuàng )造性的工作上去，而且更主要的是大模型有強大的理解和生成能力，它能夠整合不同領(lǐng)域的知識，創(chuàng )造出前所未有的AI。

百度創(chuàng )始人、董事長(cháng)兼首席執行官在2023年百度云智大會(huì )上指出，模型本身并不直接產(chǎn)生價(jià)值，基于基礎大模型開(kāi)發(fā)出來(lái)的應用才是模型存在的意義。他認為，對于創(chuàng )業(yè)者來(lái)說(shuō)，卷大模型沒(méi)意義，卷應用機會(huì )更大。就像移動(dòng)互聯(lián)網(wǎng)時(shí)代，操作系統只有安卓和iOS，而特別成功的應用有很多，只有在大模型的基礎之上，產(chǎn)生了足夠多的AI原生應用，才是一個(gè)健康的生態(tài)環(huán)境。

李彥宏指出，AI原生應用要能解決過(guò)去解決不了、或解決不好的問(wèn)題，而不是對移動(dòng)互聯(lián)網(wǎng)APP和PC軟件的簡(jiǎn)單重復。他認為，AI原生應用應該滿(mǎn)足三個(gè)基礎條件：一是能夠用自然語(yǔ)言交互，二是充分利用大語(yǔ)言模型的理解、生成、推理、記憶等能力，三是每個(gè)應用的交互不超過(guò)兩級菜單，所以交互會(huì )更簡(jiǎn)單。

百度的目標是打造好大模型的基礎能力，支持好AI原生應用開(kāi)發(fā)。最新的文心大模型3.5版本，模型效果提升了50%，訓練速度提升了兩倍，推理速度提升了30倍。不久后，百度將推出文心大模型4.0版本。文心大模型是最好的大模型之一，只有最好的大模型，才能長(cháng)出最好的AI原生應用。百度希望創(chuàng )業(yè)者在文心大模型之上，可以做出AI時(shí)代的爆款應用。

沈抖堅信，2023年一定會(huì )成為AI原生業(yè)務(wù)的元年，在大模型推動(dòng)下所有行業(yè)都會(huì )迎來(lái)深度重構，共同建立一個(gè)繁榮的大模型產(chǎn)業(yè)生態(tài)，用更高效的算力基礎設施、更豐富的行業(yè)解決方案、更全面的全國服務(wù)網(wǎng)絡(luò )，讓每一個(gè)行業(yè)、每一位客戶(hù)都能更好的駕馭大模型，實(shí)現規?；漠a(chǎn)業(yè)創(chuàng )新，讓大模型成為推動(dòng)我國產(chǎn)業(yè)優(yōu)化升級、實(shí)現經(jīng)濟高質(zhì)量發(fā)展的新動(dòng)能。未來(lái)將有更多偉大的產(chǎn)品和應用誕生在百度的客戶(hù)和伙伴的手中。

大模型驅動(dòng)云計算創(chuàng )新變革

在百度集團副總裁侯震宇看來(lái)，作為基礎設施的云計算，在大模型的驅動(dòng)下，AI原生應用的引領(lǐng)下，它的發(fā)展從經(jīng)典的云逐步進(jìn)化到AI原生云，將會(huì )重塑云計算產(chǎn)業(yè)的格局，生成式AI大模型會(huì )催生一個(gè)研發(fā)的新范式。

第一，對AI原生應用提出了新的架構要求。構建一個(gè)新的AI原生應用一方面肯定是模型，需要有模型能力，模型能力將會(huì )以API調度的方式來(lái)提供服務(wù)，這里的模型不止包括基礎大模型，同時(shí)也包括托管在百度平臺上的客戶(hù)經(jīng)過(guò)微調的自己的模型。無(wú)論是動(dòng)態(tài)編排還是靜態(tài)編排，用大模型獨有的能力實(shí)現鏈式調用；另一方面，新的服務(wù)即MaaS能力將成為一個(gè)基礎性能力，MaaS需要具備豐富、易用和面向AI原生應用的三個(gè)特點(diǎn)，未來(lái)不可能有一個(gè)大模型解決所有的問(wèn)題，最終落地到場(chǎng)景里面需要有不同模型組合滿(mǎn)足不同客戶(hù)在不同場(chǎng)景的需求。

第二，大模型平臺要足夠簡(jiǎn)單易用，需要有全套的工具鏈覆蓋從數據收集、標注到模型研發(fā)、訓練、評估，進(jìn)而再到模型推理優(yōu)化的全生命周期。此外，數據對于A(yíng)I的研發(fā)非常重要，平臺既要提供更多的數據集，同時(shí)平臺也應該幫助客戶(hù)建立起屬于自己的數據驅動(dòng)數據閉環(huán)的能力，更好地支持客戶(hù)的模型能力的迭代，以激發(fā)其業(yè)務(wù)更快速的發(fā)展。

第三，新計算大模型需要有大量數據的高密度計算，它對計算體系結構帶來(lái)了新的要求。目前，計算負載在加速向異構計算遷移，而且規模越來(lái)越大，微秒級互聯(lián)將成為算力規?；l(fā)展的關(guān)鍵能力，這些都需要從整個(gè)體系結構的層面上用軟硬一體的思路和方法去解決。

大力開(kāi)展基于國產(chǎn)AI芯片的大模型系統研究

中國工程院院士鄭緯民指出，在國外的GPU卡一卡難求（價(jià)格非常高），國產(chǎn)的卡不喜歡的情況下，除了要改變國產(chǎn)卡的生態(tài)系統不好的局面外，更要考慮大模型基礎設施平衡設計。

首先，半精度運算性能與雙精度運算性能的平衡。設計中不僅要考慮半精度運算性能，還要考慮雙精度運算能力，雙精度與半精度運算性能之比為1:100比較合適。根據科學(xué)計算（ AI For Science）和大模型訓練的發(fā)展趨勢，變精度平衡設計的思想很重要，適應科學(xué)計算和更廣泛的AI算法和應用提供保障。

其次，網(wǎng)絡(luò )平衡設計。網(wǎng)絡(luò )設計不能只針對CNN算法，還需考慮極大規模預訓練模型對系統的需求，大規模預訓練模型需要高帶寬低延遲網(wǎng)絡(luò )。

再次，體系結構感知的內存平衡設計。針對環(huán)網(wǎng)、存控可能帶來(lái)的性能問(wèn)題，可以利用核間通信輔助、排布核組訪(fǎng)存模式，兩種優(yōu)化方式可以帶來(lái)5.3倍性能提升。針對體系結構特點(diǎn)設計應用程序的訪(fǎng)存模式，最大化利用硬件性能。

最后，io子系統平衡設計。系統的本地nvme ssd僅通過(guò)本地文件系統訪(fǎng)問(wèn)，限制了其應用范圍。將每臺服務(wù)器上的快速本地nvme整合成應用可見(jiàn)的全局分布式文件系統。

鄭緯民認為，怎么讓一塊 GPU發(fā)揮兩塊、甚至三塊的能力？大模型基礎設施平衡設計的四點(diǎn)考慮做得好，相信別人要用1萬(wàn)塊卡，我們用9000卡就可以了。

百度集團副總裁袁佛玉認為，大模型時(shí)代的生態(tài)體系，會(huì )有三個(gè)重大特點(diǎn)。第一，應用生態(tài)的位置將更加核心；第二，擁有行業(yè)專(zhuān)業(yè)知識的企業(yè)迎來(lái)巨大機遇和挑戰；第三，初創(chuàng )企業(yè)與開(kāi)發(fā)者將帶動(dòng)生成式AI的應用繁榮。

第26屆論道啟動(dòng)！11月相聚春城昆明，共尋智能視聽(tīng)新增長(cháng)。點(diǎn)擊圖片報名參會(huì )~

責任編輯：房家輝

關(guān)鍵詞：