2023烏鎮(zhèn)峰會(huì)｜張亞勤：大模型技術(shù)的六大發(fā)展趨勢(shì)

2023年世界互聯(lián)網(wǎng)大會(huì)烏鎮(zhèn)峰會(huì)11月8日在浙江烏鎮(zhèn)開(kāi)幕，***習(xí)近平在開(kāi)幕式發(fā)表視頻致辭。本屆大會(huì)的主題為“建設(shè)包容、普惠、有韌性的數(shù)字世界——攜手構(gòu)建網(wǎng)絡(luò)空間命運(yùn)共同體”。

中國(guó)工程院院士，清華大學(xué)講席教授、智能產(chǎn)業(yè)院（AIR）院長(zhǎng)張亞勤作為世界互聯(lián)網(wǎng)大會(huì)第一屆理事會(huì)成員出席開(kāi)幕式，并在全體會(huì)議發(fā)表致辭。他指出，人工智能已經(jīng)成為這個(gè)時(shí)代最具變革性的技術(shù)力量。過(guò)去十年，數(shù)據(jù)驅(qū)動(dòng)的深度學(xué)習(xí)成為主流。在展望大模型技術(shù)未來(lái)六大發(fā)展趨勢(shì)的同時(shí)，他也呼吁大家重視技術(shù)飛速發(fā)展帶來(lái)的潛在風(fēng)險(xiǎn)，讓人工智能創(chuàng)新和技術(shù)為人類善良和福祉服務(wù)，打造網(wǎng)絡(luò)空間的人類命運(yùn)共同體。

以下為演講稿全文：

尊敬的各位嘉賓，大家好！

非常榮幸參加今年的烏鎮(zhèn)互聯(lián)網(wǎng)峰會(huì)，也是峰會(huì)的第十年。過(guò)去的十年， 我們看到互聯(lián)網(wǎng)的移動(dòng)化、工業(yè)化、物理化和智能化。

人工智能已經(jīng)成為這個(gè)時(shí)代最具變革性的技術(shù)力量。過(guò)去十年，數(shù)據(jù)驅(qū)動(dòng)的深度學(xué)習(xí)成為主流。從2016年AlphaGo到后來(lái)的AlphaZero在圍棋領(lǐng)域戰(zhàn)勝人類，到AlphaFold2高精度的預(yù)測(cè)蛋白質(zhì)3維結(jié)構(gòu)，2017年的Apollo自動(dòng)駕駛平臺(tái)，再到現(xiàn)在我們正在經(jīng)歷的ChatGPT現(xiàn)象，人工智能技術(shù)正在深層次的改變我們的數(shù)字世界、物理世界和生物世界。新的智能是信息智能、具身智能和生物智能的融合， 是比特世界、原子世界和分子世界的融合。

過(guò)去的三年，我們見(jiàn)證了一些重要的技術(shù)發(fā)展：如ChatGPT、GPT-4、GPT4V和AIGC（Stable Diffusion, DALLE, NeRF）等。GPT系列模型具備預(yù)訓(xùn)練能力，可以進(jìn)行自監(jiān)督學(xué)習(xí)，并具備強(qiáng)大的生成能力，還可以自我進(jìn)化和人類對(duì)齊。開(kāi)啟了大模型和生成式人工智能的新范式。目前這個(gè)領(lǐng)域的新研究項(xiàng)目、工程產(chǎn)品、初創(chuàng)公司和風(fēng)險(xiǎn)投資如火如荼，十分活躍。我認(rèn)為大模型技術(shù)正在向下面6個(gè)大的方向發(fā)展：

• 跨模態(tài)，多模態(tài)，和多尺度大模型：新的大模型包括自然數(shù)據(jù)（語(yǔ)言文字、圖像、視頻），也包括從傳感器獲取的信息（比如無(wú)人車(chē)中的激光雷達(dá)點(diǎn)云、3D結(jié)構(gòu)信息、4D時(shí)空信息，或者是蛋白質(zhì)、細(xì)胞、基因、腦電、人體的信息）；
• 新算法框架：我們需要新的算法來(lái)提升當(dāng)前的大模型效率。當(dāng)前的大模型稠密激活，計(jì)算效率遠(yuǎn)低于人腦，且商用成本高昂，甚至模型用的越多虧損越多。人腦是效率最高的智能體，它有860億個(gè)神經(jīng)元，每個(gè)神經(jīng)元有幾千個(gè)突觸，卻只有不到3斤重，耗能20瓦。從這個(gè)角度來(lái)看，人腦的儲(chǔ)存量，計(jì)算量和能耗效率之高，是目前任何大模型都無(wú)法比擬的。我們需要新的算法體系，稀疏激活網(wǎng)絡(luò)、效果更優(yōu)的小網(wǎng)絡(luò)等來(lái)提升模型使用效率；
• 自主智能：模型正在成為一個(gè)代理（Agent），自主規(guī)劃任務(wù)、開(kāi)發(fā)代碼、調(diào)動(dòng)工具、優(yōu)化路徑、實(shí)現(xiàn)目標(biāo)，包括N+1版本的自我迭代、升級(jí)和優(yōu)化；
• 邊緣智能：大模型需要很多算力和資源，如何在邊緣和設(shè)備終端實(shí)現(xiàn)高效率、低功耗、低成本、低延時(shí)地部署是一大關(guān)鍵問(wèn)題；
• 具身智能：大模型正在被用到無(wú)人車(chē)、機(jī)器人、無(wú)人機(jī)和工廠，交通、通訊、電網(wǎng)、電站和其他物理基礎(chǔ)設(shè)施；

• 生物智能：大模型正在被用到人體、人腦、醫(yī)療機(jī)器人和生物體和生命體的連接和控制。

就像Windows是PC時(shí)代的操作系統(tǒng)，Andriod/IoS是移動(dòng)時(shí)代的操作系統(tǒng)，前沿大模型將是人工智能時(shí)代的“操作系統(tǒng)”，正在重構(gòu)應(yīng)用生態(tài)和重塑產(chǎn)業(yè)格局。與移動(dòng)互聯(lián)網(wǎng)時(shí)代相比，大模型時(shí)代的產(chǎn)業(yè)機(jī)會(huì)至少增長(zhǎng)10倍；與PC時(shí)代相比，大模型時(shí)代產(chǎn)業(yè)機(jī)會(huì)至少增長(zhǎng)了100倍。

隨著前沿大模型能力的飛速發(fā)展，它所帶來(lái)的潛在風(fēng)險(xiǎn)也在不斷增加。這迫使我們思考人工智能技術(shù)對(duì)社會(huì)、文化、倫理等方面的影響和責(zé)任。我們要重新審視人類與機(jī)器的關(guān)系，以及人類自身的本質(zhì)和價(jià)值。對(duì)于人工智能技術(shù)的不確定性和復(fù)雜性，我們必須做好充分準(zhǔn)備和應(yīng)對(duì)。

首先，我們面臨的是大模型幻覺(jué)、不良信息和深度偽造等風(fēng)險(xiǎn)。這些技術(shù)以極高的逼真度誤導(dǎo)受眾。如果這些技術(shù)使用不當(dāng)被用于金融、法律和社交網(wǎng)絡(luò)等領(lǐng)域，有可能會(huì)對(duì)社會(huì)和經(jīng)濟(jì)產(chǎn)生影響。特別是當(dāng)自主智能、具身智能和生物智能進(jìn)入大規(guī)模部署，我們需要更強(qiáng)的可控性，更好的可解釋性，和更有效的治理。

上個(gè)月，我個(gè)人簽署了由一個(gè)AI安全機(jī)構(gòu)發(fā)起的《AI風(fēng)險(xiǎn)聲明》，呼吁人工智能帶來(lái)的生存風(fēng)險(xiǎn)，應(yīng)該與流行病和核戰(zhàn)爭(zhēng)等其他大規(guī)模社會(huì)性風(fēng)險(xiǎn)一樣，成為全球優(yōu)先解決的事項(xiàng)。我所在的清華大學(xué)智能產(chǎn)業(yè)研究院AIR致力于做善良的和負(fù)責(zé)任的AI。我在AIR三年前成立時(shí)送出的第一個(gè)全員郵件就是我制定的AI發(fā)展的的3R原則：Resilient（韌性發(fā)展）、 Responsive（積極響應(yīng)）、 Responsible（堅(jiān)守價(jià)值）。在研究理論、算法和模型時(shí)，必須考慮技術(shù)的意義和可能帶來(lái)的結(jié)果，并將倫理問(wèn)題和價(jià)值觀置于技術(shù)之上。幾個(gè)星期前，Stuart Russell，我和兩位圖靈獎(jiǎng)獲得者Yoshua Bengio、姚期智先生在英國(guó)一起召集了一個(gè)小型研討會(huì)， 并提出了一些具體建議。

同時(shí)我們很高興看到我們中國(guó)政府上個(gè)月發(fā)布了《全球人工智能治理倡議》，呼吁抓住機(jī)遇，正視風(fēng)險(xiǎn)，公平開(kāi)放，并在全球范圍加強(qiáng)治理和合作。上周，中國(guó)、美國(guó)、英國(guó)和歐盟等在倫敦簽署了《布萊切利宣言》。的確，人工智能是第四次工業(yè)革命的重要技術(shù)基石，是全人類的共同大機(jī)遇和要面對(duì)的風(fēng)險(xiǎn)。

我們?nèi)祟悡碛袃煞N智慧：發(fā)明技術(shù)的智慧和把握技術(shù)發(fā)展方向的智慧。作為一個(gè)樂(lè)觀主義者，我堅(jiān)信我們能保持這種平衡，讓人工智能創(chuàng)新和技術(shù)為人類善良和福祉服務(wù)。

END

點(diǎn)擊關(guān)注，解鎖海量干貨資源內(nèi)容