近日,摩爾線程與智譜AI在人工智能領(lǐng)域開展了一輪深入的合作,共同對GPU大模型進(jìn)行了適配及性能測試。此次測試不僅涵蓋了大模型的推理能力,還涉及了基于摩爾線程夸娥(KUAE)千卡智算集群的大模型預(yù)訓(xùn)練,旨在全面評估摩爾線程GPU在大模型應(yīng)用中的性能表現(xiàn)。
在推理性能測試中,摩爾線程自研的全功能GPU展現(xiàn)出了卓越的性能。與基準(zhǔn)對比產(chǎn)品RTX 3090和RTX 4090相比,摩爾線程的GPU在全部測試用例中均優(yōu)于RTX 3090,而在多batch情況下更是超越了RTX 4090。這一結(jié)果充分證明了摩爾線程GPU在推理能力上的出色表現(xiàn),為用戶提供了更加高效、準(zhǔn)確的計(jì)算體驗(yàn)。
在訓(xùn)練性能測試中,摩爾線程夸娥千卡智算集群同樣展現(xiàn)出了強(qiáng)大的性能。測試結(jié)果顯示,夸娥千卡智算集群的訓(xùn)練精度與A100集群誤差在1%以內(nèi),這一數(shù)據(jù)足以證明其在訓(xùn)練過程中的精確度和穩(wěn)定性。同時(shí),夸娥千卡智算集群的性能擴(kuò)展系數(shù)超過90%,意味著在分布式計(jì)算環(huán)境下,該集群能夠充分利用各節(jié)點(diǎn)的計(jì)算能力,實(shí)現(xiàn)高效的并行計(jì)算。此外,模型算力利用率(MFU)與A100集群相當(dāng),進(jìn)一步證明了夸娥千卡智算集群在大模型訓(xùn)練中的高效性。
此次測試的成功不僅為摩爾線程和智譜AI的合作奠定了堅(jiān)實(shí)的基礎(chǔ),也為雙方在人工智能領(lǐng)域的深入探索提供了有力的技術(shù)支撐。未來,雙方將繼續(xù)攜手合作,共同推動GPU大模型在更多領(lǐng)域的應(yīng)用和發(fā)展。
-
AI
+關(guān)注
關(guān)注
87文章
32902瀏覽量
272398 -
人工智能
+關(guān)注
關(guān)注
1801文章
48215瀏覽量
242980 -
摩爾線程
+關(guān)注
關(guān)注
2文章
215瀏覽量
4854
發(fā)布評論請先 登錄
相關(guān)推薦
摩爾線程完成DeepSeek開源庫FlashMLA和DeepGEMM適配
摩爾線程宣布成功部署DeepSeek蒸餾模型推理服務(wù)
摩爾線程完成股改,籌備上市
摩爾線程GPU與超圖軟件大模型適配:共筑國產(chǎn)地理空間AI新生態(tài)
摩爾線程與超圖軟件完成產(chǎn)品兼容認(rèn)證
摩爾線程與羽人科技完成大語言模型訓(xùn)練測試
摩爾線程正式開源音頻理解大模型MooER
摩爾線程攜手智源研究院完成基于Triton的大模型算子庫適配
摩爾線程和樂創(chuàng)能源簽署戰(zhàn)略合作協(xié)議
摩爾線程與師者AI攜手完成70億參數(shù)教育AI大模型訓(xùn)練測試
摩爾線程和滴普科技完成大模型訓(xùn)練與推理適配
摩爾線程千卡智算集群與滴普企業(yè)大模型已完成訓(xùn)練及推理適配

摩爾線程與無問芯穹宣布完成基于GPU千卡集群的3B規(guī)模大模型實(shí)訓(xùn)

評論