0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

商湯絕影真·端到端自動(dòng)駕駛解決方案UniAD上車首秀

商湯科技SenseTime ? 來源:商湯科技SenseTime ? 2024-04-28 18:23 ? 次閱讀

近日,商湯科技發(fā)布全新升級(jí)的“日日新SenseNova 5.0”大模型,廣受好評!

6000億參數(shù)的“日日新5.0”采用混合專家架構(gòu)(MOE),具備更強(qiáng)的知識(shí)、數(shù)學(xué)、推理及代碼能力,成為國內(nèi)首個(gè)全面對標(biāo)甚至超越GPT-4 Turbo的大模型,多模態(tài)能力領(lǐng)先GPT-4V。基于端云結(jié)合的架構(gòu),商湯端側(cè)大模型大幅超越同量級(jí)大模型,越級(jí)比肩7B、13B大模型,更適合車端部署

依托“日日新SenseNova 5.0”行業(yè)領(lǐng)先硬核實(shí)力,商湯絕影打造了一系列大模型車端產(chǎn)品,并在2024北京車展“上車”首秀。

本屆車展,商湯絕影參展的核心關(guān)鍵詞是:原生態(tài)大模型、真·端到端自動(dòng)駕駛UniAD“上車” 、多模態(tài)場景大腦和全新3D交互,帶來AGI時(shí)代的全新出行體驗(yàn)。

智駕方面,商湯絕影首次向公眾展示了面向量產(chǎn)的真·端到端自動(dòng)駕駛解決方案UniAD(Unified Autonomous Driving)的道路測試表現(xiàn)。

作為全球首個(gè)提出感知決策一體化自動(dòng)駕駛通用模型的公司,商湯絕影的技術(shù)落地速度也“絕速引領(lǐng)”。

商湯絕影還帶來了以多模態(tài)場景大腦為核心的AI大模型座艙產(chǎn)品矩陣以及全新座艙3D交互演示,以通用人工智能(AGI)技術(shù),驅(qū)動(dòng)靈活自適應(yīng)、深度個(gè)性化、安全可信賴、有人文關(guān)懷的未來出行全新體驗(yàn)。

商湯科技聯(lián)合創(chuàng)始人、首席科學(xué)家、絕影智能汽車事業(yè)群總裁王曉剛表示:“未來汽車智能化的競爭,本質(zhì)上是通用人工智能技術(shù)融合應(yīng)用的比拼。商湯絕影致力于成為加速智能汽車駛?cè)階GI時(shí)代的核心技術(shù)伙伴,給智能汽車產(chǎn)業(yè)帶來生產(chǎn)效率和交互體驗(yàn)的雙重革新,將攜手合作伙伴提供通用人工智能技術(shù)驅(qū)動(dòng)的智能汽車全新體驗(yàn),共同定義未來出行?!?/p>

像人一樣開車!

真·端到端自動(dòng)駕駛解決方案UniAD上車首秀

2023年,商湯及其聯(lián)合實(shí)驗(yàn)室提出的行業(yè)首個(gè)感知決策一體化自動(dòng)駕駛通用模型UniAD榮獲CVPR 2023最佳論文,引發(fā)行業(yè)轟動(dòng)!

僅一年后,UniAD已經(jīng)“上車”!

真·端到端,無需高精地圖,僅靠視覺感知。

無論是復(fù)雜城市道路還是無中線的鄉(xiāng)村道路上,車輛都能搞定一系列高難度操作——大角度左轉(zhuǎn)上橋、避讓占道車輛、施工區(qū)域、繞行跑步行人……做到“像人一樣開車”!

0a4b7d5c-03c8-11ef-a297-92fbcf53809c.png

今年以來,受特斯拉FSD V12版本的端到端自動(dòng)駕駛方案影響,行業(yè)號(hào)稱“端到端”智駕方案不斷涌現(xiàn),但大多由感知和決策兩個(gè)模型組成的 “兩段式”架構(gòu),存在信息傳遞過濾或丟失的問題。

UniAD將感知、決策、規(guī)劃等模塊都整合到一個(gè)全棧Transformer端到端模型,實(shí)現(xiàn)感知決策一體化的真·端到端自動(dòng)駕駛。

0a51ce46-03c8-11ef-a297-92fbcf53809c.png

UniAD真·端到端:感知決策一體化的通用模型

為什么端到端智駕方案如此重要且緊迫?

一方面是智駕場景(尤其城區(qū)場景)計(jì)算的復(fù)雜度呈指數(shù)級(jí)增長,另一方面?zhèn)鹘y(tǒng)方法人力成本高且難以應(yīng)對長尾路況(corner case),而端到端技術(shù)可高效、低成本應(yīng)對這些問題。

具體而言,商湯絕影端到端模型泛化能力強(qiáng)、迭代效率快,可以幫助車企低成本快速開城,純視覺感知的無圖方案,進(jìn)一步降低系統(tǒng)的軟硬件成本,助力智駕普及

在端到端系統(tǒng)基礎(chǔ)上,商湯絕影還在車展期間帶來了新一代自動(dòng)駕駛大模型DriveAGI,推動(dòng)自動(dòng)駕駛從數(shù)據(jù)驅(qū)動(dòng)向認(rèn)知驅(qū)動(dòng)的躍遷。

0a5ec38a-03c8-11ef-a297-92fbcf53809c.png

新一代自動(dòng)駕駛大模型DriveAGI:

可感知、可交互、可信賴

依托多模態(tài)大模型,DriveAGI將是目前最貼近人類思維模式、最能理解人類意圖并有最強(qiáng)解決駕駛困難場景能力的技術(shù)方案,向完全無人駕駛邁出重要一步。

多模態(tài)場景大腦

讓智能座艙“真”懂你!

前不久上市的小米SU7將AI大模型帶進(jìn)座艙,而商湯“日日新”大模型也全面助力小愛同學(xué)車載語音場景應(yīng)用。

本次車展,商湯絕影展示了以多模態(tài)場景大腦為核心的一系列全景感知、主動(dòng)關(guān)懷且富有創(chuàng)造力的大模型座艙產(chǎn)品

多模態(tài)場景大腦讓智能汽車可以高效準(zhǔn)確地全景感知和深度理解用戶需求和周圍環(huán)境,打通不同應(yīng)用,將離散的單點(diǎn)功能聚合在一起。

0a657176-03c8-11ef-a297-92fbcf53809c.png

多模態(tài)大模型可以準(zhǔn)確感知并識(shí)別車外信息

比如,可以基于地理位置推薦符合用戶喜好的餐廳,介紹用戶感興趣的外部自然景物,準(zhǔn)確感知識(shí)別車型、標(biāo)志性建筑物等車外信息,打破座艙本身的限制,讓用戶享受更為自由無束縛的出行體驗(yàn)。

以商湯“大醫(yī)”醫(yī)療健康大模型為橋梁的“旅醫(yī)”,讓用戶在座艙內(nèi)就可以獲得專業(yè)及個(gè)性化的健康管理服務(wù),讓出行更安心。

而基于AIGC大模型技術(shù)的“神筆”,可以把用戶簡單的繪畫線條轉(zhuǎn)變成具有美感的藝術(shù)作品,增添駕乘樂趣。

去年Apple Vision Pro的問世展現(xiàn)了3D交互的創(chuàng)新體驗(yàn)和應(yīng)用潛力,本次車展,商湯絕影將3D Gaze高精視線交互和3D 動(dòng)態(tài)手勢交互這兩大全新座艙3D交互演示帶到現(xiàn)場,帶來如同“Vision Pro”裸眼上車、更符合人類直覺的自然交互體驗(yàn)。

0a909324-03c8-11ef-a297-92fbcf53809c.gif

3D Gaze高精視線交互是商湯絕影全球首創(chuàng)的能夠通過視線定位與屏幕圖標(biāo)進(jìn)行交互的智能座艙技術(shù),讓用戶無需點(diǎn)按屏幕,通過眼神即可精準(zhǔn)控制中控圖標(biāo),完成多種交互操作

0a9e5b44-03c8-11ef-a297-92fbcf53809c.gif

3D 動(dòng)態(tài)手勢交互是行業(yè)領(lǐng)先的支持動(dòng)態(tài)手勢和手部微動(dòng)作識(shí)別的智能座艙技術(shù),用戶通過手勢“隔空”實(shí)現(xiàn)各類座艙精細(xì)化的交互,打破傳統(tǒng)按鍵和屏幕觸控方式的繁瑣和局限

商湯絕影還在進(jìn)一步探索艙駕融合,實(shí)現(xiàn)智能駕駛和智能座艙在硬件、軟件及應(yīng)用層面的全面融合,提升用戶體驗(yàn)、降低系統(tǒng)成本,進(jìn)一步打破艙內(nèi)外的界限和束縛,涌現(xiàn)更多創(chuàng)新功能,帶來更安全、更加全方位,更具人文關(guān)懷的新體驗(yàn)。

加速智能汽車駛?cè)階GI時(shí)代

商湯絕影與哪吒汽車全面深化戰(zhàn)略合作

AGI的突破掀起技術(shù)范式的革新,堅(jiān)實(shí)的核心研發(fā)能力成為行業(yè)競爭的關(guān)鍵。商湯絕影率先構(gòu)建了四大技術(shù)基座,正在成長為加速智能汽車駛?cè)階GI時(shí)代的核心技術(shù)伙伴。

SenseCore商湯大裝置是行業(yè)領(lǐng)先的AI基礎(chǔ)設(shè)施,能夠以高達(dá)12,000 petaFLOPS的豐沛算力支持商湯絕影系列原生態(tài)大模型的高效迭代;

商湯絕影為智能汽車前瞻構(gòu)建了UniAD、DriveAGI以及面向座艙的多模態(tài)場景大腦等系列原生態(tài)大模型,加速端到端自動(dòng)駕駛和大模型在智能座艙場景的落地;

端云協(xié)同和艙駕融合的創(chuàng)新軟硬件架構(gòu),讓智能汽車降本增效、涌現(xiàn)創(chuàng)新功能;

全棧的數(shù)據(jù)生產(chǎn)管線,實(shí)現(xiàn)大模型的高質(zhì)量訓(xùn)練。

車展上,哪吒汽車官宣與商湯絕影全面深化戰(zhàn)略合作,雙方將開啟合作新篇章。商湯絕影將以大算力和原生態(tài)汽車垂類大模型更好地助力哪吒汽車智能化發(fā)展,共同探索更前沿的智能駕駛技術(shù)以及多模態(tài)場景大腦帶來的全新智慧出行體驗(yàn)。

0ac71fa2-03c8-11ef-a297-92fbcf53809c.png

未來一到兩年,智能汽車處在一個(gè)關(guān)鍵的時(shí)間節(jié)點(diǎn),它與通用人工智能的深度融合將開啟一個(gè)全新的時(shí)代,車企需要強(qiáng)有力的核心技術(shù)伙伴攜手共進(jìn)。

商湯絕影正是行業(yè)稀缺的同時(shí)具備“算力+算法+量產(chǎn)經(jīng)驗(yàn)”全棧技術(shù)領(lǐng)先的核心供應(yīng)商,是一匹應(yīng)勢而躍的千里馬,能夠助力合作伙伴在AGI時(shí)代持續(xù)領(lǐng)先。



審核編輯:劉清

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 自動(dòng)駕駛
    +關(guān)注

    關(guān)注

    788

    文章

    14151

    瀏覽量

    169046
  • 人工智能技術(shù)
    +關(guān)注

    關(guān)注

    2

    文章

    219

    瀏覽量

    10727
  • 大模型
    +關(guān)注

    關(guān)注

    2

    文章

    2965

    瀏覽量

    3718

原文標(biāo)題:2024北京車展丨商湯絕影真·端到端自動(dòng)駕駛解決方案UniAD上車首秀

文章出處:【微信號(hào):SenseTime2017,微信公眾號(hào):商湯科技SenseTime】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦
    熱點(diǎn)推薦

    特斯拉帶火“”智駕,國內(nèi)車企加速上車

    2024年1月,特斯拉開始大規(guī)模推送FSD V12,從此“”智能駕駛在汽車行業(yè)興起。小鵬、理想、智已、商湯等公司也紛紛推出自家的
    的頭像 發(fā)表于 12-02 08:45 ?2369次閱讀
    特斯拉帶火“<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>”智駕,國內(nèi)車企加速<b class='flag-5'>上車</b>

    一文帶你厘清自動(dòng)駕駛架構(gòu)差異

    [首發(fā)于智駕最前沿微信公眾號(hào)]隨著自動(dòng)駕駛技術(shù)飛速發(fā)展,智能駕駛系統(tǒng)的設(shè)計(jì)思路也經(jīng)歷了從傳統(tǒng)模塊化架構(gòu)
    的頭像 發(fā)表于 05-08 09:07 ?93次閱讀
    一文帶你厘清<b class='flag-5'>自動(dòng)駕駛</b><b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>架構(gòu)差異

    自動(dòng)駕駛中基于規(guī)則的決策和大模型有何區(qū)別?

    自動(dòng)駕駛架構(gòu)的選擇上,也經(jīng)歷了從感知、決策控制、執(zhí)行的三段式架構(gòu)到現(xiàn)在火熱的大模型,尤其是在2024年特斯拉推出FSD V12后,各車企更是陸續(xù)推出自家的
    的頭像 發(fā)表于 04-13 09:38 ?2663次閱讀
    <b class='flag-5'>自動(dòng)駕駛</b>中基于規(guī)則的決策和<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>大模型有何區(qū)別?

    自動(dòng)駕駛技術(shù)研究與分析

    編者語:「智駕最前沿」微信公眾號(hào)后臺(tái)回復(fù):C-0450,獲取本文參考報(bào)告:《自動(dòng)駕駛行業(yè)研究報(bào)告》pdf下載方式。 自動(dòng)駕駛進(jìn)入202
    的頭像 發(fā)表于 12-19 13:07 ?710次閱讀

    從車企實(shí)踐看自動(dòng)駕駛解決方案

    中的重要性日益凸顯,這也促使眾多汽車制造商加快了智能化技術(shù)的研發(fā)和工程投入,未能跟上智能化步伐的汽車品牌可能會(huì)逐漸失去市場競爭力,自動(dòng)駕駛技術(shù)的發(fā)展已然進(jìn)入關(guān)鍵階段,其中概念的提
    的頭像 發(fā)表于 11-19 10:55 ?997次閱讀
    從車企實(shí)踐看<b class='flag-5'>自動(dòng)駕駛</b><b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b><b class='flag-5'>解決方案</b>

    連接視覺語言大模型與自動(dòng)駕駛

    自動(dòng)駕駛在大規(guī)模駕駛數(shù)據(jù)上訓(xùn)練,展現(xiàn)出很強(qiáng)的決策規(guī)劃能力,但是面對復(fù)雜罕見的駕駛場景,依然
    的頭像 發(fā)表于 11-07 15:15 ?582次閱讀
    連接視覺語言大模型與<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b><b class='flag-5'>自動(dòng)駕駛</b>

    Waymo利用谷歌Gemini大模型,研發(fā)端自動(dòng)駕駛系統(tǒng)

    邁新步,為其機(jī)器人出租車業(yè)務(wù)引入了一種基于谷歌多模態(tài)大語言模型(MLLM)“Gemini”的全新訓(xùn)練模型——“多模態(tài)自動(dòng)駕駛模型”(EMMA)。
    的頭像 發(fā)表于 10-31 16:55 ?1493次閱讀

    智己汽車“”智駕方案推出,老司機(jī)真的會(huì)被取代嗎?

    隨著智能駕駛技術(shù)的發(fā)展,行業(yè)已經(jīng)從早期基于簡單規(guī)則和模塊化邏輯的自動(dòng)駕駛,逐步邁向依托深度學(xué)習(xí)的高復(fù)雜度智能駕駛解決方案,各車企也緊跟潮流,先后宣布了自己的
    的頭像 發(fā)表于 10-30 09:47 ?665次閱讀
    智己汽車“<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>”智駕<b class='flag-5'>方案</b>推出,老司機(jī)真的會(huì)被取代嗎?

    Mobileye自動(dòng)駕駛解決方案的深度解析

    自動(dòng)駕駛技術(shù)正處于快速發(fā)展之中,各大科技公司和汽車制造商均在爭相布局,試圖在這個(gè)新興領(lǐng)域占據(jù)一席之地。Mobileye作為全球自動(dòng)駕駛技術(shù)的領(lǐng)軍企業(yè)之一,憑借其獨(dú)特的
    的頭像 發(fā)表于 10-17 09:35 ?725次閱讀
    Mobileye<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b><b class='flag-5'>自動(dòng)駕駛</b><b class='flag-5'>解決方案</b>的深度解析

    智駕進(jìn)程發(fā)力?小鵬、蔚來模型上車

    轉(zhuǎn)型的關(guān)鍵時(shí)期,而智能駕駛技術(shù)的發(fā)展被視為這場變革的核心動(dòng)力。作為自動(dòng)駕駛的支撐技術(shù)之一,大模型憑借其感知、規(guī)劃和控制的一體化能力,大
    的頭像 發(fā)表于 09-26 09:19 ?505次閱讀
    智駕進(jìn)程發(fā)力?小鵬、蔚來<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>模型<b class='flag-5'>上車</b>

    實(shí)現(xiàn)自動(dòng)駕駛,唯有

    ,去年行業(yè)主流方案還是輕高精地圖城區(qū)智駕,今年大家的目標(biāo)都瞄到了(End-to-End, E2E)。
    的頭像 發(fā)表于 08-12 09:14 ?1218次閱讀
    實(shí)現(xiàn)<b class='flag-5'>自動(dòng)駕駛</b>,唯有<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>?

    商湯在行業(yè)率先實(shí)現(xiàn)原生多模態(tài)大模型的車部署

    “基于原生多模態(tài)大模型,商湯正在打造一系列全新的車載智能化產(chǎn)品,推動(dòng)智能汽車向超級(jí)智能體進(jìn)化。”商湯科技聯(lián)合創(chuàng)始人、首席科學(xué)家、
    的頭像 發(fā)表于 07-23 10:52 ?768次閱讀
    <b class='flag-5'>商湯</b><b class='flag-5'>絕</b><b class='flag-5'>影</b>在行業(yè)率先實(shí)現(xiàn)原生多模態(tài)大模型的車<b class='flag-5'>端</b>部署

    理想汽車加速自動(dòng)駕駛布局,成立“”實(shí)體組織

    近期,理想汽車在其智能駕駛領(lǐng)域邁出了重要一步,正式成立了專注于“自動(dòng)駕駛”的實(shí)體組織,該組織規(guī)模超過200人,標(biāo)志著理想在
    的頭像 發(fā)表于 07-17 15:42 ?1522次閱讀

    廣汽豐田攜手Momenta推出全場景智能駕駛方案

    在近日舉行的廣汽豐田科技開放日上,一場引領(lǐng)未來的智能駕駛技術(shù)盛宴吸引了全球目光。廣汽豐田攜手國內(nèi)領(lǐng)先的自動(dòng)駕駛解決方案提供商Momenta,共同推出了
    的頭像 發(fā)表于 06-29 17:36 ?1885次閱讀

    商湯大模型C助力LEVC全新智慧出行體驗(yàn)

    大模型上車,翼L380更是為用戶打造了創(chuàng)新的智能座艙體驗(yàn)。作為中國智能座艙的領(lǐng)軍企業(yè),商湯與LEVC翼
    的頭像 發(fā)表于 06-26 15:00 ?1580次閱讀

    電子發(fā)燒友

    中國電子工程師最喜歡的網(wǎng)站

    • 2931785位工程師會(huì)員交流學(xué)習(xí)
    • 獲取您個(gè)性化的科技前沿技術(shù)信息
    • 參加活動(dòng)獲取豐厚的禮品