博覽會(huì)上,商湯絕影基于以座艙大腦為核心的全新智能座艙架構(gòu),首次全方位展示了智能座艙大模型產(chǎn)品體系,將安全舒適、極簡(jiǎn)交互以及個(gè)性懂你的智能座艙體驗(yàn)帶到全球消費(fèi)者面前。IAA MOBILITY 2023商湯絕影展臺(tái)(展位號(hào):A2館D30)商湯科技聯(lián)合創(chuàng)始人、首席科學(xué)家、絕影智能汽車事業(yè)群總裁王曉剛作為中國(guó)汽車供應(yīng)鏈杰出代表,受邀參加IAA首次舉辦的中國(guó)媒體溝通會(huì),同時(shí)還在車展期間帶來(lái)《通用人工智能時(shí)代下的智能汽車》的主題演講。
王曉剛表示:“商湯絕影自誕生起就蘊(yùn)含著國(guó)際化的基因,在多年的創(chuàng)新與實(shí)踐中逐步發(fā)展成為駕、艙、云三位一體的架構(gòu)體系,如今走向全球恰逢其時(shí)。此次車展可以說(shuō)是AGI時(shí)代一個(gè)令人興奮的新起點(diǎn),我們期待將長(zhǎng)期沉淀的大模型技術(shù)能力和量產(chǎn)經(jīng)驗(yàn)帶給全球客戶,讓智能座艙變成暖心懂你的好管家,讓智能駕駛變成安全可靠的老司機(jī),共同開啟人機(jī)共駕的新體驗(yàn)?!?/span>
自2016年與本田合作以來(lái),7年來(lái)商湯絕影已與超過(guò)30家國(guó)內(nèi)外新勢(shì)力車企、傳統(tǒng)車企和合資車企強(qiáng)強(qiáng)聯(lián)合,累計(jì)前裝定點(diǎn)數(shù)量已超3600萬(wàn)臺(tái)。
▎大模型加持座艙大腦,打造“懂你”的管家式體驗(yàn)
傳統(tǒng)智能座艙大多只能提供預(yù)設(shè)功能,決策和控制均基于規(guī)則,難以進(jìn)行差異化的服務(wù),也無(wú)法隨著用戶的使用而進(jìn)化。
大模型強(qiáng)大的認(rèn)知理解、邏輯思維能力配合絕影團(tuán)隊(duì)打造的專屬記憶模塊,可以將離散的單點(diǎn)功能串聯(lián)在一起,把“懂你”的管家式體驗(yàn)帶進(jìn)現(xiàn)實(shí)。
在今年4月上海車展期間,商湯絕影首次展示了“大模型上車”的人性化體驗(yàn)。不到半年,商湯絕影完成了以座艙大腦為核心的架構(gòu)升級(jí),并將智能座艙大模型產(chǎn)品體系帶到博覽會(huì)現(xiàn)場(chǎng)。
商湯絕影智能座艙大模型產(chǎn)品體系以車端多模態(tài)感知和云端大模型服務(wù)作為基礎(chǔ),以車艙大腦作為核心,結(jié)合安全、娛樂(lè)、教育、效率等用戶可感知場(chǎng)景設(shè)計(jì),并通過(guò)數(shù)字人作為用戶交互窗口,打造“更懂你、有思想、有邏輯”的車載管家。
比如:
-
健康問(wèn)診:利用車內(nèi)的視覺(jué)健康檢測(cè)技術(shù),結(jié)合醫(yī)療垂域模型,快速處理車上應(yīng)急情況;
-
旅游攻略:通過(guò)自然語(yǔ)言準(zhǔn)確理解用戶意圖,進(jìn)行旅游推薦和規(guī)劃,并完成地圖、酒店等服務(wù)的生態(tài)打通,讓旅游更省心;
-
兒童模式:可為不同年齡段的孩子們提供有趣的故事伴讀和互動(dòng)問(wèn)答,還能和孩子們共讀古詩(shī)詞、共創(chuàng)故事,引導(dǎo)和開發(fā)兒童想象力,讓全家出游充滿溫馨氛圍;
-
AI說(shuō)明書:“AI說(shuō)明書”可借助大模型的長(zhǎng)文本理解等能力,讓用戶只需通過(guò)自然語(yǔ)言與系統(tǒng)交流,就能方便獲取車輛使用說(shuō)明;
-
疲勞緩解:DMS系統(tǒng)感知到用戶疲勞以后,大模型可以根據(jù)用戶的使用習(xí)慣和當(dāng)前環(huán)境推薦不同的系統(tǒng)操作來(lái)緩解,比如推薦音樂(lè)或者聊些用戶感興趣的話題;
-
新聞概要:系統(tǒng)可以自動(dòng)搜索和總結(jié)用戶感興趣的新聞,在用戶上車場(chǎng)景做快速的介紹;
-
角色切換:大模型可以模擬不同的用戶角色與車內(nèi)用戶進(jìn)行交流,或嚴(yán)肅或活潑,非常適合兒童的童趣對(duì)話;
-
隔空作畫:結(jié)合座艙視覺(jué)感知系統(tǒng)捕捉手部位置,生成繪畫草圖,利用大模型能力根據(jù)草圖直接生成符合用戶意圖的畫作。
-
與國(guó)內(nèi)車企緊密合作,將各種遮擋、眼睛反光、頭姿視線不一致、不同坐姿、小眼睛大角度等長(zhǎng)尾問(wèn)題的誤報(bào)率降至萬(wàn)分之一,到達(dá)行業(yè)領(lǐng)先水平。
-
通過(guò)歐盟DDAW(駕駛員嗜睡和注意力警告)認(rèn)證,且測(cè)試結(jié)果遠(yuǎn)高于DDAW的法規(guī)要求,并達(dá)到Euro NCAP(歐洲新車安全評(píng)鑒協(xié)會(huì))法規(guī)標(biāo)準(zhǔn),為合作車型在歐洲上市保駕護(hù)航。
▎全球之旅率先啟程,助力蔚來(lái)、高合等車企進(jìn)軍國(guó)際市場(chǎng)作為具有國(guó)際化基因的智能汽車時(shí)代通用人工智能核心供應(yīng)商,商湯絕影的歐洲之旅已先于本次博覽會(huì)啟程。
目前,商湯絕影的定點(diǎn)車型中有近20款海外車型,已助力蔚來(lái)、高合等國(guó)內(nèi)知名汽車品牌進(jìn)軍國(guó)際市場(chǎng)。
蔚來(lái)在歐洲售賣的全系5款車型已全部搭載商湯絕影的多項(xiàng)AI技術(shù)。比如,商湯絕影Face ID技術(shù)可以在用戶落座后,一步到位將各項(xiàng)個(gè)性化設(shè)置調(diào)整為用戶的個(gè)人偏好。當(dāng)感知到艙內(nèi)乘員時(shí),系統(tǒng)還會(huì)自動(dòng)調(diào)節(jié)空調(diào)風(fēng)向,營(yíng)造更智能舒適的艙內(nèi)環(huán)境。兒童關(guān)懷&兒童遺忘檢測(cè)系統(tǒng)還可在感知到兒童意外留置車內(nèi)時(shí),及時(shí)反饋給NOMI語(yǔ)音助手,暖心守護(hù)家人安全。
高合HiPhi X豪華超跑SUV可通過(guò)B柱驗(yàn)證駕駛員身份,讓用戶無(wú)感上車,解放雙手。 高合HiPhi Z豪華純電超跑GT則同時(shí)搭載了DMS駕駛員感知系統(tǒng)與OMS乘員感知系統(tǒng),不僅可及時(shí)預(yù)警駕駛員疲勞分心狀態(tài),還可智能感知乘員手勢(shì)進(jìn)行美顏拍照,一路守護(hù)駕乘安全的同時(shí)豐富車載娛樂(lè)體驗(yàn)。除了智能座艙,商湯絕影作為國(guó)內(nèi)第一批率先激活L2++級(jí)別自動(dòng)駕駛量產(chǎn)的服務(wù)商,也在大模型的加持下,實(shí)現(xiàn)了核心技術(shù)的再度突破。商湯聯(lián)合團(tuán)隊(duì)提出的UniAD(Unified Autonomous Driving)自動(dòng)駕駛通用算法框架獲得2023年度CVPR最佳論文,首次將檢測(cè)、跟蹤、建圖、預(yù)測(cè)及規(guī)劃整合到一個(gè)基于 Transformer 的端到端網(wǎng)絡(luò)框架下,實(shí)現(xiàn)多目標(biāo)追蹤準(zhǔn)確率提升20%、車道線預(yù)測(cè)準(zhǔn)確率提升30%、目標(biāo)軌跡預(yù)測(cè)誤差下降38%、規(guī)劃誤差下降28%。新算法的量產(chǎn)預(yù)計(jì)將于2023年四季度準(zhǔn)備就緒,進(jìn)一步提高絕影自動(dòng)駕駛產(chǎn)品的行業(yè)競(jìng)爭(zhēng)力。
今年上半年,商湯絕影成績(jī)亮眼,量產(chǎn)業(yè)務(wù)同比增長(zhǎng)5.7倍,量產(chǎn)交付數(shù)量達(dá)到39萬(wàn)臺(tái)車,新增定點(diǎn)數(shù)量達(dá)500多萬(wàn)臺(tái),累計(jì)定點(diǎn)車型160多款。
德國(guó)是現(xiàn)代汽車的發(fā)祥地,商湯絕影將以IAA MOBILITY為舞臺(tái),推動(dòng)大模型“脫虛向?qū)崱保c全球車企一同打開智能汽車的無(wú)盡想象空間,推動(dòng)駕乘體驗(yàn)躍遷升級(jí)。
相關(guān)閱讀,戳這里
《商湯絕影智能汽車事業(yè)群總裁王曉剛:通用人工智能下的智能汽車》
《商湯絕影與深圳前海管理局、巴士集團(tuán)達(dá)成戰(zhàn)略合作》
原文標(biāo)題:商湯絕影“亮劍”慕尼黑車展,首秀智能座艙大模型產(chǎn)品體系
文章出處:【微信公眾號(hào):商湯科技SenseTime】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
-
商湯科技
+關(guān)注
關(guān)注
8文章
511瀏覽量
36093
原文標(biāo)題:商湯絕影“亮劍”慕尼黑車展,首秀智能座艙大模型產(chǎn)品體系
文章出處:【微信號(hào):SenseTime2017,微信公眾號(hào):商湯科技SenseTime】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
發(fā)布評(píng)論請(qǐng)先 登錄
相關(guān)推薦
評(píng)論