0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
电子发烧友
开通电子发烧友VIP会员 尊享10大特权
海量资料免费下载
精品直播免费看
优质内容免费畅学
课程9折专享价
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

商湯科技推出SenseFoundry-VL方舟多模態(tài)新智平臺(tái)

商湯科技SenseTime ? 來源:商湯科技SenseTime ? 2024-07-12 14:15 ? 次閱讀

日日新」進(jìn)化到5.5,商湯AI產(chǎn)品會(huì)有哪些具體升級(jí)?

生成式AI創(chuàng)新應(yīng)用自不必說,商湯傳統(tǒng)視覺AI中的核心產(chǎn)品也正發(fā)生變化。

WAIC 2024期間,基于 “日日新5.5”大模型體系能力,商湯“方舟城市開放平臺(tái)”進(jìn)行全新產(chǎn)品架構(gòu)升級(jí),推出首個(gè)“大模型+城市服務(wù)”的解決方案及應(yīng)用實(shí)踐「SenseFoundry-VL 方舟多模態(tài)新智平臺(tái)」,助力智慧城市服務(wù)場(chǎng)景進(jìn)一步提智提效。

智慧城市走向多模態(tài)大模型賦能管理

「方舟多模態(tài)新智平臺(tái)」著力解決傳統(tǒng)視覺業(yè)務(wù)所面臨的交互方式單一化、泛化場(chǎng)景看不懂、復(fù)雜場(chǎng)景誤報(bào)高、大模型應(yīng)用難上手等問題。

在傳統(tǒng)智慧城市解決方案基礎(chǔ)上主要進(jìn)行三方面升級(jí):

“需求即指令”。通過Agent技術(shù),「方舟多模態(tài)新智平臺(tái)」構(gòu)建了可理解并處理多種業(yè)務(wù)的AI智能體,實(shí)現(xiàn)了需求描述向具象指令的高效轉(zhuǎn)化。這種方式更接近于人類交互,用戶可直接自然語言提問輸入查詢,大模型會(huì)理解用戶意圖并給出相應(yīng)的答案。

例如,在交通運(yùn)輸場(chǎng)景,交通部門或物流企業(yè)可通過構(gòu)建物流運(yùn)力分析智能體,提取車輛位置、車流狀況、天氣等相應(yīng)信息提取派單信息,最終制定更科學(xué)合理的物流車輛運(yùn)輸時(shí)空?qǐng)D譜。

“對(duì)話即檢索”。依托大模型視圖語義理解能力,可實(shí)現(xiàn)圖文資源的智能語義化檢索和對(duì)話式研判。讓用戶獲得“所說即所得”、“所問即所應(yīng)”的體驗(yàn)。

例如,在劇烈臺(tái)風(fēng)后,城市管理者可通過對(duì)話即刻檢索出樹木倒伏、電線桿傾倒等各類危害交通安全的場(chǎng)景,從而進(jìn)行快速響應(yīng)處理。

“提示即提優(yōu)”。依托大模型良好的泛化能力,無需海量定制研發(fā)投入,只需少量正負(fù)樣例數(shù)據(jù)和提示詞調(diào)整,即可一鍵生成通用模型和特定模型,部分復(fù)雜城市事件的識(shí)別準(zhǔn)確率高達(dá)90%以上,真正實(shí)現(xiàn)模型生產(chǎn)和調(diào)優(yōu)的使用易、落地快、成本低。

作為一款“聽得懂、會(huì)交流、擅優(yōu)化”的多模態(tài)大模型平臺(tái),「方舟多模態(tài)新智平臺(tái)」未來有望持續(xù)推動(dòng)智慧城市+大模型的迭代升級(jí),聚焦多模態(tài)、高效化、個(gè)性化、可解釋性和數(shù)據(jù)驅(qū)動(dòng)決策等方向,并拓展至智能交通、公共服務(wù)智能化、應(yīng)急響應(yīng)、城市服務(wù)與決策支持、區(qū)域協(xié)同發(fā)展等應(yīng)用場(chǎng)景。

wKgZomaQyhqAIKS_AAR-zcJv67Y887.jpg

已落地一線,實(shí)現(xiàn)城市服務(wù)十倍提效

目前,「方舟多模態(tài)新智平臺(tái)」已在城市服務(wù)場(chǎng)景中實(shí)際落地。

以城市便民服務(wù)為例,該平臺(tái)可實(shí)現(xiàn)便民窗口服務(wù)的智能化分類分撥、智能視頻設(shè)備調(diào)取、智能處置建議、智能系統(tǒng)信息查詢等能力。

在某一線城市12345公共服務(wù)便民熱線場(chǎng)景中,「方舟多模態(tài)新智平臺(tái)」助力12345工單的分類分撥速度提升至原先的10倍以上,并統(tǒng)一了分類標(biāo)準(zhǔn)。在短短一個(gè)月內(nèi),完成超過30萬次的分撥訴求,平均每天處理一萬余次。

借助「方舟多模態(tài)新智平臺(tái)」,單個(gè)分撥員原本一個(gè)月的工作量現(xiàn)在僅需一天即可完成,經(jīng)二次復(fù)核,準(zhǔn)確率高達(dá)90%以上。

這樣的智能化分撥應(yīng)用不僅切實(shí)有效,更極大減輕了政務(wù)工作壓力,顯著提升工作效率。

此外,「方舟多模態(tài)新智平臺(tái)」支持自然語言調(diào)取10萬路以上前端點(diǎn)位,實(shí)現(xiàn)分鐘級(jí)精準(zhǔn)檢索;升級(jí)后的模型架構(gòu)支持通過簡單提示詞,即刻創(chuàng)建全新場(chǎng)景分析功能,實(shí)現(xiàn)1天內(nèi)快速部署上線,3天內(nèi)手動(dòng)快速調(diào)優(yōu),部分場(chǎng)景通過二次分析后準(zhǔn)確率達(dá)90%以上。真正讓大模型迅速落地在各類應(yīng)用場(chǎng)景中,實(shí)現(xiàn)所想即所得。

差異化優(yōu)勢(shì)明顯,智慧城市行業(yè)新標(biāo)桿

與常見行業(yè)方案相比,商湯「方舟多模態(tài)新智平臺(tái)」差異化優(yōu)勢(shì)明顯,主要體現(xiàn)在三方面:平臺(tái)技術(shù)布局、硬件選型、業(yè)務(wù)應(yīng)用。

首先,是融合架構(gòu)的技術(shù)布局。視覺領(lǐng)域深厚算法積累+「日日新」領(lǐng)先大模型能力,為「方舟多模態(tài)新智平臺(tái)」的全面架構(gòu)升級(jí)奠定扎實(shí)基礎(chǔ)。

「方舟多模態(tài)新智平臺(tái)」采用的視覺-語言多模態(tài)大模型,集圖文對(duì)比、文本理解生成及交錯(cuò)圖文理解三大能力為一體,在國際權(quán)威機(jī)構(gòu)的國產(chǎn)化大模型評(píng)測(cè)中,位列第一梯隊(duì);同時(shí)視覺模型+大模型融合架構(gòu),AI智能體等引入,為城市AI應(yīng)用創(chuàng)新提供全方位的技術(shù)支撐。

其二,是國產(chǎn)適配的硬件選型?!阜街鄱嗄B(tài)新智平臺(tái)」充分研討了國產(chǎn)自主可控的方針政策。目前充分適配了主流的國產(chǎn)芯片和硬件服務(wù)器,為大模型國產(chǎn)化落地提供全面的算力保障。

第三,靈活可配的業(yè)務(wù)應(yīng)用。城市場(chǎng)景有復(fù)雜性高、碎片化強(qiáng)等特點(diǎn),「方舟多模態(tài)新智平臺(tái)」能根據(jù)智慧城市的具體需求,進(jìn)行高度定制化開發(fā)。此外,其創(chuàng)新性配套圖文可視化的提示工程設(shè)計(jì),也很好地兼顧了方案落地的泛化性及系統(tǒng)應(yīng)用的低門檻,有效保障AI大模型的落地效果。

伴隨全球數(shù)字化轉(zhuǎn)型加速,“智慧城市”與“大模型”結(jié)合被視為未來城市發(fā)展的關(guān)鍵?!阜街鄱嗄B(tài)新智平臺(tái)」是商湯在助力城市服務(wù)智能化發(fā)展中取得的突破性進(jìn)展,必將作為新質(zhì)生產(chǎn)力,開啟城市智能化發(fā)展新篇章。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • AI
    AI
    +關(guān)注

    關(guān)注

    87

    文章

    33747

    瀏覽量

    274533
  • 商湯科技
    +關(guān)注

    關(guān)注

    8

    文章

    550

    瀏覽量

    36589
  • 大模型
    +關(guān)注

    關(guān)注

    2

    文章

    2965

    瀏覽量

    3718

原文標(biāo)題:商湯推出「方舟多模態(tài)新智平臺(tái)」,首個(gè)多模態(tài)大模型落地城市服務(wù)場(chǎng)景

文章出處:【微信號(hào):SenseTime2017,微信公眾號(hào):商湯科技SenseTime】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 0人收藏

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    愛芯通元NPU適配Qwen2.5-VL-3B視覺模態(tài)大模型

    InternVL2.5-1B/8B/MPO,Huggingface推出的全球最小模態(tài)大模型SmloVLM-256M。為工業(yè)界提供了離線部署模態(tài)
    的頭像 發(fā)表于 04-21 10:56 ?1001次閱讀
    愛芯通元NPU適配Qwen2.5-<b class='flag-5'>VL</b>-3B視覺<b class='flag-5'>多</b><b class='flag-5'>模態(tài)</b>大模型

    基于MindSpeed MM玩轉(zhuǎn)Qwen2.5VL模態(tài)理解模型

    模態(tài)理解模型是讓AI像人類一樣,通過整合多維度信息(如視覺、語言、聽覺等),理解數(shù)據(jù)背后的語義、情感、邏輯或場(chǎng)景,從而完成推理、決策等任務(wù)。
    的頭像 發(fā)表于 04-18 09:30 ?329次閱讀
    基于MindSpeed MM玩轉(zhuǎn)Qwen2.5<b class='flag-5'>VL</b><b class='flag-5'>多</b><b class='flag-5'>模態(tài)</b>理解模型

    商湯“日日新”融合大模型登頂大語言與模態(tài)雙榜單

    據(jù)弗若斯特沙利文(Frost & Sullivan, 簡稱“沙利文”)聯(lián)合頭豹研究院發(fā)布的《2025年中國大模型年度評(píng)測(cè)》結(jié)果顯示:在語言和模態(tài)核心能力測(cè)評(píng)中,商湯“日日新”融合大模型斬獲國內(nèi)第一梯隊(duì)成績。
    的頭像 發(fā)表于 03-18 10:35 ?412次閱讀

    ?模態(tài)交互技術(shù)解析

    模態(tài)交互 模態(tài)交互( Multimodal Interaction )是指通過多種感官通道(如視覺、聽覺、觸覺等)或多種交互方式(如語音、手勢(shì)、觸控、眼動(dòng)等)與計(jì)算機(jī)系統(tǒng)進(jìn)行自然、
    的頭像 發(fā)表于 03-17 15:12 ?1143次閱讀

    商湯科技這兩款產(chǎn)品接入DeepSeek

    在AI大模型技術(shù)加速落地的背景下,商湯科技方舟模態(tài)新智平臺(tái)(SenseFoundry
    的頭像 發(fā)表于 02-27 11:23 ?497次閱讀

    體驗(yàn)MiniCPM-V 2.6 模態(tài)能力

    模態(tài)組網(wǎng)
    jf_23871869
    發(fā)布于 :2025年01月20日 13:40:48

    商湯科技推出“日日新”融合大模型

    剛剛,商湯正式推出“日日新”融合大模型,領(lǐng)先實(shí)現(xiàn)原生融合模態(tài),深度推理能力與模態(tài)信息處理能力均大幅提升,并在兩大權(quán)威評(píng)測(cè)榜單奪得第一,成為
    的頭像 發(fā)表于 01-10 15:59 ?492次閱讀

    商湯日日新模態(tài)大模型權(quán)威評(píng)測(cè)第一

    剛剛,商湯科技日日新SenseNova模態(tài)大模型,在權(quán)威綜合評(píng)測(cè)權(quán)威平臺(tái)OpenCompass的模態(tài)
    的頭像 發(fā)表于 12-20 10:39 ?722次閱讀

    超聲界“內(nèi)卷終結(jié)者”!ZRT智銳通提供全新引擎打造模態(tài)影像融合系統(tǒng)

    模態(tài)影像融合超聲系統(tǒng)的市場(chǎng)規(guī)模也在不斷擴(kuò)大,國內(nèi)眾多超聲系統(tǒng)廠家也在不斷尋找合適的硬件平臺(tái),用以承載旗下的模態(tài)影像融合超聲系統(tǒng)。
    的頭像 發(fā)表于 11-11 10:52 ?1033次閱讀
    超聲界“內(nèi)卷終結(jié)者”!ZRT智銳通提供全新引擎打造<b class='flag-5'>多</b><b class='flag-5'>模態(tài)</b>影像融合系統(tǒng)

    利用OpenVINO部署Qwen2模態(tài)模型

    模態(tài)大模型的核心思想是將不同媒體數(shù)據(jù)(如文本、圖像、音頻和視頻等)進(jìn)行融合,通過學(xué)習(xí)不同模態(tài)之間的關(guān)聯(lián),實(shí)現(xiàn)更加智能化的信息處理。簡單來說,模態(tài)
    的頭像 發(fā)表于 10-18 09:39 ?949次閱讀

    商湯Sensechat向香港用戶免費(fèi)開放

    「Sensechat 」基于商湯今年5月推出的“商量模態(tài)大模型粵語版”。依托商湯“日日新”出色語言和
    的頭像 發(fā)表于 09-18 15:53 ?882次閱讀

    通義千問發(fā)布第二代視覺語言模型Qwen2-VL

    。Qwen2-VL系列模型在模態(tài)處理領(lǐng)域取得了突破性進(jìn)展,于多個(gè)權(quán)威測(cè)評(píng)中嶄露頭角,刷新了多項(xiàng)最佳成績記錄,展現(xiàn)出強(qiáng)大的視覺理解與語言交互能力。
    的頭像 發(fā)表于 09-03 16:31 ?760次閱讀

    云知聲推出山海模態(tài)大模型

    在人工智能技術(shù)的浩瀚星海中,模態(tài)交互技術(shù)正成為引領(lǐng)未來的新航標(biāo)。繼OpenAI的GPT-4o掀起滔天巨浪后,云知聲以創(chuàng)新之姿,推出了其匠心獨(dú)運(yùn)的山海
    的頭像 發(fā)表于 08-27 15:20 ?540次閱讀

    商湯絕影在行業(yè)率先實(shí)現(xiàn)原生模態(tài)大模型的車端部署

    “基于原生模態(tài)大模型,商湯絕影正在打造一系列全新的車載智能化產(chǎn)品,推動(dòng)智能汽車向超級(jí)智能體進(jìn)化。”商湯科技聯(lián)合創(chuàng)始人、首席科學(xué)家、絕影智能汽車事業(yè)群總裁王曉剛在WAIC 2024
    的頭像 發(fā)表于 07-23 10:52 ?767次閱讀
    <b class='flag-5'>商湯</b>絕影在行業(yè)率先實(shí)現(xiàn)原生<b class='flag-5'>多</b><b class='flag-5'>模態(tài)</b>大模型的車端部署

    商湯科技發(fā)布“商量”粵語版大模型

    商湯科技近日發(fā)布了針對(duì)粵語用戶量身定制的商量語言大模型和商量模態(tài)大模型。這兩款模型即日起向企業(yè)用戶開放API接口,同時(shí)Web版和App版也將很快向粵語區(qū)用戶免費(fèi)推出,以滿足廣大用戶的
    的頭像 發(fā)表于 05-31 10:52 ?1416次閱讀

    電子發(fā)燒友

    中國電子工程師最喜歡的網(wǎng)站

    • 2931785位工程師會(huì)員交流學(xué)習(xí)
    • 獲取您個(gè)性化的科技前沿技術(shù)信息
    • 參加活動(dòng)獲取豐厚的禮品