0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

麻省理工學(xué)院CSAIL將人工智能中的視覺(jué)和觸覺(jué)結(jié)合起來(lái)

堅(jiān)白 ? 來(lái)源:電子發(fā)燒友網(wǎng) ? 作者:南山 ? 2019-06-25 16:08 ? 次閱讀
我們已經(jīng)向人類層面的智慧邁進(jìn)了一步。圖像識(shí)別技術(shù)和觸覺(jué)傳感器正在相互結(jié)合,以提高它們的能力。麻省理工學(xué)院計(jì)算機(jī)科學(xué)與人工智能實(shí)驗(yàn)室(CSAIL)創(chuàng)建了一個(gè)觸覺(jué)和視覺(jué)信息數(shù)據(jù)庫(kù),并利用它來(lái)訓(xùn)練人工智能系統(tǒng)來(lái)推斷物體的外觀和感覺(jué)。
圖:李云珠,麻省理工學(xué)院CSAIL的博士生,領(lǐng)導(dǎo)了這個(gè)項(xiàng)目。
與麻省理工學(xué)院CSAIL的大多數(shù)項(xiàng)目一樣,這一系統(tǒng)仍處于早期研究階段,但通過(guò)將這兩種“感官”聯(lián)系起來(lái),從數(shù)字角度看,團(tuán)隊(duì)可能為人工智能提供了一種新的體驗(yàn)世界的方式。這一突破可能會(huì)帶來(lái)更加敏感和實(shí)用的機(jī)器人手臂,可以改善任何數(shù)量微妙或任務(wù)關(guān)鍵的操作。它還保證在能夠像我們這樣理解、或至少可以理解世界的人工智能系統(tǒng)的發(fā)展中,會(huì)有更多的進(jìn)展。

感覺(jué)與感性

通過(guò)一個(gè)簡(jiǎn)單的攝像頭,這個(gè)研究小組負(fù)責(zé)人李云珠(中國(guó)科學(xué)院博士生,主要論文作者)在這個(gè)系統(tǒng)上,建立了200多個(gè)每天被觸摸超過(guò)12,000次的對(duì)象的數(shù)據(jù)集。然后,他們將12,000段視頻剪輯壓縮成靜態(tài)幀,并使用這些片段來(lái)編譯“VisGel”,這是一個(gè)包含300多萬(wàn)個(gè)視覺(jué)/觸覺(jué)配對(duì)圖像的數(shù)據(jù)集。利用該數(shù)據(jù)集,研究小組訓(xùn)練了一個(gè)人工智能模型,根據(jù)周圍區(qū)域的視覺(jué)數(shù)據(jù)預(yù)測(cè)物體的感覺(jué),并使用KUKA機(jī)器人手臂與GelSight觸覺(jué)傳感器配對(duì)獲得相應(yīng)的觸覺(jué)信息。例如,研究小組將在電腦鼠標(biāo)上輸入某一點(diǎn)的系統(tǒng)圖像,而人工智能將使用生成的對(duì)抗性網(wǎng)絡(luò)(GAN)構(gòu)建該地區(qū)的觸覺(jué)地圖。
GAN使用一對(duì)網(wǎng)絡(luò)來(lái)相互競(jìng)爭(zhēng)并改進(jìn)它們的輸出:一個(gè)生成器網(wǎng)絡(luò),它為鑒別器網(wǎng)絡(luò)編譯一個(gè)圖像(或者一個(gè)觸覺(jué)圖),以測(cè)試和比較真實(shí)(或ground truth)數(shù)據(jù)。然后,研究小組將把GAN生產(chǎn)的模型與KUKA機(jī)器人手臂獲取的觸覺(jué)數(shù)據(jù)進(jìn)行比較,再一次對(duì)照可測(cè)量的“ground truth”。該系統(tǒng)也可以反過(guò)來(lái)工作,使用觸覺(jué)傳感器數(shù)據(jù)創(chuàng)建一個(gè)圖像預(yù)測(cè)對(duì)象上的某個(gè)點(diǎn)可能是什么樣子。這些圖像也將在GAN中運(yùn)行,并將最后一次與ground truth圖像進(jìn)行比較,以檢驗(yàn)?zāi)P洼敵龅挠行浴?/div>

靈巧數(shù)字

將圖像饋送和觸覺(jué)傳感器連接到AI模型中,代表了人工智能系統(tǒng)和機(jī)器人手臂的進(jìn)步,它們更像我們這樣體驗(yàn)世界。給數(shù)字智能一個(gè)雙重洞察力,有效地合成了信息和這個(gè)系統(tǒng)可以訪問(wèn)的“知識(shí)”。理論上,這將允許人工智能系統(tǒng)比單一輸入系統(tǒng)更快、更有效地了解其環(huán)境和處理信息。例如,在外科手術(shù)中,機(jī)器人手臂目前可以處理令人難以置信的微妙的手術(shù),比如使用微創(chuàng)手術(shù)或keyhole手術(shù)來(lái)切除前列腺,約占美國(guó)所有機(jī)器人手術(shù)的86%。
來(lái)源:Charles Towers-Clark,福布斯
編譯:南山
聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 麻省理工學(xué)院
    +關(guān)注

    關(guān)注

    0

    文章

    12

    瀏覽量

    6878
  • CSAIL
    +關(guān)注

    關(guān)注

    0

    文章

    1

    瀏覽量

    1534
收藏 人收藏

    評(píng)論

    相關(guān)推薦

    麻省理工學(xué)院研發(fā)全新納米級(jí)3D晶體管,突破性能極限

    11月7日,有報(bào)道稱,美國(guó)麻省理工學(xué)院的研究團(tuán)隊(duì)利用超薄半導(dǎo)體材料,成功開(kāi)發(fā)出一種前所未有的納米級(jí)3D晶體管。這款晶體管被譽(yù)為迄今為止最小的3D晶體管,其性能與功能不僅與現(xiàn)有的硅基晶體管相當(dāng),甚至在某些方面還超越了后者。
    的頭像 發(fā)表于 11-07 13:43 ?366次閱讀

    麻省理工學(xué)院推出新型機(jī)器人訓(xùn)練模型

    近日,據(jù)TechCrunch報(bào)道,麻省理工學(xué)院的研究團(tuán)隊(duì)展示了一種創(chuàng)新的機(jī)器人訓(xùn)練模型,該模型突破了傳統(tǒng)模仿學(xué)習(xí)方法的局限,不再依賴標(biāo)準(zhǔn)數(shù)據(jù)集,而是借鑒了大型語(yǔ)言模型(LLM)如GPT-4等所使用的大規(guī)模信息處理方式,為機(jī)器人學(xué)習(xí)新技能開(kāi)辟了全新的道路。
    的頭像 發(fā)表于 11-04 14:56 ?496次閱讀

    VILA與其他模型在提供邊緣AI 2.0方面的表現(xiàn)

    VILA 是 NVIDIA 研究部門(mén)與麻省理工學(xué)院共同開(kāi)發(fā)的高性能視覺(jué)語(yǔ)言模型系列。最大的模型約有 400 億參數(shù),最小的模型約有 30 億參數(shù),并且完全開(kāi)源(包括模型檢查點(diǎn)、訓(xùn)練代碼和訓(xùn)練數(shù)據(jù))。
    的頭像 發(fā)表于 10-10 10:06 ?230次閱讀
    VILA與其他模型在提供邊緣AI 2.0方面的表現(xiàn)

    美國(guó)佐治亞理工學(xué)院一行蒞臨達(dá)實(shí)智能調(diào)研

    近日,美國(guó)佐治亞理工學(xué)院“聚焦數(shù)據(jù)科學(xué)領(lǐng)域·深度探訪粵港澳大灣區(qū)”學(xué)生代表團(tuán)來(lái)深交流。美國(guó)佐治亞理工學(xué)院(Georgia Institute of Technology)一行探訪了大灣區(qū)科技企業(yè)代表達(dá)實(shí)智能。
    的頭像 發(fā)表于 09-26 09:21 ?496次閱讀

    貴州理工學(xué)院采購(gòu)南京大展的DZ-STA200同步熱分析儀

    理工學(xué)院采購(gòu)了南京大展的DZ-STA200同步熱分析儀,就是客戶對(duì)于我們品牌產(chǎn)品的認(rèn)可。DZ-STA200同步熱分析儀作為集熱重分析(TG)與差示掃描量熱分析(DSC)
    的頭像 發(fā)表于 09-18 16:22 ?224次閱讀
    貴州<b class='flag-5'>理工學(xué)院</b>采購(gòu)南京大展的DZ-STA200同步熱分析儀

    麻省理工學(xué)院研發(fā)RoboGrocery系統(tǒng),雜貨店自動(dòng)化裝袋新篇章

    在科技日新月異的今天,自動(dòng)化和智能化正逐漸滲透到我們生活的方方面面。近日,麻省理工學(xué)院計(jì)算機(jī)科學(xué)與人工智能實(shí)驗(yàn)室(CSAIL)的一項(xiàng)創(chuàng)新技術(shù)引起了廣泛關(guān)注——RoboGrocery系統(tǒng)
    的頭像 發(fā)表于 07-01 16:49 ?606次閱讀

    感謝東莞理工學(xué)院對(duì)我司導(dǎo)熱系數(shù)測(cè)試儀的認(rèn)可

    東莞理工學(xué)院作為國(guó)內(nèi)的高等學(xué)府,一直致力于科學(xué)研究和教育事業(yè)的發(fā)展,能夠得到這樣一所學(xué)府的認(rèn)可,無(wú)疑是對(duì)我們技術(shù)實(shí)力和產(chǎn)品質(zhì)量的肯定。這份認(rèn)可,如同春日里的一縷陽(yáng)光,溫暖而明亮,照亮了我們前行的道路
    的頭像 發(fā)表于 06-25 09:55 ?259次閱讀
    感謝東莞<b class='flag-5'>理工學(xué)院</b>對(duì)我司導(dǎo)熱系數(shù)測(cè)試儀的認(rèn)可

    蘇黎世聯(lián)邦理工學(xué)院報(bào)告:Rowhammer攻擊對(duì)高端RISC-V CPU的潛在風(fēng)險(xiǎn)

    來(lái)源:內(nèi)容由RISC-V國(guó)際人才培養(yǎng)認(rèn)證中心編譯自DRAMSec,作者:MicheleMarazzi;KavehRazavi。蘇黎世聯(lián)邦理工學(xué)院的研究人員發(fā)表了一篇題為“RISC-H:針對(duì)
    的頭像 發(fā)表于 06-15 08:36 ?373次閱讀
    蘇黎世聯(lián)邦<b class='flag-5'>理工學(xué)院</b>報(bào)告:Rowhammer攻擊對(duì)高端RISC-V CPU的潛在風(fēng)險(xiǎn)

    請(qǐng)問(wèn)STM32 Nucleo系列與Arduino具體怎么結(jié)合起來(lái)用?

    STM32 Nucleo系列與Arduino具體怎么結(jié)合起來(lái)用?
    發(fā)表于 05-14 07:00

    一種用于化學(xué)和生物材料識(shí)別的便攜式拉曼光譜解決方案

    基于掃頻光源的緊湊型拉曼光譜系統(tǒng):美國(guó)麻省理工學(xué)院(MIT)和韓國(guó)科學(xué)技術(shù)院(KAIST)的研究人員開(kāi)發(fā)了一種用于化學(xué)和生物材料識(shí)別的便攜式拉曼光譜解決方案,克服了光譜儀笨重的局限性。
    的頭像 發(fā)表于 04-16 10:35 ?533次閱讀
    一種用于化學(xué)和生物材料識(shí)別的便攜式拉曼光譜解決方案

    麻省理工與Adobe新技術(shù)DMD提升圖像生成速度

    2023年3月27日,據(jù)傳,新型文生圖算法雖然使得圖像生成無(wú)比逼真,但奈何運(yùn)行速度較慢。近期,美國(guó)麻省理工學(xué)院聯(lián)合Adobe推出新型DMD方法,僅略微犧牲圖像質(zhì)量就大幅度提高圖像生成效率。
    的頭像 發(fā)表于 03-27 14:17 ?525次閱讀

    霍尼韋爾與南方泵業(yè)開(kāi)展戰(zhàn)略合作,四川成都一家紅外熱成像專用圖像處理芯片服務(wù)商完成A+輪融資

    傳感新品 【麻省理工學(xué)院:研發(fā)出自供電傳感器,可從環(huán)境獲取能量】 3 月 4 日消息,來(lái)自美國(guó)頂尖學(xué)府之一麻省理工學(xué)院的研究人員發(fā)明了一種無(wú)需電池、自供電,且不產(chǎn)生污染的傳感器。 研究團(tuán)隊(duì)負(fù)責(zé)人
    的頭像 發(fā)表于 03-14 08:42 ?673次閱讀
    霍尼韋爾與南方泵業(yè)開(kāi)展戰(zhàn)略合作,四川成都一家紅外熱成像專用圖像處理芯片服務(wù)商完成A+輪融資

    瑞士蘇黎世聯(lián)邦理工學(xué)院新型四足機(jī)器人單腿完成開(kāi)關(guān)門(mén)、移動(dòng)任務(wù)

    據(jù)本周五出版的Popular Science雜志報(bào)道,近日瑞士蘇黎世聯(lián)邦理工學(xué)院機(jī)器人系統(tǒng)實(shí)驗(yàn)室的科研團(tuán)隊(duì)展示了新研究進(jìn)展:他們訓(xùn)練了自家的機(jī)器狗,讓其用單腿操控門(mén)鎖和移動(dòng)物品,同時(shí)依靠其余三腿維持正常行走及平衡。
    的頭像 發(fā)表于 02-25 11:55 ?695次閱讀

    麻省理工學(xué)院開(kāi)發(fā)出新的RFID標(biāo)簽防篡改技術(shù)

    的解決方案。 麻省理工學(xué)院的研究人員推出了一項(xiàng)革命性的發(fā)明——新型防篡改ID標(biāo)簽。它不僅尺寸小巧、成本低廉,而且具備強(qiáng)大的防偽功能,有望徹底改變商品真?zhèn)舞b定的格局。 研究人員巧妙地利用太赫茲波的特性,設(shè)計(jì)出了這種新型防篡改
    的頭像 發(fā)表于 02-22 11:30 ?622次閱讀
    <b class='flag-5'>麻省理工學(xué)院</b>開(kāi)發(fā)出新的RFID標(biāo)簽防篡改技術(shù)

    生物神經(jīng)元和M-P神經(jīng)元模型簡(jiǎn)介

    近年來(lái),作為人工智能領(lǐng)域最重要的進(jìn)展--深度學(xué)習(xí)(Deep Learning),在諸多領(lǐng)域都有很多驚人的表現(xiàn)。早在2013年,深度學(xué)習(xí)就被麻省理工學(xué)院的《MIT科技評(píng)論》(MIT Technology Review)評(píng)為世界10大突破性技術(shù)之一。
    的頭像 發(fā)表于 01-23 13:57 ?1889次閱讀
    生物神經(jīng)元和M-P神經(jīng)元模型簡(jiǎn)介