0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內(nèi)不再提示

傳感技術進一步擴大環(huán)境感知的應用機會

CEVA ? 來源:CEVA ? 作者:CEVA ? 2021-09-18 10:21 ? 次閱讀

移動計算推動了產(chǎn)品機會的爆發(fā)——智能手機、可穿戴設備、可聽設備、運動相機等等。傳感技術將進一步擴大必須具有環(huán)境感知的應用機會?,F(xiàn)在,對于運輸、機器人、家庭自動化、智能城市、工廠和倉庫管理中許多可能的應用來說,通過視覺、雷達或激光雷達傳感來進行物體識別和碰撞警告,通過超聲波傳感器實現(xiàn)短距離的接近偵測,通過IMU進行運動和姿勢檢測,基于聲學的危險聲音檢測已經(jīng)很普遍了。說實話,這個清單是無窮無盡的。我們擁有建立一個由智能傳感驅(qū)動的未來主義的、幾乎是科幻小說的世界所需要的所有原材料。但是怎么做呢?

從感知到運動

想一想一個在機場周圍移動的機器人助手。幫助乘客辦理登機手續(xù),找到他們的登機口,獲得航班的詳細信息。這個機器人必須在機場內(nèi)自由移動,不能撞到在各個方向行走或奔跑的人,或可能是靜止的或有時可能移動的物體。這個機器人助手應該知道如何在一個不斷變化的環(huán)境中進行智能導航。而且,它必須在一定的可能性范圍內(nèi),能夠理解并響應自然語言的語音命令。我們將在下面討論這個問題。

光學和接近傳感器是智能導航技術的一個起點。這些傳感器信息輸入到一個被稱為SLAM的復雜算法中,并生成一個不斷移動變化的的空間的點陣云圖且隨之變化更新。弱光條件下,SLAM技術正越來越多地被航位推算所加強,因為在弱光條件下,光學的效果較差。這種方法從一個已知的位置追蹤運動,從車輪運動、加速計和其他傳感器中獲取信息。同時,接近傳感器提供輸入,避免撞上一個物體或一個人。我們已經(jīng)有多個傳感器向算法提供信息,以構建地圖和定位機器人助手在地圖中的位置。

基于攝像頭的SLAM需要高精度的線性方程求解,矢量DSP平臺很適合。基于超聲波的接近感測必須從降噪開始,在回聲和其他雜波中定位最近的物體,然后進行范圍(和方向)計算。這種信號處理非常適合于標量DSP。

從聲音到行動

一位乘客看到一個助手,就叫它過來:“嘿,Airbot!” 首先,助理必須識別這個命令和它的來源。這一步需要一些復雜的音頻處理,尤其是在機場航站樓這樣的嘈雜環(huán)境中。識別觸發(fā)語音命令是任何智能音箱中都會有的基本人工智能。機器人還可以通過beamforming“”波束成形技術檢測語音命令的來源方向。這個技術需要更多的信號處理,從多個麥克風在稍微不同的時間檢測到的識別命令中找出方向。

我們的機器人助手”滑行”到乘客身邊,沿途避開其他障礙物,在幾英尺遠的地方停下來,問道:“我能為你做些什么?” 它在屏幕上展示了一系列它知道如何回答的問題,然后乘客說,“我想辦理登機手續(xù)”。我們的機器人首先必須做一些更多的信號處理,以減少該音頻信號的噪音,部分通過波束成形,部分通過回聲消除。然后,它必須識別這個命令。

自然語言處理(NLP)可以在云端處理,但機場網(wǎng)絡有很大的負荷。因此,NLP必須在本地處理,以便快速響應。機器人應快速響應,以提供令人滿意的用戶體驗。它要求乘客直接看著它的屏幕,拍一張照片,然后要求乘客插入一個圖片ID,如護照身份頁。然后它可以比較這些圖片以增加安全性,這需要一個強大的可編程神經(jīng)網(wǎng)絡引擎。

辦理登機手續(xù)的剩余步驟?那就有傳統(tǒng)的嵌入式處理就夠了。

將一切結合起來

智能傳感設備必須使用一個支持同時處理多個傳感器的平臺。它應該為前端信號處理提供強大的標量DSP支持,為基于圖像的計算和SLAM提供矢量DSP支持。對語音和視覺人工智能的神經(jīng)網(wǎng)絡支持,也是一個矢量DSP,但對神經(jīng)網(wǎng)絡有特殊的擴展,同時在SDK中有豐富的軟件編譯器和庫,為你提供這些技術領域的所有基礎支持。

CEVA的 “SensPro2 ”是傳感平臺提供動力的方案之一。基于CEVA在視覺、音頻、SLAM和人工智能方面的強大背景,SensPro2是一款用于多任務傳感和多傳感器的人工智能(包括攝像頭、雷達、激光雷達、飛行時間、麥克風和慣性測量單元)的高度可擴展和增強的第二代高性能傳感器控制中心SensorHub DSP。

責任編輯:haq

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 傳感器
    +關注

    關注

    2552

    文章

    51331

    瀏覽量

    755471
  • 智能手機
    +關注

    關注

    66

    文章

    18516

    瀏覽量

    180680
  • 機器人
    +關注

    關注

    211

    文章

    28582

    瀏覽量

    207818

原文標題:傳感器,到處都是傳感器?,F(xiàn)在我該怎么辦?

文章出處:【微信號:CEVA-IP,微信公眾號:CEVA】歡迎添加關注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關推薦

    臺積電擬進一步收購群創(chuàng)工廠擴產(chǎn)先進封裝

    據(jù)半導體設備公司的消息人士透露,臺積電正計劃進一步擴大其在先進封裝領域的產(chǎn)能。今年8月,臺積電已經(jīng)收購了群創(chuàng)位于南科的5.5代LCD面板廠,而現(xiàn)在,市場消息稱臺積電有意收購更多群創(chuàng)在南科附近的工廠。
    的頭像 發(fā)表于 10-30 16:38 ?285次閱讀

    英特爾將進一步分離芯片制造和設計業(yè)務

    面對公司成立50年來最為嚴峻的挑戰(zhàn),英特爾宣布了項重大戰(zhàn)略調(diào)整,旨在通過進一步分離芯片制造與設計業(yè)務,重塑競爭力。這決策標志著英特爾在應對行業(yè)變革中的堅定步伐。
    的頭像 發(fā)表于 09-19 16:48 ?360次閱讀

    通過展頻進一步優(yōu)化EMI

    電子發(fā)燒友網(wǎng)站提供《通過展頻進一步優(yōu)化EMI.pdf》資料免費下載
    發(fā)表于 09-04 09:32 ?1次下載
    通過展頻<b class='flag-5'>進一步</b>優(yōu)化EMI

    RFTOP進一步擴充波導同軸轉(zhuǎn)換器產(chǎn)品線

    近日高品質(zhì)微波毫米波器件供應商RFTOP(頻優(yōu)微波)進一步擴充波導同軸轉(zhuǎn)換器產(chǎn)品線,新增了同軸公頭全系列新品,覆蓋1.0mm、1.85mm、2.4mm、2.92mm、SMA、SMP等同軸公頭,涵蓋
    的頭像 發(fā)表于 09-03 17:06 ?704次閱讀
    RFTOP<b class='flag-5'>進一步</b>擴充波導同軸轉(zhuǎn)換器產(chǎn)品線

    浩亭宣布新任行政總裁,進一步加強亞太區(qū)業(yè)務

    )、 ANZ (澳大利亞、新西蘭)、中國、印度、韓國和日本地區(qū)的業(yè)務管理。 ?“有了劉女士的加入,我們贏得了名得力干將。她將協(xié)助我們擴大進一步加強在重要的東亞關鍵市場的影響力。我們期待著成果的合作?!焙仆?/div>
    發(fā)表于 07-26 15:52 ?264次閱讀
    浩亭宣布新任行政總裁,<b class='flag-5'>進一步</b>加強亞太區(qū)業(yè)務

    iPhone 15在美國市場需求進一步減弱

    7月19日,國際媒體披露了市場研究機構CIRP的最新報告,揭示了iPhone 15系列在美國市場的受歡迎程度相較于前代iPhone 14系列有所下滑。這趨勢在CIRP最新發(fā)布的第二季度數(shù)據(jù)中得到了進一步印證,顯示iPhone 15系列的市場需求正經(jīng)歷持續(xù)放緩。
    的頭像 發(fā)表于 07-19 16:11 ?695次閱讀

    芯馳科技與IAR宣布進一步擴大合作

    全球領先的嵌入式系統(tǒng)開發(fā)軟件解決方案供應商IAR與全場景智能車芯引領者芯馳科技宣布進一步擴大合作,最新版IAR Embedded Workbench for Arm已全面支持芯馳科技的E3119
    的頭像 發(fā)表于 07-11 15:55 ?653次閱讀

    西門子與微軟進一步擴展戰(zhàn)略合作關系

    近日,西門子數(shù)字化工業(yè)軟件與微軟宣布進一步擴展雙方的戰(zhàn)略合作關系。通過微軟Azure云服務,西門子正式推出Xcelerator as a Service工業(yè)軟件解決方案,為客戶提供更靈活、高效的服務體驗。
    的頭像 發(fā)表于 05-21 10:47 ?708次閱讀

    進一步解讀英偉達 Blackwell 架構、NVlink及GB200 超級芯片

    新的標準。Blackwell架構和GB200 超級芯片有望推動英偉達在人工智能領域更進一步,鞏固其在高性能計算和人工智能技術領域的領先地位。隨著亞馬遜網(wǎng)絡服務、谷歌云和微軟 Azure 等公司開始整合這些新系統(tǒng),英偉達創(chuàng)新的影響將進一步
    發(fā)表于 05-13 17:16

    卓馭科技與高通合作宣布進一步推動汽車行業(yè)智能駕駛技術的發(fā)展

    今日,深圳市卓馭科技有限公司(以下簡稱:卓馭科技)與高通技術公司宣布擴展雙方的技術合作,利用基于Snapdragon Ride平臺的全新智能駕駛產(chǎn)品,進一步推動汽車行業(yè)智能駕駛技術的發(fā)
    的頭像 發(fā)表于 04-25 16:25 ?1753次閱讀
    卓馭科技與高通合作宣布<b class='flag-5'>進一步</b>推動汽車行業(yè)智能駕駛<b class='flag-5'>技術</b>的發(fā)展

    TDK進一步擴充Micronas嵌入式電機控制器系列HVC 5x

    TDK 株式會社(TSE:6762)進一步擴充 Micronas 嵌入式電機控制器系列 HVC 5x,完全集成電機控制器與 HVC-5222D 和 HVC-5422D,以驅(qū)動小型有刷(BDC)、無刷(BLDC)或步進電機。
    的頭像 發(fā)表于 04-09 10:22 ?844次閱讀
    TDK<b class='flag-5'>進一步</b>擴充Micronas嵌入式電機控制器系列HVC 5x

    Arbe在中國上海設立分公司,進一步增強企業(yè)影響力

    摘要:中國團隊將進一步促進Arbe與中國市場重要企業(yè)之間的緊密合作。 新代4D成像雷達解決方案的頭部企業(yè)Arbe Robotics(納斯達克股票代碼:ARBE;以下稱Arbe)近日宣布已在上海設立
    的頭像 發(fā)表于 03-25 09:44 ?479次閱讀

    英飛凌重組銷售與營銷組織,進一步提升以客戶為中心的服務及領先的應用支持能力

    【 2024 年 2 月 28 日,德國慕尼黑訊】 為實現(xiàn)有雄心的增長目標,英飛凌科技股份公司(FSE代碼:IFX / OTCQX代碼:IFNNY)正進一步強化其銷售組織。自3月1日起,英飛凌的銷售
    發(fā)表于 03-01 16:31 ?485次閱讀
      英飛凌重組銷售與營銷組織,<b class='flag-5'>進一步</b>提升以客戶為中心的服務及領先的應用支持能力

    材料價格進一步下降,盈利觸底 鋰電材料企業(yè)如何應對?

    在上游原料價格相對穩(wěn)定、終端銷量有所好轉(zhuǎn)的情況下,季度四大鋰電主材價格卻出現(xiàn)進一步下跌。
    的頭像 發(fā)表于 03-01 10:25 ?1098次閱讀

    大族封測IPO進程再進一步

    2024年1月17日,深交所向大族封測發(fā)出IPO審核意見,標志著這家LED及半導體封測專用設備制造商的上市進程又向前邁進了一步。
    的頭像 發(fā)表于 01-25 14:51 ?813次閱讀