0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

一種可將手語字母翻譯成帶顯示器書面字母的智能手套

OpenFPGA ? 來源:OpenFPGA ? 2023-03-03 09:54 ? 次閱讀

一種智能手套,可將手語字母翻譯成帶顯示器的書面字母。

緒論

在這個項目中,我們的主要目的是開發(fā)一款智能手套,幫助使用手語的人在日常生活中輕松交流。

學(xué)習(xí)手語是一個要求很高的過程。因此,許多健康人并不了解這個過程。在這款智能手套的幫助下,那些健康的人將能夠理解那些使用手語的人。智能手套還可以用作想要學(xué)習(xí)手語的健康人的模擬器。

這個項目主要涉及到模擬字母,字母是語言的基石。在這個項目中,我們使用 FPGA 來實現(xiàn)將手勢模擬為視覺字母的算法。檢測手勢是通過手指上的柔性傳感器測量出手的形狀。

vga監(jiān)視器用于直觀顯示FPGA中轉(zhuǎn)換為字母的手勢。

e90550ae-b8ec-11ed-bfe3-dac502259ad0.pnge92e4716-b8ec-11ed-bfe3-dac502259ad0.pnge94fdb9c-b8ec-11ed-bfe3-dac502259ad0.png

e9692584-b8ec-11ed-bfe3-dac502259ad0.png

上三圖說明了 VGA 控制器產(chǎn)生的時序信號??刂破靼瑑蓚€計數(shù)器。一個計數(shù)器在像素時鐘上遞增并控制 h_sync(水平同步)信號的時序。通過將其設(shè)置為顯示時間從計數(shù)器值 0 開始,計數(shù)器值在顯示時間內(nèi)等于像素的列坐標(biāo)。水平顯示時間之后是消隱時間,消隱時間包括水平前沿、水平同步脈沖本身和水平后沿,每個都有指定的持續(xù)時間。在行的末尾,計數(shù)器重置以開始下一行。v_sync 計數(shù)器在垂直軸內(nèi)應(yīng)用相同的操作。

使用這些計數(shù)器,VGA 控制器輸出水平同步、垂直同步、顯示啟用和像素坐標(biāo)信號。每個 VGA 模式的同步脈沖被指定為正極性或負(fù)極性。

ea2c86c8-b8ec-11ed-bfe3-dac502259ad0.png

我們首先創(chuàng)建隨機(jī)圖像并使用 RGB 信號改變它們的顏色,如上圖所示。

ea5311d0-b8ec-11ed-bfe3-dac502259ad0.png

要在屏幕上顯示文本或字符串,有一個眾所周知的 Font Rom Map -上圖 - 包括所有 ASCII 字符(每個字符為 8x16 位)。通過使用 Font Rom,我們的代碼現(xiàn)在能夠在顯示器上書寫文本或字母,如下圖所示 。

ea991d42-b8ec-11ed-bfe3-dac502259ad0.png

為了轉(zhuǎn)換來自柔性傳感器的模擬數(shù)據(jù),我們使用了ADC-每通道具有 12 位分辨率。由于 4 個手指足以執(zhí)行大多數(shù)手語字母,因此一個 4 通道ADC就足夠了。

ADC的通信的邏輯如下圖所示。

eae1dbe0-b8ec-11ed-bfe3-dac502259ad0.png

eb5640de-b8ec-11ed-bfe3-dac502259ad0.png

作為總結(jié),項目的架構(gòu)如下圖所示。

eb6ae30e-b8ec-11ed-bfe3-dac502259ad0.pngeb87a688-b8ec-11ed-bfe3-dac502259ad0.pngeba02212-b8ec-11ed-bfe3-dac502259ad0.png

作為參考手語,我們使用了ASL,它具有下圖中的手勢。

ebe129ba-b8ec-11ed-bfe3-dac502259ad0.png

ec0a103c-b8ec-11ed-bfe3-dac502259ad0.png

現(xiàn)在執(zhí)行工程就可以識別到上圖中標(biāo)記的字母。





審核編輯:劉清

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • FPGA
    +關(guān)注

    關(guān)注

    1629

    文章

    21750

    瀏覽量

    604090
  • 顯示器
    +關(guān)注

    關(guān)注

    21

    文章

    4983

    瀏覽量

    140098
  • 控制器
    +關(guān)注

    關(guān)注

    112

    文章

    16389

    瀏覽量

    178428
  • VGA
    VGA
    +關(guān)注

    關(guān)注

    5

    文章

    535

    瀏覽量

    62999

原文標(biāo)題:優(yōu)秀的IC/FPGA開源項目(六)-手語字母翻譯器

文章出處:【微信號:Open_FPGA,微信公眾號:OpenFPGA】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    開源項目!設(shè)計智能手語翻譯眼鏡

    這個項目是款創(chuàng)新的智能手語翻譯眼鏡,它能夠?qū)崟r地將手語轉(zhuǎn)換為聽得見的語音。這款眼鏡采用了VIAM平臺和樹莓派Zero 2 W,能夠幫助聾人或聽力受損的人士更自由、獨立地與他人交流,
    發(fā)表于 05-20 15:59

    【蘇南全球創(chuàng)客大賽第名】手語翻譯手套

    本帖最后由 ℡↘卟放棄 于 2016-3-30 10:07 編輯 國內(nèi)第款可翻譯手語手套
    發(fā)表于 05-06 12:46

    Fortran的程序,要翻譯成matlab

    不知有哪位大神,能幫下忙,有段Fortran的程序,要翻譯成matlab,翻譯些但數(shù)據(jù)不對
    發(fā)表于 02-18 20:58

    cold crank, warm crank 具體翻譯成中文是什么

    cold crank, warm crank 翻譯成中文具體是什么場景, 越詳細(xì)越好!想入門汽車電子的小白現(xiàn)行謝過!
    發(fā)表于 05-23 14:26

    請問snap翻譯成中文是什么?

    snap翻譯成中文是什么 我查沒有對應(yīng)的翻譯
    發(fā)表于 05-07 07:35

    機(jī)器人手語翻譯器Project Aslan的介紹

    目前已經(jīng)有些技術(shù)嘗試彌合聽覺和聾人社區(qū)和正常人之間的差距,包括將手勢轉(zhuǎn)換為文字或音頻的智能手套和平板電腦設(shè)備,甚至來自東芝的全尺寸機(jī)器人。現(xiàn)在,安特衛(wèi)普大學(xué)的個團(tuán)隊正在開發(fā)一種機(jī)器
    發(fā)表于 09-19 19:00 ?5次下載

    Magic Leap頭戴式設(shè)備識別手語和文本“感官眼鏡”

    設(shè)備檢測和翻譯手語的方法。新專利信息的另部分詳細(xì)介紹了使用頭戴式設(shè)備識別標(biāo)牌和店面上的文字,并將該文本翻譯成耳機(jī)中顯示信息的能力。Magi
    發(fā)表于 03-21 14:36 ?2101次閱讀

    紐約大學(xué)學(xué)生創(chuàng)建AR應(yīng)用程序_可實時翻譯手語

    雖然Magic Leap可能計劃在不久的將來推出智能眼鏡的手語翻譯服務(wù),但現(xiàn)在紐約大學(xué)的學(xué)生們已經(jīng)證明,在智能手機(jī)和原型應(yīng)用的今天,這成就
    的頭像 發(fā)表于 03-31 09:09 ?4835次閱讀

    SignAloud手套將美語手語翻譯成英語

    )翻譯成英語,然后將之說出來。它叫做SignAloud手套。 這兩名學(xué)生也因此獲得了10000美元的勒梅森-麻省理工學(xué)生獎金(Lemelson-MIT Student Prize)。這款手套內(nèi)置有傳感
    的頭像 發(fā)表于 04-24 02:44 ?4166次閱讀

    為什么國內(nèi)將silicon翻譯成硅而不是矽

    提到半導(dǎo)體,大家都知道各種處理、閃存、內(nèi)存等芯片都是基于半導(dǎo)體技術(shù)的,而我們現(xiàn)在常用的半導(dǎo)體實質(zhì)上是硅基半導(dǎo)體,硅是這個行業(yè)最重要的材料。說到硅,很多人也見過另個詞矽,為什么國內(nèi)現(xiàn)在翻譯成硅而不是矽了呢?
    的頭像 發(fā)表于 12-21 11:25 ?5836次閱讀

    研究人員發(fā)明使用智能手機(jī)應(yīng)用程序?qū)?b class='flag-5'>手語翻譯語音的智能手套

    研究小組認(rèn)為這種手套可以幫助更多的人學(xué)習(xí)手語。這個手套里面是個系統(tǒng),手套上邊有薄薄的、可伸縮的傳感
    的頭像 發(fā)表于 07-15 14:26 ?2976次閱讀

    Facebook的AI翻譯系統(tǒng)能翻譯100語言!

    近日,F(xiàn)acebook 宣稱已經(jīng)開發(fā)出一種人工智能翻譯系統(tǒng),能夠在 100 語言之間進(jìn)行精確翻譯,而不需要像許多現(xiàn)有 AI
    的頭像 發(fā)表于 10-30 09:25 ?2920次閱讀

    借助手部動作控制機(jī)械臂的手語翻譯成文本和語音手套

    電子發(fā)燒友網(wǎng)站提供《借助手部動作控制機(jī)械臂的手語翻譯成文本和語音手套.zip》資料免費下載
    發(fā)表于 10-21 11:57 ?0次下載
    借助手部動作控制機(jī)械臂的<b class='flag-5'>手語</b><b class='flag-5'>翻譯成</b>文本和語音<b class='flag-5'>手套</b>

    Arduino手語手套

    電子發(fā)燒友網(wǎng)站提供《Arduino手語手套.zip》資料免費下載
    發(fā)表于 11-30 14:25 ?0次下載
    Arduino<b class='flag-5'>手語</b><b class='flag-5'>手套</b>

    基于Arduino Nano R3的手語翻譯手套

    該項目的成立只有個目的,即幫助聾人社區(qū)輕松地與附近的環(huán)境進(jìn)行交流和互動。目的是轉(zhuǎn)換代表腳本中提到的 26 個英文字母的基本符號,并將它們顯示智能手機(jī)屏幕上。電路組裝項目詳情該項目的
    發(fā)表于 12-21 10:47 ?0次下載