微軟構(gòu)建Cardiolens系統(tǒng) 結(jié)合計(jì)算機(jī)視覺和HoloLens實(shí)現(xiàn)遠(yuǎn)程生理學(xué)測(cè)量

據(jù)報(bào)道，微軟研究人員構(gòu)建Cardiolens的系統(tǒng)，是結(jié)合了先進(jìn)的計(jì)算機(jī)視覺方法和HoloLens可以實(shí)現(xiàn)遠(yuǎn)程生理學(xué)測(cè)量，展示混合現(xiàn)實(shí)可視化?？梢詫?shí)現(xiàn)實(shí)時(shí)的免手操作測(cè)量，可捕捉對(duì)象的生理學(xué)信息。

心動(dòng)描記法是心臟功能的定量測(cè)量，這在傳統(tǒng)上需要定制的突觸接觸傳感器。借助新方法，我們可以通過無處不在的傳感器（如網(wǎng)絡(luò)攝像頭和加速度計(jì)）來捕獲光電容積描記和心沖擊描記信號(hào)。但是，我們?nèi)庋蹮o法感知這些信號(hào)。記者了解到，為了做到這一點(diǎn)，微軟研究部門構(gòu)建了一個(gè)名為Cardiolens的系統(tǒng)，使用前置攝像頭來實(shí)現(xiàn)遠(yuǎn)程生理學(xué)測(cè)量，并通過全息顯示器來展示混合現(xiàn)實(shí)可視化。

Cardiolens結(jié)合了先進(jìn)的計(jì)算機(jī)視覺方法和微軟HoloLens，通過前置攝像頭，心沖擊圖成像，以及遠(yuǎn)程成像光電容積脈搏波檢測(cè)方法來恢復(fù)脈搏信號(hào)，實(shí)現(xiàn)實(shí)時(shí)的免手操作測(cè)量，以及多人血流量和生命體征的可視化。

Cardiolens采用了兩種形式的成像心動(dòng)描記法來捕捉用戶的心律和注視點(diǎn)對(duì)象的心律。系統(tǒng)能夠根據(jù)來自攝像頭的視頻對(duì)面部進(jìn)行自動(dòng)檢測(cè)。圖像分為紅，綠，藍(lán)，然后再形成隨時(shí)間變化的信號(hào)。系統(tǒng)通過結(jié)合機(jī)器學(xué)習(xí)和數(shù)字信號(hào)處理技術(shù)來恢復(fù)脈搏信號(hào)。攝像頭捕捉Cardiolens系統(tǒng)用戶的頭部運(yùn)動(dòng)。光流和信號(hào)處理技術(shù)則用于恢復(fù)這一運(yùn)動(dòng)信號(hào)，而心律則可以提取出來。

用戶所需要做的事情是佩戴設(shè)備，然后看著特定對(duì)象即可捕捉她的生理學(xué)信息。這一切都可以在自然的人際交互期間實(shí)現(xiàn)。設(shè)備將顯示放大后的信號(hào)，以及該對(duì)象的心律和恢復(fù)的脈搏波。用戶可以在混合現(xiàn)實(shí)環(huán)境中實(shí)時(shí)瀏覽所有的信息。同樣地，系統(tǒng)同樣可以可視化用戶的生理學(xué)響應(yīng)。根據(jù)脈搏波，系統(tǒng)可以提取心率，心率變化和呼吸率。

Cardiolens可用于幫助醫(yī)生可視化人體不同部位的血液流動(dòng)，并優(yōu)化遠(yuǎn)程通信和視頻會(huì)議應(yīng)用。也允許用戶在佩戴該設(shè)備時(shí)瀏覽自己的心率，以及僅通過目光掃視他人即可查看他們的心率和心率變化。Cardiolens為佩戴者提供了一種理解生理信號(hào)的新方法，并且已經(jīng)應(yīng)用于人機(jī)交互和社會(huì)心理學(xué)研究。

想象一下當(dāng)你看著某人的時(shí)候，你可以看到TA的心跳，是不是很酷。