機(jī)器視覺(jué)有著令人印象深刻的各種記錄。它具有超強(qiáng)的識(shí)別人、面孔和物體的能力。它甚至可以識(shí)別許多不同類(lèi)型的動(dòng)作，盡管還不如人類(lèi)。
但它的表現(xiàn)也有局限。當(dāng)人、臉或物體部分被遮擋時(shí)，機(jī)器會(huì)識(shí)別起來(lái)就會(huì)很困難。當(dāng)光線水平下降得太厲害時(shí)，它們就會(huì)像人類(lèi)被蒙住雙眼一樣無(wú)法識(shí)別。
但是，電磁波譜的另一部分就不會(huì)受到這種限制。無(wú)線電波充斥著我們的世界，無(wú)論是黑夜還是白天。它們很容易穿過(guò)墻壁，并通過(guò)人體傳播和反射。事實(shí)上，研究人員已經(jīng)開(kāi)發(fā)出各種利用Wi-Fi無(wú)線信號(hào)來(lái)觀察門(mén)后情況的方法。
但是這些無(wú)線電視覺(jué)系統(tǒng)有一些缺點(diǎn)。它們的紅外分辨率很低，圖像嘈雜，充滿(mǎn)了讓人分心的反射，這使得很難理解發(fā)生了什么。
在這個(gè)意義上，無(wú)線電圖像和可見(jiàn)光圖像具有互補(bǔ)的優(yōu)點(diǎn)和缺點(diǎn)。這就有了利用一方的優(yōu)勢(shì)來(lái)克服另一方的缺點(diǎn)的可能性。
麻省理工學(xué)院的李天紅和他的同事們找到了一種方法，通過(guò)可見(jiàn)光圖像訓(xùn)練無(wú)線電視覺(jué)系統(tǒng)來(lái)識(shí)別人們的動(dòng)作。新的無(wú)線電視覺(jué)系統(tǒng)可以在可見(jiàn)光成像失敗的情況下，在大范圍內(nèi)看到人們?cè)谧鍪裁?。李說(shuō)，“我們引入了一個(gè)神經(jīng)網(wǎng)絡(luò)模型，它可以通過(guò)墻壁和遮擋來(lái)檢測(cè)人類(lèi)的行為，并且在光線不好的條件下也可以”。
這個(gè)團(tuán)隊(duì)的方法使用了一個(gè)巧妙的技巧。其基本思想是利用可見(jiàn)光和無(wú)線電波記錄同一場(chǎng)景的視頻圖像。機(jī)器視覺(jué)系統(tǒng)已經(jīng)能夠從可見(jiàn)光圖像中識(shí)別人類(lèi)行為。下一步是將這些圖像與同一場(chǎng)景的無(wú)線電圖像聯(lián)系起來(lái)。
但難點(diǎn)在于確保學(xué)習(xí)過(guò)程關(guān)注的是人體動(dòng)作，而不是其他特征，比如背景。因此，李和同事引入了一個(gè)中間步驟，在這個(gè)步驟中，機(jī)器生成三維簡(jiǎn)筆畫(huà)模型，重現(xiàn)場(chǎng)景中人們的動(dòng)作。
“通過(guò)將輸入轉(zhuǎn)換成中間的基于骨架的表示，我們的模型可以從基于視覺(jué)和基于無(wú)線電頻率的數(shù)據(jù)集中學(xué)習(xí)，并允許這兩個(gè)任務(wù)互相幫助?！崩钤谡撐闹斜硎?。
通過(guò)這種方式，系統(tǒng)學(xué)會(huì)在可見(jiàn)光下識(shí)別動(dòng)作，然后利用無(wú)線電波識(shí)別在黑暗中或墻后發(fā)生的相同動(dòng)作。研究人員說(shuō)：“我們的研究表明，我們的模型在可視場(chǎng)景下達(dá)到了與基于視覺(jué)的動(dòng)作識(shí)別系統(tǒng)相當(dāng)?shù)木?，但在人不可?jiàn)的情況下仍然能夠準(zhǔn)確工作?！?/span>
這是一項(xiàng)很有趣的工作，有很大的潛力。最明顯的應(yīng)用是在可見(jiàn)光圖像在弱光條件下和關(guān)起門(mén)后出現(xiàn)故障的場(chǎng)景中。
但也有其他的應(yīng)用?？梢?jiàn)光圖像的一個(gè)問(wèn)題是人們是可識(shí)別的，這就引發(fā)了隱私問(wèn)題。
但是無(wú)線電系統(tǒng)沒(méi)有面部識(shí)別的分辨率。識(shí)別行為而不識(shí)別人臉不會(huì)引起同樣的隱私恐懼?！八梢詫?dòng)作識(shí)別帶到人們的家中，并將其整合到智能家居系統(tǒng)中，”李說(shuō)。例如，它可以用于監(jiān)控老年人的住宅，并在摔倒時(shí)提醒相關(guān)服務(wù)部門(mén)。而且這樣做不會(huì)對(duì)隱私造成太大的風(fēng)險(xiǎn)。
來(lái)源：機(jī)器視覺(jué)網(wǎng)，犀靈機(jī)器人http://整理發(fā)布