產(chǎn)品中心 應(yīng)用方案 技術(shù)文摘質(zhì)量保證產(chǎn)品選型 下載中心業(yè)內(nèi)動(dòng)態(tài) 選型幫助 品牌介紹 產(chǎn)品一覽 聯(lián)系我們
- 類似于皮膚的傳感器和AI提供（令人驚訝的）準(zhǔn)確的手勢(shì)識(shí)別
- 來源：賽斯維傳感器網(wǎng) 發(fā)表于 2020/10/21
新加坡的科學(xué)家開發(fā)了一種AI系統(tǒng)，該系統(tǒng)通過將可穿戴皮膚樣傳感器與計(jì)算機(jī)視覺結(jié)合起來來識(shí)別手勢(shì)。
在過去十年中，人類手勢(shì)識(shí)別系統(tǒng)已經(jīng)走了很長一段路。如今，該技術(shù)適合許多尖端應(yīng)用，例如醫(yī)療領(lǐng)域的手術(shù)機(jī)器人。但是，手勢(shì)識(shí)別的精度可能會(huì)受到可穿戴式傳感器發(fā)送的數(shù)據(jù)質(zhì)量差的困擾，這通常是由于它們的大小以及與佩戴者的接觸不良所致。
現(xiàn)在，來自新加坡南洋理工大學(xué)（NTU Singapore）的科學(xué)家表示，他們已經(jīng)開發(fā)了一種人工智能（AI）系統(tǒng)，該系統(tǒng)可以通過將可拉伸的類似皮膚的應(yīng)變傳感器與計(jì)算機(jī)視覺技術(shù)相結(jié)合來識(shí)別手勢(shì)。
此處顯示的是透明的，可拉伸的應(yīng)變傳感器，它粘附在穿戴者的皮膚上。在屏幕上的圖像中，根本看不到傳感器。圖片由NTU新加坡提供
“受生物啟發(fā)”的數(shù)據(jù)融合系統(tǒng)
為了應(yīng)對(duì)這一挑戰(zhàn)，南大新加坡團(tuán)隊(duì)開發(fā)了一種“生物啟發(fā)”的數(shù)據(jù)融合系統(tǒng)，該系統(tǒng)將類似皮膚的可拉伸應(yīng)變傳感器與AI系統(tǒng)結(jié)合使用。這些技術(shù)結(jié)合在一起，類似于人腦共同處理皮膚的感覺和視覺的方式。
生物啟發(fā)系統(tǒng)由三種神經(jīng)網(wǎng)絡(luò)方法組成，在《自然電子》中有更詳細(xì)的說明。甲卷積神經(jīng)網(wǎng)絡(luò)，這對(duì)于早期視覺處理機(jī)器學(xué)習(xí)網(wǎng)絡(luò)中，軀體感覺信息處理的多層神經(jīng)網(wǎng)絡(luò)，并且一起融合了視覺和體感的信息的備用神經(jīng)網(wǎng)絡(luò)。
受生物啟發(fā)的體感視覺響應(yīng)啟發(fā)的學(xué)習(xí)框架。圖片（修改后）由Nature Electronics提供結(jié)合起來，這將創(chuàng)建一個(gè)能夠更準(zhǔn)確，更有效地識(shí)別人類手勢(shì)的系統(tǒng)。
伸縮應(yīng)變傳感器
為了捕獲可靠的感官數(shù)據(jù)，南大新加坡團(tuán)隊(duì)制造了一種由單壁碳納米管制成的透明，可拉伸的應(yīng)變傳感器。傳感器靈活，可以輕松粘附在皮膚上，無法在照片中看到。
體感視覺數(shù)據(jù)收集的流程圖。圖片（修改后）由Nature Electronics提供
研究人員說，與無法與皮膚充分接觸以收集準(zhǔn)確數(shù)據(jù)的剛性可穿戴傳感器相比，這是一個(gè)重大改進(jìn)。由于新加坡團(tuán)隊(duì)的傳感器與皮膚齊平，因此該設(shè)備具有高質(zhì)量的信號(hào)采集功能，對(duì)于高精度識(shí)別至關(guān)重要。
引導(dǎo)機(jī)器人穿過迷宮
作為概念驗(yàn)證，該團(tuán)隊(duì)通過控制機(jī)器人并僅用手勢(shì)引導(dǎo)其穿過迷宮，就測試了他們的生物啟發(fā)式AI系統(tǒng)。與僅基于視覺的識(shí)別系統(tǒng)產(chǎn)生的六個(gè)識(shí)別錯(cuò)誤相比，該手勢(shì)識(shí)別系統(tǒng)以零錯(cuò)誤引導(dǎo)機(jī)器人穿過迷宮。
即使在惡劣的條件下（例如高水平的背景噪音和光線不足）進(jìn)行測試，也可以保持團(tuán)隊(duì)AI系統(tǒng)的準(zhǔn)確性。在黑暗中，該系統(tǒng)的識(shí)別精度幾乎達(dá)到97％。
NTU新加坡的科學(xué)家將計(jì)算機(jī)視覺和類似皮膚的電子設(shè)備結(jié)合在一起，引導(dǎo)機(jī)器人穿過迷宮。圖片由NTU新加坡提供
該研究小組現(xiàn)在正在探索在醫(yī)療，娛樂和家庭康復(fù)等各種應(yīng)用中基于其AI系統(tǒng)構(gòu)建VR和AR系統(tǒng)的可能性。
- 如果本文收錄的圖片文字侵犯了您的權(quán)益，請(qǐng)及時(shí)與我們聯(lián)系，我們將在24內(nèi)核實(shí)刪除，謝謝！
