加州大學(xué)洛杉磯分校的生物工程師設(shè)計了一種類似于手套的設(shè)備，該設(shè)備可以通過智能手機(jī)應(yīng)用程序?qū)⒚绹终Z實時轉(zhuǎn)換為英語語音。他們的研究發(fā)表在《自然電子》雜志上。

加州大學(xué)洛杉磯分校薩穆里分校工程學(xué)院生物工程學(xué)助理教授陳軍說：“我們的希望是，這為使用手語直接與非簽字人交流而無需其他人為其翻譯的人們提供一種簡便的方法。”以及該研究的首席研究員。“此外，我們希望它可以幫助更多的人自己學(xué)習(xí)手語。”

該系統(tǒng)包括一副帶有細(xì)長傳感器的手套，該傳感器可伸展五個手指中每個手指的長度。這些由導(dǎo)電紗線制成的傳感器拾取代表單個字母，數(shù)字，單詞和短語的手部動作和手指位置。

然后，該設(shè)備將手指的運(yùn)動轉(zhuǎn)換為電信號，然后將其發(fā)送到戴在手腕上的一美元硬幣大小的電路板上。開發(fā)板將這些信號無線傳輸?shù)街悄苁謾C(jī)，該智能手機(jī)以每秒大約一個單詞的速度將其轉(zhuǎn)換為語音。

研究人員還在眉毛之間和嘴巴的一側(cè)之間的測試者臉上增加了粘合傳感器，以捕捉作為美國手語一部分的面部表情。

可穿戴手套翻譯手勢語的簡短視頻。

Chen說，以前提供美國手語翻譯功能的可穿戴系統(tǒng)受到笨重設(shè)備設(shè)計的限制，或者穿著不舒服。

UCLA團(tuán)隊開發(fā)的設(shè)備是由輕便，便宜，但經(jīng)久耐用的可拉伸聚合物制成的。電子傳感器也非常靈活且便宜。

系統(tǒng)的數(shù)字渲染，有助于將手語轉(zhuǎn)換為語音。信用：Chen Chen Lab / UCLA

在測試設(shè)備時，研究人員與四個聾啞人一起使用美國手語進(jìn)行了合作。佩戴者將每個手勢重復(fù)15次。定制的機(jī)器學(xué)習(xí)算法將這些手勢轉(zhuǎn)換為它們所代表的字母，數(shù)字和單詞。系統(tǒng)識別出660個符號，包括字母的每個字母以及數(shù)字0到9。

UCLA已為該技術(shù)申請了專利。陳說，基于這種技術(shù)的商業(yè)模型將需要增加詞匯量和更快的翻譯時間。