@ 2017.07.14 , 10:00
20

能翻译手语的智能手套

能翻译手语的智能手套
CREDIT: 123RF

科学家发明了一种布满可弯曲式电子元件的手套,这种实验手套将能够帮助语言障碍患者与他人实现更好的交流。这种手套能将穿戴者的手语翻译成对应的语言(目前只适用于美国手语),将语言内容通过无线方式传输到电子设备中,接着在屏幕上将语言显示出来。全套装备价格不会太高,而且耗电量非常小。

目前追踪肢体语言的技术有很多种,但大多数是通过照相机或红外发射器及接收器所组成的光学系统实现的。这些方式固然很好,但它们的缺点是耗能太大。而且这些设备通常很笨重,甚至可能是不可移动的。而可穿戴式的电子元件就克服了这些缺点,特别是当手套里的追踪系统被加以完善,能被直观使用的时候——人们只需要动动手掌和手指就行了。

追踪人类手势的手套已经在多个领域被成功运用,包括虚拟现实系统、远程手术及操控直升机等军事领域。而现在加州大学圣地亚哥分销的研究者们灵光一现,突然想试试以相似的方法实现手套对人类手势的解读。

能翻译手语的智能手套
Credit: Timothy O’Connor et al (2017)

于是他们研制出了带有9个可弯曲式应变传感器的手套,其中两个负责感应所有手指,一个负责拇指。这些传感器通过检测手指关节的弯曲情况来记录手部的运动。手套中的嵌入式微型处理器会将传感器发送的数据翻译为美国手语中的字母。最后还有蓝牙无线电设备将翻译过后的手势转换为文本,发送到显示设备(如智能手机等)上。

PLOS ONE报导,加州大学圣地亚哥分校的研究团队称,他们在实验中能够准确翻译出美国手语中的26个字母,但当手指关节的弯曲次数超过1000次后,系统的精确度就下降了。他们还通过建立能够精确模仿美国手语姿势的虚拟手部模型向人们展示了这套设备的精确度。

本文译自 zmescience,由译者 蛋奶 基于创作共用协议(BY-NC)发布。
原作者:TIBI PUIU


给这篇稿打赏,让译者更有动力
支付宝打赏 [x]
您的大名: 打赏金额:

3.0
赞一个 (13)

TOTAL COMMENTS: 20+1

  1. 神奇约翰尼
    @4 months ago
    3507588

    你们是不是又有什么大胆想法了?

  2. 3507591

    或许不只是语言障碍者能用
    搞不好这东西有能力成为一定程度上代替键盘功能的东西哎
    在公共场合用语音输入感觉实在是太蠢了
    但换成不太明显的手势的话似乎能好很多

  3. 3507601

    手语要拼写?不是全球通用的么?

  4. 七月的烟火
    @4 months ago
    3507633

    还以为是懂手语的智能套套,在想着这有啥用呢

  5. 3507635

    根据手势翻译字母并显示,为啥不直接用手机打字呢。

  6. 七月的烟火
    @4 months ago
    3507636

    @牡丹: 不要说全球通用,国内都没能统一……

    [18] XX [0] 回复 [0]
  7. 坦克杯
    @4 months ago
    3507638

    @牡丹: 不一样,反正中国的手语不是拼的,某个手势代替某个词这样的.

  8. 毛茸茸
    @4 months ago
    3507640

    @rename: 关键是输入效率的问题

  9. 巴扎黑
    @4 months ago
    3507646

    能记得这么多手势,我应该已经是高级魔法师了

  10. 3507659

    @毛茸茸:
    或许以后会有针对手势优化的输入法的,多多少少应该可以改善一下输入效率
    就像是以前的智能ABC和现代的各种联想输入法一样
    应该不至于做到完全取代键盘,但是有些场合还是比键盘方便一点的
    我觉得

  11. sherlock
    @4 months ago
    3507691

    手语是一个一个字母来表示的?不是单词结合唇动表示的么?一个个字母比划那效率能交谈么?

  12. 十三叔
    @4 months ago
    3507712

    我觉得, 带个笔和本就可以了.

  13. 邻家猥琐屬蜀
    @4 months ago
    3507841

    myo IMU+皮电 功耗低 穿戴也方便啊

  14. 消失的下雨天
    @4 months ago
    3507974

    T……是什么鬼手势

  15. 消失的下雨天
    @4 months ago
    3507978

    T……是个什么鬼手势

  16. 上校特派员
    @4 months ago
    3508345

    前不久央视不是报道过中国大学生发明的手语转语音手环获得什么大奖吗?原理是计算机记录每个动作的肌肉变化,通过手环监控手腕肌肉

  17. 上校特派员
    @4 months ago
    3508356

    央视不是报道过中国有2个大学生发明了手语翻译指环获得国际大奖了。。手环监控手腕上肌肉的变化,再比对数据库里每个肌肉变化对应的手势的语音。。。是受钢琴指法手环启发的

  18. 3508430

    @rename: 公众场合选择摆手势,而不选择键盘?

  19. 分秒不争
    @4 months ago
    3508585

    感觉像是看功夫片一样

  20. 3508657

    神经病,用手机打字然后让软件朗读文本不就行了。

发表评论


24H最赞