深度学习传感器系统可捕获人类复杂行为和动作

2020-05-21
关注
摘要 首尔国立大学和韩国高级科学技术研究院(KAIST)的研究人员最近开发了一种传感器,该传感器可以充当电子皮肤并将其与深度神经网络集成。

  5月21日消息,首尔国立大学和韩国高级科学技术研究院(KAIST)的研究人员最近开发了一种传感器,该传感器可以充当电子皮肤并将其与深度神经网络集成。在《自然通讯》上发表的一篇论文中介绍了这种深度学习增强的电子皮肤系统,它可以从远处捕获人类的动态运动,例如快速的手指运动。

基于迁移学习的RSL系统。

  新系统源于跨学科合作,涉及机械工程和计算机科学领域的专家,领导这项最新研究的两位研究人员是灵魂国立大学机械工程学教授Seung Hwan Ko和KAIST计算学教授Sungho Jo。

  多年来,Seung Hwan Ko教授一直在尝试通过使用激光技术在金属纳米颗粒薄膜中产生裂纹来开发高灵敏度的应变传感器,然后将所得的传感器阵列应用到旨在检测人的手指运动的虚拟现实(VR)手套上。

  Seung Hwan Ko教授说:“我的实验室通常至少使用5到10个应变传感器来预测准确的手部运动(每个手指至少要有1到2个传感器),因为所需的应变传感器数量会随着目标系统的复杂性增加而增加。几年前,我开始问自己一个问题:我们能否仅使用一个应变传感器而不是使用多个传感器来准确地预测手的运动?最初,这似乎是一个愚蠢的问题,因为几乎无法分辨出什么手指从应变传感器传来的信号。”

  在Seung Hwan Ko尝试开发一种能够准确预测人的手部运动的应变传感器的同时,Sungho Jo教授正在研究将机器学习技术与最新传感器相集成的策略。Sungho Jo教授相信,即使人们使用单个传感器检测到这些信号,也可以使用机器学习来分析由手指运动产生的顺序传感器模式。

  Sungho Jo教授说:“我们意识到,如果我们能够通过机器学习来利用这些模式,就可以清楚地将单个传感器观察到的多种不同行为分离开来。经过密切合作,我们能够开发出一种可以预测复杂手部动作的深度学习传感器。”

  由研究人员开发的传感器安装在用户的手腕上时,可以检测到他/她的手部运动产生的电信号,同时还可以识别这些信号来自哪个手指。与更传统的电子皮肤系统不同,传统的电子皮肤系统每个手指至少需要一个传感器才能准确预测人的手部运动,而新型的深度学习供电传感器在单独使用时也能很好地工作。

  Seung Hwan Ko教授对表示:“常规电子皮肤至少需要5到10个应变传感器才能准确预测手部动作,所需的应变传感器数量会随着目标系统的复杂性增加而增加。 另一方面,我们开发的深度学习电子皮肤传感器只需一个传感器就可以完成这项工作。”

  研究人员不是使用更常规的方法简单地拟合传感器检测到的信号,而是使用深度学习模型来分析随时间变化的信号模式,并最终揭示所收集数据背后的手指运动。本质上,研究人员证明,与深度学习技术结合使用时,单个传感器可以获得的效果可与多个传感器媲美。

  Sungho Jo教授说:“我们的结果表明,我们可以用更少的传感器实现复杂的检测,这将大大简化需要用于复杂检测的传感器的系统。我们还预计,这种新方法将有助于对人体运动进行间接远程测量,这适用于可穿戴式VR / AR系统。”

  在初步评估中,该研究人员团队开发的电子皮肤系统取得了令人鼓舞的结果,成功地实时检测和解码了复杂的手指运动,而且无论其在用户手腕上的位置如何,其操作性能也始终如一。将来,在机器人和健身追踪器等可穿戴设备的开发中,传感器可能会具有许多有趣的应用。有趣的是,当放置在用户的骨盆上时,同一系统还可以解码步态运动(即步行方式),因此可以用于创建小型高效的运动跟踪设备。

  Seung Hwan Ko教授说:“在这项研究中,我们使用了机器学习的传感器来解码手部动作,但是,在不久的将来,我们计划在这项研究的基础上实现更复杂的身体运动预测,例如腿,胳膊甚至整个身体的运动预测。”

  自新型冠状病毒肺炎疫情爆发以来,传感器专家网一直密切关注疫情进展,根据国家及地方政府的最新调控与安排,为更好的服务相关企业,在疫情期间,传感器专家网免费发布企业相关文章,免费成为传感器专家网认证作者,请点击认证,大家同心协力,抗击疫情,为早日打赢这场防控攻坚战贡献自己的一份力量。

您觉得本篇内容如何
评分

相关产品

Uskin Uskin 皮肤触觉传感器 机器人

上海菁特智能 Uskin 皮肤触觉传感器 机器人

Huice 慧测智能装备 HC 传感器柔性装配线

本设备集成视觉定位、振动盘、机器人、转盘等实现传感器生 产的自动上下料、组装、测试验证等多功能于一体。

Cubic 四方光电 PM1009 室内粉尘传感器

红外灰尘传感器PM1009采用光学对射原理, 可准确检测出经过吸尘器的吸尘手柄管道或吸尘延长杆管道、扫地机器人吸尘管道等灰尘污染程度数据。

灵途传感 LRMXDR010 106 ToF飞行时间光学传感器

家用清洁扫地机器人TOF激光人体感应雷达扫描传感器适于室内导航,包括扫地机器人、自动行驶车等室内服务机器人。如:扫地机器人、拖地机器人、空净机器人、家庭服务机器人。智慧工厂:AGV。家用机器人与避障,机器人ROS教学与研究,区域安防,环境扫描

NBIT 神源生 SGF 扭矩传感器

• 针对工业机器人结构特点设计的法兰式扭矩传感器,可安装于机器人各关节,使机器人具备力觉功能,实现碰撞检测、人机协作及各种力反馈控制作业 • 传感器体积小巧,质量轻,具有较高的分辨能力

ROBOTOUS RFT64-6A01 扭矩传感器

使协作机器人,工业机器人,无人机,医疗器械等安装六维力传感器后,变得更加自动化。

台州中清科技 A02 六轴力和扭矩传感器

六维力传感器能同时检测三维空间的全力信息,即三个力分量(Fx、Fy、Fz)和三个力矩分量(Tx、Ty、Tz),是工业机器人、智能装备等重要的传感设备之一,广泛应用于工业机器人的精密装配、打磨抛光、去毛刺、自动磨削、轮廓跟踪和机器人双手协调等作业中,以及医疗机器人、足底机器人等等,也可用于各类科学研究设备。

评论

您需要登录才可以回复|注册

提交评论

张帅说传感

解读传感器发展趋势,洞悉传感器产业背后发展逻辑,关注企业、技术、市场、产品等。

最近发布
查看更多
广告

张帅说传感

解读传感器发展趋势,洞悉传感器产业背后发展逻辑,关注企业、技术、市场、产品等。

关注

点击进入下一篇

高分辨率多向触觉传感器提高了机器人操纵和感知技能

提取码
复制提取码
点击跳转至百度网盘