新闻

神经形态视觉传感器可以识别运动物体并预测其路径

新型智能传感器使用嵌入式信息检测单个视频帧中的运动
传感器
传统的传感器只能捕捉帧中的一个瞬间,但新的传感器可以读取过去的信息并利用这些信息预测未来。图片:谭鸿伟/阿尔托大学

一种新的生物感应传感器可以识别视频中单个帧中的移动物体,并成功预测它们将移动到哪里《自然通讯》论文它将在一系列领域中成为一个有价值的工具,包括动态视觉传感、自动检测、工业过程控制、机器人制导和自动驾驶技术。 

当前的运动检测系统需要许多组件和复杂的算法来进行逐帧分析,这使得它们效率低下且能耗大。受人类视觉系统的启发,阿尔托大学的研究人员开发了一种新的神经形态视觉技术,该技术将传感、记忆和处理集成在一个能够检测运动和预测轨迹的设备中。 

他们技术的核心是一组光电阻容器,即对光产生电流的电气设备。当光线关闭时,电流不会立即停止。相反,它会逐渐衰减,这意味着光调制器可以有效地“记住”它们最近是否暴露在光线下。因此,一个由一组光电感应器组成的传感器不仅像相机一样记录场景的瞬时信息,而且还包括前一瞬间的动态存储器。

“我们技术的独特之处在于它能够将一系列光学图像集成在一帧中,”解释道红卫滩领导这项研究的研究员。”每个图像的信息作为隐藏信息嵌入到以下图像中。换言之,视频中的最后一帧也包含有关所有先前帧的信息。这使得我们可以通过简单的人工神经网络只分析最后一帧来检测视频中的早期运动。结果是一个紧凑高效的传感单元。”

为了演示这项技术,研究人员用视频一次显示一个单词的字母。因为所有单词都以字母“E”结尾,所以所有视频的最后一帧看起来都很相似。传统的视觉传感器无法判断屏幕上的“E”是否出现在“APPLE”或“GRAPE”中的其他字母之后。但光调制器阵列可以在最后一帧中使用隐藏的信息来推断之前的字母,并以接近100%的准确率预测单词是什么。

在另一项测试中,研究小组展示了模拟人以三种不同速度移动的传感器视频。该系统不仅能够通过分析单个帧来识别运动,还能够正确预测下一帧。 

忆阻阵列
该传感器由一组光电电阻器组成。图片:谭鸿伟/阿尔托大学

准确检测运动并预测物体的位置对于自动驾驶技术和智能交通至关重要。自动驾驶汽车需要准确预测汽车、自行车、行人和其他物体的移动方式,以指导其决策。通过在光电阻阵列中添加机器学习系统,研究人员表明,他们的集成系统可以基于全信息帧的传感器内处理来预测未来的运动。 

“通过我们紧凑的传感器内存和计算解决方案实现的运动识别和预测为自主机器人和人机交互提供了新的机会,”教授说塞巴斯蒂安·范·迪肯“我们在系统中使用光电电阻器获得的帧内信息避免了冗余数据流,实现了实时节能决策。”

  • 出版:
  • 更新时间:

阅读更多新闻

绿色电池的特写:电池必须回收或妥善处置
新闻稿 出版:

BATCircle2.0的成功巩固了芬兰在锂离子电池供应链中的领导地位

由阿尔托领导的研究人员和工业之间的合作产生了令人印象深刻的研究成果
Acris服务中断和新功能文本和红色背景。
研究与艺术 出版:

2024年9月30日ACRIS的维护中断

ACRIS的维护休息时间为9月10点至16点。
三个人蹲下来在一张棕色的大纸上画画
研究与艺术 出版:

阿尔托学生的公共艺术项目在屡获殊荣的反节庆活动中亮相

上周在库皮奥,阿尔托大学艺术与媒体系的学生们展示了一系列迷人的公共艺术项目。
Tekstiiliperhonen,jonka siipiin on punottu valoon reagoivia säikeitä。
新闻稿 出版:

黄油效应——光弯曲和转动人造肌肉

未来,这项创新可以用于智能纺织品、软机器人和医学等领域的开发。