当今的传感系统需要复杂的组件和精细的算法来逐帧分析,这使得它们效率低下且耗能。
一种受人类视觉系统启发的新型神经形态技术将传感器、内存和处理集成在一个设备中。 它不仅能够检测物体的运动,还能预测它们的轨迹。
仅从一帧中观察和预测的传感器
芬兰阿尔托大学开发的神经形态传感器基于一组光敏电阻,这是一种响应光产生电流的电子设备。
当灯熄灭时,电流并不会立即停止,而是逐渐减小。在实践中,光忆阻器会“记住”它们最近是否暴露在光线下,使传感器不仅可以记录瞬时信息,还可以存储之前的时刻。
谭宏伟 是领导这项发表在《自然通讯》上的研究的研究人员(我在这里链接)。他解释说,这项技术的独特之处在于能够将一系列光学图像集成到单个帧中。结果是一个紧凑且高效的检测单元。
研究
为了证明该技术的有效性,研究人员进行了两个非常有趣的实验。
在第一个,他们使用视频一次显示一个单词的字母。神经形态传感器能够使用最后一帧中隐藏的信息来推断其前面的字母,并以几乎 100% 的准确度预测该单词是什么。
在第二,该团队展示了一个模拟人以三种不同速度移动的传感器视频。 该系统不仅能够通过分析单个帧来识别运动,而且还能正确预测后续帧。
未来
这个传感器是做什么用的? 识别并准确预测物体的未来运动和位置对于自动驾驶技术和智能交通至关重要。
为了“做出决策”,自动驾驶汽车需要对汽车、自行车、行人和其他物体在其周围的移动方式进行高度准确的预测。
出于这个原因,即使没有传感器,这项技术也很容易预测下一帧,事实上:成功的帧。