近日,美国国防部高级研究计划局宣布在基于快速事件的神经形态相机和电子学(FENCE)计划下开发基于事件的红外相机技术,旨在开发低功耗、低延迟的神经形态相机技术以实现未来的军事应用。这个项目由雷神公司、BAE系统公司和诺斯罗普—格鲁曼公司领导的3个研究团队负责。
基于事件的神经形态的相机是一类新兴的传感器,与传统成像器相比具有明显优势,它产生的数据更少,并且拥有更低的延迟和更小的功耗。当今最先进的SOTA相机适用于跟踪变化很少且图像相对简单的场景,但其功能在高度混乱和动态的场景中会失效,从而限制了在许多军事应用中的使用。
FENCE旨在通过开发和展示低延迟、低功耗、基于事件的红外焦平面阵列和一类新型数字信号处理和学习算法来克服这些缺点,从而使智能传感器能够处理更多动态场景。
雷神公司、BAE系统公司和诺斯罗普—格鲁曼公司的团队将致力于开发一种低延迟的异步读出集成电路(ROIC),以及一个与ROIC集成的处理层,以识别相关的空间和时间信号。ROIC和处理层将使集成的FENCE传感器能够在低于1.5瓦的功率下运行。FENCE技术最终可以实现许多军事应用——从自动驾驶汽车和机器人到红外搜索和跟踪。为确保广泛的适用性,研究人员还将致力于开发一种灵活且适应性强的单一解决方案,以便在各种任务中使用。



