Generalized Event Cameras

2024年07月02日
  • 简介
    事件相机以高时间分辨率和最小带宽要求捕捉世界。然而,只编码亮度变化的事件流不包含足够的场景信息以支持各种下游任务。在这项工作中,我们设计了通用事件相机,以带宽有效的方式本质上保留场景强度。我们从事件生成的时间和传输的信息方面推广事件相机。为了实现我们的设计,我们转向提供对单个光子检测的数字访问的单光子传感器;这种模态赋予我们实现丰富的通用事件相机空间的灵活性。我们的单光子事件相机能够以低读出速率进行高速、高保真度成像。因此,这些事件相机可以支持即插即用的下游推理,而无需捕捉新的事件数据集或设计专门的事件视觉模型。作为实际影响,我们的设计涉及轻量级和接近传感器兼容的计算,为使用单光子传感器提供了一种避免过高带宽成本的方法。
  • 图表
  • 解决问题
    设计一种通用的事件相机,以高时间分辨率和最小的带宽要求捕捉场景信息,并支持各种下游任务。
  • 关键思路
    设计单光子传感器实现通用事件相机,该相机可以在低读出速率下进行高速、高保真成像,同时支持下游推理。
  • 其它亮点
    使用单光子传感器实现通用事件相机,可以在不捕捉新事件数据集或设计专门的事件视觉模型的情况下支持即插即用的下游推理。该设计还包括轻量级和接近传感器兼容的计算,可以使用单光子传感器而不产生过高的带宽成本。
  • 相关研究
    最近的相关研究包括:1. 'EventGAN: Generative adversarial networks for event-based data';2. 'Event-based vision: A survey';3. 'Event-based vision: A review'。
PDF
原文
点赞 收藏 评论 分享到Link

沙发等你来抢

去评论