本技术涉及一种传感器设备和一种用于操作传感器设备的方法,具体地,涉及允许使用基于事件的视觉传感器evs来重构相机记录的开始时间之前的图像帧的传感器设备和用于操作传感器设备的方法,。
背景技术:
1、例如,用作独立设备或集成到其他电子设备(例如,移动电话)中的通常的数字摄像机包括传感器设备,这些传感器设备通常在来自用户的相应指令(例如,按下按钮)之后开始拍摄视频。然而,当发生突发事件或非正常的事件时,人们可能想要开始记录该事件,但当他们触发视频开始时,他们可能已经错过了场景的初始部分。
2、因此,希望改进传感器设备的成像能力,以便允许重构在视频记录的开始时间之前的图像帧。
技术实现思路
1、为此,提供了一种传感器设备,包括:多个像素,每个像素被配置为接收光并执行光电转换,以生成电信号;事件检测电路,该事件检测电路被配置为检测由像素的第一子集中的每个像素接收到的光的高于预定阈值的强度变化,作为事件数据;以及像素信号生成电路,该像素信号生成电路被配置为生成像素信号,该像素信号指示像素的第二子集中的每个像素所接收到的光的强度值。传感器设备还包括控制单元,该控制单元被配置为在比生成像素信号的第二时间点更早的第一时间点处开始检测事件数据,并且通过使用在第二时间点之后生成的像素信号和在第二时间点之前检测到的事件数据来重构在第一时间点和第二时间点之间的时间段的像素的第二子集的强度值。
2、此外,提供了一种用于操作传感器设备的方法,该方法包括:利用传感器设备的多个像素接收光并执行光电转换,以生成电信号;检测由像素的第一子集中的每个像素接收到的光的高于预定阈值的强度变化,作为事件数据;生成像素信号,该像素信号指示像素的第二子集中的每个像素接收到的光的强度值;在比生成像素信号的第二时间点更早的第一时间点处开始检测事件数据;以及通过使用在第二时间点之后生成的像素信号和在第二时间点之前检测到的事件数据来重构在第一时间点和第二时间点之间的时间段的像素的第二子集的强度值。
3、因此,生成表示接收到的光的强度的像素信号的常规摄像机像素(像素的第二子集)由对超过一定阈值的强度变化敏感的evs像素(像素的第一子集)补充。在从相机像素获得全强度信号之前,触发evs像素,以检测已经发生的事件。一旦记录了全强度信号,该全强度信号将与检测到的事件数据一起用于重构在拍摄全强度帧开始之前的时刻的相机像素的强度值。以这种方式,拍摄的视频可以在时间上向前延伸。evs像素的使用在这方面特别有用,因为事件检测电路比像素信号生成电路消耗更少的能量,使得事件检测的更长持续时间不会过度耗尽传感器设备的能量存储。此外,事件数据的高时间分辨率允许对可能在开始全强度帧拍摄之后立即发生的运动模糊进行校正。
1.一种传感器设备(10),包括:
2.根据权利要求1所述的传感器设备(10),其中,
3.根据权利要求1所述的传感器设备(10),其中,
4.根据权利要求3所述的传感器设备(10),还包括:
5.根据权利要求3所述的传感器设备(10),其中,
6.根据权利要求1所述的传感器设备(10),还包括:
7.根据权利要求1所述的传感器设备(10),其中,
8.根据权利要求1所述的传感器设备(10),其中,
9.根据权利要求1所述的传感器设备(10),其中,
10.根据权利要求1所述的传感器设备(10),其中,
11.根据权利要求1所述的传感器设备(10),其中,
12.根据权利要求1所述的传感器设备(10),其中,
13.一种用于操作传感器设备(10)的方法,所述方法包括: