1.本技术属于拍摄技术领域,具体涉及一种拍摄方法、装置、电子设备及介质。
背景技术:2.通常,在用户使用该电子设备对拍摄对象进行拍摄时,电子设备可以控制电子设备的卷帘快门逐行对图像传感器的多行像素进行曝光,从而可以得到该拍摄对象的高分辨率的拍摄图像。
3.但是,由于拍摄对象可能为运动对象,而电子设备在对该运动对象对应的部分像素进行曝光时,由于曝光时间较长,可能会导致得到的拍摄图像中该运动对象出现变形的现象。
4.如此,导致电子设备的拍摄效果较差。
技术实现要素:5.本技术实施例的目的是提供一种拍摄方法、装置、电子设备及介质,能够在电子设备对运动对象对应的部分像素进行曝光时,减轻该运动对象所在的图像区域出现变形,从而提高电子设备的拍摄效果。
6.第一方面,本技术实施例提供了一种拍摄方法,应用于拍摄装置,该拍摄装置包括图像传感器,该方法包括:在控制图像传感器进行曝光的情况下,通过该图像传感器的实感像素获取拍摄对象的运动信息,该运动信息为拍摄对象在该图像传感器的视场内运动的信息;基于运动信息,确定图像传感器的位置补偿信息;基于位置补偿信息控制图像传感器运动,以使得在曝光过程中该图像传感器相对于拍摄对象静止;在曝光完成后,输出第一图像数据。
7.第二方面,本技术实施例提供了一种拍摄装置,该拍摄装置包括图像传感器,该拍摄装置还包括:获取模块、确定模块、控制模块以及处理模块。其中,获取模块,用于在控制图像传感器进行曝光的情况下,通过图像传感器的实感像素获取拍摄对象的运动信息,该运动信息为该拍摄对象在该图像传感器的视场内运动的信息。确定模块,用于基于该获取模块获取的该运动信息,确定该图像传感器的位置补偿信息。控制模块,用于基于该确定模块确定的位置补偿信息控制该图像传感器运动,以使得在曝光过程中该图像传感器相对于该拍摄对象静止。处理模块,用于在曝光完成后,输出第一图像数据。
8.第三方面,本技术实施例提供了一种电子设备,该电子设备包括处理器和存储器,所述存储器存储可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如第一方面所述的方法的步骤。
9.第四方面,本技术实施例提供了一种可读存储介质,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如第一方面所述的方法的步骤。
10.第五方面,本技术实施例提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现如第一方面所述的方
法的步骤。
11.第六方面,本技术实施例提供一种计算机程序产品,该程序产品被存储在存储介质中,该程序产品被至少一个处理器执行以实现如第一方面所述的方法的步骤。
12.在本技术实施例中,在控制拍摄装置的图像传感器进行曝光的情况下,拍摄装置可以通过图像传感器的实感像素获取拍摄对象的运动信息(即拍摄对象在图像传感器的视场内运动的信息),然后基于该运动信息,确定图像传感器的位置补偿信息,进而根据该位置补偿信息控制图像传感器运动,以使得在曝光过程中该图像传感器相对于该拍摄对象静止,并在曝光完成后,输出第一图像数据。由于拍摄装置可以先获取拍摄对象在图像传感器的视场内运动的运动信息,然后再基于该运动信息确定的位置补偿信息控制拍摄装置的图像传感器运动,以使得在曝光过程中该图像传感器相对于拍摄对象静止。因此,可以减少拍摄对象和图像传感器间的相对位置变化,因此,可以减轻运动对象所在的图像区域出现变形的现象,如此,可以提高拍摄装置的拍摄效果。
附图说明
13.图1是本技术实施例提供的拍摄方法的流程示意图之一;
14.图2是本技术实施例的图像拍摄方法的流程示意图之二;
15.图3是本技术实施例提供的拍摄方法的流程示意图之三;
16.图4是本技术实施例提供的一个实感像素的电路连接示意图;
17.图5是本技术实施例提供的拍摄方法的流程示意图之四;
18.图6是本技术实施例提供的拍摄方法的流程示意图之五;
19.图7是本技术实施例提供的拍摄装置的结构示意图;
20.图8是本技术实施例提供的电子设备的结构示意图;
21.图9是本技术实施例提供的电子设备的硬件结构示意图。
具体实施方式
22.下面将结合本技术实施例中的附图,对本技术实施例中的技术方案进行清楚地描述,显然,所描述的实施例是本技术一部分实施例,而不是全部的实施例。基于本技术中的实施例,本领域普通技术人员获得的所有其他实施例,都属于本技术保护的范围。
23.本技术的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本技术的实施例能够以除了在这里图示或描述的那些以外的顺序实施,且“第一”、“第二”等所区分的对象通常为一类,并不限定对象的个数,例如第一对象可以是一个,也可以是多个。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
24.下面结合附图,通过具体的实施例及其应用场景对本技术实施例提供的拍摄方法、装置、电子设备及介质进行详细地说明。
25.图1示出了本技术实施例提供的一种拍摄方法的流程图。如图1所示,本技术实施例提供的拍摄方法可以包括下述的步骤101至步骤104。
26.步骤101、在拍摄装置控制图像传感器进行曝光的情况下,拍摄装置通过该图像传
感器的实感像素获取拍摄对象的运动信息。
27.本技术实施例中,拍摄装置中可以设置有卷帘快门。
28.可选地,本技术实施例中,在用户触发拍摄装置开启拍摄类应用的情况下,拍摄装置可以显示该拍摄类应用的预览界面,并开启拍摄装置的摄像头,以及,控制卷帘快门对图像传感器(sensor)进行曝光。
29.可选地,本技术实施例中,拍摄对象可以为运动的人、动物、物体等。
30.本技术实施例中,上述运动信息为拍摄对象在图像传感器的视场内运动的信息。
31.可选地,本技术实施例中,该运动信息包括以下至少一项:速度(例如下述实施例中的运动速度)、方向(例如下述实施例中的运动方向)。
32.在一种示例中,拍摄装置可以通过运动传感器,直接采集拍摄对象的运动信息。其中,该运动传感器可以为以下任一项:红外传感器、激光传感器、动态视觉传感器等。
33.在另一种示例中,拍摄装置可以在控制图像传感器进行曝光的情况下,获取至少一帧预览画面,并对该预览画面进行比对,以确定拍摄对象的运动信息。
34.在又一种示例中,拍摄装置的图像传感器中可以设置有至少一个高灵敏像素(例如设置有白色(white)滤光片的像素,或者下述实施例中的实感像素),这样在拍摄装置控制图像传感器进行曝光的情况下,该至少两个高灵敏像素可以检测拍摄对象的轮廓,并在该至少两个高灵敏像素中的某些高灵敏像素检测到拍摄对象的轮廓时,该某些高灵敏像素可以向拍摄装置发送该某些高灵敏像素的位置信息和对应的时间信息,从而拍摄装置可以根据该某些高灵敏像素的位置信息和对应的时间信息,获取运动信息。
35.步骤102、拍摄装置基于运动信息,确定图像传感器的位置补偿信息。
36.可以理解,位置补偿信息指的是拍摄装置的图像传感器接下来移动的目标位置。
37.可选地,本技术实施例中,在运动信息包括速度和方向的情况下,拍摄装置可以先获取图像传感器的每行像素的读取时间,然后再根据速度、方向以及每行像素的读取时间,确定一个目标位置,以确定多个目标位置,得到位置补偿信息。
38.步骤103、拍摄装置基于位置补偿信息控制图像传感器运动,以使得在曝光过程中图像传感器相对于拍摄对象静止。
39.可选地,本技术实施例中,在拍摄装置控制图像传感器根据位置补偿信息移动之后,拍摄装置可以再次执行上述步骤101至步骤103,即再次获取拍摄对象的运动信息,并基于再次获取的运动信息,再次确定一个位置补偿信息,从而拍摄装置可以根据该一个位置补偿信息,再次控制图像传感器进行移动。
40.进一步可选地,拍摄装置可以先对图像传感器的全部感光区域的第一行像素进行曝光,并在结束对该第一行像素进行曝光后,对该第一行像素进行读取,这样在读取该第一行像素时,拍摄装置可以控制图像传感器根据确定的位置补偿信息进行移动;接下来,拍摄装置可以再次获取拍摄对象的运动信息,并基于该再次获取的运动信息,再次确定位置补偿信息,然后再对图像传感器的全部感光区域的第二行像素进行曝光,并在结束对该第二行像素进行曝光后,对该第二行像素进行读取,这样在读取该第二行像素时,拍摄装置可以控制图像传感器根据再次确定的位置补偿信息进行移动,以此类推。
41.可以理解,在对不同行像素进行曝光时,图像传感器相对于拍摄对象的位置没有发生变化。
42.步骤104、在曝光完成后,拍摄装置输出第一图像数据。
43.可选地,本技术实施例中,拍摄装置可以通过图像传感器读取全部感光区域的每一行像素,以得到第一图像数据,从而拍摄装置可以通过图像信号处理器对该第一图像数据进行处理,得到拍摄图像。
44.在得到拍摄图像之后,拍摄装置可以在拍摄类应用的预览界面中显示该拍摄图像,或者,拍摄装置可以直接将该拍摄图像存储于预设的存储区域(例如“相册”对应的存储区域)内。
45.可选地,本技术实施例中,结合图1,如图2所示,在上述步骤104之后,本技术实施例提供的拍摄方法还可以包括下述的步骤201和步骤202。
46.步骤201、拍摄装置控制图像传感器进行曝光,输出第二图像数据。
47.可选地,本技术实施例中,拍摄装置可以不移动图像传感器并读取图像传感器的全部感光区域的每一行像素,以得到第二图像数据,从而拍摄装置可以通过图像信号处理器对该第二图像数据进行处理,得到拍摄图像。
48.步骤202、拍摄装置根据第一图像数据和第二图像数据,生成目标图像。
49.本技术实施例中,上述第一图像数据为:在曝光过程中,图像传感器根据该位置补偿信息进行移动后,通过该图像传感器对该拍摄对象进行成像得到的第一图像对应的图像数据,该第二图像数据为:在曝光过程中,拍摄装置的图像传感器未发生移动的情况下,通过该图像传感器对该拍摄对象进行成像得到的图像对应的图像数据。
50.可以理解,第一图像数据为拍摄对象抵消变形后,但背景对象被错位的图像对应的图像数据;第二图像数据为拍摄对象没有抵消变形,背景对象没有被错位的图像对应的图像数据。
51.可选地,本技术实施例中,拍摄装置可以对第一图像数据和第二图像数据进行融合处理,以得到目标图像数据,然后再通过图像信号处理器对该目标图像数据进行处理,并压缩生成目标图像。
52.可选地,本技术实施例中,在得到目标图像之后,拍摄装置可以在拍摄类应用的预览界面中显示该目标图像,或者,拍摄装置可以直接将该目标图像存储于预设的存储区域(例如“相册”对应的存储区域)内。
53.如此可知,由于拍摄装置可以将第一图像数据和第二图像数据融合处理,因此,可以减轻目标图像中运动物体出现变形的现象。
54.可选地,本技术实施例中,结合图1,如图3所示,上述的步骤201具体可以通过下述的步骤201a至步骤201c实现。
55.步骤201a、拍摄装置基于第一图像数据,得到拍摄对象对应的前景图像数据。
56.本技术实施例中,上述前景图像数据为拍摄对象对应的图像数据。
57.进一步可选地,本技术实施例中,拍摄装置可以从第一图像数据中,确定出拍摄对象对应的图像区域(即前景图像区域),然后再从该第一图像数据中得到该前景图像区域对应的前景图像数据。
58.在一种示例中,拍摄装置可以获取至少一张图像数据,并将该至少一张图像数据与第一图像数据进行比对,以确定前景图像区域,从而确定该前景图像区域对应的前景图像数据。
59.步骤201b、拍摄装置基于第二图像数据,得到背景对应的背景图像数据。
60.本技术实施例中,上述背景图像数据为除拍摄对象对应的图像区域外的图像区域所对应的图像数据。
61.进一步可选地,本技术实施例中,拍摄装置可以先从第二图像中,确定出第一图像区域(该第一图像区域为拍摄对象对应的图像区域),然后再根据该第一图像区域,确定背景图像区域,从而拍摄装置可以从第二图像中得到背景图像区域对应的背景图像数据。
62.需要说明的是,针对拍摄装置得到背景对应的背景图像数据的说明,可以参考上述实施例中拍摄装置得到拍摄对象对应的前景图像数据的具体描述,本技术实施例在此不再赘述。
63.步骤201c、拍摄装置将前景图像数据和背景图像数据进行图像融合,生成目标图像。
64.如此可知,由于拍摄装置可以先从第一图像数据得到运动物体抵消变形后的前景图像数据,以及从第二图像数据得到背景物体未被错位的背景图像数据,然后再将该前景图像数据和该背景图像数据进行图像融合处理,生成目标图像。因此,可以避免目标图像中存在物体变形的情况。
65.本技术实施例提供的拍摄方法,在控制拍摄装置的图像传感器进行曝光的情况下,拍摄装置可以通过图像传感器的实感像素获取拍摄对象的运动信息(即拍摄对象在图像传感器的视场内运动的信息),然后基于该运动信息,确定图像传感器的位置补偿信息,进而根据该位置补偿信息控制该图像传感器运动,以使得在曝光过程中该图像传感器相对于该拍摄对象静止,并在曝光完成后,输出第一图像数据。由于拍摄装置可以先获取拍摄对象在图像传感器的视场内运动的运动信息,然后再基于该运动信息确定的位置补偿信息控制图像传感器运动,以使得在曝光过程中该图像传感器相对于拍摄对象静止。因此,可以减少拍摄对象和图像传感器间的相对位置变化,因此,可以减轻运动对象所在的图像区域出现变形,如此,可以提高拍摄装置的拍摄效果。
66.下面将以拍摄装置的图像传感器中设置有至少两个高灵敏像素(例如实感像素)为例,举例说明拍摄装置是如何获取运动信息的。
67.图4示出了一个实感像素的电路连接示意图。如图4所示,一个实感像素电路可以包括:第一电流放大模块10、第二电流放大模块11、模数转换模块12、逻辑判断模块13以及信号控制模块14。
68.第一电流放大模块10包括:像素pd1,该像素pd1的第一端接地,该像素pd1的第二端与第一电容c1的第一端连接;npn型三极管15,该npn型三极管15的基极与第一电容c1的第二端连接,该npn型三极管15的基极还通过第一电阻r1与第一电源v0连接,该npn型三极管15的集电极与第二电容c2的第一端连接,该npn型三极管15的集电极还通过第二电阻r2与第一电源v0连接,该npn型三极管15的发射极接地;该第二电容c2的第二端通过第三电阻r3接地,该第二电容c2的第二端还与第一开关管t1连接。
69.模数转换模块12包括:模数转换器(analog-to-digital converter,adc)16,该模数转换器adc16的第一端与第二电容c2的第二端连接,该模数转换器adc16的第二端还与逻辑判断模块13的第一端连接;
70.信号控制模块14的第一端与逻辑判断模块13的第二端连接,该信号控制模块14的
第二端与第一开关管t1连接;
71.第二电流放大模块包括:像素pd2,该像素pd2的第一端接地,该像素pd2的第二端与第三电容c3的第一端连接;npn型三极管17,该npn型三极管17的基极与第三电容c3的第二端连接,该npn型三极管17的基极还通过第四电阻r4与第二电源v1连接,该npn型三极管17的集电极与第四电容c4的第一端连接,该npn型三极管17的集电极还通过第五电阻r5与第二电源v1连接,该npn型三极管17的发射极接地;该第四电容c4的第二端通过第六电阻r6接地,该第四电容c4的第二端还与第二开关管t2连接;该第四电容c4的第二端还与模数转换器adc连接,该信号控制模块14的第二端还与第二开关管t2连接。
72.其中,第一电流放大模块10的作用是使用感光二极管pd1将光信号先转换成电流信号,并通过电阻r1、电阻r2和三极管把电流信号进行放大,然后再经过电阻r3转换成电压信号1,并将该电压信号1输出至模数转换模块12。
73.在模数转换模块12中,v
adc
和vref分别为模数转换器(analog-to-digital converter,adc)的工作电压和参考电压。数模转换模块的作用是将电压、电流等模拟量,转换成数字量,以便于后续处理。在第一电流放大模块10输出的电压信号1输入进模数转换模块12后,通过与参考电压vref对比、变换,变成感光数字信号1’,并将该感光数字信号1’输出至逻辑判断模块13。
74.在逻辑判断模块13中,vh和vl为感光二极管pd1在上一时刻的感光数字信号的最大值和最小值,即vh和vl指示感光二极管pd1在上一时刻的感光数字信号2’所处的电压范围。逻辑判断模块13可以将感光数字信号1’与感光二极管pd1在上一时刻的vh和vl分别比较。如果感光数字信号1’超出vh和vl的范围,逻辑判断模块13可以向信号控制模块14输出请求信号,该请求信号用于请求输出第一电流放大模块10输出的电压信号,即电压信号1。
75.信号控制模块14接收到逻辑判断模块13输出的请求信号后,可以仲裁何时输出电压信号1,并向多路复用开关模块输出控制信号,该控制信号用于控制通过第一通路输出电压信号1,第一通路包括:依次连接的第一开关管t1、第一模拟信号输出模块和多路复用开关模块。
76.可以理解,第二电流放大模块11的各器件的作用与第一电流放大模块10类似,第二模拟信号输出模块和第二开关管t2的作用与第一模拟信号输出模块和第一开关管t1的作用类似,因此不再赘述。
77.其中,第二模拟信号输出模块和第二开关管t2构成用于输出第二电流放大模块11的电压信号(模拟的)的第二通路。
78.需要说明的是,实际实现中,信号控制模块14可以控制第一电流放大模块10的电压信号1和第二电流放大模块11的电压信号2同时输出,并控制多路复用开关模块对两个电压信号(即电压信号1和电压信号2)做处理,最终由多路复用开关模块输出电压信号1、电压信号2,以及电压信号1+电压信号2。
79.这样电压信号1和电压信号2可以用来判断相位差,进行测距或测速;而电压信号1+电压信号2是该实感像素的感光信号值(例如实感像素捕获的亮度信息),用作后续画面处理。
80.本技术实施例中,至少两个实感像素中的每个实感像素是可以相互独立的,且每个实感像素可以随着像素时钟频率,实时感知外界环境亮度变化,将环境亮度的变换转化
成电流的变化,进而转换成数字信号的变化。
81.若至少两个实感像素中的某些实感像素的数字信号的变化量超过预设阈值,则该某些实感像素会上报系统要求读出,并且输出带有该某些实感像素的位置信息、亮度信息、时间信息的数据包。
82.可以理解,由于运动对象的位置变化会使环境亮度发生改变,因此引起某些实感像素对应的数字信号的变化;从而电子设备可以通过该某些实感像素对应的数字信号变化和坐标信息,得到运动对象的轮廓,从而确定出运动对象在图像传感器的视场内的运动信息。
83.可选地,在本技术实施例中,至少两个实感像素按照预定密度分布在图像传感器中,且该至少两个实感像素可以以阵列的方式排布在拍摄装置的图像传感器中。
84.进一步可选地,在本技术实施例中,至少两个实感像素的尺寸和密度可以根据实际应用场景灵活进行调整,对此本技术实施例不作限定。
85.可选地,本技术实施例中,上述坐标信息可以为在目标坐标系中的坐标位置;该目标坐标系为:以图像传感器的特定像素为原点的直角坐标系。特定像素可以为以下任一项:位于图像传感器的中心的像素、位于图像传感器的端点的像素。
86.可选地,本技术实施例中,上述运动信息包括该拍摄对象的目标速度和目标方向。具体地,结合图1,如图5所示,上述步骤101具体可以通过下述的步骤101a至步骤101b实现。
87.步骤101a、拍摄装置通过图像传感器中实感像素的亮度变化信息,确定n个时间信息和n个位置信息。
88.本技术实施例中,上述n个时间信息中的每个时间信息分别对应n个位置信息中的一个位置信息,n为大于1的正整数。
89.进一步可选地,本技术实施例中,上述n个时间信息中的每个时间信息分别为实感像素检测到拍摄对象的轮廓的时间信息;该n个位置信息中的每个位置信息分别为对应的时间信息检测到拍摄对象的轮廓的位置信息,即每个位置信息分别为拍摄对象的轮廓在图像传感器的视场内的位置信息。
90.进一步可选地,本技术实施例中,拍摄装置可以先根据亮度变化信息,从图像传感器中实感像素中确定出n个实感像素,然后再从该n个实感像素接收n个时间信息和n个位置信息,以确定n个时间信息和n个位置信息。
91.步骤101b、拍摄装置基于n个时间信息和n个位置信息,分别确定运动速度和该运动方向。
92.进一步可选地,本技术实施例中,拍摄装置可以先从n个时间信息中,确定出最大时间信息和最小时间信息间,然后再将该最大时间信息和最小时间信息间的差值,确定为运动对象的运动时间。
93.进一步可选地,本技术实施例中,拍摄装置可以先从n个时间信息中,确定出最大时间信息对应的位置信息和最小时间信息对应的位置信息,然后再将该最大时间信息对应的位置信息和最小时间信息对应的位置信息间的距离,确定为运动对象的运动距离,从而拍摄装置可以将运动对象的运动距离和运动对象的运动时间之间的比值,确定为运动对象的运动速度。
94.进一步可选地,本技术实施例中,拍摄装置可以将最大时间信息对应的位置信息
和最小时间信息对应的位置信息在目标坐标系中的坐标位置进行比对,确定运动对象的运动方向。
95.如此可知,由于实感像素比常规像素的实时性更好,信号冗余性更好,精度更高。因此,图像传感器可以通过实感像素抓取到高精度的运动对象的轮廓,实现高精度的运动对象定位,从而根据不同轮廓图中运动对象的位置变化以及图像获取时间,准确得到运动对象的运动信息。
96.可选地,本技术实施例中,结合图1,如图6所示,上述步骤102具体可以通过下述的步骤102a实现,且上述步骤103具体可以通过下述的步骤103a实现。
97.步骤102a、拍摄装置根据运动速度、运动方向以及读取时间,确定图像传感器的x个目标位置。
98.本技术实施例中,x为正整数。
99.本技术实施例中,上述读取时间为图像传感器的单行像素的读取时长。
100.进一步可选地,本技术实施例中,拍摄装置可以先获取读取时间,然后再根据读取时间和x个运动速度,确定x个目标距离。
101.进一步可选地,本技术实施例中,拍摄装置可以由读取时间和x个运动速度的乘积,确定x个目标距离。
102.进一步可选地,本技术实施例中,拍摄装置根据x个运动方向和x个目标距离,确定x个目标位置。
103.进一步可选地,本技术实施例中,拍摄装置可以将图像传感器当前的位置按照x个运动方向和x个目标距离移动的x次的位置,确定为x个目标位置。
104.举例说明,假设运动速度为0.1mm/ms,运动方向为水平向右,图像传感器的每行像素的读取时间为3ms,从而拍摄装置可以将0.1mm/ms和3ms的乘积,确定为目标距离,即0.3mm,然后再将图像传感器的当前位置按照水平向右移动0.3mm的位置,确定为目标位置。
105.步骤103a、拍摄装置控制图像传感器依次移动至该x个目标位置。
106.可以理解,拍摄装置可以先对图像传感器的一行像素进行曝光,在结束对该一行像素进行曝光后,再在图像传感器的每行像素的读取时间内,控制拍摄装置的图像传感器移动至该目标位置,再对图像传感器的下一行像素进行曝光,以此类推,控制该图像传感器依次移动至该x个目标位置,在此期间,该图像传感器的每一行像素进行曝光时,运动对象和图像传感器的相对位置不变。
107.由此可知,拍摄装置在对运动对象对应的部分像素逐行进行曝光时,运动对象和图像传感器的相对位置不变,从而可以减轻运动对象所在的图像区域出现变形的现象。
108.当然,运动对象在垂直方向上相对拍摄装置也会产生位置变化。
109.需要说明的是,实感像素不仅对运动对象的轮廓信息有很好的抓取能力,而且实感像素传感器频率极高、实时性非常好,还具备进行相位检测的能力,可以获取相位信息,例如通过前述的电压信号1和电压信号2判断相位差,进行测距和测速,具体地,可以测量运动物体相对于传感器远离或者靠近的垂直距离和垂直速度,因此至少两个实感像素传感器能够实时地提供运动对象在图像传感器的视场内的位置信息,以及运动对象和拍摄装置之间的距离。
110.本技术实施例中,拍摄装置可以通过至少两个实感像素获取运动对象在垂直方向
上相对拍摄装置远离或者靠近的速度,然后拍摄装置可以控制图像传感器依次移动至多个目标位置,从而调整镜头与图像传感器之间的距离,以减轻运动对象所在的图像区域相对于拍摄装置在垂直方向上出现变形的现象。
111.本技术实施例提供的拍摄方法,执行主体可以为拍摄装置。本技术实施例中以拍摄置执行拍摄方法为例,说明本技术实施例提供的拍摄装置的。
112.图7示出了本技术实施例中涉及的拍摄装置的一种可能的结构示意图。如图7所示,拍摄装置60可以包括:获取模块61、确定模块62、控制模块63以及处理模块64。其中,获取模块61,用于在控制该图像传感器进行曝光的情况下,通过该图像传感器的实感像素获取拍摄对象的运动信息,该运动信息为该拍摄对象在该图像传感器的视场内运动的信息。确定模块62,用于基于该获取模块获取的该运动信息,确定该图像传感器的位置补偿信息。控制模块63,用于基于该确定模块确定的该位置补偿信息控制该图像传感器运动,以使得在曝光过程中该图像传感器相对于该拍摄对象静止。处理模块64,用于在曝光完成后,输出第一图像数据。
113.在一种可能的实现方式中,上述目标运动信息包括该拍摄对象的运动速度和运动方向。上述获取模块61,具体用于通过该图像传感器中实感像素的亮度变化信息,确定n个时间信息和n个位置信息,每个时间信息分别对应一个位置信息,n为大于1的正整数;并基于该n个时间信息和该n个位置信息,分别确定该运动速度和该运动方向。
114.在一种可能的实现方式中,上述确定模块62,具体用于根据该运动速度、该运动方向以及读取时间,确定该图像传感器的x个目标位置。上述控制模块63,具体用于控制该图像传感器依次移动至该确定模块62确定的x个目标位置。其中,x为正整数。
115.在一种可能的实现方式中,上述处理模块64,还用于控制所述图像传感器进行曝光,输出第二图像数据;并根据所述第一图像数据和所述第二图像数据,生成目标图像。
116.在一种可能的实现方式中,上述处理模块64,具体用于基于第一图像数据,得到拍摄对象对应的前景图像数据;并基于第二图像数据,得到背景对应的背景图像数据;以及,将该前景图像数据和该背景图像数据进行图像融合,生成该目标图像。
117.本技术实施例提供的拍摄装置,由于拍摄装置可以先获取拍摄对象在图像传感器的视场内运动的运动信息,然后再基于该运动信息确定的位置补偿信息控制拍摄装置的图像传感器运动,以使得在曝光过程中该图像传感器相对于拍摄对象静止。因此,可以减少拍摄对象和图像传感器间的相对位置变化,因此,可以减轻运动对象所在的图像区域出现变形的现象,如此,可以提高拍摄装置的拍摄效果。
118.本技术实施例中的拍摄装置可以是电子设备,也可以是电子设备中的部件,例如集成电路或芯片。该电子设备可以是终端,也可以为除终端之外的其他设备。示例性的,电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、移动上网装置(mobile internet device,mid)、增强现实(augmented reality,ar)/虚拟现实(virtual reality,vr)设备、机器人、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer,umpc)、上网本或者个人数字助理(personal digital assistant,pda)等,还可以为服务器、网络附属存储器(network attached storage,nas)、个人计算机(personal computer,pc)、电视机(television,tv)、柜员机或者自助机等,本技术实施例不作具体限定。
119.本技术实施例中的拍摄装置可以为具有操作系统的装置。该操作系统可以为安卓(android)操作系统,可以为ios操作系统,还可以为其他可能的操作系统,本技术实施例不作具体限定。
120.本技术实施例提供的拍摄装置能够实现图1至图7的方法实施例实现的各个过程,达到相同的技术效果,为避免重复,这里不再赘述。
121.可选地,本技术实施例中,如图8所示,本技术实施例还提供一种电子设备80,包括处理器81和存储器82,存储器82上存储有可在所述处理器81上运行的程序或指令,该程序或指令被处理器m01执行时实现上述拍摄方法实施例的各个过程步骤,且能达到相同的技术效果,为避免重复,这里不再赘述。
122.需要说明的是,本技术实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。
123.图9为实现本技术实施例的一种电子设备的硬件结构示意图。
124.该电子设备100包括但不限于:射频单元101、网络模块102、音频输出单元103、输入单元104、传感器105、显示单元106、用户输入单元107、接口单元108、存储器109、以及处理器110等部件。
125.本领域技术人员可以理解,电子设备100还可以包括给各个部件供电的电源(比如电池),电源可以通过电源管理系统与处理器110逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图9中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置,在此不再赘述。
126.本技术实施例中,所述电子设备还包括图像传感器。
127.其中,处理器110,在控制图像传感器进行曝光的情况下,通过该图像传感器的实感像素获取拍摄对象的运动信息,该运动信息为该拍摄对象在该图像传感器的视场内运动的信息;基于该运动信息,确定该图像传感器的位置补偿信息;基于该位置补偿信息控制该图像传感器运动,以使得在曝光过程中该图像传感器相对于该拍摄对象静止;曝光完成后,输出第一图像数据。
128.本技术实施例提供的拍摄方法,由于电子设备可以先获取拍摄对象在图像传感器的视场内运动的运动信息,然后基于该运动信息确定的位置补偿信息控制图像传感器运动,以使得在曝光过程中该图像传感器相对于该拍摄对象静止。因此,可以减少拍摄对象和图像传感器间的相对位置变化,因此,可以减轻运动对象所在的图像区域出现变形的现象,如此,可以提高电子设备的拍摄效果。
129.可选地,本技术实施例中,上述运动信息包括运动速度和运动方向。
130.处理器110,具体用于通过该图像传感器中实感像素的亮度变化信息,确定n个时间信息和n个位置信息,每个时间信息分别对应一个位置信息,n为大于1的正整数;并基于该n个时间信息和该n个位置信息,分别确定该运动速度和该运动方向。
131.如此可知,由于电子设备可以通过图像传感器中的实感像素,获取n个时间信息和n个位置信息,并确定运动速度和运动方向,因此,可以抓取到高精度的运动对象的轮廓图,实现高精度的运动对象定位,从而根据不同轮廓图中运动对象的位置变化以及图像获取时间,准确得到运动对象的运动信息。
132.可选地,本技术实施例中,处理器110,具体用于根据该运动速度、该运动方向以及读取时间,确定该图像传感器的x个目标位置;并控制图像传感器依次移动至x个目标位置;其中,x为正整数。
133.如此可知,由于电子设备可以根据运动速度和读取时间,确定x个目标位置,并控制图像传感器依次移动至该x个目标位置,因此,在对运动对象对应的部分像素逐行进行曝光时,运动对象和图像传感器的相对位置不变,从而可以减轻运动对象所在的图像区域出现变形的现象,如此,可以提高电子设备的拍摄效果。
134.可选地,本技术实施例中,处理器110,还用于控制图像传感器进行曝光,输出第二图像数据;并根据第一图像数据和该第二图像数据,生成目标图像。
135.如此可知,由于电子设备可以根据第一图像数据和第二图像数据,生成目标图像,因此,可以减轻拍摄图像中该运动对象出现的变形,如此,可以提高电子设备的拍摄效果。
136.可选地,本技术实施例中,处理器110,具体用于基于第一图像数据,得到拍摄对象对应的前景图像数据;并基于第二图像数据,得到背景对应的背景图像数据;以及,将该前景图像数据和该背景图像数据进行图像融合,生成目标图像。
137.如此可知,由于电子设备可以从第一图像数据中得到前景图像数据,从第二图像数据中得到背景图像数据,并将该前景图像数据和该背景图像数据进行图像融合,生成该目标图像,因此,可以减轻拍摄图像中该运动对象出现的变形,如此,可以提高电子设备的拍摄效果。
138.应理解的是,本技术实施例中,输入单元104可以包括图形处理器(graphics processing unit,gpu)1041和麦克风1042,图形处理器1041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元106可包括显示面板1061,可以采用液晶显示器、有机发光二极管等形式来配置显示面板1061。用户输入单元107包括触控面板1071以及其他输入设备1072中的至少一种。触控面板1071,也称为触摸屏。触控面板1071可包括触摸检测装置和触摸控制器两个部分。其他输入设备1072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
139.存储器109可用于存储软件程序以及各种数据。存储器109可主要包括存储程序或指令的第一存储区和存储数据的第二存储区,其中,第一存储区可存储操作系统、至少一个功能所需的应用程序或指令(比如声音播放功能、图像播放功能等)等。此外,存储器109可以包括易失性存储器或非易失性存储器,或者,存储器109可以包括易失性和非易失性存储器两者。其中,非易失性存储器可以是只读存储器(read-only memory,rom)、可编程只读存储器(programmable rom,prom)、可擦除可编程只读存储器(erasable prom,eprom)、电可擦除可编程只读存储器(electrically eprom,eeprom)或闪存。易失性存储器可以是随机存取存储器(random access memory,ram),静态随机存取存储器(static ram,sram)、动态随机存取存储器(dynamic ram,dram)、同步动态随机存取存储器(synchronous dram,sdram)、双倍数据速率同步动态随机存取存储器(double data rate sdram,ddrsdram)、增强型同步动态随机存取存储器(enhanced sdram,esdram)、同步连接动态随机存取存储器(synch link dram,sldram)和直接内存总线随机存取存储器(direct rambus ram,drram)。本技术实施例中的存储器109包括但不限于这些和任意其它适合类型的存储器。
140.处理器110可包括一个或多个处理单元;可选地,处理器110集成应用处理器和调制解调处理器,其中,应用处理器主要处理涉及操作系统、用户界面和应用程序等的操作,调制解调处理器主要处理无线通信信号,如基带处理器。可以理解的是,上述调制解调处理器也可以不集成到处理器110中。
141.本技术实施例还提供一种可读存储介质,所述可读存储介质上存储有程序或指令,该程序或指令被处理器执行时实现上述拍摄方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
142.其中,所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质,包括计算机可读存储介质,如计算机只读存储器rom、随机存取存储器ram、磁碟或者光盘等。
143.本技术实施例另提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现上述拍摄方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
144.应理解,本技术实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。
145.本技术实施例提供一种计算机程序产品,该程序产品被存储在存储介质中,该程序产品被至少一个处理器执行以实现如上述拍摄方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
146.需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个
……”
限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本技术实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
147.通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本技术的技术方案本质上或者说对现有技术做出贡献的部分可以以计算机软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如rom/ram、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,或者网络设备等)执行本技术各个实施例所述的方法。
148.上面结合附图对本技术的实施例进行了描述,但是本技术并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本技术的启示下,在不脱离本技术宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本技术的保护之内。
技术特征:1.一种拍摄方法,应用于拍摄装置,所述拍摄装置包括图像传感器,其特征在于,所述方法包括:在控制所述图像传感器进行曝光的情况下,通过所述图像传感器的实感像素获取拍摄对象的运动信息,所述运动信息为所述拍摄对象在所述图像传感器的视场内运动的信息;基于所述运动信息,确定所述图像传感器的位置补偿信息;基于所述位置补偿信息控制所述图像传感器运动,以使得在曝光过程中所述图像传感器相对于所述拍摄对象静止;在曝光完成后,输出第一图像数据。2.根据权利要求1所述的方法,其特征在于,所述运动信息包括所述拍摄对象的运动速度和运动方向;所述通过所述图像传感器的实感像素获取拍摄对象的运动信息,包括:通过所述图像传感器中实感像素的亮度变化信息,确定n个时间信息和n个位置信息,每个时间信息分别对应一个位置信息,n为大于1的正整数;基于所述n个时间信息和所述n个位置信息,分别确定所述运动速度和所述运动方向。3.根据权利要求2所述的方法,其特征在于,所述基于所述运动信息,确定所述图像传感器的位置补偿信息,包括:根据所述运动速度、所述运动方向以及读取时间,确定所述图像传感器的x个目标位置;所述基于所述位置补偿信息控制所述图像传感器运动,包括:控制所述图像传感器依次移动至所述x个目标位置;其中,x为正整数。4.根据权利要求1所述的方法,其特征在于,在所述在曝光完成后,输出第一图像数据之后,所述方法还包括:控制所述图像传感器进行曝光,输出第二图像数据;根据所述第一图像数据和所述第二图像数据,生成目标图像。5.根据权利要求4所述的方法,其特征在于,所述根据所述第一图像数据和所述第二图像数据,生成目标图像,包括:基于所述第一图像数据,得到所述拍摄对象对应的前景图像数据;基于所述第二图像数据,得到背景对应的背景图像数据;将所述前景图像数据和所述背景图像数据进行图像融合,生成所述目标图像。6.一种拍摄装置,其特征在于,所述拍摄装置包括图像传感器,所述拍摄装置还包括:获取模块、确定模块、控制模块以及处理模块;所述获取模块,用于在控制所述图像传感器进行曝光的情况下,通过所述图像传感器的实感像素获取拍摄对象的运动信息,所述运动信息为所述拍摄对象在所述图像传感器的视场内运动的信息;所述确定模块,用于基于所述获取模块获取的所述运动信息,确定所述图像传感器的位置补偿信息;所述控制模块,用于基于所述确定模块确定的所述位置补偿信息控制所述图像传感器运动,以使得在曝光过程中所述图像传感器相对于所述拍摄对象静止;
所述处理模块,用于在曝光完成后,输出第一图像数据。7.根据权利要求6所述的拍摄装置,其特征在于,所述运动信息包括所述拍摄对象的运动速度和运动方向;所述获取模块,具体用于通过所述图像传感器中实感像素的亮度变化信息,确定n个时间信息和n个位置信息,每个时间信息分别对应一个位置信息,n为大于1的正整数;并基于所述n个时间信息和所述n个位置信息,分别确定所述运动速度和所述运动方向。8.根据权利要求6所述的拍摄装置,其特征在于,所述确定模块,具体用于根据所述运动速度、所述运动方向以及读取时间,确定所述图像传感器的x个目标位置;所述控制模块,具体用于控制所述图像传感器依次移动至所述确定模块确定的所述x个目标位置;其中,x为正整数。9.根据权利要求6所述的拍摄装置,其特征在于,所述处理模块,还用于控制所述图像传感器进行曝光,输出第二图像数据;并根据所述第一图像数据和所述第二图像数据,生成目标图像。10.根据权利要求9所述的拍摄装置,其特征在于,所述处理模块,具体用于基于所述第一图像数据,得到所述拍摄对象对应的前景图像数据;并基于所述第二图像数据,得到背景对应的背景图像数据;以及,将所述前景图像数据和所述背景图像数据进行图像融合,生成所述目标图像。11.一种电子设备,其特征在于,包括处理器和存储器,所述存储器存储可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如权利要求1至5中任一项所述的拍摄方法的步骤。12.一种可读存储介质,其特征在于,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如权利要求1至5中任一项所述的拍摄方法的步骤。
技术总结本申请公开了一种拍摄方法、装置、电子设备及介质,属于拍摄技术领域。其中,该方法包括:在控制图像传感器进行曝光的情况下,通过该图像传感器的实感像素获取拍摄对象的运动信息,该运动信息为该拍摄对象在该图像传感器的视场内运动的信息;基于该运动信息,确定该图像传感器的位置补偿信息;基于该位置补偿信息控制该图像传感器运动,以使得在曝光过程中该图像传感器相对于该拍摄对象静止;曝光完成后,输出第一图像数据。输出第一图像数据。输出第一图像数据。
技术研发人员:裴珺 吴旭邦
受保护的技术使用者:维沃移动通信有限公司
技术研发日:2022.06.24
技术公布日:2022/11/1