CN107404615A - 图像录制方法及电子设备 - Google Patents
图像录制方法及电子设备 Download PDFInfo
- Publication number
- CN107404615A CN107404615A CN201710517140.XA CN201710517140A CN107404615A CN 107404615 A CN107404615 A CN 107404615A CN 201710517140 A CN201710517140 A CN 201710517140A CN 107404615 A CN107404615 A CN 107404615A
- Authority
- CN
- China
- Prior art keywords
- video
- frame
- destination object
- display interface
- interest
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/682—Vibration or motion blur correction
- H04N23/685—Vibration or motion blur correction performed by mechanical compensation
- H04N23/687—Vibration or motion blur correction performed by mechanical compensation by shifting the lens or sensor position
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/25—Determination of region of interest [ROI] or a volume of interest [VOI]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
- H04N21/4334—Recording operations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/4728—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明实施例提供了一种图像录制方法及电子设备,首先,在展示视频帧的显示界面中确定包含目标对象的感兴趣区域;由于承载电子设备的载体在发生抖动时,会使得电子设备产生第一移动位移,在电子设备移动第一移动位移后,在后续拍摄的视频帧中,目标对象在显示界面的就会有移动像素信息;此时,依据移动像素信息,调整后续拍摄的视频帧中感兴趣区域在显示界面的位置,使得后续拍摄的视频帧中感兴趣区域包含所述目标对象。从而使得目标对象不会脱离感兴趣区域。
Description
技术领域
本申请涉及图像录制技术领域,更具体涉及图像录制方法及电子设备。
背景技术
用户在使用电子设备拍摄视频或录制影像的过程中,可能需要电子设备拍摄的视频帧中始终包括用户想要拍摄的目标对象,这就涉及视频跟踪算法。
目前,视频跟踪算法是使目标对象一直位于感兴趣区域(ROI,regionofinterest)中。但是,若用户手持电子设备,或,电子设备安装在运动的载体上,使得电子设备很难处于静止状态;而电子设备处于运动状态下时,电子设备就发生抖动,可能使得目标对象脱离感兴趣区域。
发明内容
有鉴于此,本发明提供了一种图像录制方法及电子设备,以克服现有技术中目标对象脱离感兴趣区域的问题。
为实现上述目的,本发明提供如下技术方案:
一种图像录制方法,应用于电子设备,包括:
在展示视频帧的显示界面中确定感兴趣区域,所述感兴趣区域中包含目标对象;
获取所述电子设备的第一移动位移;
获取因所述第一移动位移使得后续待拍摄的视频帧中所述目标对象在所述显示界面中的移动像素信息;
基于所述移动像素信息,调整后续拍摄的视频帧中所述感兴趣区域在所述显示界面的位置,使得后续拍摄的视频帧中感兴趣区域包含所述目标对象。
一种电子设备,包括:
摄像头,用于拍摄影像,以获得组成所述影像的各视频帧;
显示器,用于显示显示界面,所述显示界面展示有所述视频帧;
存储器,用于存储程序;
处理器,用于执行所述程序,所述程序具体用于:
在展示视频帧的显示界面中确定感兴趣区域,所述感兴趣区域中包含目标对象;
获取所述电子设备的第一移动位移;
获取因所述第一移动位移使得后续待拍摄的视频帧中所述目标对象在所述显示界面中的移动像素信息;
基于所述移动像素信息,调整后续拍摄的视频帧中所述感兴趣区域在所述显示界面的位置,使得后续拍摄的视频帧中感兴趣区域包含所述目标对象。
经由上述的技术方案可知,与现有技术相比,本发明实施例提供了一种图像录制方法,首先,在展示视频帧的显示界面中确定包含目标对象的感兴趣区域;由于承载电子设备的载体在发生抖动时,会使得电子设备产生第一移动位移,在电子设备移动第一移动位移后,在后续拍摄的视频帧中,目标对象在显示界面的就会有移动像素信息;此时,依据移动像素信息,调整后续拍摄的视频帧中感兴趣区域在显示界面的位置,使得后续拍摄的视频帧中感兴趣区域包含所述目标对象。从而使得目标对象不会脱离感兴趣区域。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本申请实施例提供的图像录制方法的流程图;
图2为本申请实施例提供的电子设备发生移动后处于静止状态的目标对象在显示界面中发生第一移动位移的过程示意图;
图3为本申请实施例提供的电子设备发生移动后处于运动状态的目标对象在显示界面中发生第一移动位移的过程示意图;
图4为将各视频帧中位于感兴趣区域的图像生成录制影像的过程示意图;
图5为本申请实施例提供的一种电子设备的结构图;
图6为本申请实施例提供的一种电子设备的内部结构图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本申请实施例提供的图像录制方法可以应用于具有摄像头的电子设备,例如,智能手机,或,录像机,或,相机,或,平板电脑,或,笔记本,或,监控设备等终端设备。
本申请实施例提供的图像录制方法是为了防止目标对象移出感兴趣区域。ROI(region of interest,感兴趣区域)是指机器视觉、图像处理中,从被处理的图像以方框、圆、椭圆、不规则多边形等方式勾勒出需要处理的区域。
在图像处理领域,感兴趣区域是从图像中选择的一个图像区域,这个感兴趣区域是图像分析所关注的重点。圈定该感兴趣区域以便进行进一步处理,可以减少处理时间,增加精度。
电子设备在进行图像录制的过程中,可能只关注目标对象,因此可以将包含目标对象的区域圈定为感兴趣区域,可选的,可以将感兴趣区域中的多个图像生成录制影像。但是电子设备可能处于运动状态,使得目标对象可能移出感兴趣区域,这样录制影像中并不是每个视频帧都包含目标对象了,使得用户无法通过录制影像持续关注目标对象。为此,本申请实施例提供了图像录制方法,以防止目标对象移出感兴趣区域。
本申请实施例提供的图像录制方法可以应用但不限于以下应用场景。
第一应用场景:电子设备需要拍摄的目标对象处于运动状态,电子设备可能需要跟踪目标对象,例如,目标对象为晨跑中的朋友,用户需要手持电子设备边晨跑边拍摄朋友;或者,目标对象为马拉松比赛的朋友,用户可能需要将电子设备固定在移动装置,例如自行车,用户可以骑着自行车拍摄朋友。由于电子设备处于运动状态因此难以使电子设备拍摄的画面稳定,可能使得目标对象移出感兴趣区域。
第二应用场景:电子设备需要拍摄的目标对象处于静止状态,而自身处于运动状态;例如,用户携带电子设备位于运动的载体上,例如用户在船上需要拍摄远方的房屋,由于船一直在运动,导致用户需要不断调整电子设备,以使得目标对象不移出感兴趣区域。再如,监控设备需要监控有无人员入侵某一场地,显然该场地是固定的,该场地所在的区域为感兴趣区域,由于监控设备位于室外,可能会由于天气的原因(例如大风或大雨)导致监控设备发生移动,监控设备发生移动后,可能使得目标对象移出感兴趣区域。
上述应用场景中,电子设备尽管发生移动,但是目标对象也一直处于电子设备的“视线”范围内,即本申请图像录制方法是基于电子设备可以拍摄到目标对象的基础上实现的。若目标对象的运动范围太大或电子设备的移动剧烈,导致目标对象移出电子设备的“视线”范围内,使得电子设备无法拍摄到目标对象,则本申请提供的图像录制方法也无能无力。
结合上述应用场景,对图像录制方法进行说明,如图1所示为本申请实施例提供的图像录制方法的流程图,该方法包括:
步骤S101:在展示视频帧的显示界面中确定感兴趣区域,所述感兴趣区域中包含目标对象。
用户需要录制的影像是由静态的视频帧组成。电子设备在开始录制影像时,各视频帧会依次展示在电子设备的显示界面中。用户可以在显示界面中显示的视频帧中确定感兴趣区域。
用户在显示界面显示的视频帧中确定感兴趣区域的方法包括:用户在显示视频帧中圈定感兴趣区域,或,电子设备自动识别感兴趣区域,或,在所述显示界面中展示所述目标对象的位置处检测到预设触控手势时,生成包含所述目标对象的感兴趣区域。
电子设备自动识别感兴趣区域的方法包括:将预设时间内显示界面中显示的视频帧中都包括的对象确定为目标对象,或,将处于运动状态的对象确定为目标对象。
确定感兴趣区域后,可以识别出感兴趣区域包含的目标对象。
步骤S102:获取所述电子设备的第一移动位移。
若电子设备处于静止状态,目标对象处于移动状态,只要目标对象不移出电子设备的“视线”范围内,则视频跟踪算法可以跟踪目标对象使得目标对象位于感兴趣区域中,若电子设备处于运动状态,视频跟踪算法可能无法总是使得感兴趣区域包含目标对象。
第一移动位移可以包括:当前电子设备的位置相对于前一时刻电子设备的位置向左移动的距离,和/或,当前电子设备的位置相对于前一时刻电子设备的位置向右移动的距离,和/或,当前电子设备的位置相对于前一时刻电子设备的位置向上移动的距离,和/或,当前电子设备的位置相对于前一时刻电子设备的位置向下移动的距离,和/或当前电子设备相对于前一时刻电子设备的旋转角度。
步骤S103:获取因所述第一移动位移使得后续待拍摄的视频帧中所述目标对象在所述显示界面中的移动像素信息。
由于电子设备发生了移动,所以目标对象在显示界面中的位置也发生了移动。具体如图2所示,图2为本申请实施例提供的电子设备发生移动后处于静止状态的目标对象在显示界面中发生第一移动位移的过程示意图。
图2中示出的目标对象处于静止状态,假设前一时刻目标对象在显示界面的位置为A点所示位置;假设电子设备向右移动了距离A,若电子设备的显示界面显示的目标对象与现实环境中的目标对象是镜面的,则目标对象在显示界面中向左移一个或多个像素达到位置B;若电子设备的显示界面显示的目标对象与现实环境中的目标对象不是镜面的,而是电子设备的显示界面显示的目标对象与现实环境中的目标对象的左右方向一致,则电子设备向右移动了距离A,则目标对象在显示界面中向右移一个或多个像素。
图2中,前一时刻目标对象用虚线表示,当前时刻目标对象用实线表示。
图2中是以电子设备的显示界面显示的目标对象与现实环境中的目标对象是镜面为例。
如图3所示,为本申请实施例提供的电子设备发生移动后处于运动状态的目标对象在显示界面中发生第一移动位移的过程示意图。
若目标对象处于运动状态,假设前一时刻目标对象在显示界面的位置为C点所示的位置;若电子设备不发生移动,由于目标对象的运动导致当前时刻目标对象在显示界面的位置可能为D位置,即若电子设备未发生移动,则电子设备的显示界面如虚线框31所示(即目标对象处于显示界面的中间区域),由于显示界面31所示的画面是假设的,因此用虚线框表示;由于电子设备发生了移动(例如向右移动),因此,目标对象在显示界面中的位置为如实现框32中所示的位置D(即目标对象处于显示界面左侧区域)。
其中,位置D在虚线框31中的位置与在实现框32中的位置不同。
综上,目标对象在显示界面中的移动像素信息可以是指假定目标对象处于静止状态下,目标对象相当于显示界面移动像素信息,例如,图2所示;或,移动像素信息可以是指依据目标对象在显示界面中的真实移动像素信息。
目标对象在显示界面中的真实移动像素信息可以通过以下方式获取:
若在实际场景中目标对象发生了移动,即使电子设备不发生移动,目标对象在显示界面中也会产生第一移动像素信息;若目标对象静止电子设备发生了移动,则目标对象会因电子设备的移动在显示界面产生第二移动像素信息。
因此,若电子设备移动,目标对象也移动,则可以第一移动像素信息和第二移动像素信息获得本申请实施例中的移动像素信息。
步骤S104:基于所述移动像素信息,调整后续拍摄的视频帧中所述感兴趣区域在所述显示界面的位置,使得后续拍摄的视频帧中感兴趣区域包含所述目标对。
若移动像素信息是指假定目标对象处于静止状态下目标对象因电子设备的移动导致在显示界面产生的移动像素信息。本申请实施例提供的图像录制方法就是提供如何智能控制处于运动状态的电子设备获得与处于静止状态的电子设备相同的图像。
例如,假设电子设备向左移动了3cm,则对应的处于静止状态目标对象向右移动3个像素,无论当前的目标对象处于静止状态还是运动状态,直接确定移动像素信息即为向右移动3个像素,此时可以将感兴趣区域整体向右移动3个像素。
在步骤S101至步骤S104的过程中,视频跟踪算法一直跟踪目标对象,即视频跟踪算法一直在调整后续拍摄的视频帧中感兴趣区域在显示界面中的位置,因为由于电子设备的移动,可能使得目标对象移出感兴趣区域,因此,可以在视频跟踪算法调整的感兴趣区域所在位置的基础上,向右移动3个像素。
若移动像素信息是指依据目标对象在显示界面中的真实移动像素信息,则本申请实施例提供的图像录制方法就是提供如何智能控制处于运动状态的电子设备更加准确的跟踪目标对象,使得目标对象处于感兴趣区域。此时,本申请实施例提供的图像录制方法就与视频跟踪算法融合在一起,即在步骤S101至步骤S104的过程中,图像录制方法与视频跟踪算法一起跟踪目标对象,并调整后续拍摄的视频帧中感兴趣区域在显示界面中的位置。
本发明实施例提供的一种图像录制方法,首先,在展示视频帧的显示界面中确定包含目标对象的感兴趣区域;由于承载电子设备的载体在发生抖动时,会使得电子设备产生第一移动位移,在电子设备移动第一移动位移后,在后续拍摄的视频帧中,目标对象在显示界面的就会有移动像素信息;此时,依据移动像素信息,调整后续拍摄的视频帧中感兴趣区域在显示界面的位置,使得后续拍摄的视频帧中感兴趣区域包含所述目标对象。从而使得目标对象不会脱离感兴趣区域。
由于影像是由多个视频帧组成,用户使用电子设备拍摄的多个视频帧中感兴趣区域的位置可能相同可能不同,因此,可以依据各视频帧中位于感兴趣区域的图像,生成录制影像,使得用户在观看录制影像时可以一直观看的目标对象。下面以多个视频帧中的连续的3个视频帧为例进行说明,如图4所示,为将各视频帧中位于感兴趣区域的图像生成录制影像的过程示意图。
图4中左侧所示的3个视频帧是电子设备所拍摄到的,其中点划线框为感兴趣区域,右侧所示的3个图像是左侧相应的视频帧中感兴趣区域中的图像。
左侧3个视频帧依次为视频帧41、视频帧42以及视频帧43。其中,电子设备拍摄视频帧43的拍摄角度与视频帧41和视频帧42不同,即电子设备在拍摄视频帧43时,相对于拍摄视频帧41和视频帧42时发生了旋转。
在生成录制影像的过程中,是基于各视频帧中感兴趣区域中的图像生成的。
本申请实施例提供的“获取因所述第一移动位移使得后续待拍摄的视频帧中所述目标对象在所述显示界面中的移动像素信息”的实现方式有多种,本申请实施例提供但不限于以下几种。
第一种,移动像素信息是指假定目标对象处于静止状态下目标对象因电子设备的移动导致在显示界面产生的移动像素信息。
具体方法包括:从预先存储的各移动位移对应的移动像素信息中,获取所述第一移动位移对应的移动像素信息。
由于电子设备的分辨率已经确定,假设为M*N,电子设备在录制图像的过程中,电子设备的显示界面显示的视频帧每行有M个像素,每列有N个像素。可以预先获取在实际场景中目标对象发生相应移动位移时,目标对象在显示界面中移动像素的数目和方向,基于此,可以获得各移动位移对应的移动像素信息。
M和N为正整数。
第二种,移动像素信息是指依据目标对象在显示界面中的真实移动像素信息。
具体方法包括:依据已经拍摄的多个视频帧中所述目标对象的位置,确定所述目标对象在所述显示界面中的移动趋势;基于所述第一移动位移以及所述移动趋势,确定后续待拍摄的视频帧中所述目标对象在所述显示界面的所述移动像素信息。
移动趋势可以包括移动方向和/或移动速度。
若移动趋势包括:移动速度,所述基于所述第一移动位移以及所述移动趋势,确定后续待拍摄的视频帧中所述目标对象在所述显示界面的所述移动像素信息包括:
依据所述移动速度,确定在后续待拍摄的视频帧中所述目标对象在所述显示界面中的第二移动位移;
依据所述第一移动位移以及所述第二移动位移,确定在后续待拍摄的视频帧中所述目标对象相对于所述显示界面的所述移动像素信息。
依据已经拍摄的多个视频帧中目标对象的位置,以图4为例,从图4左侧的三幅图中可以看出目标对象逐渐超越清洁工所在的位置。因此基于这三个视频帧可以确定,目标对象在显示界面中的移动趋势即为向右移动。进一步的,可以依据拍摄3个视频帧的时间,以及目标对象在3个视频帧中的像素数目的变化,可以计算出目标对象在显示界面中的移动速度。例如,每毫秒移动多少个像素。
假设,1秒有30个视频帧,且假设电子设备向右移动5cm对应目标对象向左移动5个像素(第一移动位移)。假设移动趋势为目标对象每毫秒向右移动30个像素;假设图4所示的3个视频帧为1ms内拍摄的,则若电子设备不发生移动,则目标对象会向右移动1个像素(第二移动位移);因此,第一移动位移与第二移动位移之和即为移动像素信息;在该举例中,第一移动位移与第二移动位移之和为向左移动4个像素。
本申请实施例提供的“获取电子设备的第一移动位移”的方法有多种,本申请实施例提供但不限于以下几种。
第一种:电子设备仅发生旋转。
具体步骤为:获取所述电子设备的第一旋转角度;
当所述第一移动位移包括所述第一旋转角度时,所述获取因所述第一移动位移使得后续待拍摄的视频帧中所述目标对象在所述显示界面中的移动像素信息包括:
依据所述第一旋转角度,确定所述目标对象在所述显示界面中的第二旋转角度;
当所述第一移动位移包括所述第一旋转角度,所述基于所述移动像素信息,调整后续拍摄的视频帧中感兴趣区域在所述显示界面的位置包括:
确定以基于前一视频帧中感兴趣区域确定出的第一位置为中心,将前一视频帧中感兴趣区域的边界旋转所述第二旋转角度。
“确定以基于前一视频帧中感兴趣区域确定出的第一位置为中心”可以是以感兴趣区域的中心位置为中心。
第二种:电子设备仅发生移动。
具体步骤为:获取所述电子设备的移动方向和移动距离。
当所述第一移动位移包括所述移动方向和所述移动距离时,所述获取因所述第一移动位移使得后续待拍摄的视频帧中所述目标对象在所述显示界面中的移动像素信息包括:
依据所述移动方向以及所述移动距离,确定所述目标对象在所述显示界面中的移动像素的第一数目和移动像素方向。
当所述第一移动位移包括移动方向和移动距离时,所述基于所述移动像素信息,调整所述感兴趣区域在所述显示界面的位置包括:
确定以基于所述感兴趣区域确定出的第一位置为中心,将所述感兴趣区域的边界的各像素移动沿所述移动像素方向移动所述第一数目个像素。
“确定以基于前一视频帧中感兴趣区域确定出的第一位置为中心”可以是以感兴趣区域的中心位置为中心。
第三种:电子设备即发生旋转又发生移动。
即第一种方法和第二种方法的结合,这里不再赘述。
已知感兴趣区域的原像素坐标以及感兴趣区域的第二旋转角度;或,已知感兴趣区域的原像素坐标以及发生的移动方向和移动距离;或,已知感兴趣区域的原像素坐标以及感兴趣区域的第二旋转角度以及发生的移动方向和移动距离,可以通过放射变换,获得后续拍摄的视频帧中感兴趣区域的位置。
本申请实施例还提供了包含与图像录制方法对应的虚拟装置的电子设备,如图5所示,为本申请实施例提供的一种电子设备的结构图,该电子设备包括:
第一确定模块51,用于在展示视频帧的显示界面中确定感兴趣区域,所述感兴趣区域中包含目标对象;
第一获取模块52,用于获取所述电子设备的第一移动位移;
第二获取模块53,用于获取因所述第一移动位移使得后续待拍摄的视频帧中所述目标对象在所述显示界面中的移动像素信息;
调整模块54,用于基于所述移动像素信息,调整后续拍摄的视频帧中所述感兴趣区域在所述显示界面的位置,使得后续拍摄的视频帧中感兴趣区域包含所述目标对象。
可选的,还包括:
生成模块,用于基于各视频帧中位于感兴趣区域的图像,生成录制影像。
可选的,所述第二获取模块53包括:
第一获取单元,用于从预先存储的各移动位移对应的移动像素信息中,获取所述第一移动位移对应的移动像素信息。
可选的,所述第二获取模块53包括:
第一确定单元,用于依据已经拍摄的多个视频帧中所述目标对象的位置,确定所述目标对象在所述显示界面中的移动趋势;
第二确定单元,用于基于所述第一移动位移以及所述移动趋势,确定后续待拍摄的视频帧中所述目标对象在所述显示界面的所述移动像素信息。
可选的,所述移动趋势包括:移动速度,所述第二确定单元包括:
第一确定子单元,用于依据所述移动速度,确定在后续待拍摄的视频帧中所述目标对象在所述显示界面中的第二移动位移;
第二确定子单元,用于依据所述第一移动位移以及所述第二移动位移,确定在后续待拍摄的视频帧中所述目标对象相对于所述显示界面的所述移动像素信息。
可选的,所述第一获取模块52包括:
第二获取单元,用于获取所述电子设备的第一旋转角度;
和/或,
第三获取单元,用于获取所述电子设备的移动方向和移动距离。
可选的,当所述第一移动位移包括所述第一旋转角度时,所述第二获取模块53包括:
第三确定单元,用于依据所述第一旋转角度,确定所述目标对象在所述显示界面中的第二旋转角度;
和/或,
当所述第一移动位移包括所述移动方向和所述移动距离时,所述第二获取模块53包括:
第四确定单元,用于依据所述移动方向以及所述移动距离,确定所述目标对象在所述显示界面中的移动像素的第一数目和移动像素方向。
可选的,当所述第一移动位移包括所述第一旋转角度,所述调整模块5包括:
第五确定单元,用于确定以基于前一视频帧中感兴趣区域确定出的第一位置为中心,将前一视频帧中感兴趣区域的边界旋转所述第二旋转角度;
和/或,
当所述第一移动位移包括移动方向和移动距离时,所述调整模块5包括:
第六确定单元,用于确定以基于所述感兴趣区域确定出的第一位置为中心,将所述感兴趣区域的边界的各像素移动沿所述移动像素方向移动所述第一数目个像素。
可选的,所述第一确定模块51包括:
生成单元,用于在所述显示界面中展示所述目标对象的位置处检测到预设触控手势时,生成包含所述目标对象的感兴趣区域。
本申请实施例还提供了一种电子设备的内部结构,如图6所示,为本申请实施例提供的一种电子设备的内部结构图,该电子设备包括:
摄像头61,用于拍摄影像,以获得组成所述影像的各视频帧;
显示器62,用于显示显示界面,所述显示界面展示有视频帧;
存储器63,用于存储程序;
程序可以包括程序代码,所述程序代码包括计算机操作指令。
存储器63可能包含高速RAM存储器,也可能还包括非易失性存储器(non-volatilememory),例如至少一个磁盘存储器。
处理器64,用于执行所述程序,所述程序具体用于:
在展示视频帧的显示界面中确定感兴趣区域,所述感兴趣区域中包含目标对象;
获取所述电子设备的第一移动位移;
获取因所述第一移动位移使得后续待拍摄的视频帧中所述目标对象在所述显示界面中的移动像素信息;
基于所述移动像素信息,调整后续拍摄的视频帧中所述感兴趣区域在所述显示界面的位置,使得后续拍摄的视频帧中感兴趣区域包含所述目标对象。
处理器64可能是一个中央处理器CPU,或者是特定集成电路ASIC(ApplicationSpecific Integrated Circuit),或者是被配置成实施本发明实施例的一个或多个集成电路。
电子设备还可以包括通信接口65以及通信总线66,其中,摄像头61、显示器62、存储器63、处理器64以及通信接口65通过通信总线66实现相互间的通信。
可选的,处理器还用于:
基于各视频帧中位于感兴趣区域的图像,生成录制影像。
可选的,处理器在执行获取因所述第一移动位移使得后续待拍摄的视频帧中所述目标对象在所述显示界面中的移动像素信息时,具体用于:
从预先存储的各移动位移对应的移动像素信息中,获取所述第一移动位移对应的移动像素信息。
可选的,处理器在执行获取因所述第一移动位移使得后续待拍摄的视频帧中所述目标对象在所述显示界面中的移动像素信息时,具体用于:
依据已经拍摄的多个视频帧中所述目标对象的位置,确定所述目标对象在所述显示界面中的移动趋势;
基于所述第一移动位移以及所述移动趋势,确定后续待拍摄的视频帧中所述目标对象在所述显示界面的所述移动像素信息。
可选的,所述移动趋势包括:移动速度,处理器在执行基于所述第一移动位移以及所述移动趋势,确定后续待拍摄的视频帧中所述目标对象在所述显示界面的所述移动像素信息时,具体用于:
依据所述移动速度,确定在后续待拍摄的视频帧中所述目标对象在所述显示界面中的第二移动位移;
依据所述第一移动位移以及所述第二移动位移,确定在后续待拍摄的视频帧中所述目标对象相对于所述显示界面的所述移动像素信息。
可选的,处理器在执行获取所述电子设备的第一移动位移时,具体用于:
获取所述电子设备的第一旋转角度;
和/或,
获取所述电子设备的移动方向和移动距离。
可选的,当所述第一移动位移包括所述第一旋转角度时,处理器在执行获取因所述第一移动位移使得后续待拍摄的视频帧中所述目标对象在所述显示界面中的移动像素信息时,具体用于:
依据所述第一旋转角度,确定所述目标对象在所述显示界面中的第二旋转角度;
和/或,
当所述第一移动位移包括所述移动方向和所述移动距离时,处理器在执行获取因所述第一移动位移使得后续待拍摄的视频帧中所述目标对象在所述显示界面中的移动像素信息时,具体用于:
依据所述移动方向以及所述移动距离,确定所述目标对象在所述显示界面中的移动像素的第一数目和移动像素方向。
可选的,当所述第一移动位移包括所述第一旋转角度时,处理器在执行基于所述移动像素信息,调整后续拍摄的视频帧中感兴趣区域在所述显示界面的位置时具体用于:
确定以基于前一视频帧中感兴趣区域确定出的第一位置为中心,将前一视频帧中感兴趣区域的边界旋转所述第二旋转角度;
和/或,
当所述第一移动位移包括移动方向和移动距离时,处理器在执行基于所述移动像素信息,调整所述感兴趣区域在所述显示界面的位置时,具体用于:
确定以基于所述感兴趣区域确定出的第一位置为中心,将所述感兴趣区域的边界的各像素移动沿所述移动像素方向移动所述第一数目个像素。
可选的,处理器在执行在展示视频帧的显示界面中确定感兴趣区域时,具体用于:
在所述显示界面中展示所述目标对象的位置处检测到预设触控手势时,生成包含所述目标对象的感兴趣区域。
最后,还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下,在其它实施例中实现。因此,本申请将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (10)
1.一种图像录制方法,其特征在于,应用于电子设备,包括:
在展示视频帧的显示界面中确定感兴趣区域,所述感兴趣区域中包含目标对象;
获取所述电子设备的第一移动位移;
获取因所述第一移动位移使得后续待拍摄的视频帧中所述目标对象在所述显示界面中的移动像素信息;
基于所述移动像素信息,调整后续拍摄的视频帧中所述感兴趣区域在所述显示界面的位置,使得后续拍摄的视频帧中感兴趣区域包含所述目标对象。
2.根据权利要求1所述图像录制方法,其特征在于,还包括:
基于各视频帧中位于感兴趣区域的图像,生成录制影像。
3.根据权利要求1所述图像录制方法,其特征在于,所述获取因所述第一移动位移使得后续待拍摄的视频帧中所述目标对象在所述显示界面中的移动像素信息包括:
从预先存储的各移动位移对应的移动像素信息中,获取所述第一移动位移对应的移动像素信息。
4.根据权利要求1所述图像录制方法,其特征在于,所述获取因所述第一移动位移使得后续待拍摄的视频帧中所述目标对象在所述显示界面中的移动像素信息包括:
依据已经拍摄的多个视频帧中所述目标对象的位置,确定所述目标对象在所述显示界面中的移动趋势;
基于所述第一移动位移以及所述移动趋势,确定后续待拍摄的视频帧中所述目标对象在所述显示界面的所述移动像素信息。
5.根据权利要求4所述图像录制方法,其特征在于,所述移动趋势包括:移动速度,所述基于所述第一移动位移以及所述移动趋势,确定后续待拍摄的视频帧中所述目标对象在所述显示界面的所述移动像素信息包括:
依据所述移动速度,确定在后续待拍摄的视频帧中所述目标对象在所述显示界面中的第二移动位移;
依据所述第一移动位移以及所述第二移动位移,确定在后续待拍摄的视频帧中所述目标对象相对于所述显示界面的所述移动像素信息。
6.根据权利要求1至5任一所述图像录制方法,其特征在于,所述获取所述电子设备的第一移动位移包括:
获取所述电子设备的第一旋转角度;
和/或,
获取所述电子设备的移动方向和移动距离。
7.根据权利要求6所述图像录制方法,其特征在于,
当所述第一移动位移包括所述第一旋转角度时,所述获取因所述第一移动位移使得后续待拍摄的视频帧中所述目标对象在所述显示界面中的移动像素信息包括:
依据所述第一旋转角度,确定所述目标对象在所述显示界面中的第二旋转角度;
和/或,
当所述第一移动位移包括所述移动方向和所述移动距离时,所述获取因所述第一移动位移使得后续待拍摄的视频帧中所述目标对象在所述显示界面中的移动像素信息包括:
依据所述移动方向以及所述移动距离,确定所述目标对象在所述显示界面中的移动像素的第一数目和移动像素方向。
8.根据权利要求7所述图像录制方法,其特征在于,
当所述第一移动位移包括所述第一旋转角度,所述基于所述移动像素信息,调整后续拍摄的视频帧中感兴趣区域在所述显示界面的位置包括:
确定以基于前一视频帧中感兴趣区域确定出的第一位置为中心,将前一视频帧中感兴趣区域的边界旋转所述第二旋转角度;
和/或,
当所述第一移动位移包括移动方向和移动距离时,所述基于所述移动像素信息,调整所述感兴趣区域在所述显示界面的位置包括:
确定以基于所述感兴趣区域确定出的第一位置为中心,将所述感兴趣区域的边界的各像素移动沿所述移动像素方向移动所述第一数目个像素。
9.根据权利要求1所述图像录制方法,其特征在于,所述在展示视频帧的显示界面中确定感兴趣区域包括:
在所述显示界面中展示所述目标对象的位置处检测到预设触控手势时,生成包含所述目标对象的感兴趣区域。
10.一种电子设备,其特征在于,包括:
摄像头,用于拍摄影像,以获得组成所述影像的各视频帧;
显示器,用于显示显示界面,所述显示界面展示有所述视频帧;
存储器,用于存储程序;
处理器,用于执行所述程序,所述程序具体用于:
在展示视频帧的显示界面中确定感兴趣区域,所述感兴趣区域中包含目标对象;
获取所述电子设备的第一移动位移;
获取因所述第一移动位移使得后续待拍摄的视频帧中所述目标对象在所述显示界面中的移动像素信息;
基于所述移动像素信息,调整后续拍摄的视频帧中所述感兴趣区域在所述显示界面的位置,使得后续拍摄的视频帧中感兴趣区域包含所述目标对象。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710517140.XA CN107404615B (zh) | 2017-06-29 | 2017-06-29 | 图像录制方法及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710517140.XA CN107404615B (zh) | 2017-06-29 | 2017-06-29 | 图像录制方法及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107404615A true CN107404615A (zh) | 2017-11-28 |
CN107404615B CN107404615B (zh) | 2020-08-25 |
Family
ID=60404511
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710517140.XA Active CN107404615B (zh) | 2017-06-29 | 2017-06-29 | 图像录制方法及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107404615B (zh) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108230362A (zh) * | 2017-12-29 | 2018-06-29 | 北京视觉世界科技有限公司 | 环境监控方法、装置、电子设备和存储介质 |
WO2019128275A1 (zh) * | 2017-12-31 | 2019-07-04 | 深圳市道通智能航空技术有限公司 | 一种拍摄控制方法、装置及飞行器 |
CN110662106A (zh) * | 2019-09-18 | 2020-01-07 | 浙江大华技术股份有限公司 | 一种录像回放的方法及装置 |
CN111212222A (zh) * | 2020-01-09 | 2020-05-29 | Oppo广东移动通信有限公司 | 图像处理方法、装置、电子装置及存储介质 |
CN111754544A (zh) * | 2019-03-29 | 2020-10-09 | 杭州海康威视数字技术股份有限公司 | 一种视频帧融合方法、装置、电子设备 |
CN113766133A (zh) * | 2021-09-17 | 2021-12-07 | 维沃移动通信有限公司 | 视频录制方法及装置 |
WO2022001733A1 (zh) * | 2020-06-30 | 2022-01-06 | 中兴通讯股份有限公司 | 一种拍摄对象的显示方法及装置、存储介质、终端 |
WO2022194158A1 (zh) * | 2021-03-15 | 2022-09-22 | 北京字跳网络技术有限公司 | 一种目标跟踪方法、装置、设备及介质 |
Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101072301A (zh) * | 2006-05-12 | 2007-11-14 | 富士胶片株式会社 | 显示面部检测框的方法、显示字符信息的方法和摄像设备 |
CN102131076A (zh) * | 2011-01-19 | 2011-07-20 | 中兴通讯股份有限公司 | 视频监控方法及监控终端 |
CN102568000A (zh) * | 2010-12-31 | 2012-07-11 | 华晶科技股份有限公司 | 多画面中物体移动的追踪方法 |
CN104202556A (zh) * | 2014-09-24 | 2014-12-10 | 北京智谷睿拓技术服务有限公司 | 信息获取方法、信息获取装置及用户设备 |
WO2015015195A1 (en) * | 2013-07-31 | 2015-02-05 | Mbda Uk Limited | Image processing |
CN104769939A (zh) * | 2012-11-14 | 2015-07-08 | 松下知识产权经营株式会社 | 视频监视*** |
US20150326835A1 (en) * | 2011-02-28 | 2015-11-12 | AI Cure Technologies, Inc. | Method and system for determining proper positioning of an object |
CN105957110A (zh) * | 2016-06-29 | 2016-09-21 | 上海小蚁科技有限公司 | 用于检测对象的设备和方法 |
CN105967038A (zh) * | 2016-06-13 | 2016-09-28 | 广州广日电梯工业有限公司 | 基于图像识别算法保护小孩安全的扶梯防护*** |
CN105989608A (zh) * | 2016-04-25 | 2016-10-05 | 北京光年无限科技有限公司 | 一种面向智能机器人的视觉捕捉方法及装置 |
CN106161940A (zh) * | 2016-07-29 | 2016-11-23 | 维沃移动通信有限公司 | 一种图像处理方法及移动终端 |
CN106530322A (zh) * | 2016-11-25 | 2017-03-22 | 天津大学 | 抖动视频中目标跟踪的方法 |
CN106791710A (zh) * | 2017-02-10 | 2017-05-31 | 北京地平线信息技术有限公司 | 目标检测方法、装置和电子设备 |
WO2017104627A1 (ja) * | 2015-12-18 | 2017-06-22 | オリンパス株式会社 | 超音波観測装置、超音波観測装置の作動方法および超音波観測装置の作動プログラム |
-
2017
- 2017-06-29 CN CN201710517140.XA patent/CN107404615B/zh active Active
Patent Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101072301A (zh) * | 2006-05-12 | 2007-11-14 | 富士胶片株式会社 | 显示面部检测框的方法、显示字符信息的方法和摄像设备 |
CN102568000A (zh) * | 2010-12-31 | 2012-07-11 | 华晶科技股份有限公司 | 多画面中物体移动的追踪方法 |
CN102131076A (zh) * | 2011-01-19 | 2011-07-20 | 中兴通讯股份有限公司 | 视频监控方法及监控终端 |
US20170094178A1 (en) * | 2011-02-28 | 2017-03-30 | Aic Innovations Group, Inc. | Method and system for determining proper positioning of an object |
US20150326835A1 (en) * | 2011-02-28 | 2015-11-12 | AI Cure Technologies, Inc. | Method and system for determining proper positioning of an object |
CN104769939A (zh) * | 2012-11-14 | 2015-07-08 | 松下知识产权经营株式会社 | 视频监视*** |
WO2015015195A1 (en) * | 2013-07-31 | 2015-02-05 | Mbda Uk Limited | Image processing |
CN104202556A (zh) * | 2014-09-24 | 2014-12-10 | 北京智谷睿拓技术服务有限公司 | 信息获取方法、信息获取装置及用户设备 |
WO2017104627A1 (ja) * | 2015-12-18 | 2017-06-22 | オリンパス株式会社 | 超音波観測装置、超音波観測装置の作動方法および超音波観測装置の作動プログラム |
CN105989608A (zh) * | 2016-04-25 | 2016-10-05 | 北京光年无限科技有限公司 | 一种面向智能机器人的视觉捕捉方法及装置 |
CN105967038A (zh) * | 2016-06-13 | 2016-09-28 | 广州广日电梯工业有限公司 | 基于图像识别算法保护小孩安全的扶梯防护*** |
CN105957110A (zh) * | 2016-06-29 | 2016-09-21 | 上海小蚁科技有限公司 | 用于检测对象的设备和方法 |
CN106161940A (zh) * | 2016-07-29 | 2016-11-23 | 维沃移动通信有限公司 | 一种图像处理方法及移动终端 |
CN106530322A (zh) * | 2016-11-25 | 2017-03-22 | 天津大学 | 抖动视频中目标跟踪的方法 |
CN106791710A (zh) * | 2017-02-10 | 2017-05-31 | 北京地平线信息技术有限公司 | 目标检测方法、装置和电子设备 |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108230362A (zh) * | 2017-12-29 | 2018-06-29 | 北京视觉世界科技有限公司 | 环境监控方法、装置、电子设备和存储介质 |
WO2019128275A1 (zh) * | 2017-12-31 | 2019-07-04 | 深圳市道通智能航空技术有限公司 | 一种拍摄控制方法、装置及飞行器 |
CN111754544A (zh) * | 2019-03-29 | 2020-10-09 | 杭州海康威视数字技术股份有限公司 | 一种视频帧融合方法、装置、电子设备 |
CN111754544B (zh) * | 2019-03-29 | 2023-09-05 | 杭州海康威视数字技术股份有限公司 | 一种视频帧融合方法、装置、电子设备 |
CN110662106A (zh) * | 2019-09-18 | 2020-01-07 | 浙江大华技术股份有限公司 | 一种录像回放的方法及装置 |
CN110662106B (zh) * | 2019-09-18 | 2021-08-27 | 浙江大华技术股份有限公司 | 一种录像回放的方法及装置 |
CN111212222A (zh) * | 2020-01-09 | 2020-05-29 | Oppo广东移动通信有限公司 | 图像处理方法、装置、电子装置及存储介质 |
WO2021139764A1 (zh) * | 2020-01-09 | 2021-07-15 | Oppo广东移动通信有限公司 | 图像处理方法、装置、电子装置及存储介质 |
WO2022001733A1 (zh) * | 2020-06-30 | 2022-01-06 | 中兴通讯股份有限公司 | 一种拍摄对象的显示方法及装置、存储介质、终端 |
WO2022194158A1 (zh) * | 2021-03-15 | 2022-09-22 | 北京字跳网络技术有限公司 | 一种目标跟踪方法、装置、设备及介质 |
CN113766133A (zh) * | 2021-09-17 | 2021-12-07 | 维沃移动通信有限公司 | 视频录制方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN107404615B (zh) | 2020-08-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107404615A (zh) | 图像录制方法及电子设备 | |
JP6768156B2 (ja) | 仮想的に拡張された視覚的同時位置特定及びマッピングのシステム及び方法 | |
JP5659304B2 (ja) | 画像生成装置および画像生成方法 | |
US9947108B1 (en) | Method and system for automatic detection and tracking of moving objects in panoramic video | |
JP5659305B2 (ja) | 画像生成装置および画像生成方法 | |
JP5769813B2 (ja) | 画像生成装置および画像生成方法 | |
CN109313799B (zh) | 图像处理方法及设备 | |
JP5865388B2 (ja) | 画像生成装置および画像生成方法 | |
US10404915B1 (en) | Method and system for panoramic video image stabilization | |
CN106780550B (zh) | 一种目标跟踪方法及电子设备 | |
US20130201182A1 (en) | Image display apparatus, imaging apparatus, image display method, control method for imaging apparatus, and program | |
CN104184985B (zh) | 图像获取的方法及装置 | |
CN1969313A (zh) | 图像显示***、图像显示方法以及图像显示程序 | |
CN108076281A (zh) | 一种自动聚焦方法及ptz摄像机 | |
CN114339102B (zh) | 一种录像方法及设备 | |
US20210112194A1 (en) | Method and device for taking group photo | |
WO2017112800A1 (en) | Macro image stabilization method, system and devices | |
WO2021146418A1 (en) | Structuring visual data | |
CN103577789A (zh) | 检测方法和装置 | |
CN113194253B (zh) | 去除图像反光的拍摄方法、装置和电子设备 | |
EP4090000A1 (en) | Method and device for image processing, electronic device, and storage medium | |
CN104469170A (zh) | 双目摄像装置、图像处理方法及装置 | |
CN112207821A (zh) | 视觉机器人的目标搜寻方法及机器人 | |
CN103617631B (zh) | 一种基于中心检测的跟踪方法 | |
Chew et al. | Panorama stitching using overlap area weighted image plane projection and dynamic programming for visual localization |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |