CN115761249A - 一种图像处理方法、***、电子设备及计算机程序产品 - Google Patents
一种图像处理方法、***、电子设备及计算机程序产品 Download PDFInfo
- Publication number
- CN115761249A CN115761249A CN202211700763.8A CN202211700763A CN115761249A CN 115761249 A CN115761249 A CN 115761249A CN 202211700763 A CN202211700763 A CN 202211700763A CN 115761249 A CN115761249 A CN 115761249A
- Authority
- CN
- China
- Prior art keywords
- data
- image
- processing
- forming
- target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 23
- 238000004590 computer program Methods 0.000 title claims abstract description 15
- 238000012545 processing Methods 0.000 claims abstract description 86
- 238000001914 filtration Methods 0.000 claims description 26
- 238000000034 method Methods 0.000 claims description 14
- 238000003384 imaging method Methods 0.000 claims description 4
- 238000005516 engineering process Methods 0.000 abstract description 4
- 230000008859 change Effects 0.000 description 16
- 230000006870 function Effects 0.000 description 10
- 210000003128 head Anatomy 0.000 description 10
- 238000010586 diagram Methods 0.000 description 9
- 230000033001 locomotion Effects 0.000 description 8
- 230000000007 visual effect Effects 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 230000035945 sensitivity Effects 0.000 description 4
- 238000001514 detection method Methods 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 239000000835 fiber Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000001902 propagating effect Effects 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- RYGMFSIKBFXOCR-UHFFFAOYSA-N Copper Chemical compound [Cu] RYGMFSIKBFXOCR-UHFFFAOYSA-N 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 210000000988 bone and bone Anatomy 0.000 description 1
- 229910052802 copper Inorganic materials 0.000 description 1
- 239000010949 copper Substances 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000004886 head movement Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000004148 unit process Methods 0.000 description 1
Images
Classifications
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Image Processing (AREA)
Abstract
本发明涉及图像处理技术领域,具体涉及一种图像处理方法、***、电子设备及计算机程序产品。其中一种图像处理方法包括:获取第一采集图像和第二采集图像,根据所述第一采集图像形成特征数据;于所述特征数据中获取目标数据,根据所述目标数据获取第一参考数据;对所述第一参考数据做处理以形成第一处理数据,根据所述第一处理数据调整所述第二采集图像以形成目标图像输出。
Description
技术领域
本发明涉及图像处理技术领域,具体涉及一种图像处理方法、***、电子设备及计算机程序产品。
背景技术
随着科技的发展,屏幕的尺寸已经越来越大,在很多重要或者公开场合通常会采用大屏幕做展示或演讲,现有的大屏幕也带有追踪功能,例如以主讲人的视角作为追踪目标,根据主讲人的视角调整当前屏幕的显示内容,但是由于主讲人通常处于非静止状态,例如主讲人的头部动作,身体动作的调整均会导致视角发生变化,追踪装置根据视角变化一直在调整显示内容,其导致的结果就是显示画面一直处于抖动状态,进而大大降低了展示效果,现有技术中,有为了降低抖动而调整追踪的阈值,例如当用户的视角变化仅有2°的状态下,图像不做调整,但用户的视角变化大于2°的状态下才根据视角做变化调整,此种方式虽然降低了抖动的产生,但是同时也降低了显示内容的流畅度。例如当视角发生大于2°的变化时,显示的内容从之前的画面直接调整为切换至2°视角的画面,其在全景显示过程容易造成主讲人和听众期待的图片与实际图片不相符的情况,大大降低了屏幕显示的视觉效果。
发明内容
针对现有技术的缺陷,本发明提供一种图像处理方法、***、电子设备及计算机程序产品,旨在提供现有技术中图像调整的流畅度,提高用户的体验感。
一方面,本发明提供一种图像处理方法,其中,包括:
获取第一采集图像和第二采集图像,根据所述第一采集图像形成特征数据;
于所述特征数据中获取目标数据,根据所述目标数据获取第一参考数据;
对所述第一参考数据做处理以形成第一处理数据,根据所述第一处理数据调整所述第二采集图像以形成目标图像输出。
优选地,上述的一种图像处理方法,其中,获取第一采集图像和第二采集图像,根据所述第一采集图像形成特征数据具体包括:
通过双目相机成像形成所述第一采集图像;所述第二采集图像为显示图像;
对所述第一采集图像做识别处理以形成关键点和关键数据;
根据所述关键点和/或所述关键数据形成所述特征数据。
优选地,上述的一种图像处理方法,其中,于所述特征数据中获取目标数据,根据所述目标数据获取第一参考数据具体包括:
于所述特征数据中获取预定的特征关键点;
根据所述特征关键点计算形成第一位置信息组;
对所述第一位置信息组做滤波处理以形成所述第一参考数据。
优选地,上述的一种图像处理方法,其中,对所述第一参考数据做处理以形成第一处理数据,根据所述第一处理数据调整所述第二采集图像以形成目标图像输出具体包括:
根据所述第一参考数据形成第一处理数据;
根据第一处理数据形成控制系数,根据所述控制系数对所述第二采集图像做处理以形成所述目标图像。
另一方面,本发明提供一种图像处理***,其中,包括:
采集单元,获取第一采集图像和第二采集图像,根据所述第一采集图像形成特征数据;
第一参考数据形成单元,于所述特征数据中获取目标数据,根据所述目标数据获取第一参考数据;
目标图像形成单元,对所述第一参考数据做处理以形成第一处理数据,根据所述第一处理数据调整所述第二采集图像以形成目标图像输出。
优选地,上述的一种图像处理***,其中,所述第一参考数据形成单元具体包括:
特征关键点形成装置,于所述特征数据中获取预定的特征关键点;
第一参考数据形成装置,根据所述特征关键点计算形成第一位置信息组;对所述第一位置信息组做滤波处理以形成所述第一参考数据。
优选地,上述的一种图像处理***,其中,所述目标图像形成单元具体包括:
第一处理数据形成装置,根据所述第一参考数据形成第一处理数据;
目标图像形成装置,根据第一处理数据形成控制系数,根据所述控制系数对所述第二采集图像做处理以形成所述目标图像。
再一方面,本发明再提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现上述任一项所述的一种图像处理方法。
最后,本发明再提供一种计算机程序产品,其中,包括计算机可读代码,或者承载有计算机可读代码的可读存储介质,当计算机可读代码在电子设备的处理器中运行时,所述电子设备中的处理器执行用于实现上述任一项所述的一种图像处理方法。
与现有技术相比,本发明的有益效果是:
本申请中,通过对关键特征点的数据做低通滤波处理,并以低通滤波处理后的所述第一参考数据形成第一处理数据或者控制系数对第二采集图像做调整,对关键特征点做低通滤波处理过程中,一方面抑制了关键特征点中的高频部分(即变化幅度突然增大的部分被定义为高频部分),同时也保障了整个图像中的灵敏度(即对于持续的变化或缓慢变化的视角变换予以捕捉以不失图像的灵敏度)。
附图说明
图1为本发明实施例提供一种图像处理方法的流程示意图;
图2为本发明实施例提供一种图像处理方法的流程示意图;
图3为本发明实施例提供一种图像处理方法的流程示意图;
图4为本发明实施例提供一种电子设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
如图1所示,一方面,本发明提供一种图像处理方法,其中,包括:
步骤S110、获取第一采集图像和第二采集图像,根据所述第一采集图像形成特征数据;其中,第一采集图像为双目相机成像形成,第二采集图像为当前立体视频流输出的信息,当前屏幕中显示的信息可以同时包含第一采集图像信息和第二采集图像信息。也可以仅显示第二图像采集信息。示意性地,在一个共享会议场合下,当前的显示***(显示大屏幕)中播放VR图像信息,显示***前站立有若干人听众和一个主讲人,主讲人的视角即为当前显示***中VR图像的显示视角,第一采集图像可理解为主讲人的图像信息,例如站立姿势、运动轨迹等等,第二采集图像为VR视频流图像。需要说明的VR视频流不等同于显示***当前显示的内容。视频流可包含当前显示***中未显示的图像数据信息。
步骤S120、于所述特征数据中获取目标数据,根据所述目标数据获取第一参考数据;所述特征数据可由第一采集图像中的特征部分或特征点形成,也可对第一采集图像做AI识别形成,目标数据的获取可由现有技术完成,此处不做赘述。根据所述目标数据获取第一参考数据;其中第一参考数据以第一采集图像中相对运动比较少的区域作为参考区域。例如主讲人在演示过程中,身体动作变化较大或手臂动作变化较大,但是其头部的动作变化相对较小,则以头部区域作为目标数据。示意性地,也可以其他区域作为目标数据。简言之,目标数据以动作变化相对较小区域对应的部分作为目标数据的来源。
步骤S130、对所述第一参考数据做处理以形成第一处理数据,根据所述第一处理数据调整所述第二采集图像以形成目标图像输出。第一参数数据的变化率作为更新整个第二采集图像数据的控制参数。
本申请中,以运动变化较小区域的作为参考区域,根据该区域的运动轨迹形成控制参数更新显示***显示的立体图像数据。一方面降低了图像的抖动,同时保证了图像更新的流畅感。例如当主讲人身体处于变化状态,但是头部变化几乎没有,此时认定当前的视角不发生变化,当用户的头部发生的变化,即使主讲人的身体未有变化,此时同样调整立体显示图像的视角。
作为进一步优选实施方案,所述的一种图像处理方法,其中,包括:步骤S110、获取第一采集图像和第二采集图像,根据所述第一采集图像形成特征数据;具体包括:
步骤S1101、通过双目相机成像形成所述第一采集图像;所述第二采集图像为显示图像,或者当前显示设备即将显示的画面数据;所述第一采集图像为包含有立体图像所需要的数据。例如双目相机可为Zed2i双目相机。Zed2i双目相机自带2个RGB高清摄像头,可以获取包含有立体图像所需要的数据。
如图2所示,步骤S1102、对所述第一采集图像做识别处理以形成关键点和关键数据;示意性地,关键点可为人体的头部、眼镜、手部、腰部、脚部等,例如图2所示的关键圆点,关键数据可理解为人体的躯干数据。
步骤S1103、根据所述关键点和/或所述关键数据形成所述特征数据。例如在一些应用场合下,关键点数据可以形成特征数据,如以眼睛作为关键点形成特征数据,在另外一些应用场合下,以关键数据作为应用场合,例如坐姿状态下以腿部躯干的数据作为关键数据。具体形成所述特征数据的来源此处不做赘述,可以根据实际应用选择合适的数据来源。
作为进一步优选实施方案,上述的一种图像处理方法,其中,步骤S120、于所述特征数据中获取目标数据,根据所述目标数据获取第一参考数据具体包括:
如图3所示,步骤S1201、于所述特征数据中获取预定的特征关键点;其中特征关键点可由用户自定义,例如在有些应用场合中,特征关键定可为头部区域。
步骤S1202、根据所述特征关键点计算形成第一位置信息组;第一位置信息组中包含当前检测时间内所述特征关键的运动轨迹图像,例如以3秒钟作为检测时间,则第一位置信息组中包含特征关键点于检测时间内的所有轨迹信息,该轨迹信息可以是变化的轨迹,也可以是不变的轨迹,例如当3秒时间内用户未做任何变化,则此时的轨迹信息即为不变的轨迹信息,当3秒时间内用户的姿态或姿势发生了变化,则此时的轨迹为变化的轨迹。第一位置信息组中的每个位置信息均为该关键特征点在对应时刻的三维坐标信息。
步骤S1203、对所述第一位置信息组做滤波处理以形成所述第一参考数据。具体的,根据所述第一位置信息组的信息形成一第一位置信息波形图,对所述第一位置信息波形图做滤波处理,滤波处理旨在滤除抖动数据,滤波处理可采用低通滤波算法处理。例如加权平均滤波、惯性滤波、1euro滤波等等方式处理完成。根据低通滤波处理后的结果形成所述第一参考数据,所述第一参考数据为特征关键点的移动速度的系数。
作为进一步优选实施方案,所述的一种图像处理方法,步骤S130、对所述第一参考数据做处理以形成第一处理数据,根据所述第一处理数据调整所述第二采集图像以形成目标图像输出具体包括:
步骤S1301、根据所述第一参考数据形成第一处理数据,所述第一处理数据为滤波权重值;由于第一参考数据为特征关键点的移动速度的系数,该移动速度的系数为经过滤波处理(也可以理解为防抖处理)形成,以该数据作为参考数据形成第一处理数据为滤波权重值。示意性地,第一处理数据可采用一阶滞后滤波法形成,例如:
继续以头部处理为例,
Yt=a*Xt+(1-a)*Yt-1;
b=(|Yt-Yt-1|)/T
其中,X:为基于时刻t的全身骨点计算得到的头部坐标,
Yt-1为上一时刻滤波之后的头部坐标,
Yt为当前时刻滤波之后的头部坐标;
T为当前时刻与上一时刻之间的时间差;
a为滤波系数,取值范围为[0,1];a越趋近1,滤波效果越弱;a越趋近0,滤波作用越大;
b为头部坐标移动速度的系数。
步骤S1302、根据第一处理数据形成控制系数,根据所述控制系数对所述第二采集图像做处理以形成所述目标图像,即根据该控制系数对第二采集图像做处理。
本申请中,通过对关键特征点的数据做低通滤波处理,并以低通滤波处理后的所述第一参考数据形成第一处理数据或者控制系数对第二采集图像做调整,对关键特征点做低通滤波处理过程中,一方面抑制了关键特征点中的高频部分(即变化幅度突然增大的部分被定义为高频部分),同时也保障了整个图像中的灵敏度(即对于持续的变化或缓慢变化的视角变换予以捕捉以不失图像的灵敏度)。
实施例二
本发明再提供一种图像处理***,其中,包括:
采集单元,获取第一采集图像和第二采集图像,根据所述第一采集图像形成特征数据;
第一参考数据形成单元,于所述特征数据中获取目标数据,根据所述目标数据获取第一参考数据;
目标图像形成单元,对所述第一参考数据做处理以形成第一处理数据,根据所述第一处理数据调整所述第二采集图像以形成目标图像输出。
优选地,上述的一种图像处理***,其中,所述第一参考数据形成单元具体包括:
特征关键点形成装置,于所述特征数据中获取预定的特征关键点;
第一参考数据形成装置,根据所述特征关键点计算形成第一位置信息组;对所述第一位置信息组做滤波处理以形成所述第一参考数据。
优选地,上述的一种图像处理***,其中,所述目标图像形成单元具体包括:
第一处理数据形成装置,根据所述第一参考数据形成第一处理数据;
目标图像形成装置,根据第一处理数据形成控制系数,根据所述控制系数对所述第二采集图像做处理以形成所述目标图像。
上述的一种图像处理***的工作原理、获取的有益效果与实施例一提供的一种图像处理方法的工作原理、有益效果相同,此处不做赘述。
实施例三
本申请实施例提供了一种电子设备,该电子设备中可集成本申请实施例提供的基于游戏运行环境的控制装置。图4是本申请实施例提供的一种电子设备的结构示意图。如图4所示,本实施例提供了一种电子设备400,其包括:一个或多个处理器420;存储装置410,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器420运行,使得所述一个或多个处理器420实现:
获取第一采集图像和第二采集图像,根据所述第一采集图像形成特征数据;
于所述特征数据中获取目标数据,根据所述目标数据获取第一参考数据;
对所述第一参考数据做处理以形成第一处理数据,根据所述第一处理数据调整所述第二采集图像以形成目标图像输出。
如图4所示,该电子设备400包括处理器420、存储装置410、输入装置430和输出装置440;电子设备中处理器420的数量可以是一个或多个,图4中以一个处理器420为例;电子设备中的处理器420、存储装置410、输入装置430和输出装置440可以通过总线或其他方式连接,图4中以通过总线450连接为例。
存储装置410作为一种计算机可读存储介质,可用于存储软件程序、计算机可运行程序以及模块单元,如本申请实施例中的基于游戏运行环境的控制方法对应的程序指令。
存储装置410可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作***、至少一个功能所需的应用程序;存储数据区可存储根据终端的使用所创建的数据等。此外,存储装置410可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中,存储装置410可进一步包括相对于处理器420远程设置的存储器,这些远程存储器可以通过网络连接。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置430可用于接收输入的数字、字符信息或语音信息,以及产生与电子设备的用户设置以及功能控制有关的键信号输入。输出装置440可包括显示屏、扬声器等设备。
实施例四
在一些实施例中,以上所描述的方法可以被实现为计算机程序产品。计算机程序产品可以包括计算机可读存储介质,其上载有用于执行本公开的各个方面的计算机可读程序指令。具体地:
获取第一采集图像和第二采集图像,根据所述第一采集图像形成特征数据;
于所述特征数据中获取目标数据,根据所述目标数据获取第一参考数据;
对所述第一参考数据做处理以形成第一处理数据,根据所述第一处理数据调整所述第二采集图像以形成目标图像输出。
上述的计算机可读存储介质可以是可以保持和存储由指令执行设备使用的指令的有形设备。计算机可读存储介质例如可以是――但不限于――电存储设备、磁存储设备、光存储设备、电磁存储设备、半导体存储设备或者上述的任意合适的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、静态随机存取存储器(SRAM)、便携式压缩盘只读存储器(CD-ROM)、数字多功能盘(DVD)、记忆棒、软盘、机械编码设备、例如其上存储有指令的打孔卡或凹槽内凸起结构、以及上述的任意合适的组合。这里所使用的计算机可读存储介质不被解释为瞬时信号本身,诸如无线电波或者其他自由传播的电磁波、通过波导或其他传输媒介传播的电磁波(例如,通过光纤电缆的光脉冲)、或者通过电线传输的电信号。
本文所描述的计算机可读程序指令可以从计算机可读存储介质下载到各个计算/处理设备,或者通过网络、例如因特网、局域网、广域网和/或无线网下载到外部计算机或外部存储设备。网络可以包括铜传输电缆、光纤传输、无线传输、路由器、防火墙、交换机、网关计算机和/或边缘服务器。每个计算/处理设备中的网络适配卡或者网络接口从网络接收计算机可读程序指令,并转发该计算机可读程序指令,以供存储在各个计算/处理设备中的计算机可读存储介质中。
用于执行本公开操作的计算机程序指令可以是汇编指令、指令集架构(ISA)指令、机器指令、机器相关指令、微代码、固件指令、状态设置数据、或者以一种或多种编程语言的任意组合编写的源代码或目标代码,所述编程语言包括面向对象的编程语言,以及常规的过程式编程语言。计算机可读程序指令可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络—包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。在一些实施例中,通过利用计算机可读程序指令的状态信息来个性化定制电子电路,例如可编程逻辑电路、现场可编程门阵列(FPGA)或可编程逻辑阵列(PLA),该电子电路可以执行计算机可读程序指令,从而实现本公开的各个方面。
这些计算机可读程序指令可以提供给通用计算机、专用计算机或其它可编程数据处理装置的处理单元,从而生产出一种机器,使得这些指令在通过计算机或其它可编程数据处理装置的处理单元执行时,产生了实现流程图和/或框图中的一个或多个方框中规定的功能/动作的装置。也可以把这些计算机可读程序指令存储在计算机可读存储介质中,这些指令使得计算机、可编程数据处理装置和/或其他设备以特定方式工作,从而,存储有指令的计算机可读介质则包括一个制造品,其包括实现流程图和/或框图中的一个或多个方框中规定的功能/动作的各个方面的指令。
也可以把计算机可读程序指令加载到计算机、其它可编程数据处理装置、或其它设备上,使得在计算机、其它可编程数据处理装置或其它设备上执行一系列操作步骤,以产生计算机实现的过程,从而使得在计算机、其它可编程数据处理装置、或其它设备上执行的指令实现流程图和/或框图中的一个或多个方框中规定的功能/动作。
附图中的流程图和框图显示了根据本公开的多个实施例的设备、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或指令的一部分,所述模块、程序段或指令的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的***来实现,或者可以用专用硬件与计算机指令的组合来实现。
以上已经描述了本公开的各实施例,上述说明是示例性的,并非穷尽性的,并且也不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情况下,对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择,旨在最好地解释各实施例的原理、实际应用或对市场中技术的技术改进,或者使本技术领域的其它普通技术人员能理解本文披露的各实施例。
Claims (9)
1.一种图像处理方法,其特征在于,包括:
获取第一采集图像和第二采集图像,根据所述第一采集图像形成特征数据;
于所述特征数据中获取目标数据,根据所述目标数据获取第一参考数据;
对所述第一参考数据做处理以形成第一处理数据,根据所述第一处理数据调整所述第二采集图像以形成目标图像输出。
2.根据权利要求1所述的一种图像处理方法,其特征在于,获取第一采集图像和第二采集图像,根据所述第一采集图像形成特征数据具体包括:
通过双目相机成像形成所述第一采集图像;所述第二采集图像为显示图像;
对所述第一采集图像做识别处理以形成关键点和关键数据;
根据所述关键点和/或所述关键数据形成所述特征数据。
3.根据权利要求2所述的一种图像处理方法,其特征在于,于所述特征数据中获取目标数据,根据所述目标数据获取第一参考数据具体包括:
于所述特征数据中获取预定的特征关键点;
根据所述特征关键点计算形成第一位置信息组;
对所述第一位置信息组做滤波处理以形成所述第一参考数据。
4.根据权利要求3所述的一种图像处理方法,其特征在于,对所述第一参考数据做处理以形成第一处理数据,根据所述第一处理数据调整所述第二采集图像以形成目标图像输出具体包括:
根据所述第一参考数据形成第一处理数据;
根据第一处理数据形成控制系数,根据所述控制系数对所述第二采集图像做处理以形成所述目标图像。
5.一种图像处理***,其特征在于,包括:
采集单元,获取第一采集图像和第二采集图像,根据所述第一采集图像形成特征数据;
第一参考数据形成单元,于所述特征数据中获取目标数据,根据所述目标数据获取第一参考数据;
目标图像形成单元,对所述第一参考数据做处理以形成第一处理数据,根据所述第一处理数据调整所述第二采集图像以形成目标图像输出。
6.根据权利要求5所述的一种图像处理***,其特征在于,所述第一参考数据形成单元具体包括:
特征关键点形成装置,于所述特征数据中获取预定的特征关键点;
第一参考数据形成装置,根据所述特征关键点计算形成第一位置信息组;对所述第一位置信息组做滤波处理以形成所述第一参考数据。
7.根据权利要求6所述的一种图像处理***,其特征在于,所述目标图像形成单元具体包括:
第一处理数据形成装置,根据所述第一参考数据形成第一处理数据;
目标图像形成装置,根据第一处理数据形成控制系数,根据所述控制系数对所述第二采集图像做处理以形成所述目标图像。
8.一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1-4任一项所述的一种图像处理方法。
9.一种计算机程序产品,其特征在于,包括计算机可读代码,或者承载有计算机可读代码的可读存储介质,当计算机可读代码在电子设备的处理器中运行时,所述电子设备中的处理器执行用于实现权利要求1-4任一项所述的一种图像处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211700763.8A CN115761249B (zh) | 2022-12-28 | 2022-12-28 | 一种图像处理方法、***、电子设备及计算机程序产品 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211700763.8A CN115761249B (zh) | 2022-12-28 | 2022-12-28 | 一种图像处理方法、***、电子设备及计算机程序产品 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN115761249A true CN115761249A (zh) | 2023-03-07 |
CN115761249B CN115761249B (zh) | 2024-02-23 |
Family
ID=85347861
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211700763.8A Active CN115761249B (zh) | 2022-12-28 | 2022-12-28 | 一种图像处理方法、***、电子设备及计算机程序产品 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115761249B (zh) |
Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101866215A (zh) * | 2010-04-20 | 2010-10-20 | 复旦大学 | 在视频监控中采用视线跟踪的人机交互装置和方法 |
CN106843456A (zh) * | 2016-08-16 | 2017-06-13 | 深圳超多维光电子有限公司 | 一种基于姿态追踪的显示方法、装置和虚拟现实设备 |
CN109683701A (zh) * | 2017-10-18 | 2019-04-26 | 深圳市掌网科技股份有限公司 | 基于视线跟踪的增强现实交互方法和装置 |
CN109828681A (zh) * | 2017-11-20 | 2019-05-31 | 深圳市Tcl高新技术开发有限公司 | 激光笔光流轨迹跟踪方法、投影设备及计算机可读存储介质 |
CN111263106A (zh) * | 2020-02-25 | 2020-06-09 | 厦门亿联网络技术股份有限公司 | 一种视频会议的画面追踪方法及装置 |
CN113411564A (zh) * | 2021-06-21 | 2021-09-17 | 纵深视觉科技(南京)有限责任公司 | 一种人眼跟踪参数的测量方法、装置、介质及*** |
CN113420678A (zh) * | 2021-06-25 | 2021-09-21 | 阿波罗智联(北京)科技有限公司 | 视线追踪方法、装置、设备、存储介质以及计算机程序产品 |
CN113467619A (zh) * | 2021-07-21 | 2021-10-01 | 腾讯科技(深圳)有限公司 | 画面显示方法、装置和存储介质及电子设备 |
CN113593351A (zh) * | 2021-09-27 | 2021-11-02 | 华中师范大学 | 一种立体综合教学场***及其工作方法 |
CN114020150A (zh) * | 2021-10-27 | 2022-02-08 | 纵深视觉科技(南京)有限责任公司 | 图像显示方法、装置、电子设备及介质 |
CN114797107A (zh) * | 2022-03-29 | 2022-07-29 | 米哈游科技(上海)有限公司 | 一种基于npc行为的随机处理方法、***、电子设备及计算机程序产品 |
CN115311163A (zh) * | 2022-08-15 | 2022-11-08 | 上海米哈游璃月科技有限公司 | 一种图像处理方法、基于晶体的图像处理方法 |
CN115471592A (zh) * | 2022-09-21 | 2022-12-13 | 上海米哈游天命科技有限公司 | 一种动态图像的处理方法、*** |
-
2022
- 2022-12-28 CN CN202211700763.8A patent/CN115761249B/zh active Active
Patent Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101866215A (zh) * | 2010-04-20 | 2010-10-20 | 复旦大学 | 在视频监控中采用视线跟踪的人机交互装置和方法 |
CN106843456A (zh) * | 2016-08-16 | 2017-06-13 | 深圳超多维光电子有限公司 | 一种基于姿态追踪的显示方法、装置和虚拟现实设备 |
CN109683701A (zh) * | 2017-10-18 | 2019-04-26 | 深圳市掌网科技股份有限公司 | 基于视线跟踪的增强现实交互方法和装置 |
CN109828681A (zh) * | 2017-11-20 | 2019-05-31 | 深圳市Tcl高新技术开发有限公司 | 激光笔光流轨迹跟踪方法、投影设备及计算机可读存储介质 |
CN111263106A (zh) * | 2020-02-25 | 2020-06-09 | 厦门亿联网络技术股份有限公司 | 一种视频会议的画面追踪方法及装置 |
CN113411564A (zh) * | 2021-06-21 | 2021-09-17 | 纵深视觉科技(南京)有限责任公司 | 一种人眼跟踪参数的测量方法、装置、介质及*** |
CN113420678A (zh) * | 2021-06-25 | 2021-09-21 | 阿波罗智联(北京)科技有限公司 | 视线追踪方法、装置、设备、存储介质以及计算机程序产品 |
CN113467619A (zh) * | 2021-07-21 | 2021-10-01 | 腾讯科技(深圳)有限公司 | 画面显示方法、装置和存储介质及电子设备 |
CN113593351A (zh) * | 2021-09-27 | 2021-11-02 | 华中师范大学 | 一种立体综合教学场***及其工作方法 |
CN114020150A (zh) * | 2021-10-27 | 2022-02-08 | 纵深视觉科技(南京)有限责任公司 | 图像显示方法、装置、电子设备及介质 |
CN114797107A (zh) * | 2022-03-29 | 2022-07-29 | 米哈游科技(上海)有限公司 | 一种基于npc行为的随机处理方法、***、电子设备及计算机程序产品 |
CN115311163A (zh) * | 2022-08-15 | 2022-11-08 | 上海米哈游璃月科技有限公司 | 一种图像处理方法、基于晶体的图像处理方法 |
CN115471592A (zh) * | 2022-09-21 | 2022-12-13 | 上海米哈游天命科技有限公司 | 一种动态图像的处理方法、*** |
Also Published As
Publication number | Publication date |
---|---|
CN115761249B (zh) | 2024-02-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109613984B (zh) | Vr直播中视频图像的处理方法、设备及*** | |
CN112492388B (zh) | 视频处理方法、装置、设备以及存储介质 | |
CN113467603B (zh) | 音频处理方法、装置、可读介质及电子设备 | |
CN111833461B (zh) | 一种图像特效的实现方法、装置、电子设备及存储介质 | |
CN110941332A (zh) | 表情驱动方法、装置、电子设备及存储介质 | |
CN110505406A (zh) | 背景虚化方法、装置、存储介质及终端 | |
CN109814710B (zh) | 数据处理方法、装置及虚拟现实设备 | |
CN114900625A (zh) | 虚拟现实空间的字幕渲染方法、装置、设备及介质 | |
CN113379896A (zh) | 三维重建方法及装置、电子设备和存储介质 | |
CN112837372A (zh) | 数据生成方法及装置、电子设备和存储介质 | |
CN109636917B (zh) | 三维模型的生成方法、装置、硬件装置 | |
CN111833459A (zh) | 一种图像处理方法、装置、电子设备及存储介质 | |
CN115761249B (zh) | 一种图像处理方法、***、电子设备及计算机程序产品 | |
CN106598247B (zh) | 基于虚拟现实的响应控制方法及装置 | |
CN112927718B (zh) | 感知周围环境的方法、装置、终端和存储介质 | |
JP2019074881A (ja) | 画像生成装置および画像生成方法 | |
US11868520B2 (en) | Rendering content | |
US10834382B2 (en) | Information processing apparatus, information processing method, and program | |
JP4544262B2 (ja) | 仮想現実空間共有システムおよび方法、並びに、情報処理装置および方法 | |
CN115272564B (zh) | 动作视频发送方法、装置、设备和介质 | |
CN112053450B (zh) | 文字的显示方法、装置、电子设备及存储介质 | |
CN117478931A (zh) | 信息显示方法、装置、电子设备及存储介质 | |
CN110896476B (zh) | 图像处理方法、装置及存储介质 | |
US10572761B1 (en) | Virtual reality system using super-resolution | |
CN117648045A (zh) | 畸变校正方法、设备、存储介质及程序产品 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |