CN113242383B - 显示设备及显示设备自动对焦成像的图像校准方法 - Google Patents

显示设备及显示设备自动对焦成像的图像校准方法 Download PDF

Info

Publication number
CN113242383B
CN113242383B CN202110266930.1A CN202110266930A CN113242383B CN 113242383 B CN113242383 B CN 113242383B CN 202110266930 A CN202110266930 A CN 202110266930A CN 113242383 B CN113242383 B CN 113242383B
Authority
CN
China
Prior art keywords
image
vertical distance
display
lens
motor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110266930.1A
Other languages
English (en)
Other versions
CN113242383A (zh
Inventor
韩忠峰
刘玉洁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hisense Visual Technology Co Ltd
Original Assignee
Hisense Visual Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hisense Visual Technology Co Ltd filed Critical Hisense Visual Technology Co Ltd
Priority to CN202110266930.1A priority Critical patent/CN113242383B/zh
Publication of CN113242383A publication Critical patent/CN113242383A/zh
Application granted granted Critical
Publication of CN113242383B publication Critical patent/CN113242383B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本申请提供一种显示设备以及显示设备自动对焦成像的图像校准方法。该显示设备自动对焦成像的校准方法包括获取镜头拍摄到的第一图像以及拍摄所述第一图像时所述镜头与所述图像传感器之间的第一垂直距离;当所述第一垂直距离小于参考垂直距离时,对所述第一图像在所述显示器上的显示位置进行校准,得到校准图像,所述校准图像在所述显示器的预设位置显示。本申请解决了摄像头在自动对焦过程中产生的图像显示位置变化引起的图像抖动问题。

Description

显示设备及显示设备自动对焦成像的图像校准方法
技术领域
本申请实施例涉及显示技术。更具体地讲,涉及一种显示设备以及显示设备自动对焦成像的图像校准方法。
背景技术
随着科学技术的发展,可以自动对焦的摄像头已经被广泛设置在各类显示设备上,成为人们普遍使用的摄像头。其中,自动对焦(Auto Focus)指的是利用物体光反射的原理,将反射的光被摄像头上的图像传感器,例如电荷耦合器件图像传感器(Charge CoupledDevice,简称CCD)接收,再通过计算机处理,带动电动对焦装置进行对焦。具体的,针对不同深度的景物,摄像头马达会推动摄像头镜头往前或往后移动,使景物的成像面恰好落在图像传感器的表面上。在自动对焦过程中,摄像头镜头和图像传感器之间的距离也会随着景物所处深度的不同不断变化。
但是在摄像头的自动对焦中,远近焦的变化会导致摄像头中的图像传感器所捕捉的景物图像在显示画面中发生抖动,这就会给拍摄造成很多不必要的麻烦。
因此,如何解决摄像头自动对焦过程中容易导致景物图像在显示画面发生显示抖动的问题,仍然是亟待解决的问题。
发明内容
本申请示例性的实施方式提供一种显示设备以及摄像头成像抖动的校准方法,以解决摄像头在自动对焦过程中景物图像在显示画面中发生显示抖动的问题。
第一方面,本申请实施例提供一种显示设备,包括:
显示器,被配置为显示图像;
摄像模组,被配置为采集图像,所述摄像模组包括镜头、马达和图像传感器,所述镜头用于拍摄图像,所述马达用于控制所述镜头移动,所述图像传感器用于将所述镜头捕捉到的图像转换为可由所述显示器显示的图像;
分别与所述显示器和所述摄像模组连接的控制器,所述控制器被配置为:
获取所述镜头拍摄到的第一图像以及拍摄所述第一图像时所述镜头与所述图像传感器之间的第一垂直距离;
当所述第一垂直距离小于参考垂直距离时,对所述第一图像在所述显示器上的显示位置进行校准,得到校准图像,所述校准图像在所述显示器的预设位置显示。
其中一个实施例中,当所述镜头与所述图像传感器之间的距离为所述参考垂直距离时,所述镜头拍摄到的参考图像在所述显示器的所述预设位置显示,所述控制器具体被配置为:
根据所述参考图像的尺寸、第一数据和所述参考垂直距离确定所述第一图像的第一像素高度和第一像素宽度,所述第一数据至少包括拍摄所述第一图像时驱动所述摄像模组中马达移动的第一电流值,所述马达在第一电流的驱动下移动,当所述马达处于不同位置时,所述摄像模组拍摄得到不同的图像;
根据所述第一像素高度和所述第一像素宽度对所述第一图像进行校准,得到所述校准图像。
其中一个实施例中,所述第一数据还包括所述镜头与所述图像传感器之间的初始垂直距离、所述马达的弹力系数,其中所述初始垂直距离为所述摄像模组未采集图像时所述镜头与所述图像传感器之间的垂直距离。
其中一个实施例中,所述控制器具体被配置为:
根据公式PL2=(H0+k1I)×PL1/H确定所述第一像素高度;
其中,PL2代表所述第一像素高度,H0代表所述初始垂直距离,k1代表所述马达的弹力系数,I代表所述第一电流值,PL1代表所述参考像素高度,H代表所述参考垂直距离。
其中一个实施例中,所述控制器具体被配置为:
根据公式Pw2=(H0+k1I)×Pw1/H确定所述第一像素高度;
其中,Pw2代表所述第一像素宽度,H0代表所述初始垂直距离,k1代表所述马达的弹力系数,I代表所述第一电流值,Pw1代表所述参考像素宽度,H代表所述参考垂直距离。
其中一个实施例中,所述控制器具体被配置为:
根据公式I=k2Nadc确定所述第一电流值;
其中,I代表所述第一电流值,Nadc代表拍摄所述第一图像时,通过所述控制器中模数转换模块的电流值,k2代表所述控制器和所述模数转换模块之间的电流转换系数。
另一方面,本申请提供一种显示设备自动对焦成像的图像校准方法,应用于显示设备,所述方法包括:
获取镜头拍摄到的第一图像以及拍摄所述第一图像时所述镜头与所述图像传感器之间的第一垂直距离;
当所述第一垂直距离小于参考垂直距离时,对所述第一图像在所述显示器上的显示位置进行校准,得到校准图像,所述校准图像在所述显示器的预设位置显示。
其中一个实施例中,当所述镜头与所述图像传感器之间的距离为所述参考垂直距离时,所述镜头拍摄到的参考图像的在所述显示器的所述预设位置显示,所述当所述第一垂直距离小于参考垂直距离时,对所述第一图像在所述显示器上的显示位置进行校准包括:
根据所述参考图像的尺寸、第一数据和所述参考垂直距离确定所述第一图像的第一像素高度和第一像素宽度,所述第一数据至少包括拍摄所述第一图像时驱动所述摄像模组中马达移动的第一电流值,所述马达在第一电流的驱动下移动,当所述马达处于不同位置时,所述摄像模组拍摄得到不同的图像;
根据所述第一像素高度和所述第一像素宽度对所述第一图像进行校准,得到所述校准图像。
其中一个实施例中,所述第一数据还包括所述镜头与所述图像传感器之间的初始垂直距离、所述马达的弹力系数,其中所述初始垂直距离为所述摄像模组未采集图像时所述镜头与所述图像传感器之间的垂直距离。
其中一个实施例中,所述根据第一数据、所述参考像素高度和所述参考垂直距离确定所述第一图像的第一像素高度包括:
根据公式PL2=(H0+k1I)×PL1/H确定所述第一像素高度;
其中,PL2代表所述第一像素高度,H0代表所述初始垂直距离,k1代表所述马达的弹力系数,I代表所述第一电流值,PL1代表所述参考像素高度,H代表所述参考垂直距离。
其中一个实施例中,所述根据所述第一数据、所述参考像素宽度和所述参考垂直距离确定所述第一图像的第一像素宽度包括:
根据公式Pw2=(H0+k1I)×Pw1/H确定所述第一像素高度;
其中,Pw2代表所述第一像素宽度,H0代表所述初始垂直距离,k1代表所述马达的弹力系数,I代表所述第一电流值,Pw1代表所述参考像素宽度,H代表所述参考垂直距离。
其中一个实施例中,还包括:
根据公式I=k2Nadc确定所述第一电流值;
其中,I代表所述第一电流值,Nadc代表拍摄所述第一图像时,通过所述控制器中模数转换模块的电流值,k2代表所述控制器和所述模数转换模块之间的电流转换系数。
另一方面,本申请实施例提供一种显示设备自动对焦成像的图像校准装置,应用于显示设备,包括:
获取模块,用于获取镜头拍摄到的第一图像以及拍摄所述第一图像时所述镜头与所述图像传感器之间的第一垂直距离;
处理模块,用于当当所述第一垂直距离小于参考垂直距离时,对所述第一图像在所述显示器上的显示位置进行校准,得到校准图像,所述校准图像在所述显示器的预设位置显示。
另一方面,本申请实施例还提供一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机程序,当计算机程序被控制器执行时实现如上任一方法实施例所述的方法。
另一方面,本申请实施例还提供一种显示***,包括如第一方面所述的显示设备和如第二方面所述的手柄。
另一方面,本申请实施例提供一种运行指令的芯片,芯片用于执行如上所述的方法。
另一方面,本申请实施例提供一种计算机程序产品,该计算机程序产品包括计算机程序,该计算机程序存储在计算机可读存储介质中,至少一个控制器可以从该计算机可读存储介质中读取计算机程序,该至少一个控制器执行所述计算机程序时可实现如上任一方法实施例所述的方法。
本申请提供的该显示设备在获取到该第一图像后,获取拍摄该第一图像时该镜头与该图像传感器之间的第一垂直距离,当该第一垂直距离小于该参考垂直距离时,确定该第一图像的第一像素高度和第一像素宽度。在确定该第一图像的第一像素高度和第一像素宽度后,又基于该第一像素高度和该第一像素宽度对该第一图像进行处理后得到该校准图像。得到的该校准图像在该显示器的预设位置显示,此时,该校准图像能够稳定显示于该显示器。因此,本申请提供的该显示设备可以避免现有技术中存在的拍摄过程自动对焦导致的图像显示抖动情况的发生。
附图说明
为了更清楚地说明本申请实施例或相关技术中的实施方式,下面将对实施例或相关技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,还可以根据这些附图获得其他的附图。
图1中示例性示出了根据一些实施例的显示设备与控制装置之间操作场景的示意图。
图2中示例性示出了根据一些实施例的显示设备的硬件配置框图。
图3中示例性示出了根据一些实施例的控制设备的硬件配置框图。
图4中示例性示出了根据一些实施例的显示设备中软件配置示意图。
图5中示例性示出了根据一些实施例的显示设备中应用程序的图标控件界面显示示意图。
图6中示例性示出了一些实施例中显示设备的结构示意图。
图7中示例性示出了一些实施例中摄像模组的一个拍摄示意图。
图8中示例性示出了一些实施例中摄像模组的另一个拍摄示意图。
图9中示例性示出了一些实施例提供的显示设备自动对焦成像的图像校准方法的流程示意图。
图10中示例性示出了一些实施例提供的显示设备自动对焦成像的图像校准方法的流程示意图。
图11中示例性示出了一些实施例提供的显示设备自动对焦成像的图像校准装置的示意图。
具体实施方式
为使本申请的目的、实施方式和优点更加清楚,下面将结合本申请示例性实施例中的附图,对本申请示例性实施方式进行清楚、完整地描述,显然,所描述的示例性实施例仅是本申请一部分实施例,而不是全部的实施例。
基于本申请描述的示例性实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请所附权利要求保护的范围。此外,虽然本申请中公开内容按照示范性一个或几个实例来介绍,但应理解,可以就这些公开内容的各个方面也可以单独构成一个完整实施方式。
需要说明的是,本申请中对于术语的简要说明,仅是为了方便理解接下来描述的实施方式,而不是意图限定本申请的实施方式。除非另有说明,这些术语应当按照其普通和通常的含义理解。
本申请中说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别类似或同类的对象或实体,而不必然意味着限定特定的顺序或先后次序,除非另外注明(Unless otherwise indicated)。应该理解这样使用的用语在适当情况下可以互换,例如能够根据本申请实施例图示或描述中给出那些以外的顺序实施。
此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖但不排他的包含,例如,包含了一系列组件的产品或设备不必限于清楚地列出的那些组件,而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。
本申请中使用的术语“模块”,是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合,能够执行与该元件相关的功能。
本申请中使用的术语“遥控器”,是指电子设备(如本申请中公开的显示设备)的一个组件,通常可在较短的距离范围内无线控制电子设备。一般使用红外线和/或射频(RF)信号和/或蓝牙与电子设备连接,也可以包括WiFi、无线USB、蓝牙、动作传感器等功能模块。例如:手持式触摸遥控器,是以触摸屏中用户界面取代一般遥控装置中的大部分物理内置硬键。
本申请中使用的术语“手势”,是指用户通过一种手型的变化或手部运动等动作,用于表达预期想法、动作、目的/或结果的用户行为。
随着科学技术的发展,可以自动对焦的摄像头已经被广泛应用在各类显示设备,成为人们普遍使用的摄像头。自动对焦摄像头的原理是,针对不同深度的景物,摄像头的马达会推动镜头往前或往后移动,使景物的成像面恰好落在图像传感器表面上。摄像头在针对不同深度的景物进行拍摄时,镜头在马达的推动下移动,镜头与图像传感器之间的距离发生明显变化,从而实现摄像头的自动对焦。
但是在摄像头的自动对焦中,远近焦的变化会导致摄像头中的图像传感器所捕捉的景物图像在显示画面发生抖动,抖动的原因是镜头变焦前后引起景物图像呈现在显示器上显示位置的改变。从观看人员角度来说,就是看到显示器呈现的显示画面中的景物图像在连续的显示过程中发生位置的偏移,多张图像的显示不连贯,景物图像在显示器上呈现抖动的状态。
基于此,本申请提供一种显示设备以及显示设备自动对焦成像的图像校准方法,获取显示设备拍摄的图像后,对该图像的显示位置进行确定,再基于该图像的显示位置对该图像进行插值后得到可以稳定显示在预设位置的图像。其中,该参考图像指的是能够稳定显示在显示器的预设位置的图像。如此,在显示设备自动对焦成像时,所显示的图像一直在预设位置,所显示的图像可以稳定显示在显示器上,解决了现有技术中存在的自动对焦成像中容易引起画面抖动的问题。
图1中示例性示出了根据实施例中显示设备与控制装置之间操作场景的示意图。如图1中示出,用户可通过移动终端300和控制装置100操作显示设备200。
在一些实施例中,控制装置100可以是遥控器,遥控器和显示设备的通信包括红外协议通信或蓝牙协议通信,及其他短距离通信方式等,通过无线或其他有线方式来控制显示设备200。用户可以通过遥控器上按键,语音输入、控制面板输入等输入用户指令,来控制显示设备200。如:用户可以通过遥控器上音量加减键、频道控制键、上/下/左/右的移动按键、语音输入按键、菜单键、开关机按键等输入相应控制指令,来实现控制显示设备200的功能。
在一些实施例中,也可以使用移动终端、平板电脑、计算机、笔记本电脑、和其他智能设备以控制显示设备200。例如,使用在智能设备上运行的应用程序控制显示设备200。该应用程序通过配置可以在与智能设备关联的屏幕上,在直观的用户界面(UI)中为用户提供各种控制。
在一些实施例中,移动终端300可与显示设备200安装软件应用,通过网络通信协议实现连接通信,实现一对一控制操作的和数据通信的目的。如:可以实现用移动终端300与显示设备200建立控制指令协议,将遥控控制键盘同步到移动终端300上,通过控制移动终端300上用户界面,实现控制显示设备200的功能。也可以将移动终端300上显示音视频内容传输到显示设备200上,实现同步显示功能。
如图1中还示出,显示设备200还与服务器400通过多种通信方式进行数据通信。可允许显示设备200通过局域网(LAN)、无线局域网(WLAN)和其他网络进行通信连接。服务器400可以向显示设备200提供各种内容和互动。示例的,显示设备200通过发送和接收信息,以及电子节目指南(EPG)互动,接收软件程序更新,或访问远程储存的数字媒体库。服务器400可以是一个集群,也可以是多个集群,可以包括一类或多类服务器。通过服务器400提供视频点播和广告服务等其他网络服务内容。
显示设备200,可以液晶显示器、OLED显示器、投影显示设备。具体显示设备类型,尺寸大小和分辨率等不作限定,本领技术人员可以理解的是,显示设备200可以根据需要做性能和配置上一些改变。
显示设备200除了提供广播接收电视功能之外,还可以附加提供计算机支持功能的智能网络电视功能,包括但不限于,网络电视、智能电视、互联网协议电视(IPTV)等。
图2中示例性示出了根据示例性实施例中显示设备200的硬件配置框图。
在一些实施例中,显示设备200中包括控制器250、调谐解调器210、通信器220、检测器230、输入/输出接口255、显示器275,音频输出接口285、存储器260、供电电源290、用户接口265、外部装置接口240中的至少一种。
在一些实施例中,显示器275,用于接收源自第一处理器输出的图像信号,进行显示视频内容和图像以及菜单操控界面的组件。
在一些实施例中,显示器275,包括用于呈现画面的显示屏组件,以及驱动图像显示的驱动组件。
在一些实施例中,显示视频内容,可以来自广播电视内容,也可以是说,可通过有线或无线通信协议接收的各种广播信号。或者,可显示来自网络通信协议接收来自网络服务器端发送的各种图像内容。
在一些实施例中,显示器275用于呈现显示设备200中产生且用于控制显示设备200的用户操控UI界面。
在一些实施例中,根据显示器275类型不同,还包括用于驱动显示的驱动组件。
在一些实施例中,显示器275为一种投影显示器,还可以包括一种投影装置和投影屏幕。
在一些实施例中,通信器220是用于根据各种通信协议类型与外部设备或外部服务器进行通信的组件。例如:通信器可以包括Wifi芯片,蓝牙通信协议芯片,有线以太网通信协议芯片等其他网络通信协议芯片或近场通信协议芯片,以及红外接收器中的至少一种。
在一些实施例中,显示设备200可以通过通信器220与外部控制设备100或内容提供设备之间建立控制信号和数据信号发送和接收。
在一些实施例中,用户接口265,可用于接收控制装置100(如:红外遥控器等)红外控制信号。
在一些实施例中,检测器230是显示设备200用于采集外部环境或与外部交互的信号。
在一些实施例中,检测器230包括光接收器,用于采集环境光线强度的传感器,可以通过采集环境光可以自适应性显示参数变化等。
在一些实施例中,检测器230还可以包括图像采集器,如相机、摄像头等,可以用于采集外部环境场景,以及用于采集用户的属性或与用户交互手势,可以自适应变化显示参数,也可以识别用户手势,以实现与用户之间互动的功能。
在一些实施例中,检测器230还可以包括温度传感器等,如通过感测环境温度。
在一些实施例中,显示设备200可自适应调整图像的显示色温。如当温度偏高的环境时,可调整显示设备200显示图像色温偏冷色调,或当温度偏低的环境时,可以调整显示设备200显示图像偏暖色调。
在一些实施例中,检测器230还可声音采集器等,如麦克风,可以用于接收用户的声音。示例性的,包括用户控制显示设备200的控制指令的语音信号,或采集环境声音,用于识别环境场景类型,使得显示设备200可以自适应适应环境噪声。
在一些实施例中,如图2所示,输入/输出接口255被配置为,可进行控制器250与外部其他设备或其他控制器250之间的数据传输。如接收外部设备的视频信号数据和音频信号数据、或命令指令数据等。
在一些实施例中,外部装置接口240可以包括,但不限于如下:可以高清多媒体接口HDMI接口、模拟或数据高清分量输入接口、复合视频输入接口、USB输入接口、RGB端口等任一个或多个接口。也可以是上述多个接口形成复合性的输入/输出接口。
在一些实施例中,如图2所示,调谐解调器210被配置为,通过有线或无线接收方式接收广播电视信号,可以进行放大、混频和谐振等调制解调处理,从多多个无线或有线广播电视信号中解调出音视频信号,该音视频信号可以包括用户所选择电视频道频率中所携带的电视音视频信号,以及EPG数据信号。
在一些实施例中,调谐解调器210解调的频点受到控制器250的控制,控制器250可根据用户选择发出控制信号,以使的调制解调器响应用户选择的电视信号频率以及调制解调该频率所携带的电视信号。
在一些实施例中,广播电视信号可根据电视信号广播制式不同区分为地面广播信号、有线广播信号、卫星广播信号或互联网广播信号等。或者根据调制类型不同可以区分为数字调制信号,模拟调制信号等。或者根据信号种类不同区分为数字信号、模拟信号等。
在一些实施例中,控制器250和调谐解调器210可以位于不同的分体设备中,即调谐解调器210也可在控制器250所在的主体设备的外置设备中,如外置机顶盒等。这样,机顶盒将接收到的广播电视信号调制解调后的电视音视频信号输出给主体设备,主体设备经过第一输入/输出接口接收音视频信号。
在一些实施例中,控制器250,通过存储在存储器上中各种软件控制程序,来控制显示设备的工作和响应用户的操作。控制器250可以控制显示设备200的整体操作。例如:响应于接收到用于选择在显示器275上显示UI对象的用户命令,控制器250便可以执行与由用户命令选择的对象有关的操作。
在一些实施例中,该对象可以是可选对象中的任何一个,例如超链接或图标。与所选择的对象有关操作,例如:显示连接到超链接页面、文档、图像等操作,或者执行与该图标相对应程序的操作。用于选择UI对象用户命令,可以是通过连接到显示设备200的各种输入装置(例如,鼠标、键盘、触摸板等)输入命令或者与由用户说出语音相对应的语音命令。
如图2所示,控制器250包括随机存取存储器251(Random Access Memory,RAM)、只读存储器252(Read-Only Memory,ROM)、视频处理器270、音频处理器280、其他处理器253(例如:图形处理器(Graphics Processing Unit,GPU)、中央处理器254(CentralProcessing Unit,CPU)、通信接口(Communication Interface),以及通信总线256(Bus)中的至少一种。其中,通信总线连接各个部件。
在一些实施例中,RAM 251用于存储操作***或其他正在运行中的程序的临时数据在一些实施例中,ROM 252用于存储各种***启动的指令。
在一些实施例中,ROM 252用于存储一个基本输入输出***,称为基本输入输出***(Basic Input Output System,BIOS)。用于完成对***的加电自检、***中各功能模块的初始化、***的基本输入/输出的驱动程序及引导操作***。
在一些实施例中,在收到开机信号时,显示设备200电源开始启动,CPU运行ROM252中***启动指令,将存储在存储器的操作***的临时数据拷贝至RAM 251中,以便于启动或运行操作***。当操作***启动完成后,CPU再将存储器中各种应用程序的临时数据拷贝至RAM 251中,然后,以便于启动或运行各种应用程序。
在一些实施例中,CPU处理器254,用于执行存储在存储器中操作***和应用程序指令。以及根据接收外部输入的各种交互指令,来执行各种应用程序、数据和内容,以便最终显示和播放各种音视频内容。
在一些示例性实施例中,CPU处理器254,可以包括多个处理器。多个处理器可包括一个主处理器以及一个或多个子处理器。主处理器,用于在预加电模式中执行显示设备200一些操作,和/或在正常模式下显示画面的操作。一个或多个子处理器,用于在待机模式等状态下一种操作。
在一些实施例中,图形处理器253,用于产生各种图形对象,如:图标、操作菜单、以及用户输入指令显示图形等。包括运算器,通过接收用户输入各种交互指令进行运算,根据显示属性显示各种对象。以及包括渲染器,对基于运算器得到的各种对象,进行渲染,上述渲染后的对象用于显示在显示器上。
在一些实施例中,视频处理器270被配置为将接收外部视频信号,根据输入信号的标准编解码协议,进行解压缩、解码、缩放、降噪、帧率转换、分辨率转换、图像合成等等视频处理,可得到直接可显示设备200上显示或播放的信号。
在一些实施例中,视频处理器270,包括解复用模块、视频解码模块、图像合成模块、帧率转换模块、显示格式化模块等。
其中,解复用模块,用于对输入音视频数据流进行解复用处理,如输入MPEG-2,则解复用模块进行解复用成视频信号和音频信号等。
视频解码模块,则用于对解复用后的视频信号进行处理,包括解码和缩放处理等。
图像合成模块,如图像合成器,其用于将图形生成器根据用户输入或自身生成的GUI信号,与缩放处理后视频图像进行叠加混合处理,以生成可供显示的图像信号。
帧率转换模块,用于对转换输入视频帧率,如将60Hz帧率转换为120Hz帧率或240Hz帧率,通常的格式采用如插帧方式实现。
显示格式化模块,则用于将接收帧率转换后视频输出信号,改变信号以符合显示格式的信号,如输出RGB数据信号。
在一些实施例中,图形处理器253可以和视频处理器可以集成设置,也可以分开设置,集成设置的时候可以执行输出给显示器的图形信号的处理,分离设置的时候可以分别执行不同的功能,例如GPU+FRC(Frame Rate Conversion))架构。
在一些实施例中,音频处理器280,用于接收外部的音频信号,根据输入信号的标准编解码协议,进行解压缩和解码,以及降噪、数模转换、和放大处理等处理,得到可以在扬声器中播放的声音信号。
在一些实施例中,视频处理器270可以包括一颗或多颗芯片组成。音频处理器,也可以包括一颗或多颗芯片组成。
在一些实施例中,视频处理器270和音频处理器280,可以单独的芯片,也可以于控制器一起集成在一颗或多颗芯片中。
在一些实施例中,音频输出,在控制器250的控制下接收音频处理器280输出的声音信号,如:扬声器286,以及除了显示设备200自身携带的扬声器之外,可以输出至外接设备的发生装置的外接音响输出端子,如:外接音响接口或耳机接口等,还可以包括通信接口中的近距离通信模块,例如:用于进行蓝牙扬声器声音输出的蓝牙模块。
供电电源290,在控制器250控制下,将外部电源输入的电力为显示设备200提供电源供电支持。供电电源290可以包括安装显示设备200内部的内置电源电路,也可以是安装在显示设备200外部电源,在显示设备200中提供外接电源的电源接口。
用户接口265,用于接收用户的输入信号,然后,将接收用户输入信号发送给控制器250。用户输入信号可以是通过红外接收器接收的遥控器信号,可以通过网络通信模块接收各种用户控制信号。
在一些实施例中,用户通过控制装置100或移动终端300输入用户命令,用户输入接口则根据用户的输入,显示设备200则通过控制器250响应用户的输入。
在一些实施例中,用户可在显示器275上显示的图形用户界面(GUI)输入用户命令,则用户输入接口通过图形用户界面(GUI)接收用户输入命令。或者,用户可通过输入特定的声音或手势进行输入用户命令,则用户输入接口通过传感器识别出声音或手势,来接收用户输入命令。
在一些实施例中,“用户界面”,是应用程序或操作***与用户之间进行交互和信息交换的介质接口,它实现信息的内部形式与用户可以接受形式之间的转换。用户界面常用的表现形式是图形用户界面(Graphic User Interface,GUI),是指采用图形方式显示的与计算机操作相关的用户界面。它可以是在电子设备的显示屏中显示的一个图标、窗口、控件等界面元素,其中控件可以包括图标、按钮、菜单、选项卡、文本框、对话框、状态栏、导航栏、Widget等可视的界面元素。
存储器260,包括存储用于驱动显示设备200的各种软件模块。如:第一存储器中存储的各种软件模块,包括:基础模块、检测模块、通信模块、显示控制模块、浏览器模块、和各种服务模块等中的至少一种。
基础模块用于显示设备200中各个硬件之间信号通信、并向上层模块发送处理和控制信号的底层软件模块。检测模块用于从各种传感器或用户输入接口中收集各种信息,并进行数模转换以及分析管理的管理模块。
例如,语音识别模块中包括语音解析模块和语音指令数据库模块。显示控制模块用于控制显示器进行显示图像内容的模块,可以用于播放多媒体图像内容和UI界面等信息。通信模块,用于与外部设备之间进行控制和数据通信的模块。浏览器模块,用于执行浏览服务器之间数据通信的模块。服务模块,用于提供各种服务以及各类应用程序在内的模块。同时,存储器260还用存储接收外部数据和用户数据、各种用户界面中各个项目的图像以及焦点对象的视觉效果图等。
图3示例性示出了根据示例性实施例中控制设备100的配置框图。如图3所示,控制设备100包括控制器110、通信接口130、用户输入/输出接口、存储器、供电电源。
控制设备100被配置为控制显示设备200,以及可接收用户的输入操作指令,且将操作指令转换为显示设备200可识别和响应的指令,起用用户与显示设备200之间交互中介作用。如:用户通过操作控制设备100上频道加减键,显示设备200响应频道加减的操作。
在一些实施例中,控制设备100可是一种智能设备。如:控制设备100可根据用户需求安装控制显示设备200的各种应用。
在一些实施例中,如图1所示,移动终端300或其他智能电子设备,可在安装操控显示设备200的应用之后,可以起到控制设备100类似功能。如:用户可以通过安装应用,在移动终端300或其他智能电子设备上可提供的图形用户界面的各种功能键或虚拟按钮,以实现控制设备100实体按键的功能。
控制器110包括处理器112和RAM 113和ROM 114、通信接口130以及通信总线。控制器用于控制控制设备100的运行和操作,以及内部各部件之间通信协作以及外部和内部的数据处理功能。
通信接口130在控制器110的控制下,实现与显示设备200之间控制信号和数据信号的通信。如:将接收到的用户输入信号发送至显示设备200上。通信接口130可包括WiFi芯片131、蓝牙模块132、NFC模块133等其他近场通信模块中至少之一种。
用户输入/输出接口140,其中,输入接口包括麦克风141、触摸板142、传感器143、按键144等其他输入接口中至少一者。如:用户可以通过语音、触摸、手势、按压等动作实现用户指令输入功能,输入接口通过将接收的模拟信号转换为数字信号,以及数字信号转换为相应指令信号,发送至显示设备200。
输出接口包括将接收的用户指令发送至显示设备200的接口。在一些实施例中,可以红外接口,也可以是射频接口。如:红外信号接口时,需要将用户输入指令按照红外控制协议转化为红外控制信号,经红外发送模块进行发送至显示设备200。再如:射频信号接口时,需将用户输入指令转化为数字信号,然后按照射频控制信号调制协议进行调制后,由射频发送端子发送至显示设备200。
在一些实施例中,控制设备100包括通信接口130和输入输出接口140中至少一者。控制设备100中配置通信接口130,如:WiFi、蓝牙、NFC等模块,可将用户输入指令通过WiFi协议、或蓝牙协议、或NFC协议编码,发送至显示设备200.
存储器190,用于在控制器的控制下存储驱动和控制控制设备200的各种运行程序、数据和应用。存储器190,可以存储用户输入的各类控制信号指令。
供电电源180,用于在控制器的控制下为控制设备100各元件提供运行电力支持。可以电池及相关控制电路。
在一些实施例中,***可以包括内核(Kernel)、命令解析器(shell)、文件***和应用程序。内核、shell和文件***一起组成了基本的操作***结构,它们让用户可以管理文件、运行程序并使用***。上电后,内核启动,激活内核空间,抽象硬件、初始化硬件参数等,运行并维护虚拟内存、调度器、信号及进程间通信(IPC)。内核启动后,再加载Shell和用户应用程序。应用程序在启动后被编译成机器码,形成一个进程。
参见图4,在一些实施例中,将***分为四层,从上至下分别为应用程序(Applications)层(简称“应用层”),应用程序框架(Application Framework)层(简称“框架层”),安卓运行时(Android runtime)和***库层(简称“***运行库层”),以及内核层。
在一些实施例中,应用程序层中运行有至少一个应用程序,这些应用程序可以是操作***自带的窗口(Window)程序、***设置程序、时钟程序、相机应用等;也可以是第三方开发者所开发的应用程序,比如嗨见程序、K歌程序、魔镜程序等。在具体实施时,应用程序层中的应用程序包不限于以上举例,实际还可以包括其它应用程序包,本申请实施例对此不做限制。
框架层为应用程序层的应用程序提供应用编程接口(application programminginterface,API)和编程框架。应用程序框架层包括一些预先定义的函数。应用程序框架层相当于一个处理中心,这个中心决定让应用层中的应用程序做出动作。应用程序通过API接口,可在执行中访问***中的资源和取得***的服务
如图4所示,本申请实施例中应用程序框架层包括管理器(Managers),内容提供者(Content Provider)等,其中管理器包括以下模块中的至少一个:活动管理器(ActivityManager)用与和***中正在运行的所有活动进行交互;位置管理器(Location Manager)用于给***服务或应用提供了***位置服务的访问;文件包管理器(Package Manager)用于检索当前安装在设备上的应用程序包相关的各种信息;通知管理器(NotificationManager)用于控制通知消息的显示和清除;窗口管理器(Window Manager)用于管理用户界面上的括图标、窗口、工具栏、壁纸和桌面部件。
在一些实施例中,活动管理器用于:管理各个应用程序的生命周期以及通常的导航回退功能,比如控制应用程序的退出(包括将显示窗口中当前显示的用户界面切换到***桌面)、打开、后退(包括将显示窗口中当前显示的用户界面切换到当前显示的用户界面的上一级用户界面)等。
在一些实施例中,窗口管理器用于管理所有的窗口程序,比如获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕,控制显示窗口变化(例如将显示窗口缩小显示、抖动显示、扭曲变形显示等)等。
在一些实施例中,***运行库层为上层即框架层提供支撑,当框架层被使用时,安卓操作***会运行***运行库层中包含的C/C++库以实现框架层要实现的功能。
在一些实施例中,内核层是硬件和软件之间的层。如图4所示,内核层至少包含以下驱动中的至少一种:音频驱动、显示驱动、蓝牙驱动、摄像头驱动、WIFI驱动、USB驱动、HDMI驱动、传感器驱动(如指纹传感器,温度传感器,触摸传感器、压力传感器等)等。
在一些实施例中,内核层还包括用于进行电源管理的电源驱动模块。
在一些实施例中,图4中的软件架构对应的软件程序和/或模块存储在图2或图3所示的第一存储器或第二存储器中。
在一些实施例中,以魔镜应用(拍照应用)为例,当遥控接收装置接收到遥控器输入操作,相应的硬件中断被发给内核层。内核层将输入操作加工成原始输入事件(包括输入操作的值,输入操作的时间戳等信息)。原始输入事件被存储在内核层。应用程序框架层从内核层获取原始输入事件,根据焦点当前的位置识别该输入事件所对应的控件以及以该输入操作是确认操作,该确认操作所对应的控件为魔镜应用图标的控件,魔镜应用调用应用框架层的接口,启动魔镜应用,进而通过调用内核层启动摄像头驱动,实现通过摄像头捕获静态图像或视频。
在一些实施例中,对于具备触控功能的显示设备,以分屏操作为例,显示设备接收用户作用于显示屏上的输入操作(如分屏操作),内核层可以根据输入操作产生相应的输入事件,并向应用程序框架层上报该事件。由应用程序框架层的活动管理器设置与该输入操作对应的窗口模式(如多窗口模式)以及窗口位置和大小等。应用程序框架层的窗口管理根据活动管理器的设置绘制窗口,然后将绘制的窗口数据发送给内核层的显示驱动,由显示驱动在显示屏的不同显示区域显示与之对应的应用界面。
在一些实施例中,如图5中所示,应用程序层包含至少一个应用程序可以在显示器中显示对应的图标控件,如:直播电视应用程序图标控件、视频点播应用程序图标控件、媒体中心应用程序图标控件、应用程序中心图标控件、游戏应用图标控件等。
在一些实施例中,直播电视应用程序,可以通过不同的信号源提供直播电视。例如,直播电视应用程可以使用来自有线电视、无线广播、卫星服务或其他类型的直播电视服务的输入提供电视信号。以及,直播电视应用程序可在显示设备200上显示直播电视信号的视频。
在一些实施例中,视频点播应用程序,可以提供来自不同存储源的视频。不同于直播电视应用程序,视频点播提供来自某些存储源的视频显示。例如,视频点播可以来自云存储的服务器端、来自包含已存视频节目的本地硬盘储存器。
在一些实施例中,媒体中心应用程序,可以提供各种多媒体内容播放的应用程序。例如,媒体中心,可以为不同于直播电视或视频点播,用户可通过媒体中心应用程序访问各种图像或音频所提供服务。
在一些实施例中,应用程序中心,可以提供储存各种应用程序。应用程序可以是一种游戏、应用程序,或某些和计算机***或其他设备相关但可以在智能电视中运行的其他应用程序。应用程序中心可从不同来源获得这些应用程序,将它们储存在本地储存器中,然后在显示设备200上可运行。
请参见图6,本申请的一个实施例提供一种显示设备200,该显示设备200包括显示器275、摄像模组231和控制器250,该摄像模组231包括镜头232、马达233和图像传感器234。
该显示器275被配置为显示图像,该显示器275也可以替换为外接的显示器,例如与该控制器250通信连接的其他终端上的显示器,该其他终端例如计算机、手机、平板电脑等。该显示器275在显示图像时是基于视窗进行显示,该视窗的显示比例可以根据实际需要选择,本申请不做限定。
该镜头232用于拍摄图像,该镜头232与该马达233机械连接,该马达233用于控制该镜头232移动。该镜头232与该马达233之间的连接方式可以根据实际需要选择,本申请不做限定。该镜头232和该马达233的型号和规格均可以根据实际需要选择,本申请不做限定。
该图像传感器234用于将该镜头232捕捉到的图像转换为可由该显示器275显示的图像。该图像传感器234例如上述的CCD传感器,或者是其他类型的传感器,本申请不做限定。该图像传感器234的型号和规格可以根据实际需要选择,本申请不做限定。
该控制器250分别与该显示器275和该图像传感器234连接,该控制器250被配置为获取该镜头232拍摄到的第一图像以及拍摄该第一图像时该镜头232与该图像传感器234之间的第一垂直距离。当该第一垂直距离小于参考垂直距离时,对该第一图像进行校准,得到校准图像,该校准图像的像素高度和像素宽度之间的比例等于该显示器275上视窗的显示比例。该显示器275上的视窗指的是该显示器275在进行图像显示时的窗口,该视窗的显示比例即进行图像显示的窗口的显示比例,例如相关技术中的一些显示器的视窗的显示比例有16:9、4:3、16:10等。一个该显示器275上可能有多个视窗,每个视窗的显示比例可能不同,此时在对该第一图像进行校准前需要以一个视窗的显示比例为准。
请参见图7,当该镜头232与该图像传感器234之间的距离为该参考垂直距离时,该镜头232拍摄到的参考图像能够稳定显示于该显示器275的预设位置,该参考垂直距离被设定为该镜头232与该图像传感器234之间的最远距离。在实际拍摄过程中,该镜头232与该图像传感器234之间的实际距离,即第一垂直距离可能小于或者等于该参考垂直距离,本实施例对该第一垂直距离小于该参考垂直距离的情形进行分析。
图8为该镜头232与该图像传感器234之间的第一垂直距离小于该参考垂直距离时的拍摄示意图。如图8所示,当第一垂直距离小于参考垂直距离时,由于此时镜头232拍摄到的光学图像映射在该图像传感器234上的位置不同,导致该镜头232拍摄得到的该第一图像在该显示器275上进行显示时,所显示图像的位置发生偏移。但是在摄像过程中该显示器275在基于视窗显示图像时是连续显示的,即该显示器275进行图像显示时每张图像之间的切换时间是很短的,如果每张图像在该显示器275上的显示尺寸都相同,则人通过该显示器275观看到的图像是不会发生抖动的,即整个图像显示过程是很流畅、连续、稳定得显示。但是如果某张图像的在该显示器275上的显示位置与其他图像的显示位置不同,即与预设位置不同,则该显示器275在进行图像切换时,人通过该显示器275观看到的图像就会出现抖动、画面不连续、不流畅、不稳定的情况。因此需要对该第一图像进行校准,使得校准后得到的该校准图像在该显示器275上进行显示时,显示的该校准图像的显示位置等于预设位置,从而使得图像的连续显示过程稳定连贯。此处该第一图像指的是任意一张图像。由于该参考图像在该显示器275上的显示位置为该预设位置,因此可以将该参考图像作为校准标准对该第一图像进行校准。
该镜头232的光学参数是固定的,该镜头232在不同位置对应在该图像传感器234的角度α也是固定的。当该镜头232与该图像传感器234之间的距离为该参考垂直距离H时,该镜头232捕捉到的图像在该图像传感器234上覆盖的图像长度为L1。当该镜头232与该图像传感器234之间的距离为该第一垂直距离H-ΔH时,该镜头232捕捉到的图像在该图像传感器234上覆盖的图像长度为L2,L2小于L1,导致图像位置发生偏移,进而该显示器275在进行图像连续的显示时会发生抖动。因此,当该第一垂直距离小于该参考垂直距离时,确定该第一图像的位置发生偏移,图像显示发生抖动,需要对该第一图像进行校准。
在摄像模组231变焦成像的过程中,该控制器250中的图像处理器接收该图像传感器234传输的图像,并对该图像的对比度进行分析,如果该图像的对比度小于预设的对比度,则该图像处理器输出一个变焦指令至该控制器250中用于控制马达233的控制模块(马达控制模块)。该马达控制模块在接收该图像处理器输出的变焦指令后,又根据该变焦指令生成第一电流以驱动该马达233移动,具体的,该马达控制模块先根据该变焦指令生成一个模拟信号,再由该控制器250中的模数转换器将该模拟信号转换为该第一电流。该第一电流的大小可以决定该马达233的移动距离,而该马达233的移动又可以推动该镜头232的移动,由此实现了该镜头232的变焦。因此,当该马达233处于不同位置时,该摄像模组231拍摄得到不同的图像,该马达233的驱动电流是与该摄像模组231拍摄到的图像一一对应的。
结合以上描述的可以根据该参考图像作为校准标准对该第一图像进行校准,因此在对该第一图像进行校准时,该控制器250可以根据该参考图像的尺寸、第一数据和该参考垂直距离确定该第一图像的第一像素高度和第一像素宽度,其中该第一数据至少包括拍摄该第一图像时驱动该摄像模组231中马达233移动的第一电流值。
在一些实施例中,该控制器250具体被配置为根据公式I=k2Nadc确定该第一电流值,其中,I代表该第一电流值,Nadc代表拍摄该第一图像时,通过该控制器250中模数转换模块的电流值,k2代表该控制器250和该模数转换模块之间的电流转换系数,即该控制器250中马达控制模块和该模数转换模块之间的电流转换系数。Nadc可以由该控制器250直接读取,再获取k2后计算得到I。
在一些实施例中,该第一数据还包括该镜头232与该图像传感器234之间的初始垂直距离、该马达233的弹力系数。其中,该初始垂直距离指的是该摄像模组231未采集图像时该镜头232与该图像传感器234之间的垂直距离,也可以理解为该摄像模组231在恢复到未使用状态、初始状态时,该镜头232与该图像传感器234之间的垂直距离。每个该显示设备200都有一个固定的该初始垂直距离。每个该显示设备200的马达233的弹力系数也是固定的。
根据该第一数据、该参考图像的参考像素高度和该参考垂直距离确定该第一图像的第一像素高度时,该控制器250可以根据公式PL2=(H0+k1I)×PL1/H确定该第一像素高度,其中,PL2代表该第一像素高度,H0代表该初始垂直距离,k1代表该马达的弹力系数,I代表该第一电流值,PL1代表该参考像素高度,H代表该参考垂直距离。
如图7和图8所示,当该镜头232与该图像传感器234之间的距离拉近时,即由图7所示的状态转换为图8时,该镜头232与该图像传感器234之间的距离由H变为H-ΔH,此时该第一图像在该图像传感器234上的成像区域长度为L2,L2=2×(H-ΔH)×tan(α/2),其中,α是如上描述的固定角度。此时该第一图像对应的第一像素高度为PL2=(L2×PL1)/L1,其中,PL1为该参考像素高度,PL2为该第一像素高度。结合L2=2×(H-ΔH)×tan(α/2)和PL2=(L2×PL1)/L1可以得到PL2=2(H-ΔH)×tan(α/2)×PL1)/L1。
又将tan(α/2)=L1/2H代入至PL2=2(H-ΔH)×tan(α/2)×PL1)/L1,可以得到
Figure GDA0003131738060000181
而该镜头232移动后,该镜头232与该图像传感器234之间的距离是与该马达233的驱动电流一一对应的,该马达233的驱动电流即为通过该控制器250的第一电流值。由此可以推知,H-ΔH=H0+k1I,其中,H0是该镜头232与该图像传感器234之间的初始垂直距离,k1为该马达233的弹力系数,k1为常数。因此,结合H-ΔH=H0+k1I和
Figure GDA0003131738060000182
Figure GDA0003131738060000191
可以推知PL2=(H0+k1I)×PL1/H。因此,可以根据公式PL2=(H0+k1I)×PL1/H确定该第一像素高度。
同理,在该控制器250根据该参考图像、该第一数据和该参考垂直距离确定该第一图像的第一像素宽度时,该控制器250可以根据该第一数据、该参考图像的参考像素宽度和该参考垂直距离确定该第一图像的第一像素宽度,包括:根据公式Pw2=(H0+k1I)×Pw1/H确定该第一像素宽度,其中,Pw2代表该第一像素宽度,H0代表该初始垂直距离,k1代表该马达的弹力系数,I代表该第一电流值,Pw1代表该参考像素宽度,H代表该参考垂直距离。
而在计算出该第一图像的该第一像素高度和该第一像素宽度后,该显示器275上显示的该第一图像所在的位置依然为原始位置,而不是显示在该预设位置,此时该控制器250还需要再根据该第一像素高度和该第一像素宽度对该第一图像进行校准,得到校准图像。可选的,该控制器250可以基于该第一像素高度和该第一像素宽度对该第一图像进行插值运算,得到校准图像,该校准图像在该显示器275的预设位置显示。
其中,该插值运算可以为双线性插值运算(插值Zoom运算)。具体的,该控制器250可以先获取关于该参考图像和该第一图像之间的转换矩阵T,再根据该转换矩阵T、该第一像素高度和该第一像素宽度对该第一图像进行插值运算,得到该校准图像。即,根据公式
Figure GDA0003131738060000192
确定该校准图像。或者,也可以使用其他算法对该第一图像进行处理,使得该校准图像在该显示器275的预设位置显示。
本实施例提供的该显示设备200在获取到该第一图像后,获取拍摄该第一图像时该镜头与该图像传感器之间的第一垂直距离,当该第一垂直距离小于该参考垂直距离时,确定该第一图像的第一像素高度和第一像素宽度。在确定该第一图像的第一像素高度和第一像素宽度后,又基于该第一像素高度和该第一像素宽度对该第一图像进行处理后得到该校准图像。得到的该校准图像在该显示器275上的显示位置为给预设位置。此时,该校准图像可以和该参考图像一样显示在该预设位置,则在图像的显示过程中图像显示就不会因为图像位置偏移发生显示抖动,该校准图像和该参考图像都能够稳定显示于该显示器275。本实施例提供的该显示设备200不仅可以避免现有技术中存在的拍摄过程自动对焦成像导致的图像显示抖动情况的发生,提高显示设备自动对焦成像的质量,还可以提高观看人员的观看体验。
请参见图9,本申请一个实施例还提供一种显示设备自动对焦成像的图像校准方法,应用于该显示设备200,该显示设备自动对焦成像的图像校准方法包括:
S901,获取镜头拍摄到的第一图像,以及拍摄该第一图像时该镜头与该图像传感器之间的第一垂直距离。
该第一垂直距离可以由该显示设备200中的该控制器250直接获取,或者由工作人员输入至该显示设备200中。该显示设备200获取该第一垂直距离的具体方式可以根据实际需要选择,本申请不做限定。
S902,当该第一垂直距离小于参考垂直距离时,对该第一图像在该显示器上的显示位置进行校准,得到校准图像,该校准图像在该显示器的预设位置显示。
如以上实施例关于该显示设备200相关的描述,当该镜头232与该图像传感器234之间的距离为该第一垂直距离H-ΔH时,该镜头232捕捉到的图像在该图像传感器234上覆盖的图像长度为L2,L2小于L1,导致图像位置发生偏移,图像显示过程发生抖动。因此,当该第一垂直距离小于该参考垂直距离时,确定该第一图像的位置发生偏移,图像显示过程发生抖动,需要对该第一图像进行校准。
在一些实施例中,如以上实施例关于该显示设备200相关的描述,如果想要该第一图像在进行显示时可以不发生显示抖动,稳定显示在该显示器275上,就需要对该第一图像进行插值运算,使得到的该校准图像的在该显示器275上的显示位置为该预设位置。或者,也可以采用其他方式对该第一图像进行处理,只要处理得到的该校准图像的显示位置为该预设位置即可。
本实施例提供的该显示设备自动对焦成像的图像校准方法应用于该显示设备200,该方法在获取拍摄到的该第一图像后,确定拍摄该第一图像时该镜头与该图像传感器之间的第一垂直距离是否小于该参考垂直距离。如果该第一垂直距离小于该参考垂直距离,则确定对该第一图像进行校准得到校准图像,该校准图像在该显示器275的预设位置显示,该校准图像能够稳定显示在该显示器275上。因此,本实施例提供的该显示设备自动对焦成像的图像校准方法可以避免现有技术中存在的拍摄过程自动对焦导致的图像显示抖动情况的发生,提高显示设备自动对焦成像的质量。
请参见图10,本申请一个实施例提供的该显示设备自动对焦成像的图像校准方法对图9所示的实施例中步骤S902进行进一步的描述。在图10所示的实施例中,当该镜头232与该图像传感器234之间的距离为该参考垂直距离时,该镜头232拍摄到的参考图像在该显示器275的预设位置显示,该参考图像可以稳定显示在该显示器275。
图10所示的实施例提供的该显示设备自动对焦成像的图像校准方法包括:
S1001,获取该镜头拍摄到的第一图像,以及拍摄该第一图像时该镜头与该图像传感器之间的第一垂直距离。
关于步骤S1001的相关描述可以参考步骤S901的相关描述,此处不再赘述。
S1002,根据该参考图像的尺寸、第一数据和该参考垂直距离确定该第一图像的第一像素高度和第一像素宽度,该第一数据至少包括拍摄该第一图像时驱动该摄像模组中马达移动的第一电流值,该马达在第一电流的驱动下移动,当该马达处于不同位置时,该摄像模组拍摄得到不同的图像。
如以上实施例中关于显示设备200的相关描述,该初始垂直距离指的是该摄像模组231未采集图像时该镜头232与该图像传感器234之间的垂直距离,也可以理解为该摄像模组231在恢复到未使用状态、初始状态时,该镜头232与该图像传感器234之间的垂直距离。每个该显示设备200都有一个固定的该初始垂直距离,每个该显示设备200的马达233的弹力系数也是固定的。
该第一电流值是随着时间变化的常数,每个时刻都有对应的该第一电流值,在本实施例中,需要获取拍摄该第一图像时通过该控制器250的第一电流值。在一些实施例中,该控制器250具体被配置为根据公式I=k2Nadc确定该第一电流值,其中,I代表该第一电流值,Nadc代表拍摄该第一图像时,通过该控制器中模数转换模块的电流值,k2代表该控制器和该模数转换模块之间的电流转换系数,即该控制器250中马达控制模块和该模数转换模块之间的电流转换系数。Nadc可以由该控制器250直接读取,再获取k2后计算得到I。
步骤S1002包括根据该第一数据、该参考图像的参考像素高度和该参考垂直距离确定该第一图像的第一像素高度;根据该第一数据、该参考图像的参考像素宽度和该参考垂直距离确定该第一图像的第一像素宽度。
如以上描述,可以根据公式PL2=(H0+k1I)×PL1/H确定该第一像素高度,其中,PL2代表该第一像素高度,H0代表该初始垂直距离,k1代表该马达的弹力系数,I代表该第一电流值,PL1代表该参考像素高度,H代表该参考垂直距离。根据公式Pw2=(H0+k1I)×Pw1/H确定该第一像素宽度,其中,Pw2代表该第一像素宽度,H0代表该初始垂直距离,k1代表该马达的弹力系数,I代表该第一电流值,Pw1代表该参考像素宽度,H代表该参考垂直距离。
S1003,根据该第一像素高度和该第一像素宽度对该第一图像进行校准,得到该校准图像。
如步骤S902和步骤S1002的相关描述,则步骤S1003可以理解为根据公式P=
Figure GDA0003131738060000211
确定该校准图像。
本实施例提供的该显示设备自动对焦成像的图像校准方法在图10所示的实施例的基础上进行进一步的优化,即根据如步骤S1002中描述的计算方法确定出该第一图像的该第一像素高度和该第一像素宽度,再根据该参考图像的尺寸、该第一像素高度和该第一像素宽度得到该校准图像,该校准图像在该显示器275上的显示位置为该预设位置,该校准图像能够稳定显示于该显示器275。其中,步骤S1003中利用转换矩阵对该第一像素高度和该第一像素宽度进行转换后得到的该校准图像的位置信息更加准确,降低在该显示器275的显示过程中因为显示位置偏移量的计算失误导致该第一图像校准失败的几率。
请参见图11,本申请的一个实施例提供一种显示设备自动对焦成像的图像校准装置10,应用于该显示设备200,如图11所示,该显示设备自动对焦成像的图像校准装置10包括获取模块11和处理模块12。
该获取模块11用于获取镜头拍摄到的第一图像,以及拍摄所述第一图像时所述镜头与所述图像传感器之间的第一垂直距离。
该处理模块12用于当该第一垂直距离小于参考垂直距离时,对该第一图像在该显示器上的显示位置进行校准,得到校准图像,该校准图像在该显示器的预设位置显示。
在一些实施例中,当该镜头与该图像传感器之间的距离为该参考垂直距离时,该镜头拍摄到的参考图像在该显示器上的预设位置显示。
该处理模块12具体用于根据该参考图像的尺寸、第一数据和该参考垂直距离确定该第一图像的第一像素高度和第一像素宽度,该第一数据包括拍摄该第一图像时驱动该摄像模组中马达移动的第一电流值,该马达在第一电流的驱动下移动,当该马达处于不同位置时,该摄像模组拍摄得到不同的图像。
该处理模块12具体用于根据该第一像素高度和该第一像素宽度对该第一图像进行校准,得到该校准图像。
该第一数据还包括该镜头与该图像传感器之间的初始垂直距离、该马达的弹力系数,其中该初始垂直距离为该摄像模组未采集图像时该镜头与该图像传感器之间的垂直距离。
该处理模块12具体用于根据公式PL2=(H0+k1I)×PL1/H确定该第一像素高度;其中,PL2代表该第一像素高度,H0代表该初始垂直距离,k1代表该马达的弹力系数,I代表该第一电流值,PL1代表该参考像素高度,H代表该参考垂直距离。
该处理模块12具体用于根据公式Pw2=(H0+k1I)×Pw1/H确定该第一像素高度;其中,Pw2代表该第一像素宽度,H0代表该初始垂直距离,k1代表该马达的弹力系数,I代表该第一电流值,Pw1代表该参考像素宽度,H代表该参考垂直距离。
该处理模块12具体用于根据公式I=k2Nadc确定该第一电流值;其中,I代表该第一电流值,Nadc代表拍摄该第一图像时,通过该控制器中模数转换模块的电流值,k2代表该控制器和该模数转换模块之间的电流转换系数。
本实施例提供的装置,可用于执行图9和图10所示实施例中该显示设备200执行的步骤,其实现原理和技术效果类似,在此不再赘述。
需要说明的是,应理解以上装置的各个模块的划分仅仅是一种逻辑功能的划分,实际实现时可以全部或部分集成到一个物理实体上,也可以物理上分开。且这些模块可以全部以软件通过处理元件调用的形式实现;也可以全部以硬件的形式实现;还可以部分模块通过处理元件调用软件的形式实现,部分模块通过硬件的形式实现。例如,处理模块可以为单独设立的处理元件,也可以集成在上述装置的某一个芯片中实现,此外,也可以以程序代码的形式存储于上述装置的存储器中,由上述装置的某一个处理元件调用并执行以上处理模块的功能。其它模块的实现与之类似。此外这些模块全部或部分可以集成在一起,也可以独立实现。这里该的处理元件可以是一种集成电路,具有信号的处理能力。在实现过程中,上述方法的各步骤或以上各个模块可以通过控制器元件中的硬件的集成逻辑电路或者软件形式的指令完成。
例如,以上这些模块可以是被配置成实施以上方法的一个或多个集成电路,例如:一个或多个ASIC(Application Specific Integrated Circuit,特定集成电路),或,一个或多个DSP(Digital Signal Processor,数字信号处理器),或,一个或者多个FPGA(FieldProgrammable Gate Array,现场可编程门阵列)等。再如,当以上某个模块通过处理元件调度程序代码的形式实现时,该处理元件可以是通用处理器,例如CPU或其它可以调用程序代码的处理器。再如,这些模块可以集成在一起,以SOC(System-on-a-Chip,片上***)的形式实现。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。该计算机程序产品包括一个或多个计算机程序。在计算机上加载和执行该计算机程序指令时,全部或部分地产生按照本申请实施例该的流程或功能。该计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。该计算机程序可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,该计算机程序可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。该计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。该可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘solid state disk(SSD))等。
本申请实施例还提供一种计算机可读存储介质,该计算机可读存储介质中存储有计算机程序,当计算机程序被处理器执行时实现如上任一方法实施例描述的方法。
本申请实施例还提供一种显示***,包括如上提供的该显示设备200。
本申请实施例还提供一种运行指令的芯片,芯片用于执行如上任一方法实施例提供的方法。
本申请实施例还提供一种计算机程序产品,该计算机程序产品包括计算机程序,该计算机程序存储在计算机可读存储介质中,至少一个处理器可以从该计算机可读存储介质中读取计算机程序,该至少一个处理器执行该计算机程序时可实现如上任一方法实施例提供的方法。
最后应说明的是:以上各实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述各实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。
为了方便解释,已经结合具体的实施方式进行了上述说明。但是,上述示例性的讨论不是意图穷尽或者将实施方式限定到上述公开的具体形式。根据上述的教导,可以得到多种修改和变形。上述实施方式的选择和描述是为了更好的解释原理以及实际的应用,从而使得本领域技术人员更好的使用该实施方式以及适于具体使用考虑的各种不同的变形的实施方式。

Claims (10)

1.一种显示设备,其特征在于,包括:
显示器,被配置为显示图像;
摄像模组,被配置为采集图像,所述摄像模组包括镜头和图像传感器,所述镜头用于拍摄图像,马达用于控制所述镜头移动,所述图像传感器用于将所述镜头捕捉到的图像转换为可由所述显示器显示的图像;
分别与所述显示器和所述摄像模组连接的控制器,所述控制器被配置为:
获取所述镜头拍摄到的第一图像,以及拍摄所述第一图像时所述镜头与所述图像传感器之间的第一垂直距离;
当所述第一垂直距离小于参考垂直距离时,根据所述第一图像的第一像素高度和第一像素宽度对所述第一图像进行插值运算,得到校准图像,所述校准图像在所述显示器的预设位置显示,其中,所述参考垂直距离为所述镜头拍摄到的第一图像能够在所述显示器的预设位置显示时,所述镜头与所述图像传感器之间的最远距离。
2.根据权利要求1所述的设备,其特征在于,当所述镜头与所述图像传感器之间的距离为所述参考垂直距离时,所述镜头拍摄到的参考图像在所述显示器的所述预设位置显示,所述控制器具体被配置为:
根据所述参考图像的尺寸、第一数据和所述参考垂直距离确定所述第一图像的第一像素高度和第一像素宽度,所述第一数据至少包括拍摄所述第一图像时驱动所述摄像模组中马达移动的第一电流值,所述马达在第一电流的驱动下移动,当所述马达处于不同位置时,所述摄像模组拍摄得到不同的图像。
3.根据权利要求2所述的设备,其特征在于,所述第一数据还包括所述镜头与所述图像传感器之间的初始垂直距离、所述马达的弹力系数,其中所述初始垂直距离为所述摄像模组未采集图像时所述镜头与所述图像传感器之间的垂直距离。
4.根据权利要求3所述的设备,其特征在于,所述控制器具体被配置为:
根据公式PL2=(H0+k1I)×PL1/H确定所述第一像素高度;
其中,PL2代表所述第一像素高度,H0代表所述初始垂直距离,k1代表所述马达的弹力系数,I代表所述第一电流值,PL1代表所述参考像素高度,H代表所述参考垂直距离。
5.根据权利要求3所述的设备,其特征在于,所述控制器具体被配置为:
根据公式Pw2=(H0+k1I)×Pw1/H确定所述第一像素宽度;
其中,Pw2代表所述第一像素宽度,H0代表所述初始垂直距离,k1代表所述马达的弹力系数,I代表所述第一电流值,Pw1代表所述参考像素宽度,H代表所述参考垂直距离。
6.根据权利要求2-5任一项所述的设备,其特征在于,所述控制器具体被配置为:
根据公式I=k2Nadc确定所述第一电流值;
其中,I代表所述第一电流值,Nadc代表拍摄所述第一图像时,通过所述控制器中模数转换模块的电流值,k2代表所述控制器和所述模数转换模块之间的电流转换系数。
7.一种显示设备自动对焦成像的图像校准方法,其特征在于,应用于显示设备,所述方法包括:
获取镜头拍摄到的第一图像,以及拍摄所述第一图像时所述镜头与所述图像传感器之间的第一垂直距离;
当所述第一垂直距离小于参考垂直距离时,根据所述第一图像的第一像素高度和第一像素宽度对所述第一图像进行插值运算,得到校准图像,所述校准图像在所述显示器的预设位置显示,其中,所述参考垂直距离为所述镜头拍摄到的第一图像能够在所述显示器的预设位置显示时,所述镜头与所述图像传感器之间的最远距离。
8.根据权利要求7所述的方法,其特征在于,当所述镜头与所述图像传感器之间的距离为所述参考垂直距离时,所述镜头拍摄到的参考图像的在所述显示器的所述预设位置显示,所述当所述第一垂直距离小于参考垂直距离时,根据所述第一图像的第一像素高度和第一像素宽度对所述第一图像进行插值运算,得到校准图像之前,所述方法还包括:
根据所述参考图像的尺寸、第一数据和所述参考垂直距离确定所述第一图像的第一像素高度和第一像素宽度,所述第一数据至少包括拍摄所述第一图像时驱动摄像模组中马达移动的第一电流值,所述马达在第一电流的驱动下移动,当所述马达处于不同位置时,所述摄像模组拍摄得到不同的图像。
9.根据权利要求8所述的方法,其特征在于,所述第一数据还包括所述镜头与所述图像传感器之间的初始垂直距离、所述马达的弹力系数,其中所述初始垂直距离为所述摄像模组未采集图像时所述镜头与所述图像传感器之间的垂直距离。
10.根据权利要求9所述的方法,其特征在于,所述根据所述参考图像的尺寸、第一数据和所述参考垂直距离确定所述第一图像的第一像素高度包括:
根据公式PL2=(H0+k1I)×PL1/H确定所述第一像素高度;
其中,PL2代表所述第一像素高度,H0代表所述初始垂直距离,k1代表所述马达的弹力系数,I代表所述第一电流值,PL1代表所述参考像素高度,H代表所述参考垂直距离。
CN202110266930.1A 2021-03-11 2021-03-11 显示设备及显示设备自动对焦成像的图像校准方法 Active CN113242383B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110266930.1A CN113242383B (zh) 2021-03-11 2021-03-11 显示设备及显示设备自动对焦成像的图像校准方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110266930.1A CN113242383B (zh) 2021-03-11 2021-03-11 显示设备及显示设备自动对焦成像的图像校准方法

Publications (2)

Publication Number Publication Date
CN113242383A CN113242383A (zh) 2021-08-10
CN113242383B true CN113242383B (zh) 2022-04-29

Family

ID=77130210

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110266930.1A Active CN113242383B (zh) 2021-03-11 2021-03-11 显示设备及显示设备自动对焦成像的图像校准方法

Country Status (1)

Country Link
CN (1) CN113242383B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102789111A (zh) * 2011-05-19 2012-11-21 华晶科技股份有限公司 镜头校准***及其方法
CN106713897A (zh) * 2017-02-27 2017-05-24 驭势科技(北京)有限公司 双目相机以及用于双目相机的自校准方法
WO2018008236A1 (ja) * 2016-07-07 2018-01-11 マクセル株式会社 ヘッドアップディスプレイ装置
CN108921797A (zh) * 2018-06-14 2018-11-30 合肥市商巨智能装备有限公司 畸变图像的校准方法
JP2019144535A (ja) * 2018-02-15 2019-08-29 パナソニックIpマネジメント株式会社 撮像装置

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170230649A1 (en) * 2016-02-05 2017-08-10 Qualcomm Incorporated Calibration of hybrid auto focus (af) imaging systems
JP2019145958A (ja) * 2018-02-19 2019-08-29 キヤノン株式会社 撮像装置およびその制御方法ならびにプログラム
JP2020039082A (ja) * 2018-09-05 2020-03-12 セイコーエプソン株式会社 表示装置、表示システムおよび表示装置の制御方法
CN110248081A (zh) * 2018-10-12 2019-09-17 华为技术有限公司 图像捕捉方法及电子设备
CN112203071B (zh) * 2020-12-03 2021-04-23 深圳市当智科技有限公司 基于距离传感器水平校正的投影方法、***及存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102789111A (zh) * 2011-05-19 2012-11-21 华晶科技股份有限公司 镜头校准***及其方法
WO2018008236A1 (ja) * 2016-07-07 2018-01-11 マクセル株式会社 ヘッドアップディスプレイ装置
CN106713897A (zh) * 2017-02-27 2017-05-24 驭势科技(北京)有限公司 双目相机以及用于双目相机的自校准方法
JP2019144535A (ja) * 2018-02-15 2019-08-29 パナソニックIpマネジメント株式会社 撮像装置
CN108921797A (zh) * 2018-06-14 2018-11-30 合肥市商巨智能装备有限公司 畸变图像的校准方法

Also Published As

Publication number Publication date
CN113242383A (zh) 2021-08-10

Similar Documents

Publication Publication Date Title
CN111741372B (zh) 一种视频通话的投屏方法、显示设备及终端设备
CN111752518A (zh) 一种显示设备投屏方法及显示设备
CN112291599B (zh) 显示设备及调整摄像头角度的方法
WO2021031629A1 (zh) 显示设备和控制装置按键复用方法
CN111970548B (zh) 显示设备及调整摄像头角度的方法
CN112073798B (zh) 一种数据传输方法及设备
WO2022048203A1 (zh) 一种输入法控件的操控提示信息的显示方法及显示设备
CN112243141B (zh) 投屏功能的显示方法及显示设备
CN112188279A (zh) 一种频道切换方法和显示设备
CN112118400A (zh) 显示设备上图像的显示方法及显示设备
CN112866773A (zh) 一种显示设备及多人场景下摄像头追踪方法
CN112954424A (zh) 显示设备及摄像头启动方法
CN112199064A (zh) 一种浏览器应用与***平台的交互方法及显示设备
CN111954043A (zh) 一种信息栏显示方法及显示设备
WO2021218473A1 (zh) 一种显示方法及显示设备
CN112218156B (zh) 一种调节视频动态对比度的方法及显示设备
CN113242383B (zh) 显示设备及显示设备自动对焦成像的图像校准方法
CN113824870A (zh) 显示设备及摄像头角度调整方法
CN112261463A (zh) 显示设备及节目推荐方法
CN114390190A (zh) 显示设备及监测应用启动摄像头的方法
CN112017415A (zh) 虚拟遥控器的推荐方法、显示设备及移动终端
CN111931692A (zh) 显示设备及图像识别方法
CN112073776A (zh) 语音控制方法及显示设备
CN112866768B (zh) 显示设备及信息提示方法
CN112153443B (zh) Pts获取方法和显示设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant