CN105939459A - 显示装置以及图像显示方法 - Google Patents

Abstract

本发明涉及显示装置以及图像显示方法。在具备摄像机部(3)和监视器(4)的显示装置(1)中，取得表示拍摄装置(101)的摄影范围的摄影范围信息(G1)。在由摄像机部(3)拍摄到的图像(G2)中设定与所述摄影范围信息(G1)所表示的摄影范围相当的显示对象区域(C)。以后，使监视器(4)显示由摄像机部(3)拍摄的图像内的所述显示对象区域(C)中的部分图像。由此，即使不使拍摄装置(101)进行给定的帧速率下的被拍摄对象的拍摄以及拍摄到的图像的发送，也能实现实时取景显示。

Description

显示装置以及图像显示方法

技术领域

本发明涉及显示拍摄图像的显示装置以及图像显示方法。

背景技术

以往，存在很多组件型的拍摄装置，该组件型的拍摄装置不具有显示图像的监视器，主要由摄影镜头和拍摄元件构成，将取得的图像提供给外部的显示装置。

另外，在日本专利第5541429号公报中记载了如下技术：将拍摄装置所取得(拍摄)的图像以无线方式发送给便携电话等显示装置，在显示装置中实现实时取景显示，并通过来自显示装置的操作使拍摄装置进行摄影动作，将取得的摄影图像存储在拍摄装置或显示装置中。

根据相关的技术，例如在将拍摄装置安装在显示装置上使用时，能与一般的数字摄像机同样地一边确认构图一边进行摄影。

但是，上述技术的拍摄装置在显示装置进行实时取景显示的期间，与拍摄动作并行地将拍摄到的图像依次发送给显示装置，但由于电池容量远远小于一般的数字摄像机，所以存在连续工作时间大幅降低这样的问题。

发明内容

本发明的目的在于，提供能抑制外部的拍摄装置侧的电力消耗并能再现该外部的拍摄装置的拍摄范围的显示装置、图像显示方法。

本发明所涉及的显示装置的特征在于，具备：拍摄单元；显示单元；取得单元，其取得表示外部的拍摄装置的摄影范围的摄影范围信息；设定单元，其在通过所述拍摄单元拍摄到的图像中设定与通过所述取得单元取得的摄影范围信息所表示的摄影范围相当的区域；和第1显示控制单元，其使所述显示单元显示与通过所述设定单元设定的区域对应的图像。

另外，本发明所涉及的图像显示方法的特征在于，包括：取得步骤，取得表示外部的拍摄装置的摄影范围的摄影范围信息；设定步骤，在由拍摄部拍摄到的图像中设定与在所述取得步骤中取得的摄影范围信息所表示的摄影范围相当的区域；和显示控制步骤，使显示部显示在所述设定步骤中设定的区域中的图像。

附图说明

图1A是表示本发明的实施方式所涉及的显示装置的图，是表示组件型的拍摄装置的安装状态的背面侧的外观立体图。

图1B是表示本发明的实施方式所涉及的显示装置的图，是显示装置的正面侧的外观立体图。

图2是表示显示装置和拍摄装置的电气构成的方框图。

图3是表示本发明所涉及的显示装置的动作的流程图。

图4是表示图3的初始设定处理的流程图。

图5是表示第1捕获图像与第2捕获图像之间的关系的图。

图6是表示在基于代替显示功能的实时取景显示时显示于监视器的部分图像的图。

具体实施方式

以下，说明本发明的实施方式。图1A是表示本发明所涉及的显示装置1的图，是安装了组件型的拍摄装置101的状态下的背面侧的外观立体图，图1B是显示装置1的正面侧的外观立体图。

本实施方式的显示装置1具体由作为便携信息终端而一般普及的智能手机实现，显示装置1具有薄板状的主体2，如图1A所示，在主体2的背面侧设置摄像机部3，如图1B所示，在主体2的表面侧设置包含触摸面板的监视器4和通话用的扬声器5。

拍摄装置101在显示装置1上装卸自由，如图1A所示，例如使用专用或通用的配件(未图示)与所述摄像机部3分离地安装在显示装置1的主体2的大致中央部。拍摄装置101主要由以下部分构成：摄影镜头102、后述的拍摄元件、以及由电源开关和快门按钮等多个操作开关构成的操作部103。

另一方面，图2是表示显示装置1和拍摄装置101的电气构成的主要部分的方框图。

首先，说明显示装置1的电气构成。如图所示，显示装置1具有控制部11和拍摄部12、显示部13、存储部14、无线通信部15、输入部16、电源部17这些各部分。

控制部11由未图示的CPU(Central Processing Unit)及其***电路等、保存了程序的ROM(Read Only Memory)、工作用的RAM(Random Accessmemory)等构成。控制部11按照上述ROM中存储的程序、以及存储部14中存储的各种应用程序来控制显示装置1的各部分，执行后述的各种处理。

拍摄部12由经由设置于所述摄像机部3的摄影镜头来拍摄被拍摄对象的CCD(Charge Coupled Device：电荷耦合器件)或CMOS(Complementary Metal Oxide Semiconductor，互补金属氧化物半导体)等拍摄元件及其驱动电路、AFE(Analog Front End，模拟前端)等构成。拍摄部12在对显示装置1设定摄像机模式的期间，将从上述拍摄元件输出的拍摄信号放大并变换成数字信号，提供给控制部11。

并且，在显示装置1作为摄像机起作用时，从拍摄部12提供给控制部11的拍摄信号在控制部11中被实施了多级的信号处理后，被提供给由所述监视器4及其驱动电路构成的显示部13，在所述监视器4中作为实时取景图像显示。另外，在摄影时，基于从拍摄部12提供的拍摄信号，由控制部11生成记录用的图像数据，在通过JPEG(Joint Photographic ExpertGroup，联合图像专家组)等方式进行压缩后存储在存储部14中。

存储部14是闪速存储器等内置的半导体存储器，存储以下内容：控制部11在控制显示装置1的各部分时所使用的基本的控制程序、用于在显示装置1中实现各种功能的前述的应用程序、以及在控制部11中被压缩的图像数据即摄影图像的数据等。在上述应用程序中包含能够进行基于显示装置1的操作的所述拍摄装置101中的摄影的给定的应用程序(以下称为远程应用)。

无线通信部15由用于与所述拍摄装置101进行近距离无线通信的通信电路等构成，如后述那样从拍摄装置101接收图像数据，或向拍摄装置101发送操作信号。另外，在本实施方式中，由无线通信部15进行的近距离无线通信基于Bluetooth(注册商标)。

输入部16由电源开关、附加在所述监视器4上的触摸面板构成。

电源部17由电源电池(例如镍氢电池等充电电池)以及DC/DC转换器等构成，对显示装置1的各部分提供各自所需要的电力。

另外，在显示装置1中，为了进行电话通信，包含麦克风，并具有对从麦克风输入的声音进行调制并发送的声音输入电路、发送电路以及对接收到的声音信号进行接收并进行解码再生的接收电路、包含所述扬声器5的再生电路等，关于这些周知的电路，省略图示以及说明。

接下来说明拍摄装置101的电气构成。如图2所示，拍摄装置101具有控制部111、和拍摄部112、存储部113、无线通信部114、输入部115、电源部116这些各部分。

控制部111由未图示的CPU及其***电路等、保存了程序的ROM、工作用的RAM等构成。控制部111按照上述ROM中存储的程序来控制拍摄装置101的各部分，并执行后述的各种处理。

拍摄部112由经由所述摄影镜头102来拍摄被拍摄对象的CCD或CMOS等拍摄元件及其驱动电路、AFE等构成。拍摄部112在电源接通的期间，将从上述拍摄元件输出的拍摄信号放大并变换成数字信号，提供给控制部111。

控制部111对从拍摄部112提供的拍摄信号实施多级的信号处理而生成图像数据，在处于摄影待机状态的期间，经由无线通信部114提供给所述显示装置1。另外，在摄影时，控制部111生成记录用的图像数据，并将其通过JPEG等方式进行压缩，作为静止图像文件存储在存储部14中。

存储部113由闪速存储器等内置的半导体存储器、在拍摄装置101上装卸自由的卡片型存储器等构成。

无线通信部114由用于与所述显示装置1进行近距离无线通信的通信电路等构成，将通过控制部111生成的图像数据发送给所述显示装置1，或者接收从显示装置发送的操作信号。

输入部115由所述操作部103中的电源开关等多个操作开关构成。

电源部116由电源电池(例如镍氢电池等充电电池)以及DC/DC转换器等构成，对拍摄装置101的各部分提供各自所需要的电力。

并且，在本实施方式的所述显示装置1中，用户通过所述触摸面板等的操作来启动前述的远程应用，由此能通过来自显示装置1的操作进行利用拍摄装置101的摄影。

以下说明启动了远程应用时的显示装置1的动作。另外，在此，以下述事项作为前提：显示装置1和拍摄装置101是进行了Bluetooth(注册商标)的配对(pairing)的状态，并且利用拍摄装置101的摄影是静止图像摄影。

图3、图4是表示在启动了远程应用时显示装置1的控制部11所执行的处理的内容的流程图。

如图3所示，控制部11与远程应用的启动一起开始处理，立即执行图4所示的初始设定处理(步骤S1)。另外，在以下的处理说明中，将拍摄装置101称作远程摄像机，将显示装置1所具有的摄像机部3称作自机摄像机。

如图4所示，在初始设定处理中，控制部11向远程摄像机(拍摄装置101)请求捕获图像的发送，并由自机摄像机取得捕获图像(步骤S101)。更具体地，向远程摄像机发送请求被拍摄对象的拍摄、以及所取得的捕获图像的发送的请求信号，与此并行地，使拍摄部12拍摄被拍摄对象而取得捕获图像，将其存储在所述工作用的RAM中。

然后，控制部11接收对应于所述请求而从远程摄像机送来的捕获图像，将其作为表示远程摄像机的摄影范围的摄影范围信息而存储在所述工作用的RAM中(步骤S102)。

图5是表示通过上述处理在大致相同的定时下拍摄到的远程摄像机的捕获图像(以下称作第1捕获图像)G1与自机摄像机的捕获图像(以下称作第2捕获图像)G2之间的关系的图。另外，在本实施方式中，以如图所示那样自机摄像机的视角大于远程摄像机的视角作为前提。

接着，控制部11在所述第1捕获图像G1中设定基准区域A(步骤S103)。相关的基准区域A是第1捕获图像G1的中心O的周边区域，是具有预先决定的纵向以及横向的像素尺寸的区域。

接下来，控制部11针对由自机摄像机取得的第2捕获图像G2，使用公知的图像处理技术搜索与上述的基准区域A对应的如图5所示那样的特定区域B(步骤S104)。在相关的特定区域B的搜索时，控制部11例如一边使基准区域A的部分图像的尺寸进行变化一边在第2捕获图像G2中依次地设定对象区域，比较部分图像和对象区域中的被拍摄对象的轮廓、颜色等，将两者一致时的对象区域设为上述特定区域B。

接下来，控制部11在特定区域B的搜索成功的情况下，即在如图5所例示的那样在第2捕获图像G2中存在特定区域B的情况下，且是能判断为如图1A所示那样安装有拍摄装置101时(步骤S105：“是”)，取得第2捕获图像G2中的特定区域B的中心O的坐标位置(步骤S106)。

进一步地，控制部11基于所取得的特定区域B的中心O的坐标位置和对特定区域B进行搜索时的基准区域A的尺寸(或缩小倍率)来设定显示对象区域C，并存储表示图像内的显示对象区域C的位置以及大小的区域信息(步骤S107)。即，控制部11在第2捕获图像G2的整个区域内将与第1捕获图像G1相当的区域即与远程摄像机的摄影范围相当的区域设定为显示对象区域C，并存储其区域信息。区域信息例如是显示对象区域C的四角的坐标位置等。另外，图5是为了方便而示出在显示对象区域C的中心P与第2捕获图像G2的中心Q之间出现了偏离这一情况的图。

然后，控制部11将代替显示功能设为有效(步骤S108)，并结束初始设定处理而返回到图3的处理。在此，代替显示功能是在进行安装有拍摄装置101的状态下的摄影的假设下设置的功能。更具体地，是如后述那样取代由远程摄像机取得的图像而将由自机摄像机取得的图像作为实时取景图像在所述监视器4中进行实时取景显示的功能。

另外，与上述情况不同，控制部11在从第2捕获图像G2中搜索前述的特定区域失败了的情况下，即在判断为未安装拍摄装置101时(步骤S105：“否”)，立即将所述代替显示功能设为无效(步骤S109)，并结束初始设定处理而返回到图3的处理。

继续上述情况，控制部11在通过初始设定处理将代替显示功能设为有效时(步骤S2：“是”)，首先对远程摄像机(拍摄装置101)指示向通信模式的节电模式移转(步骤S3)。在此，所谓节电模式，是指仅隔规定的时间间隔才进行与显示装置1间的通信确认的模式(也称作空闲模式(idle mode)、呼吸模式(Sniff mode))，在相关的处理时，控制部11对远程摄像机发送指示向通信模式的节电模式切换的指示信号。

然后，控制部11开始自机摄像机中的拍摄动作(步骤S4)，并且开始以下处理：从拍摄到的图像中切出由前述的区域信息表示的区域的部分图像G3并向所述监视器4进行显示(步骤S5)。即，控制部11如图6所示那样开始以下的实时取景显示：仅将按每帧取得的图像G21的显示对象区域C的图像数据提供给所述显示部13，从拍摄到的图像中切出部分图像G3，将其作为实时取景图像在所述监视器4中依次进行全画面显示。

另一方面，与上述不同，在初始设定处理中将代替显示功能设为无效时(步骤S2：“否”)，控制部11对远程摄像机请求给定的帧速率下的拍摄、以及实时取景图像的发送开始(步骤S6)。

然后，控制部11开始从远程摄像机(拍摄装置101)送来的每帧的实时取景图像的接收、以及该实时取景图像向所述监视器4的显示(步骤S7)。即，开始以下的实时取景显示：从远程摄像机依次接收实时取景图像，将其向所述监视器4显示。

以后，在进行上述任一种实时取景显示的期间，即，在摄影待机状态下，控制部11确认有无用户进行的来自所述触摸面板等的摄影指示，若有摄影指示(步骤S8：“是”)，则对远程摄像机发送指示摄影的指示信号(步骤S9)。由此，在远程摄像机中进行静止图像摄影。

另外，控制部11直到从用户有远程应用的结束指示为止都继续前述的实时取景显示(步骤S10：“否”)，在此期间，每当有用户进行的摄影指示时(步骤S8：“是”)，就向远程摄像机发送指示摄影的指示信号，使远程摄像机进行静止图像摄影。

之后，若在进行实时取景显示的期间从用户有远程应用的结束指示(步骤S10：“是”)，则控制部11在该时间点结束处理。

如以上所说明的那样，在本实施方式的显示装置1中，在使用安装在主体2上的拍摄装置101进行摄影时，进行将由拍摄部12拍摄到的图像的一部分作为实时取景图像来向监视器4显示的实时取景显示，即，进行基于代替显示功能的实时取景显示。

由此，在处于摄影待机状态的期间，即使不使拍摄装置101进行给定的帧速率下的被拍摄对象的拍摄、以及拍摄到的图像的发送，也能使用户一边与一般的数字摄像机同样地确认构图一边进行摄影。因此，能削减摄影待机状态下的拍摄装置101的消耗电力，能抑制摄影时的拍摄装置101的电力消耗并实现实时取景显示，即能再现拍摄装置101的拍摄范围。

另外，在判断为未安装拍摄装置101的情况下，与以往相同，将由拍摄装置101拍摄到的实时取景图像向监视器4显示。因此，即使在拍摄装置101与显示装置1分离的状态下也能使用户进行构图确认。

另外，仅在判断为安装有拍摄装置101的情况下，即，以安装有拍摄装置101为条件来进行基于代替显示功能的实时取景显示。因此，在安装有拍摄装置101时，能将由拍摄装置101拍摄到的实时取景图像即标准的实时取景图像向监视器4显示。

进一步地，由于在判断为未安装拍摄装置101的情况下，使拍摄装置101自动地开始给定的帧速率下的拍摄动作，因此不使用户进行直接操作拍摄装置101这样的烦杂的作业，就能实施基于代替显示功能的实时取景显示。

另外，根据在由拍摄部12拍摄到的第2捕获图像G2中是否搜索到与由拍摄装置101拍摄到的第1捕获图像G1的基准区域A对应的特定区域B来判断(确认)是否安装有拍摄装置101，自动地将代替显示功能设为有效或无效。因此，不使用户进行烦杂的操作，就能始终采用合适的方法来进行实时取景显示。

另外，在本发明的实施时，也可以与本实施方式不同，例如在显示装置1中设置当安装了拍摄装置101时对其进行机械检测或电检测的开关，通过相关的开关来确认有无安装拍摄装置101。进一步地，在本发明的实施时，也可以构成为用户能根据需要将代替显示功能设定为有效或无效。

另外，在本实施方式中，基于在与所述第2捕获图像G2大致相同的定时下拍摄到的第1捕获图像G1来确定从在进行基于代替显示功能的实时取景显示时拍摄到的图像中切出部分图像G3的显示对象区域C。因此，即使在使用通用的配件将拍摄装置101安装在显示装置1的主体2上等情况下，也能正确地设定显示对象区域C。

即，即使在安装时的拍摄装置101的摄影光轴与显示装置1中的摄像机部3的摄影光轴的偏离量和偏离方向、进而光轴方向的差异为未知的情况下，也能正确地设定显示对象区域C。同时，即使在拍摄装置101的摄影镜头102具有变焦功能的构成中，也能正确地设定显示对象区域C。

另外，在所述显示对象区域C的设定时，通过在第2捕获图像G2中搜索与作为第1捕获图像G1的一部分的被预先决定的基准区域(A)相当的特定区域(B)，来确定要设为所述显示对象区域C的区域。因此，例如与在第2捕获图像G2中搜索与第1捕获图像G1的整个区域相符的区域并确定要设为所述显示对象区域C的区域的情况相比，能高速地进行所述显示对象区域C的设定处理。

在此，在本实施方式中，说明了使用由拍摄装置101拍摄到的第1捕获图像G1作为表示拍摄装置101的摄影范围的摄影范围信息的情况。但是，所述摄影范围信息只要是能进行所述显示对象区域C的设定的信息即可。因此，所述摄影范围信息例如只要是使用专用的配件将拍摄装置101安装在显示装置1的主体2上的特定的信息，则即使是安装状态下的拍摄装置101的摄影光轴与显示装置1中的摄像机部3的摄影光轴的偏离量、偏离方向、光轴方向的差异也没关系。

另外，在本实施方式中，主要说明了将拍摄装置101的视角和显示装置1中的摄像机部3的视角固定的情况，但本发明只要是能在基于代替显示功能的实时取景显示前对摄像机部3设定比拍摄装置101的视角大的视角的构成，就能应用。

另外，在本实施方式中，构成为：以前述的显示对象区域C的设定为目的使拍摄装置101进行拍摄动作，从拍摄装置101取得成为所述摄影范围信息的第1捕获图像G1。但并不限于此，作为摄影范围信息来使用的图像也可以是在拍摄装置101正以给定的帧速率进行拍摄的期间取得的且被依次发送给显示装置1的实时取景图像。

在该情况下，例如在远程应用刚刚启动后，在显示装置1中，使拍摄装置101进行以下动作：以给定的帧速率进行拍摄，并依次发送所拍摄到的实时取景图像。然后，使显示装置1基于实时取景图像的接收间隔来进行与拍摄装置101的拍摄动作同步的拍摄动作，取得捕获图像，将与该捕获图像同时期地在拍摄装置101中拍摄到的任意实时取景图像作为所述摄影范围信息来使用即可。

另外，在此，主要说明了利用拍摄装置101的摄影是静止图像摄影的情况，但本发明并不限于静止图像摄影，也能在进行动态图像摄影的期间应用。另外，说明了由智能手机来实现本发明的显示装置的情况，但并不限于此，对于本发明来说，只要是具备拍摄单元、以及显示由该拍摄单元所拍摄到的实时取景图像的显示单元的设备，就能在任意的电子设备中实现。

以上说明了本发明的实施方式及其变形例，但只要是在能得到本发明的作用效果的范围内，就能适当对它们进行变更，变更后的实施方式也包含在权利要求书所记载的发明以及与该发明等同的发明的范围内。

Claims (12)

1.一种显示装置，其特征在于，具备：

拍摄单元；

显示单元；

取得单元，其取得表示外部的拍摄装置的摄影范围的摄影范围信息；

设定单元，其在通过所述拍摄单元拍摄到的图像中设定与通过所述取得单元取得的摄影范围信息所表示的摄影范围相当的区域；和

第1显示控制单元，其使所述显示单元显示与通过所述设定单元设定的区域对应的图像。

2.根据权利要求1所述的显示装置，其特征在于，

所述显示装置还具备通信单元，该通信单元与所述外部的拍摄装置进行通信，

所述取得单元经由所述通信单元从所述外部的拍摄装置取得所述摄影范围信息。

3.根据权利要求2所述的显示装置，其特征在于，

所述通信单元从所述外部的拍摄装置依次接收所述外部的拍摄装置所拍摄的图像，

所述第1显示控制单元使所述显示单元显示通过所述通信单元依次接收到的图像。

4.根据权利要求1所述的显示装置，其特征在于，

所述外部的拍摄装置构成为在装置主体上装卸自由。

5.根据权利要求4所述的显示装置，其特征在于，

所述显示装置还具备确认单元，该确认单元确认在装置主体上是否安装有所述外部的拍摄装置，

所述第1显示控制单元以通过所述确认单元确认到在装置主体上安装有所述外部的拍摄装置这一情况为条件，来使所述显示单元显示通过通信单元依次接收到的图像。

6.根据权利要求5所述的显示装置，其特征在于，

所述显示装置还具备请求单元，该请求单元响应于通过所述确认单元确认到在装置主体上未安装所述外部的拍摄装置这一情况，经由所述通信单元向所述外部的拍摄装置请求每规定时间的拍摄动作、以及通过该拍摄动作拍摄到的图像的发送的开始。

7.根据权利要求5所述的显示装置，其特征在于，

在通过所述取得单元取得的摄影范围信息所表示的摄影范围包含在通过所述拍摄单元拍摄的图像的摄影范围内的情况下，所述确认单元判断为安装有所述外部的拍摄装置。

8.根据权利要求2所述的显示装置，其特征在于，

所述取得单元经由所述通信单元向所述外部的拍摄装置请求拍摄动作以及通过该拍摄动作拍摄到的图像的发送，并且取得响应于该请求而从所述外部的拍摄装置发送的图像，作为所述摄影范围信息。

9.根据权利要求2所述的显示装置，其特征在于，

所述设定单元从通过所述拍摄单元在与所述第1图像相同或大致相同的定时下拍摄到的第2图像的内容中确定与通过所述取得单元作为所述摄影范围信息而取得的第1图像相当的区域，将确定出的区域设定为所述被设定的区域。

10.根据权利要求9所述的显示装置，其特征在于，

所述设定单元通过在所述第2图像中搜索与所述第1图像的被预先决定的基准区域相当的特定区域，从而在所述第2图像中确定与所述第1图像相当的区域，将确定出的区域设定为所述被设定的区域。

11.根据权利要求9所述的显示装置，其特征在于，

所述显示装置还具备：

第2显示控制单元，其进行控制，使所述显示单元以能区别的方式显示通过所述取得单元作为所述摄影范围信息而取得的第1图像、和在与该第1图像相同或大致相同的定时下拍摄到的第2图像；和

调整单元，其在基于所述第2显示控制单元的显示后，对应于外部操作来调整所述第1图像的显示位置以及尺寸，

所述设定单元基于所述调整单元的所述第1图像的调整结果在所述第2图像中确定与所述第1图像相当的区域，将确定出的区域设定为所述被设定的区域。

12.一种图像显示方法，其特征在于，包括：

取得步骤，取得表示外部的拍摄装置的摄影范围的摄影范围信息；

设定步骤，在由拍摄部拍摄到的图像中设定与在所述取得步骤中取得的摄影范围信息所表示的摄影范围相当的区域；和

显示控制步骤，使显示部显示在所述设定步骤中设定的区域中的图像。