CN102970568A - 视频处理装置以及视频处理方法 - Google Patents
视频处理装置以及视频处理方法 Download PDFInfo
- Publication number
- CN102970568A CN102970568A CN2012101055375A CN201210105537A CN102970568A CN 102970568 A CN102970568 A CN 102970568A CN 2012101055375 A CN2012101055375 A CN 2012101055375A CN 201210105537 A CN201210105537 A CN 201210105537A CN 102970568 A CN102970568 A CN 102970568A
- Authority
- CN
- China
- Prior art keywords
- spectators
- relative importance
- ken
- importance value
- video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/302—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
- H04N13/31—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using parallax barriers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/302—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/366—Image reproducers using viewer tracking
- H04N13/368—Image reproducers using viewer tracking for two or more viewers
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
- G09G3/003—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to produce spatial visual effects
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
本发明提供一种可以根据观众的位置适当地显示立体视频的视频处理装置以及视频处理方法。根据实施方式,提供一种包括观众检测部、视域信息计算部、视域控制部的视频处理装置。所述观众检测部利用摄像机所拍摄的视频来检测观众的人数和观众的位置。所述视域信息计算部算出控制参数,以根据所述观众的人数和所述观众的位置来设定能立体观看在显示部上显示的多个视差图像的视域。所述视域控制部根据所述控制参数来设定所述视域。
Description
技术领域
本发明的实施方式涉及一种视频处理装置以及视频处理方法。
背景技术
近年来,观众可以不使用特殊的眼镜而裸眼观看立体视频的立体视频显示装置(所谓的裸眼3D电视)正在普及。该立体视频显示装置显示视点不同的多个图像。并且,这些图像的光线例如通过视差屏障、柱状透镜等控制输出方向,并引导向观众的双眼。如果观众的位置合适,则观众用左眼和右眼观看不同的视差图像,因此可以立体地识别视频。
但是,裸眼3D电视具有由于观众的位置不同而无法看见立体视频的问题。
发明内容
本发明要解决的课题是提供一种可以根据观众的位置适当地显示立体视频的视频处理装置和视频处理方法。
根据实施方式,提供一种包括观众检测部、视域信息计算部、视域控制部的视频处理装置。上述观众检测部利用摄像机所拍摄的视频来检测观众的人数和观众的位置。上述视域信息计算部算出控制参数,以根据上述观众的人数和上述观众的位置来设定能立体观看在显示部上显示的多个视差图像的视域。上述视域控制部根据上述控制参数来设定上述视域。
根据上述结构的视频处理装置,可以根据观众的位置适当地显示立体视频。
附图说明
图1是第一实施方式所涉及的视频显示装置100的外观图。
图2是表示第一实施方式所涉及的视频显示装置100的概略结构的框图。
图3是从上方观察液晶面板1和柱状透镜2的一部分的示意图。
图4是表示计算视域信息的方法的一个例子的示例图。
图5是表示第一实施方式所涉及的视频显示装置100的控制器10的处理动作的一个例子的流程图。
图6是表示第二实施方式所涉及的视频显示装置100a的概略结构得框图。
图7是表示第二实施方式所涉及的视频显示装置100a的控制器10a的处理动作的一个例子的流程图。
图8是表示视域设定的具体示例的图。
图9是基于观看时间设定优先度的示例的说明图。
图10是表示优先度表的一个例子的示例图。
图11是表示基于优先度表来设定优先度的例子的示例图。
图12是表示提示观众与该观众的优先度的关系的例子的示例图。
图13是表示作为图2的变形例的视频显示装置100’的概略结构的框图。
具体实施方式
下面,参考附图对本发明所涉及的实施方式进行具体说明。
(第一实施方式)
图1是第一实施方式所涉及的视频(映像)显示装置100的外观图,图2是表示其概略结构的框图。视频显示装置100包括液晶面板1、柱状透镜2、摄像机3、受光部4以及控制器(视频处理装置)10。
液晶面板(显示部)1例如是55英寸大小的面板,在水平方向上配置11520(=1280*9)个像素,在垂直方向上配置720个像素。另外,在各像素内,三个子像素、即R子像素、G子像素和B子像素形成在垂直方向上。从设置在背面的背光装置(未图示)向液晶面板1上照射光。各像素使与控制器10提供的视差图像信号(后述)对应的亮度的光透过。
柱状透镜(开口控制部)2具有沿着液晶面板1的水平方向配置的多个凸部,其数量是液晶面板1的水平方向像素的1/9。并且,柱状透镜2粘贴在液晶面板1的表面上,以使水平方向配置的九个像素对应一个凸部。透过了各像素的光具有定向性地从凸部的顶点附近向特定的方向输出。
本实施方式的液晶面板1可以通过三视差以上的多视差方式(积分成像方式)或二视差方式来显示立体视频,另外也可以显示通常的二维视频。
在以下的说明中,对于与柱状透镜2的各凸部对应地设置九个像素、可以采用九视差的多视差方式的例子进行说明。多视差方式是在与各凸部对应的九个像素上分别显示第一至第九视差图像。第一至第九视差图像是从沿着液晶面板1的水平方向排列的九个视点分别看到被摄体的图像。观众通过柱状透镜2分别用左眼看第一至第九视差图像中的一个视差图像,用右眼看另一个视差图像,从而可以看见立体地看到视频。根据多视差方式,视差的数量越多,越可以扩展视域。视域是指从液晶面板1的前方看液晶面板1时,能够立体地看到视频的区域。
另一方面,在二视差方式中,分别在与各凸部对应的九个像素中的四个上显示右眼用视差图像,在另外五个上显示左眼用视差图像。左眼用和右眼用视差图像是指在水平方向上排列的两个视点中,从左侧的视点和右侧的视点分别看到被摄体时的图像。观众通过柱状透镜2,分别用左眼看左眼用视差图像,用右眼看右眼用视差图像,从而能够立体地看到视频。根据二视差方式,虽然比多视差方式更容易得到所显示视频的立体感,但视域比多视差方式更窄。
液晶面板1也可以在与各凸部对应的九个像素上显示相同的图像,从而显示二维图像。
另外,在本实施方式中,根据柱状透镜2的凸部与所显示的视差图像的相对位置关系、即如何在与各凸部对应的九个像素上显示视差图像,可以对视域进行可变控制。下面,以多视差方式为例,对视域的控制进行说明。
图3是从上方观察液晶面板1和柱状透镜2的一部分的示意图。该图中的网点区域表示视域,如果从视域看液晶面板1则可以立体地看到视频。其他区域是发生逆视或串扰(crosstalk)的区域,是难以立体看到视频的区域。
图3示出了如下所述的状况:根据液晶面板1与柱状透镜2的相对位置关系,更具体地说,是根据液晶面板1与柱状透镜2的距离或者液晶面板1与柱状透镜2的水平方向的偏差量,视域发生变化。
实际上,柱状透镜2高精度地定位并粘贴在液晶面板1上,因此,很难物理地改变液晶面板1与柱状透镜2的相对位置。
因此,在本实施方式中,通过使在液晶面板1的各像素上显示的第一至第九视差图像的显示位置错开,从而外观上改变液晶面板1与柱状透镜2的相对位置关系,由此进行视域的调整。
例如,相比于在与各凸部对应的九个像素上分别显示第一至第九视差图像的情况(图3的(a)),在将视差图像整体地向右侧错开而进行显示的情况下(图3的(b)),视域向左侧移动。相反,在将视差图像整体地向左侧错开而进行显示的情况下,视域向右侧移动。
另外,在水平方向的中间附近,不使视差图像错开,而是越是液晶面板1的外侧,越使视差图像大幅度地向外侧错开而进行显示时(图3的(c)),视域向靠近液晶面板1的方向移动。此外,错开的视差图像与未错开的视差图像之间的像素或错开量不同的视差图像之间的像素根据周围的像素适当地内插(補同)即可。另外,与图3的(c)相反,在水平方向的中间附近,不使视差图像错开,而是越是液晶面板1的外侧,越使视差图像大幅度地向中间侧错开而进行显示时,视域向远离液晶面板1的方向移动。
这样,通过使视差图像的整体或一部分错开而进行显示,可以使视域相对于液晶面板1向左右方向或前后方向移动。在图3中为了简化说明只显示了一个视域,实际上,在视听区域P存在多个视域21,这些视域联动地移动。后述的图2的控制器10来控制视域。此外,由于发生逆视或串扰,视域21以外的视听区域是很难看到良好的立体视频的逆视区域22。
回到图1,摄像机3以规定的仰角安装在液晶面板1的下部中间附近,用于拍摄液晶面板1的前方的规定范围。所拍摄的视频被提供给控制器10,用于检测观众的位置、观众的面孔等与观众相关的信息。摄像机3可以拍摄动态图像和静止图像中的任意一种。
受光部4例如设置在液晶面板1的下部的左侧。并且,受光部4接收从观众使用的遥控器发出的红外线信号。该红外线信号包括:表示是显示立体视频还是二维视频、在显示立体视频时是采用多视差方式还是二视差方式、是否进行视域控制等的信号。
下面,对控制器10的构成要素的详细情况进行说明。如图2所示,控制器(视频处理装置)10具有调谐解码器11、视差图像转换部12、观众检测部13、视域信息计算部14以及图像调整部15。控制器10例如是作为一个IC(Integrated Circuit:集成电路)而安装的,被配置在液晶面板1的背面。当然,控制器10的一部分也可以通过软件来安装。
调谐解码器(接收部)11对输入的广播波进行接收以及选台,对编码后的视频信号进行解码。在广播波上叠加了电子节目单(EPG)等数据广播的信号的情况下,调谐解码器11对其进行提取。或者调谐解码器11不接收广播波,而是从光盘再生装置或个人电脑等视频输出设备接收编码后的视频信号,并对其进行解码。解码后的信号也称为基带视频信号,被提供给视差图像转换部12。另外,在视频显示装置100不接收广播波、而是专门显示从视频输出设备接收的视频信号的情况下,也可以设置仅具有解码功能的解码器作为接收部,从而取代调谐解码器11。
调谐解码器11接收的视频信号也可以是二维的视频信号,也可以是以帧封装(frame-packing:FP)、并列(side by side-SBS)或者顶底(top-and-bottom:TAB)格式等包括左眼用和右眼用的图像的三维视频信号。另外,视频信号也可以是包括三视差以上的图像的三维视频信号。
为了立体地显示视频,视差图像转换部12将基带视频信号转换成多个视差图像信号并提供给图像调整部15。视差图像转换部12根据采用多视差方式还是二视差方式,而处理内容不同。另外,根据基带视频信号是二维视频信号还是三维视频信号,视差图像转换部12的处理内容不同。
在采用二视差方式的情况下,视差图像转换部12生成分别与左眼用和右眼用视差图像对应的左眼用和右眼用视差图像信号。更具体的内容如下所述。
在采用二视差方式、且输入了包括左眼用和右眼用图像的三维视频信号的情况下,视差图像转换部12生成可在液晶面板1上显示的形式的左眼用和右眼用视差图像信号。另外,在输入了包括三个以上图像的三维视频信号的情况下,例如使用其中的任意两个,视差图像转换部12生成左眼用和右眼用视差图像信号。
针对于此,在采用二视差方式、且输入了不包括视差信息的二维视频信号的情况下,视差图像转换部12基于图像信号中的各像素的深度值生成左眼用和右眼用视差图像信号。深度值是表示各像素显示为相对于液晶面板1看起来靠前到何种程度或者靠后到何种程度的值。深度值可以预先附加在视频信号上,也可以基于视频信号的特征进行动作检测、构图识别和人脸检测等而生成深度值。在左眼用视差图像的情况下,需要看起来靠前的图像比看起来靠后的图像向右侧错位显示。因此,视差图像转换部12对视频信号中的看起来靠前的图像进行向右侧错开的处理而生成左眼用视差图像信号。深度值越大,错开量就越大。
另一方面,在采用多视差方式的情况下,视差图像转换部12生成与第一至第九视差图像分别对应的第一至第九视差图像信号。更具体的内容如下所述。
在采用多视差方式、且输入了二维视频信号或包括八视差以下的图像的三维视频信号的情况下,视差图像转换部12与通过二维视频信号生成左眼用和右眼用视差图像信号时一样,基于深度信息生成第一至第九视差图像信号。
在采用多视差方式、且输入了包括九视差的图像的三维视频信号的情况下,视差图像转换部12利用该视频信号生成第一至第九视差图像信号。
观众检测部13利用摄像机3拍摄的视频检测观众,识别其检测到的观众的相关信息(例如观众的数量、位置、面孔信息等。以下总称为“观众识别信息”)。另外,即使观众移动,观众检测部13也可以进行追踪。因此,也可以把握每一个观众对应的视听时间。
观众的位置信息例如表示为以液晶面板1的中央作为原点的X轴(水平方向)、Y轴(垂直方向)以及Z轴(与液晶面板1正交的方向)上的位置。具体而言,观众检测部13首先通过摄像机3拍摄到的视频来检测面孔,从而识别观众。然后,观众检测部13根据视频中的观众的位置算出X轴和Y轴上的位置,根据面孔的大小算出Z轴上的位置。观众的数量例如可以根据所检测到的观众的面孔数量来获得。在有很多观众的情况下,观众检测部13也可以检测预先确定的数量、例如十个的观众。在这种情况下,当检测到的面孔数量大于十时,则例如按照与液晶面板1的距离从近到远的顺序、即Z轴上的位置从小到大的顺序来检测十个观众的位置。另外,也可以只将面向液晶面板1的人作为观众检测。
此外,对于位置检测部13检测观众位置的方法没有特别限制,摄像机3可以是红外线摄像机,也可以使用声波来检测观众的位置。
视域信息计算部14计算用于根据观众的人数和观众的位置来设定视域的控制参数。该控制参数例如是图3中说明的视差图像的错开量,是一个参数或多个参数的组合。并且,视域信息计算部14向图像调整部15提供算出的控制参数。
图4是表示计算视域信息的方法的一个例子的示例图。视域信息计算部14预先确定几个可设定的视域的模式。然后,视域信息计算部14对于各视域计算出视域与所检测到的观众重合的面积,将该面积为最大的视域判断为适当的视域。在图4的例子中,预先确定的图4的(a)至图4的(e)的五个视域(网点区域)模式(pattern)中,在使视域向着液晶面板1设定在左侧的图4的(b)中,观众20与视域的重合面积最大。因此,视域信息计算部14将图4的(b)的视域的模式判断为适当的视域。在这种情况下,用于以图4的(b)的模式来显示视差图像的控制参数被提供给图2的图像调整部15。
更具体地说,为了设定期望的视域,视域信息计算部14也可以使用将控制参数与通过该控制参数而设定的视域相对应的视域数据库。视域信息计算部14可以通过检索视域数据库,找到可以收进所选择的观众的视域。
图像调整部(视域控制部)15在为了控制视域而根据算出的控制参数对视差图像信号进行错开或内插的调整之后,提供给液晶面板1。液晶面板1显示与调整后的视差图像信号对应的图像。
图5是表示第一实施方式所涉及的图像显示装置100的控制器10的处理动作的一个例子的流程图。
首先,观众检测部13利用摄像机3拍摄的视频检测观众的人数和位置(步骤S11)。然后,根据所检测到的观众的人数和位置如下所述地设定视域。
如果观众为一人(步骤S12的是),视域信息计算部14则算出控制参数,以在该观众的位置上设定视域(步骤S13)。然后,图像调整部15根据控制参数调整视差图像信号(步骤S14),在液晶面板1上显示与调整后的视差图像信号所对应的视差图像。由此,设定适合于该观众的视域。
另一方面,如果观众为多人(步骤S12的否),视域信息计算部14不改变视域,不更新控制参数,以保持当前的视域。其结果是,也不更新图像调整部15的处理,视域被保持在规定位置。
例如,在多人观看视频的过程中其中一人进行了移动的情况下,假设视域追踪进行了移动的人,则有静止观看视频的其他观众的视听状态变差的可能性。相反,在本实施方式中,由于视域保持固定,因此对于静止观看图像的观众设定了适当的视域。
这样,在第一实施方式中,检测观众的人数,如果观众是一个人,则设定适合于该观众的视域,从而设定适合于观众的视域。而如果观众是多人,则不更新视域,因此可以防止在观众是多人的情况下视域进行不必要的变化。
(第二实施方式)
上述的第一实施方式是在观众为多人的情况下不更新视域的情况。针对于此,在第二实施方式中,如果观众是多人,则在根据规定的优先度设置规则来更新视域。
图6是表示第二实施方式所涉及的视频显示装置100a的概略结构的框图。在图6中,对于与图2通用的构成部分标注了相同的符号,下面,以不同点为中心进行说明。
图6的视频显示装置100a的控制器10a还具有优先度设定部16和存储部17。优先度设定部16在观众为多人的情况下根据规定的优先度设置规则对每个观众设定优先度。关于优先度设置规则的例子将在后面进行说明。存储部17用于设定优先度。
图7是表示第二实施方式所涉及的视频显示装置100a的控制器10a的处理动作的一个例子的流程图。
首先,观众检测部13使用摄像机3所拍摄的视频,检测观众的人数和位置(步骤S21)。然后优先度设定部16对每个观众设定优先度(步骤S22)。在观众是一个人的情况下,优先度设定部16将该观众的优先度设定为最高即可。在观众是多人的情况下,则根据优先度设置规则对各观众设定优先度。并向视域信息计算部14提供各观众的优先度和位置。
然后,视域信息计算部14根据优先度算出控制参数(步骤S23)。例如,视域信息计算部14算出控制参数,以将视域设定在优先度最高的观众的位置上。或者,视域信息计算部14也可以为了如下所述地按照优先度高的顺序将尽可能多的观众收进视域而算出控制参数。即、首先尝试计算用于排除优先度最低的观众而使其余的观众全部收进视域内的控制参数。如果即使这样也不能算出控制参数,则排除其余的观众中优先度最低的观众,尝试控制参数的计算。通过重复该做法,可以算出用于优先度相对高的观众优先收进视域内的控制参数。
图像调整部15根据这样计算出的控制参数来调整视差图像信号(步骤S24),在液晶面板1上显示与调整后的视差图像信号对应的视差图像。
图8是表示本实施方式的视域设定的具体例子的示例图。
图8的(a)示出了观众为一个人时的例子。如果观众是一个人,则视域Sa设定在该观众的位置上。
图8的(b)和(c)示出了观众为多人时的例子。两个图均示出了视频显示装置100、观众A至D、所设定的视域Sb、Sc,观众的人数和位置相同。另外,各观众的优先度从高到低为观众A、B、C、D。
图8的(b)是在步骤S23中,视域信息计算部14算出控制参数以将视域设定在优先度最高的观众的位置的例子。在这种情况下,为了使优先度最高的观众A能够观看最高品质的视频,以使观众A的位置在视域中央的方式来设定视域。不考虑优先度为第二位以后的观众。
图8的(c)是在步骤S23中,视域信息计算部14算出控制参数以按照优先度高的顺序将尽可能多的观众收进视域的例子。在这种情况下,虽然优先度最高的观众A偏离了视域的中央,但是,例如可以将优先度相对高的观众A和B两个人收进视域内。
下面,对优先度设置规则的例子进行说明。
作为第一个例子,可以从视听时间长的观众起按顺序设定优先度。这是因为越是视听时间长的观众,对该节目具有较高视听愿望的可能性越大。视听时间例如可以以内容开始的时间为基准。在视听广播波的情况下,例如可以通过调谐解码器11获取的电子节目单的信息把握内容的开始时刻。另外,视听时间可以存储在存储部17。
图9是基于视听时间设定的优先度的示例的说明图。在该图中,优先度高的观众记载在上面。
最初,在时刻t0只有观众A在视听、并被观众检测部13检测到该观众A时,将观众A的优先度设定为最高(图9的(a))。在时刻t1观众检测部13新检测到观众B时,由于观众A的视听时间更长,因此将观众B的优先度设定为低于观众A的优先度(图9的(b))。在时刻t2观众A进行移动,从而观众检测部13检测不到观众A时,则将观众B的优先度设定为高(图9的(c))。此时,存储在存储部17的观众A的视听时间归零。即使在时刻t3观众A返回,并由观众检测部13重新检测到观众A,但是,由于观众B的视听时间更长,因此将观众A的优先度设定为低于观众B的优先度(图9的(d))。
此外,如果观众检测部13未检测出观众的时间很短,也可以不将视听时间归零。
作为第二个例子,也可以预先将表示观众的信息和优先度的关系的优先度表存储在存储部17。观众的信息例如是观众的面孔。另外,观众检测部13可以利用摄像机3拍摄的视频来检测观众的面孔,优先度设定部16可以利用存储在存储部17的优先度表对各观众设定优先度。
图10是表示优先度表的一个例子。在该图中,预先按照观众A、B、C的顺序由高到低地设定优先度。观众A至C例如是一个家庭,观众A是母亲,观众B是孩子,观众C是父亲。此外,作为观众信息,实际上是注册了观众A至C的面孔等。
图11是表示基于优先度表设定优先度的例子的示例图。最初,在时刻t0只有观众A在视听、并被观众检测部13检测到该观众A时,将观众A的优先度设定为最高(图11的(a))。如果观众检测部13在时刻t1又新检测到观众B,由于观众A的优先度高(图10),因此将观众B的优先度设定为低于观众A的优先度(图11的(b))。如果在时刻t2观众A进行移动,观众检测部13检测不到该观众A,则将观众B的优先度设定得更高(图11的(c))。如果在时刻t3观众A返回,并由观众检测部13重新检测到该观众A,由于观众A的优先度更高(图10),因此不考虑视听时间,而将观众B的优先度设定为低于观众A的优先度(图11的(d))。
作为其他例子,优先度设定部16也可以根据观众的位置设定优先度。例如可以对离最合适的视听距离、即3H(H为液晶面板1的高度)位置越近的观众越是将优先度设定得更高,也可以对离液晶面板1位置越近的观众越是将优先度设定得更高。或者也可以对在液晶面板1的正面的观众设定更高的优先度。而且,也可以将手持遥控器的观众的优先度设定为最高。
此外,优先度设定部16也可以提示观众与该观众的优先度的关系。例如图12的(a)所示,如果改变观众的优先度,也可以将表示该内容的文本数据与视频重叠并在液晶面板1上显示。另外,如图12的(b)所示,也可以将摄像机3拍摄的图像的全部或一部分根据优先度改变观众的显示状态并在液晶面板1上显示。具体而言,可以以使优先度越高的观众颜色越深或根据优先度而改变色感(色味)的方式进行显示。或者可以按照优先度由高到低的顺序对规定数量的观众添加标记(标志)进行显示。
这样,在第二实施方式中,以对观众评定优先度的方式来设定视域,因此,存在有多个观众时,即使在例如一部分观众不能收进视域内的情况下,也可以将优先度高的观众收进视域内。
另外,在上述的各实施方式的图像显示装置中,示出了利用柱状透镜2使视差图像错开从而控制视域的例子,但也可以用其他方法控制视域。例如,可以将视差屏障设置为开口控制部来替代柱状透镜2。另外,图13是表示作为图2的变形例的图像显示装置100’的概略结构的框图。如该图所示,也可以不进行使视差图像错开的处理,而是在控制器10’内设置视域控制部15’来控制开口控制部2’。在这种情况下,将液晶面板1与开口控制部2’的距离、液晶面板1与开口控制部的水平方向的偏差量作为控制参数,通过控制在液晶面板1上显示的视差图像的输出方向来控制视域。图12的视频显示装置100,也可以适用于各实施方式。
上述实施方式中说明的视频处理装置的至少一部分可以由硬件构成,也可以由软件构成。在由软件构成的情况下,则将实现视频处理装置的至少一部分功能的程序存放在软磁盘或CD-ROM等记录介质上,使计算机读入并使其执行即可。记录介质不限于磁盘或光盘等可拆装的介质,也可以是硬盘装置或存储器等固定式的记录介质。
另外,也可以将实现视频处理装置的至少一部分功能的程序通过互联网等通信线路(也包括无线通信)进行发布。而且,也可以对该程序进行加密或调制,以压缩的状态通过互联网等有线线路或无线线路进行发布,或者存放在记录介质中进行发布。
虽然对本发明的实施方式进行了说明,但是,这些实施方式仅是为了说明本发明的示例,并不是用于限定本发明的范围。这里描述的新设备、方法以及***可以通过多种其他方式来体现。而且,在不超出本发明宗旨的范围内,所述设备、方法以及***当然可以进行一些省略、替代或变形。权利要求书及其等同范围涵盖落入本发明的范围和宗旨的这些方式或变形。
Claims (20)
1.一种视频处理装置,包括:
观众检测部,利用摄像机所拍摄的视频来检测观众的人数和观众的位置;
视域信息计算部,算出控制参数,以根据所述观众的人数和所述观众的位置来设定能立体观看在显示部上显示的多个视差图像的视域;以及
视域控制部,根据所述控制参数设定所述视域。
2.根据权利要求1所述的视频处理装置,其中,所述视域信息计算部在所述观众是一个人时,算出所述控制参数,以在所述观众的位置上设定视域,在所述观众是多人时,算出所述控制参数,以维持当前的视域。
3.根据权利要求1所述的视频处理装置,还包括:
优先度设定部,在所述观众是多人时,基于规定的优先度设置规则对多个所述观众各自设定优先度,
其中,所述视域信息计算部在所述观众是一个人时,算出所述控制参数,以在所述观众的位置上设定视域,
在所述观众是多人时,算出所述控制参数,以使考虑所述优先度来设定视域。
4.根据权利要求3所述的视频处理装置,其中,所述视域信息计算部在所述观众是多人时,算出所述控制参数,以在优先度最高的所述观众的位置上设定视域。
5.根据权利要求3所述的视频处理装置,其中所述优先度设定部从视听时间长的所述观众起依次由高到低地设定所述优先度、或者根据所述观众与所述显示部的距离来设定所述优先度。
6.根据权利要求3所述的视频处理装置,还包括:
存储部,存储预先设定了所述观众的信息和所述优先度的关系的表,
其中,所述观众检测部从所述摄像机所拍摄的视频取得所述观众的信息,
所述优先度设定部基于取得的所述观众的信息和所述表来设定所述优先度。
7.根据权利要求6所述的视频处理装置,其中,
所述观众的信息是所述观众的面孔,
所述观众检测部利用所述摄像机所拍摄的视频检测所述观众的面孔,
所述优先度设定部基于检测出的所述观众的面孔和所述表来设定所述优先度。
8.根据权利要求3所述的视频处理装置,其中,所述优先度设定部提示所述观众与该观众的所述优先度的关系。
9.根据权利要求8所述的视频处理装置,其中,所述优先度设定部在对所述观众设定的所述优先度发生变化时,以文本数据的方式提示该内容。
10.根据权利要求8所述的视频处理装置,其中,所述优先度设定部将所述摄像机所拍摄的视频的至少一部分根据所述优先度改变所述观众的显示状态而在所述显示部上显示。
11.根据权利要求10所述的视频处理装置,其中,所述优先度设定部根据所述优先度改变所述观众的颜色深度或色感而在所述显示部上显示、或者对所述优先度高于预先设定的数字的所述观众添加规定的标志而在所述显示部上显示。
12.根据权利要求1所述的视频处理装置,其中,所述视域控制部根据所述控制参数调整在所述显示部上显示的所述多个视差图像的显示位置、或者根据所述控制参数控制在所述显示部上显示的所述多个视差图像的输出方向。
13.根据权利要求1所述的视频处理装置,还包括:
显示部,显示所述多个视差图像;以及
开口控制部,将在所述显示部上显示的所述多个视差图像向规定的方向输出。
14.根据权利要求1所述的视频处理装置,还包括:
接收部,对输入视频信号进行解码;以及
视差图像转换部,基于所述解码后的输入视频信号生成所述多个视差图像。
15.根据权利要求14所述的视频处理装置,其中,所述接收部对广播波进行接收并选台,并对所述广播波进行解码。
16.根据权利要求1所述的视频处理装置,还包括:
摄像机,为了检测所述观众的位置而对规定范围进行拍摄。
17.一种视频处理方法,包括:
利用摄像机所拍摄的视频检测观众的人数和观众的位置的步骤;
算出控制参数以根据所述观众的人数和所述观众的位置来设定能立体观看在显示部上显示的多个视差图像的视域的步骤;以及
根据所述控制参数设定所述视域的步骤。
18.根据权利要求17所述的视频处理方法,其中,
算出所述控制参数的步骤是在所述观众是一个人时,算出所述控制参数,以使在所述观众的位置上设定视域,在所述观众是多人时,算出所述控制参数以使维持当前的视域。
19.根据权利要求17所述的视频处理方法,还包括:
在所述观众是多人时、基于规定的优先度设置规则对多个所述观众的每一个所述观众设定优先度的步骤,
其中,在所述观众是一个人时,算出所述控制参数,以使在所述观众的位置上设定视域,
在所述观众是多人时,算出所述控制参数,以使考虑所述优先度来设定视域。
20.根据权利要求19所述的视频处理方法,还包括:
提示所述观众与该观众的优先度的关系的步骤。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011189469A JP5127967B1 (ja) | 2011-08-31 | 2011-08-31 | 映像処理装置および映像処理方法 |
JP2011-189469 | 2011-08-31 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN102970568A true CN102970568A (zh) | 2013-03-13 |
Family
ID=47692945
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2012101055375A Pending CN102970568A (zh) | 2011-08-31 | 2012-04-11 | 视频处理装置以及视频处理方法 |
Country Status (3)
Country | Link |
---|---|
US (2) | US20130050440A1 (zh) |
JP (1) | JP5127967B1 (zh) |
CN (1) | CN102970568A (zh) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013243585A (ja) * | 2012-05-22 | 2013-12-05 | Funai Electric Co Ltd | 映像信号処理装置 |
WO2014078805A1 (en) * | 2012-11-19 | 2014-05-22 | John Douglas Steinberg | System and method for creating customized, multi-platform video programming |
US9690110B2 (en) * | 2015-01-21 | 2017-06-27 | Apple Inc. | Fine-coarse autostereoscopic display |
KR102415502B1 (ko) * | 2015-08-07 | 2022-07-01 | 삼성전자주식회사 | 복수의 사용자를 위한 라이트 필드 렌더링 방법 및 장치 |
US11973926B2 (en) | 2020-03-03 | 2024-04-30 | Google Llc | Multiview autostereoscopic display using lenticular-based steerable backlighting |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020001045A1 (en) * | 1998-07-16 | 2002-01-03 | Minakanagurki Ranganath | Parallax viewing system |
US20040233275A1 (en) * | 2003-03-20 | 2004-11-25 | Seijiro Tomita | Stereoscopic image picking up and display system |
CN101909219A (zh) * | 2010-07-09 | 2010-12-08 | 深圳超多维光电子有限公司 | 一种立体显示方法、跟踪式立体显示器及图像处理装置 |
CN102098524A (zh) * | 2010-12-17 | 2011-06-15 | 深圳超多维光电子有限公司 | 跟踪式立体显示设备及跟踪式立体显示方法 |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3443272B2 (ja) * | 1996-05-10 | 2003-09-02 | 三洋電機株式会社 | 立体映像表示装置 |
JPH10174127A (ja) * | 1996-12-13 | 1998-06-26 | Sanyo Electric Co Ltd | 立体表示方法および立体表示装置 |
JP3443271B2 (ja) * | 1997-03-24 | 2003-09-02 | 三洋電機株式会社 | 立体映像表示装置 |
JP3469884B2 (ja) * | 2001-03-29 | 2003-11-25 | 三洋電機株式会社 | 立体映像表示装置 |
TW476002B (en) * | 2001-05-31 | 2002-02-11 | Ind Tech Res Inst | Vertical parallax barrier bare eye three-dimensional display device |
EP1415482A1 (en) * | 2001-07-27 | 2004-05-06 | Koninklijke Philips Electronics N.V. | Autostereoscopic image display with observer tracking system |
JP2009164977A (ja) * | 2008-01-09 | 2009-07-23 | Sharp Corp | 映像表示装置 |
JP2011166314A (ja) * | 2010-02-05 | 2011-08-25 | Sharp Corp | 表示装置及びその制御方法、プログラム、並びに、記録媒体 |
JP2012165181A (ja) * | 2011-02-07 | 2012-08-30 | Sony Corp | 映像再生装置と映像再生方法およびプログラム |
-
2011
- 2011-08-31 JP JP2011189469A patent/JP5127967B1/ja not_active Expired - Fee Related
-
2012
- 2012-02-16 US US13/398,572 patent/US20130050440A1/en not_active Abandoned
- 2012-04-11 CN CN2012101055375A patent/CN102970568A/zh active Pending
-
2013
- 2013-11-27 US US14/092,261 patent/US20140092224A1/en not_active Abandoned
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020001045A1 (en) * | 1998-07-16 | 2002-01-03 | Minakanagurki Ranganath | Parallax viewing system |
US20040233275A1 (en) * | 2003-03-20 | 2004-11-25 | Seijiro Tomita | Stereoscopic image picking up and display system |
CN101909219A (zh) * | 2010-07-09 | 2010-12-08 | 深圳超多维光电子有限公司 | 一种立体显示方法、跟踪式立体显示器及图像处理装置 |
CN102098524A (zh) * | 2010-12-17 | 2011-06-15 | 深圳超多维光电子有限公司 | 跟踪式立体显示设备及跟踪式立体显示方法 |
Also Published As
Publication number | Publication date |
---|---|
JP5127967B1 (ja) | 2013-01-23 |
US20140092224A1 (en) | 2014-04-03 |
JP2013051614A (ja) | 2013-03-14 |
US20130050440A1 (en) | 2013-02-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102970569B (zh) | 视域调整装置、视频处理装置以及视域调整方法 | |
CN103096103A (zh) | 视频处理装置和视频处理方法 | |
US10291907B2 (en) | Multi-view display control for channel selection | |
EP3127329B1 (en) | Multi-view display control | |
CN102970561B (zh) | 视频处理装置以及视频处理方法 | |
US20130050449A1 (en) | Video processing apparatus and video processing method | |
CN102970565B (zh) | 视频处理装置及视频处理方法 | |
CN103517056A (zh) | 检测器、检测方法和视频显示装置 | |
CN102970568A (zh) | 视频处理装置以及视频处理方法 | |
CN102970567B (zh) | 视频处理装置以及视频处理方法 | |
US8558877B2 (en) | Video processing device, video processing method and recording medium | |
JP5156116B1 (ja) | 映像処理装置および映像処理方法 | |
CN102970563A (zh) | 视频处理装置以及视频处理方法 | |
JP5156117B1 (ja) | 映像処理装置および映像処理方法 | |
CN102970562A (zh) | 视频处理装置、视频处理方法以及远程控制装置 | |
US20120154382A1 (en) | Image processing apparatus and image processing method | |
JP5395934B1 (ja) | 映像処理装置および映像処理方法 | |
JP5603911B2 (ja) | 映像処理装置、映像処理方法および遠隔制御装置 | |
JP5032694B1 (ja) | 映像処理装置および映像処理方法 | |
US20130307941A1 (en) | Video processing device and video processing method | |
JP2013055675A (ja) | 映像処理装置および映像処理方法 | |
JP2013055641A (ja) | 映像処理装置および映像処理方法 | |
JP2013055682A (ja) | 映像処理装置および映像処理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20130313 |