CN108205431B - 显示设备及其控制方法 - Google Patents
显示设备及其控制方法 Download PDFInfo
- Publication number
- CN108205431B CN108205431B CN201711350668.9A CN201711350668A CN108205431B CN 108205431 B CN108205431 B CN 108205431B CN 201711350668 A CN201711350668 A CN 201711350668A CN 108205431 B CN108205431 B CN 108205431B
- Authority
- CN
- China
- Prior art keywords
- image
- display
- thumbnail
- content
- processor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 42
- 238000013507 mapping Methods 0.000 claims abstract description 24
- 230000008859 change Effects 0.000 claims description 20
- 230000004044 response Effects 0.000 claims description 4
- 238000012545 processing Methods 0.000 description 17
- 230000015572 biosynthetic process Effects 0.000 description 9
- 230000008569 process Effects 0.000 description 8
- 238000004891 communication Methods 0.000 description 7
- 230000015654 memory Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 230000002708 enhancing effect Effects 0.000 description 3
- 239000004973 liquid crystal related substance Substances 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- OKTJSMMVPCPJKN-UHFFFAOYSA-N Carbon Chemical compound [C] OKTJSMMVPCPJKN-UHFFFAOYSA-N 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 239000002041 carbon nanotube Substances 0.000 description 1
- 229910021393 carbon nanotube Inorganic materials 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 239000002772 conduction electron Substances 0.000 description 1
- 235000019800 disodium phosphate Nutrition 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000002159 nanocrystal Substances 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/10—Geometric effects
- G06T15/20—Perspective computation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04842—Selection of displayed objects or displayed text elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/04—Context-preserving transformations, e.g. by using an importance map
- G06T3/053—Detail-in-context presentations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/08—Projecting images onto non-planar surfaces, e.g. geodetic screens
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/12—Panospheric to cylindrical image transformations
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/34—Indicating arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/8146—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04802—3D-info-object: information is displayed on the internal or external surface of a three dimensional manipulable object, e.g. on the faces of a cube that can be rotated by the user
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20221—Image fusion; Image merging
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2215/00—Indexing scheme for image rendering
- G06T2215/16—Using real world measurements to influence rendering
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Computer Graphics (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Computing Systems (AREA)
- Geometry (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- User Interface Of Digital Computer (AREA)
- Controls And Circuits For Display Device (AREA)
- Processing Or Creating Images (AREA)
Abstract
提供了一种显示设备及其控制方法。显示设备包括接收器,其被配置为接收命令;处理器,其被配置为接收内容图像,并且通过将内容图像映射到从各自具有不同几何形式的多个3D结构中选择的3D结构来生成三维(3D)图像;以及显示器,其被配置为根据所述命令显示所述3D图像的一个视角。
Description
相关申请的交叉引用
本申请要求2016年12月16日在韩国知识产权局提交的韩国专利申请No.10-2016-0172839的优先权,其全部内容通过引用并入本文。
技术领域
符合示例性实施例的设备和方法涉及显示设备及其控制方法,并且更具体地涉及显示具有三维(3D)结构的图像的显示设备及其控制方法。
背景技术
最近,显示设备可以提供多种图像,包括360度/虚拟现实(VR)图像。如果为用户提供了利用多个相机或者具有安装在其上的多个镜头的相机捕获图像、并且将捕获的图像映射到3D结构(或对象)而产生的3D图像,则用户可以在其上移动视角的同时欣赏3D图像。在效果上,用户感觉就好像她或他处于真实空间中一样。
现有技术的显示设备将360度/VR图像仅映射到固定的3D结构而向用户显示。换句话说,用户只能以预设的3D结构的形式观看360度/VR内容的图像。由于现有技术的显示设备提供的360度/VR图像的表现形式简单且固定,因此用户的体验和兴趣受到限制。
另一方面,即使对于360度/VR内容,也可以提供表示360度/VR内容的信息的缩略图像。然而,如果通过简单地缩放或剪切360度/VR内容的图像来提供缩略图像,由于缩略图像的失真表示,用户难以知晓对应的360度/VR内容。此外,在这种情况下,由于缩略图像的简单表示形式,用户体验和兴趣受到限制。
发明内容
示例性实施例至少解决上述问题和/或缺点以及上述未描述的其他缺点。此外,示例性实施例不需要克服上述缺点,并且可能不克服上述任何问题。
示例性实施例可以提供一种显示设备及其控制方法,所述显示设备可以以用户期望的3D结构形式显示360度/虚拟现实(VR)图像。
此外,示例性实施例可以提供一种显示设备及其控制方法,该显示设备显示能够使用户容易地知道其对应于360度/VR内容并且不失真地表示对应的360度/VR内容的缩略图像。
而且,示例性实施例可以提供一种显示设备,其可以以各种方式显示360度/VR内容的缩略图像,从而为用户提供更多增强的体验和兴趣。
根据示例性实施例的一个方面,提供了一种显示设备,包括:接收器,被配置为接收命令;处理器,被配置为:接收内容图像;并且通过将内容图像映射到从各自具有不同几何形式的多个3D结构中选择的3D结构来生成三维(3D)图像;以及显示器,被配置为根据命令显示3D图像的一个视角。
处理器还可以被配置为使用内容图像的一部分来生成内容图像的内容的缩略图像,并且在显示器上显示包括缩略图像的图形用户界面(GUI)。
处理器还可以被配置为通过将内容图像的距离内容图像的参考轴线预定宽度的区域映射到从多个3D结构中选择的3D结构来生成缩略图像。
处理器还可以被配置为:将内容图像映射到具有不同形式的多个3D结构中的每一个,以生成对应于内容图像的多个3D图像,并且生成各自与多个3D图像中的每一个的一个视角对应的多个缩略图像。
处理器还可以被配置为控制显示器显示多个缩略图像中的至少一个缩略图像以与其他缩略图像区分开。
处理器还可以被配置为基于内容图像的内容的属性来控制显示器显示多个缩略图像中的至少一个缩略图像以与其他缩略图像区分开。
处理器可以被配置为控制显示器针对内容图像的内容显示具有多个3D结构中的第一3D结构的第一缩略图像,并且响应于对第二3D结构的选择而将具有第一3D结构的第一缩略图像改变为具有多个3D结构中的第二3D结构的第二缩略图像,并且控制显示器显示第二缩略图像。
处理器还可以被配置为改变缩略图像的尺寸以生成改变的缩略图像,并控制显示器显示改变的缩略图像。
处理器还可以被配置为改变与缩略图像对应的3D结构以生成改变的缩略图像,并控制显示器显示改变的缩略图像。
命令可以包括用于选择3D图像的视角的用户输入。
根据示例性实施例的另一方面,提供了一种显示设备的控制方法,包括:接收内容图像;通过将内容图像映射到从各自具有不同几何形式的多个3D结构中选择的3D结构来生成三维(3D)图像;以及根据接收的命令在显示器上显示3D图像的一个视角。
该方法还可以包括使用内容图像的一部分来生成内容图像的内容的缩略图像,并且在显示器上显示缩略图像。
生成缩略图像可以包括将距离内容图像的参考轴线预定宽度的区域映射到3D结构。
生成缩略图像可以包括:将内容图像映射到具有不同形式的多个3D结构中的每一个,以生成与内容图像对应的多个3D图像;以及产生多个缩略图像,每个缩略图像对应于多个3D图像中的每一个的一个视角。
生成缩略图像可以包括:将多个缩略图像中的至少一个缩略图像与其他缩略图像进行区分。
区分可以包括基于内容图像的内容的属性,将多个缩略图像中的至少一个缩略图像与其他缩略图像进行区分。
该方法还可以包括针对内容图像的内容显示具有多个3D结构中的第一3D结构的第一缩略图像,并且响应于对第二3D结构的选择而将具有第一3D结构的第一缩略图像改变为具有多个3D结构中的第二3D结构的第二缩略图像,并且在显示器上显示第二缩略图像。
该方法还可以包括改变缩略图像的尺寸以生成改变的缩略图像,并显示改变的缩略图像。
该方法还可以包括改变对应于缩略图像的3D结构以生成改变的缩略图像,并显示改变的缩略图像。
接收到的命令可以包括用于选择3D图像的视角的用户输入。
根据示例性实施例的另一方面,提供了一种非暂时性计算机可读介质,包括用于执行所述控制方法的计算机程序,所述控制方法包括:接收内容图像;通过将内容图像映射到从各自具有不同几何形式的多个3D结构中选择的3D结构来生成三维(3D)图像;以及根据接收的命令在显示器上显示3D图像的一个视角。
根据示例性实施例的另一方面,提供了一种显示设备,包括:处理器,被配置为接收要为其生成缩略图像的内容图像;基于内容图像中的几何失真来确定内容图像中的轴线;基于轴线并且基于内容图像中的几何失真提取区域;并基于提取的区域生成缩略图像。
处理器还可以被配置为:在第一方向上从轴线确定第一区域;在与所述第一方向相反的第二方向上从轴线确定第二区域;并将第一区域和第二区域的组合确定为提取区域。
处理器还可以被配置为:通过将缩略图像映射到从各自具有不同的几何形式的多个3D结构中选择的3D结构来生成三维(3D)图像,并且控制显示器显示3D图像。
处理器还可以被配置为通过以下步骤将缩略图像映射到3D结构:从缩略图像中提取多个区域;以及将所述多个区域中的每一个映射到3D结构的不同视角以生成3D图像的多个视角。
根据示例性实施例的另一方面,提供了一种显示设备的控制方法,包括:接收要为其生成缩略图像的内容图像;基于内容图像中的几何失真来确定内容图像中的轴线;基于轴线并且基于内容图像中的几何失真提取区域;并基于提取的区域生成缩略图像。
提取区域还可以包括:在第一方向上从轴线确定第一区域;在与所述第一方向相反的第二方向上从轴线确定第二区域;并将第一区域和第二区域的组合确定为提取区域。
该方法还可以包括:通过将缩略图像映射到从各自具有不同的几何形式的多个3D结构中选择的3D结构来生成三维(3D)图像,并且控制显示器显示3D图像。
将缩略图像映射到3D结构可以包括:从缩略图像中提取多个区域;以及将所述多个区域中的每一个映射到3D结构的不同视角以生成3D图像的多个视角。
附图说明
从以下结合附图的描述中,本公开的一些示例性实施例的上述和其它方面、特征和优点将更加明显,其中:
图1是示出根据示例性实施例的显示设备的配置的框图;
图2是示出根据示例性实施例的显示设备的操作的图;
图3和4是示出根据示例性实施例在显示设备中生成缩略图像的过程的示例的图;
图5A-图5C,图6A-图6C,图7A-图7B,图8,图9A-图9C,图10A-图10C,图11A-图11B,图12A-图12C以及图13A-图13C是示出由根据示例性实施例的显示设备显示的内容图像或缩略图像的示例的图;以及
图14是示出根据示例性实施例的显示设备的控制方法的流程图。
具体实施方式
在下文中,将参照附图详细描述示例性实施例。在附图中示出的示例性特征在示例性实施例的以下描述中被参考,并且为了清楚起见,在相应附图中呈现的类似的附图标记或符号表示基本上执行相同功能的类似元件。
图1是示出根据示例性实施例的显示设备的配置的框图。图1所示的显示设备1可以实现为例如电视(TV)。在其他示例性实施例中,显示设备1可以被实现为智能电话、平板型个人计算机(PC)、移动电话、计算机、多媒体再现设备、电子相框、数字广告板、大格式显示器(LFD)、标牌、机顶盒、智能手表、诸如头戴式显示器(HMD)的可穿戴设备、诸如智能电冰箱的智能家用电器等。然而,本公开不限于此,并且可以应用于能够显示内容的图像和图形用户界面(GUI)的任何设备。
根据示例性实施例的显示设备1显示内容的图像(在下文中,被称为“内容图像”),以使用户感觉好像用户在空间中环顾四周。显示设备1可以显示例如360度/虚拟现实的内容的图像。换句话说,显示设备1将内容图像映射到三维(3D)结构,并显示与所映射的3D图像的一个视角对应的图像。通过根据示例性实施例的显示设备1显示的内容不限于360度/虚拟现实内容,并且可以包括使用户感觉好像用户在空间中的内容的多种表示类型。另外,为了向用户提供关于内容的信息,显示设备1可以显示代表内容图像的缩略图像。在这种情况下,显示设备1可以以GUI的形式显示缩略图像。
如图1所示,显示设备1包括显示器1101、用户输入接收器1102和处理器1103。此外,显示设备1还可以包括图像接收器1104、图像处理器1105和通信器1106中的至少一个。根据示例性实施例的显示设备1的配置仅仅是示例,并且可以以与图1所示的配置不同的配置来实现。换句话说,根据示例性实施例的显示设备可以被实现为包括除图1所示的那些之外的附加元件,或者从图1所示的元件中去除任何一个元件。在示例性实施例中,显示设备1的每一个元件可以被实现为至少一个硬件或/和软件,并且还可以被实现为至少一个电路或芯片。
根据示例性实施例,图像接收器1104可以接收包括内容图像的图像信号。图像信号可以以广播信号的形式被接收。在这种情况下,图像接收器1104可以设置有用于接收广播信号的调谐器。在处理器1103的控制下,调谐器可以调谐用户从多个频道中选择的任何一个频道的广播信号。图像接收器1104可以从诸如机顶盒、数字多功能盘(DVD)播放器和PC的图像处理设备、诸如智能电话的移动设备、或者经由互联网的服务器接收图像信号。
根据示例性实施例,处理器1103可以控制图像处理器1105从图像接收器1104接收的图像信号中提取内容图像,并且对内容图像执行图像处理,以在显示器1101上显示相应的图像。此外,图像处理器1105可以根据处理器1103的控制执行用于生成内容的缩略图像的图像处理。此外,图像处理器1105可以根据处理器1103的控制执行用于生成缩略图像和/或内容图像上的GUI的图像处理。图像处理器1105可以被实现为至少一个硬件和/或软件模块及其组合。
根据示例性实施例,显示器1101可以显示由图像处理器1105处理的内容图像和/或缩略图像以及其上的GUI。显示器1101的实施类型不受限制,并且,显示器1101可以以多种类型实现,诸如液晶、等离子体、发光二极管(LED)、有机发光二极管(OLED)、表面传导电子发射体、碳纳米管、纳米晶体显示器等。如果显示器1101是液晶类型,则显示器1101包括液晶显示器(LCD)面板、向LCD面板提供光的背光单元、用于驱动LCD面板的面板驱动板等。显示器1101也可以实现为OLED面板,其是没有背光单元的自发射面板。
根据示例性实施例,用户输入接收器1102可以接收用户输入以发送给处理器1103。用户输入接收器1102可以根据用户输入的方法以多种类型实现。例如,用户输入接收器1102可以被实现为安装在显示设备1外侧的菜单按钮、用以接收与来自远程处理器的用户输入相对应的遥控信号的遥控信号接收器、设置在显示器1101上用以接收用户的触摸输入的触摸屏、感测用户的手势输入的相机、用以识别用户的语音输入的麦克风等。
根据示例性实施例,作为可替代提供的元件的通信器1106可以与提供图像信号的外部设备通信。通信器1106根据与外部设备的通信方式而不同地实施。例如,通信器1106可以包括用于有线通信的连接器。连接器可以根据诸如高清晰度多媒体接口(HDMI)、HDMI消费电子控件(HDMI-CEC)、USB、组件等标准来发送和接收信号/数据,并且包括对应于相应标准的至少一个连接部件或端子。通信器1106可以按照包括用于有线通信的连接部件或端子的连接器之外的许多其他通信方式实现。例如,为了执行与外部设备的无线通信,通信器1106可以包括用于发送和接收射频(RF)信号以便与外部设备无线通信的RF电路,并且可以被配置为使用无线保真(Wi-Fi)、蓝牙(BT)、Zigbee、超宽带(UVM)、无线USB和近场通信(NFC)中的一个或多个协议来通信。
根据示例性实施例,处理器1103可以控制图像接收器1104和图像处理器1105,用以在显示器1101上显示内容图像、缩略图像和/或GUI,并且,根据经由用户输入接收器1102接收的用户输入执行给定的操作。处理器1103可以执行用于控制以执行如上所述的操作的至少一个程序。显示设备1还可以包括在其中安装有程序的非易失性存储器,以及在其中加载有至少一个安装程序的易失性存储器。存储器的至少一部分可以被设置在处理器1103中。所述程序可以包括以BIOS、设备驱动程序、操作***、固件、平台和应用程序(应用)中的至少一个形式实现的程序(或多个程序)。根据示例性实施例,应用程序可以在制造中预先安装或存储在显示设备1中,或者可以基于在使用中从外部接收的应用程序的数据安装在显示设备1中。应用程序的数据可以从外部服务器(例如应用市场等)下载到显示设备1。处理器1103可以包括多于一个或两个处理器。处理器1103和图像处理器1104可以实现在一体中,并且,处理器1103和图像处理器1104中的一个还可以包括至少一些其它功能。
根据示例性实施例,处理器1103可以控制显示设备1的元件以各种方式显示内容图像和/或缩略图像。图2示出由根据示例性实施例的显示设备1显示内容图像或缩略图像的过程。首先,图像接收器1104接收包括内容图像101的图像信号(S101)。根据示例性实施例,图像接收器1104可以在处理器1103的控制下接收图像信号。图像处理器1105在处理器1103的控制下从接收到的图像信号中提取内容图像101。内容图像101可以由多个图像构成,这些图像是使用分别设置在彼此不同的承座上的多个相机或镜头获得的。相机或镜头可以包括广角镜头。图2所示的内容图像101是使用两个相机或镜头获得的图像,但本公开不限于此。
内容图像101可以是构成能够在预定时间内播放的运动图像的时间点的帧。在这种情况下,图像接收器1104可以以串流方式连续地接收运动图像的多个帧。此外,图像接收器1104可以全部或者通过一个或多个分段来接收帧,每个分段是从帧中划分预定数量的多个分段中的一个分段。
根据示例性实施例,图像处理器1105执行拼接处理,其将将分别通过相机或镜头获得的各个图像之间的边界部分相对于内容图像101自然地连接,以形成内容图像102(S102)。根据另一示例性实施例,图像接收器1104可以直接接收在其中已经执行了拼接处理、或者不需要拼接处理的内容图像102。在这种情况下,图像处理器1105可以不对所接收到的内容图像102执行拼接处理。
处理器1103可以选择内容图像102将被映射到其上的3D结构(S103)。处理器1103可以从多个3D结构103、104和105中选择任何一个。尽管可选的3D结构103、104和105已经示出为立方体、球体和圆柱体,但是本公开不限于此,并且可以应用于各种3D结构,包括长方体、圆锥体、金字塔、十二面体、其他几何形状等。3D结构103、104和105的选择可以通过用户输入或按预定方式来确定。
根据示例性实施例,图像处理器1105根据处理器1103的控制将内容图像102的至少一部分映射到所选择的3D结构104(S104)。尽管图2示出了内容图像102被映射到被选择为3D结构的球体104,但是本公开不限于此,并且可以执行将内容图像102映射到从各种3D结构中选择的至少一个3D结构。处理器1103控制图像处理器1105在显示器1101上显示与映射到球体的3D图像106中的一个视角对应的图像107(S105)。处理器1103可以根据用户输入改变要显示的图像107的视角。可替代地,处理器1103可以根据预定方法自动地改变要显示的图像107的视角。因此,由于内容图像可以以各种3D结构的形式显示,所以增强了用户的体验或兴趣。
另一方面,除了内容图像之外,处理器1103可以将缩略图像映射到各种3D结构。换句话说,类似于操作(S103),处理器1103从多个3D结构103、104和105中选择要用于显示缩略图像的任何一个3D结构。类似于操作(S104),处理器1103将内容图像102的至少一部分映射到选择的3D结构。类似于操作(S105),处理器1103在显示器1101上显示映射到所选3D结构的3D图像中的一个视角的图像作为缩略图像。因此,除了内容图像之外,缩略图像可以以各种3D结构的形式显示,用户可以更清楚地知道内容,并且更加增强用户的体验或兴趣。
尽管图2示出了显示被映射到从多个3D结构103、104和105中选择的任何一个3D结构的内容图像或缩略图像的过程,但是本公开不限于此。换句话说,处理器1103可以控制图像处理器1105生成分别映射到多个3D结构103、104和105的多个3D图像,并且分别显示关于多个生成的3D图像的内容图像或缩略图像。
图3和图4分别示出根据示例性实施例的在显示设备中生成缩略图像的过程的示例。首先,参考图3,处理器1103确定将为之形成缩略图像的内容图像301。根据示例性实施例,在图2中的映射操作之前的内容图像102可以用作要经历形成缩略图像的内容图像301。然而,本公开不限于此。例如,要经历形成缩略图像的内容图像可以是图2中的在映射操作之后的3D图像106,或图2中的从接收到的图像提取的内容图像101。
处理器1103从内容图像301中确定要经历形成缩略图像的区域303。要经历形成缩略图像的区域303例如可以是从通过内容图像301的纵向方向上的中心的水平轴线302开始的加减宽度“a”的范围内的区域。根据示例性实施例,正和负的宽度“a”是预定的。轴线可以通过考虑内容图像301中的几何失真位置等来确定。例如,由于内容图像301中的几何失真从内容图像301的纵向方向的中间向纵向方向的顶部或底部逐渐增大,所以,具有相对较小的失真的、穿过内容图像301的纵向方向上的中心的水平轴线302可以被确定为区域303的标准。预定的正和负的宽度“a”可以基于作为标准的水平轴线302由几何失真水平被适当地允许的位置确定。如果几何失真水平在内容图像301的纵向方向上朝向顶部或底部快速增长,则可以将预定的正和负的宽度“a”确定为相对较小。如上所述,由于要经历形成缩略图像的区域303被确定为与其他区域相比几何失真水平相对较小的部分,所以用户可以通过缩略图像更清楚地知道内容。根据图3所示的示例性实施例,正宽度“a”和负宽度“a”是相等的。然而,根据另一示例性实施例,正宽度“a”可以不等于负宽度“a”。
根据另一示例性实施例,如果要形成的缩略图像的对象是映射后的3D图像,则对象区域可以是基于外周边的预定正和负宽度范围内的区域,所述外周边穿过相应的3D结构的表面上的纵向方向的中心。根据另一示例,可以由用户确定要经历形成缩略图像的区域。处理器1103可以根据用户输入确定要经受形成缩略图像的区域。在这种情况下,处理器1103可以显示包括用于指定要经历形成缩略图像的区域的至少一个菜单项的GUI,并根据使用所述至少一个菜单项所接收的用户输入确定要经历形成缩略图像的区域。
再次参考图3,处理器1103提取与从内容图像301确定的对象区域303对应的图像304。处理器1103将对象区域303的提取图像304映射到预定3D结构以生成3D图像。可以使用各种3D结构作为用于映射的3D结构,但是在示例性实施例中,圆柱体作为示例的方式来解释。根据用户输入或预定方法,处理器1103可以从多个3D结构中选择要用于映射的任何一个3D结构。
参考图4,处理器1103将对象区域303的经提取的图像304映射到圆柱体,以生成圆柱体形式的3D图像401。根据示例性实施例,处理器1103可以将对应圆柱体形式的所生成的3D图像401的一个视角的区域作为缩略图像来显示。例如,在旋转3D图像401的圆柱体的同时,处理器1103可以在移动3D图像401的视角的同时显示该视角的缩略图像。处理器1103可以以预定方法或者根据用户输入来移动3D图像401的视角。此外,移动视角的类型或者旋转3D图像的方式不限于图4所示的示例。例如,处理器1103可以改变视角移动的方向、速度等,在连续或不连续地改变视角移动的方向、速度等的同时移动视角,或改变对象区域的尺寸、形状等。处理器1103可以存储根据使用GUI接收的用户输入设置的视角移动方式的信息,并且基于所存储的信息移动缩略图像的视角。
再次参考图4,附图标记402示出了展开圆柱体的一侧的图像,圆柱体其作为3D图像401的示例。根据另一示例性实施例,处理器1103可以将与从3D图像401展开的图像402中的、作为3D图像401的一个视角的视角区域403a、403b、403c和403d中的一个对应的部分显示为缩略图像。处理器1103可以在移动3D图像401的视角(即,在展开的图像402中移动通过视角区域403a、403b、403c和403d)的同时,将与移动的视角区域403a、403b、403c和403d相对应的部分显示为缩略图像。在这种情况下,可以顺序地显示分别对应于移动的视角区域403a、403b、403c和403d的缩略图像404、405、406和407。如此,用户可以通过缩略图像更清楚地了解360度/VR内容图像,并获得更多增强的体验和兴趣。
在下文中,将详细描述根据示例性实施例的通过显示设备显示内容图像和/或缩略图像的各种示例性实施例。图5A-5C示出了根据示例性实施例的由显示设备显示的屏幕的示例。如图5A所示,根据示例性实施例的处理器1103可以在屏幕210上显示的列表形式的可由显示设备1显示的内容。内容列表可以包括GUI形式的显示,其包括分别表示内容图像的一部分的多个项目211。GUI还可以包括左侧和右侧导航按钮212和213。如果根据用户输入选择了左侧或右侧导航按钮212或213,则处理器1103以相同的方式显示已经从当前屏幕210隐藏的其他内容的项目。
如果根据用户输入,如图5B所示,从内容列表的多个项目中选择了任何一个项目,则处理器1103可以在屏幕220上显示各种3D结构221、222和223,使得用户可以选择他或她想要将对应的内容图像映射到其上的3D结构。为了直观地表示用户可以从显示的各种3D结构221、222和223中选择任何一个,处理器1103可以将之前刚刚显示的内容列表的GUI显示为具有预定的透明度,由此允许内容列表的GUI被显示为各种3D结构的背景。如果用户从显示在屏幕220上的多个3D结构221、222和223中选择一个3D结构,例如用户选择球体222,则处理器1103在屏幕230上显示图像231,在图像231中,先前由用户选择的内容图像以球体222的形式映射,如图5C所示。
处理器1103可以将映射到由用户选择的3D结构的图像显示为被映射到外部视角处的相应3D结构的图像231,或者被映射到内部视角处的相应3D结构的图像240,如图5C所示。可替代地,处理器1103可以首先显示映射在外部视角处的图像231,然后显示映射在内部视角处的图像240。根据示例性实施例,外部视角是从3D结构的外部观看的视图,而内部视角是从3D结构的内部观看的视图,如图7A和7B所示。
处理器1103可以显示,使得显示在屏幕上的图像231和240根据视角移动而改变。处理器1103还可以包括导航图标241,其中,用于指示上下方向和左右方向的方向指示器被标记,以告知用户所显示的图像可以被改变为另一视角的图像。处理器1103还可以显示表示当前视角的图像位于全3D图像中的区域的图标242,从而允许用户更直观地知道用户正在观看的图像的位置。
图6A-6C示出了根据示例性实施例的显示设备的缩略图像显示屏幕的示例。处理器1103可以显示包括3D结构形式的至少一个缩略图像311(在下文中,也被称为“3D缩略图显示模式”)的GUI 310,如图6A所示。处理器1103可以例如根据用户输入进入3D缩略图显示模式。如果用户输入内容列表显示命令,则处理器1103可以确定在要显示的内容中是否存在3D图像内容,并且,如果确定存在3D图像内容,则进入3D缩略图显示模式。除缩略图之外,处理器1103还可以显示用于解释内容的其他信息,例如文本、图像等。
在3D缩略图像显示模式中,处理器1103可以根据使用例如遥控器接收到的用户输入控制GUI 310的光标,以从缩略图像中选择一个缩略图像。处理器1103可以显示GUI 320,其包括具有关于一个内容的不同3D结构的多个缩略图321、322、323和324(在下文中,也被称为“多缩略图显示模式”),如图6B所示。如果用户在3D缩略图显示模式下选择任何一个缩略图像311,则处理器1103可以针对所选择的缩略图像311的内容进入多缩略图显示模式。处理器1103可以显示提示用户输入指示是否进入多缩略图显示模式的指令的菜单,并且根据用户对其的输入进入多缩略图显示模式。尽管在图6B中,多个缩略图像321、322、323和324分别以球体、圆柱体、立方体和圆锥体的形式示出,但这些仅仅是示例,并且3D结构的形式不限于此。缩略图像321、322、323和324可以以与以上参照图2至图4描述的相同方式生成。
根据另一示例性实施例,例如,如果用户在按住遥控器的一个按钮的同时选择了任何一个缩略图像,则处理器1103可以进入多缩略图显示模式。根据另一示例性实施例,如果用户选择了任何一个缩略图像311,则处理器1103可以显示GUI 330,该GUI 330表示具有不同3D结构的多个缩略图像331至334,而与所选择的缩略图像311相比,多个缩略图像331至334的尺寸相对较小,并围绕所选择的缩略图像311,如图6C所示。
根据另一示例性实施例,处理器1103可以针对彼此不同的内容显示多个缩略图像而不区分它们,或者显示将针对每个内容的多个缩略图像布置在同一行或列中。如此,根据示例性实施例的显示设备1可以关于一个内容显示具有多个形式的3D结构的缩略图像,从而为用户提供更多增强的体验和兴趣。
处理器1103可以根据经由包括缩略图像的GUI 310、320或330的用户输入执行预定操作。在此,所述预定操作包括显示设备1可以对与缩略图像相对应的内容执行的所有操作。预定操作的示例包括播放与缩略图像对应的内容、显示3D结构的内部或外部视角中的缩略图像和内容图像、将3D结构设置为基本3D结构、旋转缩略图像、改变缩略图像的尺寸、改变3D结构形式的缩略图像等,但不限于此。对于包括缩略图像的GUI 310、320或330的用户输入包括使用人体部位的手势输入,以及使用例如遥控器、鼠标、触摸笔等的输入。输入方法的示例包括光标聚焦、点击、双击、拖放、触摸、敲击、双敲击、拖动、收缩/放大、多点触摸等。例如,如果用户从GUI 320或330选择任何一个缩略图像321或331,如图6B或图6C所示,则处理器1103可以播放与所选择的缩略图像321或331相对应的内容。如果所述内容是静止图像,则处理器1103可以在屏幕上显示静止图像,并且如果是运动图像,则播放运动图像以将其显示在屏幕上。
处理器1103可以根据经由GUI 320或330的用户输入改变播放内容的3D结构的形式。例如,如果在立方体的缩略图像323或333被选择的状态下,输入指示播放与其对应的内容的用户输入,则处理器1103可以播放具有立方体3D结构的内容。另一方面,如果在球体的缩略图像321或331被选择的状态下,输入指示播放与其对应的内容的用户输入,则处理器1103可以播放具有球体3D结构的内容。
图7A和7B示出了显示根据示例性实施例的显示设备的缩略图像显示屏幕的示例。例如,如果从外部视角501观看作为球体的3D结构500,则处理器1103显示包括整个球形图像的区域的图像502。因此,用户可以观看球体图像的整体外观,如图7A所示。另一方面,如果从内部视角503观看球体的3D结构500,则处理器1103显示球体图像中与视角503对应的区域504内部的图像505,如图7B所示。处理器1103可以将视角从内部视角503转换到外部视角501,反之亦然,以显示缩略图像。视角503和视角501之间的转换可以根据预定条件或用户输入执行。处理器1103可以直接或者经过其间的中间处理执行视角503和视角501之间的转换。
图8示出了根据示例性实施例的显示设备的缩略图像显示屏幕的另一示例。当用户从GUI 410选择缩略图像411时,处理器1103可以提供与3D结构的内部视角对应的缩略图像作为缩略图像411。因此,用户可以利用内部视角预先检查对应的内容图像,由此增强用户的便利性。处理器1103可以同时显示从内部视角的具有不同3D结构的多个缩略图像。因此,用户可以将具有各种形式的3D结构的内容的内部视角图片彼此进行比较,从而更加增强用户的便利性。当显示一个视角的缩略图像时,处理器1103可以在显示设备1的整个屏幕上显示与缩略图像相对应的图像420。此外,当图像420被显示在显示设备1的整个屏幕上时,处理器1103可以再次地显示一个视角的缩略图像。如此,根据示例性实施例的显示设备1可以以各种方式转换和显示缩略图像,由此允许用户容易地理解内容,并且更加增强用户的体验和兴趣。
图9A-9C示出了根据示例性实施例的显示设备的缩略图像显示屏幕的另一示例。处理器1103显示第一GUI 610,其包括具有立方体形式作为3D结构的基本形式的缩略图像611,如图9A所示。如果根据经由第一GUI 610的用户输入选择缩略图像611,则处理器1103在屏幕620上显示具有不同3D结构的多个缩略图像621、622、623和624,如图9B所示。虽然显示具有不同3D结构的多个缩略图像621、622、623和624,但是处理器1103可以根据用户输入将任何一个3D结构设置为基本3D结构。例如,如果用户从多个缩略图像621、622、623和624中选择第一缩略图像622,则处理器1103可以显示菜单屏幕625,其提示用户输入指示是否设置新的基本3D结构的指令。如果用户在菜单屏幕625中选择“是”,则处理器1103将作为所选择的第一缩略图像622的3D结构的形式的圆柱体设置为新的基本3D结构。处理器1103可以将关于设置的基本3D结构的信息存储在存储器中。之后,处理器1103可以显示具有缩略图像631的第二GUI 630,其具有被设置为新的基本3D结构的圆柱体3D结构,如图9C所示。因此,可以将以作为基本3D结构的立方体形式显示的第一GUI 610的缩略图像611改变为具有圆柱体的3D结构的第二GUI 630的缩略图像631。
图10A-10C示出根据示例性实施例的显示设备的缩略图像显示屏幕的另一示例。处理器1103显示包括表示用户概况的缩略图像711的第一GUI710,如图10A所示。缩略图像711可以表示立方体的3D结构的用户的概况图像。如果用户从第一GUI 710中选择缩略图像711,则处理器1103在屏幕720上显示关于用户的概况图像的具有不同3D结构的多个缩略图像721、722、723和724,如图10B所示。如果用户从多个缩略图像721、722、723和724中选择任何一个缩略图像722,则处理器1103可以显示菜单屏幕725,其提示用户输入指示是否设置新的概况图像的指令。如果用户从菜单屏幕725选择“是”,则处理器1103将作为所选择的缩略图像722的3D结构的圆柱体设置为用于概况图像的3D结构。在对用户的概况屏幕的随后的显示请求中,处理器1103显示包括以圆柱体的3D结构显示的缩略图像731的第二GUI730,如图10C所示。
根据示例性实施例的显示设备1可以显示多个缩略图像中的至少一个缩略图像,以与其他缩略图像区分开。图11A和11B示出了根据示例性实施例的显示设备的缩略图像显示屏幕的另一示例。处理器1103显示包括多个缩略图像821、822、823和824的GUI 820。处理器1103可以显示项目840,其允许将多个缩略图像821、822、823和824中的任何一个缩略图像822与其他缩略图像区分开。根据其他示例性实施例,显示至少一个缩略图像与其他缩略图像区分可以以各种方式来实现。例如,相应的缩略图像可以具有在其上显示的特定的字母或符号、特定图形(即,星形840)等。根据另一个示例,相应的缩略图像可以被加框(参见图11B中的850)、用荧光色等突出显示、被促动为动态地移动等。因此,用户可以容易地识别与其他缩略图像区分的缩略图像,从而提高用户的便利性。
处理器1103可以根据内容的属性确定缩略图的3D结构。例如,如果所述内容是利用其上安装有至少一个镜头的相机或多个相机在所有方向上拍摄的图像,则处理器1103可以显示球体的缩略图像821。可替代地,如果所述内容是在立方体的形式房间中全方位拍摄物体产生的图像,则处理器1103可以以立方体形式显示缩略图像823。然而,与内容对应的缩略图像的3D结构的形式不限于此。
根据示例性实施例的显示设备1可以根据视角移动来改变和显示缩略图像。图12A-12C示出了根据示例性实施例的显示设备的缩略图像显示屏幕的另一示例。处理器1103显示GUI 910,其包括具有预定形式的3D结构的缩略图像911,如图12A所示。处理器1103可以根据视角移动来改变和显示缩略图像911。例如,如果视角向左和向右移动,则处理器1103可以根据视角移动来显示缩略图像911向左和向右旋转。根据示例性实施例,如箭头912所示,缩略图像911可以从左向右旋转。然而,视角的移动方向不限于此,并且视角可以上、下、左、右、对角地等移动。视角移动可以根据用户输入或预定方式来执行。根据另一示例性实施例,处理器1103可以改变缩略图像的大小以显示改变的缩略图像。换句话说,如图12B的屏幕920所示,处理器1103可以显示缩略图像放大,或者如图12C的屏幕920所示,显示缩略图像缩小。可以根据用户输入或预定方式来执行对缩略图的大小的改变。
根据示例性实施例的显示设备1可以在形式上改变用于缩略图像的3D结构。图13A-13C示出了根据示例性实施例的显示设备的缩略图像显示屏幕的另一示例。处理器1103显示GUI 1010,其包括具有预定形式的3D结构的缩略图像1011,如图13A所示。处理器113可以改变缩略图像1011的3D结构的形式。例如,如图13B的GUI 1020所示,与缩略图1011相比,处理器可以将缩略图像1011改变为纵向拉长的长方体形式的缩略图像1021。根据如图13C的GUI 1030所示的另一示例性实施例,与缩略图1011相比,处理器1103可以将缩略图像1011改变为横向拉长的长方体形式的缩略图像1031。然而,3D结构的可变形形式不限于此。可以根据用户输入或预定方法来执行缩略图像的3D结构形式的改变。
图14是示出根据示例性实施例的显示设备的控制方法的流程图。将参照图14描述的显示设备的控制方法可以通过参照图1、2、3、4、5A-5C,6A-6C、7A-7B、8、9A-9C、10A-10C、11A-11B、12A-12C和13A-13C描述的显示设备执行。如图14所示,显示设备将内容图像映射到从具有不同形式的多个3D结构中选择的一个3D结构(S1201)。显示设备根据请求视角移动的用户命令显示映射到所选择的一个3D结构的内容图像的区域(S1202)。
如上所述,根据示例性实施例,用户可以欣赏通过用户输入选择的期望的3D结构中的内容。
此外,根据示例性实施例,显示设备可以提供用于360度/VR内容的缩略图,借此,用户可以容易地知道它们分别对应360度/VR图像,并且,缩略图可以不失真地显示与其对应的内容的信息。
此外,根据示例性实施例,显示设备可以以多种方式提供内容的缩略图像,从而为用户提供UI/UX方面的娱乐。
根据上文所述的本公开的各种示例性实施例的方法可以实现为可以安装在电子设备(即,显示设备或移动显示设备)中的应用类型。
根据上文所述的本公开的各种示例性实施例的方法还可以仅通过升级电子设备(即,显示设备或移动显示设备)的软件或硬件来实现。
根据示例性实施例,可以使用硬件组件、软件组件或其组合来实现在此描述的元件、组件、方法或操作。例如,硬件组件可以包括处理设备。根据示例性实施例,显示设备可以包括处理设备,诸如图像处理器或控制器,其可以使用一个或多个通用或专用计算机,例如硬件处理器、CPU、硬件控制器、ALU、DSP、微型计算机、FPGA、PLU、微处理器或能够以定义的方式响应并执行指令的任何其他设备来实现。处理设备可以运行操作***(OS)和在OS上运行的一个或多个软件应用程序。处理设备还可以响应于软件的执行而访问、存储、操作、处理和创建数据。为了简单起见,处理设备的描述被用作单数;然而,本领域技术人员将会理解,处理设备可以包括多个处理元件和多种类型的处理元件。例如,处理设备可以包括多个处理器或者处理器和控制器。另外,不同的处理配置也是可能的,例如并行处理器。
根据本公开的示例性实施例,上面描述的各种示例性实施例可以实现为包括存储在机器可读存储介质(例如,计算机可读存储介质)中的指令的软件。设备可以是调用来自存储介质的指令的设备,可以根据被调用的指令进行操作,并且可以包括根据公开的示例性实施例的电子设备(例如,电子设备A)。如果指令由处理器执行,则处理器可以直接执行与该指令相对应的功能,或者该功能可以通过在处理器的控制下使用其他类型的元件来执行。该指令可以包括由编译器或解释器生成或执行的代码。用于执行根据上述各种示例性实施例的设备的处理操作的计算机指令可以被存储在非暂时性计算机可读介质中。存储在非临时性计算机可读介质中的计算机指令使特定设备能够在由特定设备的处理器执行时在根据上述示例性实施例的设备中执行处理操作。非临时性计算机可读介质是不临时的存储数据的介质,例如寄存器、兑付器和存储器,而是半永久地存储数据并且可以被设备读取。更具体地说,前述应用程序或程序可以存储在非临时计算机可读介质中,诸如光盘(CD)、数字视频盘(DVD)、硬盘、蓝光盘、通用串行总线(USB)、存储卡和只读存储器(ROM)。
根据上述各种示例性实施例的元件(例如,模块或程序)中的每个元件可以包括单个实体或多个实体,并且上面描述的一些对应的子元件可以被省略或者其他类型的子元件可以进一步包括在各种示例性实施例中。可替代地或附加地,一些元件(例如,模块或程序)可以被集成到一个实体中,然后可以等同地或类似地执行由未被集成的每个对应元件执行的功能。根据各种示例性实施例的由模块、程序或者其他类型的元件执行的操作可以被顺序地、并行地或者试探性地执行,或者至少一些操作可以以不同的顺序执行或者可以被省略,或者其他类型的操作可以被添加。
前述示例性实施例和优点仅是示例性的,并不被解释为限制本公开。本教导可以容易地应用于其他类型的设备。此外,本公开的示例性实施例的描述旨在是说明性的,而不是限制权利要求的范围,并且对于本领域技术人员来说许多替代、修改和变化将是显而易见的。
Claims (15)
1.一种显示设备,包括:
显示器;
接收器,其被配置为接收命令;
处理器,其被配置为:
控制该显示器显示包括与多个内容分别对应的多个缩略图的内容列表,
识别用于生成用于代表所述多个内容当中的内容的缩略图的内容图像的区域,其中该内容图像是将要被映射到三维3D对象以播放该内容的图像,而且其中该区域具有从该内容图像的沿第二方向的轴线起沿第一方向正负预定宽度的预定范围,该轴线是基于该内容图像的几何失真而确定的,
控制该显示器显示所生成的用于代表该内容的缩略图,其中所生成的缩略图是依次显示多个子图像的运动图像,所述多个子图像是通过相对于该内容图像的该区域沿第二方向移动视角而生成的,
基于经由该接收器接收用于选择所生成的缩略图的用户输入,执行用于通过将该内容图像映射到该3D对象而生成图像的操作,以及
控制所述显示器显示与所生成的图像的一个视角对应的所生成的图像的范围,
其中,第一方向和第二方向相互垂直。
2.根据权利要求1所述的显示设备,其中,所述处理器还被配置为控制在所述显示器上显示包括所生成的缩略图的图形用户界面GUI。
3.根据权利要求2所述的显示设备,其中,所述处理器还被配置为通过将所述内容图像的距离所述内容图像的沿第二方向的该轴线该预定宽度的该区域映射到从多个3D对象中选择的3D对象而生成缩略图。
4.根据权利要求2所述的显示设备,其中,所述处理器还被配置为:
将所述内容图像映射到具有不同几何形式的多个3D对象中的每一个而生成对应于所述内容图像的多个图像,并且
生成所述多个缩略图,每个缩略图对应所述多个图像中的每一个的一个视角。
5.根据权利要求4所述的显示设备,其中,所述处理器还被配置为控制所述显示器显示所述多个缩略图中的至少一个缩略图与其他缩略图区分开。
6.根据权利要求5所述的显示设备,其中,所述处理器还被配置为基于所述内容图像的内容的属性来控制所述显示器显示所述多个缩略图中的至少一个缩略图与其他缩略图区分开。
7.根据权利要求1所述的显示设备,其中,所述处理器被配置为控制所述显示器显示关于所述内容图像的内容的具有多个3D对象中的第一3D对象的第一缩略图,并且,响应于对所述多个3D对象中的第二3D对象的选择,将具有第一3D对象的第一缩略图改变为具有第二3D对象的第二缩略图,并且,控制所述显示器显示所述第二缩略图。
8.根据权利要求2所述的显示设备,其中,所述处理器还被配置为改变所生成的缩略图的尺寸以生成改变的缩略图,并控制所述显示器显示被改变的缩略图。
9.根据权利要求4所述的显示设备,其中,所述多个3D对象包括立方体、球体、圆柱体或圆锥体中的至少一个。
10.根据权利要求1所述的显示设备,其中,该接收器被配置为接收用于选择所生成的图像的视角的用户输入。
11.一种显示设备的控制方法,包括:
显示包括与多个内容分别对应的多个缩略图的内容列表;
识别用于生成用于代表所述多个内容当中的内容的缩略图的内容图像的区域,其中该内容图像是将要被映射到三维3D对象以播放该内容的图像,而且其中该区域具有从该内容图像的沿第二方向的轴线起沿第一方向正负预定宽度的预定范围,该轴线是基于该内容图像的几何失真而确定的;
显示所生成的用于代表该内容的缩略图,其中所生成的缩略图是依次显示多个子图像的运动图像,所述多个子图像是通过相对于该内容图像的该区域沿第二方向移动视角而生成的;
基于接收用于选择所生成的缩略图的用户输入,执行用于通过将该内容图像映射到该3D对象而生成图像的操作;以及
显示与所生成的图像的一个视角对应的所生成的图像的范围,
其中,第一方向和第二方向相互垂直。
12.根据权利要求11所述的方法,还包括显示包括所生成的缩略图的图形用户界面GUI。
13.根据权利要求12所述的方法,其中,生成缩略图包括将距离所述内容图像的沿第二方向的该轴线该预定宽度的该内容图像的该区域映射到所述3D对象。
14.根据权利要求12所述的方法,其中,生成缩略图像包括:
将所述内容图像映射到具有不同形式的多个3D对象中的每一个,以生成对应于所述内容图像的多个图像;并且
生成各自与所述多个图像中的每一个的一个视角对应的所述多个缩略图。
15.根据权利要求14所述的方法,其中,生成缩略图包括将所述多个缩略图中的至少一个缩略图与其他缩略图区分开。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR10-2016-0172839 | 2016-12-16 | ||
KR1020160172839A KR102676837B1 (ko) | 2016-12-16 | 2016-12-16 | 디스플레이장치 및 그 제어방법 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108205431A CN108205431A (zh) | 2018-06-26 |
CN108205431B true CN108205431B (zh) | 2021-06-25 |
Family
ID=60937494
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201711350668.9A Active CN108205431B (zh) | 2016-12-16 | 2017-12-15 | 显示设备及其控制方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US11094105B2 (zh) |
EP (1) | EP3336845A1 (zh) |
KR (1) | KR102676837B1 (zh) |
CN (1) | CN108205431B (zh) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102598082B1 (ko) * | 2016-10-28 | 2023-11-03 | 삼성전자주식회사 | 영상 표시 장치, 모바일 장치 및 그 동작방법 |
US10649638B2 (en) * | 2018-02-06 | 2020-05-12 | Adobe Inc. | Immersive media content navigation and editing techniques |
JP7052613B2 (ja) * | 2018-07-20 | 2022-04-12 | 株式会社Jvcケンウッド | 表示制御装置、表示制御方法及びプログラム |
JP7268369B2 (ja) * | 2019-01-30 | 2023-05-08 | 株式会社リコー | 撮像システム、現像システム、撮像方法、及びプログラム |
US20210327121A1 (en) * | 2020-04-15 | 2021-10-21 | Sirisilp Kongsilp | Display based mixed-reality device |
CN112637039B (zh) * | 2020-07-24 | 2021-11-02 | 腾讯科技(深圳)有限公司 | 一种信息处理方法、装置及存储介质 |
US11533467B2 (en) * | 2021-05-04 | 2022-12-20 | Dapper Labs, Inc. | System and method for creating, managing, and displaying 3D digital collectibles with overlay display elements and surrounding structure display elements |
US11579769B1 (en) * | 2021-12-14 | 2023-02-14 | International Business Machines Corporation | Graphic device for controlling displayed object movement and/or screen scrolling |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2001089221A1 (en) * | 2000-05-18 | 2001-11-22 | Imove Inc. | Multiple camera video system which displays selected images |
US6529206B1 (en) * | 1998-07-13 | 2003-03-04 | Sony Corporation | Image processing apparatus and method, and medium therefor |
EP1487205A1 (en) * | 2003-06-14 | 2004-12-15 | Impressive Ideas Ltd. | Display system for views of video item |
CN101999139A (zh) * | 2007-10-11 | 2011-03-30 | 罗伯特·博世有限公司 | 用于产生和/或更新背景对象模型的纹理的方法、用于实施所述方法的视频监视***以及计算机程序 |
CN203164590U (zh) * | 2013-04-11 | 2013-08-28 | 深圳市真屏科技发展有限公司 | 高清广角投影膜 |
CN103582900A (zh) * | 2011-05-31 | 2014-02-12 | 汤姆逊许可公司 | 用于对3d内容进行重定目标的方法和设备 |
CN104065875A (zh) * | 2013-03-22 | 2014-09-24 | 卡西欧计算机株式会社 | 显示控制装置以及显示控制方法 |
CN105389787A (zh) * | 2015-09-30 | 2016-03-09 | 华为技术有限公司 | 一种全景图像拼接方法及装置 |
CN105701766A (zh) * | 2016-02-24 | 2016-06-22 | 网易(杭州)网络有限公司 | 图形匹配方法和装置 |
CN105791795A (zh) * | 2014-12-24 | 2016-07-20 | 北京三星通信技术研究有限公司 | 立体图像处理方法、装置以及立体视频显示设备 |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO1997042601A1 (en) * | 1996-05-06 | 1997-11-13 | Sas Institute, Inc. | Integrated interactive multimedia process |
JP2002064812A (ja) | 2000-08-17 | 2002-02-28 | Sharp Corp | 移動物体追尾装置 |
US20040104935A1 (en) * | 2001-01-26 | 2004-06-03 | Todd Williamson | Virtual reality immersion system |
KR20100050103A (ko) * | 2008-11-05 | 2010-05-13 | 엘지전자 주식회사 | 맵 상에서의 3차원 개체 제어방법과 이를 이용한 이동 단말기 |
KR101631912B1 (ko) | 2009-11-03 | 2016-06-20 | 엘지전자 주식회사 | 이동 단말기 및 그 제어 방법 |
JP5740972B2 (ja) * | 2010-09-30 | 2015-07-01 | ソニー株式会社 | 情報処理装置および情報処理方法 |
JP4917664B1 (ja) * | 2010-10-27 | 2012-04-18 | 株式会社コナミデジタルエンタテインメント | 画像表示装置、ゲームプログラム、ゲーム制御方法 |
US9891790B2 (en) * | 2012-06-05 | 2018-02-13 | Hubin Jiang | Systems and methods for web-based product/content fusion management functions and user interaction therewith |
US20150325055A1 (en) * | 2012-12-17 | 2015-11-12 | Anil Kumar Balakrishna | Display apparatus |
JP6167703B2 (ja) * | 2013-07-08 | 2017-07-26 | 株式会社リコー | 表示制御装置、プログラム及び記録媒体 |
US10204658B2 (en) * | 2014-07-14 | 2019-02-12 | Sony Interactive Entertainment Inc. | System and method for use in playing back panorama video content |
US9948913B2 (en) | 2014-12-24 | 2018-04-17 | Samsung Electronics Co., Ltd. | Image processing method and apparatus for processing an image pair |
CA2991882A1 (en) * | 2015-07-21 | 2017-01-26 | Ricoh Company, Ltd. | Image management system, image management method and program |
US10219026B2 (en) * | 2015-08-26 | 2019-02-26 | Lg Electronics Inc. | Mobile terminal and method for playback of a multi-view video |
KR20180031437A (ko) * | 2016-09-20 | 2018-03-28 | 엘지전자 주식회사 | 디스플레이 장치 |
-
2016
- 2016-12-16 KR KR1020160172839A patent/KR102676837B1/ko active IP Right Grant
-
2017
- 2017-12-14 EP EP17207243.1A patent/EP3336845A1/en not_active Withdrawn
- 2017-12-15 US US15/843,129 patent/US11094105B2/en active Active
- 2017-12-15 CN CN201711350668.9A patent/CN108205431B/zh active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6529206B1 (en) * | 1998-07-13 | 2003-03-04 | Sony Corporation | Image processing apparatus and method, and medium therefor |
WO2001089221A1 (en) * | 2000-05-18 | 2001-11-22 | Imove Inc. | Multiple camera video system which displays selected images |
EP1487205A1 (en) * | 2003-06-14 | 2004-12-15 | Impressive Ideas Ltd. | Display system for views of video item |
CN101999139A (zh) * | 2007-10-11 | 2011-03-30 | 罗伯特·博世有限公司 | 用于产生和/或更新背景对象模型的纹理的方法、用于实施所述方法的视频监视***以及计算机程序 |
CN103582900A (zh) * | 2011-05-31 | 2014-02-12 | 汤姆逊许可公司 | 用于对3d内容进行重定目标的方法和设备 |
CN104065875A (zh) * | 2013-03-22 | 2014-09-24 | 卡西欧计算机株式会社 | 显示控制装置以及显示控制方法 |
CN203164590U (zh) * | 2013-04-11 | 2013-08-28 | 深圳市真屏科技发展有限公司 | 高清广角投影膜 |
CN105791795A (zh) * | 2014-12-24 | 2016-07-20 | 北京三星通信技术研究有限公司 | 立体图像处理方法、装置以及立体视频显示设备 |
CN105389787A (zh) * | 2015-09-30 | 2016-03-09 | 华为技术有限公司 | 一种全景图像拼接方法及装置 |
CN105701766A (zh) * | 2016-02-24 | 2016-06-22 | 网易(杭州)网络有限公司 | 图形匹配方法和装置 |
Also Published As
Publication number | Publication date |
---|---|
CN108205431A (zh) | 2018-06-26 |
US20180174356A1 (en) | 2018-06-21 |
KR102676837B1 (ko) | 2024-06-21 |
EP3336845A1 (en) | 2018-06-20 |
US11094105B2 (en) | 2021-08-17 |
KR20180070297A (ko) | 2018-06-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108205431B (zh) | 显示设备及其控制方法 | |
CN107801075B (zh) | 图像显示设备及其操作方法 | |
US20140337749A1 (en) | Display apparatus and graphic user interface screen providing method thereof | |
KR102575230B1 (ko) | 원격제어장치 및 그 동작방법 | |
US20140337792A1 (en) | Display apparatus and user interface screen providing method thereof | |
US20140337773A1 (en) | Display apparatus and display method for displaying a polyhedral graphical user interface | |
US10671265B2 (en) | Display apparatus and display method | |
EP3479590B1 (en) | Image display apparatus and operating method thereof for displaying 360° images | |
CN108293146B (zh) | 图像显示设备及其操作方法 | |
US10467987B2 (en) | Display apparatus and controlling method thereof | |
KR102431712B1 (ko) | 전자장치, 그 제어방법 및 그 컴퓨터프로그램제품 | |
CN105704525B (zh) | 显示设备和显示方法 | |
US10802784B2 (en) | Transmission of data related to an indicator between a user terminal device and a head mounted display and method for controlling the transmission of data | |
US10810789B2 (en) | Image display apparatus, mobile device, and methods of operating the same | |
WO2020248714A1 (zh) | 一种数据传输方法及设备 | |
CN108924538A (zh) | Ar设备的屏幕拓展方法 | |
KR102511363B1 (ko) | 디스플레이 장치 및 디스플레이 방법 | |
WO2020248681A1 (zh) | 显示设备及蓝牙开关状态的显示方法 | |
US11310441B2 (en) | Electronic device for generating a background image for a display apparatus and operation method thereof | |
EP3032392B1 (en) | Display apparatus and display method | |
US11962743B2 (en) | 3D display system and 3D display method | |
US20210185267A1 (en) | Display apparatus and operation method thereof | |
KR20240037802A (ko) | 프로젝션 장치 및 그 동작 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |