CN105191330A

CN105191330A - 显示装置及其图形用户界面屏幕提供方法

Info

Publication number: CN105191330A
Application number: CN201480025465.0A
Authority: CN
Inventors: 房俊昊; 文周宣; 郑道圣; 金泓杓; 朴熠锡; 克里斯多佛·E·班戈
Original assignee: Samsung Electronics Co Ltd
Current assignee: Samsung Electronics Co Ltd
Priority date: 2013-05-10
Filing date: 2014-05-08
Publication date: 2015-12-23
Also published as: KR20140133362A; EP2995093A4; EP2995093A1; US20140337749A1; WO2014182089A1

Abstract

一种显示装置包括：显示器，被配置为显示包括多个区域的GUI屏幕；用户接口，被配置为接收相对于GUI屏幕的用户交互；控制器，被配置为通过转动GUI屏幕来控制显示器将所述多个区域中的与用户交互相对应的区域显示为主区域，并被配置为执行映射到主区域的控制操作，其中主区域是以预定比例或更大比例占据GUI屏幕的区域。

Description

显示装置及其图形用户界面屏幕提供方法

技术领域

根据示例性实施例的装置和方法涉及显示装置及其图形用户界面(GUI)屏幕提供方法，更具体地，涉及根据用户视点提供GUI屏幕的显示装置及其GUI屏幕提供方法。

背景技术

随着电子技术的发展，已经开发出各种类型的显示装置。具体地，诸如电视(TV)、个人计算机(PC)、平板PC、便携式电话和MPEG音频层-3(MP3)播放器的显示装置已经广泛分布。

为了满足想要更新和多样化功能的用户的需要，近期已经开发出新型的显示装置。例如，在近期开发的显示装置中，提供了被配置为控制显示装置的各种类型的界面。

在这方面，需要一种用于提供可以直观地提供各种信息并提高用户操作界面屏幕的便利性的界面屏幕的方法。

发明内容

技术问题

示例性实施例可以解决至少以上问题和/或缺点以及以上未描述的其它缺点。此外，示例性实施例不必须解决上述缺点，并且示例性实施例可以不解决上述任何问题。

一个或多个示例性实施例提供一种显示装置及其图形用户界面(GUI)屏幕提供方法，其中，所述显示装置显示多个区域中的与用户的视点相对应的区域，并提供与该区域相对应的服务。

问题的解决方案

根据示例性实施例的一方面，一种显示装置包括：显示器，被配置为显示包括多个区域的图形用户界面(GUI)屏幕；用户接口，被配置为接收相对于GUI屏幕的用户交互；控制器，被配置为控制显示器根据改变的用户视角将所述多个区域中的与用户交互相对应的区域显示为主区域，并被配置为执行映射到主区域的控制操作。

提供信息、服务和功能中的至少一个的多个控制操作被分别映射到所述多个区域。

所述多个区域可以包括位于GUI屏幕上部的天花板区域、位于GUI屏幕中部的墙壁区域和位于GUI屏幕下部的地板区域。

控制器可以在天花板区域被显示为主区域时提供信息服务。

信息服务可以包括天气信息提供服务。

控制器可以在墙壁区域被显示为主区域时提供商务服务。

商务服务可以是用于提供与产品的实际购买相关联的产品的虚拟购买的服务。

控制器可以在地板区域被显示为主区域时提供控制服务。

控制服务可以包括家庭设备控制服务和家庭安全控制服务中的至少一个。

用户接口可以接收根据用户的头方向的用户交互，并且在墙壁区域被显示为主区域的状态下，控制器可以控制在接收到根据用户的抬头方向的用户交互时将天花板区域显示为主区域，并且在接收到根据用户的低头方向的用户交互时将地板区域显示为主区域。

用户接口可以接收根据被配置为遥控所述显示装置的遥控装置的动作的遥控器信号，并且在墙壁区域被显示为主区域的状态下，控制器可以控制在接收到与向上移动遥控装置的动作相对应的遥控器信号时将天花板区域显示为主区域，并且在接收到与向下移动遥控装置的动作相对应的遥控器信号时将地板区域显示为主区域。

控制器可以控制基于外部环境信息和与映射到主区域的控制操作相对应的内容类型中的至少一个来显示背景元素。

主区域可以是以预定比例或更大比例占据GUI屏幕的区域。

根据另一示例性实施例的一方面，一种被配置为提供包括多个区域的图形用户界面(GUI)屏幕的显示装置的提供GUI屏幕的方法包括：接收相对于GUI屏幕的用户交互；根据改变的用户视角将所述多个区域中的与用户交互相对应的区域显示为主区域，并执行映射到主区域的控制操作。

执行可以包括：在天花板区域被显示为主区域时提供信息服务。

执行可以包括：在墙壁区域被显示为主区域时提供商务服务。

执行可以包括：在地板区域被显示为主区域时提供控制服务。

显示可以包括：在墙壁区域被显示为主区域的状态下，在接收到根据用户的抬头移动的用户交互时将天花板区域显示为主区域，并且在接收到根据用户的低头移动的用户交互时将地板区域显示为主区域。

根据另一示例性实施例的一方面，一种显示装置包括：显示器，被配置为显示包括三维(3D)空间的图形用户界面(GUI)屏幕，所述3D空间包括多个平面图像；用户接口，被配置为接收用于选择GUI屏幕的至少一个平面图像的用户输入；控制器，被配置为执行与所述多个平面图像中的被选择的至少一个平面图像相对应的控制操作。

根据另一示例性实施例的一方面，一种用户接口处理设备包括：可操作为读取计算机程序中的指令并根据该指令操作的至少一个处理器；可操作为存储用于由所述处理器访问的所述计算机程序的至少部分的至少一个存储器；其中，所述计算机程序包括使所述处理器实施以下项的算法：用户接口，被配置为接收指示用户相对于包括三维(3D)空间的图形用户界面(GUI)屏幕的视点的用户输入；控制器，被配置为基于用户输入执行与根据用户视点调节的GUI屏幕相对应的控制操作，其中，从与在调节的GUI屏幕中显示的对象映射的多个控制操作中选择所述控制操作。

根据另一示例性实施例的一方面，提供了一种存储用于使计算机能够执行上述方法的程序的非暂时性计算机可读存储介质。

本发明的有益效果

根据上述各示例性实施例的多个方面，可以根据用户交互在优化屏幕上提供各种信息，以提高用户便利性。

附图说明

图1是解释根据示例性实施例的显示***的示图；

图2(a)和(b)是示出根据示例性实施例的显示装置的配置的框图；

图3是示出根据示例性实施例的存储在存储器中的各种软件模块的示图；

图4A至图5B是示出根据示例性实施例的用户界面(UI)屏幕的示图；

图6A至图6B是示出根据另一示例性实施例的UI屏幕的示图；

图7A至图7C是示出根据示例性实施例的在天花板空间中提供的UI屏幕的示图；

图8A至图8C是示出根据各示例性实施例的在地板空间中提供的UI屏幕的示图；

图9A至图9B是示出根据各示例性实施例的在墙壁空间中提供的UI屏幕的示图；

图10A至图11B是示出根据各示例性实施例的由墙壁空间提供的背景屏幕的示图；

图12A至图12C是示出根据各示例性实施例的可由天花板空间提供的功能或信息的示图；

图13A至图13C是示出根据各示例性实施例的可由地板空间提供的功能或信息的示图；

图14是解释根据示例性实施例的UI屏幕提供方法的流程图；

图15是解释根据另一示例性实施例的UI屏幕提供方法的流程图。

具体实施方式

现在将参照附图更详细地描述特定示例性实施例。

在以下描述中，即使在不同附图中，相同附图标记也被用于相同元件。在描述中定义的事物，诸如详细结构和元件，被提供用于帮助对本公开的全面理解。因此，应清楚，可以在没有这些具体定义的事物的情况下执行示例性实施例。此外，不详细描述公知功能或结构，因为它们会以不必要的细节模糊本公开。

图1是解释根据示例性实施例的显示***的示图。

参照图1，根据示例性实施例的显示***包括显示装置100和遥控装置200。

显示装置100可以被实施为图1中示出的数字电视(TV)，但是显示装置100不限于此。显示装置可以被实施为具有显示功能的各种类型的装置，例如个人计算机(PC)、便携式电话、平板PC、便携式多媒体播放器(PMP)、个人数字助理(PDA)或导航***。当显示装置100被实施为便携式装置时，显示装置100可以被实施为具有嵌入其中的触摸屏，以使用手指或笔(例如触控笔)执行程序。在下文中，为了描述的方便，假设和描述显示装置100被实施为数字TV。

当显示装置100被实施为数字TV时，显示装置100可以通过用户动作或遥控装置200进行控制。此时，遥控装置200是被配置为遥控显示装置100的装置，并且可以接收用户命令，并向显示装置100发送与输入的用户命令相对应的控制信号。例如，遥控装置200可以被实施为各种类型，例如，感测遥控装置200的动作并发送与该动作相对应的信号，识别语音并发送与识别的语音相对应的信号，或者发送与输入键相对应的信号，等等。此时，遥控装置200可以包括例如被配置为接收各种类型的用户命令的动作传感器、触摸传感器或应用光学技术的光学操纵杆(OJ)传感器、物理按钮(例如，触觉开关)、显示屏幕、麦克风等。这里，OJ传感器是被配置为通过OJ感测用户操作的图像传感器，并且与倒置的光学鼠标类似地操作。也就是说，用户仅需要用手指控制OJ来使OJ传感器分析信号。

显示装置100可根据通过遥控装置200输入的用户命令来提供各种三维(3D)用户界面(UI)屏幕。

具体地，显示装置100可以提供包括至少一个多面体图标并被配置为与用户的多个视角相对应的图形用户界面(GUI)屏幕。在下文中，将参照示出显示装置100的具体配置的框图描述各种示例性实施例。

图2(a)和(b)是示出根据示例性实施例的显示装置的配置的框图。

参照图2(a)，显示装置100包括显示器110、用户接口120和控制器130。

显示器110显示屏幕。这里，屏幕可以包括各种内容(诸如图像、运动图像、文本、音乐)的再现屏幕、包括各种内容的应用的应用执行屏幕、web浏览器屏幕、GUI屏幕。

这里，显示器110可以被实施为液晶显示器(LCD)、有机发光二极管(OLED)等，但显示器110不限于此。在一些实施例中，显示器110可以被实施为柔性显示器、透明显示器等。

<包括多个空间元素的UI>

显示器110可以显示包括与多个用户视角相对应的多个区域的GUI。

这里，与多个视角相对应的GUI屏幕可以包括与天花板空间相对应的GUI屏幕、与墙壁空间相对应的GUI屏幕和与地板空间相对应的GUI屏幕中的至少一个。

也就是说，GUI屏幕可以包括像房间那样的空间，即，天花板空间、由被配置为支撑天花板空间的三面墙限定的墙壁空间、以及位于三面墙之下的地板空间。一面墙是用户所位于的空间，并且可以提供用户观看在未显示的空间墙的位置中的相应房间的视点。

此时，提供三维(3D)空间的UI屏幕可以被设置为二维(2D)屏幕类型或3D屏幕类型。也就是说，显示器110可以通过时间划分左眼图像和右眼图像，并且交替地显示时间划分后的左眼图像和右眼图像来实现3D屏幕，并且可以通过左眼图像和右眼图像之间的视差来提供深度感。因此，用户可以获得包括在UI屏幕中的各对象的深度信息，并感觉到立方体(3D)效果。可以通过对包括在UI屏幕中的对象进行透视处理来在2D图像中提供3D空间。

<在空间元素中提供的服务(或功能)或信息>

与多个视角相对应的GUI屏幕可以提供与多个视角相映射的信息、功能和服务中的至少一个。具体地，在示例性实施例中，天花板空间可以提供信息服务，墙壁空间可以提供商务服务，地板空间可以提供控制服务。这里，信息服务是用于提供各种信息的服务，商务服务是用于通过诸如互联网的电子媒介提供电子商务服务的服务，控制服务是用于提供被配置为控制多种装置的功能的服务。

在另一示例性实施例中，天花板空间可以提供第一类型信息，墙壁空间可以提供第二类型信息，地板空间可以提供第三类型信息。例如，各种类型的信息可以包括用于向用户提供简单通知的信息、用于提供与用户的相互交互的信息等，但这不限于此。

在另一示例性实施例中，天花板空间可以提供第一功能，墙壁空间可以提供第二功能，地板空间可以提供第三功能。例如，第一功能至第三功能可以包括内容再现功能、电话功能等，但这不限于此。

可以以任意组合的形式提供服务、功能和信息。也就是说，一个空间可以提供第一类型信息，而其它空间可以提供第二类型信息。

可以根据用户认证处理向每个用户提供不同信息或服务。例如，根据示例性实施例的UI可以被实施为通过用户认证来向多个用户提供不同的UI屏幕。也就是说，由于即使是家庭成员也可能具有彼此不同的行为模式、偏好等，因此可以在执行了诸如登录处理的认证处理之后，提供与相应用户的行为模式、偏好、设置状态相对应的UI屏幕。

<UI背景元素>

根据示例性实施例的UI屏幕可以包括背景元素。

具体地，可以显示反映环境元素的背景或者与内容类型相对应的背景。在一些实施例中，可以显示由用户之前选择的背景。这里，环境元素可以包括外部天气元素(诸如雨、雪、雷、雾或风)和时间元素(诸如白天和夜晚)。可以通过诸如内容类别、内容表演者和内容导演的各种元素来确定内容类型。

例如，当当前正在下雨时，可以提供与雨天相对应的背景。当选择了与科幻(SF)电影内容相对应的内容时，可以提供包括不明飞行物(UFO)图像的背景。

背景可以提供各种动画效果。例如，可以提供正在下雨或者UFO抬高一物体的动画图像。此时，可以基于包括在相应内容中的元数据信息来提供基于内容类型的背景。例如，可以预先映射和存储与各种元数据信息相对应的背景元素。

此外，可以在维持天花板、墙壁和地板空间的状态下提供背景元素。备选地，天花板、墙壁和地板空间可以消失，并且可以仅显示背景元素。

背景不需要与其它图像一起显示，并且背景元素可以被提供为使得能够仅调节颜色、亮度等。

<在墙壁空间中提供的立方体GUI>

包括三面墙的室空间可以提供多面体GUI。这里，多面体可以是立方体，此时，多面体GUI可以被称为立方体GUI。然而，多面体GUI的多面体不限于立方体形状。多面体GUI的多面体可以被实施为各种形状，诸如三棱柱、六棱柱或长方体。在下文中，为了便于描述，假设多面体GUI是立方体GUI。

在室空间中显示的立方体GUI可以是规则六面体显示元素，并且立方体GUI可以被实施为表示预定对象。例如，立方体GUI可以表示各种对象，诸如内容、内容提供者或服务提供者。

构成立方体GUI的至少一个表面可以操作为被配置为向用户提供预定信息的信息表面。构成立方体GUI的该至少一个表面可以根据由立方体GUI表示的对象来提供各种信息。例如，取决于根据用户命令的菜单深度等，构成立方体GUI的至少一个表面可以显示各种信息，诸如内容提供者信息、内容信息、服务提供者信息、服务信息、应用程序执行信息、内容执行信息和用户信息。此外，显示的信息可以包括各种元素，诸如文本、文件、图像、运动图像、图标、按钮、菜单和3D图标。例如，内容提供者信息可以被设置为象征对应的内容提供者的一种类型的图标、标志等，内容信息可以被设置为缩略图的形式。用户信息可以被设置为每个用户的简档图像。可以通过以下操作来提供缩略图：对在原始内容中提供的附加信息进行解码，将解码后的附加信息转换为缩略图尺寸。备选地，当没有附加信息时，可以通过以下操作来提供缩略图：对原始内容进行解码，将解码的原始内容转换成缩略图尺寸，并提取缩小的缩略图图像。这里，原始内容可以是静止图像形式或运动图像形式。当原始内容是运动图像时，缩略图图像可以被产生为包括多个静止图像的动画图像的形式。

<提供立方体GUI的室空间>

可以在室空间中以漂浮形式提供立方体GUI。

具体地，显示器110可以在三维(3D)空间中以漂浮形式显示立方体GUI，其中，所述三维空间由沿屏幕的X轴和Y轴并具有沿Z轴的预定深度的三面墙形成。也就是说，显示器110可以以多个立方体GUI漂浮在室空间中的形式来显示UI屏幕，其中，在所述室空间中，三面墙的第一墙形成左表面，第二墙形成后表面，第三墙形成右表面。

多个立方体GUI可以被显示为彼此之间具有恒定距离，并被布置为n×m矩阵形式。然而，多个立方体GUI的布置仅仅是示例性的，并且所述多个立方体GUI可以具有各种类型的布置，诸如辐射状布置或线性布置。立方体GUI可以被设置为2D或3D方式。这里，2D方法可以是用于以仅显示每个立方体GUI一个表面且隐藏该立方体的其它表面的形式来显示立方体GUI的显示方法。3D方法可以是用于以显示每个立方体GUI的至少两个表面的3D形式显示立方体GUI的方法。

接下来将显示的立方体GUI可以在三面墙中的至少一面中被显示为具有预设透明度。具体地，当在包含于特定类别中的相应立方室中包括的第一立方体GUI列表中的立方体GUI被显示时，可以例如在右墙中以预设透明度(例如半透明)显示在接下来将显示的第二立方体GUI列表中包括的立方体GUI。也就是说，可以以预览格式提供接下来将在构成立方室的墙上显示的立方体GUI。此时，可以例如在左墙上半透明地显示在布置在相应方向中的立方体GUI列表中包括的立方体GUI。例如，当在立方室中包括第一至第五立方体GUI列表时，可以在左墙上半透明地显示在第五立方体GUI列表中包括的立方体GUI。此时，可以根据与墙的用户交互在墙上显示另一立方体列表。例如，当在选择了左墙的状态下存在预设交互时，可以在左墙上显示第三立方体GUI列表。

天花板空间可以被显示为在三面墙之上，并且地板空间可以被显示为在三面墙之下。然而，在包括三面墙的室空间被显示为主空间时，天花板空间和地板空间可以被部分地显示。这里，主空间可以是位于GUI屏幕的预定位置处的空间。在另一示例中，主空间可以是以预设比例或更大比例占据GUI屏幕的空间。

<包括多个室空间的星状结构>

包括立方体GUI的3D空间可以被实施为使得多个3D空间被提供，并且新的3D空间根据其转动而显示。具体地，通道区域可以被布置在中心部分，并且规则六面体3D空间可以被布置为通过通道区域彼此连接。也就是说，立方室的总体形状可以被实施为具有星形结构(在下文中被称为星状结构)，如图4A和图4B中所示。3D空间可以表示不同的类别，并且包括在每个类别中的对象可通过立方体GUI来显示。这里，类别可被划分为多种类型，例如，实时TV类别、基于视频点播(VOD)内容的类别、基于社交网络服务(SNS)内容的类别、应用提供类别、个人内容类别等。类别的划分仅是示例性的，并且可以根据各种标准来划分类别。此时，可以根据3D空间的转动用新的天花板、墙和地板来替换构成3D空间的已有天花板、墙和地板。

此外，稍后将参照附图描述在空间元素中提供的服务或信息的具体示例。

用户接口120可以接收各种用户交互。这里，用户接口120可以根据显示装置100的实施示例被实施为各种类型。当显示装置100被实施为数字电视时，用户接口120可以被实施为：被配置为从遥控装置200接收遥控器信号的遥控器接收器，被配置为感测用户的动作的相机，被配置为接收用户的语音的麦克风等。此外，当显示装置100被实施为基于触摸的便携式终端时，用户接口120可以被实施为与触摸垫形成多层结构的触摸屏形式。此时，用户接口120可以用作上述显示器110。

<与3D空间的用户交互>

根据示例性实施例，用户接口120可以感测与3DUI的各种用户交互。

具体地，用户接口120可以感测用于将空间元素(即天花板空间、墙壁空间和地板空间)显示为主空间的用户交互、以及在空间元素被显示为主空间的状态下输入的各种用户交互。

用于将空间元素显示为主空间的用户交互可以具有各种类型。

i)根据用户动作的用户交互

用户交互可以通过用户动作来输入。

例如，用户抬起他的头的抬头动作可以是用于将天花板空间显示为主空间的用户交互，用户低下他的头的低头动作可以是用于将地板空间显示为主空间的用户交互。因此，用户接口120可以包括被配置为对用户的抬头和低头操作进行成像的相机。

然而，这不限于此，并且用户动作可以被实施为各种形式，诸如举手和/或放下手的动作、或者抬眼和/或垂眼的动作。

ii)根据遥控装置200的动作的用户交互

可以通过遥控装置200的指向动作输入用户交互。

例如，用于向上移动遥控装置200的向上指动作可以是用于将天花板空间显示为主空间的用户交互，用于向下移动遥控装置200的向下指动作可以是用于将地板空间显示为主空间的用户交互。因此，遥控装置200可以包括被配置为感测动作的地磁传感器(例如，9轴地磁传感器)、加速度传感器和陀螺仪传感器中的至少一个。

在遥控装置200中设置的光学操纵杆(OJ)传感器可以被实施为执行触发功能。也就是说，当输入了将OJ传感器按压预设时间或更长时间的交互时，显示装置100可以将该输入确定为用于确定遥控装置200的动作的触发命令，并在显示装置200的屏幕上显示被配置为引导遥控装置200的动作的指示符。将参照附图对此进行详细描述。在将OJ传感器按压少于预设时间的交互中，OJ传感器可以被实施为执行进入(ENTER)功能，例如，用于选择特定立方体GUI并在选择了该立方体GUI的状态下在屏幕上再现该立方体GUI的功能。

然而，示例性实施例不限于此，并且遥控装置200的手势动作可以被输入为用户交互。例如，可以输入特定手势(向上指或向下指)作为用于显示天花板空间或地板空间的手势。

iii)根据遥控装置200的OJ传感器的感测的用户交互

可以通过对设置在遥控装置200中的OJ传感器的操作来输入用户交互。

例如，在设置于遥控装置200中的OJ传感器上的方向向上操作可以是用于将天花板空间显示为主空间的用户交互，在OJ传感器上的方向向下操作可以是用于将地板空间显示为主空间的用户交互。OJ传感器是被配置为通过OJ感测用户操作的图像传感器，并像倒置的光学鼠标那样操作。也就是说，用户可以仅需要用手指控制OJ来使OJ传感器分析信号。

iv)根据遥控装置200的按钮输入的用户交互

可以通过遥控装置200的按钮操作输入用户交互。

例如，对设置于遥控装置200中的第一按钮的按压操作可以是用于显示天花板空间作为主空间的用户交互，对第二按钮的按压操作可以是用于显示地板空间作为主空间的用户交互。

v)根据遥控装置200的触摸面板操作的用户交互

可以通过在设置于遥控装置200中的触摸面板上的操作输入用户交互。

例如，在设置于遥控装置200中的触摸面板上的向上拖曳操作可以是用于将天花板空间显示为主空间的用户交互，在触摸面板上的向下拖曳操作可以是用于将地板空间显示为主空间的用户交互。触摸面板可以包括用于感测用户触摸的点的坐标的电阻式或电容式传感器。然而，示例性实施例不限于此，并且用户交互可以包括在触摸面板上输入的用于识别相应空间的文本，诸如天花板、向上、地板或向下。

vi)根据语音识别的用户交互

可以通过设置于遥控装置200中的麦克风或者单独设置的麦克风中的语音识别来输入用户交互。

例如，“向上”的用户语音识别可以是用于将天花板空间显示为主空间的用户交互，“向下”的用户语音识别可以是用于将地板空间显示为主空间的用户交互。然而，语音命令不限于此，并且语音命令可以具有诸如“上面”或“下面”的各种类型。

当墙壁空间被显示为主空间时，用户接口120可以感测与以漂浮形式显示在包括三面墙的立方室中的立方体GUI的用户交互。

例如，用户接口120可以感测各种用户交互，诸如用于选择立方体GUI的用户交互、用户转动立方体GUI的用户交互、用于改变立方体GUI的显示角度的用户交互、用于切割立方体GUI的用户交互、用于改变立方体GUI的尺寸、位置和深度的用户交互、用于滚动立方体GUI的表面的用户交互、用于摩擦立方体GUI的表面的用户交互、与单个立方体GUI的用户交互、以及与一组立方体GUI的用户交互。

此外，用户接口120可以接收各种用户命令，诸如用于改变立方体GUI列表的用户交互、用于改变立方室的显示角度的用户交互、用于将显示的立方室改变为另一立方室的用户交互、以及用于改变立方室的主显示空间(例如天花板、墙壁或地板)的用户交互。

控制器130可以用于控制显示装置100的整体操作。例如，控制器130可以包括用于执行可编程指令的微处理器、中央处理单元(CPU)或集成电路。

<根据用户交互的主空间显示>

根据通过用户接口120感测到的用户交互，控制器130可以控制显示器110将一个空间元素显示为主空间。

具体地，当根据用户交互改变了用户的视角时，控制器130可以控制根据改变的视角将多个区域中的与用户的视角相对应的区域显示为主区域，并提供与主区域相对应的服务。

例如，在墙壁区域被显示为主区域的状态下，控制器130可以在接收到用户的抬头交互时控制将天花板区域显示为主区域，并在接收到用户的低头交互时控制将地板区域显示为主区域。这里，术语“显示为主空间”是指相应空间占据整个屏幕预设比例或者更大比例的状态。例如，当地板空间被显示为主空间时，地板空间可以显示在屏幕的中下部，而墙壁空间的部分可以显示在屏幕的上部。也就是说，当地板空间被显示为主空间时，包括在墙壁空间中的多面立方体GUI的一部分可以显示在屏幕的上部。在一些实施例中，主空间可以包括用户交互被感测为与相应空间的交互的形式。也就是说，当在主空间中仅简单地显示信息时，在需要根据用户交互控制主空间时，用户交互可以被感测为仅与主空间的交互。

控制器130可以以指向方法或拉动方法显示非可视区域。例如，当将遥控装置200向上指时，可以以提示方法显示天花板空间，当将遥控装置200向上拉时，可以以无缝方法显示天花板空间。

<在空间元素中提供的服务的各实施例>

当特定空间元素显示在主空间中时，控制器130可以提供与空间相对应的UI屏幕。这里，与空间相对应的UI屏幕可以是用于提供与空间相对应的信息、功能和服务中的至少一个的屏幕。

具体地，当天花板区域被显示为主区域时，控制器130可以控制显示被配置为提供信息服务的UI屏幕。这里，在一个示例中，信息服务可以包括天气信息提供服务，但这不限于此。也就是说，在另一示例中，信息服务可以提供各种信息，诸如股票信息、体育比赛时间表或TV时间表。在天花板空间中提供的信息可以被设置为默认，但是可以根据用户的偏好而改变。例如，当接收到针对股票信息的偏好时，即使在设置了将天气信息提供为默认的情况下，也可以设置在天花板空间中提供股票信息。此外，还可以设置提供彼此不同的两条或更多条信息。

此外，当墙壁空间被显示为主空间时，控制器130可以控制显示被配置为提供商务服务的UI屏幕。这里，在一个示例中，商务服务可以是与产品购买相关的服务，但是这不限于此。也就是说，在另一示例中，商务服务可以提供诸如内容购买或应用购买的商务服务。

在一个示例中，在墙壁空间中提供的商务服务可以是虚拟购买用于装饰墙壁空间的产品的服务。因此，通过商务服务购买的产品可以被布置在墙壁空间中。这里，产品可以包括墙纸以及可以在墙上装饰的内部饰品，诸如相框、灯或镜子等。在一个示例中，当用户购买虚拟灯时，由用户购买的虚拟灯可以布置在墙壁空间中的默认位置或者用户指定的位置。虚拟灯可以执行像真灯那样的开/关功能，因此虚拟灯可以执行用于在立方室中提供照明的功能。在另一示例中，当选择了镜子时，在根据用户交互选择了镜子时，显示装置100的屏幕可以执行镜子功能。

可以与产品的实际购买关联地实现商务服务，当用户购买了实际产品时，在墙壁空间中布置虚拟产品。当虚拟产品被布置在墙壁空间中，并且实际产品例如被布置在家中时，虚拟产品可以与布置在家中的实际产品关联地操作。例如，当用户对购买了的且布置在家中的真灯进行开/关时，虚拟灯可以以与真灯相似的方式操作。另一方面，用户可以通过控制虚拟灯来控制真灯的操作。

上述产品可以是难以购买的产品的图形版本。也就是说，当用户难以购买实际产品，例如实际购买非常昂贵时，用户可以购买虚拟图形产品，并且将虚拟图形产品布置在UI屏幕中。因此，用户可以有一种补偿感并得到满足。

上述示例性实施例示出购买的虚拟产品被布置在墙上的情况，但是这不限于此，可以将诸如置于房间中的沙发的产品布置在立方室中。

可以通过在墙壁空间中提供的特定产品卖家来执行在墙壁空间中提供的商务服务。例如，当在墙壁空间中显示了各种产品卖家信息，并且相应产品卖家信息被选择时，可以显示关于由产品卖家出售的产品的各种信息，并且可以进行购买。此时，在立方室中显示的立方体GUI可以暂时从屏幕上消失。在一些实施例中，可以在遥控装置200的显示屏上提供被配置为提供购买服务的各种购买屏幕。例如，当用户想要在操作多任务时使用商务服务时，可以向遥控装置200提供购买屏幕以确保用户能够看到屏幕。

当根据用户交互将地板空间显示为主空间时，控制器130可以控制显示被配置为提供控制服务的UI屏幕。在一个示例中，控制服务可以是家庭设备控制服务，但这不限于此。在另一示例中，控制服务可以包括各种类型的控制服务，诸如办公控制服务或特定控制服务。

具体地，控制器130可以显示连接到家庭网络的2D或3D虚拟空间布局，并基于显示的空间布局接收控制信号以控制相应的家庭设备。也就是说，空间布局可以包括关于连接到家庭网络的至少一个家庭设备的信息，并且该信息可以包括文本形式(例如家庭设备的名称)、或图像(例如家庭设备的真实图像、家庭设备的外观图像或图标)形式的家庭设备的标识信息。当在识别出特定家庭设备的状态下从遥控装置200接收到控制信号时，控制器130可以根据接收到的控制信号控制特定家庭设备。此时，显示装置100可以操作为家庭网络服务器。然而，当家庭网络服务器被单独地实施时，显示装置100可以向家庭网络服务器发送接收到的控制信号。

可以基于每个家庭设备的设备类型和位置信息产生空间布局。具体地，可以基于连接到家庭网络的每个家庭设备的设备类型和位置信息产生空间布局，并且可以基于每当释放现有家庭设备到家庭网络的连接或者将新家庭设备连接到家庭网络时输入的位置信息来更新空间布局。

在一些实施例中，当将特定家庭设备选为控制目标时，控制器130可以显示用于控制家庭设备的控制屏幕或者用于提供家庭设备的状态的状态提供屏幕。在一个示例中，当选择了空调时，可以显示用于控制空调的操作的控制屏幕。

在另一示例中，当选择了冰箱时，控制器130可以显示扫描和显示了当前在冰箱中包括的物品的状态提供屏幕。可以通过在冰箱内部提供的相机获取在状态提供屏幕上显示的图像。此时，用户可以检查想要的物品并且直接在线订购想要的物品，而不需要打开冰箱。此时，可以使用在墙壁空间中提供的商务服务。

当根据用户交互将地板空间显示为主空间时，控制器130可以提供例如家庭安全控制服务或婴儿照顾服务。在一些实施例中，当在家庭安全中发生错误时，控制器130可以自动将地板空间显示为主空间，并提供与家庭安全相关的屏幕。例如，当从在家中安装的传感器感测到异常状态时，控制器可以显示相应空间，并允许用户查看相应空间。在一个实施例中，当在空间中安装了闭路电视(CCTV)时，控制器可以提供在感测到异常状态的时间点所捕捉到的图像。在另一实施例中，当在入口处响铃时，控制器可以自动将地板空间显示为主空间，并且显示在门锁相机中捕捉到的门安全图像。

地板空间可以提供用户的办公控制服务等。例如，可以提供被配置为控制用户办公室中的设备(诸如计算机、空调或炉子)的控制服务。此时，遥控装置200可以通过云服务器(未示出)与显示装置进行通信。具体地，遥控装置200可以通过遥控器允许显示装置100执行对在用户办公室的计算机中存储的文件进行搜索、打开等操作，从而可以在家中提供办公控制。

<根据类别在空间元素中提供的服务的各实施例>

如上所述，由于包括天花板、墙和地板的多个3D空间准备根据其转动而显示不同3D空间，因此可以改变根据空间的特性而在空间元素中提供的UI屏幕的类型。

例如，可以根据与3D空间(即，立方室)相对应的类别类型来改变在天花板、墙和地板空间中提供的信息、功能或服务的类型。

在一个示例中，当显示的立方室对应于应用类别时，墙壁空间可以提供与应用相关的商务服务。在另一示例中，当立方室对应于SNS类别时，天花板空间可以提供视频呼叫图像，其中多个用户由在立方室中选择的多个立方体GUI代表。

<在空间元素中提供的信息或功能的其它各实施例>

在一些实施例中，地板空间可以提供代表用户喜爱的项目(不论被显示的立方室所代表的类别如何)而非控制服务的立方体GUI。也就是说，即使当在立方室中提供了与特定类别相对应的立方体GUI时，地板空间也可以提供若干类别中包括的立方体GUI。

在另一示例中，天花板空间可以默认地提供视频呼叫功能。

在另一示例中，在相应广告信息显示在包括在显示的立方室中的多个立方体GUI之一的一个表面上或者显示在所有立方体GUI中的状态下，当根据用户交互将天花板空间显示为主天花板空间时，天花板空间可以提供广告再现屏幕。

图2(b)是示出根据另一示例性实施例的显示装置100的详细配置的框图。参照图2(b)，显示装置100包括图像接收器105、显示器110、用户接口120、控制器130、存储器140、通信器150、音频处理器160、视频处理器170、扬声器180、按钮181、相机182和麦克风183。将省略在图2(b)中示出的与在图2(a)中示出的组件基本相同的组件的详细描述。

图像接收器105通过各个源接收图像数据。例如，图像接收器105可以从外部广播台接收广播数据，从外部装置(例如，数字多功能盘(DVD)播放器、蓝光盘(BD)播放器等)接收图像数据，并接收存储在存储器140中的图像数据。具体地，图像接收器105可以包括被配置为接收多个图像以在多个屏幕上显示通过立方体GUI选择的多个内容的多个图像接收模块。例如，图像接收器105可以包括用于同时显示多个广播频道的多个调谐器。

控制器130使用存储在存储器140中的各种程序来控制显示装置100的总体操作。

具体地，控制器130可以包括随机存取存储器(RAM)131、只读存储器(ROM)132、主中央处理单元(CPU)133、图形处理器134、第一接口135-1至第n接口135-n以及总线136。

RAM131、ROM132、主CPU133、图形处理器134、第一接口135-1至第n接口135-n等可以通过总线136彼此电连接。

第一接口135-1至第n接口135-n连接到上述组件。接口之一可以是通过网络连接到外部装置的网络接口。

主CPU133访问存储器140以使用存储在存储器140中的操作***(O/S)执行启动。主CPU133使用存储在存储器140中的各种程序、内容、数据等执行各种操作。

用于***启动的命令集等被存储在ROM132中。当输入了开启指令以供电时，主CPU133根据存储在ROM132中的指令将存储在存储器140中的O/S拷贝到RAM131中，并执行该O/S以启动***。当启动完成时，主CPU133将存储在存储器140中的各种应用程序拷贝到RAM131中，并且执行拷贝到RAM131中的应用程序以执行各种操作。

图形处理器134使用运算单元(未示出)和渲染单元(非单元)产生包括各种对象(诸如图标、图像、文本等)的屏幕。运算单元基于接收到的控制命令计算对象根据屏幕的布局、对象的形状、尺寸和颜色而显示的属性值，诸如坐标值。渲染单元基于在运算单元中计算的属性值产生具有包括对象的各种布局的屏幕。在渲染单元中产生的屏幕被显示在显示器110的显示区域中。

上述控制器130的操作可以通过存储在存储器140中的程序来执行。

存储器140存储各种数据，诸如用于驱动显示装置100的O/S软件模块、各种多媒体内容、各种应用、以及在应用执行期间设置或输入的各种内容。

具体地，存储器140可以存储根据示例性实施例的用于构建包括在显示器110上提供的立方体GUI的各种UI屏幕的数据。

此外，存储器140可以存储关于各种用户交互类型及其功能的数据、提供的信息等。

将参照图3描述存储在存储器140中的各种软件模块。

参照图3，包括基础模块141、感测模块142、通信模块143、呈现模块144、web浏览器模块145和服务模块146的软件可以存储在存储器140中。

基础模块141是被配置为处理从包括在显示装置100中的硬件发送的信号并将处理的信号发送到上层模块的模块。基础模块141包括存储模块141-1、安全模块141-2、网络模块141-3等。存储模块141-1是被配置为管理数据库(DB)或注册表的程序模块。主CPU133使用存储模块141-1访问存储器140中的数据库以读取各种数据。安全模块131-2是被配置为支持硬件认证、许可、安全存储等的程序模块，和网络模块141-3是被配置为支持网络连接的模块，并且可以包括设备网络(DNET)模块、通用即插即用(UPnP)模块等。

感测模块142是被配置为收集来自各种传感器的信息，并分析和管理所收集的信息的模块。感测模块142可以包括头方向识别模块、面部识别模块、语音识别模块、动作识别模块、近场通信(NFC)识别模块等。

通信模块143是被配置为与外部装置执行通信的模块。通信模块143可以包括消息收发模块143-1(诸如信使程序、短消息服务(SMS)和多媒体消息服务(MMS)程序、和电子邮件程序)；包括呼叫信息聚合程序模块、互联网协议语音(VoIP)模块等的呼叫模块143-2。

呈现模块144是被配置为构建显示屏幕的模块。呈现模块144包括被配置为再现和输出多媒体内容的多媒体模块144-1、以及被配置为执行UI和图形处理的UI渲染模块144-2。多媒体模块144-1可以包括例如播放器模块(未示出)、摄像机模块(未示出)、声音处理模块(未示出)等。因此，多媒体模块144-1操作以再现各种多媒体内容，并产生屏幕和声音。UI再现模块144-2可以包括被配置为合成图像的图像合成模块、被配置为组合和产生屏幕上将显示图像的坐标的坐标组合模块、被配置为从硬件接收各种事件的X11模块、以及被配置为提供用于形成2D类型或3D类型UI的工具的2D/3DUI工具包。

web浏览器模块145是被配置为执行web浏览以访问web服务器的模块。web浏览器模块145可以包括例如各种模块，诸如配置为形成网页的web视图模块(未示出)、配置为执行下载的下载代理模块(未示出)、书签模块(未示出)和web工具包模块(未示出)。

服务模块146是包括用于提供各种服务的各种应用的模块。具体地，服务模块146可以包括用于执行各种程序的各种程序模块(未示出)，诸如SNS节目、内容再现程序、游戏程序、电子书程序、日历程序、警报管理程序以及其他小控件。

各个程序模块在图3中示出，但是可以根据显示装置100的类型和特性省略、修改或添加各种程序模块。例如，存储器140可被实施为还包括基于位置的模块，其中，所述基于位置的模块被配置为结合硬件(诸如全球定位***(GPS)芯片)支持基于位置的服务。

通信器150可以根据各种类型的通信方法与外部装置进行通信。

通信器150可包括各种通信芯片，诸如无线保真(WIFI)芯片151、蓝牙芯片152或无线通信芯片153。WIFI芯片151和蓝牙芯片152分别在WIFI方式和蓝牙方式下进行通信。当使用WIFI芯片151或蓝牙芯片152时，通信器150可以首先发送和/或接收诸如服务集标识符(SSID)和会话密钥等各种连接信息，使用该信息执行通信，并发送和/或接收各种信息。无线通信芯片153是被配置为根据各种通信标准(例如电气和电子工程师协会(IEEE)、Zigbee、第三代(3G)、第三代合作伙伴计划(3GPP)、或长期演进(LTE))来进行通信的芯片。此外，通信器150还可以包括被配置为使用各种射频识别(RF-ID)频带(诸如135kHz、13.56MHz、433MHz、860到960MHz和2.45GHz)中的13.56MHz频带来以NFC方式操作的NFC芯片。

具体地，通信器150可以与配置为提供内容或服务的服务器(未示出)或者被配置为提供各种信息的服务器(未示出)进行通信，并接收用于确定立体GUI的尺寸和布置状态的各种信息。例如，通信器150可以与SNS服务器(未示出)进行通信以接收由SNS服务提供屏幕中的立方体GUI代表的多条用户信息(例如，简档照片等)，或者接收用户之间的关联信息，以确定立方体GUI的尺寸和布置状态。在另一示例中，通信器150可以与内容提供服务器(未示出)进行通信以接收由内容提供屏幕中的每个立方体GUI代表的内容信息、或者多个内容之间的关联信息。

音频处理器160被配置为对音频数据进行处理。音频处理器160可以对音频数据执行各种处理，诸如解码、放大和噪声滤波。

具体地，根据示例性实施例，当根据用户的动作而转动立方体GUI时，音频处理器160可以处理音频数据，以根据用户的动作速度提供声音。例如，音频处理器160可以产生与用户的动作速度相对应的反馈声音，并提供产生的反馈声音。

视频处理器170被配置为对视频数据进行处理。视频处理器170可以对视频数据执行各种图像处理，例如解码、缩放、噪声滤波、帧率转换和分辨率转换。

扬声器180被配置为输出不同的警报声音或语音消息以及在音频处理器160中处理的各种音频数据。

按钮181可以包括各种类型的按钮，诸如机械按钮、触摸垫、或滚轮，它们可以被设置在显示装置100主体的外部的任意区域中，例如正面、侧面或背面。例如，可以提供用于开启/关闭显示装置100的按钮。

相机182被配置为根据用户的控制对静止图像或运动图像进行成像。具体地，相机182可以对用于控制显示装置100的各种用户动作进行成像。

麦克风183被配置为接收用户语音或其他声音，并将接收的用户语音或声音转换成音频数据。控制器130可以使用在呼叫期间通过麦克风183输入的用户语音，或者可以将用户语音转换为音频数据，并将音频数据存储在存储器140中。相机182和麦克风183可以根据其功能是上述用户接口120的配置。

当设置了相机182和麦克风183时，控制器130可以根据通过麦克风183输入的用户语音或由相机182识别的用户动作来执行控制操作。也就是说，显示装置100可以在动作控制模式或语音控制模式下操作。当显示装置100在动作控制模式下操作时，控制器130激活相机182以对用户进行成像，跟踪用户动作的改变，并且执行与动作改变相对应的控制操作。当显示装置100在语音控制模式下操作时，控制器130分析通过麦克风输入的用户语音，并且在根据分析的用户语音执行控制操作的语音识别模式下操作。

当显示装置100在动作控制模式下操作时，控制器130可以控制根据用户的抬头和/或低头动作将天花板空间或地板空间显示为主空间。具体地，可以通过用户的面部区域的位置、眼球的位置、用户的颈部长度和用户的头部区域中的至少一个来检测抬头和/或低头动作。

例如，控制器130可以确定用户的面部区域，基于面部区域的位置、区域等确定抬头和/或低头动作，或者基于用户眼球的位置确定抬头和/或低头模式。

具体地，控制器130通过面部建模技术从由相机182成像的用户图像中识别眼球图像。面部建模技术是用于处理由成像单元获取的面部图像，并将处理的面部图像转换为数字信息以进行发送的分析处理。面部建模技术可以包括主动形状建模(ASM)方法的和主动外观建模(AAM)方法。控制器130可以通过使用识别的眼球图像确定眼球的移动，并使用眼球的移动确定抬头和/或低头动作。例如，控制器130可以以像素为单位扫描捕捉的用户图像，检测与用户的左眼位置相对应的像素坐标值和与用户的右眼位置相对应的像素坐标值，并确定用户眼球位置的移动状态。可以使用各种公知的图像分析方法来实施通过以像素为单位扫描由相机捕捉的用户图像来检测眼球位置，并检测用户的眼球位置作为像素坐标值的方法，因此将省略对其的详细描述。在检测用户眼球位置的方法中，可以使用红外(IR)传感器而非相机。

备选地，控制器130可以从捕捉的用户图像识别面部图像和颈部图像，并基于面部长度和颈部长度之间的比例来确定抬头和/或低头动作。例如，可以预先计算面部长度和颈部长度之间的阈值比例并将其预存储。控制器130可以将预存储的数据与用户的数据(即，阈值比例和当前比例)进行比较，以确定抬头和/或低头动作。

此外，显示装置100还可以包括用于连接到各种外部终端(诸如头戴式耳机、鼠标和局域网(LAN))的各种外部输入端口。

虽然在附图中未示出，但是显示装置100还可以包括反馈提供单元(未示出)。反馈提供单元(未示出)用于根据显示的屏幕提供各种类型的反馈(例如，音频反馈、图形反馈、触觉反馈等)。在一个实施例中，可以提供音频反馈以吸引用户的注意。

图2(b)示出在显示装置100中包括的详细配置的示例，并且在一些示例性实施例中，可以省略或修改在图2(b)中示出的组件的部分，并且可以添加其他组件。例如，当显示装置100被实施在便携式电话中时，显示装置100还可以包括被配置为从GPS卫星接收GPS信号并计算显示装置100的当前位置的GPS接收器(未示出)、被配置为接收和处理数字多媒体广播(DMB)信号的数字DMB接收器(未示出)。

图4A和图4B是示出根据示例性实施例的UI屏幕的示图。

参照图4A，根据示例性实施例的UI屏幕可以提供包括房间形状的3D空间(即，立方室410、420、430、440、450)的可转动GUI。具体地，立方室410至450可以被设置在具有与轮盘类似的形状的空间的边缘部分中，并且立方室410至450可以对应于不同类别。

可以在多个立方室410至450的相应立方室中显示与立方室410至450中的每个立方室相对应的类别信息。例如，可以在立方室410至450中分别显示象征类别的图标411、421、431、441和451以及关于类别的简单文本信息412、422、432、442和452。如图4A中所示，类别可以包括用于实时观看电视的“电视在映”类别、用于提供VOD内容的“电影和电视节目”、用于共享SNS内容的“社交”类别、用于提供应用的“应用”类别、用于提供私人内容的“音乐、照片及剪辑”等。然而，以上类别仅仅是示例性的，可以根据各种标准提供类别。

当选择特定立方室时，高亮显示代表该立方室的信息412以指示该立方室被选择。

如图4B中所示，根据用户交互转动立方室以被显示。也就是说，可以识别根据转动而位于中心的立方室，并且可以根据在识别出立方室的状态下发生的预设事件来选择该立方室，并且可以显示在选择的立方室中包括的立方体GUI。

图5A示出根据在图4A和图4B中示出的UI屏幕中的用户交互来选择特定立方室的情况。

如图5A中所示，当选择特定立方室时，可以在3D空间中以漂浮形式显示根据示例性实施例的多个立方体GUICP1511至CP9519。在图5A中，3D空间可以是具有由三面墙541、542、543、天花板520和地板530形成的房间形状的空间(立方室)。墙541至543沿屏幕的X轴排列，并具有沿Z轴的预设深度。

如图5A所示，多个立方体GUICP1511至CP9519可代表预定对象。具体地，多个立方体GUICP1511至CP9519可以代表包括在与选择的立方室相对应的类别中的各个对象。例如，当选择的立方体室对应于基于VOD内容的类别时，多个立方体GUICP1511至CP9519可代表提供VOD内容的各内容提供者。然而，多个立方体GUICP1511至CP9519仅仅是示例性的，多个立方体GUI可以代表由内容提供者根据基于用户命令展开的菜单深度而提供的内容(例如，特定VOD内容)。

如图5A所示，多个立方体GUICP1511至CP9519可被显示为不同尺寸和布置状态。可以根据优先级来改变立方体GUICP1511至CP9519的尺寸和布置状态。在一个实施例中，可以根据用户行为模式和对象属性中的至少一个来设置优先级。具体地，当内容根据例如用户的偏好而具有较高优先级时，代表用户喜爱的内容提供者的立方体GUI511可以显示在屏幕的中心部分，并且与其他立方体GUI相比具有更大的尺寸和更小的深度。也就是说，可以将多个立方体GUICP1511至CP9519显示为反映用户对于对象的偏好，并且因此可以提供增加了用户对于立方体GUI511的识别率的效果。也可以将其他立方体GUI512至519显示为具有根据与其相对应的偏好的尺寸、位置和深度。

可以根据用户认证处理针对特定用户分析用户行为模式。例如，根据示例性实施例的UI可以被实施为通过用户认证向多个用户提供不同UI屏幕。也就是说，由于多个用户、即使是家庭成员也可能具有彼此不同的行为模式、偏好等，因此可以在执行了认证处理(诸如登录)之后提供与相应用户的行为模式相对应的UI屏幕。

如图5B中所示，指向GUI10可被显示在代表具有较高优先级的对象的立方体GUI511周围。这里，指向GUI10可以根据用户命令显示在立方体GUI上，并可以被设置为如图所示的高亮指针的形式。然而，该指向GUI的类型仅仅是示例性的，指向GUI可以被修改为各种形式，诸如箭头形状指针或手形状指针。

指向GUI10可以根据各种类型的用户命令而移动。例如，指向GUI10可以根据各种用户命令(诸如在遥控装置200的指向模式下的运动命令、手势模式下的运动命令、语音命令、在遥控装置200中提供的方向键操作命令、根据头(或眼)跟踪的动作命令)移动到另一个立方体GUI。

图6A和图6B是示出根据示例性实施例的UI屏幕。

如图6A和图6B中所示，当立方室的墙壁空间被显示为主空间时，可以在天花板空间610中显示代表例如当前天气或当前时区的图形。可以在地板空间620中显示代表当前显示的立方室的类别的信息。

例如，如图6A中所示，当当前时区是白天时区时，可以在天花板空间610中显示代表白天时区的图形(例如蓝天)。此外，当当前显示的立方室是喜爱频道的类别时，在地板空间620中显示代表喜爱频道的类别的信息。

此外，如图6B中所示，当当前时区是夜晚时区时，可以在天花板空间610中显示代表夜晚时区的图形(例如夜空)。

图7A至图7C是示出根据各示例性实施例的在天花板空间中提供的UI屏幕的示图。

在如图6A和图6B所示墙壁空间被显示为主空间的状态下，当感测到用户的抬头交互时，如图7A中所示，天花板空间710被显示为主空间，并且可以显示天气信息711。此时，天气信息711可以是用户所位于的区域的天气信息。

接着，如图7B中所示，当感测到用户将他的头弯向左边或者将他的头转到左边的交互时，可以转动天花板空间，使得可以显示新的天花板空间720，并且可以提供另一区域的天气信息721。这里，在示例性实施例中，另一区域可以是由用户预先选择的区域。例如，用户可以预先设置用户的家人所在的区域作为用于接收天气信息721的区域。

如图7C中所示，当感测到用户将他的头弯向右边或者将他的头转到右边的交互时，可以转动天花板空间，使得可以显示新的天花板空间730，并且可以显示股票信息721。

如图7A至图7C中所示，当根据在天花板空间显示为主空间的状态下接收到的用户交互而显示新天花板空间时，可以提供相同类型的新信息(见图7B)或者可以显示不同类型的新信息(见图7C)。

图8A至图8C是示出根据各示例性实施例的在地板空间中提供的UI屏幕的示图。

在如图6A和图6B中所示墙壁空间被显示为主空间的状态下，当感测到用户的低头交互时，如图8A中所示，地板空间810被显示为主空间，并且可以提供家庭控制屏幕。例如，如图8A中所示，可以显示代表包括各个家庭设备的图标811至814的空间布局。

此时，用户可以经由通过选择特定家庭设备的图标而显示的控制屏幕或者控制菜单来控制特定家庭设备的操作。

备选地，如图8B中所示，可以以代表各个家庭设备的图标821至825在空间布局820上位于与它们的实际位置相对应的虚拟位置处的形式来提供家庭控制屏幕。在一个实施例中，家庭设备的外观可以被显示为3D方式。

如图8C中所示，当感测到用户将他的头弯向右边或者将他的头转到右边的交互时，可以转动地板空间，使得可以显示新的地板空间830，并且可以提供新的控制屏幕。例如，可以提供被配置为控制用户的由图标831和832代表的办公设备的控制屏幕。此时，用户可以在家中远程地控制办公设备。

图9A和图9B示出根据各示例性实施例的在墙壁空间中提供的UI屏幕。

如图9A中所示，当墙壁空间被显示为主空间时，可以提供包括三面墙911至913的立方室。可以在立方室中以漂浮形式显示立方体GUI。上文已经对此进行了描述，因此将省略对其的详细描述。

可以在三面墙911至913中的至少一面上布置用户购买的虚拟饰品。例如，如图9A和图9B中所示，可以在右墙911和左墙913上布置多个灯921和922。

在墙911和913上提供的饰品可以由用户控制。例如，如图9A和图9B中所示，多个灯921和922可以根据用户交互打开和/或关闭，以在立方室中提供照明。图9A示出多个灯921和922关闭的屏幕，图9B示出多个灯921和922打开的屏幕。

可以通过在三面墙中的至少一面上提供的商务服务来执行对饰品的购买，并且在一些实施例中，可以通过经由在立方室中显示的立方体GUI之一提供的商务服务来执行对饰品的购买。

在另一实施例中，可以与饰品的实际购买关联地执行商务服务，当用户购买实际饰品时，该饰品可以例如布置在墙上。当虚拟饰品布置在墙上，实际饰品布置在家中时，虚拟饰品可以与布置在家中的实际饰品关联地操作。例如，当用户打开作为实际饰品的灯时，虚拟灯可以以与真灯相同的方式操作。备选地，用户可以通过虚拟灯的控制来控制真灯的操作。

图10A至图11B是示出根据各示例性实施例的在天花板空间中提供的背景屏幕的示图。

如图10A和图10B中所示，当立方室被显示为主空间时，可以在背景上提供具有当前天气信息的图形效果。例如，当目前正在下雨时，提供雨天的图形效果，当下雨时，提供雪天的图形效果。此时，可以提供好像下雨或者下雨那样的生动效果，例如可以在立方室中显示如图10A所示的雨滴或如图10B所示的落雪。可以以具有透明度的屏上显示(OSD)形式来显示图形效果。在一些实施例中，可以新渲染相应图像以进行显示。

如图11A和图11B所示，当立方室被显示为主空间时，墙壁空间可以消失，并且可以提供各种背景屏幕。

具体地，如图11A和图11B中所示，可以根据由用户选择的立方体GUI的属性来显示相应背景。例如，当选择了SF种类的内容时，可以提供与该种类匹配的背景。此时，显示的背景可以提供各种动画效果。

在一些实施例中，可以在显示装置中产生了预设事件时自动提供背景。例如，当在预设时间或更长时间内没有接收到用户交互，则可以显示背景。

图12A至图12C是示出根据各示例性实施例的可在天花板空间中提供的功能或信息的示图。

如图12A中所示，当根据用户的抬头交互将天花板空间1220显示为主空间时，可以在天花板空间1220中提供与对应于立方室的类别相关的功能。

在示例中，如图12A中所示，在显示的立方室对应于SNS类别并且立方室中的立方体GUI1211至1219代表多个用户的状态下，在选择了至少一个立方体GUI(即，立方体GUI1211和1212)之后，当接收到用于选择天花板空间1220的用户交互时，可以在天花板空间1220中提供与选择的立方体GUI1211和1212相对应的用户的视频呼叫图像。如图12A中所示，可以显示提供与选择的立方体GUI1211和1212相对应的用户用户1和用户2以及显示装置100的用户用户的图像的多个屏幕1221至1223。

此时，可以根据遥控装置200的动作交互输入用户交互。

具体地，当将设置于遥控装置200中的OJ传感器按压预设时间或更长时间时，显示装置100可以将相应输入感测为触发命令，并开始使用例如9轴传感器感测遥控装置200的动作。与按压操作相对应的信号可被发送到显示装置100，并且显示装置100可以显示用于指导遥控装置200的动作的指示符(1231至1238)。此时，指示符可以包括：第一指示符(1232、1234、1236、1238)，在横向和纵向方向上指示遥控装置200的动作；以及第二指示符(1231、1233、1235、1237)，用于指示将被检测的遥控装置200的动作的阈值范围。

第一指示符(1232、1234、1236、1238)可以根据遥控装置200的动作改变其自身的尺寸和/或位置。例如，当在输入了触发命令之后遥控装置200向上移动时，多个指示符(1231至1238)中的与遥控装置200的动作相对应的第一指示符(1232、1234、1236、1238)可以根据向上移动的遥控装置200的动作改变其自身的尺寸和/或位置。

具体地，当第一指示符(1232、1234、1236、1238)根据遥控装置200的动作移动为将要与第二指示符(1231、1233、1235、1237)接触时，遥控装置200可以根据遥控装置200的动作的方向向显示装置100发送用于转换显示装置100的屏幕的命令。

例如，屏幕可以被转换为使得天花板空间1220被显示为主空间。

在另一示例中，如图12B中所示，在显示的立方室对应于VOD类别并且立方室中的立方体GUI1241至1249代表内容提供者或内容的状态下，在选择了至少一个立方体GUI1241之后，当接收到用户的抬头交互时，可以在天花板空间1250中显示提供与选择的立方体GUI1241相对应的预览图像、广告图像等的屏幕1251。

在另一示例中，如图12C中所示，在显示的立方室对应于广播频道类别并且立方室中的立方体GUI1261至1269代表广播频道的状态下，当接收到用户的抬头交互时，可以在天花板空间1270中显示TV时间表1271。备选地，当在选择了特定立方体GUI1261的状态下接收到用户的抬头交互时，可以显示由特定立方体GUI1261代表的广播频道时间表。

图13A至图13C是示出根据各示例性实施例的可在地板空间中提供的功能或信息的示图。

如图13A和图13B中所示，当根据用户的低头交互将地板空间1310显示为主空间时，可以在地板空间1310中提供与对应于立方室的类别相关的功能。

在示例中，如图13A中所示，在显示的立方室对应于SNS类别并且立方室中的多个立方体GUI代表多个用户的状态下，当接收到用户交互时，可以在地板空间1310中提供用于控制再现在SNS服务器中提供的音乐的音乐再现屏幕1311。在一些实施例中，可以根据用户的设置提供音乐再现屏幕1311，而不论地板空间1310中的类别如何。此时，可以根据遥控装置200的动作交互输入用户交互。检测用户交互的方法可以与在图12A中描述的方法相同，因此将省略对其的详细描述。

在另一示例中，如图13B中所示，在显示的立方室对应于广播频道类别并且立方室中的多个立方体GUI代表多个广播频道的状态下，当接收到用户的低头交互时，可以在地板空间1320中显示代表被用户注册为喜爱的广播频道的立方体GUI1321至1324。

如图13C中所示，可以根据用户的低头交互在显示为主空间的地板空间1330中显示代表用户的喜爱对象的立方体GUI1331至1334，而不论类别如何。例如，可以在地板空间1330中显示包括在广播频道类别中的立方体GUI1331、包括在SNS类别中的立方体GUI1332、包括在通信类别中的立方体GUI1333、和包括在应用类别中的立方体GUI1334。

图14是示出根据示例性实施例的UI屏幕提供方法的流程图。

根据如图14所示的显示装置的GUI屏幕提供方法，提供了一种GUI屏幕，该GUI屏幕被配置为包括至少一个多面体图标并对应于用户的多个视角。首先接收与GUI屏幕的用户交互(S1410)。

接着，根据接收到的用户交互提供与多个视角中的至少一个视角相对应的GUI屏幕(S1420)。

这里，与多个视角相对应的GUI屏幕可以分别提供映射到多个视角的信息、功能和服务中的至少一个。

此时，与多个视角相对应的GUI屏幕可以包括与天花板空间相对应的GUI屏幕、与墙壁空间相对应的GUI屏幕和与地板空间相对应的GUI屏幕。

在一个示例中，当根据用户交互将天花板空间显示为主空间时，可以显示例如提供信息服务的GUI屏幕。此时，例如，信息服务可以包括天气信息提供服务。

在一个实施例中，当根据用户交互将墙壁空间显示为主空间时，可以显示例如提供商务服务的GUI屏幕。此时，例如，信息服务可以包括天气信息提供服务。

在一个实施例中，当根据用户交互将地板空间显示为主空间时，可以显示提供控制服务的GUI屏幕。此时，例如，控制服务可以包括例如家庭设备控制服务和家庭安全控制服务中的至少一个。

在墙壁空间被显示为主空间的状态下，用于将天花板空间显示为主空间的用户交互可以是用户的抬头交互，用于将地板空间显示为主空间的用户交互可以是用户的低头交互。

此外，可以通过反映外部环境信息来显示空间元素的背景屏幕。

图15是示出根据另一示例性实施例的UI屏幕提供方法的流程图。

根据在图15中示出的UI屏幕提供方法，首先，在墙壁空间显示为主空间的状态下接收到用户交互(S1510)。这里，墙壁空间可以是如上所述的立方室中的由三面墙形成的墙壁空间。

接着，确定接收到的用户交互是否是抬头交互(S1520)。

根据操作S1520的确定结果，当确定用户交互是抬头交互时(S1520：是)，将天花板空间显示为主空间，并提供与其相对应的服务(或信息)(S1530)。

根据操作S1520的确定结果，当确定用户交互不是抬头交互时(S1520：否)，确定接收到的用户交互是否是低头交互(S1540)。

根据操作S1540的确定结果，当确定用户交互是低头交互时(S1540：是)，将地板空间显示为主空间，并提供与其相对应的服务(或信息)(S1550)。

在实施例中，可以在天花板空间被显示为主空间时提供信息服务，可以在地板空间被显示为主空间时提供控制服务，并且可以在墙壁空间中提供商务服务。然而，示例性实施例不限于此。

在另一实施例中，可以在天花板空间中显示内容再现屏幕，诸如视频呼叫功能或图像再现功能。然而，示例性实施例不限于此。

在一个实施例中，用于将天花板空间显示为主空间的用户交互可以是将遥控器向上指的向上指动作，用于将地板空间显示为主空间的用户交互可以是将遥控器向下指的向下指动作。

根据示例性实施例的星状GUI可以被实施为作为可以由用户直接在操作***(OS)上使用的软件的应用形式。此外，可以在显示装置100的屏幕上以图标界面形式提供该应用，但是这不限于此。

根据如上所述的示例性实施例，可以通过更简单的用户交互来提供不同信息、功能、服务，并且从而可以提高用户便利性。

根据上述各示例性实施例的显示装置的上述控制方法可以被实施为计算机可执行程序代码，记录在各种非暂时性计算机可记录介质中，并被提供给服务器或者装置以被处理器执行。

例如，可以提供非暂时性计算机可记录介质，其中，所述非暂时性计算机可记录介质存储有用于执行根据用户交互类型产生显示不同类型的信息的UI屏幕的方法的程序。

非暂时性计算机可记录介质不是被配置为临时存储数据的介质(诸如寄存器、高速缓存器或内存)，而是被配置为半永久性地存储数据的装置可读介质。具体地，上述应用或程序可以存储或提供在非暂时性计算机可记录介质(诸如致密盘(CD)、数字多功能盘(DVD)、硬盘、蓝光盘、通用串行总线(USB)、存储卡或只读存储器(ROM))中。

以上示例性实施例和优点仅仅是示例性的，而不应被解释为限制。本教导可以容易地应用于其他类型的装置。此外，示例性实施例的描述意在示出，而不是限制权利要求的范围，并且许多替换、修改和改变对于本领域技术人员而言将是显而易见的。

Claims

1.一种显示装置，包括：

显示器，被配置为显示包括多个区域的图形用户界面(GUI)屏幕；

用户接口，被配置为接收相对于GUI屏幕的用户交互；

控制器，被配置为控制显示器根据改变的视角将所述多个区域中的与所述用户交互相对应的区域显示为主区域，并被配置为执行映射到所述主区域的控制操作。

2.如权利要求1所述的显示装置，其中，提供信息、服务和功能中的至少一个的多个控制操作被分别映射到所述多个区域。

3.如权利要求1所述的显示装置，其中，所述多个区域包括位于GUI屏幕上部的天花板区域、位于GUI屏幕中部的墙壁区域和位于GUI屏幕下部的地板区域。

4.如权利要求3所述的显示装置，其中，控制器在天花板区域被显示为主区域时提供信息服务。

5.如权利要求4所述的显示装置，其中，信息服务包括天气信息提供服务。

6.如权利要求3所述的显示装置，其中，控制器在墙壁区域被显示为主区域时提供商务服务。

7.如权利要求6所述的显示装置，其中，商务服务是用于提供与产品的实际购买相关联的产品的虚拟购买的服务。

8.如权利要求3所述的显示装置，其中，控制器在地板区域被显示为主区域时提供控制服务。

9.如权利要求8所述的显示装置，其中，控制服务包括家庭设备控制服务和家庭安全控制服务中的至少一个。

10.如权利要求3所述的显示装置，其中，用户接口接收根据用户的头方向的用户交互，并且

在墙壁区域被显示为主区域的状态下，控制器控制在接收到根据用户的抬头方向的用户交互时将天花板区域显示为主区域，并且在接收到根据用户的低头方向的用户交互时将地板区域显示为主区域。

11.如权利要求2所述的显示装置，其中，用户接口接收根据被配置为遥控所述显示装置的遥控装置的动作的遥控器信号，并且

在墙壁区域被显示为主区域的状态下，控制器控制在接收到与向上移动遥控装置的动作相对应的遥控器信号时将天花板区域显示为主区域，并且在接收到与向下移动遥控装置的动作相对应的遥控器信号时将地板区域显示为主区域。

12.如权利要求1所述的显示装置，其中，控制器控制基于外部环境信息和与映射到主区域的控制操作相对应的内容类型中的至少一个来显示背景元素。

13.一种显示装置的提供图形用户界面(GUI)屏幕的方法，所述显示装置被配置为提供包括多个区域的GUI屏幕，所述方法包括：

接收相对于GUI屏幕的用户交互；以及

根据改变的视角将所述多个区域中的与所述用户交互相对应的区域显示为主区域，并执行映射到所述主区域的控制操作。

14.如权利要求13所述的方法，其中，提供信息、服务和功能中的至少一个的多个控制操作被分别映射到所述多个区域。

15.如权利要求13所述的方法，其中，所述多个区域包括位于GUI屏幕上部的天花板区域、位于GUI屏幕中部的墙壁区域和位于GUI屏幕下部的地板区域。