CN107071136B - 移动终端及其控制方法 - Google Patents

Abstract

本发明移动终端及其控制方法。公开一种能够控制头戴式显示器(HMD)的移动终端及其控制方法。移动终端包括：传感器；通信单元，该通信单元能够与被配置成显示虚拟现实屏幕的头戴式显示器通信；以及控制器，该控制器能够：控制头戴式显示器以显示包括第一内容的虚拟现实屏幕；并且在头戴式显示器的佩戴状态被保持的同时，当经由传感器或者头戴式显示器的传感器检测到与用户的头部或者瞳孔移动相对应的预设姿势输入时，控制头戴式显示器以在虚拟现实屏幕上显示锁定的第二内容。

Description

移动终端及其控制方法

技术领域

本发明涉及一种能够控制头戴式显示器(HMD)的移动终端及其控制方法。

背景技术

根据它们的移动性，终端通常可以被分类成移动/便携式终端或者固定终端。根据是否用户能够直接地携带终端，移动终端也可以被分类成手持式终端或者车载终端。

移动终端已经变成日益增长更多的功能。这样的功能的示例包括数据和语音通信、经由相机捕获图像和视频、记录音频、经由扬声器***播放音乐文件、以及在显示器上显示图像和视频。一些移动终端包括支持玩游戏的附加的功能性，而其它的终端被配置为多媒体播放器。最近，移动终端已经被配置成接收允许观看诸如视频和电视节目的内容的广播和多播信号。

最近，开发了可佩戴在人体上的眼镜式移动终端。被安装在用户的头部的眼镜式移动终端可以是头戴式显示器(HMD)。

HMD意指用于像眼镜一样通过被安装到用户的头部以允许用户观看图像(内容)的各种类型的图像显示装置。随着数字装置变轻并且大小小，各种类型的可佩戴式计算机被开发并且HMD被广泛地使用。

正在对支持和增强移动终端和HMD的功能性进行努力。这样的努力包括移动终端和HMD的软件和硬件改进，以及在移动终端和HMD的结构组件上的变化和改进。

发明内容

因此，详细描述的方面是为了提供一种能够控制能够被输出到HMD的屏幕，并且能够通过感测用户的运动显示隐藏的内容的移动终端及其控制方法。

详细描述的另一方面是为了提供当在隐藏的内容已经被输出到HMD的状态下拆卸HMD时不同地控制屏幕的移动终端及其控制方法。

为了实现这些和其它的优点并且根据本说明书的用途，如在此具体化和广泛地描述的，提供一种移动终端，包括：传感器；通信单元，该通信单元能够与被配置成显示虚拟现实屏幕的头戴式显示器通信；以及控制器，该控制器能够：控制头戴式显示器以显示包括第一内容的虚拟现实屏幕；并且在头戴式显示器的佩戴状态被保持的同时，当经由传感器或者头戴式显示器的传感器检测到与用户的头部或者瞳孔移动相对应的预设姿势输入时，控制头戴式显示器以在虚拟现实屏幕上显示锁定的第二内容。

在实施例中，在此控制器能够进一步：当检测到预设姿势输入时基于第一内容和第二内容重新配置虚拟现实屏幕；并且控制头戴式显示器以在第二内容上显示指示第二内容处于锁定状态的对象。

在实施例中，其中控制器进一步能够当第二内容被显示时控制第一内容的至少部分消失或者控制相对应的显示变化以出现。

在实施例中，其中第二内容被显示在与第一内容的区域相区分的区域上。

在实施例中，其中控制器进一步能够激活传感器同时保持第一内容的显示状态，并且在第一内容被显示的同时，当第二输入被检测到时，使移动终端进入用于释放锁定内容的操作模式。

在实施例中，其中控制器进一步能够检测与用户的头部或者瞳孔移动相对应的相对坐标以检测预设姿势输入。

在实施例中，其中控制器进一步能够控制头戴式显示器以显示：用于随着移动终端进入操作模式而指导用于释放虚拟现实屏幕上的锁定内容的姿势输入的信息；和在虚拟现实屏幕上与用户的头部或者瞳孔移动相对应的线。

在实施例中，其中第二内容与第一内容有关并且根据第一内容的类型确定。

在实施例中，其中控制器进一步能够控制头戴式显示器以显示：当检测到预设姿势输入时指示第二内容的释放状态的通知图标；和在通知图标被显示之后的第二内容。

在实施例中，其中控制器进一步能够基于头戴式显示器的拆卸状态控制头戴式显示器以不同地显示第二内容。

在实施例中，其中控制器进一步能够：当头戴式显示器在阈值时间量内被重新佩戴并且拆卸的状态满足第一条件时显示第二内容；并且当拆卸状态满足第二条件时将第二内容变为锁定状态，不论是否头戴式显示器在阈值时间量内被重新佩戴。

在实施例中，其中：第一条件对应于是否头戴式显示器已经接触地表面；并且第二条件对应于头戴式显示器在地表面上的特定定位。

在实施例中，其中控制器进一步能够控制头戴式显示器以：当第二内容被变成锁定状态时在虚拟现实屏幕上不再显示第二内容；或者当第二内容被变成锁定状态时将第二内容变成替换内容。

在实施例中，其中控制器进一步能够：当头戴式显示器从移动终端断开时将第二内容变成锁定状态；并且当从移动终端断开头戴式显示器时根据第二内容的输出状态控制头戴式显示器以显示与锁定状态相对应的不同屏幕。

在实施例中，其中在第一内容和第二内容被显示的同时，当从移动终端断开头戴式显示器时，第二内容从虚拟现实屏幕消失。

在实施例中，其中在仅第二内容被显示的同时，当头戴式显示器被断开时，第二内容变成替换内容。

在实施例中，其中在第二内容被显示的同时，当在头戴式显示器被断开之后经过阈值长度时间时，控制器进一步能够将第二内容变成锁定状态。

在实施例中，其中当头戴式显示器被断开时控制器进一步能够响应于第一输入将第二内容变成锁定状态。

为了实现这些和其它的优点并且根据本说明书的用途，如在此具体化和广泛地描述的，也提供一种控制移动终端的方法，该方法包括：在与移动终端通信的头戴式显示器上显示虚拟现实屏幕，虚拟现实屏幕包括第一内容；经由头戴式显示器的传感器或者移动终端的传感器跟踪用户的头部或者瞳孔移动；以及当在用户的头部或者瞳孔移动中检测到预设姿势输入时改变第一内容的至少部分，并且当头戴式显示器的佩戴状态被保持时在虚拟现实屏幕上显示锁定的第二内容。

在实施例中，该方法可以进一步包括：当第二内容被显示时检测头戴式显示器被拆卸；以及基于头戴式显示器的拆卸状态不同地显示第二内容。

根据在下文中给出的详细描述，本申请的应用的进一步范围将变得更加显然。然而，应理解的是，仅通过说明给出指示本发明的优选实施例的特定示例和详细描述，因为对本领域的技术人员来说本发明的精神和范围内的各种变化和修改将变得更加显然。

附图说明

附图被包括以提供对本公开的进一步理解，并且被并入且组成本说明书的一部分，附图图示示例性实施例并且连同描述一起用于解释本公开的原理。

在附图中：

图1A是根据本公开的移动终端的框图；

图1B和图1C是从不同方向看的移动终端的一个示例的概念图；

图2A和图2B是图示根据本发明的头戴式显示器(HMD)的概念视图；

图3是图示本发明的移动终端被连接到HMD用于通信的实施例的概念视图；

图4是图示根据本发明的代表性的控制方法的流程图；

图5是图示根据本发明的用于在HMD上显示锁定内容的方法的概念视图；

图6A和图6B是图示根据本发明的用于注册要被锁定的内容的方法的概念视图；

图7是图示根据本发明的用于将被显示在HMD上的内容转换成锁定状态的方法的概念视图；以及

图8、图9A、图9B以及图10是图示根据本发明的用于基于HMD的拆卸状态不同地显示锁定的内容的方法的视图。

具体实施方式

参考附图，现在将根据在此公开的示例性实施例详细地给出描述。为了参考附图简要描述，相同的或者等效的组件可以被设有相同或者相似的附图标记，并且其描述将不会被重复。通常，诸如“模块”和“单元”的后缀可以被用于指代元件或者组件。这样的后缀的使用在此旨在仅有助于说明书的描述，并且后缀本身旨在没有给予任何特定的意义或者功能。在本公开中，为了简要，通常已经省略了在相关领域中对于普通技术人员来说公知的那些。附图被用于帮助容易地理解各种技术特征并且应理解附图没有限制在此提出的实施例。正因如此，本公开应被解释为延伸到除了在附图中特别陈述的之外的任何改变、等同物以及替代。

将要理解的是，尽管在此可以使用术语第一、第二等等以描述各种元件，但是这些元件不应被这些术语限制。这些术语通常仅被用于区分一个元件与另一个元件。

将要理解的是，当元件被称为“连接”另一元件时，元件能够与另一元件连接或者也可以存在中间元件。相反地，当元件被称为“直接地连接”另一元件时，不存在中间元件。

单数表示可以包括复数表示，除非根据上下文其表示明确不同的意义。在此使用诸如“包括”或者“具有”的术语并且应理解它们旨在指示在本说明书中公开的数个组件、功能或者步骤的存在，并且也理解可以同样地利用更多或者更少的组件、功能或者步骤。

可以使用各种不同类型的终端实现在此提出的移动终端。这样的终端的示例包括蜂窝电话、智能电话、用户装置、膝上型计算机、数字广播终端、个人数字助手(PDA)、便携式多媒体播放器(PMP)、导航仪、便携式计算机(PC)、板式PC、平板PC、超级本、可佩戴装置(例如，智能手表、智能眼镜、头戴式显示器(HMD))等等。

仅通过非限制性示例，将会参考特定类型的移动终端进行进一步的描述。然而，这样的教导同等地应用于其它类型的终端，诸如在上面注明的那些类型。另外，这样的教导也可以被应用于诸如数字TV、桌上型计算机等等的固定终端。

现在参考图1A-1C，其中图1A是根据本公开的移动终端的框图，并且图1B和图1C是从不同的方向看到的移动终端的一个示例的概念视图。

示出移动终端100，其具有诸如无线通信单元110、输入单元120、感测单元140、输出单元150、接口单元160、存储器170、控制器180、以及电源单元190的各种组件。理解的是，不要求实现所有图示的组件，并且可以替换地实现更多或者更少的组件。

现在参考图1A，示出移动终端100，该移动终端100具有被配置有数个被共同实现的组件的无线通信单元110。例如，无线通信单元100通常包括允许在移动终端100与无线通信***或者移动终端位于的网络之间的无线通信的一个或多个组件。

无线通信单元110通常包括一个或者多个模块，其允许诸如在移动终端100和无线通信***之间的无线通信的通信、在移动终端100和另一移动终端之间的通信、在移动终端100与外部服务器之间通信。此外，无线通信单元110通常包括将移动终端100连接到一个或者多个网络的一个或者多个模块。为了有助于这样的通信，无线通信单元110包括一个或者多个广播接收模块111、移动通信模块112、无线互联网模块113、短程通信模块114、以及位置信息模块115中的一个或者多个。

输入单元120包括：用于获得图像或者视频的相机121；麦克风122，该麦克风122是一种用于输入音频信号的音频输入装置；以及用于允许用户输入信息的用户输入单元123(例如，触摸键、推动键、机械键、软键等等)。数据(例如，音频、视频、图像等等)通过输入单元120被获得并且可以根据装置参数、用户命令、以及其组合通过控制器180分析和处理。

通常使用被配置成感测移动终端的内部信息、移动终端的周围环境、用户信息等等的一个或者多个传感器实现感测单元140。例如，在图1A中，示出具有接近传感器141和照度传感器142的感测单元140。

必要时，感测单元140可以可替选地或者附加地包括其它类型的传感器或者装置，诸如触摸传感器、加速度传感器、磁传感器、G传感器、陀螺仪传感器、运动传感器、RGB传感器、红外(IR)传感器、手指扫描传感器、超声传感器、光学传感器(例如，相机121)、麦克风122、电池量表、环境传感器(例如，气压计、湿度计、温度计、辐射监测传感器、热传感器、以及气体传感器等)、以及化学传感器(例如，电子鼻、医疗传感器、生物传感器等等)，举了一些例子。移动终端100可以被配置成利用从感测单元140获得的信息，并且特别地，从感测单元140的一个或者多个传感器及其组合获得的信息。

输出单元150通常被配置成输出诸如音频、视频、触觉输出等等的各种类型的信息。示出具有显示单元151、音频输出模块152、触觉模块153、以及光学输出模块154的输出单元150。

显示单元151可以具有与触摸传感器的层间结构或者集成结构以便于促成触摸屏幕。触摸屏幕可以在移动终端100和用户之间提供输出接口，并且用作在移动终端100和用户之间提供输入接口的用户输入单元123。

接口单元160用作对接能够被耦合到移动终端100的各种类型的外部装置。例如，接口单元160可以包括任何有线或者无线端口、外部电源端口、有线或者无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。在一些情况下，响应于被连接到接口单元160的外部装置，移动终端100可以执行与被连接的外部装置相关联的各种控制功能。

存储器170通常被实现为存储数据以支持移动终端100的各种功能或者特征。例如，存储器170可以被配置成存储在移动终端100中执行的应用程序、用于移动终端100的操作的数据或者指令等等。经由无线通信可以从外部服务器下载这些应用程序中的一些。在制造或者装运时其它的应用程序可以被安装在移动终端100内，其通常是用于移动终端100的基本功能(例如，接收呼叫、拨打电话、接收消息、发送消息等等)的情况。通常，应用程序被存储在存储器170中、安装在移动终端100中，并且通过控制器180执行以执行用于移动终端100的操作(或者功能)。

除了与应用程序相关联的操作之外，控制器180通常用作控制移动终端100的整体操作。控制器180能够通过处理通过在图1A中描述的各种组件输入或者输出的信号、数据、信息等等，或者激活被存储在存储器170中的应用程序来提供或者处理适合于用户的信息或者功能。作为一个示例，控制器180根据已经被存储在存储器170中的应用程序的执行控制在图1A-1C中图示的一些组件或者所有组件。

电源单元190能够被配置成接收外部电力或者提供内部电力以便于供应对于操作被包括在移动终端100中的元件和组件所要求的适当的电力。电源单元190可以包括电池，并且电池可以被配置成被嵌入在终端主体中，或者被配置成从终端主体可拆卸。

在下文中，在描述通过移动终端100实现的各种实施例之前，将会更加详细地给出参考图1的前述组件的描述。关于无线通信单元110，广播接收模块111通常被配置成经由广播信道从外部广播管理实体接收广播信号和/或广播相关信息。广播信道可以包括卫星信道、陆地信道、或者两者。在一些实施例中，可以利用两个或者更多个广播接收模块111以有助于同时接收两个或者更多个广播信道，或者支持广播信道当中的切换。

移动通信模块112能够将无线信号发送到一个或者多个网络实体并且/或者从一个或者多个网络实体接收无线信号。网络实体的典型示例包括基站、外部移动终端、服务器等等。这样的网络实体形成移动通信网络的一部分，其根据用于移动通信(例如，全球移动通信***(GSM)、码分多址(CDMA)、CDMA 2000(码分多址2000)、EV-DO(增强的语音数据优化或者仅增强的语音数据)、宽带CDMA(WCDMA)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、长期演进(LTE)、高级长期演进(LTE-A)等等)的技术标准或者通信方法构造。

经由移动通信模块112发送和/或接收的无线信号的示例包括音频呼叫信号、视频(电话)呼叫信号、或者各种格式的数据以支持文本和多媒体消息的通信。

无线互联网模块113被配置成有助于无线互联网接入。此模块可以被内部地或者外部地耦合到移动终端100。无线互联网模块113可以根据无线互联网技术经由通信网络发送和/或接收无线信号。

这样的无线互联网接入的示例包括无线LAN(WLAN)、无线保真(Wi-Fi)、Wi-Fi直连、数字生活网络联盟(DLNA)、无线宽带(Wibro)、全球微波接入互操作(Wimax)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、长期演进(LTE)、高级LTE(LTE-A)等等。无线互联网模块113可以根据一个或者多个这样的无线互联网技术，或者其它的互联网技术发送/接收数据。

在一些实施例中，当根据作为移动通信网络的一部分的例如WiBro、HSDPA、HSUPA、GSM、CDMA、WCDMA、LTE、LTE-A等等实现无线互联网接入时，无线互联网模块113执行这样的无线互联网接入。这样，无线互联网模块113可以与移动通信模块112协作，或者用作移动通信模块112。

短程通信模块114被配置成有助于短程通信。适合于实现这样的短程通信的技术包括：蓝牙(BLUETOOTH^TM)、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、紫蜂(ZigBee)、近场通信(NFC)、无线保真(Wi-Fi)、Wi-Fi直连、无线USB(无线通用串行总线)等等。经由无线局域网，短程通信模块114通常支持在移动终端100和无线通信***之间的无线通信，在移动终端100和另一移动终端100之间的通信、或者在移动终端和另一移动终端100(或者外部服务器)位于的网络之间的通信。无线局域网的一个示例是无线个人域网。

在一些实施例中，另一移动终端(可以类似于移动终端100配置)可以是可佩戴设备，例如，智能手表、智能眼镜或者头戴式显示器(HMD)，其能够与移动终端100交换数据(或者以其它方式与移动终端100协作)。短程通信模块114可以感测或者识别可佩戴设备，并且允许在可佩戴设备和移动终端100之间的通信。另外，当感测到的可佩戴设备是被授权与移动终端100通信的设备时，例如，控制器180可以使在移动终端100中处理的数据的至少一部分经由短程通信模块114传输到可佩戴设备。因此，可佩戴设备的用户可以在可佩戴设备上使用在移动终端100中处理的数据。例如，当在移动终端100中接收到呼叫时，用户可以使用可佩戴设备应答呼叫。而且，当在移动终端100中接收到消息时，用户能够使用可佩戴设备检查接收到的消息。

位置信息模块115通常被配置成检测、计算、导出或者以其它方式识别移动终端的位置。作为示例，位置信息模块115包括全球定位***(GPS)模块、Wi-Fi模块、或者两者。如有必要，位置信息模块115可以替换地或附加地与无线通信单元110的任何其它模块起作用以获得与移动终端的位置有关的数据。

作为一个示例，当移动终端使用GPS模块时，可以使用从GPS卫星发送的信号获取移动终端的位置。作为另一示例，当移动终端使用Wi-Fi模块时，能够基于将无线信号发送到Wi-Fi模块或者从Wi-Fi模块接收无线信号的无线接入点(AP)有关的信息获取移动终端的位置。

输入单元120可以被配置成允许对移动终端120的各种类型的输入。这样的输入的示例包括音频、图像、视频、数据、以及用户输入。使用一个或者多个相机121经常获得图像和视频输入。这样的相机121可以处理在视频或者图像捕获模式下通过图像传感器获得的静止图片或者视频的图像帧。被处理的图像帧能够被显示在显示单元151上或者被存储在存储器170中。同时，相机121可以以矩阵配置排列以允许具有多个角度或者焦点的多个图像被输入到移动终端100。而且，相机121可以位于立体排列以获取用于实现立体图像的左图像和右图像。

麦克风122一般被实现为准许将音频输入到移动终端100。根据在移动终端100中执行的功能能够以各种方式能够处理音频输入。如有必要，麦克风122可以包括各种噪声去除算法以去除在接收外部音频信号的过程中产生的不想要的噪声。

用户输入单元123是允许用户输入的组件。这样的用户输入可以使控制器180能够控制移动终端100的操作。用户输入单元123可以包括机械输入元件中的一个或者多个(例如，机械键、位于移动终端100的前和/或后表面或者侧表面上的按钮、薄膜开关、滚动轮、滚动开关等等)、或者触摸灵敏的输入元件等等。作为一个示例，触摸灵敏的输入元件可以是通过软件处理被显示在触摸屏上的虚拟键或者软键或者视觉键、或者位于在除了触摸屏之外的位置处的移动终端上的触摸键。另一方面，虚拟键或者视觉键可以以例如，图形、文本、图标、视频、或者其组合的各种形状显示在触摸屏上。

感测单元140通常被配置成感测移动终端的内部信息、移动终端的周围环境信息、用户信息等等中的一个或者多个。控制器180通常与感测单元140协作以基于感测信号控制移动终端100的操作或执行与被安装在移动终端中的应用程序相关联的数据处理、功能或者操作。使用任何种类的传感器可以实现感测单元140，现在将会更加详细地描述其中的一些。

接近传感器141指的是在没有机械接触的情况下通过使用磁场、红外线等等感测接近表面的对象、或者位于表面附近的对象的存在或者不存在的传感器。接近传感器141可以被布置在通过触摸屏覆盖的移动终端的内部区域处，或者触摸屏附近。

例如，接近传感器141可以包括任何透射型光电传感器、直接反射型光电传感器、镜反射型光电传感器、高频振荡接近传感器、电容型接近传感器、磁型接近传感器、红外线接近传感器等等。当触摸屏被实现为电容型时，接近传感器141能够通过电磁场响应于具有导电性的对象的接近的变化来感测指示器相对于触摸屏的接近。在这样的情况下，触摸屏(触摸传感器)也可以被归类成接近传感器。

术语“接近触摸”将会在此被经常引用以表示其中指示器被定位为接近触摸屏而没有接触触摸屏的场景。术语“接触触摸”将会在此被经常引用以表示其中指示器物理接触触摸屏的场景。对于与指示器相对于触摸屏的接近触摸相对应的位置，这样的位置将会对应于其中指示器垂直于触摸屏的位置。接近传感器141可以感测接近触摸，和接近触摸模式(例如，距离、方向、速度、时间、位置、移动状态等等)。

通常，控制器180处理与通过接近传感器141感测到的接近触摸和接近触摸模式相对应的数据，并且使在触摸屏上能够输出视觉信息。另外，根据是否相对于触摸屏上的点的触摸是接近触摸或者接触触摸，控制器180能够控制移动终端100执行不同的操作或者处理不同的数据。

使用任何各种触摸方法，触摸传感器能够感测被施加到诸如显示单元151的触摸屏的触摸。这样的触摸方法的示例包括电阻型、电容型、红外型、以及磁场型等等。

作为一个示例，触摸传感器可以被配置成将被施加到显示单元151的特定部分的压力的变化转换成电输入信号，或者将在显示单元151的特定部分处出现的电容转换成电输入信号。触摸传感器也可以被配置成不仅感测被触摸的位置和被触摸的区域，而且感测触摸压力和/或触摸电容。触摸对象通常被用于将触摸输入施加到触摸传感器。典型的触摸对象的示例包括手指、触摸笔、触笔、指示器等等。

当通过触摸传感器感测触摸输入时，相应的信号可以被传送到触摸控制器。触摸控制器可以处理接收到的信号，并且然后将相应的数据传送到控制器180。因此，控制器180可以感测已经触摸显示单元151的哪一个区域。在此，触摸控制器可以是与控制器180分离的组件、控制器180、或者其组合。

在一些实施例中，控制器180可以根据触摸了触摸屏或者除了触摸屏之外被设置的触摸键的触摸对象的类型执行相同或者不同的控制。例如，基于移动终端100的当前操作状态或者当前执行的应用程序，可以决定根据提供触摸输入的对象是否执行相同或者不同的控制。

触摸传感器和接近传感器可以被单独地或者组合实现，以感测各种类型的触摸。这样的触摸包括短(或者轻敲)触摸、长触摸、多点触摸、拖动触摸、轻击触摸、捏缩触摸、捏放触摸、滑动触摸、悬停触摸等等。

如有必要，超声传感器可以被实现以使用超声波识别与触摸对象有关的位置信息。例如，控制器180可以基于通过照度传感器和多个超声传感器感测到的信息计算波生成源的位置。因为光比超声波快得多，所以光到达光学传感器的时间远远比超声波到达超声传感器的时间短。使用此事实可以计算波生成源的位置。例如，可以基于光作为参考信号使用与超声波到达传感器的时间的时间差计算波生成源的位置。

相机121通常包括至少一个相机传感器(CCD、CMOS等等)、光传感器(或者图像传感器)、以及激光传感器。

实现具有激光传感器的相机121可以允许相对于3D立体图像的物理对象的触摸的检测。光传感器可以被层压在显示设备上，或者与显示设备重叠。光传感器可以被配置成扫描接近触摸屏的物理对象的移动。更加详细地，光传感器可以包括在行和列处的光电二极管和晶体管以使用根据被施加的光的量改变的电信号扫描在光传感器处接收到的内容。即，光传感器可以根据光的变化计算物理对象的坐标从而获得物理对象的位置信息。

显示单元151通常被配置成输出在移动终端100中处理的信息。例如，显示单元151可以显示在移动终端100处执行的应用程序的执行屏幕信息或者响应于执行屏幕信息的用户界面(UI)和图形用户界面(GUI)信息。

在一些实施例中，显示单元151可以被实现为用于显示立体图像的立体显示单元。典型的立体显示单元可以采用诸如立体方案(眼镜方案)、自动立体方案(无眼镜方案)、投影方案(全息方案)等等的立体显示方案。

通常，3D立体图像可以包括左图像(例如，左眼图像)和右图像(例如，右眼图像)。根据如何将左和右图像组合成3D立体图像，3D立体成像方法能够被划分为其中左和右图像位于帧中的上和下的上下方法、其中左和右图像位于帧中的左右的左到右(左到右或者并排)方法、其中左和右图像以贴片的形式定位的棋盘方法、其中左和右图像通过列和行可替选地放置的隔行扫交错方法、以及其中基于时间左和右图像被可替选地显示的时间序列(或者逐帧)的方法。

而且，至于3D缩略图图像，从原始的图像帧的左图像和右图像能够分别产生左图像缩略图和右图像缩略图，并且然后被组合以产生单个3D缩略图图像。通常，术语“缩略图”可以被用于指代被缩小的图像或者被缩小的静止图像。通过与屏幕上的左图像和右图像之间的视差相对应的深度，利用其间的水平距离差可以显示被产生的左图像缩略图和右图像缩略图，从而提供立体空间感。

使用立体处理单元可以在立体显示单元上显示用于实现3D立体图像所需的左图像和右图像。立体处理单元能够接收3D图像并且提取左和右图像，或者能够接收2D图像并且将其变成左图像和右图像。

音频输出模块152通常被配置成输出音频数据。可以从任何数量的不同的来源获得这样的音频数据，使得可以从无线通信单元110接收音频数据或者可以已经将其存储在存储器170中。可以在诸如信号接收模式、呼叫模式、记录模式、语音识别模式、广播接收模式等等的模式期间输出音频数据。音频输出模块152能够提供与由移动终端100执行的特定功能(例如，呼叫信号接收声音、消息接收声音等等)有关的音频输出。音频输出模块152也可以被实现为接收器、扬声器、蜂鸣器等等。

触觉模块153能够被配置成产生用户能够感觉、感知、或者以其它方式体验的各种触觉效果。通过触觉模块153产生的触觉效果的典型示例是振动。能够通过用户选择或者通过控制器进行设置来控制通过触觉模块155产生的振动的强度、模式等等。例如，触觉模块153可以以组合的方式或者顺序的方式输出不同的振动。

除了振动之外，触觉模块153还能够生成各种其它的触觉效果，包括通过诸如垂直移动以接触皮肤的针排列的刺激的效果、通过喷孔或者吸入口的空气的喷射力或者吸力、对皮肤的触摸、电极的接触、静电力、通过使用能够吸收或者产生热的元件再现冷和暖的感觉的效果等等。

触觉模块153也能够被实现为允许用户通过诸如用户的手指或者手臂的肌肉感觉来感觉触觉效果，以及通过直接接触传递触觉效果。根据移动终端100的特定配置也可以设置两个或者更多个触觉模块153。

光学输出模块154能够使用光源的光输出用于指示事件产生的信号。在移动终端100中产生的事件的示例可以包括消息接收、呼叫信号接收、未接来电、报警、日程表通知、电子邮件接收、通过应用的信息接收等等。

也可以以移动终端发射单色光或者具有多种颜色的光的方式实现通过光学输出模块154输出的信号。例如，当移动终端感测用户已经检查了产生的事件时信号输出可以被结束。

接口单元160用作用于要连接到移动终端100的外部设备的接口。例如，接口单元160能够接收从外部设备发送的数据，接收电力以传送到移动终端100内的元件和组件，或者将移动终端100的内部数据发送到这样的外部设备。接口单元160可以包括有线或者无线头戴式受话器端口、外部电源端口、有线或者无线数据端口、存储卡端口、用于连接具有标识模块的设备的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。

识别模块可以是存储用于认证使用移动终端100的权限的各种信息的芯片并且可以包括用户识别模块(UIM)、订户识别模块(SIM)、通用订户识别模块(USIM)等等。另外，具有识别模块的设备(在此也被称为“识别设备”)可以采用智能卡的形式。因此，识别设备经由接口单元160能够与终端100相连接。

当移动终端100与外部托架相连接时，接口单元160能够用作允许电力从托架供应到移动终端100的通道或者可以用作允许用户从托架输入的各种命令信号传递到移动终端的通道。从托架输入的各种命令信号或者电力可以作为用于识别移动终端被正确地安装在托架上的信号操作。

存储器170能够存储程序以支持移动终端180的操作并且存储输入/输出数据(例如，电话簿、消息、静止图像、视频等等)。存储器170可以存储与响应于触摸屏上的触摸输入输出的各种模式的振动和音频有关的数据。

存储器170可以包括一种或者多种类型的存储介质，包括闪存型、硬盘型、固态盘(SSD)型、硅盘型、多媒体卡式、卡型存储器(例如，SD或DX存储器等)、随机存取存储器(RAM)、静态随机存取存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁存储器、磁盘、光盘等等。也可以关于在诸如互联网的网络上执行存储器170的存储功能的网络存储设备操作移动终端100。

控制器180可以典型地控制移动终端100的一般操作。例如，当移动终端的状态满足预设条件时，控制器180可以设置或者释放用于限制用户输入与应用有关的控制命令的锁定状态。

控制器180也能够执行与语音呼叫、数据通信、视频呼叫等等相关联的控制和处理，或者执行模式识别处理以将在触摸屏上执行的手写输入或者绘图输入分别识别为字符或者图像。另外，控制器180能够控制这些组件中的一个或者组合以便于实现在此公开的各种示例性实施例。

电源单元190接收外部电力或者提供内部电力并且供应对于操作被包括在移动终端100中的各自的元件和组件所需的适当的电力。电源单元190可以包括电池，该电池通常是可充电的或者可拆卸地耦合到终端主体，用于充电。

电源单元190可以包括连接端口。连接端口可以被配置为接口单元160的一个示例，用于供应电力以对电池再充电的外部充电器被电气地连接到该接口单元160。

作为另一示例，电源单元190可以被配置成在没有使用连接端口的情况下以无线的方式对电池再充电。在本示例中，使用以磁感应为基础的感应耦合方法或者以电磁谐振为基础的电磁谐振耦合方法，电源单元190能够接收从外部无线电力发射器传递的电力。

可以使用例如软件、硬件、或者其任何组合，以计算机可读介质、机器可读介质、或者类似介质实现在此描述的各种实施例。

参考图1B和图1C，参考直板式终端主体，描述移动终端100。然而，移动终端100可以替选地已各种不同的配置中的任意一种来实现。这样的配置的示例包括手表式、夹式、眼镜型、或者折叠式、翻盖式、滑盖式、摇摆式、旋转式等的各种结构，其中两个或者更多个主体以相对可移动的方式被相互组合。在此的讨论将常常涉及特定型的移动终端(例如，直板式、手表式、眼睛型等等)。然而关于特定型移动终端的这种教导也将通常应用到其它型移动终端。

移动终端100将通常包括形成终端的外观的壳体(例如，外壳、外罩、盖等)。在本实施例中，壳体可以被划分成前壳体101和后壳体102。各种电子组件可以被合并在前壳体101和后壳体102之间形成的空间中。至少一个中间壳体可以被附加地布置在前壳体和后壳体101和102之间。

显示单元151能够被布置在终端主体的前表面上以输出信息。如所图示的，显示单元151的窗口151a能够被安装到前壳体101使得与前壳体101一起形成终端主体的前表面。

在一些实施例中，电子组件也可以被安装到后壳体102。这样的电子组件的示例可以包括可拆卸的电池、标识模块、存储卡等。用于覆盖电子组件的后盖103可以被可拆卸地耦合到后壳体102。因此，当从后壳体102拆卸后盖103时，被安装到后壳体102的电子组件可以被外部地暴露。

如所图示的，当后盖103被耦合到后壳体102时，后壳体102的侧表面可以被部分地暴露。在一些情况下，在耦合时，后壳体102也可以被后盖103完全地遮盖。在一些实施例中，后盖103可以包括用于外部地暴露相机121b或者音频输出模块152b的开口。

壳体101、102、103可以通过注入成型合成树脂形成或者可以由例如不锈钢(STS)、铝(Al)、钛(Ti)等的金属形成。

作为多个壳体形成用于容纳组件的内部空间的示例的替选，移动终端100可以被配置使得一个壳体形成内部空间。在本实例中，以合成树脂或者金属从侧表面延伸到后表面的方式来形成具有连体的移动终端100。

如有必要，移动终端100可以包括防水单元(未示出)，用于防止水引入到终端主体。例如，防水单元可以包括防水构件，其位于窗口151a和前壳体101之间、在壳体101和后壳体102之间、或者后壳体102和后盖103之间，当这些壳体被耦合时密闭地密封内部空间。

移动终端可以包括显示单元151、第一和第二音频输出模块151a/151b、接近传感器141、照度传感器142、光学输出模块154、第一和第二相机121a/121b,、第一和第二操纵单元123a/123b、麦克风122、接口单元160等。

将会针对图1B和图1C示出的的移动终端100进行描述。显示单元151、第一音频输出模块151a、接近传感器141、照度传感器142、光学输出模块154、第一相机121a以及第一操纵单元123a被布置在终端主体的前表面上，第二操纵单元123b、麦克风122以及接口单元160被布置在终端主体的侧表面上，并且第二音频输出模块151b和第二相机121b被布置在终端主体的后表面上。

然而，应当理解，可替选的布置是可能的，并且在本公开的教导内。一些组件可以省略或者重新布置。例如，第一操纵单元123a可以不被布置在终端主体的另一表面上，并且第二音频输出模块152b可以被布置在终端主体的侧表面上。

显示单元151输出在移动终端100中处理的信息。显示单元151能够使用一个或多个合适的显示装置。例如，这样合适的显示装置的示例包括液晶显示器(LCD)、薄膜晶体管-液晶显示器(TFT-LCD)、有机发光二极管(OLED)、柔性显示器、3维(3D)显示器、以及电子墨显示器，以及其组合。

可以使用能够实现相同或者不同显示技术的两个显示装置来实现显示单元151。例如，多个显示单元151可以被布置在一个侧面上以相互分开，或者这些装置可以被集成，或者这些装置可以被布置在不同的表面上。

显示单元151也能够包括触摸传感器，该触摸传感器感测在显示单元处接收到的触摸输入。当触摸被输入到显示单元151时，触摸传感器可以被配置成感测此触摸，并且控制器180(例如)能够生成与触摸相对应的控制命令或者其它信号。以触摸方式输入的内容可以是文本或者数值，或者能够以各种模式指示或者指定的菜单项目。

触摸传感器可以以被布置在窗口151a和窗口151a的后表面上的显示器之间的具有触摸图案的膜的形式，或者被直接地构图在窗口151a的后表面上的金属线来配置。或者，触摸传感器可以与显示器集成地形成。例如，触摸传感器可以被布置在显示器的基板上或者显示器内。

显示单元151也能够与触摸传感器一起形成触摸屏。在此，触摸屏可以用作用户输入单元123(参见图1A)。因此，触摸屏可以替换第一操纵单元123a的功能中的至少一些。

可以以用于输出语音音频、报警声音或者多媒体音频再现的扬声器的形式实现第一音频输出模块152a。

显示单元151的窗口151a将典型地包括用于允许从第一音频输出模块152a产生的音频穿过的孔径。一个备选是允许音频沿着结构主体之间的组装间隙(例如，在窗口151a和前壳体101之间的间隙)释放。在本实例中，被独立地形成以输出音频声音的孔可以不被看到或者在外观上以其它方式被隐藏，从而进一步简化移动终端100的外观的制造。

光学输出模块154可以输出用于指示事件产生的光。在移动终端100中产生的事件的示例包括消息接收、呼叫信号接收、未接来电、报警、日程表通知、电子邮件接收、通过应用的信息接收等。当感测到用户的事件查看时，控制器可以控制光学输出单元154以停止光的输出。

第一相机121可以处理在视频呼叫模式或者捕获模式下通过图像传感器获得的静止或者运动图像的图像帧。因此，处理的图像帧可以被显示在显示单元151上或者被存储在存储器170中。

第一和第二操纵单元123a和123b是用户输入单元123的示例，通过用户可以对其进行操纵以将输入提供给移动终端100。通常，第一和第二操纵单元123a和123b也可以被称为操纵部分，并且可以采用允许用户执行诸如触摸、推动、滚动等等的操纵的任何触觉方法。第一和第二操纵单元123a和123b也可以采用允许用户执行诸如接近触摸、悬停等等的操纵的任何非触觉的方法。

图1B图示作为触摸键的第一操纵单元123a，但是可能的替选包括机械键、推动键、触摸键以及其组合。

可以以各种方式使用在第一和第二操纵单元123a和123b处接收到的输入。例如，第一操纵单元123a可以由用户使用以将输入提供给菜单、主屏键、取消、搜索等等，并且第二操纵单元123b可以由用户使用以提供输入以控制从第一或者第二音频输出模块152a或者152b输出的音量级，切换到显示单元151的触摸识别模式等等。

作为用户输入单元123的另一示例，后输入单元(未示出)可以位于终端主体的后表面上。后输入单元能够由用户操纵以将输入提供给移动终端100。可以以各种不同的方式使用输入。例如，用户可以使用后输入单元以提供用于从第一或者第二音频输出模块152a或者152b输出的电源开/关、开始、结束、滚动、控制音量级的输入，切换到显示单元151的触摸识别模式等等。后输入单元可以被配置成允许触摸输入、推动输入或者其组合。

后输入单元可以被设置成在终端主体的厚度方向中重叠前表面的显示单元151。作为一个示例，后输入单元可以被设置在终端主体的后表面的上端部分上，使得当用户使用一只手抓住终端主体时用户能够使用食指容易地操纵它。可替选地，后输入单元能够被定位在终端主体的后侧的至多任何位置处。

包括后输入单元的实施例可以实现后输入单元中的第一操纵单元123a的功能的一些或者全部。这样，在其中从前侧省略第一操纵单元123a的情形下，显示单元151能够具有更大的屏幕。

作为又一个替选，移动终端100可以包括手指扫描传感器，该手指扫描传感器扫描用户的指纹。因此，控制器180可以使用通过手指扫描传感器感测的指纹信息作为认证过程的一部分。手指扫描传感器可以被安装在显示单元151或者用户输入单元123中。

麦克风122被示出为位于移动终端100的末端处，但是其他位置是可能的。如有必要，多个麦克风可以被实现，利用这样的布置允许接收立体声音。

接口单元160可以用作允许移动终端100与外部设备对接的路径。例如，接口单元160可以包括用于连接到另一设备(例如，耳机、外部扬声器等)的连接终端、用于近场通信的端口(例如，红外数据协会(IrDA)端口、蓝牙端口、无线LAN端口等)、或者用于将电力供应到移动终端100的电源终端中的一个或多个。接口单元160可以以用于容纳诸如订户标识模块(SIM)、用户标识模块(UIM)、或者用于信息存储的存储器卡的外部卡的插槽的形式来实现。

第二相机121b被示出为位于终端主体的后侧处，并且包括与第一相机单元121a的图像捕获方向大体上相反的图像捕获方向。如有必要，第二相机121b可以可替选地位于其他位置，或者使其可移动，以便于具有与被示出的图像捕获方向不同的图像捕获方向。

第二相机121b可以包括沿着至少一条线布置的多个透镜。多个透镜也可以以矩阵配置来布置。相机可以被称为“阵列相机”。当第二相机121b被实现为阵列相机时，可以使用多个透镜以各种方式捕获图像以及图像具有更好的质量。

如在图1C中所示，闪光灯124被示出为与第二相机121b相邻。当通过相机121b捕获主题的图像时，闪光灯124可以照明主题。

如在图1B中所示，第二音频输出模块152b能够位于终端主体上。第二音频输出模块152b可以结合第一音频输出模块152a来实现立体声功能，并且也可以被用于实现用于呼叫通信的扬声器电话模式。

用于无线通信的至少一个天线可以位于终端主体上。天线可以被安装在终端主体中或者通过壳体形成。例如，配置广播接收模块111的一部分的天线可以缩回到终端主体中。可替选地，使用被附接到后盖103的内表面的膜、或者包括导电材料的壳体，可以形成天线。

用于将电力供应到移动终端100的电源单元190可以包括电池191，该电池191被安装在终端主体中或者可拆卸地耦合到终端主体的外部。电池191可以经由连接到接口单元160的电源线缆来接收电力。此外，使用无线充电器以无线方式能够对电池191充电。通过电磁感应或者电磁谐振可以实现无线充电。

后盖103被示出为耦合到用于屏蔽电池191的后壳体102，以防止电池191的分离，并且保护电池191免受外部冲击或者外来物质的影响。当从终端主体可拆卸电池191时，后壳体103可以被可拆卸地耦合到后壳体102。

用于保护外观或者协助或者扩展移动终端100的功能的附件也可以被提供在移动终端100上。作为附件的一个示例，可以提供用于覆盖或者容纳移动终端100的至少一个表面的盖或者袋。盖或者袋可以与显示单元151协作以扩展移动终端100的功能。附件的另一示例是用于协助或者扩展对触摸屏的触摸输入的触摸笔。

根据又一个实施方式，移动终端可被配置为可在人体上可佩戴的设备。这样的设备超越了用户用他们的手抓住移动终端的通常技术。可佩戴设备的示例包括智能手表、智能眼镜、头戴式显示器(HMD)等等。

典型的可佩戴设备可以与另一个移动终端100交换数据(或协作)。在这样的设备中，可佩戴设备通常具有比协作的移动终端更少的功能。例如，移动终端100的短程通信模块114可以感测或识别足够近以与移动终端通信的可佩戴设备。此外，当感测到的可佩戴设备是被认证以与移动终端100通信的设备时，控制器180例如可以经由短程通信模块114将在移动终端100中处理的数据发送到可佩戴设备。因此，可佩戴设备的用户可以在可佩戴设备上使用在移动终端100中处理的数据。例如，当在移动终端100中接收到呼叫时，用户可以使用可佩戴设备应答呼叫。此外，当在移动终端100中接收到消息时，用户能够使用可佩戴设备来检查接收到的消息。

在下文中，将会参考附图更加详细地描述与本发明有关的可佩戴式装置当中的头戴式显示器(HMD)。

图2A和图2B是图示根据本发明的头戴式显示器(HMD)的概念视图。

根据本发明的HMD 200可以包括参考图1A前述的组件中的至少一个。

例如，HMD 200可以包括无线通信单元、输入单元(例如，用户输入单元223、麦克风等等)、感测单元240、输出单元(例如，显示单元251、音频输出单元252)、接口单元260、存储器、控制器以及电源单元中的至少一个。在图2A中示出的组件对于实现HMD来说不是必需要求的。即，在本说明书中的HMD可以具有比前述的组件更多或者更少数目的组件。

参考图2A，根据本发明的HMD 200被形成以可佩戴在用户的头部(或者面部)上，并且可以包括框架单元(壳体、外壳、盖等等)。框架单元可以是由用于增强可佩戴性的柔性材料形成。在附图中，框架单元包括是由不同材料形成的第一框架201和第二框架202。

例如，第一框架201可以提供在图1A中示出的组件中的至少一个被布置的空间，并且第二框架202可以支持(或者固定)第一框架201使得第一框架201可以被安装在用户的头部。

框架单元可以被称为主体(或者HMD主体)。主体(或者HMD主体)可以被理解为HMD200的单个组件。在下文中，将会解释具有附图标记200的HMD主体。

如果包括第一框架201和第二框架202的框架单元被视为单个HMD主体，则本发明的HMD主体可以以各种方式被实现。更加具体地，HMD主体可以包括在其间具有预先确定的角度的多个表面。多个表面意指位于HMD主体的外部的表面。从此视点，多个表面可以意指HMD 200的表面(外部表面、外表面等等)。多个表面中的每一个可以是平坦的或者弯曲的。

主体(框架单元)被支撑在用户的头部，并且提供各种类型的组件被安装的空间。如所示的，诸如相机221、显示单元251、用户输入单元223、控制器280、感测单元240、以及接口单元260的电子组件可以被安装到第一框架201。

诸如音频输出单元252的电子组件可以被安装到第二框架202。然而，本发明不限于此。即，通过用户的选择，参考图1A前述的组件，以及实现HMD所需的组件可以被不同地布置在第一框架201和第二框架202处。即，根据本发明的HMD 200可以具有比前述的组件更多或者更少数目的组件。

HMD 200的控制器280被配置成控制被设置在HMD 200处的各种类型的电子组件。控制器280可以被理解为参考图1A前述的控制器180。

如在图2A中所示，相机221可以被设置在HMD主体处。例如，相机221可以被布置在HMD主体的一个表面(例如，前表面)上。相机221被布置为靠近左眼和右眼中的至少一个，并且被配置成捕获(输入，接收)前图像。因为相机221被布置为靠近朝着前侧的眼睛，所以相机221可以获取用户正在观看的场景作为图像。

在附图中，在数量上相机221被提供了一个。然而，本发明不限于此。即，相机221可以被提供多个，并且可以被配置成获取立体图像。

HMD 200可以被提供有感测单元240。前参考图1A前述的，感测单元240可以可替选地或者另外包括其它类型的传感器或者装置，诸如接近传感器、照度传感器、触摸传感器、加速度传感器、磁传感器、G传感器、陀螺仪传感器、运动传感器、RGB传感器、红外(IR)传感器、指纹扫描传感器、超声传感器、光学传感器(例如，相机221)、麦克风222、电池量表、环境传感器(例如，气压计、湿度计、温度计、辐射检测传感器、热传感器、以及气体传感器等等))、和化学传感器(例如，电子鼻、医疗传感器、生物传感器等等)，仅举几例。

例如，控制器280可以使用被包括在感测单元240中的陀螺仪传感器、重力传感器、运动传感器等等感测HMD 200的运动。可替选地，使用被包括在感测单元240中的接近传感器、照度传感器、磁传感器、红外传感器、超声传感器、光学传感器等等控制器280可以感测接近HMD主体的物体。

HMD 200可以被提供有***纵以接收控制命令的用户输入单元223。如果以触觉方式施加输入，则用户输入单元223可以接收诸如触摸输入和推动输入的任何类型的输入。在附图中，用于接收推动输入和触摸输入的用户输入单元223被设置在框架单元上。

用于输入声音并且将声音处理成电子语音数据的麦克风(未示出)可以被设置在HMD 200处。音频输出单元252可以被配置成以一般声音输出方式或者骨传导方式发送声音。如果以骨传导方式实现音频输出单元252，则其被安装到佩戴HMD 200的用户的头部。并且被安装到用户的头部的音频输出单元252通过振动头骨发送声音。

如在图2B中所示，显示单元251被安装到框架单元，并且被配置以输出在用户的眼睛的前面的屏幕信息(例如，静止图像、运动图像等等)。显示单元251可以被布置以对应于左眼和右眼中的至少一个，使得当用户佩戴HMD 200时屏幕信息可以被显示在用户的眼睛的前面。即，显示单元251可以被形成以覆盖(或面向)用户的左眼和右眼中的至少一个。

例如，根据本发明的HMD的显示单元251可以被布置在HMD主体中。更加具体地，显示单元251可以被布置在HMD中，并且可以被布置在当用户佩戴HMD时面向用户的眼睛的位置处。

HMD 200可以包括透镜单元203使得用户可以观看从布置在HMD主体内部的显示单元输出的屏幕信息。即，本发明的HMD 200可以被形成使得从显示单元251输出的屏幕信息(或者光)可以通过透镜单元230穿过用户的眼球(或者用户的视觉范围)。

例如，透镜单元203可以被布置以对应于用户的左眼和右眼中的至少一个。此外，透镜单元203可以被布置使得当用户将HMD佩戴在头部时被定位在用户的眼球和显示单元251之间。

透镜单元203可以被形成以具有在用户的控制下可变化的位置，因为视角可以根据用户的眼球和显示单元之间的距离变成不同的。并且透镜单元203可以被实现为凹透镜、凸透镜、或者其组合。

显示单元251可以使用棱镜将图像投射到用户的眼睛。在这样的情况下，棱镜可以是由透射材料形成使得用户可以观看被投射的图像和前图像两者。

通过显示单元251输出的图像以与一般图像重叠的方式可以是可观看的。使用显示单元的这样的特性，HMD 200可以通过重叠虚拟图像和真实图像或者背景提供允许用户观看单个图像的增强现实(AR)。

即，显示单元251可以被形成为不从中通过外部光用于虚拟现实(VR)的实现，或者可以被形成为从中通过外部光用于增强现实(AR)的实现。

虽然未示出，用于覆盖左眼和右眼中的至少一个的显示单元251可以可拆卸地安装到框架单元。

显示单元251可以是外部移动终端的显示单元。HMD主体(框架单元)可以被形成使得外部移动终端可以被可拆卸地安装，并且可以被电气地连接到外部移动终端。在HMD主体被电气地连接到外部移动终端的情况下，HMD 200的控制器280可以控制外部移动终端。

如果外部移动终端被安装到HMD主体，则诸如相机221、感测单元240、显示单元251以及控制器280的前述的组件可以被替换成外部移动终端的相机、感测单元、显示单元以及控制器。

为了轻的重量，将会假定HMD 200被提供有显示单元251，不是外部移动终端被安装到HMD主体来解释本发明。

在下文中，将会更加详细地解释被设置在HMD主体处的组件。

无线通信单元可以包括允许诸如HMD 200和无线通信***之间的无线通信、在HMD200和另一HMD 200之间的通信、在HMD 200和移动终端(或者固定终端)之间的通信、在HMD200和控制装置之间的通信、在HMD 200和为了无线通信被安装在外部的相机之间的通信、以及在HMD 200和外部服务器之间的通信的通信的一个或者多个模块。

此外，无线通信单元可以包括将HMD 200连接到一个或者多个网络的一个或者多个模块。

无线通信单元可以包括广播接收模块、移动通信模块、无线互联网模块、短程通信模块、以及位置信息模块中的至少一个。这样的模块可以以参考图1A前述的无数通信单元相同或者相似方式被应用。

然而，本发明不限于此。即，移动终端100和HMD 200可以通过移动终端100的接口单元160和HMD 200的接口单元260相互收发(发送和接收)数据。

图3是图示本发明的移动终端被连接到用于有线通信的HMD的实施例的概念视图。

参考图3，HMD 200可以被提供有接口单元260。例如，接口单元260可以被设置在HMD主体的第一框架201处。

HMD 200的接口单元260用作用于要被连接到HMD 200的外部设备的接口。例如，接口单元260能够接收从外部设备(移动终端100)发送的数据，接收电力以传递到HMD 200内的元件和组件，或者将HMD 200的内部数据发送到这样的外部设备。接口单元260可以包括有线或者无线耳机端口、外部电源端口、有线或者无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。

如在图3中所示，HMD 200的接口单元260可以通过有线电缆被连接到移动终端的接口单元160用于通信。例如，移动终端的HMD 200和接口单元160中的每一个可以是有线数据端口。接口单元160、260可以具有相同类型的端口或者不同类型的端口。

可以通过移动终端100的控制器180控制以有线方式被连接到移动终端100的HMD200。HMD 200的控制器280可以基于通过有线电缆从移动终端100接收到的数据(例如，控制命令)控制HMD 200。

在本说明书中，为了方便起见，假定通过以有线方式被连接到HMD 200的移动终端100的控制器控制HMD 200。然而，对于本领域的技术人员显然的是，通过HMD 200的控制器180要通过移动终端的控制器180执行的操作也是可执行的。

为了数据收发以有线/无线方式连接到HMD 200的移动终端100用作用于控制HMD200的控制器(控制装置或者控制手段)。

通过HMD 200的传感器，根据本发明的用于控制HMD 200的移动终端100可以通过跟踪用户的头部或者瞳孔移动检测预设特定姿势。一旦特定姿势被检测，移动终端100可以释放锁定内容(解锁内容)以在HMD 200上显示被解锁的内容。通过这样的配置，预存的私人内容可以通过特定的运动被输出到HMD 200，并且用户可以在没有向外部暴露内容的情况下查看内容。

图4是图示根据本发明的代表性的控制方法的流程图。

参考图4，移动终端100可以通过与显示虚拟现实屏幕的HMD 200通信执行控制。更加具体地，通过为了有线/无线通信被连接的移动终端100可以控制HMD 200。为此，光标可以被显示在HMD 200的显示单元251上。当基于用户的请求(例如，被施加到HMD 200的用户输入单元223或者被施加到移动终端的触摸屏151的输入，以及关于移动终端100和/或HMD200的运动的信息)光标在HMD 200的显示单元251上移动时，可以选择要被执行的各种功能。

在独立于移动终端100的控制器180操作HMD 200的控制器280的情况下，与被施加到移动终端100的触摸屏151的触摸输入相对应的输入信号可以通过接口160、260被发送到HMD 200。在这样的情况下，已经接收到输入信号的HMD 200的控制器280可以处理输入信号，并且可以将相对应的屏幕变化输出到显示单元251。

当HMD 200和移动终端100被相互连接时，移动终端100的控制器180(或者HMD 200的控制器280)可以在HMD 200上显示包括第一内容的虚拟现实屏幕(S10)。虚拟现实屏幕意指被形成在现实空间中的3D图像。更加具体地，虚拟现实屏幕可以意指基于已经佩戴HMD200的用户在所有方向(例如，360°)中形成的3D图像。可替选地，虚拟现实屏幕可以意指通过现实空间呈现的立体空间图像(立体图像或者3D图像)，使得已经佩戴HMD 200的用户可以识别他或者她被定位在特定空间(或者虚拟空间)中。

第一内容可以包括能够从移动终端100或者HMD 200输出的所有类型的屏幕信息。

例如，第一内容可以是虚拟现实屏幕、特定应用的执行屏幕、运动图像(视频)、静止图像等等的部分。可替选地，第一屏幕可以是作为默认被输出到HMD 200的显示单元241的屏幕信息，例如，初始屏幕、主屏幕、锁定屏幕、或者随着HMD 200被拆卸或者关闭当终止操作时输出的屏幕信息。

在第一内容已经被显示在HMD 200的显示单元251的状态下，经由HMD 200的传感器(例如，感测单元240、陀螺仪传感器、加速度传感器等等)，移动终端100的控制器180(HMD200的控制器280)可以通过利用传感器跟踪用户的头部移动或者用户的视线检测预设姿势输入(S20)。

当HMD 200的佩戴状态被检测时用于跟踪用户的头部移动或者用户的视线的传感器可以被自动地激活。

如果在预先确定的时间内还没有感测到用户的头部移动，或者如果感测到HMD200的被拆卸的状态，则已激活的传感器可以被转换成用于电池的节省的停用状态。

用户的头部移动包括移动、旋转或者其组合。移动终端100的控制器180(或者HMD200的控制器280)可以基于用户的头的移动程度、移动方向、旋转角、移动模式等等检测各种头部移动。

用户的视线包括在已经佩戴HMD 200的用户的头部的固定状态下的用户的瞳孔的移动，例如，视线的固定/移动、眼睛移动(瞳孔的眨眼)等等。移动终端100的控制器180(或者HMD 200的控制器280)可以在预先确定的时间内提取与用户的瞳孔的固定位置相对应的相对坐标(第一点)，并且可以基于该相对坐标提取与用户的瞳孔的移动位置相对应的相对坐标(第二点)。然后，移动终端100的控制器180(或者HMD 200的控制器280)可以确定是否在第一和第二点之间的连接的形状对应于预注册的姿势输入。在这样的情况下，用户可以执行在显示单元251的任何点处输入的预注册的姿势输入。

例如，基于最初感测到的其间移动，移动终端100的控制器180(或者HMD 200的控制器280)可以仅跟踪用户的头部移动和用户的视线中的一个。作为另一示例，在通过HMD200的传感器能够跟踪用户的头部移动或者用户的视线的情况下，移动终端100的控制器180(或者HMD 200的控制器280)可以使用传感器跟踪用户的头部移动或者用户的视线，并且可以确定是否用户的头部移动或者用户的视线中的一个满足预设姿势输入。

例如，HMD 200可以使用被设置在第一相机201中的相机捕获已经佩戴HMD 200的用户的眼睛，并且可以将捕获到的图像发送到移动终端100的控制器180(或者HMD 200的控制器280)。然后，移动终端100的控制器180(或者HMD 200的控制器280)可以使用图像分析算法等等分析捕获到的图像，并且可以确定是否分析的捕获到的图像对应于预设姿势输入。

预设姿势输入是通过已经佩戴HMD 200的用户预注册的特定图案的头部移动或者瞳孔移动，并且被用于释放特定内容的锁定状态。

例如，如果已经佩戴HMD 200的用户的头部移动或者瞳孔移动形成诸如移动或者旋转的特定形状或者特定图案，则移动终端100的控制器180(或者HMD 200的控制器280)可以通过将检测到的图案与预注册的图案进行比较确定是否预设姿势已经被输入。

为了确定是否已经佩戴HMD 200的用户的头部移动或者瞳孔移动形成诸如移动或者旋转的特定形状或者特定图案，控制器280可以识别开始点的相对坐标，并且然后可以确定是否基于识别的相对坐标的特定图案匹配预注册的图案。即，仅当基于相对坐标形成图案，控制器180可以识别预设姿势输入，不论在显示单元251上用于输入图案(特定形状、移动、旋转等等)的用户的头部移动或者用户的瞳孔移动开始的开始点的位置怎样。为了区分由于HMD 200的佩戴状态用户的自然头部或者瞳孔移动与有意的姿势输入，可以要求用于触发跟踪功能的用户的附加的输入。例如，如果基于预先定义的初始运动或者通过HMD 200的用户输入单元223、移动终端100的触摸屏151等等检测输入信号，则控制器可以将检测到的输入信号视为触发器信号。并且控制器可以开始跟踪用户的头部或者瞳孔移动，用于释放锁定的内容。

在这样的情况下，指示用于输入图案的用户的头部移动或者用户的视线对应于特定形状、移动、旋转等等的指示可以被实时显示在第一内容上。被显示在第一内容上的指示可以具有预先确定的透明度。

当用于触发跟踪功能的用户的附加的输入被保持时，可以施加有意的姿势输入。当用于触发跟踪功能的用户的附加的输入被保持时，在HMD 200的显示单元251上的第一内容的显示状态可以被固定。例如，如果第一内容是视频，则视频的播放可以临时暂停，同时用于触发跟踪功能的用户的附加的输入被保持。

如果检测到预设姿势输入作为跟踪已经佩戴HMD 200的用户的头部或者瞳孔移动的结果，则移动终端100的控制器180(或者HMD200的控制器280)可以解锁第二内容以在HMD200的显示单元251上显示被解锁的第二内容，同时HMD 200的配对状态被连续地保持(S30)。

在这样的情况下，被输出到HMD 200的显示单元251的第一内容的显示状态可以被部分地或者整体地改变。更加具体地，第一内容可以被部分地隐藏或者可以在大小上减少，或者第一内容的输出区域的部分可以被移动或者在大小上减少。此外，第一内容的输出可以被转换成停用状态，或者第一内容的播放可以被停止。

通过被安装在移动终端100的HMD 200处的设置应用，或者通过设置特定应用的菜单，第二内容可以被预设为处于锁定状态。将会参考图6A和图6B更加详细地解释锁定特定内容的详细示例。

在实施例中，第二内容的范围可以被限于与第一内容有关的值。例如，如果第一内容对应于第一应用的执行，则第二内容可以被限于第一应用的锁定内容。

当锁定第二内容被输出时，指示内容的释放状态的通知信息可以通过HMD 200的显示单元251或者音频输出单元252被输出。

当锁定的第二内容被输出时，指示第二内容处于锁定状态的对象(例如，锁定图像)可以被显示使得可以容易地区分第二内容与第一内容。

在第二内容的锁定状态的释放之后，可以执行通过HMD 200、移动终端100或者其组合可执行的各种功能。然而，如果第二内容的释放状态被转换成锁定状态，则功能的执行的结果可以被自动地删除，或者可以变成预设替换图像。

例如，如果在SNS应用的执行状态下锁定图像(第二内容)被发送到另一人的移动终端并且然后被转换成锁定状态，则不是第二内容的替换图像可以被输出到聊天屏幕，或者没有图像可以被输出到聊天屏幕。

因为用户通常将私人内容设置为锁定状态，所以当用户脱下HMD200时输出到显示单元251的第二内容被优选地重置为锁定状态。

在一些情况下，为了用户的方便，要求当重新佩戴HMD 200时在没有输入预注册的图案的情况下允许用户直观地查看第二内容的方法、或者在没有脱下HMD 200的情况下重新锁定第二模式的方法。

例如，在锁定的第二内容已经被显示在HMD 200的显示单元251上的状态下，移动终端100的控制器180(或者HMD 200的控制器280)可以感测HMD 200与用户的头部的拆卸状态。

HMD 200与用户的头部的拆卸状态可以包括已经佩戴HMD 200的用户执行拆卸的运动的情况、从用户的头部完全拆卸HMD 200的情况、以及即使从用户的头部已经拆卸HMD200但与用户的身体没有完全分离的情况。移动终端100的控制器180(或者HMD 200的控制器280)可以相互区分情况，并且可以执行相对应的控制。

可以以与感测HMD 200的佩戴状态的前述方法相似的方式执行感测HMD 200的拆卸状态的方法。因此，将会省略其详细解释。

例如，在感测被视为HMD 200的拆卸状态的用户的运动(例如，使用一只手或者两只手上下移动HMD 200的框架单元的运动)之后，移动终端100的控制器180(或者HMD 200的控制器280)可以临时停止第二内容的输出。然后，移动终端100的控制器180(或者HMD 200的控制器280)可以在显示单元251上显示用于控制HMD 200的拆卸状态的指南信息(例如，“你想要休息一会儿”、“当你脱下HMD时将会自动地锁定内容”等等)。

移动终端100的控制器180(或者HMD 200的控制器280)可以基于对指南信息的响应确定是否已经拆卸HMD 200。

移动终端100的控制器180(或者HMD 200的控制器280)可以基于HMD 200的拆卸状态不同地显示第二内容。

根据是否与用户的头部分离的HMD 200已经接触地表面，或者基于HMD 200到地表面的安装状态，可以区分HMD 200的拆卸状态。

例如，在被拆卸的HMD 200被固定到用户的手、脖子、前额等等而没有接触地表面的情况下，如果用户在特定的姿态将HMD 200放在地表面上，则第二内容可以不被转换成锁定状态。另一方面，如果HMD200在通过被设置在HMD 200中的陀螺仪传感器可识别的方向中接触地表面，则第二内容可以被转换成锁定状态。

在用户在参考时间内重新佩戴HMD 200的情况下，如果第二内容没有被转换成锁定状态，则当HMD 200被拆卸时被输出的第二内容被连续地输出。另一方面，如果第二内容被转换成锁定状态，则第二内容没有被显示或者替换图像被显示，即使用户在参考时间内重新佩戴HMD 200。

如果在用户已经脱下HMD 200之后经过了预先确定的时间，则移动终端100的控制器180(或者HMD 200的控制器280)可以确定用户不再希望继续观看锁定的内容，并且可以将第二内容自动地转换成锁定状态。

在这样的情况下，基于第二内容的播放程度或者基于输出时间，移动终端100的控制器180(或者HMD 200的控制器280)可以不同地设置用于将第二屏幕转换成锁定状态的参考时间。

例如，在第二内容是视频的情况下，如果在视频的播放之后在第一时间点拆卸HMD，基于第一参考时间(例如，1分钟)可以确定是否锁定第二内容。另一方面，如果在第一时间点之后的第二时间点(例如，2～3分钟)检测到HMD 200，则可以基于第二参考时间确定是否锁定第二内容。

在感测到有意输入(例如，到HMD 200的用户输入单元223或者移动终端100的触摸屏151的输入，或者预先定义的锁定运动)之后，显示的第二内容可以被转换成锁定状态，不论HMD 200的拆卸或者佩戴状态如何。

如前述，在本发明中，在通过跟踪已经佩戴HMD 200的用户的头部或者瞳孔移动感测预设姿势输入之后，隐藏的秘密内容可以被显示在HMD 200的显示单元251上。然后，如果用户脱下HMD 200，则根据基于HMD 200的拆卸状态或者HMD 200的重新佩戴时间确定的用户的意图，秘密内容可以被连续地显示或者可以被转换成用于隐藏的锁定状态。

图5是图示与图4的流程图有关的根据本发明的用于在HMD上显示锁定内容(例如，锁定图像)的方法的概念视图。

移动终端100可以执行与显示虚拟现实屏幕的HMD 200的有线/无线通信。更加具体地，移动终端100可以通过接口单元160、260以有线方式被连接到HMD 200，或者可以通过无线通信单元110(紫蜂、WiFi、蓝牙等等)以无线方式被连接到HMD 200。

如在图5中所示，多个图像501可以被输出到虚拟现实屏幕，该虚拟现实屏幕被输出到HMD 200的显示单元251，作为前述的第一内容。

在此状态下，尽管未输出，在已经输入用于释放锁定图像(即，前述的第二内容)的触发器信号的条件下，移动终端100的控制器180(或者HMD 200的控制器280)可以跟踪用户的头部或者瞳孔移动以识别在多个图像501上输入的特定图案。

当触发器信号被输入时，多个图像501可以被固定，而不与用户的头部或者瞳孔移动一起滚动或者屏幕转换。

当触发器信号被输入时，HMD 200可以激活用于跟踪用户的头部或者瞳孔移动的其传感器，并且可以进入用于释放锁定内容(解锁内容)的输入模式，同时第一内容的显示状态被保持。

在输入模式下，被输出到HMD 200的显示单元251的屏幕信息501可以在没有被改变的情况下被固定。

控制器180可以将HMD 200的显示单元251的至少部分转换成停用状态。

控制器180可以停止第一内容501的播放，并且可以将用于引导姿势输入以解锁内容的指南提示输出到屏幕。输入模式与用于释放HMD 200的锁定状态的操作区分。即，如果在HMD 200的锁定状态下输入前述的触发器信号，则用于释放锁定内容的姿势输入可以被感测或者附加的选择窗口可以被弹出，同时HMD 200的锁定状态被保持。结果，用户可以选择是否释放HMD 200的锁定状态或者内容的锁定状态。

为了防止由于用户的无意运动导致内容的锁定状态的释放，在锁定的内容被显示之前选择窗口可以被再一次输出多次，用于用户确认。

作为另一示例，在输入模式下，被输出到HMD 200的显示单元251的第一内容的至少部分可以与用户的头部或者瞳孔移动一起移动。在这样的情况下，移动终端100的控制器180(或者HMD 200的控制器280)可以进入输入模式，并且然后可以通过检测与用户的头部或者瞳孔移动相对应的相对坐标检测用户的运动。并且移动终端100的控制器180(或者HMD200的控制器280)可以确定是否检测到的用户的运动是预设姿势输入。如前述的，与预设姿势输入相对应的用户的运动可以从显示单元251上的任何点上开始。

如在图5中所示，在输入模式下，可以在多个输出图像501上绘制与跟踪过程相对应的线，使得用户可以观看他的或者她的头部或者瞳孔移动。

在输入模式下，当被显示在HMD 200的显示单元251上的标记沿着用户的头部或者瞳孔移动而移动时可以绘制线。如果用户想要删除绘制的线，则与前述的触发器信号相对应的输入(即，与用于进入输入模式的触发器信号相对应的输入)可以被执行。

如果绘制的线不匹配预设姿势输入，则用于引导重新输入的指南信息可以被输出。如果匹配操作失败超过预先确定的次数，则另一类型的输入(密码输入)(例如，语音输入)可以被要求，或者第二内容的锁定状态可以被保持。

如果作为识别检测运动的结果在图5中绘制的特定图案(A)被确定为预设姿势输入，则指示第二内容的解锁状态的通知图标510可以被输出。然后，其它的隐藏的图像(第二内容)521、522、523可以被显示在HMD 200的显示单元251上。

在这样的情况下，如果隐藏的第二内容与第一内容有关，则基于隐藏的第二内容，移动终端100的控制器180(或者HMD 200的控制器280)可以重新配置在预设姿势输入被施加之前已经输出的虚拟现实屏幕。

例如，如在图5中所示，当隐藏的第二内容被显示在HMD 200的显示单元251上时，第一内容的至少部分可能消失。可替选地，第一内容的至少部分可以在大小或者颜色上改变，或者可以被转换成停用状态。

作为另一示例，虽然未示出，解锁的第二内容可以被显示在显示单元251上与第一内容不同的区域上。在这样的情况下，由于在显示单元251的一个区域上执行的功能(例如，图像选择、滚动、编辑、感测等等)在没有影响另一区域的情况下被执行，所以可以提供多环境。

作为另一示例，解锁的第二内容可以以与第一内容的至少部分重叠的方式显示。在这样的情况下，预先确定的透明程度可以被应用于第二内容，并且更高的透明程度可以被应用于较低层上显示的第一内容。

移动终端100的控制器180(或者HMD 200的控制器280)可以在第二内容上显示指示第二内容的锁定状态的对象。图5图示锁定图像。然而，本发明不限于此。例如，对象可以包括被区分于第一内容的其它图像，例如，颜色、大小、边缘等等。

图5图示锁定图像覆盖内容。然而，这样的图示仅是用于方便。即，锁定图像可以覆盖内容的部分，并且可以具有预先确定的透明程度。可替选地，锁定图像可以被显示在内容输出区域的边缘处，或者可以被显示靠近边缘。如果特定图像523被选择或者如果经过了预先确定的时间，则显示的锁定图像可以消失。

如果锁定的第二内容被释放，则与第二内容有关的各种功能可以被激活。例如，例如第二内容对应于特定的应用，则推动报警功能、自动更新功能等等可以被自动地激活。

锁定的第二内容可以被限制为仅当HMD 200的佩戴状态被保持时被显示。更加具体地，如前述的，如果在用户已经佩戴HMD 200之后经过了预先确定的时间，如果基于HMD200的拆卸状态确定用户不想要临时拆卸HMD 200，则第二内容可以被重新状态成锁定状态。可替选地，如果预设输入被检测同时用户佩戴HMD 200，则通过被隐藏或者被替换成其它的内容第二内容可以被转换成锁定状态。

例如，在HMD 200已经被拆卸之后随着经过了预先确定的时间第二内容被转换成锁定状态的情况下，第二内容可以消失或者可以被转换成置换图像。在检测到与预设姿势输入相对应的用户的头部或者瞳孔移动之后，锁定的第二内容再次出现。在这样的情况下，为了连续的观看，当HMD 200被拆卸时停止的屏幕可以被输出，或者用于移动到连续观看的时间点的图标可以被一起输出。

根据被输出到HMD 200的显示单元251的第一内容的类型，要被解锁或者重新锁定的内容的类型或者范围可以变成不同。

例如，如果被输出到HMD 200的显示单元251的第一内容是主屏幕或者锁定屏幕，则第二内容可以是锁定应用的图标。如果在如在图5中所示的图库应用的执行状态下被输出到HMD 200的显示单元251的第一内容是多个图像(或者多个缩略图图像)，则第二内容可以是在图库应用中锁定的特定图像。

在以多个组或者级别执行将内容设置为锁定状态的情况下，可以注册与各个组或者各个级别相对应的多个预设姿势输入，或者仅属于与特定姿势输入的特定组或者特定级别的内容可以被解锁或者锁定。

在下文中，将会参考图6A和图6B解释锁定内容的方法。

图6A图示基于已经佩戴HMD 200的用户的瞳孔移动注册用于设置锁定状态的图案的示例，并且图6B图示基于已经佩戴HMD 200的用户的头部移动注册用于设置锁定状态的图案的示例。

已经佩戴HMD 200的用户可以通过设置应用来预注册用于释放锁定的内容的姿势输入。如果通过姿势从设置应用选择内容锁定菜单，则用户可以选择通过瞳孔移动的姿势注册(参考图6A)，或者通过头部移动的姿势注册(参考图6B)。

例如，如果用户选择通过瞳孔移动的姿势注册，则具有网格图案(例如，3*4网格区域)的输入屏幕610可以被输出，如在图6A中所示。在这样的情况下，沿着用户的视线移动的标记可以被显示在输入屏幕610上。虽然未被示出，但是用于指定用于姿势注册的用户的瞳孔移动的信息(例如，“请绘制图案同时凝视四边形2秒钟”)可以被显示在HMD 200的显示单元251上。

接下来，如果随着在预先确定的时间(例如，2秒钟)内已经佩戴HMD 200的用户将他的或者她的视线固定到第一区域611，标记被固定到输入屏幕610的第一区域611，则第一区域611的中心点可以被定义为开始点。结果，第一区域611被选择性地处理(例如，被遮蔽)。接下来，如果用户的视线从第一区域611移动到第二区域612并且然后在预先确定的时间(例如，2秒钟)内用户的视线移动到第二区域612，则标记沿着用户的视线移动到第二区域612。结果，从开始点连接到第二区域612的中心点的线可以被形成。如果以这样的方式顺序地选择第三区域613和第四区域614，则姿势注册被完成，并且被注册的姿势被显示在显示单元251上，用于通过用户的确认。并且指示用于将内容设置为锁定状态的图案已经被注册的图标620被弹出。

作为另一示例，如果用户选择通过头部移动的姿势注册，则包括多个方向键图像的输入屏幕603可以被输出到HMD 200的显示单元251，如在图6B中所示。尽管未示出，但是用于引导用于姿势注册的用户的头部移动的信息(例如，“至少上下左右移动你的头部四次”)可以被输出到HMD 200的显示单元251上。

当已经佩戴HMD 200的用户上下左右移动头部时，箭头631、632、633、634被顺序地显示在方向键图像上，如在图6B中所示。然后，方向键图像以对应于用户的头部移动的顺序被显示在显示单元251上，使得用户可以观看被注册的图案。可替选地，指示用于将内容设置为锁定状态的图案已经被注册的图标620被弹出。

图6A图示通过用户的瞳孔移动的姿势注册。然而，基于眼睛眨眼的次数、眼睛眨眼的间隔、以及通过组合次数和视线移动的间隔获得的各种瞳孔移动可以以更加详细的方式执行姿势注册。

图6B图示通过在四个方向(上、下、右和左方向)中的用户的头部移动的姿势注册。然而，比四个方向(例如，8个方向)更大数目的方向可以被设置，或者包括头部的旋转或者旋转方向和朝着特定方向的头部的移动程度的各种头部移动可以被实现。在图6B中，方向键图像对应于头部的移动程度被显示。

如果以更加详细地方式姿势注册是可执行的，则基于注册的姿势的复杂性控制器180可以不同地设置要被设置到锁定状态的内容的级别。例如，不同的姿势可以相对于各个内容被注册。在特定内容的情况下，可以注册多个姿势。在这样的情况下，仅当第一姿势和第二姿势被顺序地输入时可以输出特定内容。如果仅第一姿势被输入，则除了特定内容之外的其它内容可以被输出。

在用于将内容设置为锁定状态的姿势的注册之后，当内容被输出时通过输入可以单独地执行锁定设置(例如，当内容被输出时通过背景菜单可以选择锁定设置)。相对于应用可以执行将内容设置为锁定状态，或者可以相对于特定应用的特定对象、特定项目以及特定组执行。

图7是图示根据本发明的实施例的用于将被显示在HMD上的内容转换成锁定状态的方法的概念视图。

如在图7中所示，如果在特定输入(例如，推动输入)已经被施加到HMD 200的用户输入单元223的状态下与预设姿势输入相对应的图案被应用于特定图像701，同时用户通过HMD 200的显示单元251观看特定图像701(“第一内容”)，则锁定的内容(“第二内容”)可以以预览的形式被输出到选择窗口710。

在这样的情况下，当选择窗口710被输出时，被输出到显示单元251的特定图像701的播放可以被停止，或者特定图像701可以被转换成停用状态。在预先确定的时间(例如，2秒钟)内，用户可以通过将他的或者她的眼睛固定到被输出到选择窗口710的图像中的一个观看锁定的特定内容。

在此状态下，如果HMD 200的拆卸被检测，则移动终端100的控制器180(或者HMD200的控制器280)可以基于HMD 200的拆卸状态不同地显示锁定的第二内容，如前述的。

如前述的，HMD 200的拆卸状态可以包括已经佩戴HMD 200的用户执行用于拆卸的运动的情况、从用户的头部完全地拆卸HMD 200的情况、以及即使已经从用户的头部拆卸HMD 200没有完全地分离用户的身体的情况。通过HMD 200的感测单元(例如，相机)，或者通过移动终端100的图像分析等等可以感测HMD 200的拆卸状态。

如果HMD 200的拆卸状态被检测，则移动终端100的控制器180(或者HMD 200的控制器280)可以确定是否HDM 200已经接触地表面，并且可以基于HMD 200到地表面的接触状态确定是否用户想要临时地拆卸HMD 200。

更加具体地，在被拆卸的HMD 200被固定到用户的身体而没有接触地表面的情况下，在HMD 200以特定的姿态已经接触地表面的情况下，以及通过第一输入(“第一状态”)拆卸HMD 200的情况下，如果在预先确定的时间(例如，5分钟或者等等)内检测到拆卸HMD 200的重新佩戴状态(重新安装状态)，则可以执行第二内容的连续的观看。即，当HMD 200被拆卸时被输出的第二内容的屏幕被连续地输出到显示单元251。

另一方面，在被拆卸的HMD 200已经接触地表面的情况下，或者在通过第二输入(“第二状态”)拆卸HMD 200的情况下，即使在预先确定的时间(例如，5分钟或者等等)内检测到HMD 200的重新佩戴状态(或者重新安装的状态)，第二内容的锁定屏幕被输出到显示单元251。

在这样的情况下，如在图7中所示，当HMD 200被拆卸时被输出到显示单元251的第一内容的屏幕701(特定图像)，或者在第二内容的锁定状态被释放之前被输出的第一内容的屏幕701，可以被连续地输出到显示单元251。

不同于图7，在从选择窗口710已经选择第二内容中的一个的状态下拆卸HMD 200的情况下，如果用户重新佩戴HMD 200，则匹配所选择的内容的任何图像，不是第一内容的屏幕，被显示。例如，如果从选择窗口710选择的内容是视频，则预存储的替换视频中的一个可以被输出。并且如果从选择窗口710中选择的内容是网页，则预存储的网页文档或者预存储的文本文档可以被输出。

在下文中，将会参考图8、图9A、图9B以及图10解释用于基于HMD的被拆卸的状态不同地显示锁定内容的方法。

参考图8，移动终端100的控制器180(或者HMD 200的控制器280)可以感测HMD 200与用户的头部的拆卸状态(S110)。

然后，基于HMD 200的拆卸状态，可以确定是否转换被显示在HMD 200的显示单元251上的解锁的第二内容(S120)。用于该确定的数据可以被存储在HMD 200或者移动终端100中。

然后，如果在预先确定的时间内感测HMD 200的佩戴状态(S130)，则基于在S120中的确定可以不同地显示第二内容(S140)。

更加具体地，如果确定用户已经临时拆卸HMD 200(“第一状态”)，则第二内容可以被保持。第二内容可以被输出使得用户可以从当HMD200被拆卸时被输出到显示单元251的屏幕连续地观看第二内容。

另一方面，如果确定用户不想临时拆卸HMD 200或者用户想要锁定第二内容(“第二状态”)，则第二内容可以被转换成锁定状态。在此状态下，如果HMD 200被重新佩戴在用户的头部，则要被输出的屏幕信息可以根据当HMD 200被拆卸时被输出到显示单元251的屏幕的属性变成不同。

图9A和图10图示在HMD 200的拆卸状态是前述的第一状态时在显示单元251上的屏幕变化。

例如，如在图9A中所示，如果从用户的头部拆卸的HMD 200以通过HMD 200的陀螺仪传感器没有感测HMD 200的拆卸状态的特定姿态(例如，朝着前侧被拆卸的姿态)被放置在地表面上，则可以确定用户已经临时拆卸HMD 200(或者可以确定HMD 200没有被放置在地表面上)。在此，朝着前侧被拆卸的姿态意指具有与在用户头部的佩戴状态相同的状态的被拆卸的HMD 200在地表面上的姿态。

因此，在预先确定的时间内第二内容不可以被转换成锁定状态。

作为另一示例，如在图10中所示，如果从用户的头部拆卸的HMD200被固定到用户的身体的另一部分(例如，脖子、前额、手等等)，则在显示单元251上的解锁的第二内容的显示状态可以被临时地停止。然后，如果HMD 200在预先确定的时间内被重新佩戴，则图像1010的连续观看可以被执行。例如，如果在预先确定的时间内用户凝视被显示在图像1010上的播放图标1012，则图像1010可以被播放。

图9B图示当HMD 200的拆卸状态是前述的第二状态时在显示单元251上的屏幕变化。

更加具体地，根据在HMD 200被拆卸时的时间点的第二内容的输出状态，与锁定状态相对应的屏幕变化被不同地处理。

例如，如在图9B中所示，如果当HMD 200被拆卸时预设输入(例如，单触摸输入或者单推动输入)被施加到移动终端100的触摸屏151(或者HMD 200的用户输入单元223)，则第二内容被转换成锁定状态。并且在HMD 200被拆卸时的时间点匹配第二内容的输出状态的任意图像被存储。任意图像意指在类型、属性等等上与第二内容相同或者与第二内容相似的替换图像。

更加具体地，如果第二内容是视频并且如果在单触摸输入已经被施加到移动终端100的触摸屏151同时第二内容被播放的状态下HMD200被拆卸，则第二内容被转换成锁定状态。然后，如果HMD被重新佩戴，则还没有被设置成锁定状态的特定视频屏幕911被输出到显示单元251，如在图9B中所示。

在这样的情况下，如果检测到预设姿势输入，则可以从第二内容的播放被停止的时间点连续地观看第二内容。为此，对应于HMD 200被拆卸的时间点的第二内容的播放程度可以被记录在第二内容中。

在第二内容与第一内容一起已经被输出到虚拟现实屏幕的情况下，如果HMD 200被重新佩戴，则仅第一内容可以被输出到虚拟现实屏幕。

如前述的，本发明可以具有下述优点。

首先，当从用户的头部拆卸HMD 200时，为了用户的隐私的保护，锁定释放的内容可以被转换成锁定状态。

此外，在正在观看锁定内容的用户临时缺席或者用户已经临时拆卸HMD 200的情况下，如果用户重新佩戴HMD 200，则锁定的内容可以被连续地观看而无需用户的运动。这可以增强用户的便利。

在本说明书中，解释了在移动终端100的控制器180的控制下控制HMD 200。然而，本发明不限于此。即，在控制器280的控制下可以控制HMD 200。例如，控制器280可以执行用于当预设输入信号被接收时释放锁定内容的操作模式。然后，通过使用传感器跟踪已经佩戴HMD 200的用户的头部移动或者瞳孔移动，控制器280可以确定是否预设输入信号是预设姿势输入。此外，控制器280可以将多个预先锁定的内容输出到HMD 200的显示单元251。控制器280可以基于是否HMD 200已经被拆卸或者基于HMD的拆卸状态确定是否用户想要临时拆卸HMD 200。并且基于确定，控制器280可以将解锁的内容转换成锁定状态，或者可以控制要被输出到HMD 200的屏幕使得当用户重新佩戴HMD 200时用户可以连续地观看屏幕。

参考图4至图10解释的描述可以以与前述的方式相同的方式或者相似的方式可应用。

使用具有在其上存储的指令的机器可读介质可以实现各种实施例，该指令由处理器执行以进行在此陈述的各种方法。可能的机器可读介质的示例包括HDD(硬盘驱动器)、SSD(固态盘)、SDD(硅盘驱动器)、ROM、RAM、CD-ROM、磁带、软盘、以及光数据存储设备、在此陈述的其它类型的存储介质，和其组合。如有必要，以载波(例如，互联网上的传输)的形式可以实现机器可读介质。处理器可以包括移动终端的控制器180。

由于在没有脱离本特征的特性的情况下可以以多种形式实现本特征，所以也应理解的是，上述实施例不受前面描述的任何细节的限制，除非另有规定，否则应在所附的权利要求中限定的范围内被广泛地解释，并且因此旨在由所附的权利要求涵盖落入权利要求的范围和界限或者该范围和界限的等同物内的所有变化和变型。

Claims (13)

1.一种移动终端，包括：

触摸屏；

通信单元，所述通信单元能够与被配置成显示虚拟现实屏幕的头戴式显示器通信；以及

控制器，所述控制器能够：

控制所述头戴式显示器以显示包括第一内容的所述虚拟现实屏幕；

经由所述头戴式显示器的传感器检测与用户的头部或者瞳孔移动相对应的预设姿势；

在所述头戴式显示器佩戴在所述用户的头部的同时，控制所述头戴式显示器以解锁已经被隐藏的第二内容，并且在所述虚拟现实屏幕上显示所述第二内容，

从用户的头部感测所述头戴式显示器的拆卸状态，

当在应用于移动终端的触摸屏的触摸输入期间感测到所述拆卸状态时，将所述第二内容转换为锁定状态；

记录所述第二内容的播放程度，所述播放程度对应于所述头戴式显示器被拆卸以从停止播放所述第二内容的时间点连续观看所述第二内容的时间点；

控制头戴式显示器以显示与第二内容类型相似的替换内容。

2.根据权利要求1所述的移动终端，其中，所述控制器进一步能够：

当所述第二内容与所述第一内容相关时，基于所述第二内容重新配置在所述预设姿势输入被应用之前已经输出的所述虚拟现实屏幕。

3.根据权利要求2所述的移动终端，其中，所述控制器进一步能够：当所述第二内容被显示时控制所述第一内容的至少部分消失或者控制相对应的显示变化以出现。

4.根据权利要求2所述的移动终端，其中，所述第二内容被显示在与所述第一内容的区域相区分的区域上。

5.根据权利要求1所述的移动终端，其中，所述控制器进一步能够：在所述第一内容被显示的同时，当第二输入被检测到时，使所述移动终端进入用于释放锁定内容的操作模式，

控制所述头戴式显示器以显示：

用于随着所述移动终端进入所述操作模式而指导用于释放所述虚拟现实屏幕上的锁定内容的姿势输入的信息；和

在所述虚拟现实屏幕上的与所述用户的头部或者瞳孔移动相对应的线。

6.根据权利要求1所述的移动终端，其中，所述第二内容与所述第一内容有关并且根据所述第一内容的类型确定。

7.根据权利要求1所述的移动终端，其中，所述控制器进一步能够控制所述头戴式显示器以显示：

指示当检测到所述预设姿势输入时所述第二内容的释放状态的通知图标；和

在所述通知图标被显示之后的所述第二内容。

8.根据权利要求1所述的移动终端，其中，所述控制器进一步能够基于所述头戴式显示器的拆卸状态控制所述头戴式显示器以不同地显示所述第二内容。

9.根据权利要求8所述的移动终端，其中，所述控制器进一步能够：

当所述头戴式显示器在阈值时间量内被重新佩戴并且所述拆卸状态满足第一条件时，控制所述头戴式显示器以显示所述第二内容；并且

当所述拆卸状态满足第二条件时将所述第二内容变成锁定状态，不论是否所述头戴式显示器在所述阈值时间量内被重新佩戴，

其中：

所述第一条件对应于是否所述头戴式显示器已经接触地表面；并且

所述第二条件对应于在所述地表面上所述头戴式显示器的特定定位。

10.根据权利要求1所述的移动终端，其中，根据所述头戴式显示器的拆卸，当从所述移动终端断开所述头戴式显示器时，所述第二内容从所述虚拟现实屏幕消失。

11.根据权利要求1所述的移动终端，其中，根据所述头戴式显示器的拆卸，当在所述头戴式显示器被断开之后经过阈值长度时间时，所述控制器进一步能够将所述第二内容变成锁定状态。

12.一种控制移动终端的方法，包括：

在与所述移动终端通信的头戴式显示器上显示虚拟现实屏幕，所述虚拟现实屏幕包括第一内容；

经由所述移动终端的传感器跟踪用户的头部或者瞳孔移动；

在所述头戴式显示器佩戴在所述用户的头部的同时，控制所述头戴式显示器以解锁已经被隐藏的第二内容并且在所述虚拟现实屏幕上显示所述第二内容；

当在应用于移动终端的触摸屏的触摸输入期间感测到拆卸状态时，将所述第二内容转换为锁定状态；

记录所述第二内容的播放程度，所述播放程度对应于所述头戴式显示器被拆卸以从停止播放第二内容的时间点连续观看第二内容的时间点；

控制所述头戴式显示器以显示与第二内容类型相似的替换内容。

13.根据权利要求12所述的方法，进一步包括：

在所述第二内容被显示的同时，检测所述头戴式显示器被拆卸；以及

基于所述头戴式显示器的拆卸状态不同地显示所述第二内容。

Images