CN104620593B - 显示装置及用于控制该显示装置的方法 - Google Patents

显示装置及用于控制该显示装置的方法 Download PDF

Info

Publication number
CN104620593B
CN104620593B CN201380047392.0A CN201380047392A CN104620593B CN 104620593 B CN104620593 B CN 104620593B CN 201380047392 A CN201380047392 A CN 201380047392A CN 104620593 B CN104620593 B CN 104620593B
Authority
CN
China
Prior art keywords
voice
display device
user
command
visual angle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201380047392.0A
Other languages
English (en)
Other versions
CN104620593A (zh
Inventor
韩尚珍
金旻亨
金正根
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020120101158A external-priority patent/KR102066564B1/ko
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN104620593A publication Critical patent/CN104620593A/zh
Application granted granted Critical
Publication of CN104620593B publication Critical patent/CN104620593B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42203—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H04N21/4854—End-user interface for client configuration for modifying image parameters, e.g. image brightness, contrast
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/038—Indexing scheme relating to G06F3/038
    • G06F2203/0381—Multimodal input, i.e. interface arrangements enabling the user to issue commands by simultaneous use of input devices of different nature, e.g. voice plus gesture on digitizer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04805—Virtual magnifying lens, i.e. window or frame movable on top of displayed information to enlarge it for better reading or selection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

提供一种显示装置及设置其视角的方法。该方法包括响应于预定事件的发生，在显示屏幕的区域上显示视角指导的用户接口，其指导对被连接到该显示装置的相机的视角的设置；并且使用视角指导UI来设置该相机的视角。

Description

显示装置及用于控制该显示装置的方法
技术领域
与示例性实施例一致的方法和装置涉及显示装置及用于控制该显示装置的方法，并且更具体地，涉及根据用户语音或用户动作来控制的显示装置及用于控制该显示装置的方法。
背景技术
最近的技术发展增加了各种类型的显示装置的供应。具体地，包括电视(TV)在内的各种类型的显示装置在消费者的家中被使用。这些显示装置的功能根据用户的要求已逐渐扩展。例如，TV能被连接到因特网以支持因特网服务。此外，用户通过该TV观看更多数目的数字广播频道。
因此，需要各种输入方法以用来高效地使用显示装置的各种功能。例如，使用遥控器的输入方法、使用鼠标的输入方法、使用触摸板的输入方法等可被应用于该显示装置。
然而，通过仅仅使用这样简单的方法难以高效地使用该显示装置的各种功能。例如，若仅通过遥控器来控制该显示装置的所有功能，则增加遥控器的按钮的数目是不可避免的。在这种情况下，对于一般用户，学习如何使用该遥控器是不容易的。此外，根据在屏幕上显示各种菜单来帮助用户搜索和选择相应的菜单的方法，则该用户必须检查复杂的菜单树从而选择期望的菜单，这对用户来说可能很困难和迷惑。
因此，为了提供更方便和直观地进行控制的显示装置，基于语音和动作(motion)识别的技术正在被开发。在这种使用语音或动作识别来控制显示装置的***中，需要用户接口(UI)来关于语音或动作识别指导用户。
然而，还没开发出用于使用语音或动作识别来控制显示装置的合乎需要的UI，因此当使用语音或动作识别来控制显示装置时用户经受不便。
发明内容
示例性实施例至少解决如上问题和/或缺点，以及其他以上未描述的缺点。此外，示例性实施例无需克服上述的缺点，并且示例性实施例未必克服上述的所有问题。
示例性实施例提供一种显示装置，其提供用于用户使用语音识别或动作识别来更方便地控制显示装置的各种UI，并提供该显示装置的控制方法。
解决问题的技术方案
根据示例性实施例的一方面，在此提供了一种用于控制显示装置的方法，该方法包括：显示第一语音指导信息以指导用户语音来控制该显示装置，输入用户命令以控制被连接到该显示装置的外部设备，以及响应于所输入的用户命令，改变所述第一语音指导信息并且显示第二语音指导信息以指导用户语音来控制该外部设备。
该方法可另外包括：搜索预先存储在该显示装置中的多个语音指导信息，以查找与该外部设备相对应的第二语音指导信息，并读取该第二语音指导信息。
若该显示装置是TV，则该第一语音指导信息可包括以下各项中的至少一者：关于电源控制的语音命令、关于执行外部设备的语音命令、关于频道设置的语音命令以及关于音量设置的语音命令；并且若该外部设备是DVD播放器和BD播放器之一，则该第二语音指导信息可包括以下各项中的至少一者：关于电源控制的语音命令、关于执行外部设备的语音命令、以及关于播放设置的语音命令。
该方法可另外包括：若该第一语音指导信息被显示，并且若包含在该第一语音指导信息中的用户语音命令被输入，则根据该用户语音命令来控制该显示装置，并且，若该第二语音指导信息被显示，并且若包含在该第二语音指导信息中的用户语音命令被输入，则生成与所输入的用户语音命令相对应的控制信号并发送所生成的控制信号到该外部设备。
该方法可另外包括：若该第二语音指导信息被显示，并且若与包含在该第二语音指导信息中的语音命令之一相对应的用户语音命令被输入，则生成与该输入的用户语音命令相对应的控制信号，并无线地发送所生成的控制信号到中继设备以发送到该外部设备。
所生成的控制信号可通过蓝牙通信被发送到该中继设备，并且该中继设备可将所发送的控制信号转换为IR信号并发送所转换的信号到该外部设备。
该第一和第二语音指导信息都可包括：指示该显示装置的操作模式是语音控制模式的图标。
该第一和第二语音指导信息可被显示在：其上显示有内容的屏幕的底部。
用户命令可以是通过语音输入单元输入以控制外部设备的用户语音命令。
根据示例性实施例的一方面，在此提供一种显示装置，其包括语音输入单元，其接收用户语音；显示器；和控制器，其在该显示器上显示第一语音指导信息以指导用户语音来控制该显示装置，并且若控制被连接到该显示装置的外部设备的用户命令被输入，则改变第一语音指导信息并显示第二语音指导信息以指导用户语音来控制该外部设备。
该显示装置可另外包括：存储单元，其存储多个语音指导信息，其中该控制器可搜索该存储单元中的多个存储的语音指导信息，以查找与该外部设备相对应的第二语音指导信息。
若该显示装置是电视(TV)，则该第一语音指导信息可包括以下各项中的至少一者：关于电源控制的语音命令、关于执行外部设备的语音命令、关于频道设置的语音命令以及关于音量设置的语音命令；并且若该外部设备是DVD播放器和蓝光(BD)播放器之一，则该第二语音指导信息可包括以下各项中的至少一者：关于电源控制的语音命令、关于执行外部设备的语音命令、以及关于播放设置的语音命令。
该显示装置可另外包括：外部端子输入单元，其执行到该外部设备的连接，其中，若该第一语音指导信息被显示，并且若包含在该第一语音指导信息中的用户语音被输入，则该控制器可根据该用户语音命令来控制该显示装置，并且，若该第二语音指导信息被显示，并且若包含在该第二语音指导信息中的用户语音命令被输入，则该控制器可生成与该输入的用户语音命令相对应的控制信号并发送所生成的控制信号到该外部设备。
该显示装置可另外包括：网络接口，其执行与中继设备的通信，该中继设备执行与外部设备的通信，其中，若该第二语音指导信息被显示，并且若与包含在该第二语音指导信息中的语音命令之一相对应的用户语音命令被输入，则该控制器可生成与该输入的用户语音命令相对应的控制信号，并无线地发送所生成的控制信号到中继设备以发送到该外部设备。
所生成的控制信号可通过蓝牙通信被发送到该中继设备，并且该中继设备可将所发送的控制信号转换为红外(IR)信号并发送所转换的信号到该外部设备。
该第一和第二语音指导信息都可包括：指示该显示装置的操作模式是语音控制模式的图标。
该第一和第二语音指导信息可被显示在：其上显示有内容的屏幕的底部。
用户命令可以是通过语音输入单元输入以控制外部设备的用户语音命令。
根据另一示例性实施例的一方面，在此提供一种用于控制显示装置的方法，该方法包括：显示第一动作指导信息以指导用户动作来控制该显示装置，输入用户命令以控制被连接到该显示装置的外部设备，以及响应于所输入的用户命令，改变该第一动作指导信息并显示第二动作指导信息以指导用户动作来控制该外部设备。
根据另一示例性实施例的一方面，在此提供一种用于显示装置，包括：语音动作单元，其接收用户动作，显示器，以及控制器，其在该显示器上显示第一动作指导信息以指导用户动作来控制该显示装置，并且若控制被连接到该显示装置的外部设备的用户命令被输入，则改变该第一动作指导信息并显示第二动作指导信息以指导用户动作来控制该外部设备。
根据另一示例性实施例的一方面，在此提供一种设置显示装置的视角的方法，该方法包括响应于预定事件的发生，在显示屏幕的区域上显示视角指导UI，该视角指导UI在预定事件发生时指导对被连接到该显示装置的相机的视角的设置；并且使用该视角指导UI来设置相机的视角。
当进入动作任务模式的事件发生时，该视角指导UI可不显示。
在设置所述视角期间，所述视角指导UI可包括显示正被所述相机拍摄的图像的屏幕(screen)。
该设置可包括：调整所述相机使得相机的视角自动地以预定的速度向预定的方向移动；并且当在调整所述相机期间用户命令被输入时，将当所述用户命令被输入的时间点处的视角设置为所述相机的视角。
该设置可包括：根据使用外部设备的用户操纵来调整所述相机；并且当在调整所述相机期间用户命令被输入时，将当所述用户命令被输入的时间点处的视角设置为所述相机的视角。
所述预定事件可以是如下事件中的一个：在所述显示装置的初始安装期间电源被施加到所述显示装置的事件、动作任务模式被开启的事件、以及在所述显示装置的控制菜单当中视角设置菜单被选择的事件。
所述相机可以是动作捕捉相机，其在动作任务模式中拍摄用户的动作以用于对显示装置的控制。
根据另一示例性实施例的一方面，在此提供一种显示装置，包括：相机，其拍摄用户的动作；显示器；以及控制器，其响应于预定事件的发生，在所述显示器的区域上显示视角指导UI，该视角指导UI指导对所述相机的视角的设置，并且使用所述视角指导UI来设置该相机的视角。
当进入动作任务模式的事件发生时，该控制器可以通过显示由显示装置提供的屏幕而不显示视角指导UI。
当设置所述视角时，所述视角指导UI可以包括显示正被所述相机拍摄的图像的屏幕。
所述控制器可调整所述相机使得相机的视角自动地以预定的速度向预定的方向移动，并且当在调整该相机期间用户命令被输入时，可将当所述用户命令被输入的时间点处的视角设置为所述相机的视角。
所述控制器可根据使用外部设备的用户操纵来调整所述相机，并且当在调整该相机期间用户命令被输入时，可将当所述用户命令被输入的时间点处的视角设置为所述相机的视角。
所述预定事件可以是如下事件中的一个：在所述显示装置的初始安装期间电源被施加到所述显示装置的事件、动作任务模式被开启的事件、以及在所述显示装置的控制菜单当中视角设置菜单被选择的事件。
所述相机可以是动作捕捉相机，其在动作任务模式中拍摄用户的动作以用于对显示装置的控制。
根据另一示例性实施例的一方面，在此提供一种用于控制显示装置的方法，该方法包括：若动作开始命令被输入，显示图标和指针以执行动作任务模式，根据第一用户动作移动该指针，并且若在该指针放置(placed)在该图标上的同时第二用户动作被输入，则执行与该图标相对应的功能。
当第二用户动作被输入时，放置在图标上的指针可以固定而不被移动。
所述执行可包括：若该指针被放置在图标上并且保持该第二用户动作的输入，则持续地执行其上放置有指针的图标的功能。
该第一用户动作可以是伸展用户的手的伸展(spread)动作，而该第二用户动作可以是握紧该用户的手的抓取(grab)动作。
该图标可以包括增大音量图标、减小音量图标、频道向上图标和频道向下图标中的至少一个。
该图标可以包括被显示在显示屏幕的左侧区域和右侧区域中的一个上的增大音量图标和减小音量图标，以及被显示在该显示屏幕的左侧区域和右侧区域中的另一个上的频道向上图标和频道向下图标。
在该显示装置中当前设置的音量等级信息可以被显示在所述增大音量图标和减小音量图标所显示的区域上，在该显示装置中当前设置的频道信息可以被显示在所述频道向上图标和频道向下图标所显示的区域上。
该方法还可包括：若输入动作结束动作，则从该显示屏幕上移除这些图标和指针。
根据另一示例性实施例的一方面，提供一种显示装置，其包括：接收用户动作的输入的动作输入单元；显示器；以及控制器，其中，若动作开始命令通过该动作输入单元被输入，则显示图标和指针以执行动作任务模式，控制该显示单元根据通过该动作输入单元被输入的第一用户动作来移动该指针，并且若在该指针放置在该图标上的同时第二用户动作通过该动作输入单元被输入，则执行与该图标相对应的功能。
当该第二用户动作被输入时，该控制器可固定该指针而不移动该指针。
若该指针被放置在图标上并且保持该第二用户动作的输入，则该控制器可以持续地执行其上放置有指针的图标的功能。
该第一用户动作可以是伸展用户的手的伸展动作，而该第二用户动作可以是握紧该用户的手的抓取动作。
该图标可以包括增大音量图标、减小音量图标、频道向上图标和频道向下图标中的至少一个。
该图标可以包括被显示在显示屏幕的左侧区域和右侧区域中的一个上的增大音量图标和减小音量图标，以及被显示在该显示屏幕的左侧区域和右侧区域中的另一个上的频道向上图标和频道向下图标。
在该显示装置中当前设置的音量等级信息可以被显示在所述增大音量图标和减小音量图标所显示的区域上，在该显示装置中当前设置的频道信息可以被显示在所述频道向上图标和频道向下图标所显示的区域上。
若动作结束动作通过该动作输入单元被输入，则该控制器可以从显示单元的显示屏幕上移除这些图标和指针。
根据另一示例性实施例的一方面，在此提供了一种用于控制识别语音的显示装置的方法，该方法可以包括：接收语音开始命令；以及，若该语音开始命令为第一语音开始命令，则将该显示装置的模式改变为第一语音任务模式，该第一语音任务模式根据输入到该显示装置的语音输入单元的用户语音来控制，并且若该语音开始命令为第二语音开始命令，则将该显示装置的模式改变为第二语音任务模式，该第二语音任务模式根据输入到与该显示装置一起操作的外部装置的用户语音来控制；以及，显示与改变的语音任务模式相对应的语音指导信息。
该第一语音开始命令可以是包括预设的词的用户语音命令，并且该第二语音开始命令可以是按下该外部装置的预设按钮的用户命令。
该语音指导信息可包括指示所述第一语音任务模式和第二语音任务模式的改变的模式的图标区域。
该语音指导信息可包括指导用户语音来执行该语音任务模式的多个语音命令，并且，包括在所述第一语音任务模式的语音指导信息和第二语音任务模式的语音指导信息中的语音命令可以是彼此不同的。
所述第一语音任务模式的语音指导信息可以包括将执行频道向上/向下的命令的语音命令，并且所述第二语音任务模式的语音指导信息可以不包括将执行频道向上/向下的命令的语音命令而可以包括将提供频道列表的语音命令。
所述第二语音任务模式可以是按下外部装置的预设第二按钮，并且可以由输入到所述外部装置的用户语音来控制。
此外，所述外部设备可以是遥控器。
根据另一示例性实施例的一方面，在此提供了一种显示装置，其包括：语音输入单元，其接收用户语音的输入；显示器；以及控制器，其中，若通过所述语音输入单元输入的语音开始命令是第一语音开始命令，则将所述显示装置的模式改变为第一语音任务模式，该第一语音任务模式是根据输入到所述显示装置的语音输入单元的用户语音来控制的，以及，若所述语音开始命令是第二语音开始命令，则将所述显示装置的模式改变为第二语音任务模式，该第二语音任务模式是根据输入到与该显示装置一起操作的外部装置的用户语音来控制的。
该第一语音开始命令可以是包括预设的词的用户语音命令，并且该第二语音开始命令可以是按下该外部装置的预设按钮的用户命令。
该语音指导信息可包括指示所述第一语音任务模式和第二语音任务模式的改变的模式的图标区域。
该语音指导信息可包括指导用户语音来执行该语音任务模式的多个语音命令，并且，包括在所述第一语音任务模式的语音指导信息和第二语音任务模式的语音指导信息中的语音命令可以是彼此不同的。
所述第一语音任务模式的语音指导信息可以包括将执行频道向上/向下的命令的语音命令，并且所述第二语音任务模式的语音指导信息可以不包括将执行频道向上/向下的命令的语音命令而可以包括将提供频道列表的语音命令。
所述第二语音任务模式可以是按下外部装置的预设第二按钮，并且可以由输入到所述外部装置的用户语音来控制。
所述外部设备可以是遥控器。
根据另一示例性实施例的一方面，提供一种控制显示装置的方法，所述方法包括：接收将使用双手执行动作任务的双手开始命令；若输入所述双手开始命令，则将显示装置的模式改变为将使用双手执行动作任务的双手任务模式；并且若所述显示装置的模式被改变为双手任务模式，则显示将使用双手执行动作任务的双手输入指导图形用户接口(GUI)。
所述双手开始命令的接收可包括：若使用一只手的动作开始命令被输入，则将显示装置的模式改变为执行该动作任务的动作任务模式；并且，若当显示装置的模式被改变为所述动作任务模式时使用另一只手的动作开始命令被输入，则识别出(recognize)双手开始命令已被输入。
所述双手开始命令的接收可包括：如果同时摇动双手多次的摇动动作被输入，则识别出双手开始命令已被输入。
使用双手的动作任务可以是放大或缩小显示屏幕的任务。
所述方法还可包括：若当在显示屏幕的区域中显示双手输入指导GUI时使得双手彼此远离的动作被输入，则基于双手输入指导GUI所显示的区域中的预定位置来放大显示屏幕；以及若使得双手彼此靠近的动作被输入，则基于双手输入指导GUI所显示的区域中的预定位置来缩小显示屏幕。
所述双手输入指导GUI的显示可包括在所述显示屏幕的中心区域中显示双手圆形输入指导GUI。
所述方法还可包括：若移动双手的动作被输入，则移动该双手输入指导GUI，使得双手圆形输入指导GUI与移动双手的动作相对应。
所述双手输入指导GUI可以是两个指针，其显示在与用户的双手的位置相对应的地方。使用双手的动作任务可以是通过使用所述两个指针来放大或缩小显示屏幕的任务。
根据另一示例性实施例的一方面，在此提供了一种显示装置，其包括：动作输入单元，其接收用户的动作；显示器；以及控制器，其中，若使用双手执行动作任务的双手开始命令通过所述动作输入单元被输入，则将显示装置的模式改变为使用双手执行动作任务的双手任务模式，并在显示单元上显示使用双手执行动作任务的双手输入指导GUI。
若使用一只手的动作开始命令通过所述动作输入单元被输入，则控制器可以将显示装置的模式改变为执行该动作任务的动作任务模式；并且，若当显示装置的模式被改变为所述动作任务模式时使用另一只手的动作开始命令通过所述动作输入单元被输入，则可以识别出双手开始命令已被输入。
若同时摇动双手多次的摇动动作通过所述动作输入单元被输入，则所述控制器可以识别出双手开始命令已被输入。
使用双手的动作任务可以是放大或缩小显示屏幕的任务。
若当在显示屏幕的区域中显示双手输入指导GUI时使得双手彼此远离的动作被输入，则所述控制器可以基于双手输入指导GUI所显示的区域中的预定位置来放大显示屏幕；以及若使得双手彼此靠近的动作被输入，则所述控制器可以基于双手输入指导GUI所显示的预定位置来缩小显示屏幕。
所述双手输入指导GUI可以是在所述显示屏幕的中心区域中显示双手圆形输入指导GUI。
若移动双手的动作通过所述动作输入单元被输入，则所述控制器可以移动该双手圆形输入指导GUI，使得双手输入指导GUI与移动双手的动作相对应。
所述双手输入指导GUI可以是两个指针，其显示在与用户的双手的位置相对应的地方。使用双手的动作任务可以是通过使用所述两个指针来放大或缩小显示屏幕的任务。
根据另一示例性实施例的一方面，提供一种控制显示装置的方法，所述方法包括：通过语音输入单元接收语音开始命令；若所述语音开始命令被输入，则将显示装置的模式改变为语音任务模式，并且若在所述语音任务模式中发生语音识别错误，则显示多个示出所述语音识别错误的反馈消息中的一个。
所述方法还可包括：若在所述语音任务模式中语音识别错误反复地发生，则随机地选择并显示所述多个反馈消息中的一个。
所述语音任务模式可包括：第一语音任务模式，其是根据输入到所述显示装置的语音输入单元的用户语音来控制的，以及，第二语音任务模式，其是根据输入到与该显示装置一起操作的外部装置的用户语音来控制的。
所述多个反馈消息可以根据所述语音任务模式的类型不同地显示。
所述多个反馈消息可以根据所述语音识别错误的类型不同地显示。
所述语音识别错误可以包括以下各项中的至少一者：准确地识别通过所述语音输入单元输入的用户语音时的错误；用户语音被输入之后按下所述外部装置的识别按钮持续预设时间时的错误；以及在按下所述外部装置的识别按钮之后输入用户语音持续预设时间时的错误。
所述多个反馈消息中的一个的显示，可包括：若所述语音识别错误第一次发生，则显示默认的反馈消息。
根据另一示例性实施例的一方面，在此提供了一种显示装置，其包括：语音输入单元，其接收用户语音；显示器；控制器，其中，如果通过语音输入单元输入了语音开始命令，则将显示装置的模式改变为语音任务模式，并且若在所述语音任务模式中发生语音识别错误，则在显示单元上显示多个用于示出所述语音识别错误的反馈消息中的一个。
若在所述语音任务模式中语音识别错误反复地发生，则所述控制器可以随机地选择并显示所述多个反馈消息中的一个。
所述语音任务模式可包括：第一语音任务模式，其是根据输入到所述显示装置的语音输入单元的用户语音来控制的，以及，第二语音任务模式，其是根据输入到与该显示装置一起操作的外部装置的用户语音来控制的。
所述多个反馈消息可以根据所述语音任务模式的类型不同地显示。
所述多个反馈消息可以根据所述语音识别错误的类型不同地显示。
所述语音识别错误可以包括以下各项中的至少一者：精确地识别通过所述语音输入单元输入的用户语音时的错误；用户语音被输入之后按下所述外部装置的识别按钮持续预设时间时的错误；以及在按下所述外部装置的识别按钮之后输入用户语音持续预设时间时的错误。
若所述语音识别错误第一次发生，则所述控制器可以在显示单元上显示默认的反馈消息。
根据另一示例性实施例的一方面，提供一种控制显示装置的方法，所述方法包括：通过语音输入单元输入语音开始命令，若语音开始命令被输入，则将显示装置的模式改变为其中根据用户语音来控制显示装置的语音任务模式，以及，在所述显示装置上显示包括多个执行语音任务模式的语音命令的语音指导信息，以及根据用户的输入用不同的语音命令替换多个语音命令当中的至少一个。
所述语音指导信息可包括：在其上固定地显示语音命令的固定命令区域，以及在其上语音命令接受改变的可改变的命令区域。
所述固定命令区域可包括执行显示装置的电源关闭功能的语音命令。
所述改变可包括：响应于指示执行应用的用户命令来执行该应用；以及随着应用的执行，用与所执行的应用相对应的语音命令替换多个语音命令当中的至少一个。
所述改变可包括：输入用户命令，其指示显示用户最喜爱的语音命令；以及响应于输入的所述用户命令，用由用户设置的用户最喜爱的语音命令来替换多个语音命令当中的至少一个。
所改变的语音指导信息可包括：执行以返回到改变之前的语音指导信息的语音命令。
根据另一示例性实施例的一方面，在此提供了一种显示装置，其包括：语音输入单元，其接收用户语音；显示器；控制器，其将显示装置的模式改变为其中根据用户语音来控制显示装置的语音任务模式，以及，在所述显示装置上显示包括多个执行语音任务模式的语音命令的语音指导信息，以及，若语音开始命令通过所述语音输入单元被输入，则根据用户的输入用不同语音命令来替换多个语音命令当中的至少一个。
所述语音指导信息可包括：在其上固定地显示语音命令的固定命令区域，以及在其上语音命令接受改变的可变命令区域。
所述固定命令区域可包括执行显示装置的电源关闭功能的语音命令。
响应于指示执行应用的用户命令，所述控制器可以执行该应用；以及用与所执行的应用相对应的语音命令来替换多个语音命令当中的至少一个。
若指示显示用户最喜爱的语音命令的用户命令被输入，则所述控制器可以用由用户设置的用户最喜爱的语音命令来替换多个语音命令当中的至少一个。
所改变的语音指导信息可包括：执行以返回到改变之前的语音指导信息的语音命令。
根据另一示例性实施例的一方面，提供一种显示装置的控制方法，所述方法包括：通过动作输入单元输入动作开始命令，若动作开始命令被输入，则将显示装置的模式改变为其中根据用户的动作来控制显示装置的动作任务模式，以及，在所述显示装置上显示包括多个执行动作任务模式的动作命令的动作指导信息，以及若指示执行应用的命令被输入，则用与所执行的应用相对应的动作命令来替换多个动作命令当中的至少一个。
根据另一示例性实施例的一方面，在此提供了一种显示装置，其包括：动作输入单元，其接收用户的动作；显示器；控制器，其将显示装置的模式改变为其中根据用户的动作来控制显示装置的动作任务模式，以及，在所述显示装置上显示包括多个执行动作任务模式的动作命令的动作指导信息，以及若动作开始命令被输入，以及若指示执行应用的命令被输入，则用与所执行的应用相对应的动作命令来替换多个动作命令当中的至少一个。
根据另一示例性实施例的一方面，提供一种设置显示装置的视角的方法，所述方法包括：显示视角指导用户接口(UI)，其指导对相机的视角的设置；以及使用所述视角指导UI来设置该相机的视角。
所述方法还包括：以预定的速度自动调整相机的角度；以及在调整相机的角度期间接收用户命令，其中所述相机的视角的设置将所述相机的视角设置为：当接收到用户命令的时间点处相机的角度。
显示所述视角指导UI可以响应于如下事件中的至少一个的发生而发生：在所述显示装置的初始安装期间电源被施加到所述显示装置的事件、动作任务模式被开启的事件、从所述显示装置的控制菜单当中视角设置菜单被选择的事件。
本发明的有益效果
如上所述，由于动作命令根据在显示装置上执行的应用而改变，因此用户能够更方便和高效地控制该显示装置。
附图说明
通过结合附图对特定本公开的描述，本公开的上述和/或其他方面将更加明显，附图中：
图1至图3是示出根据示例性实施例的各个方面的显示装置的结构的框图；
图4至图7是示出根据示例性实施例的、依赖于被连接到所述显示装置的外部设备提供不同语音指导信息的方法；
图8为流程图，其被提供以说明根据示例性实施例的、依赖于被连接到所述显示装置的外部设备提供不同语音指导信息的方法；
图9为示出根据示例性实施例的、具有显示装置、外部设备和中继该显示装置和外部设备的中继设备的***的视图；
图10是示出根据示例性实施例的、在显示装置中提供的相机的视图；
图11是示出根据示例性实施例的、在显示装置中提供的、用于设置相机的视角的视角设置UI的视图；
图12是示出根据示例性实施例的、显示装置的视角设置方法的流程图；
图13至图18是示出根据示例性实施例的各个方面的、使用用户动作来执行频道控制和音量控制的方法的视图；
图19是示出根据示例性实施例的、使用用户动作的电子装置的控制方法的流程图；
图20是根据示例性实施例的、在第一语音任务模式中显示的第一语音指导信息，在第一语音任务模式中，通过显示装置的语音输入单元输入用户语音；
图21是根据示例性实施例的、在第二语音任务模式中显示的第二语音指导信息，在第二语音任务模式中，通过与显示装置一起操作的外部设备的语音输入单元输入用户语音；
图22是示出根据示例性实施例的、根据语音输入方法提供不同语音任务模式的方法的流程图；
图23至图26是示出根据示例性实施例的各个方面的、使用双手的用户动作来控制显示装置的方法的视图；
图27是示出根据示例性实施例的、由使用双手的用户动作来控制显示装置的方法的流程图；
图28是示出根据示例性实施例的、若发生语音识别错误时的反馈消息的视图；
图29至图32是示出根据示例性实施例的各个方面的、根据语音任务模式和语音错误类型显示的反馈消息的视图；
图33是示出根据示例性实施例的、控制显示装置的方法的流程图；
图34和图35是示出根据示例性实施例的、在语音任务模式中的一般语音指导信息的视图；
图36是示出根据示例性实施例的、在语音任务模式中专用于应用的语音指导信息的视图；
图37是示出根据示例性实施例的、在语音任务模式中、其中包括用户喜好的语音命令的语音指导信息的视图；
图38是示出根据示例性实施例的、控制显示装置以用于改变应用的语音命令的一部分的方法的流程图；
具体实施方式
某些示例性实施例将参照附图进行更详细的描述。
在下面的描述中，即使在不同附图中，相同的附图参考编号也用于相同的元件。在说明书中定义的事项，例如详细的构造或元件，是为了帮助对示例性实施例的全面理解而提供的。然而，示例性实施例可在没有这些具体定义的事项的情况下进行实践。同样，不对公知的功能或构造详细描述，因为其中不必要的细节会混淆本申请。
图1是示出根据本发明的总体构思的示例性实施例的、显示装置100的示意性框图。
参照图1，显示装置100包括语音输入单元110、动作输入单元120、存储单元130、控制器140和显示器193。在此，显示装置100可以实施为智能TV、机顶盒、或者能够被连接到外部网络的PC、数字TV、可移动电话等等，但并不限于此。
语音输入单元110接收用户发出的语音。语音输入单元110将输入的语音信号转换为电信号并输出该电信号到控制器140。例如，语音输入单元110可以被实施为麦克风。此外，语音输入单元110可以以多合一(all-in-one)的形态安装在显示装置100中，或者可以与显示装置100分开地安装。分开的语音输入单元110可以通过有线或无线网络来连接到显示装置100。
动作输入单元120接收所拍摄的用户的动作的图像信号(如连续的帧)并将其提供到控制器140。作为示例，动作输入单元120可以被实施为包括镜头和图像传感器的相机单元。此外，动作输入单元120可以与显示装置100一体地提供，或者分开地提供。若是分开地提供的，则动作输入单元120可通过有线或无线网络连接到显示装置100。
存储单元130可以存储各种数据和程序以驱动和控制显示装置100。存储单元130还可存储：语音识别模块以识别通过语音输入单元110输入的语音，以及动作识别模块以识别通过动作输入单元120输入的动作。
存储单元130可包括语音数据库和动作数据库。如在此使用的，语音数据库是指其上记录有预设的语音和与该预设的语音匹配的语音任务的数据库。动作数据库是指其上记录有预设的动作和与该预设的动作匹配的动作任务的数据库。
显示器193可显示与从广播接收器接收到的广播信号相对应的图像。显示器193可显示通过外部端子输入单元输入的图像数据(如视频)。显示器193还可根据控制器140的控制，来显示语音指导信息以执行语音任务以及显示动作指导信息以执行动作任务。
控制器140可控制语音输入单元110、动作输入单元120和存储单元130。控制器140可包括中央处理单元(CPU)和模块以控制显示装置100，以及只读存储器(ROM)和随机存取存储器以存储数据。
若通过语音输入单元110输入语音，则控制器140使用语音识别模块和语音数据库来识别该语音。语音识别可主要被分类为基于孤立的单词(word)识别语音话语(voiceutterance)的孤立单词识别、识别连续句子和对话语音的连续语音识别、以孤立单词识别和连续语音识别的混合形式的关键词辨认(keyword spotting)(其检测和识别预定关键词)。
若输入用户语音，则控制器140在输入的语音信号中检测语音话语的开始和结束，从而确定语音片段。控制器140可通过计算输入的语音信号的能量，根据所计算的能量来划分该语音信号的能量等级，并实现动态编程，来检测语音片段。控制器140基于听觉模型从所检测的语音片段之内的语音信号中检测音素(phoneme)——其是语音的最小单位，并且生成音素数据。控制器140对所生成的音素数据实现隐马尔可夫模型(HMM)以生成文本信息。然而，用于感知用户语音的方法并不限于上述示例。因此，各种其他方法可以被实施以识别用户语音。因此，控制器140能识别在语音信号中包含的用户语音。
若通过动作输入单元120接收到动作，则控制器140使用动作识别模块和动作数据库来识别该动作。动作识别可包括：通过动作识别模块的使用，通过将与通过动作输入单元120输入的用户的动作相对应的图像(如，连续的帧)区分为背景和手部区域(如，手的展开或握紧)，来感知连续的手部动作。若用户的动作被输入，则控制器140以帧为单位存储所接收的图像并通过使用所存储的帧来检测对象。控制器140通过检测帧中包括的对象的形状、颜色或动作中的至少一者来检测对象。控制器140可以通过使用分别地被包括在多个帧中的对象的位置，来追踪所检测的对象的动作。
控制器140根据所追踪的对象的动作来确定动作。作为示例，控制器140通过使用对象的形状、速度、位置中的改变和对象的方向中至少一个来确定用户的动作。用户动作可包括：其中用户握紧其手的抓取(grab)动作、其中用户动作是用手移动所指示的光标的指针移动(pointing move)动作、其中用户沿一个方向高于预定速度移动其手的拍击(slap)动作，其中用户左/右挥手或上/下挥手的摇动(shake)动作，以及，其中用户转动他的手的旋转动作。实施例的技术概念可以适用于除了上述动作以外的其他动作。作为示例，用户的动作另外可以包括：其中用户展开他握紧的手的伸展动作。
控制器140确定对象是否在预定时间(如800ms)内离开预定区域(如，40cm x 40cm的方框)，从而确定用户的动作是指针移动还是拍击。若对象未在预定时间内离开预定区域，则控制器140可确定用户的动作为指针移动。若对象在预定时间内离开预定区域，则控制器140可确定用户的动作为拍击。在另一示例中，若确定对象的速度低于预设速度(如30cm/s)，则控制器可以确定用户的动作为指针移动。若确定对象的速度超出预设速度，则控制器140确定用户的动作为拍击。
如上所述，控制器140使用识别的语音和动作来执行显示装置100的任务。显示装置100的任务可包括可以由显示装置100执行的以下各项中的至少一者：电源控制、频道改变、音量调整、内容(如视频、音乐、照片等)播放、显示在屏幕上的GUI(图形用户接口)的选择、或者因特网服务(例如，搜索、浏览)。
由控制器140控制显示装置100的方法将在下文中更详细地解释。
图2是根据另一示例性实施例的显示装置100的框图。参照图2，显示装置100可包括：语音输入单元110、动作输入单元120、存储单元130、控制器140、广播接收器150、外部端子输入单元160、遥控信号接收器170、网络接口180以及图像输出单元190。参照图2，显示装置100可被实施为机顶盒或智能TV。
同时，由于语音输入单元110、动作输入单元120、存储单元130和控制器140已在上文中参照图1进行了描述，为简洁起见其重复的说明将被省略。
广播接收器150以有线或无线的方式从外部接收广播信号。广播信号可以包括视频、音频和另外的数据(如EPG)。广播接收器150可以从包括地面广播，有线广播，卫星广播，或互联网广播的各种源接收广播信号。
外部端子输入单元160可以从显示装置100之外接收图像数据(如视频、照片等)或音频数据(如音乐等)。外部端子输入单元160可包括以下各项中的至少一者：高清晰度多媒体接口(HDMI)输入161，分量输入162，PC输入163，或USB输入164。遥控信号接收器170可以从遥控器接收遥控信号。遥控信号接收器170可以在显示装置100处于语音任务模式或动作任务模式中时接收遥控信号。
网络接口180可在控制器140的控制下，将显示装置100连接到外部设备(如服务器、其他显示装置等)。控制器140可以经由网络接口180从连接的外部设备下载应用，或者进行控制以向用户提供诸如网页浏览的因特网服务，并且可以控制以从外部设备接收图像数据、音频数据、文本数据等。网络接口180可以被实现为有线/无线的通信接口，并且可以实现为各种类型的双向通信接口。例如，网络接口180可以提供以下各项中的至少一者：以太网181、无线LAN 182和蓝牙183。
图像输出单元190可以将通过广播接收器150接收到的外部广播信号、或在外部端子输入单元160处输入的图像数据、或在存储单元130处存储的图像数据，输出到外部显示装置(如监视器、TV、扬声器等)。此外，若显示装置100具有显示器或扬声器，则图像输出单元190可以通过显示装置100的显示器或扬声器来输出这些数据。
图3是根据示例性实施例的显示装置100的框图。参照图3，显示装置100可包括：语音输入单元110、动作输入单元120、存储单元130、控制器140、广播接收器150、外部端子输入单元160、遥控信号接收器170、网络接口180、显示器193以及音频输出单元196。显示装置100可以是数字TV，但并不限于此。
由于语音输入单元110、动作输入单元120、存储单元130、控制器140、广播接收器150、外部端子输入单元160、遥控信号接收器170、网络接口180、显示器193与在上文中参照图1和图2描述的、具有相同参考标号的组件相同，因而为简洁起见其详细的说明将被省略。
音频输出单元196在控制器140的控制下，输出与广播信号相对应的语音。音频输出单元196可包括以下各项中的至少一者：扬声器196a，耳机输出端子196b和S/PDIF输出端子196c。
同时，参照图3，存储单元130可包括：电源控制模块130a，频道控制模块130b，音量控制模块130c，外部输入控制模块130d，屏幕控制模块130e，音频控制模块130f，因特网控制模块130g，应用模块130h，搜索控制模块130i，UI处理模块130j，语音识别模块130k，动作识别模块130l，语音数据库130m和动作数据库130n。模块130a至130n可以被实施为软件，来执行电源控制，频道控制，音量控制，外部输入控制，屏幕控制，音频控制，因特网控制，应用执行，搜索控制，或UI处理的功能。控制器140可以通过执行存储在存储单元130处的软件来执行相应的功能，
如上所述，每个控制模块130a至130n可以实现为存储在存储单元130中的软件，但也可以通过单独的硬件实现。
在下文中参照附图对本公开的各种示例性实施例进行说明。
参照图4至图8，在下文对根据所连接的外部设备提供不同语音指导信息或动作指导信息的示例性实施例进行说明。
控制器140在显示器193上显示第一语音指导信息，其指导用于在语音任务模式中控制显示装置100的语音命令。在此，语音任务模式是如下模式：其从语音开始命令被输入时开始并且在该模式中显示装置100由之后输入的语音命令来控制。此外，语音任务模式可以是如下模式：其中显示装置100由输入的语音命令来控制，而没有语音开始命令。在这种情况下，可能使用不同类型的用户命令代替语音开始命令来开启语音任务模式。不同类型的用户命令可包括特定按钮的输入、显示装置100的特定按钮的输入和用户的特定动作。
此外，当用于控制被连接到显示装置100的外部设备的用户命令被输入时，控制器140控制显示器193将第一语音指导信息改变为指导用于控制该外部设备的用户语音的第二语音指导信息，并显示该第二语音指导信息。具体而言，多个语音指导信息可被存储在存储单元130处，并且控制器140搜索该多个语音指导信息并读出与外部设备相对应的第二语音指导信息，并在显示器193上显示所读出的第二语音指导信息。多个语音指导信息中的每一个与显示装置100和被连接到显示装置100的多个外部设备相对应。若关于用户想控制的外部设备的语音指导信息没有存储在存储单元130中，则多个语音指导信息可以通过外部端子输入单元160和网络接口180来接收。
在此，第一和第二语音指导信息可包括不同的语音命令。作为示例，若显示装置100为TV，则第一语音指导信息可包括：关于电源控制的语音命令、关于运行外部设备的语音命令、关于频道设置的语音命令、或关于音量设置的语音命令。若外部设备是DVD播放器和BD播放器之一，则第二语音指导信息可包括关于电源控制的语音命令、关于运行外部设备的语音命令、或关于播放设置的语音命令。
具体而言，若第一语音指导信息被显示，并且若第一语音指导信息中包括的语音命令通过语音输入单元110被输入，则控制器140直接根据该语音命令来控制显示装置100。
然而，若第二语音指导信息被显示，并且若第二语音指导信息中包括的语音命令通过语音输入单元110被输入，则控制器140可以生成与该输入的语音命令相对应的控制信号，并经由外部端子输入单元160将所生成的控制信号发送到该外部设备。
若显示装置100通过中继设备连接到该外部设备，并且若第二语音指导信息中包括的语音命令通过语音输入单元110被输入，则控制器140可以生成与该输入的语音命令相对应的控制信号，并经由中继设备发送所生成的控制信号到该外部设备。在此，中继设备和显示装置100可以通过网络接口180相互通信，并且中继设备和外部设备可以通过无线通信接口通信。在这种情况下，所生成的控制信号可以通过蓝牙通信从显示装置100发送到中继设备，并且中继设备可以被实现以将所发送的控制信号转换为IR(红外)信号，并发送该控制信号到外部设备。所生成的控制信号可通过蓝牙通信被发送到该中继设备，并且该中继设备可将所发送的控制信号转换为IR信号并发送该控制信号到该外部设备。被用于中继设备和外部设备之间的通信的无线通信接口除了红外通信接口之外还可包括RF通信接口，并且NFC(近场通信)的通信接口，Zigbee通信接口和蓝牙通信接口等可以用作RF(射频)通信接口。中继设备和显示装置100之间的接口以及中继设备和外部设备之间的接口不限于上述接口，并且因此这些接口可以被实现为无线/有线通信接口，以及各种类型的双向通信接口。在遥控外部设备中使用的接口被用于中继设备和外部设备之间的通信的情况下，使得通过显示装置100输入的语音命令或用户动作来控制外部设备是容易实现的。
下文中，各种实施例将通过结合图4至图7进行详细描述。
控制器140经由广播接收器150从外部的广播站接收广播信号，并对所接收的广播信号执行信号处理。此外，参照图4，控制器140接着在显示器193上显示经信号处理的广播图像400，并通过音频输出单元196输出经信号处理的广播信号的声音。
此外，若语音开始命令通过语音输入单元110被输入，则控制器140识别该语音开始命令并将其转换为语音任务模式。在此，语音开始命令为用于开启语音任务模式的用户命令，语音任务模式是：其中显示装置100由输入到语音输入单元110的语音命令来控制的模式。如上所述，可能使用不同种类的用户命令代替语音开始命令来开启语音任务模式。不同种类的用户命令可包括：遥控器的特定按钮的输入、显示装置100的特定按钮的输入和用户的特定动作。
此外，当已作出到语音任务模式的转换时，控制器140显示如图5中所示的、用于执行语音任务模式的第一指导信息500。在此，第一语音指导信息500被显示在广播图像被显示的屏幕的底端。此外，第一语音指导信息500包括：告知(acknowledge)显示装置的当前模式为第一语音任务模式的图标510，以及向用户指导语音命令的多个语音命令521至526和530。语音指导信息被显示的位置可以改变，语音指导信息中的图标510和多个语音命令521至526和530被显示的位置也能改变。
多个语音命令包括：关闭电源语音命令521，外部输入的语音命令522，频道快捷键的语音命令523，频道向上/向下(channel up/down)的语音命令524，音量增大/减小的语音命令525，声音关闭语音命令526，和更多(MORE)的语音命令530。更多的语音命令530是除了所显示的语音命令之外显示更多语音命令的命令。然而，在第一语音指导信息500中包括的语音命令仅仅是示例性实施例，因此可以包括其他语音命令(例如频道列表语音命令等)。
在显示第一语音指导信息500的情况下，若用户语音“通用控制(UniversalControl)”被输入到语音输入单元110，则控制器140显示如图6中所示的第三语音指导信息600，其可以选择将要控制的外部设备。第三语音指导信息600可包括指示显示设备的当前模式为语音任务模式的图标610，以及指导用户语音的多个语音命令621至625和630。该多个语音命令可包括观看电视语音命令621，观看视频语音命令622，电视(TV)的语音命令623，机顶盒(STB)的语音命令624，蓝光光盘播放器(BD)语音命令625，和更多的语音命令630。然而，将理解的是除了以上列出的第三语音指导信息600的语音命令之外，语音命令可以包括另外的语音命令(如，DVD播放器的语音命令、USB的语音命令等)。
在显示第三语音指导信息的情况下，若用户语音“BD”通过语音输入单元110被输入，则控制器140可以通过使用用户语音来控制该BD。控制器140在存储在存储单元130中的多个语音指导信息中搜索控制BD的语音指导信息，并显示如图7中所示的、搜索出的语音指导信息。
即，对于广播的接收，控制器140可以显示如图5中所示的第一语音指导信息500。然而，当选择了将要控制的外部设备时，控制器140将所显示的语音指导信息改变为如图7中所示的第二语音指导信息。第二语音指导信息700可包括：指示显示设备的当前模式为语音任务模式的图标710，以及指导用户语音的多个语音命令721至726和730。该多个语音命令包括：关闭电源的语音命令721，外部输入的语音命令722，播放(暂停)的语音命令723，上一文件的语音命令724，下一文件的语音命令725，或音量增大/减小的语音命令726。然而，第二语音指导信息700并不限于以上列出的语音命令。因此，第二语音指导信息700可包括另外的语音命令(快进的语音命令、倒回(rewind)的语音命令等)。
如上所述，由于不同的语音指导信息根据外部设备是否连接以及所连接的外部设备的类型来提供，因此用户能够更方便和高效地控制显示装置。
同时，虽然上述实施例说明了显示装置100根据使用语音识别的用户命令来连接到BD的情况，这仅是为了说明目的而编写。在另一实施例中，显示装置100可以使用外部遥控器等来连接到BD。虽然假设根据外部设备是否连接以及所连接的外部设备的类型来提供不同的语音指导信息，但这仅是为了说明目的而编写。因此，可以根据外部设备是否连接以及所连接的外部设备的类型来提供不同的动作指导信息。
根据实施例，下文将参照图8说明显示装置的控制方法。
在(S810)，显示装置100改变为语音任务模式。具体而言，若语音开始命令通过显示装置100的语音输入单元110被输入，则显示装置100将操作模式改变为语音任务模式，在该语音任务模式中显示装置100根据用户的语音来控制。
在(S820)，在该语音任务模式中，显示装置100显示第一语音指导信息。为执行广播接收，显示装置100可包括控制广播接收功能的语音命令。作为示例，第一语音指导信息可包括用于频道设置的语音命令。
在(S830)，显示装置100确定是否输入控制外部设备的用户命令。该用户命令可以是上文参照图6所述的用户语音命令，或者通过与显示装置100关联操作的遥控器上提供的外部输入改变按钮发出的命令。
在(S830-Y)，若输入控制外部设备的用户命令，则在(S840)，显示装置100改变第一语音指导信息并因而显示第二语音指导信息。若外部设备是蓝光(BD)或DVD播放器，则用于频道设置的语音命令从第二语音指导信息中消失，并且用于图像播放的语音命令(如播放/停止的语音命令、用于播放下一文件的语音命令)可能出现。
如上所述，由于根据外部设备是否连接以及所连接的外部设备的类型来显示不同的语音指导信息，因此用户能够更方便和高效地使用语音识别来控制所连接的外部设备。
同时，虽然在上述实施例中显示装置100通过外部端子输入单元160被直接连接到外部设备，但这仅是为了说明目的而编写的。因此，本实施例的技术构思也可适用于显示装置100使用经由网络接口180连接的中继设备连接到外部设备的示例。具体而言，图9中所示的***10可以包括显示装置100、中继设备200和外部设备300，其中显示装置100可以经由中继设备200连接到外部设备300。
具体而言，若包含在第二语音指导信息中的用户语音通过语音输入单元110被输入，则显示装置100生成与所输入的用户语音相对应的控制信号。显示装置100接着使用网络接口180的蓝牙通信将该控制信号发送到中继设备200。若发送了该控制信号，则中继设备200将所接收的控制信号转换为IR信号格式并将所转换的信号发送到外部设备300。当接收到该IR信号时，外部设备300解调IR信号并根据输入到显示装置100的用户语音被控制。
中继设备和显示装置100之间的接口以及中继设备和外部设备之间的接口不限于上述接口，并且因此这些接口可以被实现为无线/有线通信接口以及各种类型的双向通信接口。
下文是参照图10至图12的、设置动作输入单元120的视角的视角设置UI的示例性实施例。
动作输入单元120可以是相机。在此，相机可以被放置为从围绕显示装置100的显示器193的边框当中的上端边框突出。然而，这仅仅是示例性的实施例，因此相机可以被放置在上边框上而没有突出，与相机的位置相对应的边框的部分可以由透明材料制成或者可以被实现为形成孔。此外，相机可以被放置在四个表面的任何地方，而不只是边框的上端。
当预定事件发生时，控制器140在显示屏幕的区域上显示指导相机的视角的视角指导UI。此外，控制器140可以根据使用视角指导UI输入的用户命令来设置相机的视角。
在此，所述预定事件可以是如下事件中的一个：在所述显示装置的初始安装期间电源被施加到所述显示装置100的事件、动作任务模式被开启的事件、在所述显示装置100的控制菜单当中视角菜单被选择的事件。同时，当预设事件发生时，如图11中所示的，控制器140在显示屏幕的中心区域上显示视角指导UI 1100。在此，视角指导UI 1100没有显示在整个显示屏幕上，而是显示在显示屏幕的一区域上(例如，中心区域)。因此，用户变得能够连续地查看当前取景内容的图像。当然，视角指导UI 1100可以被实现为显示在整个屏幕上。
此外，视角指导UI 1100包括相机图像显示屏幕1110，其显示正被相机拍摄的图像。因此，用户可以检查相机当前拍摄的图像并接收关于当前视角的指导。
在此，视角指导UI 1100可包括相机图像显示屏幕1110和指导期望的用户位置的指南(guideline)。此外，视角指导UI 1100可包括相机图像显示屏幕1110以及根据相机图像显示屏幕1110上的用户的位置来指导期望的相机视角的指南。
在视角指导UI 1100中包括相机图像显示屏幕1110和指导期望的相机视角的指南的情况下，相机的视角可以被实现为由用户手动调整或自动调整。在这种情况下，随着相机图像显示屏幕1110中用户的位置的改变，指导期望的相机视角的指南的位置可以改变。
在此，可以通过调整相机的位置或角度来调整相机的视角。此外，可以通过从在位置和角度不被调整的状态中所拍摄的图像中选择在相机图像显示屏幕1110上显示的图像来作出调整，在此情况中相机图像显示屏幕1110是所拍摄图像的一部分。当相机的视角正在调整的同时用户命令通过视角指导UI 1100被输入时，控制器140可以将输入用户命令的时间点处的相机图像显示屏幕1110的图像设置为被用于识别用户动作的图像。
在用户使用遥控器中提供的方向按钮调整相机的视角的情况下，遥控器可以生成其中包括所选择的方向按钮信息的信号，并发送该信号到显示装置100，并且控制器140可以根据从遥控器发送的信号来调整相机。
如上所述的视角指导UI 1100可以使用用户动作来生成图像，从而更精确地识别用户动作。图12是用于说明根据本公开的示例性实施例的、设置显示装置100的相机视角的方法的流程图。
首先，显示装置100确定预定事件是否发生(S1210)。在此，所述预定事件可以是如下事件中的一个：在所述显示装置的初始安装期间电源被施加到所述显示装置100的事件、动作任务模式被开启的事件、在所述显示装置100的控制菜单当中视角设置菜单被选择的事件。即，即使在用户模式中在用于控制显示装置100的动作任务模式中时，视角设置UI也可以不被显示，并且仅当预定事件发生时视角设置UI才可以被显示。
当预定事件发生时(S1210-Y)，显示装置100显示用于设置相机120的视角的视角指导UI(S1220)。在此，如图11中所示的，视角指导UI 1100可以被显示在显示屏幕的中心区域，并且可以包括显示当前由相机拍摄的图像的屏幕1110。由此，用户能够在查看当前正从显示装置100输出的内容图像的同时设置相机的视角。当然，视角指导UI 1100可以被实现为显示在整个屏幕区域上。
此外，显示装置100可以使用所显示的视角指导UI来设置相机的视角(S1230)。在此，在视角指导UI 1100包括相机图像显示屏幕1110和指导期望的相机视角的指南的情况下，相机的视角可以被实现为由用户手动调整或自动调整。此外，在这种情况下，随着在相机图像显示屏幕1110中显示的用户的位置的改变，指导期望的相机视角的指南的位置可以改变。
这里，相机的视角可以通过调整实际的相机的位置和角度来调整。此外，可以通过从在不调整相机的位置和角度的情况下所拍摄的图像中选择在相机图像显示屏幕1110上显示的图像来作出调整，在此情况中相机图像显示屏幕1110是所拍摄图像的一部分。
当相机的视角正被调整的同时用户命令通过视角指导UI 1100被输入时，显示装置100可以将输入用户命令的时间点处的相机图像显示屏幕1110的图像设置为被用于识别用户动作的图像。
尤其是，用户使用遥控器中提供的方向按钮调整相机的视角的情况下，遥控器可以生成其中包括所选择的方向按钮信息的信号并发送该信号到显示装置100，并且根据从遥控器发送的信号来调整相机。
此外，用户能够使用视角指导UI来更容易地设置相机的视角。此外，通过在每次预定事件发生时设置相机的视角以替代在每次模式被改变为动作任务模式时设置视角，用户可以减少由于必须在每次模式被转换为动作任务模式时设置视角造成的不便。
下文是参照图13至图19的、与用于由用户动作控制显示装置100的动作UI有关的示例性实施例的说明。
具体地，若动作开始命令通过动作输入单元120被输入，则控制器140将显示装置100的模式改变为动作任务模式。该动作开始命令可以是水平地摇动一只手多次的动作。动作任务模式是其中根据通过动作输入单元120输入的用户动作来控制显示装置100的模式。可以使用其他各种用于开启动作任务模式的用户命令来替代动作开始命令。其他各种的用户命令可包括：遥控器的特定按钮的输入、显示装置100的特定按钮的输入和用户的特定语音等。
若模式被改变为动作任务模式，则控制器140在显示器193上显示图标及指针以执行动作任务模式。所显示的图标是控制显示装置100的功能的图标。图标可以被显示在显示屏幕的左侧区域和右侧区域。指针可以被显示在显示屏幕的中心处。
若在转换到动作任务模式期间输出了广播信号，则控制器140显示用于音量调整和频道改变的图标。每个图标可以被显示在显示屏幕的左侧区域和右侧区域。音量调整图标包括音量增大图标和音量减小图标，并且频道改变图标包括频道向上图标和频道向下图标。此外，指针可以被显示在显示屏幕的特定位置(例如，屏幕的中心区域)。
控制器140根据通过动作输入单元120输入的第一用户动作来移动指针。第一用户动作可以是使用户的手展开的伸展动作。即，若移动正处在伸展状态的一只手的动作通过动作输入单元120被输入，则控制器140可以根据用户的手的移动来移动指针。
若在指针被放置在图标上的同时第二用户动作通过动作输入单元120被输入，则控制器140执行与该图标相对应的功能。第二用户动作可以是握紧一只手的抓取动作。例如，若在指针被放置在音量增大的图标上的同时用户的抓取动作通过动作输入单元120被输入，则控制器140将当前音量等级增加“1”。
控制器140控制指针使得当输入该第二用户动作时指针的位置不改变而是固定的。这是因为指针的位置可能因为如下原因而改变：第二用户动作被错误地识别(misrecognized)为指示用户的手被移动，从而用户不能正确地控制显示装置100。
若在指针被放置在图标上的同时第二用户动作的输入被保持，则控制器140可以连续地执行其上放置有指针的图标的功能。例如，若在指针放置在音量减小的图标上的同时第二用户动作的输入被保持，则控制器140可以连续地减少音量等级。此时，若该第二用户动作的输入一直保持，则该控制器140可以更快速地执行其上放置有指针的图标的功能。例如，若在指针放置在音量减小的图标上的同时第二用户动作的输入被保持，则控制器140可以增速地减少音量等级。
若动作结束动作通过该动作输入单元120被输入，则该控制器140可以从显示器193的显示屏幕上移除多个图标和指针。动作结束动作和动作开始动作可以是相同的动作。
使用用户动作、多个图标和指针来控制显示装置100的方法将参照图13至图18来详细描述。
控制器140对通过广播接收器140接收的广播信号进行信号处理并如图13所示在显示屏幕上显示广播图像1300。
若动作开始命令通过动作输入单元120被输入，则控制器140将显示装置100的模式改变为动作任务模式。动作任务模式是其中根据通过动作输入单元120输入的用户动作来控制显示装置100的模式。可以使用其他各种用于开启动作任务模式的用户命令来替代动作开始命令。其他各种的用户命令可包括：遥控器的特定按钮的输入、显示装置100的特定按钮的输入和用户的特定语音等。
若模式被改变为动作任务模式，则控制器140显示多个图标1410、1430、1440、1460和指针1470以执行显示装置100的具体功能。具体而言，如图14所示的，控制器140在显示屏幕的左侧区域显示音量增大图标1410和音量减小图标1430以控制音量等级，在显示屏幕的右侧区域显示频道向上图标1440和频道向下图标1460以控制频道，并且在显示屏幕的中心处显示指针1470。
在该显示装置中当前设置的音量等级信息100被显示在所述音量增大图标1410和音量减小图标1430之间。在该显示装置中当前设置的频道信息1450(例如，频道名称或频道号)被显示在频道向上图标1440和频道向下图标1460之间。因此，用户能够容易地检查当前设置的频道信息和当前设置的音量等级信息。当前音量等级信息1420和当前频道信息1450的显示位置可以与上述位置不同，并且若模式被改变为动作任务模式，则当前音量等级信息1420和频道信息1450可以立刻被显示。
虽然在以上示例性实施例中用于控制音量等级的图标1410和1430被显示在左侧区域并且用于控制频道的图标1440和1460被显示在右侧区域，但这仅仅是示例。这些图标可以被显示在其他区域。
此外，尽管用于控制音量等级的图标1410和1430和用于控制频道的图标1440和1460被显示，但用于控制显示装置100的其他功能的图标(例如，静音或电源关闭)也可以被显示。
若在多个图标1410、1430、1440、1460和指针1470被显示的同时移动正处在伸展状态的一只手的动作被输入，则控制器140根据移动动作来移动指针1470。
若在指针被放置在图标1410、1430、1440、1460上的同时用户的抓取动作通过动作输入单元120被输入，则控制器140执行与其上放置有指针1470的图标相对应的功能。
例如，若向左移动正处在伸展状态的一只手的动作通过动作输入单元120被输入，则控制器140根据移动动作向左移动指针1470。若在指针1470被放置在如图15所示的音量减小图标1430上的同时用户的抓取动作通过动作输入单元120被输入一次，则控制器140将在显示装置100中当前设置的音量等级减少“1”。即，若在显示装置100中当前设置的音量等级为“21”，并且指针1470被放置在音量减小图标1430上的同时用户的抓取动作通过动作输入单元120被输入一次，则控制器140将显示装置100的当前音量等级设置为“20”。如图7所示，控制器140可以控制显示装置100的音量等级并且还可以改变音量等级信息1420。
即使当抓取动作通过动作输入单元120输入时用户的手被移动，控制器140也可以固定指针1470的位置而不改变它。
若指针1470被放置在音量减小图标1430上的同时用户的抓取动作通过动作输入单元120被连续地输入，则控制器140可以连续地减小显示装置100的当前音量等级。
作为另一示例，若向右移动正处在伸展状态的一只手的动作通过动作输入单元120被输入，则控制器140根据移动动作向右移动指针1470。若在指针1470被放置在如图17所示的信道向下图标1460上的同时用户的抓取动作通过动作输入单元120被输入两次，则控制器140接收频道号减少“2”的频道的广播图像，并显示该广播图像。即，若在显示装置100中当前设置的频道号为“11”，并且指针1470被放置在信道向下图标1460上的同时的抓取动作通过动作输入单元120被输入两次，则控制器140接收频道号“9”的广播图像并显示该广播图像。控制器140可以控制显示装置100的频道并且还可以如图18所示改变频道信息1450。
此外，若指针1470被放置信道向下图标1460上的同时用户的抓取动作通过动作输入单元120被连续地输入，则控制器140可以连续地减小显示装置100的当前频道号。
如上所述，显示装置100允许用户更容易和直观地使用用户动作来控制显示装置，以及仅使用手的形状的改变和手的位置信息来控制显示装置的功能，由此改善用户动作被识别的速度。
在下文中，使用用户动作控制显示装置100的方法将参照图19来说明。
显示装置100确定动作开始命令是否通过动作输入单元120被输入(S1910)。该动作开始命令可以是水平地摇动用户的手多次的动作。在此，可以使用其他各种用于开启动作任务模式的用户命令来替代动作开始命令。其他各种的用户命令可包括：遥控器的特定按钮的输入、显示装置100的特定按钮的输入和用户的特定语音等。
若动作开始命令被输入(S1910-Y)，则显示装置100将显示装置100的模式改变为动作任务模式(S1920)。动作任务模式是其中根据用户动作来控制显示装置100的模式。
若模式被改变为动作任务模式，则显示装置100在显示屏幕上显示多个图标和指针(S1930)。多个图标可以被显示在显示屏幕的左侧区域或右侧区域，并且指针可以被显示在显示屏幕的中心。多个图标可包括用于设置频道的图标和用于设置音量等级的图标。
显示装置100确定第一用户动作是否通过动作输入单元120被输入(S1940)。该用户动作可以是移动正处在伸展状态的用户的手的动作。
若确定第一用户动作被输入(S1940-Y)，则显示装置100根据第一用户动作移动在显示屏幕上的指针(S1950)。
显示装置100确定第二用户动作是否通过动作输入单元120被输入(S1960)。该用户动作可以是握紧该用户的手的抓取动作。
若确定第二用户动作被输入(S1960-Y)，则显示装置100执行与其上放置有指针的图标相对应的功能(S1970)。例如，若指针被放置在音量增大图标上并且第二用户动作被输入，则显示装置100增大在显示装置100中当前设置的音量等级。此外，显示装置100能够根据在指针位于特定图标的情况下第二动作已被输入的次数来执行指针所位于的图标的功能。
即使当第二用户动作被输入时用户的手被移动，该显示装置100也可固定该指针而不是移动该指针。
根据如上所述的用于控制显示装置的方法，用户能够更容易和直观地使用用户动作来控制显示装置100，以及仅使用手的形状的改变和手的位置信息来控制显示装置的功能，由此改善用户动作被识别的速度。
在下文中，根据语音输入方法提供不同语音指导信息的方法的示例性实施例将参照图20至图22来说明。
具体地，若语音开始命令被输入，则控制器140确定所输入的语音开始命令是第一语音开始命令还是第二语音开始命令。在此，语音开始命令是指：使得显示装置100的模式进入由通过语音输入单元110输入的用户语音来控制的语音任务模式。具体地，该第一语音开始命令可以是通过显示装置100的语音输入单元110输入的、包括预设的词的用户语音命令。此外，该第二语音开始命令可以是按下与显示装置100一起操作的外部装置(如，遥控器)的预设按钮的用户命令。然而，该第一和第二语音开始命令仅是示例性实施例，并且因此可以实施为其他类型的语音开始命令。
若确定语音开始命令为第一语音开始命令，则控制器140将显示装置100的模式改变为第一语音任务模式。在此，第一语音任务模式是根据通过显示装置100的语音输入单元输入的用户语音来控制的语音任务模式。
若确定语音开始命令为第二语音开始命令，则控制器140将显示装置100的模式改变为第二语音任务模式。第二语音任务模式是根据输入到与显示装置100一起操作的外部装置的用户语音来控制的语音任务模式。具体地，在第二语音任务模式中，用户的语音可以在外部装置的语音输入按钮被按下时进行输入。可替换地，在第二语音任务模式中，外部装置的语音输入按钮可以被按下并且用户语音可以被输入，然后语音输入按钮可以被再次按下以便输入用户的语音。
具体地，在第一语音任务模式中，显示装置100可以不受输入到外部装置的用户的语音的控制。此外，在第二语音任务模式中，显示装置100可以不受输入到显示装置100的语音输入单元的用户语音的控制。
若显示装置100的模式被改变为语音任务模式，则控制器140显示与语音任务模式相对应的语音指导信息。具体地，若显示装置100的模式被改变为第一语音任务模式，则控制器140显示与第一语音任务模式相对应的第一语音指导信息。此外，若显示装置100的模式被改变为第二语音任务模式，则控制器140显示与第二语音任务模式相对应的第二语音指导信息。
第一语音指导信息和第二语音指导信息将参照图20和图21进行更详细的描述。
图20是示出根据本发明的总体构思的示例性实施例的、第一语音指导信息的视图。如图20所示，第一语音指导信息2000被显示在其上显示有广播图像的屏幕的下端。此外，第一语音指导信息2000包括：告知显示装置的当前模式为第一语音任务模式的图标2010，以及指导用户的语音的多个语音命令2021至2030。多个语音命令包括：关闭电源语音命令2021，外部输入的语音命令2022，频道快捷键的语音命令2023，频道向上/向下的语音命令2024，音量增大/减小的语音命令2025，声音关闭的语音命令2026，和更多(MORE)的语音命令2030。更多的语音命令2030是显示除了所显示的语音命令之外更多语音命令的命令。
在此，告知显示装置的当前模式为第一语音任务模式的图标2010可以是麦克风形状的，如图20中所示的。
具体地，第一语音指导信息2000可以包括与遥控器的按钮相对应的语音命令，其中该按钮可以在要执行时被按下一次。例如，第一语音指导信息2000可包括频道向上/向下的语音命令2024、音量增大/减小的语音命令2025、声音关闭的语音命令2026等。
图21是示出根据本发明的总体构思的示例性实施例的、第二语音指导信息2100的视图。如图21所示，第二语音指导信息2100被显示在其上显示有广播图像的屏幕的下端，即，显示在与显示第一语音指导信息2000的区域相同的区域。此外，第二语音指导信息2100包括图标2110和多个语音命令2121至2126。图标2110告知显示装置的当前模式为第二语音任务模式。多个语音命令2121至2126包括：频道快捷键的语音命令2121，搜索的语音命令2122，外部输入的语音命令2123，频道列表的语音命令2124，书签的语音命令2125，和更多(MORE)的语音命令2126。在此，书签的语音命令2125是显示用户经常使用的功能(如，特定应用的执行)的语音命令。
在此，告知显示装置的当前模式为第二语音任务模式的图标2110可以是遥控器形状，其与如图20中所示的麦克风形状的图标2010不同。因此，通过包括在语音指导信息2000和2100中图标2010和2110，用户可以检查当前语音任务模式是第一语音任务模式还是第二语音任务模式。
此外，第二语音指导信息2100的多个语音命令中的一些可以与第一语音指导信息2000的多个语音命令不同。具体地，第二语音指导信息2100可以不包括与遥控器的按钮相对应的语音命令，其中该按钮可以在要执行时被按下一次。例如，第二语音指导信息2100可不包括频道向上/向下语音命令2024、音量增大/减小语音命令2025、声音关闭的语音命令等。这是因为：在第二语音任务模式中用户持有遥控器，并且因此，对于用户，按下遥控器的按钮比说话要方便得多。
为替代此，第二语音指导信息2100可以包括诸如搜索的语音命令2122、外部输入的语音命令2123、频道列表的语音命令2124以及书签的语音命令2125等语音命令，这些语音命令与如下的功能相对应：为了使用遥控器按钮进入该功能，按钮需要被输入至少两次。
换言之，如上所述，可以根据第一和第二语音任务模式来提供不同类型的语音指导信息。因此，用户可根据多个语音任务模式高效地和方便地控制显示装置100。
若第一语音指导信息2000和第二语音指导信息2100之一被显示，则控制器140根据在相应的语音任务模式中被输入到语音输入单元110的用户输入来控制显示装置100。例如，若当第一语音指导信息400被显示时用户语音“声音关闭(sound off)”通过语音输入单元110被输入，则控制器140可以将显示装置100的音量等级设置为“0”。此外，若当第二语音指导信息2100被显示时用户语音“频道列表”通过语音输入单元110被输入，则控制器140可以在显示器193上显示频道列表。
根据语音输入方法来提供不同任务模式的方法现将参照图22中的流程图进行更详细的描述。
参照图22，在操作(S2210)中，显示装置100接收语音开始命令。在此，语音开始命令是使得显示装置100的模式进入由通过语音输入单元110输入的用户语音来进行控制的语音任务模式的命令。具体地，该第一语音开始命令可以是包括通过显示装置100的语音输入单元110输入的预设的词的用户语音命令，并且，该第二语音开始命令可以是按下与显示装置100一起操作的外部装置(如，遥控器)的预设按钮的用户命令。
在操作(S2220)中，显示装置100确定语音开始命令是否为第一语音开始命令。
若在操作(S2220-Y)中确定语音开始命令为第一语音开始命令，则在操作S2230中显示装置100将显示装置100的模式改变为第一语音任务模式。在此，第一语音任务模式是根据通过显示装置100的语音输入单元110输入的用户语音来控制显示装置100的模式。
在操作(S2240)，该显示装置100显示第一语音指导信息。在此，第一语音指导信息可以包括：告知显示装置100的当前模式为第一语音任务模式的图标，以及用于执行第一语音任务模式的多个语音命令。在此，第一语音指导信息的多个语音命令可包括语音命令--其中若用户的语音被输入则该命令可以立即执行显示装置100的功能--，例如频道向上/向下语音图标、音量增大/减小语音图标以及声音关闭语音图标。
在操作(S2280)中，该显示装置100通过使用第一语音指导信息执行语音任务。
若在操作(S2220-N)中确定语音开始命令不是第一语音开始命令，则在操作(S2250)中显示装置100确定语音开始命令为第二语音开始命令。
在操作(S2260)中，显示装置100将显示装置100的模式改变为第二语音任务模式。在此，第二语音任务模式是根据输入到与显示装置100一起操作的外部装置(如遥控器)的语音输入单元110的用户语音来控制显示装置100的模式。具体地，在第二语音任务模式中，外部装置的预设第二按钮(如，语音输入按钮)可以被按下然后由输入到外部装置的用户语音进行控制。
在操作(S2270)中，该显示装置100显示第二语音指导信息。在此，第二语音指导信息可以包括：告知显示装置的当前模式为第二语音任务模式的图标，以及用于执行第二语音任务模式的多个语音命令。在此，告知显示装置100的当前模式为第二语音任务模式的图标与告知显示装置100的当前模式为第一语音任务模式的图标不同。此外，第二语音指导信息的多个语音命令可以包括具有深度(depth)的语音命令，例如外部输入语音图标、频道列表语音图标和书签语音图标。
在步骤(S2280)中，该显示装置100通过使用第二语音指导信息执行语音任务。
根据上述的控制显示装置100的方法，用户可以通过使用不同类型的语音输入方法来更高效地控制显示装置100。
在下文中，用于执行双手任务模式的双手输入指导GUI的示例性实施例将参照图23至图27来说明。
具体地，若使用双手执行动作任务(在下文中被称为双手任务)的双手开始命令被输入，则控制器140将显示装置100的模式改变为使用双手执行动作任务的双手任务模式。在此，双手任务可以是执行显示屏幕的放大或缩小的任务。如此，替代双手开始命令的另一类型的用户命令可以被用于开启双手任务模式。另一类型的用户命令可以包括：遥控器上特定按钮的输入，显示装置100上特定按钮的输入以及用户的特定动作。
具体地，执行双手任务的双手开始命令可以通过一个一个地顺序使用双手来输入或者通过同时使用双手来输入。
详细地说，若使用一只手的动作开始命令通过动作输入单元120被输入，则控制器140将显示装置100的模式改变为使用一只手执行动作任务的动作任务模式。此外，若当显示装置100的模式被改变为该动作任务模式时使用另一只手的动作开始命令通过动作输入单元120被输入，则控制器140可以意识到双手开始命令已被输入。该使用一只手的动作开始命令可以是左右摇动一只手多次的摇动动作。
若在控制显示装置100的一般控制模式中，同时左右摇动双手多次的摇动动作通过动作输入单元120被输入，则控制器140可以意识到双手开始命令已被输入。
若所述显示装置100的模式被改变为双手任务模式，则控制器140显示执行双手任务的双手输入指导图形用户接口(GUI)。
详细地说，双手输入指导GUI可以是圆形的GUI，其直径是连接与双手的位置相对应的两点的直线。这将参照图23至图25来详细描述。
若双手开始命令通过动作输入单元120被输入，则控制器140将显示装置100的控制模式改变为双手任务模式并显示用于执行动作任务模式的动作指导信息2300。在此，只有当一个一个地顺序地使用双手的动作开始命令被输入时，动作指导信息2300才可以被显示，而若同时使用双手的动作开始命令被输入，动作指导信息2300不可以被显示。
若双手开始命令被输入，则控制器140显示执行双手任务模式的双手输入指导GUI2330。在此，双手输入指导GUI 2330可以是如图23所示的圆形GUI。若该GUI是可以直观地指示用户的双手的位置的形状，则该GUI可以具有不同的形状，例如椭圆形、三角形、正方形和直线。虽然双手输入指导GUI 2330的位置是根据双手的位置来确定的，但双手输入指导GUI2330可以被设置为在显示屏幕的中心区域显示。
若移动用户的双手预定距离的动作通过动作输入单元120被输入，则控制器140移动显示屏幕中的双手输入指导GUI 2330。例如，若当如图23所示的双手输入指导GUI 2330被显示在显示屏幕的中心区域时，向右移动用户的双手预定距离的动作通过动作输入单元120被输入，则如图24所示，控制器140向右移动双手输入指导GUI 2330。
若当在显示屏幕的中心区域中显示双手输入指导GUI 2330时使得双手彼此远离的动作被输入，则所述控制器140基于双手输入指导GUI 2330所显示的区域中的所确定的位置来执行放大。例如，若当如图24中所示的，在显示屏幕的右侧区域中显示双手输入指导GUI 2330时使得双手彼此远离的动作被输入，则如图25中所示的，所述控制器140基于双手输入指导GUI2330所显示的区域中的所确定的位置来放大显示屏幕。此处，使得双手彼此远离的动作可以是：以使双手彼此远离的方向来移动双手的动作，或者固定一只手并且仅移动另一只手以使得双手彼此远离的动作。
若当在显示屏幕的区域中显示双手输入指导GUI 2330时使得双手彼此靠近的动作被输入，则所述控制器140基于所确定的双手输入指导GUI 2330所显示的区域中的位置来执行缩小。在此，双手输入指导GUI 2330所显示的区域中的所确定的位置可以是双手输入指导GUI 2330所显示的区域的中心点或重心。
根据本发明的总体构思的另一示例性实施例，双手输入指导GUI 2330可以被实施为如图26中所示的两个指针GUI 2630-1和2630-2，而不是图23至25所示的圆形GUI的GUI。在此，两个指针2630-1和2630-2中的每一个可以是圆形、椭圆形，手掌形状和箭头形状，但不限于此。
若当两个指针2630-1和2630-2被显示在显示屏幕的区域中时使得双手彼此远离的动作被输入，则控制器140可以基于所确定的与两个指针2630-1和2630-2有关的位置来执行放大。若当两个指针2630-1和2630-2被显示在显示屏幕的区域中时使得双手彼此靠近的动作被输入，则控制器140可以基于所确定的与两个指针2630-1和2630-2有关的位置来执行缩小。在此处，所确定的与两个指针2630-1和2630-2有关的位置可以是连接两个指针的中心点、或者可以被设置为具有包括两个指针的轮廓线的图形(例如，圆形、椭圆形、三角形和正方形)的中心点或重心。此外，两个指针之一的位置可以被设置为所确定的位置。在这种情况下，与两个指针相对应的双手当中的固定的手所对应的指针可以作为基础，从而显示屏幕可以根据移动的手的动作来放大或缩小。
若两个指针2630-1和2630-2被显示并且移动一只手，则与所移动的一只手相对应的两个指针2630-1和2630-2之一的位置，根据该一只手的动作来移动。若双手都被移动，则两个指针的位置都被移动。当两个指针的位置都被移动时，显示屏幕被放大或缩小。
如上所述，用户可以更直观地和方便地通过使用双手来执行屏幕的放大和缩小，并且提供类似于使用多点触摸(其在触摸输入适用的显示装置中执行)的屏幕的放大/缩小的用户体验。
使用双手执行动作任务的方法现将参照图27中的流程图进行描述。
在操作(S2710)中，显示装置100确定双手开始命令是否已被输入。此处，双手开始命令可以通过一个一个地顺序使用双手来输入或者可以通过同时使用双手来输入。
详细地说，若使用一只手的动作开始命令通过动作输入单元120被输入，然后使用另一只手的动作开始命令被输入，则显示装置100可以意识到双手开始命令已被输入。若同时左右摇动双手多次的摇动动作通过所述动作输入单元120被输入，则所述显示装置100可以意识到双手开始命令已被输入。
若在操作(S2710-Y)中确定双手开始命令已被输入，则在操作(S2720)中显示装置100将其控制模式改变为双手任务模式。此处，双手任务模式可以是通过使用双手的动作来控制显示装置100的模式，并且双手任务可以是放大或缩小显示屏幕的任务。
若所述显示装置100的模式被改变为双手任务模式，则在操作(S2730)中，显示装置100生成并显示执行双手任务的双手输入指导GUI。在此，双手输入指导GUI可以如图23中所示的圆形的双手控制GUI 2330，或者如图26中所示的两个指针2630-1和2630-2。然而，这仅是示例性实施例，并且因此另一类型的双手控制GUI可以用能直观地指示用户双手的位置的形状来显示，例如椭圆形、三角形、正方形和直线等形状。
在操作(S2740)中，该显示装置100通过使用双手输入指导GUI执行双手任务。
详细地说，若双手输入指导GUI是圆形的双手控制GUI，并且移动双手预定距离的动作通过动作输入单元120被输入，则显示装置100可以移动圆形的双手控制GUI。若使得双手彼此远离或靠近的动作被输入，则显示装置100可以基于圆形的双手控制GUI的显示位置来放大或缩小显示屏幕。
若双手输入指导GUI是两个指针并且移动一只手的动作通过动作输入单元120被输入，则显示装置100移动两个指针中与所移动的手相对应的一个指针。若使得双手彼此远离或靠近的动作被输入，则显示装置100可以基于两个指针的中心位置来放大或缩小显示屏幕。
根据本发明总体构思的上述各种示例性实施，用户可以更直观地和方便地通过使用双手控制GUI来执行显示屏幕的放大和缩小，并且提供类似于使用多点触摸(其在触摸输入适用的显示装置中执行)的屏幕的放大/缩小的用户体验。
当输入语音时，若语音识别错误发生则输出反馈消息的方法现将参照图28至图33来描述。
详细地说，若语音开始命令被输入，则控制器140将显示装置100的模式改变为语音任务模式。在此，语音任务模式是通过语音输入单元110输入的用户语音来控制显示装置100的模式。
如上所述，语音开始命令可以是包括通过显示装置100的语音输入单元110输入的预设的词的用户语音命令(在下文中被称为第一语音开始命令)，或者，按下与显示装置100一起操作的外部装置(如遥控器)的预设按钮的用户命令(在下文中被称为第二语音开始命令)。具体地，若第一语音开始命令被输入，则控制器140将显示装置100的模式改变为第一语音任务模式。在此，第一语音任务模式是根据通过显示装置100的语音输入单元输入的用户语音来控制的语音任务模式。若第二语音开始命令被输入，则控制器140将显示装置100的模式改变为第二语音任务模式。第二语音任务模式是根据输入到与显示装置100一起操作的外部装置的用户语音来控制的语音任务模式。具体地，在第二语音任务模式中，用户的语音可以在外部装置的语音输入按钮被按下时进行输入。
若显示装置100的模式被改变为第一和第二语音任务模式之一，则控制器140控制显示器193显示用于执行语音任务模式的、指导用户语音的语音指导信息。在此，语音指导信息2800可包括：指示当前显示装置的模式的模式指导图标2810，以及指导用户的语音的多个语音命令2821至2826。多个语音命令可以包括：关闭电源的语音命令2821，外部输入的语音命令2822，频道快捷键的语音命令2823，频道向上/向下的语音命令2824，音量增大/减小的语音命令2825，声音关闭的语音命令2826，和更多(MORE)的语音命令2830。在此，更多的语音命令2830是看到除了所显示的语音命令之外的更多语音命令的命令。
此外，模式指导图标2810根据第一语音任务模式和第二语音任务模式而不同。例如，在第一语音任务模式中的模式指导图标2810可以包括具有麦克风形状的图标，而在第二语音任务模式中的模式指导图标2810可以包括具有遥控器形状的图标。
若当通过使用语音指导信息2800执行语音任务时发生语音识别错误，则如图28中所示，控制器140显示指导语音识别错误的多个反馈消息2850中的一个。此处，语音识别错误发生的情况可包括以下各项中的至少一者：通过语音输入单元110输入的用户的语音太小的情况、语音DB(数据库)不包括与通过语音输入单元110输入的用户的语音的识别结果匹配的命令的情况，以及用户缺乏操作显示装置100的经验的情况。
具体地，控制器140可以根据语音任务模式和语音识别错误的类型来显示存储在存储单元130中的多个反馈消息2850之一。
详细地说，控制器140可以根据在第一语音任务模式中发生的语音识别错误的情况和在第二语音任务模式中发生的语音识别错误的情况，来不同地显示反馈消息。例如，若语音识别错误发生在第一语音任务模式中，则控制器140可以显示图29中所示的多个反馈消息2901到2913中的一个。若语音识别错误发生在第二语音任务模式中，则控制器140可以显示图30到32中所示的多个反馈消息3001到3015、3101到3107和3201到3206中的一个。
控制器140还可根据第二语音任务模式中的语音识别错误的类型，来不同地显示反馈消息450。例如，若语音DB不包括与通过语音输入单元110输入的用户语音的识别结果相匹配的命令或者由于用户的语音小于预设的值而不能识别用户语音，则控制器140可以显示图30中所示的多个反馈消息3001到3015中的一个。若外部装置的语音输入按钮在输入用户语音后被连续地按下，则控制器140显示图31中所示的多个反馈消息3101至3107中的一个。若在外部装置的语音输入按钮被按下之后持续预设时间没有输入用户语音，则控制器140可显示图32中所示的多个反馈消息3201至3206中的一个。
控制器140还可以在第一语音识别发生中显示根据语音任务模式和语音识别错误的类型默认的反馈消息。例如，若语音识别错误发生在第一语音任务模式中，则控制器140可以显示图29中所示的多个反馈消息当中的第一反馈消息2901“请再说一次”。若在第二语音任务模式未识别出用户语音输入，则控制器140可以显示图30中所示的多个反馈消息当中的第一反馈消息3001“请再说一次”。若即使在第二语音任务模式中输入用户语音之后语音输入按钮被按下到达预设时间，则控制器140可以显示图31所示的多个反馈消息当中的第一反馈消息3101“请将您的手从按钮移开”。若在第二语音任务模式中输入用户语音之后语音输入按钮被按下未达到预设时间，则控制器140可以显示图32所示的多个反馈消息当中的第一反馈消息3201“请说出你需要的命令”。
如上所述，根据语音任务模式和语音识别错误的类型默认的反馈消息可以在制造时被设置并可以根据用户的处理而改变。
若语音识别错误重复地发生，则控制器140可以随机地显示除了默认的反馈消息之外的其他反馈消息中的一个。例如，若语音识别错误在第一语音任务模式中反复发生，则控制器140可以随机地显示图29中所示的除了第一反馈消息2901之外的其他反馈消息2902到2913中的一个。若在第二语音任务模式中用户语音输入反复地未识别到，则控制器140可以显示图30中所示的除了第一反馈消息3001之外的其他反馈消息3002至3015中的一个。若即使在第二语音任务模式中输入用户语音之后语音输入按钮还被持续地按下，则控制器140可以每预设时间(如每10秒)随机地显示图31中所示的、除了第一反馈消息3101之外的其他反馈消息3102至3107中的一个。若在第二语音任务模式中按下语音输入按钮之后持续预设时间没有用户语音被连续地输入，则控制器140可以每预设时间(如每10秒)随机地显示图32中所示的、除了第一反馈消息3201之外的其他反馈消息3202至3206中的一个。
如上所述，多个反馈消息可以根据语音识别错误和语音任务模式来不同地提供。因此，用户可以准确地检测在语音识别中的错误。此外，用户可得到与显示装置说话的效果，并且可以增加娱乐元素。
当语音识别错误在显示装置100中发生时提供反馈消息的方法现将参照图33更详细地描述。
参照图33，在操作(S3310)中，显示装置100确定语音开始命令是否已被输入。在此，语音开始命令是使得显示装置100的模式改变为语音任务模式的用户命令，并且可以包括第一和第二语音开始命令。第一语音开始命令是通过显示装置100的语音输入单元110输入的、包括预设的词的用户语音命令，并且，该第二语音开始命令是按下与显示装置100一起操作的外部装置(如，遥控器)的预设按钮的用户命令。
若在操作(S3310-Y)中确定语音开始命令已被输入，则在操作(S3320)中显示装置100将其模式改变为语音任务模式。在此，若语音开始命令为第一语音开始命令，则显示装置100将其模式改变为第一语音任务模式，其是由通过显示装置100的语音输入单元110输入的用户语音来控制的。若语音开始命令为第二语音开始命令，则显示装置100将其模式改变为第二语音任务模式，其是由通过外部装置的语音输入单元110输入的用户语音来控制的。
当执行语音任务模式，显示装置100在操作(S3330)中确定是否已发生语音识别错误。此处，语音识别错误发生的情况可包括以下各项中的至少一者：通过语音输入单元110输入的用户语音低于预设值的情况、语音DB(数据库)不包括与通过语音输入单元110输入的用户语音的识别结果匹配的命令的情况，以及用户缺乏操作显示装置100的经验的情况。
若在操作(S3330-Y)中确定语音识别错误已发生，则在操作(S3340)中显示装置100显示多个反馈消息中的一个。在此，反馈消息可以根据语音任务模式和语音识别错误而不同地显示。例如，若语音识别错误发生在第一语音任务模式中，则显示装置100显示图29中所示的多个反馈消息2901到2913中的一个。若语音识别错误发生在第二语音任务模式中，则显示装置100可以显示图30到32中所示的多个反馈消息3001到3015、3101到3107和3201到3206中的一个。在此，若所述语音识别错误第一次发生，则所述显示装置100可以多个反馈消息中默认的一个。
在操作(S3350)中，显示装置100确定语音识别错误是否已反复地发生。
若在操作(S3350-Y)中确定语音识别错误已反复地发生，则在操作(S3360)中显示装置100随机地显示多个反馈消息中的其他的反馈消息。例如，若语音识别错误在第一语音任务模式中反复发生，则显示装置100可以随机地显示图29中所示的除了第一反馈消息2901之外的其他反馈消息2902到2913中的一个。若在第二语音任务模式中用户语音输入反复地未被识别到，则显示装置100可以显示图30中所示的除了第一反馈消息3001之前的其他反馈消息3002至3015中的一个。若即使在第二语音任务模式中输入用户语音之后语音输入按钮还被持续地按下，则显示装置100可以每预设时间(如每10秒)随机地显示图31中所示的、除了第一反馈消息3101之外的其他反馈消息3102至3107中的一个。若在第二语音任务模式中按下语音输入按钮之后持续预设时间没有用户语音被连续地输入，则显示装置100可以每预设时间(如每10秒)随机地显示图32中所示的、除了第一反馈消息3201之外的其他反馈消息3202至3206中的一个。
如上所述，多个反馈消息可以根据语音识别错误和语音任务模式来不同地提供。因此，用户可以准确地检查在语音识别中的错误。此外，用户可得到对显示装置说话的效果，并且可以增加娱乐元素。
在下文中，根据应用或者用户喜好提供不同指导信息的方法的示例性实施例将参照图34至图38来说明。
控制器140确定指示进入语音任务模式的语音开始命令是否已被输入。若确定语音开始命令已被输入，则控制器140将显示装置100的模式改变为语音任务模式。如此处使用的，‘语音任务模式’是指：其中显示装置100由通过语音输入单元110输入的用户语音来控制的模式。如上述的，可以使用其他各种用于开启语音任务模式的用户命令来替代语音开始命令。其他各种的用户命令可包括：遥控器的特定按钮的输入、显示装置100的特定按钮的输入和用户的特定动作等。在语音任务模式中，控制器140在显示屏幕上显示语音指导信息。语音指导信息可包括指导用户语音的多个语音命令以执行语音任务模式。
响应于用户的特定命令，控制器140用另一语音命令来替换包括在语音指导信息中的多个语音命令中的至少一个。此处所使用的，用户的‘特定命令’可以指指示执行特定应用或执行用户喜好的语音命令的用户命令。
语音指导信息可以包括：固定命令区域，在该区域中多个语音命令当中的部分语音命令(如“电源关闭”语音命令)被固定地显示；以及可变命令区域，在该区域中语音命令是变化的。因此，响应于用户的特定命令，控制器140可以用不同的命令来替换包括在可变区域中的语音指导信息的语音命令。
在一个实施例，响应于指示执行特定应用的用户命令，控制器140可执行与该用户命令相对应的应用。然后控制器140可以用所执行的应用所必须的语音命令来替换包括在语音指导信息中的多个语音命令中的至少一个命令。
应用所必须的语音命令可以在该应用的安装期间被存储在显示装置100的存储单元130处。然后，响应于指示执行该应用的命令，控制器140可以读出所存储的应用所必需的语音命令并在显示器193上显示所读出的语音命令。
在另一实施例中，响应于指示显示用户喜好的语音命令的用户命令，控制器140可以用用户喜好的命令来替换在语音指导信息中包括的多个语音命令当中的至少一个命令。用户喜好的语音命令可以是通过使用语音命令设置菜单由用户事先登记的语音命令。
所改变的语音指导信息可包括：返回到改变之前的语音指导信息的语音命令。作为示例，语音命令“完成(Finish)”可以被包括以作为：返回到改变之前的语音指导信息的语音命令。
因此，用户能够通过利用对于每个应用最佳以及满足用户的喜好的语音指导信息来执行语音任务模式。这些实施例将在下文中参照图34至图37进行更详细的说明。
在示例性实施例中，控制器140经由广播接收器150从外部广播站接收广播信号，并对所接收的广播信号执行信号处理以在显示屏幕3400上显示广播信号。参照图4，控制器140接着在显示器193上显示经信号处理的广播图像。
当语音开始命令通过语音输入单元110输入时，控制器140改为语音任务模式。如此处使用的，‘语音开始命令’是指：指示将操作改变为语音任务模式的用户命令，在该语音任务模式中显示装置100由输入到语音输入单元110的用户语音来控制。可以使用其他各种用于开启语音任务模式的用户命令来替代语音开始命令。其他各种的用户命令可包括：遥控器的特定按钮的输入、显示装置100的特定按钮的输入和用户的特定语音等。
在语音任务模式中，控制器140显示第一语音指导信息3500以执行语音任务模式(图35)。第一语音指导信息3500可以被显示在所显示的广播图像的底部。
第一语音指导信息3500可包括指示显示装置的当前模式为语音任务模式的图标3510，以及指导用户语音的多个语音命令3521至3526和3530。多个语音命令可以包括：关闭电源的语音命令3521，外部输入的语音命令3522，快速频道改变的语音命令3523，频道向上/向下的语音命令3524，音量增大/减小的语音命令3525，静音的语音命令3526，和更多(MORE)的语音命令3530。通过使用更多的语音命令3530，用户可以查看比当前显示的更多的语音命令。关闭电源的语音命令3521和更多的语音命令3530可以被放置在固定地显示的固定命令区域，而外部输入的语音命令3522、快速频道改变的语音命令3523、频道向上/向下的语音命令3524、音量增大/减小的语音命令3525、静音的语音命令3526可以被放置在接受改变的可改变命令区域。
参照图36，响应于指示执行地图应用的命令，控制器140可以执行地图应用和将第一语音指导信息3500改变为与地图应用相对应的第二语音指导信息3600并可以包括图标3610。
具体而言，随着执行地图应用，控制器140读出存储在存储单元130中语音命令当中的、与地图应用相对应的语音命令。然后控制器140用所读出的语音命令改变显示在可改变命令区域中的语音命令。
作为示例，参照图36，控制器140显示电源关闭的语音命令3621和更多的语音命令3630，如那些被显示在固定命令区域中的一样。然而，控制器140可以用外部输入的语音命令3622、位置查找器的语音命令3623、指路(directions-giving)的语音命令3624和结束的语音命令3625，来替换外部输入的语音命令3522、快速频道改变的语音命令3523、频道向上/向下的语音命令3524、音量增大/减小的语音命令3525和静音的语音命令3526。结束的语音命令3625指导用户语音以返回改变之前的语音指导信息。随着结束的语音命令3625的执行，控制器140可以一起结束相应的应用。
因此，用户能够容易地从语音指导信息中查明通过使用地图应用当前可用的功能。
在另一实施例中，若用于执行喜好的语音命令的用户命令(例如，“最喜爱的(Favorite)”用户语音)利用如图36中所显示的第一语音指导信息被输入，则控制器140将语音指导信息3500改变为包括用户喜好的语音命令的第三语音指导信息3700，如图37中。
更具体地说，当用于执行用户喜好的语音命令的用户命令被输入时，控制器140读出存储在存储单元130中的用户喜好的语音命令。此外，控制器140将显示在可改变命令区域中的语音命令改变为所读出的语音命令。
例如，如图37中所示的，控制器140的显示可以按原样包括显示在固定命令区域的图标3510、电源关闭的语音命令3721和更多的语音命令3730。此外，控制器140可以将显示在可改变命令区域中的外部输入的语音命令3522、频道快捷键的语音命令3523、频道向上/向下的语音命令3524、音量增大/减小的语音命令3525、声音关闭的语音命令3526，改变为因特网的语音命令3722、3D的语音命令3723、组织结构图的语音命令3724和结束的语音命令3725。在此处，结束的语音命令3725是指导用户语音输入以返回改变之前的第一语音指导信息的语音命令。
因此，用户能够使用他/她喜好的用户命令来控制显示装置100。
图38是示出根据示例性实施例的、用于说明改变语音指导信息中的语音命令的方法的流程图。
首先，显示装置100在(S3810)确定语音开始命令是否已被输入。在此处，语音开始命令是将显示装置100的模式转换为语音任务模式的用户命令。
当语音开始命令被输入时(S3810-Y)，显示装置100将显示装置100的控制模式转换为语音任务模式(S3820)。在此处，语音任务模式是由通过语音输入单元110输入的用户语音来控制的模式。
在语音任务模式中，显示装置100在(S3830)显示语音指导信息。在此处，若显示装置100执行广播接收功能，则语音指导信息包括用于控制广播接收功能的语音命令。
在S3840，显示装置100确定指示改变语音命令的用户命令是否被输入。作为示例，显示装置100确定指示执行特定应用(如地图应用)的用户命令是否被输入，以及指示执行显示最喜爱的语音命令的用户命令是否被输入。
在(S3840-Y)，若确定指示改变语音命令的用户命令被输入，则在(S3850)，显示装置100改变包括在语音指导信息中的语音命令中的至少一个。在包括在语音指导信息的语音命令之中，显示在可改变命令区域上的用户命令可以是将被改变的至少一个语音命令。
作为示例，在包括在语音指导信息的语音命令之中，若指示执行特定应用的用户命令被输入为改变语音命令的命令，则显示装置100可以用与该特定应用相对应的语音命令来替换显示在可改变命令区域上的语音命令。在包括在语音指导信息的语音命令之中，若指示显示最喜爱的语音命令的用户命令被输入为改变语音命令的命令，则显示装置100用最喜爱的语音命令来替换显示在可改变命令区域上的语音命令。
在步骤(S3860)中，该显示装置100使用改变的语音指导信息来执行语音任务。
如上所述，由于根据在显示装置上执行的应用和用户喜好来提供不同的语音指导信息，因此用户能够更方便和高效地控制该显示装置。
虽然在参照图34至图38的说明中假设语音指导信息被改变，但这仅仅是为了举例的目的而编写的。因此，实施例的技术概念同样适用于动作命令被包括在动作指导信息中来执行动作任务模式的示例。
具体地，若动作开始命令通过动作输入单元120被输入，则控制器140将显示装置的模式改变为动作任务模式，其中显示装置根据用户的动作来控制。控制器140然后在显示装置900上显示包括用于执行动作任务模式的多个动作命令的动作指导信息。
若在动作指导信息被显示的状态中指示执行应用的命令被输入，则控制器140可以用与该应用相对应的动作命令来替换多个动作命令中的至少一个。
如上所述，由于动作命令根据在显示装置上执行的应用而改变，因此用户能够更方便和高效地控制该显示装置。
同时，在以上实施例中，用于控制显示装置100的外部设备为遥控器，但这仅仅是示例性实施例，因此便携式终端，例如智能电话、PDA，可以被用于控制显示装置100。
执行根据各种实施例的控制方法的程序代码可以被记录在各种类型的记录介质上。具体而言，程序代码可以被记录在终端可读的、各种记录介质上，例如RAM(随机存取存储器)，闪存，ROM(只读存储器)，EPROM(可擦除可编程ROM)，EEPROM(电可擦除可编程ROM)，寄存器，硬盘，可移动盘，存储卡，USB存储器，或CD-只读存储器。
虽然已示出并描述了一些示例性实施例，但本领域技术人员会理解，在不脱离本发明构思的原理和精神的情况下，可对这些示例性实施例进行改变，本发明的范围在权利要求及其等同物中限定。

Claims (10)

1.一种设置显示装置的视角的方法，该方法包括：
响应于预定事件的发生，在显示屏幕的区域上显示视角指导用户接口(UI)，其指导以设置被连接到所述显示装置的相机的视角；以及，
使用所述视角指导UI来设置该相机的视角,
其中所述视角指导UI包括在调整相机的位置和视角时拍摄的图像,
其中在所述视角的设置期间，所述视角指导UI包括显示正被所述相机拍摄的图像的屏幕，
其中所述设置包括：
调整所述相机使得相机的视角自动地以预定的速度向预定的方向移动，
当在调整所述相机期间用户命令被输入时，将在所述用户命令被输入的时间点的视角设置为所述相机的视角。
2.如权利要求1所述的方法，其中，
当进入动作任务模式的事件发生时，所述视角指导UI不被显示。
3.如权利要求1所述的方法，其中所述设置还包括：
根据使用外部设备的用户操纵来调整所述相机，
当在调整所述相机期间用户命令被输入时，将在所述用户命令被输入的时间点的视角设置为所述相机的视角。
4.如权利要求1所述的方法，其中所述预定事件是如下事件中的一个：在所述显示装置的初始安装期间电源被施加到所述显示装置的事件、动作任务模式被开启的事件、以及从所述显示装置的控制菜单当中选择视角设置菜单的事件。
5.如权利要求1所述的方法，其中所述相机是动作捕捉相机，其在动作任务模式中拍摄用户的动作以用于控制所述显示装置。
6.一种显示装置，包括：
相机，被配置为拍摄用户的动作；
显示器；以及
控制器，其响应于预定事件的发生，在所述显示器的区域上显示视角指导用户接口(UI)，所述视角指导UI指导对所述相机的视角的设置，并且使用所述视角指导UI来设置所述相机的视角，
其中所述视角指导UI包括在调整相机的位置和视角时拍摄的图像，
其中在所述视角的设置期间，所述视角指导UI包括显示正被所述相机拍摄的图像的屏幕，
其中所述控制器调整所述相机使得相机的视角自动地以预定的速度向预定的方向移动，
其中，当在调整所述相机期间用户命令被输入时，所述控制器将在所述用户命令被输入的时间点的视角设置为所述相机的视角。
7.如权利要求6所述的显示装置，其中，当进入动作任务模式的事件发生时，所述控制器不显示所述视角指导UI并且显示由所述显示装置提供的屏幕。
8.如权利要求6所述的显示装置，其中所述控制器根据使用外部设备的用户操纵来调整所述相机，
其中，当在调整所述相机期间用户命令被输入时，所述控制器将在所述用户命令被输入的时间点的视角设置为所述相机的视角。
9.如权利要求6所述的显示装置，其中所述预定事件是如下事件中的一个：在所述显示装置的初始安装期间电源被施加到所述显示装置的事件、动作任务模式被开启的事件、以及从所述显示装置的控制菜单当中选择视角设置菜单的事件。
10.如权利要求6所述的显示装置，其中所述相机是动作捕捉相机，其在动作任务模式中拍摄用户的动作以用于控制所述显示装置。
CN201380047392.0A 2012-02-09 2013-09-12 显示装置及用于控制该显示装置的方法 Expired - Fee Related CN104620593B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201261596926P 2012-02-09 2012-02-09
KR1020120101158A KR102066564B1 (ko) 2012-02-09 2012-09-12 전자 장치 및 그의 제어 방법
KR10-2012-0101158 2012-09-12
PCT/KR2013/008262 WO2014042445A1 (en) 2012-02-09 2013-09-12 Display apparatus and method for controlling display apparatus thereof

Publications (2)

Publication Number Publication Date
CN104620593A CN104620593A (zh) 2015-05-13
CN104620593B true CN104620593B (zh) 2018-11-06

Family

ID=53174731

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380047392.0A Expired - Fee Related CN104620593B (zh) 2012-02-09 2013-09-12 显示装置及用于控制该显示装置的方法

Country Status (4)

Country Link
US (1) US9225891B2 (zh)
EP (1) EP2626771B1 (zh)
CN (1) CN104620593B (zh)
WO (1) WO2014042445A1 (zh)

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4235365A3 (en) * 2011-08-05 2023-11-01 Samsung Electronics Co., Ltd. Method for controlling electronic apparatus based on voice recognition and motion recognition, and electronic apparatus applying the same
JP2013106315A (ja) * 2011-11-16 2013-05-30 Toshiba Corp 情報端末、家電機器、情報処理方法および情報処理プログラム
KR20140085061A (ko) * 2012-12-27 2014-07-07 삼성전자주식회사 디스플레이 장치 및 이의 제어 방법
USD731549S1 (en) * 2013-01-04 2015-06-09 Samsung Electronics Co., Ltd. Display screen or portion thereof with icon
US10268446B2 (en) * 2013-02-19 2019-04-23 Microsoft Technology Licensing, Llc Narration of unfocused user interface controls using data retrieval event
KR102088910B1 (ko) * 2013-03-15 2020-03-13 엘지전자 주식회사 영상표시장치 및 그 제어방법
USD758381S1 (en) * 2013-12-10 2016-06-07 Tencent Technology (Shenzhen) Company Limited Display screen portion with graphical user interface
USD752600S1 (en) * 2013-12-10 2016-03-29 Tencent Technology (Shenzhen) Company Limited Display screen portion with graphical user interface
USD755245S1 (en) * 2013-12-30 2016-05-03 Samsung Electronics Co., Ltd. Display screen or portion thereof with icon
KR102171817B1 (ko) 2014-03-14 2020-10-29 삼성전자주식회사 디스플레이 장치 및 제어 방법
KR102302233B1 (ko) * 2014-05-26 2021-09-14 삼성전자주식회사 사용자 인터페이스 제공 장치 및 방법
KR102146858B1 (ko) 2014-06-03 2020-08-21 삼성전자주식회사 촬영 장치 및 촬영 장치의 비디오 생성방법
KR102261552B1 (ko) * 2014-06-30 2021-06-07 삼성전자주식회사 음성 명령어 제공 방법 및 이를 지원하는 전자 장치
USD761833S1 (en) * 2014-09-11 2016-07-19 Yahoo! Inc. Display screen with graphical user interface of a menu for a news digest
US9992317B2 (en) * 2015-02-16 2018-06-05 Ford Global Technologies, Llc System and method of facilitating communication between a mobile device and vehicle computer system
US9767682B2 (en) * 2016-01-26 2017-09-19 Spb Tv Ag Remote control unit and a method for controlling electric devices by using such a remote control unit
JP6659514B2 (ja) 2016-10-12 2020-03-04 東芝映像ソリューション株式会社 電子機器及びその制御方法
CN108124167A (zh) * 2016-11-30 2018-06-05 阿里巴巴集团控股有限公司 一种播放处理方法、装置和设备
US10582264B2 (en) * 2017-01-18 2020-03-03 Sony Corporation Display expansion from featured applications section of android TV or other mosaic tiled menu
KR102362850B1 (ko) * 2017-04-14 2022-02-15 삼성전자주식회사 디스플레이장치, 디스플레이 시스템 및 디스플레이장치의 제어방법
CN110798609A (zh) * 2018-08-02 2020-02-14 光宝电子(广州)有限公司 影像显示方法、影像显示***以及虚拟窗户
KR102196628B1 (ko) * 2019-01-30 2020-12-30 주식회사 오투오 Usb-c dmp 디바이스

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101388980A (zh) * 2007-09-14 2009-03-18 奇景光电股份有限公司 控制电视方法
WO2011059202A2 (en) * 2009-11-11 2011-05-19 Lg Electronics Inc. Display device and method of controlling the same
CN202218349U (zh) * 2011-08-30 2012-05-09 福州瑞芯微电子有限公司 扩大三维可视范围的动态视障三维显示结构
CN102638690A (zh) * 2011-02-15 2012-08-15 薛虎玲 宽视角智能3d显示器及其方法

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3382276B2 (ja) * 1993-01-07 2003-03-04 キヤノン株式会社 電子機器及びその制御方法
US8154581B2 (en) * 2002-10-15 2012-04-10 Revolutionary Concepts, Inc. Audio-video communication system for receiving person at entrance
AU2003303787A1 (en) 2003-01-22 2004-08-13 Nokia Corporation Image control
JP4297804B2 (ja) * 2004-02-19 2009-07-15 任天堂株式会社 ゲーム装置及びゲームプログラム
US7626569B2 (en) 2004-10-25 2009-12-01 Graphics Properties Holdings, Inc. Movable audio/video communication interface system
KR100687737B1 (ko) * 2005-03-19 2007-02-27 한국전자통신연구원 양손 제스쳐에 기반한 가상 마우스 장치 및 방법
CN101697572B (zh) * 2005-09-09 2012-02-22 佳能株式会社 摄像设备
EP2082314A2 (en) 2006-10-18 2009-07-29 Koninklijke Philips Electronics N.V. Electronic system control using surface interaction
US9767681B2 (en) 2007-12-12 2017-09-19 Apple Inc. Handheld electronic devices with remote control functionality and gesture recognition
JP4720874B2 (ja) * 2008-08-14 2011-07-13 ソニー株式会社 情報処理装置、情報処理方法および情報処理プログラム
US8508580B2 (en) * 2009-07-31 2013-08-13 3Dmedia Corporation Methods, systems, and computer-readable storage media for creating three-dimensional (3D) images of a scene
US8436893B2 (en) * 2009-07-31 2013-05-07 3Dmedia Corporation Methods, systems, and computer-readable storage media for selecting image capture positions to generate three-dimensional (3D) images
KR101694820B1 (ko) * 2010-05-07 2017-01-23 삼성전자주식회사 사용자 위치 인식 방법 및 장치
US9141189B2 (en) 2010-08-26 2015-09-22 Samsung Electronics Co., Ltd. Apparatus and method for controlling interface
KR101815020B1 (ko) 2010-08-26 2018-01-31 삼성전자주식회사 인터페이스 제어 장치 및 방법
EP2789159A4 (en) * 2011-12-07 2015-06-17 Intel Corp GUIDED IMAGE CAPTURE
US20130198669A1 (en) * 2012-01-13 2013-08-01 University Of Southern California System and method for reservoir visualization

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101388980A (zh) * 2007-09-14 2009-03-18 奇景光电股份有限公司 控制电视方法
WO2011059202A2 (en) * 2009-11-11 2011-05-19 Lg Electronics Inc. Display device and method of controlling the same
CN102638690A (zh) * 2011-02-15 2012-08-15 薛虎玲 宽视角智能3d显示器及其方法
CN202218349U (zh) * 2011-08-30 2012-05-09 福州瑞芯微电子有限公司 扩大三维可视范围的动态视障三维显示结构

Also Published As

Publication number Publication date
US9225891B2 (en) 2015-12-29
CN104620593A (zh) 2015-05-13
WO2014042445A1 (en) 2014-03-20
EP2626771B1 (en) 2018-01-10
US20130208135A1 (en) 2013-08-15
EP2626771A1 (en) 2013-08-14

Similar Documents

Publication Publication Date Title
CN104620593B (zh) 显示装置及用于控制该显示装置的方法
EP2960882B1 (en) Display device and operating method thereof
JP5819269B2 (ja) 電子装置及びその制御方法
JP6111030B2 (ja) 電子装置及びその制御方法
JP5746111B2 (ja) 電子装置及びその制御方法
JP6482911B2 (ja) 機器制御方法および電気機器
CN103188541B (zh) 电子设备和控制电子设备的方法
CN103187054B (zh) 电子装置和控制电子装置的方法
KR102158315B1 (ko) 음성 제어를 수행하는 디스플레이 장치 및 그 음성 제어 방법
JP2013037689A (ja) 電子装置及びその制御方法
CN107396154A (zh) 电子设备以及提供其用户界面的方法
JP2014532933A (ja) 電子装置及びその制御方法
AU2012216583B2 (en) Electronic apparatus and method for controlling thereof
KR102194011B1 (ko) 영상 표시 기기 및 그의 동작 방법
KR20140085055A (ko) 전자 장치 및 그의 제어 방법
KR102066564B1 (ko) 전자 장치 및 그의 제어 방법
JP2015535971A (ja) ディスプレイ装置及びその制御方法
CN103218038A (zh) 电子设备及其控制方法
EP4345817A1 (en) Display device and operating method thereof
KR102393774B1 (ko) 음성 인식 장치 및 그 제어방법
KR20200141839A (ko) 디스플레이 장치
KR20130078489A (ko) 전자 장치 및 이의 화각 설정 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20181106

Termination date: 20210912

CF01 Termination of patent right due to non-payment of annual fee