CN112786036A - 显示设备与内容显示方法 - Google Patents
显示设备与内容显示方法 Download PDFInfo
- Publication number
- CN112786036A CN112786036A CN202010275241.2A CN202010275241A CN112786036A CN 112786036 A CN112786036 A CN 112786036A CN 202010275241 A CN202010275241 A CN 202010275241A CN 112786036 A CN112786036 A CN 112786036A
- Authority
- CN
- China
- Prior art keywords
- display
- voice
- controller
- display screen
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 68
- 230000003993 interaction Effects 0.000 claims abstract description 71
- 238000004891 communication Methods 0.000 claims abstract description 59
- 230000008569 process Effects 0.000 claims abstract description 26
- 238000012790 confirmation Methods 0.000 claims description 6
- 230000001960 triggered effect Effects 0.000 claims description 6
- 230000006870 function Effects 0.000 description 54
- 238000010586 diagram Methods 0.000 description 33
- 230000002452 interceptive effect Effects 0.000 description 20
- 238000013461 design Methods 0.000 description 19
- 238000012545 processing Methods 0.000 description 19
- 238000006243 chemical reaction Methods 0.000 description 9
- 238000001514 detection method Methods 0.000 description 8
- 239000004973 liquid crystal related substance Substances 0.000 description 7
- 230000005540 biological transmission Effects 0.000 description 6
- 230000009977 dual effect Effects 0.000 description 6
- 230000033001 locomotion Effects 0.000 description 6
- 230000003287 optical effect Effects 0.000 description 6
- 230000004044 response Effects 0.000 description 6
- 230000008859 change Effects 0.000 description 5
- 230000000694 effects Effects 0.000 description 5
- 230000005236 sound signal Effects 0.000 description 5
- 230000009471 action Effects 0.000 description 3
- 238000003825 pressing Methods 0.000 description 3
- 239000010409 thin film Substances 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 239000008186 active pharmaceutical agent Substances 0.000 description 2
- 230000003321 amplification Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 2
- 230000000903 blocking effect Effects 0.000 description 2
- 230000006837 decompression Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 238000009826 distribution Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000007667 floating Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 238000003199 nucleic acid amplification method Methods 0.000 description 2
- 238000005192 partition Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 238000003786 synthesis reaction Methods 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000000712 assembly Effects 0.000 description 1
- 238000000429 assembly Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 238000012905 input function Methods 0.000 description 1
- 238000004020 luminiscence type Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 235000019633 pungent taste Nutrition 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 239000000725 suspension Substances 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 238000009827 uniform distribution Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42203—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/223—Execution procedure of a spoken command
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D30/00—Reducing energy consumption in communication networks
- Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- User Interface Of Digital Computer (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
本发明实施例提供一种显示设备与内容显示方法,该显示设备包括第一显示屏以及与第一显示屏通信的第一控制器,第二显示屏以及与第二显示屏通信的第二控制器,以及语音采集装置,第一控制器与第二控制器通讯连接,语音采集装置用于采集语音信息;第一控制器在接收到语音唤醒指令时,将语音唤醒指令发送至第二控制器,第二控制器根据该语音唤醒指令控制第二显示屏显示语音输入界面,第一控制器进一步接收语音采集装置采集到的第一语音信息,获取该第一语音信息所请求的目标显示数据,并发送至第二控制器,第二控制器控制第二显示屏显示目标显示数据。本发明实施例可以避免语音交互过程对第一显示屏中正常播放的内容造成影响。
Description
本申请要求于2019年11月04日提交中国专利局、申请号为2019110679806、申请名称为“显示设备”的中国专利申请的优先权,其全部内容通过引用结合在本申请中。
技术领域
本发明实施例涉及显示设备技术领域,尤其涉及一种显示设备与内容显示方法。
背景技术
随着科技的发展,目前已有越来越多的智能电视广泛的应用到人们的日常生活中。
同时,随着语音识别技术的发展,通过语音来控制智能设备的方式也越来越受到人们的欢迎。例如,当用户想要观看某个电视节目时,可以对着电视机说出该电视节目的名称,然后电视机根据接收到的用户语音,即可查找出相关的电视节目提供给用户。
然而,对于目前已有的电视机而言,用户在与电视机进行语音交互时,电视机需要暂时退出当前播放的内容才能进入语音交互界面,或者,电视机需要在当前播放的图像上面增加一个悬浮窗口,用来显示语音交互界面,这样就会不可避免的影响电视机当前正在播放的内容,降低用户的观看体验。
发明内容
本发明实施例提供一种显示设备与内容显示方法,以克服目前显示设备的语音交互过程会影响显示设备正常播放的内容的技术问题。
第一方面,本发明实施例提供一种显示设备,包括:
第一显示屏,用于显示,用于显示内容提供商提供的服务内容;
第二显示屏,用于显示,用于显示与基于用户语音输入相关联的内容;
语音采集装置,用于采集语音信号;
与所述第一显示屏通信的第一控制器,以及与所述第二显示屏通信的第二控制器,所述第一控制器和所述第二控制器通信连接;
所述第一控制器用于接收语音唤醒指令,将所述语音唤醒指令发送至所述第二控制器;
所述第二控制器用于根据所述语音唤醒指令控制所述第二显示屏显示语音输入界面;
所述第一控制器还用于在所述第二显示屏显示语音输入界面之后,接收所述语音采集装置采集到的第一语音信息;
获取所述第一语音信息所请求的目标显示数据;
将所述目标显示数据发送至所述第二控制器;
所述第二控制器还用于控制所述第二显示屏显示所述目标显示数据。
在一种可能的设计中,所述第二控制器用于:
根据所述语音唤醒指令,控制所述第二显示屏的显示界面从待机界面切换至所述语音输入界面。
在一种可能的设计中,所述第一控制器具体用于:
将所述第一语音信息发送至服务器;
接收所述服务器发送的所述目标显示数据,所述目标显示数据是所述服务器对所述第一语音信息进行识别后,基于所述第一语音信息的识别结果确定的。
在一种可能的设计中,所述第一控制器具体用于:
接收所述服务器对所述第一语音信息的识别结果,并将所述识别结果发送至所述第二控制器;
所述第二控制器用于:
控制所述第二显示屏显示所述识别结果。
第二方面,本发明实施例提供一种显示设备,包括:第一显示屏;
第二显示屏;
语音采集装置,用于采集语音信号;
与所述第一显示屏通信的第一控制器,以及与所述第二显示屏通信的第二控制器,所述第一控制器和所述第二控制器通信连接;
所述第一控制器,用于在所述第一显示屏上显示内容提供商提供的服务内容的过程中,接收语音唤醒指令,将所述语音唤醒指令发送至所述第二控制器;
所述第二控制器用于根据所述语音唤醒指令控制所述第二显示屏显示语音输入界面;
所述第一控制器还用于:在所述第二显示屏显示语音输入界面之后,接收所述语音采集装置采集到的第一语音信息;
获取所述第一语音信息所请求的目标显示数据;
确定所述目标显示数据中是否包括需要在所述第一显示屏显示的第一数据;
当确定所述目标显示数据中包括所述第一数据时,控制所述第一显示屏显示所述第一数据;
将所述目标显示数据中除所述第一数据之外的剩余数据发送至所述第二控制器;
所述第二控制器还用于控制所述第二显示屏显示所述剩余数据。
在一种可能的设计中,所述第一控制器具体用于:
接收所述显示设备对应的控制装置发出的按键信号;
对所述按键信号进行解析,当所述按键信号由所述控制装置中预置的语音交互按键触发生成时,确认接收到所述语音唤醒指令。
在一种可能的设计中,所述第一控制器具体用于:
接收所述语音采集装置采集到的第二语音信息,并对所述第二语音信息进行识别;
当确定对所述第二语音信息的识别结果中包含预设的唤醒关键词时,确认接收到所述语音唤醒指令。
第三方面,本发明实施例提供一种显示设备,包括:
第一显示屏;
第二显示屏;
语音采集装置,用于采集语音信号;
与所述第一显示屏通信的第一控制器,以及与所述第二显示屏通信的第二控制器,所述第一控制器和所述第二控制器通信连接;
所述第一控制器,用于在所述第一显示屏处于息屏状态的过程中,接收语音唤醒指令,将所述语音唤醒指令发送至所述第二控制器;
所述第二控制器用于根据所述语音唤醒指令控制所述第二显示屏显示语音输入界面;
所述第一控制器还用于:在所述第二显示屏显示语音输入界面之后,接收所述语音采集装置采集到的第一语音信息;
获取所述第一语音信息所请求的目标显示数据;
控制所述第一显示屏进入亮屏状态,并显示所述目标显示数据中包括的第一数据;
将所述目标显示数据中除所述第一数据之外的剩余数据发送至所述第二控制器;
所述第二控制器还用于控制所述第二显示屏显示所述剩余数据。
在一种可能的设计中,所述第一控制器具体用于:
控制所述第一显示屏生成消息弹窗,并在所述消息弹窗中显示所述第一数据。
在一种可能的设计中,所述第一控制器还用于:
接收用户确认指令,确定所述消息弹窗中的焦点框当前选中的数据标签是否包含下一级显示内容,所述第一数据包括至少一个数据标签;
当所述焦点框当前选中的数据标签包含下一级显示内容时,控制所述第一显示屏显示所述下一级显示内容。
在一种可能的设计中,所述第一控制器还用于:
在接收到语音交互指令之后,接收用于指示退出语音交互的指令;
基于所述指令控制所述第一显示屏返回至初始状态,所述初始状态为所述第一控制器接收到所述语音唤醒指令之前的状态;和/或,将所述返回指令发送至所述第二控制器,所述第二控制器用于基于所述指令控制所述第二显示屏返回至待机界面。
第四方面,本发明实施例提供一种显示设备中内容显示方法,所述显示设备包括第一显示屏和第二显示屏,所述第一显示屏被配置为显示内容提供商提供的服务内容,所述第二显示屏被配置为显示与基于用户语音输入相关联的内容,所述方法包括:
接收语音唤醒指令;
根据所述语音唤醒指令控制所述第二显示屏显示语音输入界面;
在所述第二显示屏显示语音输入界面之后,接收第一语音信息;
获取所述第一语音信息所请求的目标显示数据;
在所述第二显示屏上显示所述目标显示数据。
在一种可能的设计中,所述根据所述语音唤醒指令控制所述第二显示屏显示语音输入界面,包括:
根据所述语音唤醒指令,控制所述第二显示屏的显示界面从待机界面切换至所述语音输入界面。
在一种可能的设计中,所述获取所述第一语音信息所请求的目标显示数据,包括:
将所述第一语音信息发送至服务器;
接收所述服务器发送的所述目标显示数据,所述目标显示数据是所述服务器对所述第一语音信息进行识别后,基于所述第一语音信息的识别结果确定的。
在一种可能的设计中,所述将所述第一语音信息发送至服务器之后,还包括:
接收所述服务器对所述第一语音信息的识别结果;
在所述第二显示屏上显示所述识别结果。
第五方面,本发明实施例提供一种显示设备中内容显示方法,所述显示设备包括第一显示屏和第二显示屏,所述方法包括:
接收语音唤醒指令;
根据所述语音唤醒指令控制所述第二显示屏显示语音输入界面;
在所述第二显示屏显示语音输入界面之后,接收第一语音信息;
获取所述第一语音信息所请求的目标显示数据;
确定所述目标显示数据中是否包括需要在所述第一显示屏显示的第一数据;
当确定所述目标显示数据中包括所述第一数据时,控制所述第一显示屏显示所述第一数据;
在所述第二显示屏上显示所述目标显示数据中除所述第一数据之外的剩余数据。
在一种可能的设计中,所述接收语音唤醒指令,包括:
接收所述显示设备对应的遥控装置发出的按键信号;
对所述按键信号进行解析,当所述按键信号由所述遥控装置中预置的语音唤醒按键触发生成时,确认接收到所述语音唤醒指令。
在一种可能的设计中,所述接收语音唤醒指令,包括:
接收所述语音采集装置采集到的第二语音信息,并对所述第二语音信息进行识别;
当确定对所述第二语音信息的识别结果中包含预设的唤醒关键词时,确认接收到所述语音唤醒指令。
第六方面,本发明实施例提供一种显示设备中内容显示方法,所述显示设备包括第一显示屏和第二显示屏,所述方法包括:
接收语音唤醒指令;
根据所述语音唤醒指令控制所述第二显示屏显示语音输入界面;
在所述第二显示屏显示语音输入界面之后,接收第一语音信息;
获取所述第一语音信息所请求的目标显示数据;
控制所述第一显示屏进入亮屏状态,并显示所述目标显示数据中包括的第一数据;
在所述第二显示屏上显示所述目标显示数据中除所述第一数据之外的剩余数据。
在一种可能的设计中,所述控制所述第一显示屏进入亮屏状态,并显示所述目标显示数据中包括的第一数据,包括:
在控制所述第一显示屏进入亮屏状态后,控制所述第一显示屏生成消息弹窗,并在所述消息弹窗中显示所述第一数据。
在一种可能的设计中,所述方法还包括:
接收用户确认指令,确定所述消息弹窗中的焦点框当前选中的数据标签是否包含下一级显示内容,所述第一数据包括至少一个数据标签;
当所述焦点框当前选中的数据标签包含下一级显示内容时,控制所述第一显示屏显示所述下一级显示内容。
在一种可能的设计中,所述方法还包括:
在接收到语音交互指令之后,接收用于指示退出语音交互的指令;
基于所述指令控制所述第一显示屏返回至初始状态,所述初始状态为接收到所述语音唤醒指令之前所述第一显示屏的状态;和/或,基于所述指令控制所述第二显示屏返回至待机界面。
本发明实施例所提供的显示设备与内容显示方法,包括第一显示屏以及与第一显示屏通信的第一控制器,第二显示屏以及与第二显示屏通信的第二控制器,以及语音采集装置,第一控制器与第二控制器通讯连接,语音采集装置用于采集语音信息;第一控制器在接收到语音唤醒指令时,将语音唤醒指令发送至第二控制器,第二控制器根据该语音唤醒指令控制第二显示屏显示语音输入界面,第一控制器进一步接收语音采集装置采集到的第一语音信息,获取该第一语音信息所请求的目标显示数据,并发送至第二控制器,第二控制器控制第二显示屏显示目标显示数据。
即在本发明实施例中,显示设备除了第一显示屏以及与第一显示屏通信的第一控制器之外,还设置有第二显示屏以及与第二显示屏通信的第二控制器,在显示设备进行语音交互时,可以将语音交互过程以及目标显示数据通过第二显示屏来显示,由此即可避免语音交互过程对第一显示屏中正常播放的内容造成影响。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明示例性实施例中提供的显示设备与控制装置之间操作场景的示意图;
图2为本发明示例性实施例中提供的控制装置100的配置框图;
图3a为本申请示例性实施例中提供的一种显示设备200中硬件***的硬件结构示意图;
图3b为本申请示例性实施例中提供的另一种显示设备200中硬件***的硬件结构示意图;
图4为本发明示例性实施例中提供的显示设备200中电源板与负载的连接关系示意图;
图5为本发明示例性实施例中根据图3所示显示设备200的硬件架构框图;
图6为本发明示例性实施例中提供的显示设备的功能配置示意图;
图7为本发明示例性实施例中提供的显示设备200中软件***的配置框图;
图8为本发明示例性实施例中提供的显示设备的应用程序层示意图;
图9为本发明示例性实施例中提供的显示设备200中用户界面的示意图;
图10为本发明实施例中第一控制器210与第二控制器310显示设备的功能配置示意图一;
图11a至图11d为本发明实施例中显示设备200的语音交互示意图一;
图12为本发明实施例中第一控制器210与第二控制器310显示设备的功能配置示意图二;
图13a至图13e为本发明实施例中显示设备200的语音交互示意图二;
图14a与图14b为本发明实施例中显示设备200的语音交互示意图三;
图15a与图15b为本发明实施例中显示设备200的语音交互示意图四。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整的描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本申请的说明书、权利要求书及附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。
本申请主要针对具有双***、双显示屏结构的显示设备,即具有第一控制器(第一硬件***)、第二控制器(第二硬件***)、第一显示屏和第二显示屏的显示设备的音画同步处理,下面首先对具有双***硬件结构的显示设备的结构、功能和实现方式等方面进行详细说明。
为便于用户使用,显示设备上通常会设置各种外部装置接口,以便于连接不同的外设设备或线缆以实现相应的功能。而在显示设备的接口上连接有高清晰度的摄像头时,如果显示设备的硬件***没有接收源码的高像素摄像头的硬件接口,那么就会导致无法将摄像头接收到的数据呈现到显示设备的显示屏上。
并且,受制于硬件结构,传统显示设备的硬件***仅支持一路硬解码资源,且通常最大仅能支持4K分辨率的视频解码,因此当要实现边观看网络电视边进行视频聊天时,为了不降低网络视频画面清晰度,就需要使用硬解码资源(通常是硬件***中的GPU)对网络视频进行解码,而在此情况下,只能采取由硬件***中的通用处理器(例如CPU)对视频进行软解码的方式处理视频聊天画面。
采用软解码处理视频聊天画面,会大大增加CPU的数据处理负担,当CPU的数据处理负担过重时,可能会出现画面卡顿或者不流畅的问题。在一些实施例中,受制于CPU的数据处理能力,当采用CPU软解码处理视频聊天画面时,通常无法实现多路视频通话,当用户想要再同一聊天场景同时与多个其他用户进行视频聊天时,会出现接入受阻的情况。
基于上述各方面的考虑,为克服上述缺陷,本申请公开了一种双硬件***架构,以实现多路视频聊天数据(至少一路本地视频)。
下面首先结合附图对本申请所涉及的概念进行说明。在此需要指出的是,以下对各个概念的说明,仅为了使本申请的内容更加容易理解,并不表示对本申请保护范围的限定。
本申请各实施例中使用的术语“模块”,可以是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合,能够执行与该元件相关的功能。
本申请各实施例中使用的术语“遥控器”,是指电子设备(如本申请中公开的显示设备)的一个组件,该组件通常可在较短的距离范围内无线控制电子设备。该组件一般可以使用红外线和/或射频(RF)信号和/或蓝牙与电子设备连接,也可以包括WiFi、无线USB、蓝牙、动作传感器等功能模块。例如:手持式触摸遥控器,是以触摸屏中用户界面取代一般遥控装置中的大部分物理内置硬件。
本申请各实施例中使用的术语“手势”,是指用户通过一种手型的变化或手部运动等动作,用于表达预期想法、动作、目的/或结果的用户行为。
本申请各实施例中使用的术语“硬件***”,可以是指由集成电路(IntegratedCircuit,IC)、印刷电路板(Printed circuit board,PCB)等机械、光、电、磁器件构成的具有计算、控制、存储、输入和输出功能的实体部件。在本申请各个实施例中,硬件***通常也会被称为主板(motherboard)或芯片。
图1中示例性示出了根据实施例中显示设备与控制装置之间操作场景的示意图。如图1所示,用户可通过控制装置100来操作显示设备200。
其中,控制装置100可以是遥控器100A,其可与显示设备200之间通过红外协议通信、蓝牙协议通信、紫蜂(ZigBee)协议通信或其他短距离通信方式进行通信,用于通过无线或其他有线方式来控制显示设备200。用户可以通过遥控器100A上按键、语音输入、控制面板输入等输入用户指令,来控制显示设备200。如:用户可以通过遥控器100A上音量加减键、频道控制键、上/下/左/右的移动按键、语音输入按键、菜单键、开关机按键等输入相应控制指令,来实现控制显示设备200的功能。
控制装置100也可以是智能设备,如移动终端100B、平板电脑、计算机、笔记本电脑等,其可以通过本地网(LAN,Local Area Network)、广域网(WAN,Wide Area Network)、无线局域网(WLAN,Wireless Local Area Network)或其他网络与显示设备200之间通信,并通过与显示设备200相应的应用程序实现对显示设备200的控制。例如,使用在智能设备上运行的应用程序控制显示设备200。该应用程序可以在与智能设备关联的屏幕上通过直观的用户界面(UI,User Interface)为用户提供各种控制。
示例的,移动终端100B与显示设备200均可安装软件应用,从而可通过网络通信协议实现二者之间的连接通信,进而实现一对一控制操作的和数据通信的目的。如:可以使移动终端100B与显示设备200建立控制指令协议,将遥控控制键盘同步到移动终端100B上,通过控制移动终端100B上用户界面,实现控制显示设备200的功能;也可以将移动终端100B上显示的音视频内容传输到显示设备200上,实现同步显示功能。
如图1所示,显示设备200还可与服务器300通过多种通信方式进行数据通信。在本申请各个实施例中,可允许显示设备200通过局域网、无线局域网或其他网络与服务器300进行有线通信连接或无线通信连接。服务器300可以向显示设备200提供各种内容和互动。
示例的,显示设备200通过发送和接收信息,以及电子节目指南(EPG,ElectronicProgram Guide)互动,接收软件程序更新,或访问远程储存的数字媒体库。服务器300可以是一组,也可以是多组,可以是一类或多类服务器。通过服务器300提供视频点播和广告服务等其他网络服务内容。
显示设备200包括第一显示屏201与第二显示屏202,其中,第一显示屏201与第二显示屏202之间相互独立,第一显示屏201与第二显示屏202之间采用双硬件控制***。
其中,第一显示屏201和第二显示屏202可以用于显示不同的显示画面。如,第一显示屏201可以用于传统电视节目的画面显示,第二显示屏202用于通知类消息、语音助手等辅助信息的画面显示。
在一些实施例中,第一显示屏201显示的内容与第二显示屏202显示的内容之间可以相互独立,互不影响。例如,在第一显示屏201播放电视节目时,第二显示屏202可以显示与电视节目无关的时间、天气、气温、提醒消息等信息。
在一些实施例中,第一显示屏201显示的内容与第二显示屏202显示的内容之间也可以存在关联关系。例如,在第一显示屏201播放视频聊天的主画面时,第二显示屏202可以显示当前接入视频聊天的用户的头像、聊天时长等信息。
在一些实施例中,第二显示屏202显示的部分或全部内容可以调整至第一显示屏201显示。例如,可以将第一显示屏201显示的时间、天气、气温、提醒消息等信息调整到第一显示屏201显示,而用第二显示屏202显示其它的信息。
另外,第一显示屏201在显示传统电视节目画面的同时,还显示多方交互画面,且多方交互画面不会遮挡传统电视节目画面。其中,本申请对传统电视节目画面和多方交互画面的显示方式不做限定。例如,本申请可以根据传统电视节目画面和多方交互画面的优先级,设置传统电视节目画面和多方交互画面的位置和大小。
以传统电视节目画面的优先级高于多方交互画面的优先级为例,传统电视节目画面的面积大于多方交互画面的面积,且多方交互画面可以位于传统电视节目画面的一侧,也可以悬浮设置在多方交互画面的一角。
显示设备200,一方面讲,可以是液晶显示器、OLED(Organic Light EmittingDiode)显示器、投影显示设备;另一方面讲,显示设备被可以是智能电视或显示器和机顶盒组成的显示***。具体显示设备类型,尺寸大小和分辨率等不作限定,本领技术人员可以理解的是,显示设备200可以根据需要做性能和配置上的一些改变。
显示设备200除了提供广播接收电视功能之外,还可以附加提供计算机支持功能的智能网络电视功能。示例的包括,网络电视、智能电视、互联网协议电视(IPTV)等。在一些实施例中,显示设备可以不具备广播接收电视功能。
如图1所示,显示设备200上可以连接或设置有摄像头,用于将摄像头拍摄到的画面呈现在本显示设备或其他显示设备的显示界面上,以实现用户之间的交互聊天。具体的,摄像头拍摄到的画面可在显示设备上全屏显示、半屏显示、或者显示任意可选区域。
作为一种在一些实施例中连接方式,摄像头通过连接板与显示设备的后壳连接,固定安装在显示设备的后壳的上侧中部,作为可安装的方式,可以固定安装在显示设备的后壳的任意位置,能保证其图像采集区域不被后壳遮挡即可,例如,图像采集区域与显示设备的显示朝向相同。
作为另一种在一些实施例中连接方式,摄像头通过连接板或者其他可想到的连接器可升降的与显示设备后壳连接,连接器上安装有升降马达,当用户要使用摄像头或者有应用程序要使用摄像头时,再升出显示设备之上,当不需要使用摄像头时,其可内嵌到后壳之后,以达到保护摄像头免受损坏和保护用户的隐私安全。
作为一种实施例,本申请所采用的摄像头可以为1600万像素,以达到超高清显示目的。在实际使用中,也可采用比1600万像素更高或更低的摄像头。
当显示设备上安装有摄像头以后,显示设备不同应用场景所显示的内容可得到多种不同方式的融合,从而达到传统显示设备无法实现的功能。
示例性的,用户可以在边观看视频节目的同时,与至少一位其他用户进行视频聊天。视频节目的呈现可作为背景画面,视频聊天的窗口显示在背景画面之上。形象的,可以称该功能为“边看边聊”。
在一些实施例中,在“边看边聊”的场景中,在观看直播视频或网络视频的同时,跨终端的进行至少一路的视频聊天。
另一示例中,用户可以在边进入教育应用学习的同时,与至少一位其他用户进行视频聊天。例如,学生在学习教育应用程序中内容的同时,可实现与老师的远程互动。形象的,可以称该功能为“边学边聊”。
另一示例中,用户在玩纸牌游戏时,与进入游戏的玩家进行视频聊天。例如,玩家在进入游戏应用参与游戏时,可实现与其他玩家的远程互动。形象的,可以称该功能为“边看边玩”。
在一些实施例中,游戏场景与视频画面进行融合,将视频画面中人像进行抠图,显示在游戏画面中,提升用户体验。
在一些实施例中,在体感类游戏中(如打球类、拳击类、跑步类、跳舞类等),通过摄像头获取人体姿势和动作,肢体检测和追踪、人体骨骼关键点数据的检测,再与游戏中动画进行融合,实现如体育、舞蹈等场景的游戏。
另一示例中,用户可以在K歌应用中,与至少一位其他用户进行视频和语音的交互。形象的,可以称该功能为“边看边唱”。在一些实施例中,当至少一位用户在聊天场景进入该应用时,可多个用户共同完成一首歌的录制。
另一个示例中,用户可在本地打开摄像头获取图片和视频,形象的,可以称该功能为“照镜子”。
在另一些示例中,还可以再增加更多功能或减少上述功能。本申请对该显示设备的功能不作具体限定。
图2中示例性示出了根据示例性实施例中控制装置100的配置框图。如图2所示,控制装置100包括控制器110、通信器130、用户输入/输出接口140、存储器190、供电电源180。
控制装置100被配置为可控制所述显示设备200,以及可接收用户的输入操作指令,且将操作指令转换为显示设备200可识别和响应的指令,起到用户与显示设备200之间交互中介作用。如:用户通过操作控制装置100上频道加减键,显示设备200响应频道加减的操作。
在一些实施例中,控制装置100可是一种智能设备。如:控制装置100可根据用户需求安装控制显示设备200的各种应用。
在一些实施例中,如图1所示,移动终端100B或其他智能电子设备,可在安装操控显示设备200的应用之后,起到控制装置100类似功能。如:用户可以通过安装应用,在移动终端100B或其他智能电子设备上可提供的图形用户界面的各种功能键或虚拟按钮,以实现控制装置100实体按键的功能。
控制器110包括处理器112、RAM 113和ROM 114、通信接口以及通信总线。控制器110用于控制控制装置100的运行和操作,以及内部各部件之间通信协作以及外部和内部的数据处理功能。
通信器130在控制器110的控制下,实现与显示设备200之间控制信号和数据信号的通信。如:将接收到的用户输入信号发送至显示设备200上。通信器130可包括WIFI模块131、蓝牙模块132、NFC模块133等通信模块中至少一种。
用户输入/输出接口140,其中,输入接口包括麦克风141、触摸板142、传感器143、按键144、摄像头145等输入接口中至少一者。如:用户可以通过语音、触摸、手势、按压等动作实现用户指令输入功能,输入接口通过将接收的模拟信号转换为数字信号,以及数字信号转换为相应指令信号,发送至显示设备200。
输出接口包括将接收的用户指令发送至显示设备200的接口。在一些实施例中,可以是红外接口,也可以是射频接口。如:红外信号接口时,需要将用户输入指令按照红外控制协议转化为红外控制信号,经红外发送模块进行发送至显示设备200。再如:射频信号接口时,需将用户输入指令转化为数字信号,然后按照射频控制信号调制协议进行调制后,由射频发送端子发送至显示设备200。
在一些实施例中,控制装置100包括通信器130和输出接口中至少一者。控制装置100中配置通信器130,如:WIFI、蓝牙、NFC等模块,可将用户输入指令通过WIFI协议、或蓝牙协议、或NFC协议编码,发送至显示设备200。
存储器190,用于在控制器110的控制下存储驱动和控制控制装置100的各种运行程序、数据和应用。存储器190,可以存储用户输入的各类控制信号指令。
供电电源180,用于在控制器110的控制下为控制装置100各电器元件提供运行电力支持。供电电源180可以采用电池及相关控制电路实现供电。
在一些实施例中,图3a中示例性示出了根据示例性实施例中显示设备200中硬件***的硬件结构示意图。为了便于说明,图3a中显示设备200以液晶显示器为例进行示意。
图3a所示,显示设备200可以包括:第一面板11、第一背光组件12、第一后壳13、第一控制器14、第二控制器15、第一显示驱动电路16、第二面板21、第二背光组件22、第二后壳23、第二显示驱动电路24和电源组件30。另外,在一些实施例中,显示设备200还可以包括:底座或者悬挂支架。为了便于说明,图3a中显示设备200中以包含底座41进行举例示意,该底座41用于支撑显示设备200。值得说明的是,图中仅示出一种形式的底座设计,本领域技术人员可以根据产品需求设计不同形式的底座。
其中,第一面板11用于给用户呈现第一显示屏201的画面。在一些实施例中,第一面板11可以为液晶面板。例如,液晶面板可以从上到下依次包括:水平偏光板、彩色滤光片、液晶层、薄膜晶体管TFT、垂直偏光板、导光板和印刷电路板(printed circuit board,PCB),该印刷电路板PCB上设置有栅极驱动电路、源极驱动电路等驱动电路。其中,栅极驱动电路通过扫描线与薄膜晶体管TFT的栅极连接,源极驱动电路通过数据线与薄膜晶体管TFT的漏极连接。
其中,第一背光组件12位于第一面板11的下方,通常是一些光学组件,用于供应充足的亮度与分布均匀的光源,使第一面板11能正常显示影像。第一背光组件12还包括第一背板(图中未示出)。
其中,第一后壳13盖设在第一面板11上,以共同隐藏第一背光组件12、第一控制器14、第二控制器15和第一显示驱动电路16和电源组件30等显示设备200的零部件,起到美观的效果。
其中,第一控制器14、第二控制器15和第一显示驱动电路16和电源组件30设置于第一背板上,通常在第一背板上冲压形成一些凸包结构。第一控制器14、第二控制器15和第一显示驱动电路16和电源组件30通过螺钉或者挂钩固定在凸包上。
在一些实施例中,第一控制器14、第二控制器15、第一显示驱动电路16和电源组件30可以共同设置在一个板子上,也可以分别设置不同的板子上,如第一控制器14设置在主板上,第二控制器15设置在交互板上,第一显示驱动电路16设置在第一显示驱动板上,电源组件30设置在电源板上,也可以组合设置在不同的板子上,也可以与第一背光组件12共同设置在一个板子上,具体可以根据实际需求进行设置,本申请对此不做限定。
为了便于说明,图3a中将第一控制器14、第二控制器15和第一显示驱动电路16和电源组件30共设在一个板子上进行举例示意。
其中,第一显示驱动电路16主要的功能是:通过第一控制器14传输的背光驱动信号,如PWM信号以及Local dimming信号,进行千级背光分区控制,此部分控制是根据图像内容变化的,以及在与第一控制器14之间建立握手后,接收第一控制器14发送的VbyOne显示信号,并将VbyOne显示信号转换为LVDS信号,实现第一显示屏201的图像画面显示。
其中,第二面板21用于给用户呈现第二显示屏202的画面。在一些实施例中,第二面板21可以为液晶面板,具体包含的结构可以参见前述内容的描述,此处不做赘述。
其中,第二背光组件22位于第二面板12的下方,通常是一些光学组件,用于供应充足的亮度与分布均匀的光源,使第二面板12能正常显示影像。第二背光组件22还包括第二背板(图中未示出)。
其中,第二后壳23盖设在第二面板21上,以共同隐藏第二背光组件22和第二显示驱动电路24等显示设备200的零部件,起到美观的效果。
其中,第二显示驱动电路24设置于第二背板上,通常在第二背板上冲压形成一些凸包结构。第二显示驱动电路24通过螺钉或者挂钩固定在凸包上。第二显示驱动电路24可以单独设置在一个板子上,如第二显示驱动板上,也可以与第二背光组件22共同设置在一个板子上,具体可以根据实际需求进行设置,本申请对此不做限定。为了便于说明,图3a中将第二显示驱动电路24单独设在一个板子上进行举例示意。
在一些实施例中,图3a中还包括按键板,按键板可以设置在第一背板上,也可以设置在第二背板上,本申请对此不做限定。且按键板上设置有多个按键和按键电路,使得第一控制器14或者第二控制器15可以从按键板上接收按键信号,也使得第一控制器14或者第二控制器15可以向按键板发送控制信号。
另外,显示设备200还包括声音再现装置(图中未示出)例如音响组件,如包括功率放大器(Amplifier,AMP)及扬声器(Speaker)的I2S接口等,用于实现声音的再现。通常音响组件至少能够实现两个声道的声音输出;当要实现全景声环绕的效果,则需要设置多个音响组件,输出多个声道的声音,这里不再具体展开说明。
需要说明的是,显示设备200还可以为OLED显示器,对应的,显示设备200所包含的模板发生相应的改变,如由于OLED显示器可以实现自发光,因此,OLED显示器中不需要背光组件(图3a中的第一背光组件12和第二背光组件22),此处不做过多说明。
或者,如图3a所示以具有双显示屏的显示设备作为示例性说明,而在图3b中示例性示出了根据示例性实施例中显示设备中硬件***的硬件结构示意图。
其中,如图3b所示的具有单显示屏的显示设备中,该显示设备包括:面板1、背光组件2、后壳3、控制器4、电源组件5和底座6。其中,面板1用于给用户呈现画面;背光组件2位于面板1的下方,通常是一些光学组件,用于供应充足的亮度与分布均匀的光源,使面板1能正常显示图像内容,背光组件2还包括背板,控制器4和电源组件5设置于背板上,通常在背板上冲压形成一些凸包结构,控制器4和电源组件5通过螺钉或者挂钩固定在凸包上;后壳3盖设在面板1上,以共同隐藏背光组件2、控制器4和电源组件5等显示设备的零部件,起到美观的效果;底座6,用于支撑显示设备。
其中,控制器4和电源组件5可以单独设置在一个板子上,也可以共同设置在一个板子上,也可以与背光组件共同设置在一个板子上,具体可以根据实际需求进行设置,本申请对此不做限定。为了便于说明,图3b中,控制器4和电源组件5共同设置在一个板上。
另外,显示设备200还包括声音再现装置(图中未示出)例如音响组件,如包括功率放大器(Amplifier,AMP)及扬声器(Speaker)的I2S接口等,用于实现声音的再现。通常音响组件至少能够实现两个声道的声音输出;当要实现全景声环绕的效果,则需要设置多个音响组件,输出多个声道的声音,这里不再具体展开说明。
需要说明的是,显示设备200还可以采用OLED显示屏,这样,显示设备200所包含的模板发生相应的改变,此处不做过多说明。
图4示出了电源板与负载的连接关系示意图,如图4所示,电源组件30包括输入端IN和输出端OUT(图中示出第一输出端OUT1、第二输出端OUT2、第三输出端OUT3、第四输出端OUT4和第五输出端OUT5),其中,输入端IN与交流电源AC(如市电)相连,输出端OUT与负载相连,比如,第一输出端OUT1和声音再现装置相连,第二输出端OUT2和第一面板11/第二面板21相连,第三输出端OUT3和第一背光组件12/第二背光组件22相连,第四输出端OUT4和第一控制器14/第二控制器15相连,第五输出端OUT5和第一显示驱动电路16/第二显示驱动电路24相连。其中,电源组件30需要将交流市电转换为负载所需求的直流电,并且,该直流电通常具有不同的规格,例如音响组件需要18V,第一控制器14需要12V/18V等。
为便于表述,以下将双硬件***架构中的一个硬件***称为第一硬件***或第一控制器,并将另一个硬件***称为第二硬件***或第二控制器。第一控制器包含第一控制器的各类处理器、各类接口,及通过各类接口与第一控制器相连的各类模块,第二控制器则包含第二控制器的各类处理器、各类接口,及通过各类接口与第二控制器相连的各类模块。
第一控制器及第二控制器中可以各自安装有相对独立的操作***,第一控制器的操作***和第二控制器的操作***可以通过通信协议相互通信,示例性的:第一控制器的操作***的framework层和第二控制器的操作***的framework层可以进行通信进行命令和数据的传输,从而使显示设备200中存在两个在独立但又存在相互关联的子***。
下面结合图5对本申请双硬件***架构进行在一些实施例中说明。需要说明的是图5仅仅是对本申请双硬件***架构的一个示例性说明,并不表示对本申请的限定。在实际应用中,两个硬件***均可根据需要包含更多或更少的硬件或接口。
图5中示例性示出了根据图3所示显示设备200的硬件架构框图。如图5所示,显示设备200的硬件***以包括第一控制器210和第二控制器310,以及通过各类接口与第一控制器210或第二控制器310相连接的模块。
在一些实施例中:第二控制器310可以用于接收第一控制器210发送的指令,并控制第二显示屏380显示相应的图像。
与第一控制器210连接的模块可以包括调谐解调器220、通信器230、外部装置接口25、存储器290、用户输入接口260-3、视频处理器260-1、音频处理器260-2、第一显示屏280(即图1中的第一显示屏201)、音频输出接口270、供电模块240。在其他实施例中,第一控制器210也可以连接更多或更少的模块。
其中,调谐解调器220,用于对通过有线或无线方式接收广播电视信号,进行放大、混频和谐振等调制解调处理,从而从多个无线或有线广播电视信号中解调出用户所选择电视频道的频率中所携带的音视频信号,以及附加信息(例如EPG数据信号)。根据电视信号广播制式不同,调谐解调器220的信号途径可以有很多种,诸如:地面广播、有线广播、卫星广播或互联网广播等;以及根据调制类型不同,所述信号的调整方式可以数字调制方式,也可以模拟调制方式;以及根据接收电视信号种类不同,调谐解调器220可以解调模拟信号和/或数字信号。
调谐解调器220,还用于根据用户选择,以及由第一控制器210控制,响应用户选择的电视频道频率以及该频率所携带的电视信号。
在其他一些示例性实施例中,调谐解调器220也可在外置设备中,如外置机顶盒等。这样,机顶盒通过调制解调后输出电视音视频信号,经过外部装置接口250输入至显示设备200中。
通信器230是用于根据各种通信协议类型与外部设备或外部服务器进行通信的组件。例如:通信器230可以包括WIFI模块231,蓝牙通信协议模块232,有线以太网通信协议模块233,及红外通信协议模块等其他网络通信协议模块或近场通信协议模块(图中未示出)。
显示设备200可以通过通信器230与外部控制设备或内容提供设备之间建立控制信号和数据信号的连接。例如,通信器可根据第一控制器210的控制接收遥控器100的控制信号。
外部装置接口250,是提供第一控制器210和外部其他设备间数据传输的组件。外部装置接口250可按照有线/无线方式与诸如机顶盒、游戏装置、笔记本电脑等的外部设备连接,可接收外部设备的诸如视频信号(例如运动图像)、音频信号(例如音乐)、附加信息(例如EPG)等数据。
其中,外部装置接口250可以包括:高清多媒体接口(HDMI)端子也称之为HDMI251、复合视频消隐同步(CVBS)端子也称之为AV 252、模拟或数字分量端子也称之为分量253、通用串行总线(USB)端子254、红绿蓝(RGB)端子(图中未示出)等任一个或多个。本申请不对外部装置接口的数量和类型进行限制。
第一控制器210,通过运行存储在存储器290上的各种软件控制程序(如操作***和/或各种应用程序),来控制显示设备200的工作和响应用户的操作。
如图5所示,第一控制器210包括只读存储器RAM 213、随机存取存储器ROM 214、图形处理器216、CPU处理器212、通信接口218、以及通信总线。其中,RAM 213和ROM 214以及图形处理器216、CPU处理器212、通信接口218通过总线相连接。
ROM 213,用于存储各种***启动的指令。如在收到开机信号时,显示设备200电源开始启动,CPU处理器212运行ROM中***启动指令,将存储在存储器290的操作***拷贝至RAM 214中,以开始运行启动操作***。当操作***启动完成后,CPU处理器212再将存储器290中各种应用程序拷贝至RAM 214中,然后,开始运行启动各种应用程序。
图形处理器216,用于产生各种图形对象,如:图标、操作菜单、以及用户输入指令显示图形等。包括运算器,通过接收用户输入各种交互指令进行运算,根据显示属性显示各种对象。以及包括渲染器,产生基于运算器得到的各种对象,进行渲染的结果显示在第一显示屏280上。
CPU处理器212,用于执行存储在存储器290中操作***和应用程序指令。以及根据接收外部输入的各种交互指令,来执行各种应用程序、数据和内容,以便最终显示和播放各种音视频内容。
在一些示例性实施例中,CPU处理器212,可以包括多个处理器。所述多个处理器中可包括一个主处理器以及多个或一个子处理器。主处理器,用于在预加电模式中执行显示设备200一些操作,和/或在正常模式下显示画面的操作。多个或一个子处理器,用于执行在待机模式等状态下的一种操作。
通信接口218,可包括第一接口218-1到第n接口218-n。这些接口可以是经由网络被连接到外部设备的网络接口。
第一控制器210可以控制显示设备200与第一显示屏280相关的操作。例如:响应于接收到用于选择在第一显示屏280上显示UI对象的用户命令,第一控制器210便可以执行与由用户命令选择的对象有关的操作。
第一控制器210可以控制显示设备200与第二显示屏380相关的操作。例如:响应于接收到用于选择在第二显示屏380上显示UI对象的用户命令,第一控制器210便可以执行与由用户命令选择的对象有关的操作。
其中,所述对象可以是可选对象中的任何一个,例如超链接或图标。与所选择的对象有关操作,例如:显示连接到超链接页面、文档、图像等操作,或者执行与图标相对应程序的操作。用于选择UI对象用户命令,可以是通过连接到显示设备200的各种输入装置(例如,鼠标、键盘、触摸板等)输入命令或者与由用户说出语音相对应的语音命令。
存储器290,包括存储用于驱动和控制显示设备200的各种软件模块。如:存储器290中存储的各种软件模块,包括:基础模块、检测模块、通信模块、显示控制模块、浏览器模块、和各种服务模块等(图中未示出)。
其中,基础模块是用于显示设备200中各个硬件之间信号通信、并向上层模块发送处理和控制信号的底层软件模块。检测模块是用于从各种传感器或用户输入接口中收集各种信息,并进行数模转换以及分析管理的管理模块。语音识别模块中包括语音解析模块和语音指令数据库模块。显示控制模块是用于控制第一显示屏280进行显示图像内容的模块,可以用于播放多媒体图像内容和UI界面等信息。通信模块,是用于与外部设备之间进行控制和数据通信的模块。浏览器模块,是用于执行浏览服务器之间数据通信的模块。服务模块,是用于提供各种服务以及各类应用程序在内的模块。
同时,存储器290还用于存储接收外部数据和用户数据、各种用户界面中各个项目的图像以及焦点对象的视觉效果图等。
用户输入接口260-3,用于将用户的输入信号发送给第一控制器210,或者,将从第一控制器210输出的信号传送给用户。示例性的,控制装置(例如移动终端或遥控器)可将用户输入的诸如电源开关信号、频道选择信号、音量调节信号等输入信号发送至用户输入接口,再由用户输入接口260-3转送至第一控制器210;或者,控制装置可接收经第一控制器210处理从用户输入接口260-3输出的音频、视频或数据等输出信号,并且显示接收的输出信号或将接收的输出信号输出为音频或振动形式。
在一些实施例中,用户可在第一显示屏280上显示的图形用户界面(GUI)输入用户命令,则用户输入接口260-3通过图形用户界面(GUI)接收用户输入命令。或者,用户可通过输入特定的声音或手势进行输入用户命令,则用户输入接口260-3通过传感器识别出声音或手势,来接收用户输入命令。
视频处理器260-1,用于接收视频信号,根据输入信号的标准编解码协议,进行解压缩、解码、缩放、降噪、帧率转换、分辨率转换、图像合成等视频数据处理,可得到直接在第一显示屏280上显示或播放的视频信号。
示例的,视频处理器260-1,包括解复用模块、视频解码模块、图像合成模块、帧率转换模块、显示格式化模块等(图中未示出)。
其中,解复用模块,用于对输入音视频数据流进行解复用处理,如输入MPEG-2,则解复用模块进行解复用成视频信号和音频信号等。
视频解码模块,用于对解复用后的视频信号进行处理,包括解码和缩放处理等。
图像合成模块,如图像合成器,其用于将图形生成器根据用户输入或自身生成的GUI信号,与缩放处理后视频画面进行叠加混合处理,以生成可供显示的图像信号。
帧率转换模块,用于对输入视频的帧率进行转换,如将输入的24Hz、25Hz、30Hz、60Hz视频的帧率转换为60Hz、120Hz或240Hz的帧率,其中,输入帧率可以与源视频流有关,输出帧率可以与显示设备的刷新率有关。显示格式化模块,用于将帧率转换模块输出的信号,改变为符合诸如显示设备显示格式的信号,如将帧率转换模块输出的信号进行格式转换以输出RGB数据信号。
第一显示屏280,用于接收源自视频处理器260-1输入的图像信号,进行显示视频内容和图像以及菜单操控界面第一显示屏280包括用于呈现画面的显示屏组件以及驱动图像显示的驱动组件。显示视频内容,可以来自调谐解调器220接收的广播信号中的视频,也可以来自通信器或外部设备接口输入的视频内容。第一显示屏280,同时显示显示设备200中产生且用于控制显示设备200的用户操控界面UI。
以及,根据第一显示屏280类型不同,还包括用于驱动显示的驱动组件。或者,倘若第一显示屏280为一种投影显示屏,还可以包括一种投影装置和投影屏幕。
音频处理器260-2,用于接收音频信号,根据输入信号的标准编解码协议,进行解压缩和解码,以及降噪、数模转换和放大处理等音频数据处理,得到可以在扬声器272中播放的音频信号。
音频输出接口270,用于在第一控制器210的控制下接收音频处理器260-2输出的音频信号,音频输出接口可包括扬声器272,或输出至外接设备的发生装置的外接音响输出端子274,如:外接音响端子或耳机输出端子等。
在其他一些示例性实施例中,视频处理器260-1可以包括一个或多个芯片组成。音频处理器260-2,也可以包括一个或多个芯片组成。
以及,在其他一些示例性实施例中,视频处理器260-1和音频处理器260-2,可以为单独的芯片,也可以与第一控制器210一起集成在一个或多个芯片中。
供电模块240,用于在第一控制器210控制下,将外部电源输入的电力为显示设备200提供电源供电支持。供电模块240可以包括安装显示设备200内部的内置电源电路,也可以是安装在显示设备200外部的电源,如在显示设备200中提供外接电源的电源接口。
与第一控制器210相类似,如图5所示,与第二控制器310连接的模块可以包括通信器330、检测器340、存储器390、第二显示屏380(即图1中的第二显示屏202)。在某些实施例中还可以包括用户输入接口、视频处理器、音频处理器、显示屏、音频输出接口(图中未示出)。在某些实施例中,也可以存在独立为第二控制器310供电的供电模块(图中未示出)。
通信器330是用于根据各种通信协议类型与外部设备或外部服务器进行通信的组件。例如:通信器330可以包括WIFI模块331,蓝牙通信协议模块332,有线以太网通信协议模块333,及红外通信协议模块等其他网络通信协议模块或近场通信协议模块(图中未示出)。
通信器330和第一控制器210的通信器230也有相互交互。例如,第一控制器210硬件***内的WiFi模块231用于连接外部网络,与外部服务器等产生网络通信。第二控制器310硬件***内的WiFi模块331用于连接至第一控制器210的WiFi模块231,而不与外界网络等产生直接连接,第二控制器310通过第一控制器210连接外部网络。因此,对于用户而言,一个如上述实施例中的显示设备至对外显示一个WiFi账号。
检测器340,是第二控制器310用于采集外部环境或与外部交互的信号的组件。检测器340可以包括光接收器342,用于采集环境光线强度的传感器,可以通过采集环境光来自适应显示参数变化等;还可以包括图像采集器341,如相机、摄像头等,可以用于采集外部环境场景,以及用于采集用户的属性或与用户交互手势,可以自适应变化显示参数,也可以识别用户手势,以实现与用户之间互动的功能。
外部装置接口350,提供第二控制器310与第一控制器210或外部其他设备间数据传输的组件。外部装置接口可按照有线/无线方式与诸如机顶盒、游戏装置、笔记本电脑等的外部设备连接。
视频处理器360,用于处理相关视频信号。
第二控制器310,通过运行存储在存储器390上的各种软件控制程序(如用安装的第三方应用等),以及与第一控制器210的交互,来控制显示设备200的工作和响应用户的操作。
如图5所示,第二控制器310包括只读存储器ROM 313、随机存取存储器RAM 314、图形处理器316、CPU处理器312、通信接口318、以及通信总线。其中,ROM 313和RAM 314以及图形处理器316、CPU处理器312、通信接口318通过总线相连接。
ROM 313,用于存储各种***启动的指令。CPU处理器312运行ROM中***启动指令,将存储在存储器390的操作***拷贝至RAM 314中,以开始运行启动操作***。当操作***启动完成后,CPU处理器312再将存储器390中各种应用程序拷贝至RAM 314中,然后,开始运行启动各种应用程序。
CPU处理器312,用于执行存储在存储器390中操作***和应用程序指令,和与第一控制器210进行通信、信号、数据、指令等传输与交互,以及根据接收外部输入的各种交互指令,来执行各种应用程序、数据和内容,以便最终显示和播放各种音视频内容。
通信接口318为多个,可包括第一接口318-1到第n接口318-n。这些接口可以是经由网络被连接到外部设备的网络接口,也可以是经由网络被连接到第一控制器210的网络接口。
第二控制器310可以控制显示设备200与第二显示屏380相关的操作。例如:响应于接收到用于选择在第二显示屏380上显示UI对象的用户命令,第二控制器310便可以执行与由用户命令选择的对象有关的操作。
第二控制器310可以控制显示设备200与第一显示屏280相关的操作。例如:响应于接收到用于选择在第一显示屏280上显示UI对象的用户命令,第一控制器210便可以执行与由用户命令选择的对象有关的操作。
图形处理器316,用于产生各种图形对象,如:图标、操作菜单、以及用户输入指令显示图形等。包括运算器,通过接收用户输入各种交互指令进行运算,根据显示属性显示各种对象。以及包括渲染器,产生基于运算器得到的各种对象,进行渲染的结果显示在第二显示屏380上。
第二控制器310的图形处理器316与第一控制器210的图形处理器216均能产生各种图形对象。区别性的,若应用1安装于第二控制器310,应用2安装在第一控制器210,当用户在应用1的界面,且在应用1内进行用户输入的指令时,由第二控制器310的图形处理器316产生图形对象。当用户在应用2的界面,且在应用2内进行用户输入的指令时,由第一控制器210的图形处理器216产生图形对象。
图6中示例性示出了根据示例性实施例中显示设备的功能配置示意图。
如图6所示,第二控制器310的存储器390和第一控制器210的存储器290分别用于存储操作***、应用程序、内容和用户数据等,在第二控制器310和第一控制器210的控制下执行驱动第一显示屏280和第二显示屏380的***运行以及响应用户的各种操作。存储器390和存储器290可以包括易失性和/或非易失性存储器。
对于存储器290,具体用于存储驱动显示设备200中第一控制器210的运行程序,以及存储显示设备200内置各种应用程序,以及用户从外部设备下载的各种应用程序、以及与应用程序相关的各种图形用户界面,以及与图形用户界面相关的各种对象,用户数据信息,以及各种支持应用程序的内部数据。存储器290用于存储操作***(OS)内核、中间件和应用等***软件,以及存储输入的视频数据和音频数据、及其他用户数据。
存储器290,具体用于存储视频处理器260-1和音频处理器260-2、第一显示屏280、通信器230、调谐解调器220、输入/输出接口等驱动程序和相关数据。
在一些实施例中,存储器290可以存储软件和/或程序,用于表示操作***(OS)的软件程序包括,例如:内核、中间件、应用编程接口(API)和/或应用程序。示例性的,内核可控制或管理***资源,或其它程序所实施的功能(如所述中间件、API或应用程序),以及内核可以提供接口,以允许中间件和API,或应用访问控制器,以实现控制或管理***资源。
示例的,存储器290,包括广播接收模块2901、频道控制模块2902、音量控制模块2903、图像控制模块2904、显示控制模块2905、第一音频控制模块2906、外部指令识别模块2907、通信控制模块2908、光接收模块2909、电力控制模块2910、操作***2911、以及其他应用程序2912、浏览器模块2913等等。第一控制器210通过运行存储器290中各种软件程序,来执行诸如:广播电视信号接收解调功能、电视频道选择控制功能、音量选择控制功能、图像控制功能、显示控制功能、音频控制功能、外部指令识别功能、通信控制功能、光信号接收功能、电力控制功能、支持各种功能的软件操控平台、以及浏览器功能等各类功能。
存储器390,包括存储用于驱动和控制显示设备200的各种软件模块。如:存储器390中存储的各种软件模块,包括:基础模块、检测模块、通信模块、显示控制模块、浏览器模块、和各种服务模块等(图中未示出)。由于存储器390与存储器290的功能比较相似,相关之处参见存储器290即可,在此就不再赘述。
示例的,存储器390,包括图像控制模块3904、第二音频控制模块3906、外部指令识别模块3907、通信控制模块3908、光接收模块3909、操作***3911、以及其他应用程序3912、浏览器模块3913等。第一控制器210通过运行存储器290中各种软件程序,来执行诸如:图像控制功能、显示控制功能、音频控制功能、外部指令识别功能、通信控制功能、光信号接收功能、电力控制功能、支持各种功能的软件操控平台、以及浏览器功能等各类功能。
区别性的,第一控制器210的外部指令识别模块2907和第二控制器310的外部指令识别模块3907可识别不同的指令。
示例性的,在摄像头等图像接收设备与第二控制器310连接时,第二控制器310的外部指令识别模块3907可包括图形识别模块2907-1,图形识别模块3907-1内存储有图形数据库,摄像头接收到外界的图形指令时,与图形数据库中的指令进行对应关系,以对显示设备作出指令控制。而由于语音接收设备以及遥控器与第一控制器210连接,因此,第一控制器210的外部指令识别模块2907可包括语音识别模块2907-2,语音识别模块2907-2内存储有语音数据库,语音接收设备等接收到外界的语音指令或时,与语音数据库中的指令进行对应关系,以对显示设备作出指令控制。同样的,遥控器等控制装置100与第一控制器210连接,由按键指令识别模块2907-3与控制装置100进行指令交互。
图7中示例性示出了根据示例性实施例中显示设备200中软件***的配置框图。
对于第一控制器210,如图7中所示,操作***2911,包括用于处理各种基础***服务和用于实施硬件相关任务的执行操作软件,充当应用程序和硬件组件之间完成数据处理的媒介。
一些实施例中,部分操作***内核可以包含一系列软件,用以管理显示设备硬件资源,并为其他程序或软件代码提供服务。
其他一些实施例中,部分操作***内核可包含一个或多个设备驱动器,设备驱动器可以是操作***中的一组软件代码,帮助操作或控制显示设备关联的设备或硬件。驱动器可以包含操作视频、音频和/或其他多媒体组件的代码。示例的,包括显示屏、摄像头、Flash、WiFi和音频驱动器。
其中,可访问性模块2911-1,用于修改或访问应用程序,以实现应用程序的可访问性和对其显示内容的可操作性。
通信模块2911-2,用于经由相关通信接口和通信网络与其他外设的连接。
用户界面模块2911-3,用于提供显示用户界面的对象,以供各应用程序访问,可实现用户可操作性。
控制应用程序2911-4,用于控制进程管理,包括运行时间应用程序等。
事件传输***2914,可在操作***2911内或应用程序2912中实现。一些实施例中,一方面在在操作***2911内实现,同时在应用程序2912中实现,用于监听各种用户输入事件,将根据各种事件指代响应各类事件或子事件的识别结果,而实施一组或多组预定义的操作的处理程序。
其中,事件监听模块2914-1,用于监听用户输入接口输入事件或子事件。
事件识别模块2914-2,用于对各种用户输入接口输入各类事件的定义,识别出各种事件或子事件,且将其传输给处理用以执行其相应一组或多组的处理程序。
其中,事件或子事件,是指显示设备200中一个或多个传感器检测的输入,以及外界控制设备(如控制装置100等)的输入。如:语音输入各种子事件,手势识别的手势输入子事件,以及控制装置的遥控按键指令输入的子事件等。示例的,遥控器中一个或多个子事件包括多种形式,包括但不限于按键按上/下/左右/、确定键、按键按住等中一个或组合。以及非实体按键的操作,如移动、按住、释放等操作。
界面布局管理模块2913,直接或间接接收来自于事件传输***2914监听到各用户输入事件或子事件,用于更新用户界面的布局,包括但不限于界面中各控件或子控件的位置,以及容器的大小或位置、层级等与界面布局相关各种执行操作。
由于第而控制器310的操作***3911与第一控制器210的操作***2911的功能比较相似,相关之处参见操作***2911即可,在此就不再赘述。
如图8中所示,显示设备的应用程序层包含可在显示设备200执行的各种应用程序。
第一控制器210的应用程序层2912可包含但不限于一个或多个应用程序,如:视频点播应用程序、应用程序中心、游戏应用等。第二控制器310的应用程序层3912可包含但不限于一个或多个应用程序,如:直播电视应用程序、媒体中心应用程序等。需要说明的是,第二控制器310和第一控制器210上分别包含什么应用程序是根据操作***和其他设计确定的,本申请无需对第二控制器310和第一控制器210上所包含的应用程序做具体的限定和划分。
直播电视应用程序,可以通过不同的信号源提供直播电视。例如,直播电视应用程可以使用来自有线电视、无线广播、卫星服务或其他类型的直播电视服务的输入提供电视信号。以及,直播电视应用程序可在显示设备200上显示直播电视信号的视频。
视频点播应用程序,可以提供来自不同存储源的视频。不同于直播电视应用程序,视频点播提供来自某些存储源的视频显示。例如,视频点播可以来自云存储的服务器端、来自包含已存视频节目的本地硬盘储存器。
媒体中心应用程序,可以提供各种多媒体内容播放的应用程序。例如,媒体中心,可以为不同于直播电视或视频点播,用户可通过媒体中心应用程序访问各种图像或音频所提供服务。
应用程序中心,可以提供储存各种应用程序。应用程序可以是一种游戏、应用程序,或某些和计算机***或其他设备相关但可以在显示设备中运行的其他应用程序。应用程序中心可从不同来源获得这些应用程序,将它们储存在本地储存器中,然后在显示设备200上可运行。
由于第二控制器310及第一控制器210中可能分别安装有独立的操作***,从而使显示设备200中存在两个在独立但又存在相互关联的子***。例如,第二控制器310与第一控制器210均可以独立安装有安卓(Android)及各类APP,均可以实现一定的功能,并且使第二控制器310与第一控制器210协同实现某项功能。
图9中示例性示出了根据示例性实施例中显示设备200中用户界面的示意图。如图9所示,用户界面包括视第一图显示区2011和第二图显示区2021。第一图显示区2011和第二图显示区2021的功能实现基本相同,下面仅对第一图显示区2011进行重点说明。示例的,其中,第一视图显示区2011包括布局一个或多个不同项目。以及,用户界面中还包括指示项目被选择的选择器,可通过用户输入而移动选择器的位置,以改变选择不同的项目。
一些实施例中,第一视图显示区2011为可缩放视图显示。“可缩放”,可以表示第一视图显示区2011在屏幕上尺寸或占比是可缩放的,或视图显示201中项目在屏幕上尺寸或占比是可缩放的。
“项目”是指在显示设备200中用户界面的视图显示区中显示以表示,诸如图标、缩略图、视频剪辑等对应内容的视觉对象。例如:项目可以表示电影、电视剧的图像内容或视频剪辑、音乐的音频内容、应用程序,或其他用户访问内容历史信息。
此外,项目可以表示显示设备200与外接设备连接的接口或接口集合显示,或可表示连接至显示设备的外部设备名称等。如:信号源输入接口集合、或高清多媒体接口(HighDefinition Multimedia Interface,HDMI)、USB接口、PC端子接口等。
需要说明的是:视图显示区可呈现视频聊天项目内容,或者呈现应用层项目内容(如,网页视频、云点播(Video on Demand,VOD)展示、应用程序画面等)。
“选择器”用于指示其中任意项目已被选择,如:光标或焦点对象。根据用户在显示设备200中触摸的图标或菜单位置来定位选择信息输入,可使显示设备200中显示焦点对象的移动来选择控制项目,可选择或控制其中一个或多个项目。
焦点对象指根据用户输入在项目之间移动的对象。示例的,通过项目边缘绘制粗线来实现或标识焦点对象位置。在其他实施例中,焦点形式不限于示例,可以是光标等有形或无形可被用户识别的形态,如可以项目的3D变形等形式,也可以改变聚焦的项目的文本或图像的边框线、尺寸、颜色、透明度和轮廓和/或字体等标识。
事件传输***2914,可监听到的各预定义的事件或子事件的用户输入,将识别出事件或子事件的控制直接或间接提供给界面布局管理模块2913。
界面布局管理模块2913,用于用户界面状态(包括视图分区、项目、焦点或光标对象等位置和/或大小、变化过程等)的监控,以及根据该事件或子事件,可执行修改视图显示区的大小和位置、层级等布局,和/或,调整或修改视图显示区各类项目布局的大小或/和位置、数量、类型、内容等布局。一些实施例中,修改和调整布局,包括在屏幕上显示或不显示各视图分区或视图分区中项目内容。
用户输入接口,用于将用户的输入信号发送给控制器,或者,将从控制器输出的信号传送给用户。示例性的,控制装置(例如移动终端或遥控器)可将用户输入的诸如电源开关信号、频道选择信号、音量调节信号等输入信号发送至用户输入接口,再由用户输入接口转送至控制器;或者,控制装置可接收经控制器处理从用户输入接口输出的音频、视频或数据等输出信号,并且显示接收的输出信号或将接收的输出信号输出为音频或振动形式。
在一些实施例中,用户可在显示设备200上显示的用户界面输入用户命令,则用户输入接口通过用户界面接收用户输入命令。或者,用户可通过输入特定的声音或手势进行输入用户命令,则用户输入接口通过传感器识别出声音或手势,来接收用户输入命令。
“用户界面”,是应用程序或操作***与用户之间进行交互和信息交换的介质接口,它实现信息的内部形式与用户可以接受形式之间的转换。用户界面常用的表现形式是图形用户界面(graphicuserinterface,GUI),是指采用图形方式显示的与计算机操作相关的用户界面。它可以是在电子设备的显示屏中显示的一个图标、窗口、控件等界面元素,其中控件可以包括图标、按钮、菜单、选项卡、文本框、对话框、状态栏、导航栏、Widget等可视的界面元素。
基于上述实施例中所描述的显示设备200,在一种可行的实施方式中,该显示设备200还包括语音采集装置。
在一些实施例中,上述语音采集装置可以为显示设备200对应的麦克风阵列,该麦克风阵列与第一控制器210连接。
在一些实施例中,上述语音采集装置也可以为显示设备200对应的控制装置100上的麦克风141。控制装置100可以通过通信器130将采集到的语音信息发送至第一控制器210。
另外,第一显示屏280用于显示显示内容提供商提供的服务内容,如显示电视节目、视频,游戏等;第二显示屏380用于显示与基于用户语音输入相关联的内容,如显示提醒消息、推送消息、时间、天气、聊天消息等。
参照图10,图10为本发明实施例中第一控制器210与第二控制器310显示设备的功能配置示意图一。
本实施例中,第一控制器210用于接收语音唤醒指令,将该语音唤醒指令发送至第二控制器310;第二控制器310用于根据该语音唤醒指令控制第二显示屏380显示语音输入界面;在第二显示屏380显示语音输入界面之后,第一控制器210用于接收语音采集装置采集到的第一语音信息,并识别第一语音信息。
可选的,第一控制器210获取到第一语音信息之后,可以将第一语音信息发送至服务器300,服务器300对该第一语音信息进行语音识别后,根据语音识别结果查找出与该语音识别结果相关的目标显示内容,并发送至第一控制器210。
可选的,服务器300对上述第一语音信息进行语音识别后,还可以将语音识别结果发送至第一控制器210,第一控制器210在接收到该语音识别结果后,将该语音识别结果发送至第二控制器310,第二控制器310则控制第二显示屏380显示该语音识别结果。
可以理解的是,在另一种可行的实施方式中,第一控制器210获取到第一语音信息之后,可以利用自身配置的语音识别模块2907-2对该第一语音信息进行识别。
可选的,第一控制器210利用自身配置的语音识别模块2907-2对上述第一语音信息进行语音识别后,可以直接将语音识别结果发送至第二控制器310,第二控制器310则控制第二显示屏380显示该语音识别结果。
在一种可行的实施方式中,在第二显示屏380显示语音输入界面之后,即可开启显示设备200对应的麦克风阵列,采集用户发出的第一语音信息,然后将采集到的第一语音信息传输至第一控制器210。
在另一种可行的实施方式中,在第二显示屏380显示语音输入界面之后,如果第一控制器检测到控制装置100触发的采集指令,则可以通过控制装置100上的麦克风141采集用户发出的第一语音信息,此时,显示设备200对应的麦克风阵列可以处于关闭状态,以避免显示设备中的麦克风也获取到语音信息,从而出现混乱。例如,当用户想要通过控制装置100上的麦克风141录入语音信息时,可以持续按压控制装置100上的语音输入按键,然后对着控制装置100上的麦克风141发出语音,在语音结束之后,松开语音输入按键,此时控制装置100会将语音输入按键处于按压期间采集到的第一语音信息传输至第一控制器210。
可选的,显示设备200上可以设置有远场拾音模块(图中未示出),该远场拾音模块能够远距离收集用户的语音,无需用户按压控制装置100上的麦克风141进行收音。
进一步的,在识别出上述第一语音信息之后,即可根据识别结果获取该第一语音信息所请求的目标显示数据,并发送至第二控制器310,第二控制器310用于控制第二显示屏380显示目标显示数据。
可选的,第一控制器210可以将语音识别结果发送至服务器300,由服务器300根据该语音识别结果查找与该语音识别结果相关的目标显示数据。
可以理解的是,本发明实施例中,上述语音采集装置也可以与第二控制器310连接,将采集到的语音信息发送至第二控制器310,由第二控制器310对该语音信息进行相关的处理,具体处理方式可以参考第一控制器210的处理方式,在此不再赘述。
可选的,当用户需要与显示设备200进行语音交互时,可以通过预先设定好的唤醒方式,向显示设备200发送语音唤醒指令。
例如,在一种可行的实施方式中,用户可以触发控制装置100中的语音交互按键来向显示设备200发送语音唤醒指令。其中,第一控制器210可以用于接收显示设备200对应的控制装置100发出的按键信号,并对接收到的按键信号进行解析,当接收到的按键信号由控制装置100中预置的语音交互按键触发生成时,第一控制器210即可确认接收到语音唤醒指令。
在另一种可行的实施方式中,用户可以向显示设备200的语音采集装置发出预先设置的唤醒关键词,例如“嗨,小聚”等,来向显示设备200发送语音唤醒指令。其中,第一控制器210可以用于接收语音采集装置采集到的语音信息,并对该语音信息进行识别,当确定该语音信息的识别结果中包含预设的唤醒关键词时,第一控制器210即可确认接收到所述语音唤醒指令。
可以理解的是,本发明实施例中,上述第二控制器310也可以用于接收显示设备200对应的控制装置100发出的按键信号,并对接收到的按键信号进行解析,当接收到的按键信号由控制装置100中预置的语音交互按键触发生成时,确认接收到语音唤醒指令。另外,上述第二控制器310还可以用于接收语音采集装置采集到的语音信息,并对该语音信息进行识别,当确定该语音信息的识别结果中包含预设的唤醒关键词时,即可确认接收到上述语音唤醒指令。
为了更好的理解本实施例,参照图11a至图11d,图11a至图11d为本发明实施例中显示设备的语音交互示意图一。
如图11a所示,在进行语音交互之前,第二显示屏380显示待机界面1101,该待机界面1101中可以显示预先设计的语音助手图像,该语音助手可以看作是一个随时可见的语音交互伴侣,在各种场景下,他可以一直都在等待与用户的对话。
当用户需要与显示设备200进行语音交互时,可以通过预先设定好的唤醒方式,向显示设备200发送语音唤醒指令。例如,在一种可行的实施方式中,用户可以通过显示设备200的语音采集装置说出预先设定好的唤醒关键词,如“嗨,小聚”等;此时,显示设备200的语音采集装置会将采集到的语音信息发送至第一控制器210,第一控制器210对接收到的语音信息进行识别,若识别结果中包括上述唤醒关键词,则向第二控制器310发送语音唤醒指令,第二控制器310根据该语音唤醒指令控制第二显示屏380从待机界面1101切换至语音输入界面1102,如图11b所示。
可选的,第二显示屏380从待机界面1101切换至语音输入界面1102后,可以显示提醒消息用于提醒用户显示设备200已进入语音交互状态,例如,可以在语音输入界面1102显示“您需要什么帮助?”。
当第二显示屏380从待机界面1101切换至语音输入界面1102后,上述语音采集装置开始采集用户输入的语音信息,并将采集到的语音信息发送至第一控制器210。例如,在一种可行的实施方式中,用户可以通过显示设备200的麦克风说出“今天天气怎么样?”;此时,显示设备200的麦克风会将采集到的语音信息发送至第一控制器210。第一控制器210在接收到该语音信息后,对该语音信息进行识别,并将识别结果发送至第二控制器310,第二控制器310便控制第二显示屏380在语音输入界面1102显示识别结果“今天天气怎么样?”,如图11c所示。
同时,第一控制器210会获取与该语音信息相关的显示数据,并发送至第二控制器310,第二控制器310控制第二显示屏380显示目标显示数据。例如,在一种可行的实施方式中,第一控制器210将上述“今天天气怎么样?”的语音信息发送至服务器300,由服务器300查找显示设备200所在地的天气状况信息,并反馈至第一控制器210,第一控制器210在接收到该天气状况信息后,将接收到的天气状况信息发送至第二控制器310,第二控制器310控制第二显示屏380在交互展示界面1103显示该天气状况信息,如显示“26℃多云空气质量优”等,可参照图11d。
可选的,在进行上述语音交互的过程中,第一显示屏280可以用于播放影视图像、游戏图像等,也可以处于息屏状态。这里,息屏状态可以为至少包括第一显示屏不点亮的状态。即上述语音交互的整个全程都只在第二显示屏380上显示,并不影响第一显示屏280显示的内容。
本发明实施例所提供的显示设备200,除了第一显示屏280以及对第一显示屏280进行控制的第一控制器210之外,还设置有第二显示屏380以及对第二显示屏380进行控制的第二控制器310,在显示设备200进行语音交互时,可以将语音交互过程以及目标显示数据通过第二显示屏380来显示,由此即可避免语音交互过程对第一显示屏280中正常播放的内容造成影响。
基于上述实施例所描述的内容,在另一种可行的实施例中,参照图12,图12为本发明实施例中第一控制器210与第二控制器310显示设备的功能配置示意图二。
第一控制器210与第二控制器310被配置为:
第一控制器210接收语音唤醒指令,将该语音唤醒指令发送至第二控制器310。
第二控制器310根据该语音唤醒指令控制第二显示屏380显示语音输入界面。
在第二显示屏380显示语音输入界面之后,第一控制器210接收语音采集装置采集到的第一语音信息,识别第一语音信息,并发送识别结果至第二控制器310。
第二控制器310控制第二显示屏显示识别结果。
第一控制器210获取该第一语音信息所请求的目标显示数据,确定目标显示数据中是否包括需要在第一显示屏280显示的第一数据;当确定目标显示数据中包括第一数据时,控制第一显示屏280显示第一数据。目标显示数据中的第二数据至第二控制器310。
第二控制器310控制第二显示屏显示第二数据。
即在本实施例中,第一控制器210在获取到第一语音信息所请求的目标显示数据之后,可以对目标显示数据进行分类,确定目标显示数据中是否存在需要在第一显示屏280显示的第一数据。当确定目标显示数据中存在需要在第一显示屏280显示的第一数据时,控制第一显示屏280显示第一数据;同时将目标显示数据中除第一数据外的第二数据发送至第二控制器310,由第二控制器310控制第二显示屏380显示第二数据。
例如,当用户进行闲聊、查询天气或时间等语音对话时,语音交互过程中产生目标显示数据可以仅在第二显示屏380上显示,此时目标显示数据中不存在需要在第一显示屏280显示的第一数据;当用户进行影片搜索等语音对话时,可以将搜索到的影片在第一显示屏280上播放,在第二显示屏380仅显示搜索到的影片名称或者影片列表,此种情况下目标显示数据中便存在需要在第一显示屏280显示的第一数据。
在另一种可行的实施例中,上述显示设备的第一控制器210与第二控制器310被配置为:
第一控制器210在第一显示屏280处于息屏状态的过程中,接收语音唤醒指令,将该语音唤醒指令发送至第二控制器310。
第二控制器310用于根据语音唤醒指令控制第二显示屏380显示语音输入界面。
第一控制器210还用于:在第二显示屏380显示语音输入界面之后,接收语音采集装置采集到的第一语音信息;获取第一语音信息所请求的目标显示数据;控制第一显示屏280进入亮屏状态,并显示目标显示数据中包括的第一数据;以及将目标显示数据中除第一数据之外的剩余数据发送至第二控制器310;
第二控制器310还用于控制第二显示屏380显示上述剩余数据。
可选的,在目标显示数据中包括上述第一数据时,第一控制器210先确定第一显示屏280是否处于息屏状态;当第一显示屏280处于息屏状态时,第一控制器210控制第一显示屏280进入亮屏状态,然后再控制第一显示屏280显示上述第一数据。
可选的,第一控制器210在控制第一显示屏280显示第一数据时,可以控制第一显示屏280生成消息弹窗,并在消息弹窗中显示第一数据。
可选的,上述第一数据中可以包括至少一个或多个数据标签(在前述实施例中也叫项目),用户可以通过操控焦点框(在前述实施例中也叫选择器)的方式来选择打开任意一个数据标签,或者任意一个数据标签包含的下一级显示内容。其中,第一控制器210在接收到用户确认指令后,确定消息弹窗中的焦点框当前选中的数据标签是否包含下一级显示内容,若包含,则控制第一显示屏280显示下一级显示内容,若不包含,则可以放大展示该数据标签,或者打开该数据标签对应的链接。
为了更好的理解本实施例,参照图13a至图13e,图13a至图13e为本发明实施例中显示设备的语音交互示意图二。
如图13a所示,在进行语音交互之前,第二显示屏380显示待机界面1101,该待机界面1101中可以显示预先设计的语音助手图像,该语音助手可以看作是一个随时可见的语音交互伴侣,在各种场景下,他一直都在在等待与用户的对话。
如图13b所示,当用户需要与显示设备200进行语音交互时,可以通过预先设定好的唤醒方式,向显示设备200发送语音唤醒指令。例如,在一种可行的实施方式中,用户可以通过显示设备200的语音采集装置说出预先设定好的唤醒关键词,如“嗨,小聚”等;此时,显示设备200的语音采集装置会将采集到的语音信息发送至第一控制器210,第一控制器210对接收到的语音信息进行识别,若识别结果中包括上述唤醒关键词,则向第二控制器310发送语音唤醒指令,第二控制器310根据该语音唤醒指令控制第二显示屏380从待机界面1101切换至语音输入界面1102。
可选的,第二显示屏380从待机界面1101切换至语音输入界面1102后,可以显示提醒消息用于提醒用户显示设备200已进入语音交互状态,例如,可以在语音输入界面1102显示“您需要什么帮助?”。
如图13c所示,当第二显示屏380从待机界面1101切换至语音输入界面1102后,上述语音采集装置开始采集用户输入的语音信息,并将采集到的语音信息发送至第一控制器210。例如,在一种可行的实施方式中,用户可以通过显示设备200的麦克风说出“查找热播节目”;此时,显示设备200的麦克风会将采集到的语音信息发送至第一控制器210。第一控制器210在接收到该语音信息后,对该语音信息进行识别,并将识别结果发送至第二控制器310,第二控制器310便控制第二显示屏380显示识别结果“查找热播节目”。
如图13d所示,第一控制器210会获取与上述语音信息相关的目标显示数据,然后对该目标显示数据进行分类,确定需要在第一显示屏280显示的第一显示数据,以及需要在第二显示屏380显示的第二显示数据,并控制第一显示屏280显示第一显示数据,同时将第二显示数据发送至第二控制器310,使第二控制器310控制第二显示屏380显示目标显示数据。
例如,在一种可行的实施方式中,第一控制器210将上述“查找热播节目”的语音信息发送至服务器300,由服务器300查找预设影视节目数据库中播放热度排名前n的节目,然后将查找到的节目的播放链接与相关介绍信息发送至第一控制器210,第一控制器210在接收到服务器发送的数据后,控制第一显示屏280生成消息弹窗1301,并在该消息弹窗1301中显示服务器300查找到的各个热播节目的播放链接与相关介绍信息。同时将搜索到的热播节目的数量发送至第二控制器310,第二控制器310控制第二显示屏380在交互展示界面1103中显示搜索到的热播节目的数量,如显示“搜索到n个热播节目”。
可选的,第一显示屏280可以通过不同的数据标签1303来分别展示服务器300查找到的各个热播节目的播放链接与相关介绍信息,用户若想打开任意一个热播节目,则可以通过移动消息弹窗1301中的焦点框1302,选中该热播节目对应的数据标签,然后触发“确认”指令后,即可在第一显示屏280中打开该热播节目1304,如图13e所示。
本发明实施例所提供的显示设备200,除了第一显示屏280以及对第一显示屏280进行控制的第一控制器210之外,还设置有第二显示屏380以及对第二显示屏380进行控制的第二控制器310,在显示设备200进行语音交互时,可以将语音交互过程通过第二显示屏380来显示,第一显示屏280则只用于显示语音交互的结果,由此即可避免语音交互过程对第一显示屏280中正常播放的内容造成影响。
基于上述实施例所描述的内容,在一种可行的实施方式中,第一控制器210在接收到语音交互指令之后,若第一控制器210接收到用于指示退出语音交互的指令,则可以基于该指令控制第一显示屏280返回至初始状态,该初始状态为第一控制器210接收到语音唤醒指令之前的状态;和/或,将该返回指令发送至第二控制器310,第二控制器310用于基于该返回指令控制第二显示屏380返回至待机界面。
例如,第二控制器310在控制第二显示屏380显示语音输入界面后,若第一控制器210接收到上述指令,则第一控制器210将接收到的指令发送至第二控制器310,第二控制器310基于该指令控制第二显示屏380从语音输入界面切换回待机界面。
可以理解的是,上述实施例中所提供的显示设备200还可以应用于其它应用场景,例如,在一种可行的实施方式中,用户可以第二显示屏380从待机界面1101切换至语音输入界面1102后,通过语音来控制显示设备200播放音乐。
可选的,显示设备200在启动音乐播放应用后,可以仅仅只在第二显示屏380上显示歌曲信息,如显示歌曲名称、歌手姓名、专辑名称、播放进度条、播放/暂停图标、音量大小等信息;此时第一显示屏280可以处于息屏状态,或者也可以播放其它内容,例如演示文档、电子书、游戏、相册等。
可选的,显示设备200在启动音乐播放应用后,可以在第二显示屏380上显示歌曲信息的同时,在第一显示屏280上显示当前播放的歌曲的音乐短片(Music Video,MV),或者专辑封面等。
参照图14a与图14b,图14a与图14b为本发明实施例中显示设备200的语音交互示意图三。
在第二显示屏380从待机界面1101切换至语音输入界面1102后,用户可以通过上述语音采集装置说出“播放歌曲A”;此时,显示设备200的麦克风会将采集到的语音信息发送至第一控制器210。第一控制器210在接收到该语音信息后,对该语音信息进行识别,并将识别结果发送至第二控制器310,第二控制器310便控制第二显示屏380在语音输入界面1102显示识别结果“播放歌曲A”,如图14a所示。
第二显示屏380在语音输入界面1102显示识别结果之后,第一控制器210获取与歌曲A相关的播放资源与歌曲信息,将该歌曲信息发送至第二控制器310,其中,第二控制器310在接收到该歌曲信息后,控制第二显示屏380在交互展示界面1103显示该歌曲信息,如图14b所示。同时,第一控制器210会控制扬声器272播放歌曲A。
在一种可行的实施方式中,用户可以第二显示屏380从待机界面1101切换至语音输入界面1102后,通过语音来启动倒计时功能。
可选的,显示设备200在启动倒计时功能后,可以仅仅只在第二显示屏380上显示倒计时信息;此时第一显示屏280可以处于息屏状态,或者也可以播放其它内容,例如电视节目、游戏、电影等。
参照图15a与图15b,图15a与图15b为本发明实施例中显示设备200的语音交互示意图四。
在第二显示屏380从待机界面1101切换至语音输入界面1102后,用户可以通过上述语音采集装置说出“倒计时10分钟”;此时,显示设备200的麦克风会将采集到的语音信息发送至第一控制器210。第一控制器210在接收到该语音信息后,对该语音信息进行识别,并将识别结果发送至第二控制器310,第二控制器310便控制第二显示屏380在语音输入界面1102显示识别结果“倒计时10分钟”,如图15a所示。
第二显示屏380在语音输入界面1102显示识别结果之后,第一控制器210调用计时器开始倒计时,并将倒计时信息发送至第二控制器310,其中,第二控制器310在接收到该倒计时信息后,控制第二显示屏380在交互展示界面1103显示该倒计时信息,如图15b所示,显示“09分03秒后提醒”。
另外,第二显示屏380在语音输入界面1102显示识别结果之后,第一控制器也可以向第二控制器310发送倒计时启动指令,第二控制器310在接收到该倒计时启动指令后,启动计时器开始倒计时,同时控制第二显示屏380在交互展示界面1103显示倒计时信息。
基于上述实施例中所描述的内容,本申请实施例中还提供了一种显示设备中内容显示方法,该显示设备包括第一显示屏和第二显示屏,其中,第一显示屏被配置为显示内容提供商提供的服务内容,第二显示屏被配置为显示与基于用户语音输入相关联的内容,上述方法包括以下步骤:
接收语音唤醒指令;
根据所述语音唤醒指令控制所述第二显示屏显示语音输入界面;
在所述第二显示屏显示语音输入界面之后,接收第一语音信息;
获取所述第一语音信息所请求的目标显示数据;
在所述第二显示屏上显示所述目标显示数据。
可选的,上述根据所述语音唤醒指令控制所述第二显示屏显示语音输入界面,包括:
根据语音唤醒指令,控制第二显示屏的显示界面从待机界面切换至语音输入界面。
可选的,上述获取第一语音信息所请求的目标显示数据,包括:
将第一语音信息发送至服务器;
接收服务器发送的目标显示数据,该目标显示数据是服务器对第一语音信息进行识别后,基于第一语音信息的识别结果确定的。
可选的,将第一语音信息发送至服务器之后,还包括:
接收服务器对所述第一语音信息的识别结果;
在第二显示屏上显示所述识别结果。
在本发明实施例中,显示设备除了第一显示屏之外,还设置有第二显示屏,在显示设备进行语音交互时,可以将语音交互过程以及目标显示数据通过第二显示屏来显示,由此即可避免语音交互过程对第一显示屏中正常播放的内容造成影响。
在本申请还提供另一种显示设备中内容显示方法,该方法包括:
接收语音唤醒指令;
根据所述语音唤醒指令控制所述第二显示屏显示语音输入界面;
在所述第二显示屏显示语音输入界面之后,接收第一语音信息;
获取所述第一语音信息所请求的目标显示数据;
确定所述目标显示数据中是否包括需要在所述第一显示屏显示的第一数据;
当确定所述目标显示数据中包括所述第一数据时,控制所述第一显示屏显示所述第一数据;
在所述第二显示屏上显示所述目标显示数据中除所述第一数据之外的剩余数据。
可选的,上述接收语音唤醒指令,包括:
接收所述显示设备对应的遥控装置发出的按键信号;
对所述按键信号进行解析,当所述按键信号由所述遥控装置中预置的语音唤醒按键触发生成时,确认接收到所述语音唤醒指令。
可选的,上述接收语音唤醒指令,包括:
接收所述语音采集装置采集到的第二语音信息,并对所述第二语音信息进行识别;
当确定对所述第二语音信息的识别结果中包含预设的唤醒关键词时,确认接收到所述语音唤醒指令。
本发明实施例所提供的显示设备中内容显示方法,在显示设备进行语音交互时,可以将语音交互过程通过第二显示屏来显示,第一显示屏则只用于显示语音交互的结果,由此即可避免语音交互过程对第一显示屏中正常播放的内容造成影响。
在本申请还提供另一种显示设备中内容显示方法,该方法包括:
接收语音唤醒指令;
根据所述语音唤醒指令控制所述第二显示屏显示语音输入界面;
在所述第二显示屏显示语音输入界面之后,接收第一语音信息;
获取所述第一语音信息所请求的目标显示数据;
控制所述第一显示屏进入亮屏状态,并显示所述目标显示数据中包括的第一数据;
在所述第二显示屏上显示所述目标显示数据中除所述第一数据之外的剩余数据。
可选的,上述控制第一显示屏进入亮屏状态,并显示目标显示数据中包括的第一数据,包括:
在控制所述第一显示屏进入亮屏状态后,控制所述第一显示屏生成消息弹窗,并在所述消息弹窗中显示所述第一数据。
可选的,上述方法还包括:
接收用户确认指令,确定消息弹窗中的焦点框当前选中的数据标签是否包含下一级显示内容,上述第一数据包括至少一个数据标签;
当焦点框当前选中的数据标签包含下一级显示内容时,控制第一显示屏显示下一级显示内容。
可选的,上述方法还包括:
在接收到语音交互指令之后,接收用于指示退出语音交互的指令;
基于指令控制所述第一显示屏返回至初始状态,该初始状态为接收到语音唤醒指令之前第一显示屏的状态;和/或,基于上述指令控制第二显示屏返回至待机界面。
本发明实施例所提供的显示设备中内容显示方法,在显示设备进行语音交互时,可以将语音交互过程通过第二显示屏来显示,第一显示屏则只用于显示语音交互的结果,由此即可避免语音交互过程对第一显示屏中正常播放的内容造成影响。
可以理解的是,上述各个显示设备中内容显示方法中对应的各个步骤,与上述实施例中所描述的显示设备的各项功能一致,具体可参照上述实施例中所描述的显示设备,在此不再赘述。
在本发明所提供的几个实施例中,应该理解到,所述作为分离部件说明的模块可以是或者也可以不是物理上分开的,作为模块显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能模块可以集成在一个处理单元中,也可以是各个模块单独物理存在,也可以两个或两个以上模块集成在一个单元中。上述模块成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
上述以软件功能模块的形式实现的集成的模块,可以存储在一个计算机可读取存储介质中。上述软件功能模块存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或处理器(英文:processor)执行本申请。
最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。
Claims (22)
1.一种显示设备,其特征在于,包括:
第一显示屏,用于显示内容提供商提供的服务内容;
第二显示屏,用于显示与基于用户语音输入相关联的内容;
语音采集装置,用于采集语音信号;
与所述第一显示屏通信的第一控制器,以及与所述第二显示屏通信的第二控制器,所述第一控制器和所述第二控制器通信连接;
所述第一控制器用于接收语音唤醒指令,将所述语音唤醒指令发送至所述第二控制器;
所述第二控制器用于根据所述语音唤醒指令控制所述第二显示屏显示语音输入界面;
所述第一控制器还用于:在所述第二显示屏显示语音输入界面之后,接收所述语音采集装置采集到的第一语音信息;
获取所述第一语音信息所请求的目标显示数据;
将所述目标显示数据发送至所述第二控制器;
所述第二控制器还用于控制所述第二显示屏显示所述目标显示数据。
2.根据权利要求1所述的显示设备,其特征在于,所述第二控制器具体用于:
根据所述语音唤醒指令,控制所述第二显示屏的显示界面从待机界面切换至所述语音输入界面。
3.根据权利要求1所述的显示设备,其特征在于,所述第一控制器具体用于:
将所述第一语音信息发送至服务器;
接收所述服务器发送的所述目标显示数据,所述目标显示数据是所述服务器对所述第一语音信息进行识别后,基于所述第一语音信息的识别结果确定的。
4.根据权利要求3所述的显示设备,其特征在于,所述第一控制器还用于:
接收所述服务器对所述第一语音信息的识别结果,并将所述识别结果发送至所述第二控制器;
所述第二控制器还用于:控制所述第二显示屏显示所述识别结果。
5.一种显示设备,其特征在于,包括:
第一显示屏;
第二显示屏;
语音采集装置,用于采集语音信号;
与所述第一显示屏通信的第一控制器,以及与所述第二显示屏通信的第二控制器,所述第一控制器和所述第二控制器通信连接;
所述第一控制器,用于在所述第一显示屏上显示内容提供商提供的服务内容的过程中,接收语音唤醒指令,将所述语音唤醒指令发送至所述第二控制器;
所述第二控制器用于根据所述语音唤醒指令控制所述第二显示屏显示语音输入界面;
所述第一控制器还用于:在所述第二显示屏显示语音输入界面之后,接收所述语音采集装置采集到的第一语音信息;
获取所述第一语音信息所请求的目标显示数据;
确定所述目标显示数据中是否包括需要在所述第一显示屏显示的第一数据;
当确定所述目标显示数据中包括所述第一数据时,控制所述第一显示屏显示所述第一数据;
将所述目标显示数据中除所述第一数据之外的剩余数据发送至所述第二控制器;
所述第二控制器还用于控制所述第二显示屏显示所述剩余数据。
6.根据权利要求5所述的显示设备,其特征在于,所述第一控制器具体用于:
接收所述显示设备对应的控制装置发出的按键信号;
对所述按键信号进行解析,当所述按键信号由所述控制装置中预置的语音交互按键触发生成时,确认接收到所述语音唤醒指令。
7.根据权利要求5所述的显示设备,其特征在于,所述第一控制器具体用于:
接收所述语音采集装置采集到的第二语音信息,并对所述第二语音信息进行识别;
当确定对所述第二语音信息的识别结果中包含预设的唤醒关键词时,确认接收到所述语音唤醒指令。
8.一种显示设备,其特征在于,包括:
第一显示屏;
第二显示屏;
语音采集装置,用于采集语音信号;
与所述第一显示屏通信的第一控制器,以及与所述第二显示屏通信的第二控制器,所述第一控制器和所述第二控制器通信连接;
所述第一控制器,用于在所述第一显示屏处于息屏状态的过程中,接收语音唤醒指令,将所述语音唤醒指令发送至所述第二控制器;
所述第二控制器用于根据所述语音唤醒指令控制所述第二显示屏显示语音输入界面;
所述第一控制器还用于:在所述第二显示屏显示语音输入界面之后,接收所述语音采集装置采集到的第一语音信息;
获取所述第一语音信息所请求的目标显示数据;
控制所述第一显示屏进入亮屏状态,并显示所述目标显示数据中包括的第一数据;
将所述目标显示数据中除所述第一数据之外的剩余数据发送至所述第二控制器;
所述第二控制器还用于控制所述第二显示屏显示所述剩余数据。
9.根据权利要求8所述的显示设备,其特征在于,所述第一控制器具体用于:
控制所述第一显示屏生成消息弹窗,并在所述消息弹窗中显示所述第一数据。
10.根据权利要求9所述的显示设备,其特征在于,所述第一控制器还用于:
接收用户确认指令,确定所述消息弹窗中的焦点框当前选中的数据标签是否包含下一级显示内容,所述第一数据包括至少一个数据标签;
当所述焦点框当前选中的数据标签包含下一级显示内容时,控制所述第一显示屏显示所述下一级显示内容。
11.根据权利要求8所述的显示设备,其特征在于,所述第一控制器还用于:
在接收到语音交互指令之后,接收用于指示退出语音交互的指令;
基于所述指令控制所述第一显示屏返回至初始状态,所述初始状态为所述第一控制器接收到所述语音唤醒指令之前的状态;和/或,将所述返回指令发送至所述第二控制器,所述第二控制器用于基于所述指令控制所述第二显示屏返回至待机界面。
12.一种显示设备中内容显示方法,其特征在于,所述显示设备包括第一显示屏和第二显示屏,所述第一显示屏被配置为显示内容提供商提供的服务内容,所述第二显示屏被配置为显示与基于用户语音输入相关联的内容,所述方法包括:
接收语音唤醒指令;
根据所述语音唤醒指令控制所述第二显示屏显示语音输入界面;
在所述第二显示屏显示语音输入界面之后,接收第一语音信息;
获取所述第一语音信息所请求的目标显示数据;
在所述第二显示屏上显示所述目标显示数据。
13.根据权利要求12所述的方法,其特征在于,所述根据所述语音唤醒指令控制所述第二显示屏显示语音输入界面,包括:
根据所述语音唤醒指令,控制所述第二显示屏的显示界面从待机界面切换至所述语音输入界面。
14.根据权利要求12所述的方法,其特征在于,所述获取所述第一语音信息所请求的目标显示数据,包括:
将所述第一语音信息发送至服务器;
接收所述服务器发送的所述目标显示数据,所述目标显示数据是所述服务器对所述第一语音信息进行识别后,基于所述第一语音信息的识别结果确定的。
15.根据权利要求14所述的方法,其特征在于,所述将所述第一语音信息发送至服务器之后,还包括:
接收所述服务器对所述第一语音信息的识别结果;
在所述第二显示屏上显示所述识别结果。
16.一种显示设备中内容显示方法,其特征在于,所述显示设备包括第一显示屏和第二显示屏,所述方法包括:
接收语音唤醒指令;
根据所述语音唤醒指令控制所述第二显示屏显示语音输入界面;
在所述第二显示屏显示语音输入界面之后,接收第一语音信息;
获取所述第一语音信息所请求的目标显示数据;
确定所述目标显示数据中是否包括需要在所述第一显示屏显示的第一数据;
当确定所述目标显示数据中包括所述第一数据时,控制所述第一显示屏显示所述第一数据;
在所述第二显示屏上显示所述目标显示数据中除所述第一数据之外的剩余数据。
17.根据权利要求16所述的方法,其特征在于,所述接收语音唤醒指令,包括:
接收所述显示设备对应的遥控装置发出的按键信号;
对所述按键信号进行解析,当所述按键信号由所述遥控装置中预置的语音唤醒按键触发生成时,确认接收到所述语音唤醒指令。
18.根据权利要求16所述的方法,其特征在于,所述接收语音唤醒指令,包括:
接收所述语音采集装置采集到的第二语音信息,并对所述第二语音信息进行识别;
当确定对所述第二语音信息的识别结果中包含预设的唤醒关键词时,确认接收到所述语音唤醒指令。
19.一种显示设备中内容显示方法,其特征在于,所述显示设备包括第一显示屏和第二显示屏,所述方法包括:
接收语音唤醒指令;
根据所述语音唤醒指令控制所述第二显示屏显示语音输入界面;
在所述第二显示屏显示语音输入界面之后,接收第一语音信息;
获取所述第一语音信息所请求的目标显示数据;
控制所述第一显示屏进入亮屏状态,并显示所述目标显示数据中包括的第一数据;
在所述第二显示屏上显示所述目标显示数据中除所述第一数据之外的剩余数据。
20.根据权利要求19所述的方法,其特征在于,所述控制所述第一显示屏进入亮屏状态,并显示所述目标显示数据中包括的第一数据,包括:
在控制所述第一显示屏进入亮屏状态后,控制所述第一显示屏生成消息弹窗,并在所述消息弹窗中显示所述第一数据。
21.根据权利要求20所述的方法,其特征在于,所述方法还包括:
接收用户确认指令,确定所述消息弹窗中的焦点框当前选中的数据标签是否包含下一级显示内容,所述第一数据包括至少一个数据标签;
当所述焦点框当前选中的数据标签包含下一级显示内容时,控制所述第一显示屏显示所述下一级显示内容。
22.根据权利要求19所述的方法,其特征在于,所述方法还包括:
在接收到语音交互指令之后,接收用于指示退出语音交互的指令;
基于所述指令控制所述第一显示屏返回至初始状态,所述初始状态为接收到所述语音唤醒指令之前所述第一显示屏的状态;和/或,基于所述指令控制所述第二显示屏返回至待机界面。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2019110679806 | 2019-11-04 | ||
CN201911067980 | 2019-11-04 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112786036A true CN112786036A (zh) | 2021-05-11 |
CN112786036B CN112786036B (zh) | 2023-08-08 |
Family
ID=75749198
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010275241.2A Active CN112786036B (zh) | 2019-11-04 | 2020-04-09 | 显示设备与内容显示方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112786036B (zh) |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011081541A (ja) * | 2009-10-06 | 2011-04-21 | Canon Inc | 入力装置及びその制御方法 |
CN203788412U (zh) * | 2013-10-09 | 2014-08-20 | 巍世科技有限公司 | 电视双屏幕装置 |
US20150207924A1 (en) * | 2014-01-17 | 2015-07-23 | Lg Electronics Inc. | Mobile terminal and controlling method thereof |
CN108139875A (zh) * | 2016-01-15 | 2018-06-08 | 谷歌有限责任公司 | 具有双屏幕设备的可调适用户界面 |
KR20180094331A (ko) * | 2017-02-15 | 2018-08-23 | 삼성전자주식회사 | 전자 장치 및 전자 장치의 메시지 데이터 출력 방법 |
US20190102146A1 (en) * | 2017-10-04 | 2019-04-04 | Hand Held Products, Inc. | Efficient direct store delivery system and methods of using the same |
CN109643546A (zh) * | 2016-08-31 | 2019-04-16 | 三星电子株式会社 | 显示设备和用于控制显示设备的方法 |
CN109922289A (zh) * | 2019-03-25 | 2019-06-21 | 深圳创维-Rgb电子有限公司 | 一种双屏电视 |
CN109960537A (zh) * | 2019-03-29 | 2019-07-02 | 北京金山安全软件有限公司 | 交互方法、装置和电子设备 |
CN110075534A (zh) * | 2019-05-14 | 2019-08-02 | 网易(杭州)网络有限公司 | 实时语音方法与装置、存储介质、电子设备 |
-
2020
- 2020-04-09 CN CN202010275241.2A patent/CN112786036B/zh active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011081541A (ja) * | 2009-10-06 | 2011-04-21 | Canon Inc | 入力装置及びその制御方法 |
CN203788412U (zh) * | 2013-10-09 | 2014-08-20 | 巍世科技有限公司 | 电视双屏幕装置 |
US20150207924A1 (en) * | 2014-01-17 | 2015-07-23 | Lg Electronics Inc. | Mobile terminal and controlling method thereof |
CN108139875A (zh) * | 2016-01-15 | 2018-06-08 | 谷歌有限责任公司 | 具有双屏幕设备的可调适用户界面 |
CN109643546A (zh) * | 2016-08-31 | 2019-04-16 | 三星电子株式会社 | 显示设备和用于控制显示设备的方法 |
KR20180094331A (ko) * | 2017-02-15 | 2018-08-23 | 삼성전자주식회사 | 전자 장치 및 전자 장치의 메시지 데이터 출력 방법 |
US20190102146A1 (en) * | 2017-10-04 | 2019-04-04 | Hand Held Products, Inc. | Efficient direct store delivery system and methods of using the same |
CN109922289A (zh) * | 2019-03-25 | 2019-06-21 | 深圳创维-Rgb电子有限公司 | 一种双屏电视 |
CN109960537A (zh) * | 2019-03-29 | 2019-07-02 | 北京金山安全软件有限公司 | 交互方法、装置和电子设备 |
CN110075534A (zh) * | 2019-05-14 | 2019-08-02 | 网易(杭州)网络有限公司 | 实时语音方法与装置、存储介质、电子设备 |
Also Published As
Publication number | Publication date |
---|---|
CN112786036B (zh) | 2023-08-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111510753B (zh) | 显示设备 | |
CN111526415B (zh) | 一种双屏显示设备及其hdmi的切换方法 | |
CN111491190B (zh) | 一种双***摄像头切换控制方法及显示设备 | |
CN112788422A (zh) | 显示设备 | |
CN111526402A (zh) | 多屏显示设备的语音搜索视频资源的方法及显示设备 | |
CN111464840B (zh) | 显示设备及显示设备屏幕亮度的调节方法 | |
CN112783380A (zh) | 显示设备和方法 | |
CN112839254A (zh) | 显示设备与内容显示方法 | |
CN112788423A (zh) | 一种显示设备及菜单界面的显示方法 | |
CN113115083A (zh) | 显示设备及显示方法 | |
CN113141528B (zh) | 显示设备、开机动画播放方法及存储介质 | |
CN112788378A (zh) | 显示设备与内容显示方法 | |
CN112784137A (zh) | 显示设备、显示方法及计算设备 | |
CN113365124B (zh) | 一种显示设备及显示方法 | |
CN112788381B (zh) | 显示设备及显示方法 | |
CN113497884B (zh) | 一种双***摄像头切换控制方法及显示设备 | |
WO2021088308A1 (zh) | 一种显示设备及音乐推荐方法 | |
CN112788375A (zh) | 显示设备、显示方法及计算设备 | |
CN112788387A (zh) | 显示设备、方法和存储介质 | |
CN113015023A (zh) | Html5网页中的视频控制的方法及装置 | |
CN112927653A (zh) | 显示设备与背光亮度的控制方法 | |
CN112073808A (zh) | 一种色彩空间切换方法及显示装置 | |
CN112786036B (zh) | 显示设备与内容显示方法 | |
CN113453079B (zh) | 一种双***大小双屏应用返回的控制方法及显示设备 | |
CN111970547B (zh) | 一种显示设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |