CN112911354A - 显示设备和声音控制方法 - Google Patents

显示设备和声音控制方法 Download PDF

Info

Publication number
CN112911354A
CN112911354A CN201911240016.9A CN201911240016A CN112911354A CN 112911354 A CN112911354 A CN 112911354A CN 201911240016 A CN201911240016 A CN 201911240016A CN 112911354 A CN112911354 A CN 112911354A
Authority
CN
China
Prior art keywords
speaker
sound
controller
loudspeaker
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201911240016.9A
Other languages
English (en)
Other versions
CN112911354B (zh
Inventor
姜元恩
王海盈
杨建新
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hisense Visual Technology Co Ltd
Original Assignee
Hisense Visual Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hisense Visual Technology Co Ltd filed Critical Hisense Visual Technology Co Ltd
Priority to CN201911240016.9A priority Critical patent/CN112911354B/zh
Publication of CN112911354A publication Critical patent/CN112911354A/zh
Application granted granted Critical
Publication of CN112911354B publication Critical patent/CN112911354B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42203Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/485End-user interface for client configuration
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00Details of transducers, loudspeakers or microphones
    • H04R1/20Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/32Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
    • H04R1/323Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only for loudspeakers

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Otolaryngology (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本申请提供一种显示设备和声音控制方法。该显示设备包括:显示屏,被配置为呈现图像数据,显示屏上设有用户图形界面。扬声器***,被配置为再现声音数据,扬声器***包括至少两组扬声器组件,每组扬声器组件包括至少一个扬声器。控制器,被配置为根据发声对象位于用户图形界面上的位置,以及扬声器***中每个扬声器的位置,确定出发声对象对应的扬声器。控制器,还被配置为在用户图形界面上呈现发声对象时,控制发声对象对应的扬声器播放声音。从而,达到空间维度上音画合一的效果,给用户带来良好的体验感。

Description

显示设备和声音控制方法
技术领域
本申请涉及电声技术领域,尤其涉及一种显示设备和声音控制方法。
背景技术
显示设备(如电视)越来越智能化,可以与用户进行很好的交互。通常,在显示设备上通过小窗等方式显示交互画面,同时会伴随有声音提醒,以便用户使用,实现用户如边看边聊天或者边看边玩游戏等交互过程。
在现有的交互过程中,显示设备的显示器会显示交互画面,显示设备的扬声器会发射声音。然而,画面显示和声音播放常常会分离,如交互画面在显示器的左上角显示,声音会从处于显示器的右下角的扬声器发射出来,从而画面和声音无法达到空间统一,会给用户带来空间上的错位感,导致用户体验不佳。
发明内容
本申请提供一种显示设备和声音控制方法,以解决现有技术中由于画面和声音无法达到空间统一而导致用户体验不佳的问题。
第一方面,本申请提供一种显示设备,包括:
显示屏,被配置为呈现图像数据,所述显示屏上设有用户图形界面;
扬声器***,被配置为再现声音数据,所述扬声器***包括至少两组扬声器组件,每组扬声器组件包括至少一个扬声器;
控制器,被配置为根据发声对象位于所述用户图形界面上的位置,以及所述扬声器***中每个扬声器的位置,确定出所述发声对象对应的扬声器;
所述控制器,还被配置为在所述用户图形界面上呈现所述发声对象时,控制所述发声对象对应的扬声器播放声音。
可选地,所述控制器,被配置为获取第一坐标和坐标集合,所述第一坐标为所述发声对象位于所述用户图形界面上的位置,所述坐标集合为所述至少两组所述扬声器组件中每个扬声器的位置;
所述控制器,还被配置为根据所述第一坐标和所述坐标集合,确定所述发声对象对应的扬声器的目标值,所述目标值用于表示所述扬声器的功放参数大小;
所述控制器,还被配置为将所述发声对象对应的扬声器的扬声器的功放参数大小调整为所述发声对象对应的扬声器的目标值。
可选地,每组扬声器组件包括左右对称设置的多个扬声器,且每个扬声器的位置不同。
可选地,所述扬声器***包括:第一扬声器组件和第二扬声器组件;
其中,所述第一扬声器组件中的第一扬声器,被配置成相对于所述显示屏的顶部左侧发射声音;所述第一扬声器组件中的第二扬声器,被配置成相对于所述显示屏的顶部右侧发射声音;所述第一扬声器和所述第二扬声器左右对称设置;
所述第二扬声器组件中的第三扬声器,被配置成相对于所述显示屏的底部左侧向前方向发射声音;所述第二扬声器组件中的第四扬声器,被配置成相对于所述显示屏的底部右侧向前方向发射声音;所述第三扬声器和所述第四扬声器左右对称设置;
所述显示屏的中心位置为所述第一坐标所在坐标系的中心点;
所述控制器,被配置为在所述第一坐标的横坐标值大于零且纵坐标值大于零时,确定所述发声对象对应的扬声器为所述第二扬声器;或者,
所述控制器,被配置为在所述第一坐标的横坐标值小于零且纵坐标值大于零时,确定所述发声对象对应的扬声器为所述第一扬声器;或者,
所述控制器,被配置为在所述第一坐标的横坐标值小于零且纵坐标值小于零时,确定所述发声对象对应的扬声器为所述第三扬声器;或者,
所述控制器,被配置为在所述第一坐标的横坐标值大于零且纵坐标值小于零时,确定所述发声对象对应的扬声器为所述第四扬声器。
可选地,所述扬声器***还包括:第三扬声器组件;
其中,所述第三扬声器组件中的第五扬声器,被配置成相对于所述显示屏的中部左侧发射声音;所述第三扬声器组件中的第六扬声器,被配置成相对于所述显示屏的中部右侧发射声音;所述第五扬声器和所述第六扬声器左右对称设置;
所述控制器,被配置为在所述第一坐标的横坐标值大于零且纵坐标值大于零时,确定所述发声对象对应的扬声器为所述第二扬声器和所述第六扬声器;或者,
所述控制器,被配置为在所述第一坐标的横坐标值小于零且纵坐标值大于零时,确定所述发声对象对应的扬声器为所述第一扬声器和所述第五扬声器;或者,
所述控制器,被配置为在所述第一坐标的横坐标值小于零且纵坐标值小于零时,确定所述发声对象对应的扬声器为所述第三扬声器和所述第五扬声器;或者,
所述控制器,被配置为在所述第一坐标的横坐标值大于零且纵坐标值小于零时,确定所述发声对象对应的扬声器为所述第四扬声器和所述第六扬声器;或者,
所述控制器,被配置为在所述第一坐标的横坐标值大于零且纵坐标值等于零时,确定所述发声对象对应的扬声器为所述第二扬声器、所述第四扬声器和所述第六扬声器;或者,
所述控制器,被配置为在所述第一坐标的横坐标小于零且纵坐标等于零时,确定所述发声对象对应的扬声器为所述第一扬声器、所述第三扬声器和所述第五扬声器;或者,
所述控制器,被配置为在所述第一坐标的横坐标值等于零且纵坐标值大于零时,确定所述发声对象对应的扬声器为所述第二扬声器、所述第一扬声器、所述第五扬声器和所述第六扬声器;或者,
所述控制器,被配置为在所述第一坐标的横坐标值等于零且纵坐标值小于零时,确定所述发声对象对应的扬声器为所述第四扬声器、所述第三扬声器、所述第五扬声器和所述第六扬声器;或者,
所述控制器,被配置为在所述第一坐标的横坐标值等于零且纵坐标值等于零时,确定所述发声对象对应的扬声器为所述第一扬声器、所述第二扬声器、所述第三扬声器、所述第四扬声器、所述第五扬声器和所述第六扬声器。
可选地,所述扬声器***还包括:第四扬声器组件;
其中,所述第四扬声器组件中的第七扬声器,被配置成相对于所述显示屏的左侧发射声音;所述第四扬声器组件中的第八扬声器,被配置成相对于所述显示屏的右侧发射声音;所述第七扬声器和所述第八扬声器左右对称设置;
所述控制器,被配置为在所述第一坐标的横坐标值等于零且纵坐标值等于零时,确定所述发声对象对应的扬声器为所述第一扬声器、所述第二扬声器、所述第三扬声器、所述第四扬声器、所述第五扬声器、所述第六扬声器、所述第七扬声器和所述第八扬声器。
可选地,所述第一扬声器和所述第三扬声器相对于所述显示屏上下不对称,所述第二扬声器和所述第四扬声器相对于所述显示屏上下不对称。
可选地,所述控制器,还被配置为在所述用户图形界面上开始或者结束呈现所述发声对象时,根据所述发声对象的尺寸与所述用户图形界面的尺寸之间的关系,确定所述第一坐标的竖坐标值;并根据竖坐标值与调整***之间的对应关系,确定调整系数,所述调整系数用于表示扬声器的功放参数的调整速率;
所述控制器,还被配置为按照所述调整系数,将所述发声对象对应的扬声器的功放参数调整为所述发声对象对应的扬声器的目标值。
可选地,所述功放参数包括:增益、相位或者动态范围控制。
可选地,所述发声对象包括:焦点窗、光标、弹出窗、气泡窗、卡通动画提示或者视频对话窗口。
第二方面,本申请提供一种声音控制方法,应用于显示设备,所述显示设备包括:显示屏、扬声器***和控制器;显示屏,被配置为呈现图像数据,所述显示屏上设有用户图形界面;扬声器***,被配置为再现声音数据,所述扬声器***包括至少两组扬声器组件,每组扬声器组件包括至少一个扬声器;所述方法包括:
所述控制器获取发声对象位于所述用户图形界面上的位置,以及所述扬声器***中每个扬声器的位置;
所述控制器根据所述发声对象位于所述用户图形界面上的位置,以及所述扬声器***中每个扬声器的位置,确定出所述发声对象对应的扬声器;
所述控制器在所述用户图形界面上呈现所述发声对象时,控制所述发声对象对应的扬声器播放声音。
可选地,所述控制器获取所述发声对象位于所述用户图形界面上的位置,以及所述扬声器***中每个扬声器的位置,包括:
所述控制器获取第一坐标和坐标集合,所述第一坐标为所述发声对象位于所述用户图形界面上的位置,所述坐标集合为所述至少两组所述扬声器组件中每个扬声器的位置;
所述控制器根据所述发声对象位于所述用户图形界面上的位置,以及所述扬声器***中每个扬声器的位置,确定出所述发声对象对应的扬声器,包括:
所述控制器根据所述第一坐标和所述坐标集合,确定所述发声对象对应的扬声器的目标值,所述目标值用于表示所述扬声器的功放参数大小;
所述控制器将所述发声对象对应的扬声器的功放参数大小调整为所述发声对象对应的扬声器的目标值。
可选地,所述控制器将所述发声对象对应的扬声器的功放参数大小调整为所述发声对象对应的扬声器的目标值,包括:
所述控制器在所述用户图形界面上开始或者结束呈现所述发声对象时,根据所述发声对象的尺寸与所述用户图形界面的尺寸之间的关系,确定所述第一坐标的竖坐标值;
所述控制器根据竖坐标值与调整***之间的对应关系,确定调整系数,所述调整系数用于表示扬声器的功放参数的调整速率;
所述控制器按照所述调整系数,将所述发声对象对应的扬声器的功放参数调整为所述发声对象对应的扬声器的目标值。
可选地,所述功放参数包括:增益、相位或者动态范围控制。
可选地,所述发声对象包括:焦点窗、光标、弹出窗、气泡窗、卡通动画提示或者视频对话窗口。
第三方面,本申请提供一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现第二方面及第二方面实施例的声音控制方法。
第四方面,本申请提供一种电子设备,包括:
处理器;以及
存储器,用于存储所述处理器的可执行指令;
其中,所述处理器配置为经由执行所述可执行指令来执行第二方面及第二方面实施例的声音控制方法。
本申请提供的显示设备和声音控制方法,通过扬声器***包括至少两组扬声器组件,每组扬声器组件包括至少一个扬声器,为发声对象在用户图形界面的不同位置上显示做好硬件准备。这样,控制器在用户图形界面上呈现发声对象时或者之前,可以根据发声对象位于用户图形界面上的位置,以及扬声器***中每个扬声器的位置,确定出距离发声对象较近的一个或者多个扬声器,即发声对象对应的扬声器。从而,控制器在用户图形界面上呈现发声对象时,可以控制发声对象对应的扬声器播放声音,实现画面和声音在空间上的统一,达到空间维度上音画合一的效果,给用户带来良好的体验感。
附图说明
为了更清楚地说明本申请或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为一种显示设备与控制装置之间操作场景的示意图;
图2为图1中控制装置中硬件***的硬件架构框图;
图3a为图1中显示设备中硬件***的硬件结构示意图;
图3b为一种显示设备中硬件***的硬件结构示意图;
图4为图2中电源板与负载的连接关系示意图;
图5为图2中显示设备的硬件架构框图;
图6为图2中显示设备的功能配置示意图;
图7为图2中显示设备的软件***的配置框图;
图8为图7中显示设备的应用程序层的示意图;
图9为图2中显示设备的用户界面的示意图;
图10为本申请一实施例提供的显示设备的结构示意图;
图11a为可选实施例中显示设备的界面示意图;
图11b为本申请一实施例提供的显示设备的界面示意图;
图12为本申请一实施例提供的显示设备中扬声器***的位置示意图;
图13为本申请一实施例提供的显示设备中扬声器***的位置示意图;
图14为本申请一实施例提供的显示设备中扬声器***的位置示意图;
图15为本申请一实施例提供的显示设备中扬声器***的位置示意图;
图16为本申请一实施例提供的声音控制方法的流程图;
图17为本申请一实施例提供的电子设备的硬件结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整的描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例例如能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、***、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
本申请各实施例提供的显示设备可以具有单***、单显示屏幕。例如,显示设备包括:显示屏幕,被配置为显示画面图像;声音再现装置,被配置为播放声音;供电电路,被配置为向显示设备的负载提供电能,所述负载包括所述显示屏幕和所述声音再现装置。
或者,本申请主要针对具有双***、双显示器结构的显示设备,即具有第一控制器(第一硬件***)、第二控制器(第二硬件***)、第一显示器和第二显示器的显示设备的音画同步处理,下面首先对具有双***硬件结构的显示设备的结构、功能和实现方式等方面进行详细说明。
为便于用户使用,显示设备上通常会设置各种外部装置接口,以便于连接不同的外设设备或线缆以实现相应的功能。而在显示设备的接口上连接有高清晰度的摄像头时,如果显示设备的硬件***没有接收源码的高像素摄像头的硬件接口,那么就会导致无法将摄像头接收到的数据呈现到显示设备的显示屏上。
并且,受制于硬件结构,传统显示设备的硬件***仅支持一路硬解码资源,且通常最大仅能支持4K分辨率的视频解码,因此当要实现边观看网络电视边进行视频聊天时,为了不降低网络视频画面清晰度,就需要使用硬解码资源(通常是硬件***中的GPU)对网络视频进行解码,而在此情况下,只能采取由硬件***中的通用处理器(例如CPU)对视频进行软解码的方式处理视频聊天画面。
采用软解码处理视频聊天画面,会大大增加CPU的数据处理负担,当CPU的数据处理负担过重时,可能会出现画面卡顿或者不流畅的问题。进一步的,受制于CPU的数据处理能力,当采用CPU软解码处理视频聊天画面时,通常无法实现多路视频通话,当用户想要再同一聊天场景同时与多个其他用户进行视频聊天时,会出现接入受阻的情况。
基于上述各方面的考虑,为克服上述缺陷,本申请公开了一种双硬件***架构,以实现多路视频聊天数据(至少一路本地视频)。
下面首先结合附图对本申请所涉及的概念进行说明。在此需要指出的是,以下对各个概念的说明,仅为了使本申请的内容更加容易理解,并不表示对本申请保护范围的限定。
本申请各实施例中使用的术语“模块”,可以是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合,能够执行与该元件相关的功能。
本申请各实施例中使用的术语“遥控器”,是指电子设备(如本申请中公开的显示设备)的一个组件,该组件通常可在较短的距离范围内无线控制电子设备。该组件一般可以使用红外线和/或射频(RF)信号和/或蓝牙与电子设备连接,也可以包括WiFi、无线USB、蓝牙、动作传感器等功能模块。例如:手持式触摸遥控器,是以触摸屏中用户界面取代一般遥控装置中的大部分物理内置硬键。
本申请各实施例中使用的术语“用户界面”,是应用程序或操作***与用户之间进行交互和信息交换的介质接口,它实现信息的内部形式与用户可以接受形式之间的转换。用户界面常用的表现形式是图形用户界面(graphic user interface,GUI),是指采用图形方式显示的与计算机操作相关的用户界面。它可以是在电子设备的显示屏中显示的一个图标、窗口、控件等界面元素,其中控件可以包括图标、按钮、菜单、选项卡、文本框、对话框、状态栏、导航栏、Widget等可视的界面元素。
本申请各实施例中使用的术语“手势”,是指用户通过一种手型的变化或手部运动等动作,用于表达预期想法、动作、目的/或结果的用户行为。
本申请各实施例中使用的术语“硬件***”,可以是指由集成电路(IntegratedCircuit,IC)、印刷电路板(Printed circuit board,PCB)等机械、光、电、磁器件构成的具有计算、控制、存储、输入和输出功能的实体部件。在本申请各个实施例中,硬件***通常也会被称为主板(motherboard)或芯片。
图1中示例性示出了根据实施例中显示设备与控制装置之间操作场景的示意图。如图1所示,用户可通过控制装置100来操作显示设备200。
其中,控制装置100可以是遥控器100A,其可与显示设备200之间通过红外协议通信、蓝牙协议通信、紫蜂(ZigBee)协议通信或其他短距离通信方式进行通信,用于通过无线或其他有线方式来控制显示设备200。用户可以通过遥控器100A上按键、语音输入、控制面板输入等输入用户指令,来控制显示设备200。如:用户可以通过遥控器100A上音量加减键、频道控制键、上/下/左/右的移动按键、语音输入按键、菜单键、开关机按键等输入相应控制指令,来实现控制显示设备200的功能。
控制装置100也可以是智能设备,如移动终端100B、平板电脑、计算机、笔记本电脑等,其可以通过本地网(LAN,Local Area Network)、广域网(WAN,Wide Area Network)、无线局域网(WLAN,Wireless Local Area Network)或其他网络与显示设备200之间通信,并通过与显示设备200相应的应用程序实现对显示设备200的控制。例如,使用在智能设备上运行的应用程序控制显示设备200。该应用程序可以在与智能设备关联的屏幕上通过直观的用户界面(UI,User Interface)为用户提供各种控制。
示例的,移动终端100B与显示设备200均可安装软件应用,从而可通过网络通信协议实现二者之间的连接通信,进而实现一对一控制操作的和数据通信的目的。如:可以使移动终端100B与显示设备200建立控制指令协议,将遥控控制键盘同步到移动终端100B上,通过控制移动终端100B上用户界面,实现控制显示设备200的功能;也可以将移动终端100B上显示的音视频内容传输到显示设备200上,实现同步显示功能。
如图1所示,显示设备200还可与服务器300通过多种通信方式进行数据通信。在本申请各个实施例中,可允许显示设备200通过局域网、无线局域网或其他网络与服务器300进行有线通信连接或无线通信连接。服务器300可以向显示设备200提供各种内容和互动。
示例的,显示设备200通过发送和接收信息,以及电子节目指南(EPG,ElectronicProgram Guide)互动,接收软件程序更新,或访问远程储存的数字媒体库。服务器300可以是一组,也可以是多组,可以是一类或多类服务器。通过服务器300提供视频点播和广告服务等其他网络服务内容。
显示设备200包括第一显示器201与第二显示器202,其中,第一显示器201与第二显示器202之间相互独立,第一显示器201与第二显示器202之间采用双硬件控制***。
其中,第一显示器201和第二显示器202可以用于显示不同的显示画面。如,第一显示器201可以用于传统电视节目的画面显示,第二显示器202用于通知类消息、语音助手等辅助信息的画面显示。
可选地,第一显示器201显示的内容与第二显示器202显示的内容之间可以相互独立,互不影响。例如,在第一显示器201播放电视节目时,第二显示器202可以显示与电视节目无关的时间、天气、气温、提醒消息等信息。
可选地,第一显示器201显示的内容与第二显示器202显示的内容之间也可以存在关联关系。例如,在第一显示器201播放视频聊天的主画面时,第二显示器202可以显示当前接入视频聊天的用户的头像、聊天时长等信息。
可选地,第二显示器202显示的部分或全部内容可以调整至第一显示器201显示。例如,可以将第一显示器201显示的时间、天气、气温、提醒消息等信息调整到第一显示器201显示,而用第二显示器202显示其它的信息。
另外,第一显示器201在显示传统电视节目画面的同时,还显示多方交互画面,且多方交互画面不会遮挡传统电视节目画面。其中,本申请对传统电视节目画面和多方交互画面的显示方式不做限定。例如,本申请可以根据传统电视节目画面和多方交互画面的优先级,设置传统电视节目画面和多方交互画面的位置和大小。
以传统电视节目画面的优先级高于多方交互画面的优先级为例,传统电视节目画面的面积大于多方交互画面的面积,且多方交互画面可以位于传统电视节目画面的一侧,也可以悬浮设置在多方交互画面的一角。
显示设备200,一方面讲,可以是液晶显示器、OLED(Organic Light EmittingDiode)显示器、投影显示设备;另一方面讲,显示设备被可以是智能电视或显示器和机顶盒组成的显示***。具体显示设备类型,尺寸大小和分辨率等不作限定,本领技术人员可以理解的是,显示设备200可以根据需要做性能和配置上的一些改变。
显示设备200除了提供广播接收电视功能之外,还可以附加提供计算机支持功能的智能网络电视功能。示例的包括,网络电视、智能电视、互联网协议电视(IPTV)等。在一些实施例中,显示设备可以不具备广播接收电视功能。
如图1所示,显示设备200上可以连接或设置有摄像头,用于将摄像头拍摄到的画面呈现在本显示设备或其他显示设备的显示界面上,以实现用户之间的交互聊天。具体的,摄像头拍摄到的画面可在显示设备上全屏显示、半屏显示、或者显示任意可选区域。
作为一种可选的连接方式,摄像头通过连接板与显示设备的后壳连接,固定安装在显示设备的后壳的上侧中部,作为可安装的方式,可以固定安装在显示设备的后壳的任意位置,能保证其图像采集区域不被后壳遮挡即可,例如,图像采集区域与显示设备的显示朝向相同。
作为另一种可选的连接方式,摄像头通过连接板或者其他可想到的连接器可升降的与显示设备后壳连接,连接器上安装有升降马达,当用户要使用摄像头或者有应用程序要使用摄像头时,再升出显示设备之上,当不需要使用摄像头时,其可内嵌到后壳之后,以达到保护摄像头免受损坏和保护用户的隐私安全。
作为一种实施例,本申请所采用的摄像头可以为1600万像素,以达到超高清显示目的。在实际使用中,也可采用比1600万像素更高或更低的摄像头。
当显示设备上安装有摄像头以后,显示设备不同应用场景所显示的内容可得到多种不同方式的融合,从而达到传统显示设备无法实现的功能。
示例性的,用户可以在边观看视频节目的同时,与至少一位其他用户进行视频聊天。视频节目的呈现可作为背景画面,视频聊天的窗口显示在背景画面之上。形象的,可以称该功能为“边看边聊”。
可选的,在“边看边聊”的场景中,在观看直播视频或网络视频的同时,跨终端的进行至少一路的视频聊天。
另一示例中,用户可以在边进入教育应用学习的同时,与至少一位其他用户进行视频聊天。例如,学生在学习教育应用程序中内容的同时,可实现与老师的远程互动。形象的,可以称该功能为“边学边聊”。
另一示例中,用户在玩纸牌游戏时,与进入游戏的玩家进行视频聊天。例如,玩家在进入游戏应用参与游戏时,可实现与其他玩家的远程互动。形象的,可以称该功能为“边看边玩”。
可选的,游戏场景与视频画面进行融合,将视频画面中人像进行抠图,显示在游戏画面中,提升用户体验。
可选的,在体感类游戏中(如打球类、拳击类、跑步类、跳舞类等),通过摄像头获取人体姿势和动作,肢体检测和追踪、人体骨骼关键点数据的检测,再与游戏中动画进行融合,实现如体育、舞蹈等场景的游戏。
另一示例中,用户可以在K歌应用中,与至少一位其他用户进行视频和语音的交互。形象的,可以称该功能为“边看边唱”。可选地,当至少一位用户在聊天场景进入该应用时,可多个用户共同完成一首歌的录制。
另一个示例中,用户可在本地打开摄像头获取图片和视频,形象的,可以称该功能为“照镜子”。
在另一些示例中,还可以再增加更多功能或减少上述功能。本申请对该显示设备的功能不作具体限定。
图2中示例性示出了根据示例性实施例中控制装置100的配置框图。如图2所示,控制装置100包括控制器110、通信器130、用户输入/输出接口140、存储器190、供电电源180。
控制装置100被配置为可控制所述显示设备200,以及可接收用户的输入操作指令,且将操作指令转换为显示设备200可识别和响应的指令,起到用户与显示设备200之间交互中介作用。如:用户通过操作控制装置100上频道加减键,显示设备200响应频道加减的操作。
在一些实施例中,控制装置100可是一种智能设备。如:控制装置100可根据用户需求安装控制显示设备200的各种应用。
在一些实施例中,如图1所示,移动终端100B或其他智能电子设备,可在安装操控显示设备200的应用之后,起到控制装置100类似功能。如:用户可以通过安装应用,在移动终端100B或其他智能电子设备上可提供的图形用户界面的各种功能键或虚拟按钮,以实现控制装置100实体按键的功能。
控制器110包括处理器112、RAM 113和ROM 114、通信接口以及通信总线。控制器110用于控制控制装置100的运行和操作,以及内部各部件之间通信协作以及外部和内部的数据处理功能。
通信器130在控制器110的控制下,实现与显示设备200之间控制信号和数据信号的通信。如:将接收到的用户输入信号发送至显示设备200上。通信器130可包括WIFI模块131、蓝牙模块132、NFC模块133等通信模块中至少一种。
用户输入/输出接口140,其中,输入接口包括麦克风141、触摸板142、传感器143、按键144、摄像头145等输入接口中至少一者。如:用户可以通过语音、触摸、手势、按压等动作实现用户指令输入功能,输入接口通过将接收的模拟信号转换为数字信号,以及数字信号转换为相应指令信号,发送至显示设备200。
输出接口包括将接收的用户指令发送至显示设备200的接口。在一些实施例中,可以是红外接口,也可以是射频接口。如:红外信号接口时,需要将用户输入指令按照红外控制协议转化为红外控制信号,经红外发送模块进行发送至显示设备200。再如:射频信号接口时,需将用户输入指令转化为数字信号,然后按照射频控制信号调制协议进行调制后,由射频发送端子发送至显示设备200。
在一些实施例中,控制装置100包括通信器130和输出接口中至少一者。控制装置100中配置通信器130,如:WIFI、蓝牙、NFC等模块,可将用户输入指令通过WIFI协议、或蓝牙协议、或NFC协议编码,发送至显示设备200。
存储器190,用于在控制器110的控制下存储驱动和控制控制装置100的各种运行程序、数据和应用。存储器190,可以存储用户输入的各类控制信号指令。
供电电源180,用于在控制器110的控制下为控制装置100各电器元件提供运行电力支持。供电电源180可以采用电池及相关控制电路实现供电。
图3a中示例性示出了根据示例性实施例中显示设备200中硬件***的硬件结构示意图。为了便于说明,图3a中显示设备200以采用液晶显示屏为例进行示意。
图3a所示,显示设备200包括:第一面板11、第一背光组件21、主板31、交互板32、第一显示驱动板33、第二面板12、第二背光组件22、第二显示驱动板34、电源板4、第一后壳51、第二后壳52和基座6。
其中,第一面板11用于给用户呈现第一显示器201的画面。第一背光组件21位于第一面板11的下方,通常是一些光学组件,用于供应充足的亮度与分布均匀的光源,使第一面板11能正常显示影像。第一背光组件21还包括第一背板(图中未示出)。主板31、交互板32、第一显示驱动板33和电源板4设置于第一背板上,通常在第一背板上冲压形成一些凸包结构。主板31、交互板32、第一显示驱动板33和电源板4通过螺钉或者挂钩固定在凸包上。主板31、交互板32、第一显示驱动板3和电源板4可以设置在一个板子上,也可以分别设置不同的板子上。第一后壳51盖设在第一面板11上,以隐藏第一背光组件21、主板31、交互板32、第一显示驱动板33和电源板4等显示设备200的零部件,起到美观的效果。
其中,第一显示驱动板33主要的功能是:通过主板31上第一控制器传输的PWM信号以及Lcaldimming信号,进行千级背光分区控制,此部分控制是根据图像内容变化的,以及在与主板31上第一控制器之间建立握手后,接收主板31上第一控制器发送的VbyOne显示信号,并将VbyOne显示信号转换为LVDS信号,实现第一显示器201的图像画面显示。底座6,用于支撑显示设备200,值得说明的是,图中仅示出一种形式的底座设计,本领域技术人员可以根据产品需求设计不同形式的底座。
其中,第二面板12用于给用户呈现第二显示器202的画面。第二背光组件22位于第二面板12的下方,通常是一些光学组件,用于供应充足的亮度与分布均匀的光源,使第二面板12能正常显示影像。第二背光组件22还包括第二背板(图中未示出)。第二显示驱动板34设置于第二背板上,通常在第二背板上冲压形成一些凸包结构。第二显示驱动板34通过螺钉或者挂钩固定在凸包上。第二显示驱动板34可以设置在一个板子上,也可以分别设置不同的板子上。第二后壳52盖设在第二面板12上,以隐藏第二背光组件22、转接驱动板35、第二TCON板34b和按键板36等显示设备200的零部件,起到美观的效果。
可选地,图3a中还包括按键板35,按键板35可以设置在第一背板上,也可以设置在第二背板上,本申请对此不做限定。
另外,显示设备200还包括声音再现装置(图中未示出)例如音响组件,如包括功率放大器(Amplifier,AMP)及扬声器(Speaker)的I2S接口等,用于实现声音的再现。通常音响组件至少能够实现两个声道的声音输出;当要实现全景声环绕的效果,则需要设置多个音响组件,输出多个声道的声音,这里不再具体展开说明。
需要说明的是,显示设备200还可以采用OLED显示屏,这样,显示设备200所包含的模板发生相应的改变,此处不做过多说明。
或者,如图3a所示以具有双显示屏幕的显示设备作为示例性说明,而在
图3b中示例性示出了根据示例性实施例中显示设备中硬件***的硬件结构示意图,其中,如图3b所示的具有单显示屏幕的显示设备中,该显示设备包括:面板1、背光组件2、主板3、电源板4、后壳5和基座6。其中,面板1用于给用户呈现画面;背光组件2位于面板1的下方,通常是一些光学组件,用于供应充足的亮度与分布均匀的光源,使面板1能正常显示影像,背光组件2还包括背板20,主板3和电源板4设置于背板20上,通常在背板20上冲压形成一些凸包结构,主板3和电源板4通过螺钉或者挂钩固定在凸包上;后壳5盖设在面板1上,以隐藏背光组件2、主板3以及电源板4等显示设备的零部件,起到美观的效果;底座6,用于支撑显示设备。
图4示出了电源板与负载的连接关系示意图,如图4所示,电源板4包括输入端IN和输出端OUT(图中示出第一输出端OUT1、第二输出端OUT2、第三输出端OUT3和第四输出端OUT4),其中,输入端IN与市电相连,输出端OUT与负载相连,比如,第一输出端OUT1和音响组件相连,第二输出端OUT2和主板31相连,第三输出端OUT3和第一显示驱动板33相连,第四输出端OUT4和第一背光组件21相连。电源板4需要将交流市电转换为负载所需求的直流电,并且,该直流电通常具有不同的规格,例如音响组件需要18V,主板31需要12V/18V等。
为便于表述,以下将双硬件***架构中的一个硬件***称为第一硬件***或第一控制器,并将另一个硬件***称为第二硬件***或第二控制器。第一控制器包含第一控制器的各类处理器、各类接口,及通过各类接口与第一控制器相连的各类模块,第二控制器则包含第二控制器的各类处理器、各类接口,及通过各类接口与第二控制器相连的各类模块。第一控制器及第二控制器中可以各自安装有相对独立的操作***,第一控制器的操作***和第二控制器的操作***可以通过通信协议相互通信,示例性的:第一控制器的操作***的framework层和第二控制器的操作***的framework层可以进行通信进行命令和数据的传输,从而使显示设备200中存在两个在独立但又存在相互关联的子***。
下面结合图5对本申请双硬件***架构进行进一步的说明。需要说明的是图5仅仅是对本申请双硬件***架构的一个示例性说明,并不表示对本申请的限定。在实际应用中,两个硬件***均可根据需要包含更多或更少的硬件或接口。
图5中示例性示出了根据图2所示显示设备200的硬件架构框图。如图5所示,显示设备200的硬件***以包括第一控制器210和第二控制器310,以及通过各类接口与第一控制器210或第二控制器310相连接的模块。
其中,第一控制器210可以设置于图3a中所示的主板31上。可选地,第一控制器210:主要实现传统电视功能(比如可以外接机顶盒等)。第二控制器310可以设置于图3a中所示第二显示驱动板34上。可选地:第二控制器310可以用于接收第一控制器210发送的指令,并控制第二显示器380显示相应的图像。
与第一控制器210连接的模块可以包括调谐解调器220、通信器230、外部装置接口250、存储器290、用户输入接口260-3、视频处理器260-1、音频处理器260-2、第一显示器280(即图2中的第一显示器201)、音频输出接口270、供电模块240。在其他实施例中,第一控制器210也可以包括连接更多或更少的模块。
其中,调谐解调器220,用于对通过有线或无线方式接收广播电视信号,进行放大、混频和谐振等调制解调处理,从而从多个无线或有线广播电视信号中解调出用户所选择电视频道的频率中所携带的音视频信号,以及附加信息(例如EPG数据信号)。根据电视信号广播制式不同,调谐解调器220的信号途径可以有很多种,诸如:地面广播、有线广播、卫星广播或互联网广播等;以及根据调制类型不同,所述信号的调整方式可以数字调制方式,也可以模拟调制方式;以及根据接收电视信号种类不同,调谐解调器220可以解调模拟信号和/或数字信号。
调谐解调器220,还用于根据用户选择,以及由第一控制器210控制,响应用户选择的电视频道频率以及该频率所携带的电视信号。
在其他一些示例性实施例中,调谐解调器220也可在外置设备中,如外置机顶盒等。这样,机顶盒通过调制解调后输出电视音视频信号,经过外部装置接口250输入至显示设备200中。
通信器230是用于根据各种通信协议类型与外部设备或外部服务器进行通信的组件。例如:通信器230可以包括WIFI模块231,蓝牙通信协议模块232,有线以太网通信协议模块233,及红外通信协议模块等其他网络通信协议模块或近场通信协议模块(图中未示出)。
显示设备200可以通过通信器230与外部控制设备或内容提供设备之间建立控制信号和数据信号的连接。例如,通信器可根据第一控制器210的控制接收遥控器100的控制信号。
外部装置接口250,是提供第一控制器210和第二控制器310及外部其他设备间数据传输的组件。外部装置接口250可按照有线/无线方式与诸如机顶盒、游戏装置、笔记本电脑等的外部设备连接,可接收外部设备的诸如视频信号(例如运动图像)、音频信号(例如音乐)、附加信息(例如EPG)等数据。
其中,外部装置接口250可以包括:高清多媒体接口(HDMI)端子也称之为HDMI251、复合视频消隐同步(CVBS)端子也称之为AV 252、模拟或数字分量端子也称之为分量253、通用串行总线(USB)端子254、红绿蓝(RGB)端子(图中未示出)等任一个或多个。本申请不对外部装置接口的数量和类型进行限制。
第一控制器210,通过运行存储在存储器290上的各种软件控制程序(如操作***和/或各种应用程序),来控制显示设备200的工作和响应用户的操作。
如图5所示,第一控制器210包括只读存储器RAM 213、随机存取存储器ROM 214、图形处理器216、CPU处理器212、通信接口218、以及通信总线。其中,RAM 213和ROM 214以及图形处理器216、CPU处理器212、通信接口218通过总线相连接。
ROM 213,用于存储各种***启动的指令。如在收到开机信号时,显示设备200电源开始启动,CPU处理器212运行ROM中***启动指令,将存储在存储器290的操作***拷贝至RAM 214中,以开始运行启动操作***。当操作***启动完成后,CPU处理器212再将存储器290中各种应用程序拷贝至RAM 214中,然后,开始运行启动各种应用程序。
图形处理器216,用于产生各种图形对象,如:图标、操作菜单、以及用户输入指令显示图形等。包括运算器,通过接收用户输入各种交互指令进行运算,根据显示属性显示各种对象。以及包括渲染器,产生基于运算器得到的各种对象,进行渲染的结果显示在第一显示器280上。
CPU处理器212,用于执行存储在存储器290中操作***和应用程序指令。以及根据接收外部输入的各种交互指令,来执行各种应用程序、数据和内容,以便最终显示和播放各种音视频内容。
在一些示例性实施例中,CPU处理器212,可以包括多个处理器。所述多个处理器中可包括一个主处理器以及多个或一个子处理器。主处理器,用于在预加电模式中执行显示设备200一些操作,和/或在正常模式下显示画面的操作。多个或一个子处理器,用于执行在待机模式等状态下的一种操作。
通信接口218,可包括第一接口218-1到第n接口218-n。这些接口可以是经由网络被连接到外部设备的网络接口。
第一控制器210可以控制显示设备200与第一显示器280相关的操作。例如:响应于接收到用于选择在第一显示器280上显示UI对象的用户命令,第一控制器210便可以执行与由用户命令选择的对象有关的操作。
第一控制器210可以控制显示设备200与第二显示器380相关的操作。例如:响应于接收到用于选择在第二显示器380上显示UI对象的用户命令,第一控制器210便可以执行与由用户命令选择的对象有关的操作。
其中,所述对象可以是可选对象中的任何一个,例如超链接或图标。与所选择的对象有关操作,例如:显示连接到超链接页面、文档、图像等操作,或者执行与图标相对应程序的操作。用于选择UI对象用户命令,可以是通过连接到显示设备200的各种输入装置(例如,鼠标、键盘、触摸板等)输入命令或者与由用户说出语音相对应的语音命令。
存储器290,包括存储用于驱动和控制显示设备200的各种软件模块。如:存储器290中存储的各种软件模块,包括:基础模块、检测模块、通信模块、显示控制模块、浏览器模块、和各种服务模块等(图中未示出)。
其中,基础模块是用于显示设备200中各个硬件之间信号通信、并向上层模块发送处理和控制信号的底层软件模块。检测模块是用于从各种传感器或用户输入接口中收集各种信息,并进行数模转换以及分析管理的管理模块。语音识别模块中包括语音解析模块和语音指令数据库模块。显示控制模块是用于控制第一显示器280进行显示图像内容的模块,可以用于播放多媒体图像内容和UI界面等信息。通信模块,是用于与外部设备之间进行控制和数据通信的模块。浏览器模块,是用于执行浏览服务器之间数据通信的模块。服务模块,是用于提供各种服务以及各类应用程序在内的模块。
同时,存储器290还用于存储接收外部数据和用户数据、各种用户界面中各个项目的图像以及焦点对象的视觉效果图等。
用户输入接口260-3,用于将用户的输入信号发送给第一控制器210,或者,将从第一控制器210输出的信号传送给用户。示例性的,控制装置(例如移动终端或遥控器)可将用户输入的诸如电源开关信号、频道选择信号、音量调节信号等输入信号发送至用户输入接口,再由用户输入接口260-3转送至第一控制器210;或者,控制装置可接收经第一控制器210处理从用户输入接口260-3输出的音频、视频或数据等输出信号,并且显示接收的输出信号或将接收的输出信号输出为音频或振动形式。
在一些实施例中,用户可在第一显示器280上显示的图形用户界面(GUI)输入用户命令,则用户输入接口260-3通过图形用户界面(GUI)接收用户输入命令。或者,用户可通过输入特定的声音或手势进行输入用户命令,则用户输入接口260-3通过传感器识别出声音或手势,来接收用户输入命令。
视频处理器260-1,用于接收视频信号,根据输入信号的标准编解码协议,进行解压缩、解码、缩放、降噪、帧率转换、分辨率转换、图像合成等视频数据处理,可得到直接在第一显示器280上显示或播放的视频信号。
示例的,视频处理器260-1,包括解复用模块、视频解码模块、图像合成模块、帧率转换模块、显示格式化模块等(图中未示出)。
其中,解复用模块,用于对输入音视频数据流进行解复用处理,如输入MPEG-2,则解复用模块进行解复用成视频信号和音频信号等。
视频解码模块,用于对解复用后的视频信号进行处理,包括解码和缩放处理等。
图像合成模块,如图像合成器,其用于将图形生成器根据用户输入或自身生成的GUI信号,与缩放处理后视频画面进行叠加混合处理,以生成可供显示的图像信号。
帧率转换模块,用于对输入视频的帧率进行转换,如将输入的24Hz、25Hz、30Hz、60Hz视频的帧率转换为60Hz、120Hz或240Hz的帧率,其中,输入帧率可以与源视频流有关,输出帧率可以与显示设备的刷新率有关。显示格式化模块,用于将帧率转换模块输出的信号,改变为符合诸如显示设备显示格式的信号,如将帧率转换模块输出的信号进行格式转换以输出RGB数据信号。
第一显示器280,用于接收源自视频处理器260-1输入的图像信号,进行显示视频内容和图像以及菜单操控界面第一显示器280包括用于呈现画面的显示器组件以及驱动图像显示的驱动组件。显示视频内容,可以来自调谐解调器220接收的广播信号中的视频,也可以来自通信器或外部设备接口输入的视频内容。第一显示器280,同时显示显示设备200中产生且用于控制显示设备200的用户操控界面UI。
以及,根据第一显示器280类型不同,还包括用于驱动显示的驱动组件。或者,倘若第一显示器280为一种投影显示器,还可以包括一种投影装置和投影屏幕。
音频处理器260-2,用于接收音频信号,根据输入信号的标准编解码协议,进行解压缩和解码,以及降噪、数模转换和放大处理等音频数据处理,得到可以在扬声器272中播放的音频信号。
音频输出接口270,用于在第一控制器210的控制下接收音频处理器260-2输出的音频信号,音频输出接口可包括扬声器272,或输出至外接设备的发生装置的外接音响输出端子274,如:外接音响端子或耳机输出端子等。
在其他一些示例性实施例中,视频处理器260-1可以包括一个或多个芯片组成。音频处理器260-2,也可以包括一个或多个芯片组成。
以及,在其他一些示例性实施例中,视频处理器260-1和音频处理器260-2,可以为单独的芯片,也可以与第一控制器210一起集成在一个或多个芯片中。
供电模块240,用于在第一控制器210控制下,将外部电源输入的电力为显示设备200提供电源供电支持。供电模块240可以包括安装显示设备200内部的内置电源电路,也可以是安装在显示设备200外部的电源,如在显示设备200中提供外接电源的电源接口。
与第一控制器210相类似,如图5所示,与第二控制器310连接的模块可以包括通信器330、检测器340、存储器390、第二显示器380(即图1中的第二显示器202)。在某些实施例中还可以包括用户输入接口、视频处理器、音频处理器、显示器、音频输出接口(图中未示出)。在某些实施例中,也可以存在独立为第二控制器310供电的供电模块(图中未示出)。
通信器330是用于根据各种通信协议类型与外部设备或外部服务器进行通信的组件。例如:通信器330可以包括WIFI模块331,蓝牙通信协议模块332,有线以太网通信协议模块333,及红外通信协议模块等其他网络通信协议模块或近场通信协议模块(图中未示出)。
第二控制器310的通信器330和第一控制器210的通信器230也有相互交互。例如,第一控制器210硬件***内的WiFi模块231用于连接外部网络,与外部服务器等产生网络通信。第二控制器310硬件***内的WiFi模块331用于连接至第一控制器210的WiFi模块231,而不与外界网络等产生直接连接,第二控制器310通过第一控制器210连接外部网络。因此,对于用户而言,一个如上述实施例中的显示设备至对外显示一个WiFi账号。
检测器340,是第二控制器310用于采集外部环境或与外部交互的信号的组件。检测器340可以包括光接收器342,用于采集环境光线强度的传感器,可以通过采集环境光来自适应显示参数变化等;还可以包括图像采集器341,如相机、摄像头等,可以用于采集外部环境场景,以及用于采集用户的属性或与用户交互手势,可以自适应变化显示参数,也可以识别用户手势,以实现与用户之间互动的功能。
外部装置接口350,提供第二控制器310与第一控制器210或外部其他设备间数据传输的组件。外部装置接口可按照有线/无线方式与诸如机顶盒、游戏装置、笔记本电脑等的外部设备连接。
视频处理器360,用于处理相关视频信号。
第二控制器310,通过运行存储在存储器390上的各种软件控制程序(如用安装的第三方应用等),以及与第一控制器210的交互,来控制显示设备200的工作和响应用户的操作。
如图5所示,第二控制器310包括只读存储器ROM 313、随机存取存储器RAM 314、图形处理器316、CPU处理器312、通信接口318、以及通信总线。其中,ROM 313和RAM 314以及图形处理器316、CPU处理器312、通信接口318通过总线相连接。
ROM 313,用于存储各种***启动的指令。CPU处理器312运行ROM中***启动指令,将存储在存储器390的操作***拷贝至RAM 314中,以开始运行启动操作***。当操作***启动完成后,CPU处理器312再将存储器390中各种应用程序拷贝至RAM 314中,然后,开始运行启动各种应用程序。
CPU处理器312,用于执行存储在存储器390中操作***和应用程序指令,和与第一控制器210进行通信、信号、数据、指令等传输与交互,以及根据接收外部输入的各种交互指令,来执行各种应用程序、数据和内容,以便最终显示和播放各种音视频内容。
通信接口318为多个,可包括第一接口318-1到第n接口318-n。这些接口可以是经由网络被连接到外部设备的网络接口,也可以是经由网络被连接到第一控制器210的网络接口。
第二控制器310可以控制显示设备200与第二显示器380相关的操作。例如:响应于接收到用于选择在第二显示器380上显示UI对象的用户命令,第二控制器310便可以执行与由用户命令选择的对象有关的操作。
第二控制器310可以控制显示设备200与第一显示器280相关的操作。例如:响应于接收到用于选择在第一显示器280上显示UI对象的用户命令,第一控制器210便可以执行与由用户命令选择的对象有关的操作。
图形处理器316,用于产生各种图形对象,如:图标、操作菜单、以及用户输入指令显示图形等。包括运算器,通过接收用户输入各种交互指令进行运算,根据显示属性显示各种对象。以及包括渲染器,产生基于运算器得到的各种对象,进行渲染的结果显示在第二显示器380上。
第二控制器310的图形处理器316与第一控制器210的图形处理器216均能产生各种图形对象。区别性的,若应用1安装于第二控制器310,应用2安装在第一控制器210,当用户在应用1的界面,且在应用1内进行用户输入的指令时,由第二控制器310图形处理器316产生图形对象。当用户在应用2的界面,且在应用2内进行用户输入的指令时,由第一控制器210的图形处理器216产生图形对象。
图6中示例性示出了根据示例性实施例中显示设备的功能配置示意图。
如图6所示,第二控制器310的存储器390和第一控制器210的存储器290分别用于存储操作***、应用程序、内容和用户数据等,在第二控制器310和第二控制器210的控制下执行驱动第一显示器280和第二显示器380的***运行以及响应用户的各种操作。第二控制器310的存储器390和第一控制器210的存储器290可以包括易失性和/或非易失性存储器。
对于第一控制器210,存储器290,具体用于存储驱动显示设备200中第一控制器210的运行程序,以及存储显示设备200内置各种应用程序,以及用户从外部设备下载的各种应用程序、以及与应用程序相关的各种图形用户界面,以及与图形用户界面相关的各种对象,用户数据信息,以及各种支持应用程序的内部数据。存储器290用于存储操作***(OS)内核、中间件和应用等***软件,以及存储输入的视频数据和音频数据、及其他用户数据。存储器290,具体用于存储视频处理器260-1和音频处理器260-2、第一显示器280、通信器230、调谐解调器220、输入/输出接口等驱动程序和相关数据。
在一些实施例中,存储器290可以存储软件和/或程序,用于表示操作***(OS)的软件程序包括,例如:内核、中间件、应用编程接口(API)和/或应用程序。示例性的,内核可控制或管理***资源,或其它程序所实施的功能(如所述中间件、API或应用程序),以及内核可以提供接口,以允许中间件和API,或应用访问控制器,以实现控制或管理***资源。
示例的,存储器290,包括广播接收模块2901、频道控制模块2902、音量控制模块2903、图像控制模块2904、显示控制模块2905、第一音频控制模块2906、外部指令识别模块2907、通信控制模块2908、光接收模块2909、电力控制模块2910、操作***2911、以及其他应用程序2912、浏览器模块2913等等。第一控制器210通过运行存储器290中各种软件程序,来执行诸如:广播电视信号接收解调功能、电视频道选择控制功能、音量选择控制功能、图像控制功能、显示控制功能、音频控制功能、外部指令识别功能、通信控制功能、光信号接收功能、电力控制功能、支持各种功能的软件操控平台、以及浏览器功能等各类功能。
存储器390,包括存储用于驱动和控制显示设备200的各种软件模块。如:存储器390中存储的各种软件模块,包括:基础模块、检测模块、通信模块、显示控制模块、浏览器模块、和各种服务模块等(图中未示出)。由于存储器390与存储器290的功能比较相似,相关之处参见存储器290即可,在此就不再赘述。
示例的,存储器390,包括图像控制模块3904、第二音频控制模块3906、外部指令识别模块3907、通信控制模块3908、光接收模块3909、操作***3911、以及其他应用程序3912、浏览器模块3913等。第一控制器210通过运行存储器290中各种软件程序,来执行诸如:图像控制功能、显示控制功能、音频控制功能、外部指令识别功能、通信控制功能、光信号接收功能、电力控制功能、支持各种功能的软件操控平台、以及浏览器功能等各类功能。
区别性的,第一控制器210的外部指令识别模块2907和第二控制器310的外部指令识别模块3907可识别不同的指令。
示例性的,由于摄像头等图像接收设备与第二控制器310连接,因此,第二控制器310的外部指令识别模块3907可包括图形识别模块2907-1,图形识别模块3907-1内存储有图形数据库,摄像头接收到外界的图形指令时,与图形数据库中的指令进行对应关系,以对显示设备作出指令控制。而由于语音接收设备以及遥控器与第一控制器210连接,因此,第一控制器210的外部指令识别模块2907可包括语音识别模块2907-2,语音识别模块2907-2内存储有语音数据库,语音接收设备等接收到外界的语音指令或时,与语音数据库中的指令进行对应关系,以对显示设备作出指令控制。同样的,遥控器等控制装置100与第一控制器210连接,由按键指令识别模块2907-3与控制装置100进行指令交互。
图7中示例性示出了根据示例性实施例中显示设备200中软件***的配置框图。
对于第一控制器210,如图7中所示,操作***2911,包括用于处理各种基础***服务和用于实施硬件相关任务的执行操作软件,充当应用程序和硬件组件之间完成数据处理的媒介。
一些实施例中,部分操作***内核可以包含一系列软件,用以管理显示设备硬件资源,并为其他程序或软件代码提供服务。
其他一些实施例中,部分操作***内核可包含一个或多个设备驱动器,设备驱动器可以是操作***中的一组软件代码,帮助操作或控制显示设备关联的设备或硬件。驱动器可以包含操作视频、音频和/或其他多媒体组件的代码。示例的,包括显示器、摄像头、Flash、WiFi和音频驱动器。
其中,可访问性模块2911-1,用于修改或访问应用程序,以实现应用程序的可访问性和对其显示内容的可操作性。
通信模块2911-2,用于经由相关通信接口和通信网络与其他外设的连接。
用户界面模块2911-3,用于提供显示用户界面的对象,以供各应用程序访问,可实现用户可操作性。
控制应用程序2911-4,用于控制进程管理,包括运行时间应用程序等。
事件传输***2914,可在操作***2911内或应用程序2912中实现。一些实施例中,一方面在在操作***2911内实现,同时在应用程序2912中实现,用于监听各种用户输入事件,将根据各种事件指代响应各类事件或子事件的识别结果,而实施一组或多组预定义的操作的处理程序。
其中,事件监听模块2914-1,用于监听用户输入接口输入事件或子事件。
事件识别模块2914-2,用于对各种用户输入接口输入各类事件的定义,识别出各种事件或子事件,且将其传输给处理用以执行其相应一组或多组的处理程序。
其中,事件或子事件,是指显示设备200中一个或多个传感器检测的输入,以及外界控制设备(如控制装置100等)的输入。如:语音输入各种子事件,手势识别的手势输入子事件,以及控制装置的遥控按键指令输入的子事件等。示例的,遥控器中一个或多个子事件包括多种形式,包括但不限于按键按上/下/左右/、确定键、按键按住等中一个或组合。以及非实体按键的操作,如移动、按住、释放等操作。
界面布局管理模块2913,直接或间接接收来自于事件传输***2914监听到各用户输入事件或子事件,用于更新用户界面的布局,包括但不限于界面中各控件或子控件的位置,以及容器的大小或位置、层级等与界面布局相关各种执行操作。
由于第一控制器210的操作***3911与第一控制器210的操作***2911的功能比较相似,相关之处参见操作***2911即可,在此就不再赘述。
如图8中所示,显示设备的应用程序层包含可在显示设备200执行的各种应用程序。
第一控制器210的应用程序层2912可包含但不限于一个或多个应用程序,如:视频点播应用程序、应用程序中心、游戏应用等。第二控制器310的应用程序层3912可包含但不限于一个或多个应用程序,如:直播电视应用程序、媒体中心应用程序等。需要说明的是,第二控制器310和第一控制器210上分别包含什么应用程序是根据操作***和其他设计确定的,本申请无需对第二控制器310和第一控制器210上所包含的应用程序做具体的限定和划分。
直播电视应用程序,可以通过不同的信号源提供直播电视。例如,直播电视应用程可以使用来自有线电视、无线广播、卫星服务或其他类型的直播电视服务的输入提供电视信号。以及,直播电视应用程序可在显示设备200上显示直播电视信号的视频。
视频点播应用程序,可以提供来自不同存储源的视频。不同于直播电视应用程序,视频点播提供来自某些存储源的视频显示。例如,视频点播可以来自云存储的服务器端、来自包含已存视频节目的本地硬盘储存器。
媒体中心应用程序,可以提供各种多媒体内容播放的应用程序。例如,媒体中心,可以为不同于直播电视或视频点播,用户可通过媒体中心应用程序访问各种图像或音频所提供服务。
应用程序中心,可以提供储存各种应用程序。应用程序可以是一种游戏、应用程序,或某些和计算机***或其他设备相关但可以在显示设备中运行的其他应用程序。应用程序中心可从不同来源获得这些应用程序,将它们储存在本地储存器中,然后在显示设备200上可运行。
由于第二控制器310及第一控制器210中可能分别安装有独立的操作***,从而使显示设备200中存在两个在独立但又存在相互关联的子***。例如,第二控制器310和第一控制器210均可以独立安装有安卓(Android)及各类APP,使得第二控制器310和第一控制器210均可以实现一定的功能,并且使得第二控制器310和第一控制器210协同实现某项功能。
图9中示例性示出了根据示例性实施例中显示设备200中用户界面的示意图。如图9所示,用户界面包括视第一图显示区2011和第二图显示区2021。第一图显示区2011和第二图显示区2021的功能实现基本相同,下面仅对第一图显示区2011进行重点说明。示例的,其中,第一视图显示区2011包括布局一个或多个不同项目。以及,用户界面中还包括指示项目被选择的选择器,可通过用户输入而移动选择器的位置,以改变选择不同的项目。
一些实施例中,第一视图显示区2011为可缩放视图显示。“可缩放”,可以表示第一视图显示区2011在屏幕上尺寸或占比是可缩放的,或视图显示201中项目在屏幕上尺寸或占比是可缩放的。
“项目”是指在显示设备200中用户界面的视图显示区中显示以表示,诸如图标、缩略图、视频剪辑等对应内容的视觉对象。例如:项目可以表示电影、电视剧的图像内容或视频剪辑、音乐的音频内容、应用程序,或其他用户访问内容历史信息。
此外,项目可以表示显示设备200与外接设备连接的接口或接口集合显示,或可表示连接至显示设备的外部设备名称等。如:信号源输入接口集合、或高清多媒体接口(HighDefinition Multimedia Interface,HDMI)、USB接口、PC端子接口等。
需要说明的是:视图显示区可呈现视频聊天项目内容,或者呈现应用层项目内容(如,网页视频、云点播(Video on Demand,VOD)展示、应用程序画面等)。
“选择器”用于指示其中任意项目已被选择,如:光标或焦点对象。根据用户在显示设备200中触摸的图标或菜单位置来定位选择信息输入,可使显示设备200中显示焦点对象的移动来选择控制项目,可选择或控制其中一个或多个项目。
焦点对象指根据用户输入在项目之间移动的对象。示例的,通过项目边缘绘制粗线来实现或标识焦点对象位置。在其他实施例中,焦点形式不限于示例,可以是光标等有形或无形可被用户识别的形态,如可以项目的3D变形等形式,也可以改变聚焦的项目的文本或图像的边框线、尺寸、颜色、透明度和轮廓和/或字体等标识。
事件传输***2914,可监听到的各预定义的事件或子事件的用户输入,将识别出事件或子事件的控制直接或间接提供给界面布局管理模块2913。
界面布局管理模块2913,用于用户界面状态(包括视图分区、项目、焦点或光标对象等位置和/或大小、变化过程等)的监控,以及根据该事件或子事件,可执行修改视图显示区的大小和位置、层级等布局,和/或,调整或修改视图显示区各类项目布局的大小或/和位置、数量、类型、内容等布局。一些实施例中,修改和调整布局,包括在屏幕上显示或不显示各视图分区或视图分区中项目内容。
用户输入接口,用于将用户的输入信号发送给控制器,或者,将从控制器输出的信号传送给用户。示例性的,控制装置(例如移动终端或遥控器)可将用户输入的诸如电源开关信号、频道选择信号、音量调节信号等输入信号发送至用户输入接口,再由用户输入接口转送至控制器;或者,控制装置可接收经控制器处理从用户输入接口输出的音频、视频或数据等输出信号,并且显示接收的输出信号或将接收的输出信号输出为音频或振动形式。
在一些实施例中,用户可在显示设备200上显示的图形用户界面(GUI)输入用户命令,则用户输入接口通过图形用户界面(GUI)接收用户输入命令。或者,用户可通过输入特定的声音或手势进行输入用户命令,则用户输入接口通过传感器识别出声音或手势,来接收用户输入命令。
基于前述描述,结合图1-图9,显示设备200中的第一显示器201或者第二显示器202上除了可以显示正常画面,还可以显示交互画面。其中,交互画面可以采用焦点窗、光标、气泡提示、弹窗提示、卡通动画提示、动画缩放、视频交互窗等形式向用户突出显示,同时播放提示声音。然而,扬声器发射的声音无法跟随着交互画面的显示一起让用户感知,带来画面和声音空间上的分离,造成用户不良的体验。
为了解决上述问题,本申请提供一种显示设备、声音控制方法、设备和计算机存储介质,通过确定发声对象与扬声器之间的位置关系,确定出发声对象对应的扬声器,从而实现画面和声音在空间上的统一,达到空间维度上音画合一的效果,给用户带来良好的体验感。
其中,发声对象用于显示交互画面,发声对象为显示在显示器上且需要播放声音的对象,本申请对发声对象的实现形式不做限定。可选地,发声对象可以包括:焦点窗、光标、弹出窗、气泡窗、卡通动画提示或者视频对话窗口。且发声对象可以在显示器的任意位置进行显示,本申请对此不做限定。
下面,通过具体实施例,对显示设备的具体结构进行详细说明。
图10为本申请一实施例提供的显示设备的结构示意图。如图10所示,本申请的显示设备1000可以包括:显示屏1001、扬声器***1002和控制器1003。
其中,显示设备1000可以为图1中的显示设备200,如液晶显示电视,也可以为其他形式的显示设备,本申请对此不做限定。显示设备1000可以包括一个显示器,也可以包括多个显示器,本申请对此不做限定。例如,当显示设备1000中的显示器为两个时,这两个显示器可以为图1中的第一显示器201或者第二显示器202。
本申请中,显示屏1001可以为显示设备1000中的任意一个用于显示图像数据的显示器,本申请对显示屏1001的实现形式不做限定。例如,显示屏1001可以为图5中的第一显示器280,对应地,显示屏1001上设有的用户图形界面如图9中第一图显示区2011所示。显示屏1001也可以为图5中的第二显示器380,对应地,显示屏1001上设有的用户图形界面如图9中第二图显示区2021所示。且用户图形界面上可以呈现发声对象,该发声对象可以位于用户图形界面上的任意一个或者多个位置,本申请对此不做限定。为了便于说明,本申请中,发声对象以位于用户图形界面的左上角为例进行示意。
扬声器***1002可以为图1中显示设备200所包含的声音再现装置,也可以为其他形式的设备,本申请对此不做限定。例如,扬声器***1002可以由图5中的多个扬声器273组合而成。
控制器1003可以为前文提及的第一控制器210,也可以为其他***级芯片(Systemon Chip,SOC),本申请对此不做限定。从而,控制器1003可以向显示屏1001发送图像数据,使得显示屏1001可以呈现图像数据。控制器1003还可以通过图5中的音频输出接口270向扬声器***1002中的各个扬声器发送信号。
需要说明的是,当显示设备1000可以采用多个显示屏1001显示第一图像数据时,每个显示屏1001均对应设置一个扬声器***1002,即显示屏1001和扬声器***1002一一对应。
本申请中,每个扬声器***1002可以包括至少两组扬声器组件,即两组或者两组以上的扬声器组件,且每组扬声器组件包括一个或者多个扬声器。基于上述扬声器的设置,在用户图形界面上呈现发声对象时或之前,由于扬声器还需播放声音,因此,控制器1003可以根据发声对象位于用户图形界面上的位置,以及扬声器***中每个扬声器的位置,确定出距离发声对象较近的一个或者多个扬声器,即发声对象对应的扬声器。从而,在用户图形界面上呈现发声对象时,控制器1003可以控制发声对象对应的扬声器播放声音实现画面和声音在空间上的统一,达到空间维度上音画合一的效果,给用户带来良好的体验感。
在一个具体实施例中,显示设备以电视为例,且发声对象以在用户图形界面的左上角上呈现进行示意,结合图11a和图11b,分别对可选实施例和本申请的显示设备中发声对象显示“虚拟小人显示室内温度26℃”的同时,扬声器播放声音“室内温度26℃”的具体实现过程进行说明。
如图11a所示,在用户图形界面的左上角上呈现发声对象“虚拟小人显示室内温度26℃”时,位于电视机底部的扬声器(以FL前左扬声器和FR前右扬声器为例)播放声音“室内温度26℃”,造成画面和声音在空间上的分离,给用户带来不良的体验感。
如图11b所示,本申请中,在用户图形界面的左上角上呈现发声对象“虚拟小人显示室内温度26℃”时,由于电视机中扬声器已做好硬件准备,且控制器1003事先确定出距离发声对象较近的FTL顶部左扬声器和SL环绕左扬声器,因此,这两个扬声器共同播放声音“室内温度26℃”,使得画面和声音达到空间维度上音画合一的效果,给用户带来良好的体验感。
本申请提供的显示设备,通过扬声器***包括至少两组扬声器组件,每组扬声器组件包括至少一个扬声器,为发声对象在用户图形界面的不同位置上显示做好硬件准备。这样,控制器在用户图形界面上呈现发声对象时或者之前,可以根据发声对象位于用户图形界面上的位置,以及扬声器***中每个扬声器的位置,确定出距离发声对象较近的一个或者多个扬声器,即发声对象对应的扬声器。从而,控制器在用户图形界面上呈现发声对象时,可以控制发声对象对应的扬声器播放声音,实现画面和声音在空间上的统一,达到空间维度上音画合一的效果,给用户带来良好的体验感。
在上述图10、图11a和图11b所示实施例的基础上,扬声器***1002中扬声器的位置可以包括多种。可选地,每组扬声器组件可以包括左右对称设置的多个扬声器,即当每组扬声器的数量为偶数时,相对于显示屏1001的左右两侧对称设置有相同数量的扬声器;当每组扬声器的数量为奇数时,其中一个扬声器设置在其余扬声器的中心位置,也就是说,相对于这个扬声器的左右两侧对称设置有相同数量的扬声器。并且,每个扬声器设置在显示设备1000的外壳上,且每个扬声器相对于显示屏1001的位置均不同。
基于上述扬声器的设置,控制器1003确定发声对象对应的扬声器的方式包括多种。一种可行的实现方式中,在用户图形界面上呈现发声对象时或之前,由于扬声器还需播放声音,因此,控制器1003可以获取第一坐标,该第一坐标为发声对象位于用户图形界面上的位置。其中,第一坐标可以为发声对象的中心位置的坐标,也可以为发声对象的其他位置的坐标,本申请对此不做限定,只需满足显示设备1000事先制定的规则即可。
并且,控制器1003还可以获取坐标集合,该坐标集合为扬声器***1002中每个扬声器的位置。其中,该坐标集合可以为事先存储在显示设备1000中的,也可以事先存储在其他存储设备中的,还可以为实时计算出来的,本申请对此不做限定。
另外,由于扬声器***1002中每个扬声器的位置均已经固定,因此,本申请可以基于每个扬声器的位置坐标,如扬声器投影到显示器100的位置坐标,计算得到坐标集合。可选地,控制器1003可以根据显示屏1001的尺寸、每个扬声器在显示设备100的机壳上的位置以及显示屏1001位于机壳的位置,确定出坐标集合。其中,显示屏1001的尺寸可以包括显示屏1001的宽度和高度。
本申请中,控制器1003根据第一坐标和坐标集合,可以判断出发声对象与扬声器***1002中每个扬声器之间的距离。由于每个扬声器的位置不同,兼顾了发声对象可以在用户图形界面的不同位置上的显示,因此,控制器1003基于发声对象与每个扬声器之间的距离,以及距离与功放参数之间的对应关系,不仅可以确定出扬声器***1002中一个或者多个扬声器需要发射声音,还可以确定出对应的扬声器需要发射声音的音效,即对应的扬声器的目标值,该目标值用于表示扬声器的功放参数大小。
其中,本申请对功放参数的具体形式不做限定。可选地,功放参数包括:增益、相位或者动态范围控制。距离与功放参数之间的对应关系可以根据实际情况进行设定。一般情况下,发声对象与扬声器的距离越近,该扬声器的功放参数使得该扬声器发声。发声对象与扬声器的距离越远,该扬声器的功放参数使得该扬声器不发声或者发声很小。例如,当功放参数为增益时,距离越近,增益越大;距离越远,增益越小。
需要说明的是,第一坐标和坐标集合可以为相同的坐标系,也不同的坐标系,本申请对此不做限定。为了便于计算,控制器1003可以先统一第一坐标和坐标集合的坐标系,再确定出扬声器***1002中至少一个扬声器的目标值。
本申请中,控制器1003在确定出扬声器***1002中需要调整功放参数的一个或者多个扬声器时,可以将发声对象对应的扬声器的功放参数调整为发声对象对应的扬声器的目标值,使得发声对象对应的扬声器做好发射声音的准备。从而,控制器1003可以向发声对象对应的扬声器输入声音信号,使得用户图形界面上呈现发声对象的同时,发声对象对应的扬声器播放声音可以播放声音,实现了画面与声音在空间上的统一,达到空间维度上音画合一的效果,使得用户具有良好的体验感。
本申请提供的显示设备,通过扬声器***包括至少两组扬声器组件,每组扬声器组件包括至少一个扬声器,为发声对象在用户图形界面的不同位置上显示做好硬件准备。这样,控制器在用户图形界面上呈现发声对象时或者之前,可以获取第一坐标和坐标集合,第一坐标为发声对象位于用户图形界面上的位置,坐标集合为扬声器***中每个扬声器的位置。控制器再根据第一坐标和坐标集合,确定出发声对象与扬声器***中每个扬声器之间的距离。由于每个扬声器的位置全部或者部分不同,兼顾了发声对象可以在用户图形界面的不同位置上的显示,因此,控制器可以基于发声对象与每个扬声器之间的距离,以及距离与功放参数之间的对应关系,不仅可以确定出扬声器***中一个或者多个扬声器需要发射声音,还可以确定出扬声器***中一个或者多个扬声器需要发射声音的音效,即对应的扬声器的目标值,该目标值用于表示扬声器的功放参数大小。控制器便可将发声对象对应的扬声器的功放参数调整为发声对象对应的扬声器的目标值,并向发声对象对应的扬声器输入声音信号,使得用户图形界面上呈现发声对象时,发声对象对应的扬声器可以播放声音,实现画面和声音在空间上的统一,达到空间维度上音画合一的效果,给用户带来良好的体验感。另外,若显示设备中多个扬声器相对于显示器的位置不同,控制器可以借助现有声道配置,实现空间维度上音画合一的效果,无需增加硬件配置的成本。
在上述图10、图11a和图11b所示实施例的基础上,扬声器***1002的具体实现可以包括多种。可选地,如图12所示,扬声器***1002可以包括:第一扬声器组件和第二扬声器组件。
本申请中,第一扬声器组件包括第一扬声器(图12中采用FTL顶部左进行示意)和第二扬声器(图12中采用FTL顶部右进行示意),该第一扬声器被配置成相对于显示屏1001的顶部左侧发射声音,该第二扬声器被配置成相对于显示屏1001的顶部右侧发射声音,且第一扬声器和第二扬声器左右对称设置。
其中,本申请对第一扬声器和第二扬声器的具***置不做限定。且显示设备1000包括多个声道,第一扬声器对应天空音左声道,第二扬声器对应天空音右声道。
本申请中,第二扬声器组件包括:第三扬声器(图12中采用FL前左进行示意)和第四扬声器(图12中采用FTL前右进行示意),该第三扬声器被配置成相对于显示屏1001的底部左侧向前方向发射声音,该第四扬声器被配置成相对于显示屏1001的底部右侧向前方向发射声音,且第三扬声器和第四扬声器左右对称设置。
其中,本申请对第三扬声器和第四扬声器的具***置不做限定。且显示设备1000包括多个声道,第三扬声器对应前置左声道,第四扬声器对应前置右声道。
另外,为了提高显示设备1000多声道音效,可选地,第一扬声器和第三扬声器相对于显示屏1001上下不对称,第二扬声器和第四扬声器相对于显示屏1001上下不对称。也就是说,第一扬声器对于显示屏1001的位置与第三扬声器相对于显示屏1001的位置之间的连线与显示设备100的宽度方向不平行,第二扬声器对于显示屏1001的位置与第四扬声器相对于显示屏1001的位置之间的连线与显示设备100的宽度方向不平行。
本申请中,由于第一扬声器、第二扬声器、第三扬声器和第四扬声器的位置固定且不同,因此,坐标集合中的坐标固定不变。因此,控制器1003(图12中未示意)根据第一坐标和坐标集合,可以确定出发声对象分别与第一扬声器、第二扬声器、第三扬声器和第四扬声器之间的距离,从而确定出第一扬声器、第二扬声器、第三扬声器和第四扬声器中的哪个或者哪些扬声器为发声对象对应的扬声器以及发声对象对应的扬声器的目标值。
其中,此处的坐标集合为第一扬声器相对于显示屏1001的位置、第二扬声器相对于显示屏1001的位置、第三扬声器相对于显示屏1001的位置和第四扬声器相对于显示屏1001的位置。
下面,当显示屏1001的中心位置为第一坐标所在坐标系的中心点时,对控制器1003确定发声对象对应的扬声器的目标值的过程进行举例说明。
在第一坐标的横坐标值大于零且纵坐标值大于零时,控制器1003可以确定出发声对象位于显示屏1001的右上角。由于第二扬声器被配置成相对于显示屏1001的顶部右侧发射声音,因此,发声对象与第二扬声器的距离最近,从而,控制器1003可以确定发声对象对应的扬声器为第二扬声器,并确定出第二扬声器的目标值,将第二扬声器的功放参数调整为第二扬声器的目标值并向第二扬声器输入声音信号。
在第一坐标的横坐标值小于零且纵坐标值大于零时,控制器1003可以确定出发声对象位于显示屏1001的左上角。由于第一扬声器被配置成相对于显示屏1001的顶部左侧发射声音,因此,发声对象与第一扬声器的距离最近,从而,控制器1003确定发声对象对应的扬声器为第一扬声器,并可以确定出第一扬声器的目标值,将第一扬声器的功放参数调整为第一扬声器的目标值并向第一扬声器输入声音信号。
在第一坐标的横坐标值小于零且纵坐标值小于零时,控制器1003可以确定出发声对象位于显示屏1001的左下角。由于第三扬声器被配置成相对于显示屏1001的底部左侧向前方向发射声音,因此,发声对象与第三扬声器的距离最近,从而,控制器1003可以确定发声对象对应的扬声器为第三扬声器,并确定出第三扬声器的目标值,将第三扬声器的功放参数调整为第三扬声器的目标值并向第三扬声器输入声音信号。
在第一坐标的横坐标值大于零且纵坐标值小于零时,控制器1003可以确定出发声对象位于显示屏1001的右下角。由于第四扬声器被配置成相对于显示屏1001的底部右侧向前方向发射声音,因此,发声对象与第四扬声器的距离最近,从而,控制器1003可以确定发声对象对应的扬声器为第四扬声器,并确定出第四扬声器的目标值,将第四扬声器的功放参数调整为第四扬声器的目标值并向第四扬声器输入声音信号。
由于图12中相对于显示屏1001的中部位置未设置有扬声器,因此,为了进一步提高空间维度上音画合一的效果,在上述图12所示实施例的基础上,如图13所示,扬声器***1002还可以包括:第三扬声器组件。
本申请中,第三扬声器组件包括:第五扬声器(图13中采用SL环绕左进行示意)和第六扬声器(图13中采用SL环绕右进行示意),该第五扬声器被配置成相对于显示屏1001的中部左侧发射声音,该第六扬声器被配置成相对于显示屏1001的中部右侧发射声音,第五扬声器和第六扬声器左右对称设置。
其中,本申请对第五扬声器和第六扬声器的具***置不做限定。且显示设备1000包括多个声道,第五扬声器对应环绕音左声道,第六扬声器对应环绕音右声道。
由于第一扬声器、第二扬声器、第三扬声器、第四扬声器、第五扬声器和第六扬声器的位置固定且不同,因此,坐标集合中的坐标固定不变。因此,控制器1003(图13中未示意)根据第一坐标和坐标集合,可以确定出发声对象分别与第一扬声器、第二扬声器、第三扬声器、第四扬声器、第五扬声器和第六扬声器之间的距离,从而确定出第一扬声器、第二扬声器、第三扬声器、第四扬声器、第五扬声器和第六扬声器中的哪个或者哪些扬声器为发声对象对应的扬声器以及发声对象对应的扬声器的目标值。
其中,此处的坐标集合为第一扬声器相对于显示屏1001的位置、第二扬声器相对于显示屏1001的位置、第三扬声器相对于显示屏1001的位置、第四扬声器相对于显示屏1001的位置、第五扬声器相对于显示屏1001的位置和第六扬声器相对于显示屏1001的位置。
下面,当显示屏1001的中心位置为第一坐标所在坐标系的中心点时,对控制器1003确定相对的扬声器的目标值的过程进行举例说明。
在第一坐标的横坐标值大于零且纵坐标值大于零时,控制器1003可以确定出发声对象位于显示屏1001的右上角。由于第二扬声器被配置成相对于显示屏1001的顶部右侧发射声音,第六扬声器被配置成相对于显示屏1001的中部右侧发射声音,因此,发声对象分别与第二扬声器和第六扬声器的距离较近,从而,控制器1003可以确定发声对象对应的扬声器为第二扬声器和第六扬声器,并确定出第二扬声器的目标值和第六扬声器的目标值,将第二扬声器的功放参数调整为第二扬声器的目标值,将第六扬声器的功放参数调整为第六扬声器的目标值,并分别向第二扬声器和第六扬声器输入声音信号。
在第一坐标的横坐标值小于零且纵坐标值大于零时,控制器1003可以确定出发声对象位于显示屏1001的左上角。由于第一扬声器被配置成相对于显示器的顶部左侧发射声音,第五扬声器被配置成相对于显示屏1001的中部左侧发射声音,因此,发声对象分别与第一扬声器和第五扬声器的距离较近,从而,控制器1003可以确定发声对象对应的扬声器为第一扬声器和第五扬声器,并确定出第一扬声器的目标值和第五扬声器的目标值,将第一扬声器的功放参数调整为第一扬声器的目标值,将第五扬声器的功放参数调整为第五扬声器的目标值,并分别向第一扬声器和第五扬声器输入声音信号。
在第一坐标的横坐标值小于零且纵坐标值小于零时,控制器1003可以确定出发声对象位于显示屏1001的左下角。由于第三扬声器被配置成相对于显示屏1001的底部左侧向前方向发射声音,第五扬声器被配置成相对于显示屏1001的中部左侧发射声音,因此,发声对象分别与第三扬声器和第五扬声器的距离较近,从而,控制器1003确定发声对象对应的扬声器为第三扬声器和第五扬声器,并可以确定出第三扬声器的目标值和第五扬声器的目标值,并将第三扬声器的功放参数调整为第三扬声器的目标值,第五扬声器的功放参数调整为第五扬声器的目标值,并分别向第三扬声器和第五扬声器输入声音信号。
在第一坐标的横坐标值大于零且纵坐标值小于零时,控制器1003可以确定出发声对象位于显示屏1001的右下角。由于第第四扬声器被配置成相对于显示器的底部右侧向前方向发射声音,第六扬声器被配置成相对于显示屏1001的中部右侧发射声音,因此,发声对象分别与第四扬声器和第六扬声器的距离较近,从而,控制器1003确定发声对象对应的扬声器为第四扬声器和第六扬声器,并可以确定出第四扬声器的目标值和第六扬声器的目标值,将第四扬声器的功放参数调整为第四扬声器的目标值,将第六扬声器的功放参数调整为第六扬声器的目标值,并分别向第四扬声器和第六扬声器输入声音信号。
在第一坐标的横坐标值大于零且纵坐标值等于零时,控制器1003可以确定出发声对象位于显示屏1001的中部偏右。由于第二扬声器被配置成相对于显示屏1001的顶部右侧发射声音,第四扬声器被配置成相对于显示器的底部右侧向前方向发射声音,第六扬声器被配置成相对于显示屏1001的中部右侧发射声音,因此,发声对象分别与第二扬声器、第四扬声器和第六扬声器的距离较近,从而,控制器1003确定发声对象对应的扬声器为第二扬声器、第四扬声器和第六扬声器,并可以确定出第二扬声器的目标值、第四扬声器的目标值和第六扬声器的目标值,并将第二扬声器的功放参数调整为第二扬声器的目标值,将第四扬声器的功放参数调整为第四扬声器的目标值,将第六扬声器的功放参数调整为第六扬声器的目标值,并分别向第二扬声器、第四扬声器和第六扬声器输入声音信号。
在第一坐标的横坐标小于零且纵坐标等于零时,控制器1003可以确定出发声对象位于显示屏1001的中部偏左。由于第一扬声器被配置成相对于显示屏1001的顶部左侧发射声音,第三扬声器被配置成相对于显示屏1001的底部左侧向前方向发射声音,第五扬声器被配置成相对于显示屏1001的中部左侧发射声音,因此,发声对象分别与第一扬声器、第三扬声器和第五扬声器的距离较近,从而,控制器1003确定发声对象对应的扬声器为第一扬声器、第三扬声器和第五扬声器,并可以确定出第一扬声器的目标值、第三扬声器的目标值和第五扬声器的目标值,并将第一扬声器的功放参数调整为第一扬声器的目标值,将第三扬声器的功放参数调整为第三扬声器的目标值,将第五扬声器的功放参数调整为第五扬声器的目标值,并分别向第一扬声器、第三扬声器和第五扬声器输入声音信号。
在第一坐标的横坐标值等于零且纵坐标值大于零时,控制器1003可以确定出发声对象位于显示屏1001的中部偏上。由于第一扬声器被配置成相对于显示屏1001的顶部左侧发射声音,第二扬声器被配置成相对于显示器的顶部右侧发射声音,第五扬声器被配置成相对于显示屏1001的中部左侧发射声音,第六扬声器被配置成相对于显示屏1001的中部右侧发射声音,因此,发声对象分别与第一扬声器、第二扬声器、第五扬声器和第六扬声器的距离较近,从而,控制器1003确定发声对象对应的扬声器为第一扬声器、第二扬声器、第五扬声器和第六扬声器,并可以确定出第二扬声器的目标值、第一扬声器的目标值、第五扬声器的目标值和第六扬声器的目标值,并将第二扬声器的功放参数调整为第二扬声器的目标值,将第一扬声器的功放参数调整为第一扬声器的目标值,将第五扬声器的功放参数调整为第五扬声器的目标值,将第六扬声器的功放参数调整为第六扬声器的目标值,并分别向第二扬声器、第一扬声器、第五扬声器和第六扬声器输入声音信号。
在第一坐标的横坐标值等于零且纵坐标值小于零时,控制器1003可以确定出发声对象位于显示屏1001的中部偏下。由于第三扬声器被配置成相对于显示屏1001的底部左侧向前方向发射声音,第四扬声器被配置成相对于显示屏1001的底部右侧向前方向发射声音,第五扬声器被配置成相对于显示屏1001的中部左侧发射声音,第六扬声器被配置成相对于显示屏1001的中部右侧发射声音,因此,发声对象分别与第三扬声器、第四扬声器、第五扬声器和第六扬声器的距离较近,从而,控制器1003确定发声对象对应的扬声器为第三扬声器、第四扬声器、第五扬声器和第六扬声器,并可以确定出第四扬声器的目标值、第三扬声器的目标值、第五扬声器的目标值和第六扬声器的目标值,并将第四扬声器的功放参数调整为第四扬声器的目标值,将第三扬声器的功放参数调整为第三扬声器的目标值,将第五扬声器的功放参数调整为第五扬声器的目标值,第六扬声器的功放参数调整第六扬声器的目标值,并分别向第四扬声器、第三扬声器、第五扬声器和第六扬声器输入声音信号。
在第一坐标的横坐标值等于零且纵坐标值等于零时,控制器1003可以确定出发声对象位于显示屏1001的中心点。由于发声对象分别与第一扬声器、第二扬声器、第三扬声器、第四扬声器、第五扬声器和第六扬声器的距离差不多,因此,控制器1003确定发声对象对应的扬声器为第一扬声器、第二扬声器、第三扬声器、第四扬声器、第五扬声器和第六扬声器,并可以确定出第一扬声器的目标值、第二扬声器的目标值、第三扬声器的目标值、第四扬声器的目标值、第五扬声器的目标值和第六扬声器的目标值,并将第一扬声器的功放参数调整为第一扬声器的目标值,将第二扬声器的功放参数调整为第二扬声器的目标值,将第三扬声器的功放参数调整为第三扬声器的目标值,将第四扬声器的功放参数调整为第四扬声器的目标值,将第五扬声器的功放参数调整为第五扬声器的目标值,将第六扬声器的功放参数调整为第六扬声器的目标值,并分别向第一扬声器、第二扬声器、第三扬声器、第四扬声器、第五扬声器和第六扬声器输入声音信号。
为了进一步提高空间维度上音画合一的效果,在上述图13所示实施例的基础上,如图14所示,扬声器***1002还可以包括:第四扬声器组件。
本申请中,第四扬声器组件包括:第七扬声器(图14中采用SWL低音左进行示意)和第八扬声器(图14中采用SWL低音右进行示意),该第七扬声器被配置成相对于显示屏1001的左侧发射声音,该第八扬声器被配置成相对于显示屏1001的右侧发射声音,第七扬声器和第八扬声器左右对称设置。
其中,本申请对第七扬声器和第八扬声器的具***置不做限定。且显示设备1000包括多个声道,第七扬声器对应重低音左声道,第八扬声器对应重低音右声道。
由于第一扬声器、第二扬声器、第三扬声器、第四扬声器、第五扬声器、第六扬声器、第七扬声器和第八扬声器的位置固定且不同,因此,坐标集合中的坐标固定不变。因此,控制器1003(图14中未示意)根据第一坐标和坐标集合,可以确定出发声对象分别与第一扬声器、第二扬声器、第三扬声器、第四扬声器、第五扬声器、第六扬声器、第七扬声器和第八扬声器之间的距离,从而确定出第一扬声器、第二扬声器、第三扬声器、第四扬声器、第五扬声器、第六扬声器、第七扬声器和第八扬声器中的哪个或者哪些扬声器为发声对象对应的扬声器以及发声对象对应的扬声器的目标值。
其中,此处的坐标集合为第一扬声器相对于显示屏1001的位置、第二扬声器相对于显示屏1001的位置、第三扬声器相对于显示屏1001的位置、第四扬声器相对于显示屏1001的位置、第五扬声器相对于显示屏1001的位置、第六扬声器相对于显示屏1001的位置、第七扬声器相对于显示屏1001的位置和第八扬声器相对于显示屏1001的位置。
下面,当显示屏1001的中心位置为第一坐标所在坐标系的中心点时,对控制器1003确定相对的扬声器的目标值的过程进行举例说明。
在第一坐标的横坐标值等于零且纵坐标值等于零时,控制器1003可以确定出发声对象位于显示屏1001的中心点。由于发声对象分别与第一扬声器、第二扬声器、第三扬声器、第四扬声器、第五扬声器、第六扬声器、第七扬声器和第八扬声器的距离差不多,因此,控制器1003确定发声对象对应的扬声器为第一扬声器、第二扬声器、第三扬声器、第四扬声器、第五扬声器、第六扬声器、第七扬声器和第八扬声器,并可以确定出第一扬声器的目标值、第二扬声器的目标值、第三扬声器的目标值、第四扬声器的目标值、第五扬声器的目标值、第六扬声器的目标值、第七扬声器的目标值和第八扬声器的目标值,将第一扬声器的功放参数调整为第一扬声器的目标值,将第二扬声器的功放参数调整为第二扬声器的目标值,将第三扬声器的功放参数调整为第三扬声器的目标值,将第四扬声器的功放参数调整为第四扬声器的目标值,将第五扬声器的功放参数调整为第五扬声器的目标值,将第六扬声器的功放参数调整为第六扬声器的目标值,将第七扬声器的功放参数调整为第七扬声器的目标值,将第八扬声器的功放参数调整为第八扬声器的目标值,并分别向第一扬声器、第二扬声器、第三扬声器、第四扬声器、第五扬声器、第六扬声器、第七扬声器和第八扬声器输入声音信号。
需要说明的是,除了上述情况之外,对于其他情况,控制器1003可以采用图12或者图13所示内容确定出发声对象对应的扬声器的目标值的过程,此处不做赘述。另外,控制器1003也可以基于第七扬声器和第八扬声器分别与发声对象的位置,在其他情况中确定第七扬声器和/或第八扬声器与其他扬声器一起发射声音。
在上述图10、图11a和图11b-图14所示实施例的基础上,当在用户图形界面上从无到有开始呈现发声对象,为了配合发声对象逐渐呈现的动作,本申请可以将扬声器发射的声音制作成从远及近的音效。在用户图形界面上从有到无结束呈现发声对象时,为了配合发声对象逐渐消失的动作,本申请可以将扬声器发射的声音制作成从近及远的音效。这样做,使得发声对象在画面和声音的结合下更加生动且形象。
在用户图形界面上开始或者结束呈现发声对象时,控制器1003可以基于发声对象的尺寸与显示屏1001的尺寸之间的关系,确定第一坐标的竖坐标值,该竖坐标值用于表示发声对象从无到有或者从有到无的时长或者表示发声对象从无到有或者从有到无时扬声器的功放参数达到目标值所需的时长。
进一步地,控制器1003根据竖坐标值与调整***之间的对应关系,可以确定出调整系数,该调整系数用于表示扬声器的功放参数的调整速率,使得控制器1003按照调整系数,将发声对象对应的扬声器的功放参数调整为发声对象对应的扬声器的目标值。这样做,在发声对象在用户图形界面上从无到有逐渐显示的同时,发声对象对应的扬声器可以播放声音,具有从远及近的音效,或者,在发声对象在用户图形界面上从有到无慢慢消失的同时,发声对象对应的扬声器可以播放声音,具有从近及远的音效,使得发声对象的画面和声音高度统一,实现空间上的音画合一。
在一个具体的实施例中,以显示屏1001的中心点为原点,显示屏1001的宽度方向为X轴,显示屏1001的高度方向为Y轴。显示屏1001的尺寸设置为宽度W且高度H,显示设备1000中设置有第一扬声器、第二扬声器、第三扬声器、第四扬声器、第五扬声器、第六扬声器、第七扬声器和第八扬声器,则如图15所示,显示设备1000上有需要显示发声对象并伴随声音时,控制器1003确定发声对象对应的扬声器的增益的目标值的详细过程包括:
步骤11:控制器1003(图15中未示意)在用户图形界面上呈现发声对象时或者之前,可以采用如下函数,获取发声对象位于用户图形界面上的位置为第一坐标(X,Y,Z),-W<X<W,-H<Y<H。其中,为了便于说明,当Z<0时,实现声音由远及近的效果;当Z>0时,实现声音由近及远的效果;当Z=0时,实现声音保持不变的效果。
GetSoundObjectLocation(X,Y,Z);//返回第一坐标
步骤12:由于第一扬声器相对于显示屏1001的位置坐标为(-W1,H,0),第二扬声器相对于显示屏1001的位置(-W1,H,0),第三扬声器相对于显示屏1001的位置(-W2,-H,0),第四扬声器相对于显示屏1001的位置(W2,-H,0),第五扬声器相对于显示屏1001的位置(-W,0,0),第六扬声器相对于显示屏1001的位置(W,0,0),第七扬声器相对于显示屏1001的位置(-W3,-H1,0)和第八扬声器相对于显示屏1001的位置(W3,-H1,0)。其中,0<W3<W1<W2<W,0<H1<H。因此,控制器1003获取坐标集合为(-W1,H,0)、(-W1,H,0)、(-W2,-H,0)、(W2,-H,0)、(-W,0,0)、(W,0,0)、(-W3,-H1,0)和(W3,-H1,0)。
步骤21:控制器1003可以采用以下函数,表示将显示屏1001所在平面分为第一象限、第二象限、第三象限、第四象限、中心原点、X正半轴、Y正半轴、X负半轴、Y负半轴和中心点。
AssignSoundChannel(X,Y){
If(X>0,Y>0)//第一象限;
If(X<0,Y>0)//第二象限;
If(X<0,Y<0)//第三象限;
If(X>0,Y<0)//第四象限;
If(X>0,Y=0)//X正半轴;
If(X<0,Y=0)//X负半轴;
If(X=0,Y>0)//Y正半轴;
If(X=0,Y>0)//Y负半轴;
If(X=0,Y=0)//中心点;
}
步骤22:控制器1003可以采用以下代码,根据第一坐标和坐标集合,从扬声器***中至少一个扬声器中,确定出发声对象对应的扬声器以及该发声对象对应的扬声器的目标值。其中,A为常数,根据实际情况进行设置,用于辅助计算目标值。
Figure BDA0002305945500000421
Figure BDA0002305945500000431
Figure BDA0002305945500000441
步骤3:在用户图形界面上开始或者结束呈现发声对象时,控制器1003可以根据发声对象的尺寸与显示屏1001的尺寸之间的关系,确定第一坐标的竖坐标值Z。控制器1003再采用以下代码,根据竖坐标值与调整系数之间的对应关系,可以确定出调整系数,使得控制器1003按照调整系数,将发声对象对应的扬声器的增益调整为发声对象对应的目标值。其中,调整系数为固定步长a。
Figure BDA0002305945500000442
实施例地,本申请还提供一种声音控制方法,该方法应用于如图10-图15所示的显示设备1000。其中,显示设备1000包括:显示屏1001、扬声器***1002和控制器1003。显示屏1001,被配置为呈现图像数据,显示屏1001上设有用户图形界面。扬声器***1002包括至少两组扬声器组件,且每组扬声器组件包括至少一个扬声器。
下面,结合图16,对本申请的声音控制方法的具体实现过程进行描述。图16为本申请一实施例提供的声音控制方法的流程图,如图16所示,本申请的声音控制方法可以包括:
S101、控制器获取发声对象位于用户图形界面上的位置,以及扬声器***中每个扬声器的位置。
S102、控制器根据发声对象位于用户图形界面上的位置,以及扬声器***中每个扬声器的位置,确定出发声对象对应的扬声器。
S103、控制器在用户图形界面上呈现发声对象时,控制发声对象对应的扬声器播放声音。
本申请提供的声音控制方法可执行上述图10、图11a和图11b-图15所示显示设备的实施例,其具体实现原理和技术效果,可参见上述图10、图11a和图11b-图15所示实施例,本实施例此处不再赘述。
在上述图16所示实施例的基础上,S101中控制器获取发声对象位于用户图形界面上的位置,以及扬声器***中每个扬声器的位置的一种可行的实现方式中,控制器可以获取第一坐标和坐标集合,第一坐标为发声对象位于用户图形界面上的位置,坐标集合为至少两组扬声器组件中每个扬声器的位置。
S102中控制器确定出发声对象对应的扬声器的一种可行的实现方式中,可选地,控制器根据第一坐标和坐标集合,确定发声对象对应的扬声器的目标值,目标值用于表示扬声器的功放参数大小。控制器将发声对象对应的扬声器的功放参数大小调整为发声对象对应的扬声器的目标值。
本申请提供的声音控制方法可执行上述图10、图11a和图11b-图15所示显示设备的实施例,其具体实现原理和技术效果,可参见上述图10、图11a和图11b-图15所示实施例,本实施例此处不再赘述。
在上述图16所示实施例的基础上,在用户图形界面上开始或者结束呈现发声对象时,控制器可以将发声对象对应的扬声器的功放参数调整为发声对象对应的目标值,以配合画面的逐渐显示过程或者逐渐消失过程,达到空间维度上的音画合一效果。
可选地,控制器根据发声对象的尺寸与显示器的尺寸之间的关系,可以确定第一坐标的竖坐标值。控制器根据竖坐标值与调整***之间的对应关系,可以确定调整系数,该调整系数用于表示扬声器的功放参数的调整速率。控制器按照调整系数,可以将发声对象对应的扬声器的功放参数调整为相应的目标值。
本申请提供的声音控制方法可执行上述图10、图11a和图11b-图15所示显示设备的实施例,其具体实现原理和技术效果,可参见上述对应的实施例,本实施例此处不再赘述。
可选地,功放参数包括:增益、相位或者动态范围控制。
可选地,发声对象包括:焦点窗、光标、弹出窗、气泡窗、卡通动画提示或者视频对话窗口。
图17为本申请一实施例提供的电子设备的硬件结构示意图。如图17所示,该电子设备170,用于实现上述任一方法实施例中对应于显示设备中控制器的操作,本申请的电子设备170可以包括:存储器171和处理器172;
存储器171,用于存储计算机程序;
处理器172,用于执行存储器存储的计算机程序,以实现上述实施例中的声音控制方法。具体可以参见前述方法实施例中的相关描述。
可选地,存储器171既可以是独立的,也可以跟处理器172集成在一起。
当存储器171是独立于处理器172之外的器件时,电子设备170还可以包括:
总线163,用于连接存储器171和处理器172。
可选地,本申请还包括:通信接口174,该通信接口174可以通过总线173与处理器172连接。处理器172可以控制通信接口173来实现电子设备170的上述的接收和发送的功能。
本申请提供的电子设备可用于执行上述的声音控制方法,其实现方式和技术效果类似,本实施例此处不再赘述。
本申请还提供一种计算机可读存储介质,计算机可读存储介质包括计算机程序,计算机程序用于实现如上实施例中的声音控制方法。
在本申请所提供的几个实施例中,应该理解到,所揭露的设备和方法,可以通过其它的方式实现。例如,以上所描述的设备实施例仅仅是示意性的,例如,模块的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个模块可以结合或者可以集成到另一个***,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或模块的间接耦合或通信连接,可以是电性,机械或其它的形式。
作为分离部件说明的模块可以是或者也可以不是物理上分开的,作为模块显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能模块可以集成在一个处理单元中,也可以是各个模块单独物理存在,也可以两个或两个以上模块集成在一个单元中。上述模块成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
上述以软件功能模块的形式实现的集成的模块,可以存储在一个计算机可读取存储介质中。上述软件功能模块存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或处理器(英文:processor)执行本申请各个实施例方法的部分步骤。
应理解,上述处理器可以是中央处理单元(英文:Central Processing Unit,简称:CPU),还可以是其他通用处理器、数字信号处理器(英文:Digital Signal Processor,简称:DSP)、专用集成电路(英文:Application Specific Integrated Circuit,简称:ASIC)等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本申请所公开的方法的步骤可以直接体现为硬件处理器执行完成,或者用处理器中的硬件及软件模块组合执行完成。
存储器可能包含高速RAM存储器,也可能还包括非易失性存储NVM,例如至少一个磁盘存储器,还可以为U盘、移动硬盘、只读存储器、磁盘或光盘等。
总线可以是工业标准体系结构(Industry Standard Architecture,ISA)总线、外部设备互连(Peripheral Component,PCI)总线或扩展工业标准体系结构(ExtendedIndustry Standard Architecture,EISA)总线等。总线可以分为地址总线、数据总线、控制总线等。为便于表示,本申请附图中的总线并不限定仅有一根总线或一种类型的总线。
上述计算机可读存储介质可以是由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。存储介质可以是通用或专用计算机能够存取的任何可用介质。
本领域普通技术人员可以理解:实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一计算机可读取存储介质中。该程序在执行时,执行包括上述各方法实施例的步骤;而前述的存储介质包括:ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上各实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述各实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。

Claims (10)

1.一种显示设备,其特征在于,包括:
显示屏,被配置为呈现图像数据,所述显示屏上设有用户图形界面;
扬声器***,被配置为再现声音数据,所述扬声器***包括至少两组扬声器组件,每组扬声器组件包括至少一个扬声器;
控制器,被配置为根据发声对象位于所述用户图形界面上的位置,以及所述扬声器***中每个扬声器的位置,确定出所述发声对象对应的扬声器;
所述控制器,还被配置为在所述用户图形界面上呈现所述发声对象时,控制所述发声对象对应的扬声器播放声音。
2.根据权利要求1所述的显示设备,其特征在于,所述控制器,被配置为获取第一坐标和坐标集合,所述第一坐标为所述发声对象位于所述用户图形界面上的位置,所述坐标集合为所述至少两组所述扬声器组件中每个扬声器的位置;
所述控制器,还被配置为根据所述第一坐标和所述坐标集合,确定所述发声对象对应的扬声器的目标值,所述目标值用于表示所述扬声器的功放参数大小;
所述控制器,还被配置为将所述发声对象对应的扬声器的功放参数大小调整为所述发声对象对应的扬声器的目标值。
3.根据权利要求1或2所述的显示设备,其特征在于,每组扬声器组件包括左右对称设置的多个扬声器,且每个扬声器的位置不同。
4.根据权利要求3所述的显示设备,其特征在于,所述扬声器***包括:第一扬声器组件和第二扬声器组件;
其中,所述第一扬声器组件中的第一扬声器,被配置成相对于所述显示屏的顶部左侧发射声音;所述第一扬声器组件中的第二扬声器,被配置成相对于所述显示屏的顶部右侧发射声音;所述第一扬声器和所述第二扬声器左右对称设置;
所述第二扬声器组件中的第三扬声器,被配置成相对于所述显示屏的底部左侧向前方向发射声音;所述第二扬声器组件中的第四扬声器,被配置成相对于所述显示屏的底部右侧向前方向发射声音;所述第三扬声器和所述第四扬声器左右对称设置;
所述显示屏的中心位置为所述第一坐标所在坐标系的中心点;
所述控制器,被配置为在所述第一坐标的横坐标值大于零且纵坐标值大于零时,确定所述发声对象对应的扬声器为所述第二扬声器;或者,
所述控制器,被配置为在所述第一坐标的横坐标值小于零且纵坐标值大于零时,确定所述发声对象对应的扬声器为所述第一扬声器;或者,
所述控制器,被配置为在所述第一坐标的横坐标值小于零且纵坐标值小于零时,确定所述发声对象对应的扬声器为所述第三扬声器;或者,
所述控制器,被配置为在所述第一坐标的横坐标值大于零且纵坐标值小于零时,确定所述发声对象对应的扬声器为所述第四扬声器。
5.根据权利要求4所述的显示设备,其特征在于,所述扬声器***还包括:第三扬声器组件;
其中,所述第三扬声器组件中的第五扬声器,被配置成相对于所述显示屏的中部左侧发射声音;所述第三扬声器组件中的第六扬声器,被配置成相对于所述显示屏的中部右侧发射声音;所述第五扬声器和所述第六扬声器左右对称设置;
所述控制器,被配置为在所述第一坐标的横坐标值大于零且纵坐标值大于零时,确定所述发声对象对应的扬声器为所述第二扬声器和所述第六扬声器;或者,
所述控制器,被配置为在所述第一坐标的横坐标值小于零且纵坐标值大于零时,确定所述发声对象对应的扬声器为所述第一扬声器和所述第五扬声器;或者,
所述控制器,被配置为在所述第一坐标的横坐标值小于零且纵坐标值小于零时,确定所述发声对象对应的扬声器为所述第三扬声器和所述第五扬声器;或者,
所述控制器,被配置为在所述第一坐标的横坐标值大于零且纵坐标值小于零时,确定所述发声对象对应的扬声器为所述第四扬声器和所述第六扬声器;或者,
所述控制器,被配置为在所述第一坐标的横坐标值大于零且纵坐标值等于零时,确定所述发声对象对应的扬声器为所述第二扬声器、所述第四扬声器和所述第六扬声器;或者,
所述控制器,被配置为在所述第一坐标的横坐标小于零且纵坐标等于零时,确定所述发声对象对应的扬声器为所述第一扬声器、所述第三扬声器和所述第五扬声器;或者,
所述控制器,被配置为在所述第一坐标的横坐标值等于零且纵坐标值大于零时,确定所述发声对象对应的扬声器为所述第二扬声器、所述第一扬声器、所述第五扬声器和所述第六扬声器;或者,
所述控制器,被配置为在所述第一坐标的横坐标值等于零且纵坐标值小于零时,确定所述发声对象对应的扬声器为所述第四扬声器、所述第三扬声器、所述第五扬声器和所述第六扬声器;或者,
所述控制器,被配置为在所述第一坐标的横坐标值等于零且纵坐标值等于零时,确定所述发声对象对应的扬声器为所述第一扬声器、所述第二扬声器、所述第三扬声器、所述第四扬声器、所述第五扬声器和所述第六扬声器。
6.根据权利要求5所述的显示设备,其特征在于,所述扬声器***还包括:第四扬声器组件;
其中,所述第四扬声器组件中的第七扬声器,被配置成相对于所述显示屏的左侧发射声音;所述第四扬声器组件中的第八扬声器,被配置成相对于所述显示屏的右侧发射声音;所述第七扬声器和所述第八扬声器左右对称设置;
所述控制器,被配置为在所述第一坐标的横坐标值等于零且纵坐标值等于零时,确定所述发声对象对应的扬声器为所述第一扬声器、所述第二扬声器、所述第三扬声器、所述第四扬声器、所述第五扬声器、所述第六扬声器、所述第七扬声器和所述第八扬声器。
7.根据权利要求4所述的显示设备,其特征在于,所述第一扬声器和所述第三扬声器相对于所述显示屏上下不对称,所述第二扬声器和所述第四扬声器相对于所述显示屏上下不对称。
8.根据权利要求2-7任一项所述的显示设备,其特征在于,
所述控制器,还被配置为在所述用户图形界面上开始或者结束呈现所述发声对象时,根据所述发声对象的尺寸与所述用户图形界面的尺寸之间的关系,确定所述第一坐标的竖坐标值;并根据竖坐标值与调整***之间的对应关系,确定调整系数,所述调整系数用于表示扬声器的功放参数的调整速率;
所述控制器,还被配置为按照所述调整系数,将所述发声对象对应的扬声器的功放参数调整为所述发声对象对应的扬声器的目标值。
9.根据权利要求8任一项所述的显示设备,其特征在于,所述功放参数包括:增益、相位或者动态范围控制。
10.一种声音控制方法,其特征在于,应用于显示设备,所述显示设备包括:显示屏、扬声器***和控制器;显示屏,被配置为呈现图像数据,所述显示屏上设有用户图形界面;扬声器***,被配置为再现声音数据,所述扬声器***包括至少两组扬声器组件,每组扬声器组件包括至少一个扬声器;所述方法包括:
所述控制器获取发声对象位于所述用户图形界面上的位置,以及所述扬声器***中每个扬声器的位置;
所述控制器根据所述发声对象位于所述用户图形界面上的位置,以及所述扬声器***中每个扬声器的位置,确定出所述发声对象对应的扬声器;
所述控制器在所述用户图形界面上呈现所述发声对象时,控制所述发声对象对应的扬声器播放声音。
CN201911240016.9A 2019-12-03 2019-12-03 显示设备和声音控制方法 Active CN112911354B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911240016.9A CN112911354B (zh) 2019-12-03 2019-12-03 显示设备和声音控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911240016.9A CN112911354B (zh) 2019-12-03 2019-12-03 显示设备和声音控制方法

Publications (2)

Publication Number Publication Date
CN112911354A true CN112911354A (zh) 2021-06-04
CN112911354B CN112911354B (zh) 2022-11-15

Family

ID=76110792

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911240016.9A Active CN112911354B (zh) 2019-12-03 2019-12-03 显示设备和声音控制方法

Country Status (1)

Country Link
CN (1) CN112911354B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023207884A1 (zh) * 2022-04-27 2023-11-02 华为技术有限公司 一种音频播放方法及相关装置
CN117692846A (zh) * 2023-07-05 2024-03-12 荣耀终端有限公司 一种音频播放方法、终端设备、存储介质及程序产品
WO2024131153A1 (zh) * 2022-12-20 2024-06-27 荣耀终端有限公司 一种扬声器控制方法和电子设备

Citations (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW480474B (en) * 1998-12-16 2002-03-21 Ibm Method and apparatus for presenting proximal feedback in voice command systems
CN1750605A (zh) * 2004-09-14 2006-03-22 乐金电子(沈阳)有限公司 根据画面上说话人的位置来控制音量的图像显示设备及其控制方法
JP2007266967A (ja) * 2006-03-28 2007-10-11 Yamaha Corp 音像定位装置およびマルチチャンネルオーディオ再生装置
JP2007274061A (ja) * 2006-03-30 2007-10-18 Yamaha Corp 音像定位装置およびavシステム
CN101330585A (zh) * 2007-06-20 2008-12-24 深圳Tcl新技术有限公司 一种声音定位的方法及***
CN101459797A (zh) * 2007-12-14 2009-06-17 深圳Tcl新技术有限公司 一种声音定位的方法及***
US20100111336A1 (en) * 2008-11-04 2010-05-06 So-Young Jeong Apparatus for positioning screen sound source, method of generating loudspeaker set information, and method of reproducing positioned screen sound source
US20110134207A1 (en) * 2008-08-13 2011-06-09 Timothy J Corbett Audio/video System
US20110188342A1 (en) * 2008-03-20 2011-08-04 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Device and method for acoustic display
CN102843640A (zh) * 2011-06-24 2012-12-26 索尼公司 声音控制设备、程序和控制方法
CN103096134A (zh) * 2013-02-08 2013-05-08 广州博冠信息科技有限公司 一种基于视频直播和游戏的数据处理方法和设备
CN103905810A (zh) * 2014-03-17 2014-07-02 北京智谷睿拓技术服务有限公司 多媒体处理方法及多媒体处理装置
EP2819400A1 (en) * 2013-06-27 2014-12-31 Samsung Electronics Co., Ltd. Display apparatus and method for providing stereophonic sound service
WO2015104235A1 (en) * 2014-01-07 2015-07-16 Dacuda Ag Dynamic updating of composite images
CN106162447A (zh) * 2016-06-24 2016-11-23 维沃移动通信有限公司 一种音频播放的方法和终端
CN106686369A (zh) * 2016-12-28 2017-05-17 努比亚技术有限公司 一种3d显示模式下音频播放的控制方法及移动终端
CN108712571A (zh) * 2018-05-17 2018-10-26 Oppo广东移动通信有限公司 显示屏发声的方法、装置、电子装置及存储介质
CN109302664A (zh) * 2018-11-21 2019-02-01 京东方科技集团股份有限公司 显示屏及其声音输出位置控制方法和装置
CN109348359A (zh) * 2018-10-29 2019-02-15 歌尔科技有限公司 一种音响设备及其音效调整方法、装置、设备、介质

Patent Citations (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW480474B (en) * 1998-12-16 2002-03-21 Ibm Method and apparatus for presenting proximal feedback in voice command systems
CN1750605A (zh) * 2004-09-14 2006-03-22 乐金电子(沈阳)有限公司 根据画面上说话人的位置来控制音量的图像显示设备及其控制方法
JP2007266967A (ja) * 2006-03-28 2007-10-11 Yamaha Corp 音像定位装置およびマルチチャンネルオーディオ再生装置
JP2007274061A (ja) * 2006-03-30 2007-10-18 Yamaha Corp 音像定位装置およびavシステム
CN101330585A (zh) * 2007-06-20 2008-12-24 深圳Tcl新技术有限公司 一种声音定位的方法及***
CN101459797A (zh) * 2007-12-14 2009-06-17 深圳Tcl新技术有限公司 一种声音定位的方法及***
US20110188342A1 (en) * 2008-03-20 2011-08-04 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Device and method for acoustic display
US20110134207A1 (en) * 2008-08-13 2011-06-09 Timothy J Corbett Audio/video System
US20100111336A1 (en) * 2008-11-04 2010-05-06 So-Young Jeong Apparatus for positioning screen sound source, method of generating loudspeaker set information, and method of reproducing positioned screen sound source
CN102843640A (zh) * 2011-06-24 2012-12-26 索尼公司 声音控制设备、程序和控制方法
CN103096134A (zh) * 2013-02-08 2013-05-08 广州博冠信息科技有限公司 一种基于视频直播和游戏的数据处理方法和设备
EP2819400A1 (en) * 2013-06-27 2014-12-31 Samsung Electronics Co., Ltd. Display apparatus and method for providing stereophonic sound service
US20150003648A1 (en) * 2013-06-27 2015-01-01 Samsung Electronics Co., Ltd. Display apparatus and method for providing stereophonic sound service
WO2015104235A1 (en) * 2014-01-07 2015-07-16 Dacuda Ag Dynamic updating of composite images
CN103905810A (zh) * 2014-03-17 2014-07-02 北京智谷睿拓技术服务有限公司 多媒体处理方法及多媒体处理装置
CN106162447A (zh) * 2016-06-24 2016-11-23 维沃移动通信有限公司 一种音频播放的方法和终端
CN106686369A (zh) * 2016-12-28 2017-05-17 努比亚技术有限公司 一种3d显示模式下音频播放的控制方法及移动终端
CN108712571A (zh) * 2018-05-17 2018-10-26 Oppo广东移动通信有限公司 显示屏发声的方法、装置、电子装置及存储介质
CN109348359A (zh) * 2018-10-29 2019-02-15 歌尔科技有限公司 一种音响设备及其音效调整方法、装置、设备、介质
CN109302664A (zh) * 2018-11-21 2019-02-01 京东方科技集团股份有限公司 显示屏及其声音输出位置控制方法和装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023207884A1 (zh) * 2022-04-27 2023-11-02 华为技术有限公司 一种音频播放方法及相关装置
WO2024131153A1 (zh) * 2022-12-20 2024-06-27 荣耀终端有限公司 一种扬声器控制方法和电子设备
CN117692846A (zh) * 2023-07-05 2024-03-12 荣耀终端有限公司 一种音频播放方法、终端设备、存储介质及程序产品

Also Published As

Publication number Publication date
CN112911354B (zh) 2022-11-15

Similar Documents

Publication Publication Date Title
CN112073797B (zh) 一种音量调节方法及显示设备
CN111526415B (zh) 一种双屏显示设备及其hdmi的切换方法
CN111510788B (zh) 一种双屏双***屏幕切换动画的显示方法及显示设备
CN111491190B (zh) 一种双***摄像头切换控制方法及显示设备
CN112911354B (zh) 显示设备和声音控制方法
CN111464840B (zh) 显示设备及显示设备屏幕亮度的调节方法
CN112788422A (zh) 显示设备
CN112788423A (zh) 一种显示设备及菜单界面的显示方法
CN112783380A (zh) 显示设备和方法
CN113115083A (zh) 显示设备及显示方法
CN113141528B (zh) 显示设备、开机动画播放方法及存储介质
CN112788378A (zh) 显示设备与内容显示方法
CN112784137A (zh) 显示设备、显示方法及计算设备
CN112788381B (zh) 显示设备及显示方法
CN113365124B (zh) 一种显示设备及显示方法
CN112788375B (zh) 显示设备、显示方法及计算设备
CN112788387B (zh) 显示设备、方法和存储介质
WO2021088308A1 (zh) 一种显示设备及音乐推荐方法
CN113015023A (zh) Html5网页中的视频控制的方法及装置
CN112927653A (zh) 显示设备与背光亮度的控制方法
CN112073808A (zh) 一种色彩空间切换方法及显示装置
CN112788380B (zh) 显示设备及显示方法
CN111970547B (zh) 一种显示设备
CN111526409B (zh) 一种显示设备
CN113630633B (zh) 显示设备及交互控制方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant