CN111083538A - 一种背景图像的显示方法及设备 - Google Patents
一种背景图像的显示方法及设备 Download PDFInfo
- Publication number
- CN111083538A CN111083538A CN201911220934.5A CN201911220934A CN111083538A CN 111083538 A CN111083538 A CN 111083538A CN 201911220934 A CN201911220934 A CN 201911220934A CN 111083538 A CN111083538 A CN 111083538A
- Authority
- CN
- China
- Prior art keywords
- image
- display
- display device
- audio
- label
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/4104—Peripherals receiving signals from specially adapted client devices
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42203—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/485—End-user interface for client configuration
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/8146—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics
- H04N21/8153—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics comprising still images, e.g. texture, background image
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Computer Graphics (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
本实施例提供一种背景图像的显示方法及设备。该方法及设备包括检测所述音像资源的时间轴上设置的标签,所述标签在所述时间轴上的位置是根据所述文本中的预设词语出现的时间设置的;响应于检测到所述标签,获取与所述标签对应的第二图像;在当前用户界面,显示所述第二图像。本实施例提供的显示设备和背景图像显示方法,能够在播放音像资源的过程中,显示与音像资源中文本对应的图像,使用户融入音像资源所提供的场景。
Description
技术领域
本申请实施例涉及图像显示技术领域,尤其涉及一种背景图像的显示方法及设备。
背景技术
随着智能电视的快速发展和全面普及,人们在家庭中就可以通过智能电视进行基于虚拟形象的3D avatar K歌(简称3D K歌)。如图1所示,在3D K歌过程中,智能电视在播放伴奏的过程中,不仅会在屏幕上显示歌词,还能够将用户的虚拟形象与歌词的背景融合显示,使用户″亲临″歌曲场景,拉近用户和电视的关系。
目前,歌词的背景通常是K歌歌曲的MV(Music Video,音乐短片),但是MV的内容时常不能与歌词直接描述的内容相对应。例如,在播放歌曲《带你去旅行》的过程中,在播放到歌词″一起去繁华的上海和北京″时,智能电视显示的MV中,并没有与上海和北京相关的内容,导致用户在3D K歌过程中,无法″亲临″歌曲对应的场景,用户体验不佳。
因此,亟待提供一种背景图像的显示方法和显示设备,以提高用户3D K歌体验,使用户能够″亲临″歌曲场景。
发明内容
本申请提供一种背景图像的显示方法及设备,用于解决现有的音像资源的文本与其背景图像不对应的问题,提高用户观看音像资源时的用户体验。
第一方面,本实施例提供一种显示设备,包括:
扬声器,被配置为输出音像资源中的声音信息;
显示器,被配置为显示用户界面,所述用户界面用于显示所述音像资源中的第一图像,并在所述第一图像上展示与所述声音信息对应的文本;
控制器,分别与所述扬声器和所述显示器相连接,所述控制器被配置为:检测所述音像资源的时间轴上设置的标签,所述标签在所述时间轴上的位置是根据所述文本中的预设词语出现的时间设置的;响应于检测到所述标签,获取与所述标签对应的第二图像;在当前用户界面,显示所述第二图像。
在第一方面的第一种实现方式中,所述标签包括图像确定子标签和播放子标签,其中,在所述时间轴上,所述图像确定子标签位于所述播放子标签之前;所述控制器还被配置为:
响应于检测到所述图像确定子标签,根据所述图像确定子标签与图像之间预设的对应关系,获取所述第二图像;
响应于检测到所述播放子标签,控制所述显示器在当前用户界面,显示所述第二图像。
在第一方面的第二种实现方式中,根据所述图像确定子标签与图像之间预设的对应关系,获取所述第二图像,包括:根据所述图像确定子标签与图像之间预设的对应关系,确定与所述标签对应的第二图像的标识信息;根据所述标识信息,在本地查找所述第二图像;或者,根据所述标识信息,从云端服务器下载所述第二图像。
在第一方面的第三种实现方式中,根据所述标识信息,从云端服务器下载所述第二图像,包括:如果根据所述标识信息,在本地未查找到所述第二图像,则将所述标识信息发送给云端服务器;以及,接收云端服务器根据所述标识信息确定的第二图像。
在第一方面的第四种实现方式中,所述控制器还被配置为,在获取到所述第二图像之后,直接在所述当前用户界面,显示所述第二图像。
在第一方面的第五种实现方式中,在当前用户界面,显示所述第二图像,包括:将所述第一图像切换为所述第二图像;或者,将所述第一图像显示于所述第一图像的局部。
在第一方面的第六种实现方式中,不同的所述标签,对应不同的所述第二图像。
在第一方面的第七种实现方式中,所述预设词语包括地名、人名、物品名或情绪词语。
第二方面,本实施例提供一种背景图像的显示方法,应用于显示设备,所述显示设备用于播放音像资源,所述音像资源包括声音信息、与所述声音信息对应的文本以及第一图像,所述文本显示在所述第一图像上,所述方法包括:
检测所述音像资源的时间轴上设置的标签,所述标签在所述时间轴上的位置是根据所述文本中的预设词语出现的时间设置的;
响应于检测到所述标签,获取与所述标签对应的第二图像;
在当前用户界面,显示所述第二图像。
本申请提供的技术方案包括以下有益技术效果:
本申请实施例提供的背景图像的显示方法及显示设备,能够根据音像资源的时间轴上预设的与文本对应的标签,调取第二图像,并在当前用户界面显示该第二图像,使音像资源中的文本与其背景高度对应,使用户融入音像资源所提供的场景中。
附图说明
为了更清楚地说明本申请的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1中示例性示出了根据实施例中显示设备与控制装置之间操作场景的示意图;
图2中示例性示出了根据实施例中显示设备200的硬件配置框图;
图3中示例性示出了根据实施例中控制设备100的硬件配置框图;
图4中示例性示出了根据实施例中显示设备200的功能配置示意图;
图5a中示例性示出了根据实施例中显示设备200中软件配置示意图;
图5b中示例性示出了根据实施例中显示设备200中应用程序的配置示意图;
图6中示例性示出了根据实施例中背景图像显示方法的流程图;
图7中示例性示出了根据实施例中用户界面的示意图一;
图8中示例性示出了根据实施例中用户界面的示意图二;
图9中示例性示出了根据实施例中用户界面的示意图三。
具体实施方式
为使本申请示例性实施例的目的、技术方案和优点更加清楚,下面将结合本申请示例性实施例中的附图,对本申请示例性实施例中的技术方案进行清楚、完整地描述,显然,所描述的示例性实施例仅是本申请一部分实施例,而不是全部的实施例。
基于本申请中示出的示例性实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。此外,虽然本申请中公开内容按照示范性一个或几个实例来介绍,但应理解,可以就这些公开内容的各个方面也可以单独构成一个完整技术方案。
应当理解,本申请中说明书和权利要求书及上述附图中的术语″第一″、″第二″、″第三″等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,例如能够根据本申请实施例图示或描述中给出那些以外的顺序实施。
此外,术语″包括″和″具有″以及他们的任何变形,意图在于覆盖但不排他的包含,例如,包含了一系列组件的产品或设备不必限于清楚地列出的那些组件,而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。
本申请中使用的术语″模块″,是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合,能够执行与该元件相关的功能。
本申请中使用的术语″遥控器″,是指电子设备(如本申请中公开的显示设备)的一个组件,通常可在较短的距离范围内无线控制电子设备。一般使用红外线和/或射频(RF)信号和/或蓝牙与电子设备连接,也可以包括WiFi、无线USB、蓝牙、动作传感器等功能模块。例如:手持式触摸遥控器,是以触摸屏中用户界面取代一般遥控装置中的大部分物理内置硬键。
本申请中使用的术语″手势″,是指用户通过一种手型的变化或手部运动等动作,用于表达预期想法、动作、目的/或结果的用户行为。
图1中示例性示出了根据实施例中显示设备与控制装置之间操作场景的示意图。如图1所示,用户可通过控制装置100来操作显示设备200。
其中,控制装置100可以是遥控器100A,包括红外协议通信或蓝牙协议通信,及其他短距离通信方式等,通过无线或其他有线方式来控制显示设备200。用户可以通过遥控器上按键、语音输入、控制面板输入等输入用户指令,来控制显示设备200。如:用户可以通过遥控器上音量加减键、频道控制键、上/下/左/右的移动按键、语音输入按键、菜单键、开关机按键等输入相应控制指令,来实现控制显示设备200的功能。
控制装置100也可以是智能设备,如移动终端100B、平板电脑、计算机、笔记本电脑等。例如,使用在智能设备上运行的应用程序控制显示设备200。该应用程序可以在与智能设备关联的屏幕上通过直观的用户界面(UI)为用户提供各种控制。
示例的,移动终端100B可与显示设备200安装软件应用,通过网络通信协议实现连接通信,实现一对一控制操作的和数据通信的目的。如:可以使移动终端100B与显示设备200建立控制指令协议,将遥控控制键盘同步到移动终端100B上,通过控制移动终端100B上用户界面,实现控制显示设备200的功能。也可以将移动终端100B上显示的音视频内容传输到显示设备200上,实现同步显示功能。
如图1所示,显示设备200还与服务器300通过多种通信方式进行数据通信。可允许显示设备200通过局域网(LAN)、无线局域网(WLAN)和其他网络进行通信连接。服务器300可以向显示设备200提供各种内容和互动。示例的,显示设备200通过发送和接收信息,以及电子节目指南(EPG)互动,接收软件程序更新,或访问远程储存的数字媒体库。服务器300可以是一组,也可以是多组,可以是一类或多类服务器。通过服务器300提供视频点播和广告服务等其他网络服务内容。
显示设备200,可以是液晶显示器、OLED显示器、投影显示设备。具体显示设备类型,尺寸大小和分辨率等不作限定,本领技术人员可以理解的是,显示设备200可以根据需要做性能和配置上的一些改变。
显示设备200除了提供广播接收电视功能之外,还可以附加提供计算机支持功能的智能网络电视功能。示例的包括,网络电视、智能电视、互联网协议电视(IPTV)等。
图2中示例性示出了根据示例性实施例中显示设备200的硬件配置框图。如图2所示,显示设备200中可以包括调谐解调器220、通信器230、检测器240、外部装置接口250、控制器210、存储器290、用户输入接口、视频处理器260-1、音频处理器260-2、显示器280、音频输入接口272、供电电源。
调谐解调器220,通过有线或无线方式接收广播电视信号,可以进行放大、混频和谐振等调制解调处理,用于从多个无线或有线广播电视信号中解调出用户所选择电视频道的频率中所携带的音视频信号,以及附加信息(例如EPG数据信号)。
调谐解调器220,可根据用户选择,以及由控制器210控制,响应用户选择的电视频道频率以及该频率所携带的电视信号。
调谐解调器220,根据电视信号广播制式不同,可以接收信号的途径有很多种,诸如:地面广播、有线广播、卫星广播或互联网广播等;以及根据调制类型不同,可以数字调制方式,也可以模拟调制方式;以及根据接收电视信号种类不同,可以解调模拟信号和数字信号。
在其他一些示例性实施例中,调谐解调器220也可在外置设备中,如外置机顶盒等。这样,机顶盒通过调制解调后输出电视音视频信号,经过输入/输出接口250输入至显示设备200中。
通信器230是用于根据各种通信协议类型与外部设备或外部服务器进行通信的组件。例如:通信器230可以包括WIFI模块231,蓝牙通信协议模块232,有线以太网通信协议模块233等其他网络通信协议模块或近场通信协议模块。
显示设备200可以通过通信器230与外部控制设备或内容提供设备之间建立控制信号和数据信号的连接。例如,通信器可根据控制器的控制接收遥控器100的控制信号。
检测器240,是显示设备200用于采集外部环境或与外部交互的信号的组件。检测器240可以包括光接收器242,用于采集环境光线强度的传感器,可以通过采集环境光来自适应显示参数变化等;还可以包括图像采集器241,如相机、摄像头等,可以用于采集外部环境场景,以及用于采集用户的属性或与用户交互手势,可以自适应变化显示参数,也可以识别用户手势,以实现与用户之间互动的功能。
在其他一些示例性实施例中,检测器240,还可包括温度传感器,如通过感测环境温度,显示设备200可自适应调整图像的显示色温。示例性的,当温度偏高的环境时,可调整显示设备200显示图像色温偏冷色调;当温度偏低的环境时,可以调整显示设备200显示图像色温偏暖色调。
在其他一些示例性实施例中,检测器240还可包括声音采集器,如麦克风,可以用于接收用户的声音,包括用户控制显示设备200的控制指令的语音信号,或采集环境声音,用于识别环境场景类型,显示设备200可以自适应环境噪声。
外部装置接口250,提供控制器210控制显示设备200与外部其他设备间数据传输的组件。外部装置接口可按照有线/无线方式与诸如机顶盒、游戏装置、笔记本电脑等的外部设备连接,可接收外部设备的诸如视频信号(例如运动图像)、音频信号(例如音乐)、附加信息(例如EPG)等数据。
其中,外部装置接口250可以包括:高清多媒体接口(HDMI)端子251、复合视频消隐同步(CVBS)端子252、模拟或数字分量端子253、通用串行总线(USB)端子254、红绿蓝(RGB)端子(图中未示出)等任一个或多个。
控制器210,通过运行存储在存储器290上的各种软件控制程序(如操作***和各种应用程序),来控制显示设备200的工作和响应用户的操作。
如图2所示,控制器210包括随机存取存储器RAM213、只读存储器ROM214、图形处理器216、CPU处理器212、通信接口218、以及通信总线。其中,RAM213和ROM214以及图形处理器216、CPU处理器212、通信接口218通过总线相连接。
ROM213,用于存储各种***启动的指令。如在收到开机信号时,显示设备200电源开始启动,CPU处理器212运行ROM中***启动指令,将存储在存储器290的操作***拷贝至RAM214中,以开始运行启动操作***。当操作***启动完成后,CPU处理器212再将存储器290中各种应用程序拷贝至RAM214中,然后,开始运行启动各种应用程序。
图形处理器216,用于产生各种图形对象,如:图标、操作菜单、以及用户输入指令显示图形等。包括运算器,通过接收用户输入各种交互指令进行运算,根据显示属性显示各种对象。以及包括渲染器,产生基于运算器得到的各种对象,进行渲染的结果显示在显示器280上。
CPU处理器212用于执行存储在存储器290中操作***和应用程序指令。以及根据接收外部输入的各种交互指令,来执行各种应用程序、数据和内容,以便最终显示和播放各种音视频内容。
在一些示例性实施例中,CPU处理器212,可以包括多个处理器。多个处理器可包括一个主处理器以及多个或一个子处理器。主处理器,用于在预加电模式中执行显示设备200一些操作,和/或在正常模式下显示画面的操作。多个或一个子处理器,用于执行在待机模式等状态下的一种操作。
通信接口,可包括第一接口218-1到第n接口218-n。这些接口可以是经由网络被连接到外部设备的网络接口。
控制器210可以控制显示设备200的整体操作。例如:响应于接收到用于选择在显示器280上显示UI对象的用户命令,控制器210便可以执行与由用户命令选择的对象有关的操作。
其中,所述对象可以是可选对象中的任何一个,例如超链接或图标。与所选择的对象有关操作,例如:显示连接到超链接页面、文档、图像等操作,或者执行与图标相对应程序的操作。用于选择UI对象用户命令,可以是通过连接到显示设备200的各种输入装置(例如,鼠标、键盘、触摸板等)输入命令或者与由用户说出语音相对应的语音命令。
存储器290,包括存储用于驱动和控制显示设备200的各种软件模块。如:存储器290中存储的各种软件模块,包括:基础模块、检测模块、通信模块、显示控制模块、浏览器模块、和各种服务模块等。
其中,基础模块是用于显示设备200中各个硬件之间信号通信、并向上层模块发送处理和控制信号的底层软件模块。检测模块是用于从各种传感器或用户输入接口中收集各种信息,并进行数模转换以及分析管理的管理模块。
例如:语音识别模块中包括语音解析模块和语音指令数据库模块。显示控制模块是用于控制显示器280进行显示图像内容的模块,可以用于播放多媒体图像内容和UI界面等信息。通信模块,是用于与外部设备之间进行控制和数据通信的模块。浏览器模块,是用于执行浏览服务器之间数据通信的模块。服务模块,是用于提供各种服务以及各类应用程序在内的模块。
同时,存储器290还用于存储接收外部数据和用户数据、各种用户界面中各个项目的图像以及焦点对象的视觉效果图等。
用户输入接口,用于将用户的输入信号发送给控制器210,或者,将从控制器输出的信号传送给用户。示例性的,控制装置(例如移动终端或遥控器)可将用户输入的诸如电源开关信号、频道选择信号、音量调节信号等输入信号发送至用户输入接口,再由用户输入接口转送至控制器;或者,控制装置可接收经控制器处理从用户输入接口输出的音频、视频或数据等输出信号,并且显示接收的输出信号或将接收的输出信号输出为音频或振动形式。
在一些实施例中,用户可在显示器280上显示的图形用户界面(GUI)输入用户命令,则用户输入接口通过图形用户界面(GUI)接收用户输入命令。或者,用户可通过输入特定的声音或手势进行输入用户命令,则用户输入接口通过传感器识别出声音或手势,来接收用户输入命令。
视频处理器260-1,用于接收视频信号,根据输入信号的标准编解码协议,进行解压缩、解码、缩放、降噪、帧率转换、分辨率转换、图像合成等视频数据处理,可得到直接在显示器280上显示或播放的视频信号。
示例的,视频处理器260-1,包括解复用模块、视频解码模块、图像合成模块、帧率转换模块、显示格式化模块等。
其中,解复用模块,用于对输入音视频数据流进行解复用处理,如输入MPEG-2,则解复用模块进行解复用成视频信号和音频信号等。
视频解码模块,用于对解复用后的视频信号进行处理,包括解码和缩放处理等。
图像合成模块,如图像合成器,其用于将图形生成器根据用户输入或自身生成的GUI信号,与缩放处理后视频图像进行叠加混合处理,以生成可供显示的图像信号。
帧率转换模块,用于对输入视频的帧率进行转换,如将输入的24Hz、25Hz、30Hz、60Hz视频的帧率转换为60Hz、120Hz或240Hz的帧率,其中,输入帧率可以与源视频流有关,输出帧率可以与显示屏的更新率有关。输入有通常的格式采用如插帧方式实现。
显示格式化模块,用于将帧率转换模块输出的信号,改变为符合诸如显示器显示格式的信号,如将帧率转换模块输出的信号进行格式转换以输出RGB数据信号。
显示器280,用于接收源自视频处理器260-1输入的图像信号,进行显示视频内容和图像以及菜单操控界面。显示器280包括用于呈现画面的显示屏组件以及驱动图像显示的驱动组件。显示视频内容,可以来自调谐解调器220接收的广播信号中的视频,也可以来自通信器或外部设备接口输入的视频内容。显示器220,同时显示显示设备200中产生且用于控制显示设备200的用户操控界面UI。
以及,根据显示器280类型不同,还包括用于驱动显示的驱动组件。或者,倘若显示器280为一种投影显示器,还可以包括一种投影装置和投影屏幕。
当显示设备200播放音像资源时,如果音像资源包括声音信息、与声音信息对应的文本以及第一图像,则显示器280的用户界面上显示第一图像和文本,并且文本展示在第一图像上方。
在一个具体的示例中,当音像资源为K歌歌曲时,显示器280显示的用户界面如图7所示。其中,文本为当前播放歌曲的歌词,第二图像为当前播放歌曲的MV中的图像。
音频处理器260-2,用于接收音频信号,根据输入信号的标准编解码协议,进行解压缩和解码,以及降噪、数模转换、和放大处理等音频数据处理,得到可以在扬声器272中播放的音频信号。
音频输出接口270,用于在控制器210的控制下接收音频处理器260-2输出的音频信号,音频输出接口可包括扬声器272,或输出至外接设备的发生装置的外接音响输出端子274,如:外接音响端子或耳机输出端子等。
在一个具体的示例中,显示设备200在提供K歌服务的过程中,扬声器272用于播放声音信息。其中,该声音信息包括歌曲伴奏和用户声音。
在其他一些示例性实施例中,视频处理器260-1可以包括一个或多个芯片组成。音频处理器260-2,也可以包括一个或多个芯片组成。
以及在其他一些示例性实施例中,视频处理器260-1和音频处理器260-2,可以为单独的芯片,也可以与控制器210一起集成在一个或多个芯片中。
供电电源,用于在控制器210控制下,将外部电源输入的电力为显示设备200提供电源供电支持。供电电源可以包括安装显示设备200内部的内置电源电路,也可以是安装在显示设备200外部的电源,如在显示设备200中提供外接电源的电源接口。
在本实施例中,请参阅图6,本实施例提供的显示设备200中的控制器210还被配置为执行如下步骤S601-S603。
步骤S601,检测音像资源的时间轴上设置的标签,标签在时间轴上的位置是根据文本中的预设词语出现的时间设置的。
具体的,在音像资源时间轴的不同时间段内,显示器602显示音像资源(如K歌歌曲)中不同的内容,本实施例提供的标签就设置在这个时间轴上。并且,音像资源在播放的过程中,控制器210会不断识别音像资源中的标签。
其中,标签是根据音像资源所携带的文本中的预设词语确定,该预设词语可以包括地名(如土耳其、北京、上海、东京、云南等)、人名(如小芳、朱丽叶)、物品名(如热气球、巴黎铁塔、樱花等)等名词或情绪词语(如幸福、开心、伤心、难过等)。
每一个标签对应至少一个预设词语,并且设置在对应预设词语的播放时间段附近。例如,标签可以设置在对应预设词语的播放时间段的之前N秒,以便显示设备有充足的时间获取该标签对应的图像,并将其配置为该播放时间段对应的背景图像。其中,N不小于0,并且根据预先的配置确定,例如0、1或者3等,本实施例对此不进行限制。
以音像资源中的文本是歌曲《带你去旅行》中的歌词″一起去繁华的上海和北京″为例,该歌词中的预设词语为″上海″和″北京″,该歌词的播放时间段为01:13-01:16(即1min13s-1min16s)。其中,需要说明的是,歌词的播放时间段指的是歌词对应的伴奏的播放时间,而不一定是歌词的显示时间。
在一个示例中,可以在该歌词的播放时间段之前设置一个标签,该标签可以对应于″上海″和″北京″这两个预设词语,设置在01:12的位置上。
在另一示例中,可以在该歌词对应的播放时间轴上设置两个标签,分别为第一标签和第二标签。其中,第一标签对应于预设词语″上海″,设置在01:13的位置上;第二标签对应于预设词语″北京″,设置在01:15的位置上。
步骤S602,响应于检测到标签,获取与标签对应的第二图像。
显示设备200的存储器290中预先存储有标签和图像的对应关系表,例如表1所示的对应关系表。在该对应关系表中,一个标签至少对应一个图像的标识信息,不同标签对应的标识信息可能相同,也可能不同,具体根据预先的配置确定。标签名称用于唯一指示一个标签,标识信息用于唯一指示对应的图像。示例性的,该标识信息可以为图像的名称。
表1对应关系表
标签名称 | 图像的标识信息 |
1 | A、B |
2 | C |
3 | D |
4 | B、C |
… | … |
控制器210根据标签名称,查询对应关系表即可确定该标签对应的图像的标识信息。例如,根据标签名称″1″,查询表1所示的对应关系表,即可确定该标签对应的图像的标识信息为″A″和″B″。
控制器210在确定标识信息后,可以根据该标识信息在本地数据库中查找对应的第二图像;或者,从云端服务器下载对应的第二图像;再或者,首先根据标识信息在本地数据库中查找对应的第二图像,如果没有查找到,则从云端服务器下载对应的第二图像。
具体的,控制器210从云端服务器下载对应的第二图像时,首先将标识信息发送给云端服务器,云端服务器根据该标识信息在云端服务器数据库中查找对应的第二图像,并将第二图像发送给控制器210,控制器210接收该图像之后,图像下载完成。
步骤S603,在当前用户界面,显示第二图像。
具体的,在控制器210获取到第二图像之后,可以直接将该第二图像设置为音像资源的背景图像,并由控制器210控制显示器280显示。
此外,作为一种可选的实现方式,本实施例提供的每一个标签可以包括一个图像确定子标签和一个播放子标签。例如,标签″1″(可称为母标签)包括图像确定子标签″1-1″和播放子标签″1-2″。值得注意的是,在音像资源的时间轴上,图像确定子标签位于播放子标签之前。
在音像资源的播放过程中,当控制器210识别到图像确定子标签(如标签″1-1″)后,控制器210根据该图像确定子标签与图像之间预设的对应关系,获取该母标签对应的图像。当控制器210识别到播放子标签(如标签″1-2″)后,控制器210控制显示器280将获取到的第二图像显示为音像资源的背景图像。通过设置这两个子标签,显示设备不仅能够获得足够的时间去获取第二图像,而且能够精准控制第二图像显示的时间点,使音像资源的内容与背景图像高度对应。
其中,在显示第二图像时,控制器210可以控制显示器280将第一图像切换为第二图像。例如图8所示,显示设备200在提供K歌服务,播放歌词″一起去繁华的上海和北京″的过程中,控制器210控制显示器280将预设词语″上海″对应的上海黄浦江的图片设置为该句歌词的全屏背景。
或者,将第二图像的显示于第一图像的局部。例如图9所示,显示设备200在提供K歌服务,播放歌词″一起去繁华的上海和北京″的过程中,控制器210控制显示器280将预设词语″北京″对应的故宫和湖泊的图片设置为该句歌词的局部背景。
其中,需要说明的是,在3D K歌的场景下,用户界面中通常会有一个用户图像,该用户图像可以是卡通图像,也可是摄像头采集的用户的真实图像。在该用户界面中,文本所在的图层位于最上方,第一图像所在图层位于最下方,用户图像所在图层位于中间。控制器210在控制显示器280显示第二图像的过程中,控制显示器280在用户图像所在图层位与第一图像所在图层之间的图层上,显示第二图像,以避免第二图像遮挡文本和用户图像。
图3中示例性示出了根据示例性实施例中控制装置100的配置框图。如图3所示,控制装置100包括控制器110、通信器130、用户输入/输出接口140、存储器190、供电电源180。
控制装置100被配置为控制显示设备200,以及可接收用户的输入操作指令,且将操作指令转换为显示设备200可识别和响应的指令,起着用户与显示设备200之间交互中介作用。如:用户通过操作控制装置100上频道加减键,显示设备200响应频道加减的操作。
在一些实施例中,控制装置100可是一种智能设备。如:控制装置100可根据用户需求安装控制显示设备200的各种应用。
在一些实施例中,如图1所示,移动终端100B或其他智能电子设备,可在安装操控显示设备200的应用之后,可以起到控制装置100类似功能。如:用户可以通过安装应用,在移动终端100B或其他智能电子设备上可提供的图形用户界面的各种功能键或虚拟按钮,以实现控制装置100实体按键的功能。
控制器110包括处理器112、RAM113和ROM114、通信接口以及通信总线。控制器110用于控制控制装置100的运行和操作,以及内部各部件之间通信协作以及外部和内部的数据处理功能。
通信器130在控制器110的控制下,实现与显示设备200之间控制信号和数据信号的通信。如:将接收到的用户输入信号发送至显示设备200上。通信器130可包括WIFI模块131、蓝牙模块132、NFC模块133等通信模块中至少一种。
用户输入/输出接口140,其中,输入接口包括麦克风141、触摸板142、传感器143、按键144等输入接口中至少一者。如:用户可以通过语音、触摸、手势、按压等动作实现用户指令输入功能,输入接口通过将接收的模拟信号转换为数字信号,以及数字信号转换为相应指令信号,发送至显示设备200。
输出接口包括将接收的用户指令发送至显示设备200的接口。在一些实施例中,可以是红外接口,也可以是射频接口。如:红外信号接口时,需要将用户输入指令按照红外控制协议转化为红外控制信号,经红外发送模块进行发送至显示设备200。再如:射频信号接口时,需将用户输入指令转化为数字信号,然后按照射频控制信号调制协议进行调制后,由射频发送端子发送至显示设备200。
在一些实施例中,控制装置100包括通信器130和输出接口中至少一者。控制装置100中配置通信器130,如:WIFI、蓝牙、NFC等模块,可将用户输入指令通过WIFI协议、或蓝牙协议、或NFC协议编码,发送至显示设备200.
存储器190,用于在控制器110的控制下存储驱动和控制控制装置100的各种运行程序、数据和应用。存储器190,可以存储用户输入的各类控制信号指令。
供电电源180,用于在控制器110的控制下为控制装置100各元件提供运行电力支持。可以电池及相关控制电路。
图4中示例性示出了根据示例性实施例中显示设备200功能配置示意图。如图4所示,存储器290用于存储操作***、应用程序、内容和用户数据等,在控制器210控制下执行驱动显示设备200的***运行以及响应用户的各种操作。存储器290可以包括易失性和/或非易失性存储器。
存储器290,具体用于存储驱动显示设备200中控制器210的运行程序,以及存储显示设备200内置各种应用程序,以及用户从外部设备下载的各种应用程序、以及与应用程序相关的各种图形用户界面,以及与图形用户界面相关的各种对象,用户数据信息,以及各种支持应用程序的内部数据。存储器290用于存储操作***(OS)内核、中间件和应用等***软件,以及存储输入的视频数据和音频数据、及其他用户数据。
存储器290,具体用于存储视频处理器260-1和音频处理器260-2、显示器280、通信接口230、调谐解调器220、检测器240、输入/输出接口等驱动程序和相关数据。
在一些实施例中,存储器290可以存储软件和/或程序,用于表示操作***(OS)的软件程序包括,例如:内核、中间件、应用编程接口(API)和/或应用程序。示例性的,内核可控制或管理***资源,或其它程序所实施的功能(如所述中间件、API或应用程序),以及内核可以提供接口,以允许中间件和API,或应用访问控制器,以实现控制或管理***资源。
示例的,存储器290,包括广播接收模块2901、频道控制模块2902、音量控制模块2903、图像控制模块2904、显示控制模块2905、音频控制模块2906、外部指令识别模块2907、通信控制模块2908、光接收模块2909、电力控制模块2910、操作***2911、以及其他应用程序2912、浏览器模块等等。控制器210通过运行存储器290中各种软件程序,来执行诸如:广播电视信号接收解调功能、电视频道选择控制功能、音量选择控制功能、图像控制功能、显示控制功能、音频控制功能、外部指令识别功能、通信控制功能、光信号接收功能、电力控制功能、支持各种功能的软件操控平台、以及浏览器功能等其他应用。
图5a中示例性示出了根据示例性实施例中显示设备200中软件***的配置框图。
如图5a中所示,操作***2911,包括用于处理各种基础***服务和用于实施硬件相关任务的执行操作软件,充当应用程序和硬件组件之间完成数据处理的媒介。
一些实施例中,部分操作***内核可以包含一系列软件,用以管理显示设备硬件资源,并为其他程序或软件代码提供服务。
其他一些实施例中,部分操作***内核可包含一个或多个设备驱动器,设备驱动器可以是操作***中的一组软件代码,帮助操作或控制显示设备关联的设备或硬件。驱动器可以包含操作视频、音频和/或其他多媒体组件的代码。示例的,包括显示屏、摄像头、Flash、WiFi和音频驱动器。
其中,可访问性模块2911-1,用于修改或访问应用程序,以实现应用程序的可访问性和对其显示内容的可操作性。
通信模块2911-2,用于经由相关通信接口和通信网络与其他外设的连接。
用户界面模块2911-3,用于提供显示用户界面的对象,以供各应用程序访问,可实现用户可操作性。
控制应用程序2911-4,用于控制进程管理,包括运行时间应用程序等。
事件传输***2914,可在操作***2911内或应用程序2912中实现。一些实施例中,一方面在在操作***2911内实现,同时在应用程序2912中实现,用于监听各种用户输入事件,将根据各种事件指代响应各类事件或子事件的识别结果,而实施一组或多组预定义的操作的处理程序。
其中,事件监听模块2914-1,用于监听用户输入接口输入事件或子事件。
事件识别模块2914-1,用于对各种用户输入接口输入各类事件的定义,识别出各种事件或子事件,且将其传输给处理用以执行其相应一组或多组的处理程序。
其中,事件或子事件,是指显示设备200中一个或多个传感器检测的输入,以及外界控制设备(如控制装置100等)的输入。如:语音输入各种子事件,手势识别的手势输入子事件,以及控制装置的遥控按键指令输入的子事件等。示例的,遥控器中一个或多个子事件包括多种形式,包括但不限于按键按上/下/左右/、确定键、按键按住等中一个或组合。以及非实体按键的操作,如移动、按住、释放等操作。
界面布局管理模块2913,直接或间接接收来自于事件传输***2914监听到各用户输入事件或子事件,用于更新用户界面的布局,包括但不限于界面中各控件或子控件的位置,以及容器的大小或位置、层级等与界面布局相关各种执行操作。
如图5b中所示,应用程序层2912包含可在显示设备200执行的各种应用程序。应用程序可包含但不限于一个或多个应用程序,如:直播电视应用程序、视频点播应用程序、媒体中心应用程序、应用程序中心、游戏应用等。
直播电视应用程序,可以通过不同的信号源提供直播电视。例如,直播电视应用程可以使用来自有线电视、无线广播、卫星服务或其他类型的直播电视服务的输入提供电视信号。以及,直播电视应用程序可在显示设备200上显示直播电视信号的视频。
视频点播应用程序,可以提供来自不同存储源的视频。不同于直播电视应用程序,视频点播提供来自某些存储源的视频显示。例如,视频点播可以来自云存储的服务器端、来自包含已存视频节目的本地硬盘储存器。
媒体中心应用程序,可以提供各种多媒体内容播放的应用程序。例如,媒体中心,可以为不同于直播电视或视频点播,用户可通过媒体中心应用程序访问各种图像或音频所提供服务。
应用程序中心,可以提供储存各种应用程序。应用程序可以是一种游戏、应用程序,或某些和计算机***或其他设备相关但可以在智能电视中运行的其他应用程序。应用程序中心可从不同来源获得这些应用程序,将它们储存在本地储存器中,然后在显示设备200上可运行。
本实施例提供的显示设备,能够根据音像资源的时间轴上预设的与文本对应的标签,调取第二图像,并在当前用户界面显示该第二图像,使音像资源中的文本与其背景高度对应,使用户融入音像资源所提供的场景中。
例如,显示设备在提供K歌服务的过程中,可以根据当前播放的歌词内容,以及预设的与该歌词内容对应的标签,调取对应的第二图像,将其作为歌词的背景,使用户在K歌过程中,能够″亲临″歌词所描述的场景。
此外,本申请实施例还提供一种背景图像的显示方法,应用于上述本申请实施例提供的显示设备,该方法包括上述步骤5601-5603。
本实施例提供的背景图像的显示方法,能够根据音像资源的时间轴上预设的与文本对应的标签,调取第二图像,并在当前用户界面显示该第二图像,使音像资源中的文本与其背景高度对应,使用户融入音像资源所提供的场景中。
最后应说明的是:以上各实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述各实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。
Claims (10)
1.一种显示设备,其特征在于,包括:
扬声器,被配置为输出音像资源中的声音信息;
显示器,被配置为显示用户界面,所述用户界面用于显示所述音像资源中的第一图像,并在所述第一图像上展示与所述声音信息对应的文本;
控制器,分别与所述扬声器和所述显示器相连接,所述控制器被配置为:
检测所述音像资源的时间轴上设置的标签,所述标签在所述时间轴上的位置是根据所述文本中的预设词语出现的时间设置的;
响应于检测到所述标签,获取与所述标签对应的第二图像;
在当前用户界面,显示所述第二图像。
2.根据权利要求1所述的显示设备,其特征在于,所述标签包括图像确定子标签和播放子标签,其中,在所述时间轴上,所述图像确定子标签位于所述播放子标签之前;所述控制器还被配置为:
响应于检测到所述图像确定子标签,根据所述图像确定子标签与图像之间预设的对应关系,获取所述第二图像;
响应于检测到所述播放子标签,控制所述显示器在当前用户界面,显示所述第二图像。
3.根据权利要求2所述的显示设备,其特征在于,根据所述图像确定子标签与图像之间预设的对应关系,获取所述第二图像,包括:
根据所述图像确定子标签与图像之间预设的对应关系,确定与所述标签对应的第二图像的标识信息;
根据所述标识信息,在本地查找所述第二图像;或者,
根据所述标识信息,从云端服务器下载所述第二图像。
4.根据权利要求3所述的显示设备,其特征在于,根据所述标识信息,从云端服务器下载所述第二图像,包括:
如果根据所述标识信息,在本地未查找到所述第二图像,则将所述标识信息发送给云端服务器;以及,接收云端服务器根据所述标识信息确定的第二图像。
5.根据权利要求1-4任一项所述的显示设备,其特征在于,所述控制器还被配置为,
在获取到所述第二图像之后,直接在所述当前用户界面,显示所述第二图像。
6.根据权利要求1所述的显示设备,其特征在于,在当前用户界面,显示所述第二图像,包括:
将所述第一图像切换为所述第二图像;或者,
将所述第一图像显示于所述第一图像的局部。
7.根据权利要求1-4任一项所述的显示设备,其特征在于,不同的所述标签,对应不同的所述第二图像。
8.根据权利要求1-4任一项所述显示设备,其特征在于,所述预设词语包括名词或情绪词语。
9.一种背景图像的显示方法,其特征在于,应用于显示设备,所述显示设备用于播放音像资源,所述音像资源包括声音信息、与所述声音信息对应的文本以及第一图像,所述文本显示在所述第一图像上,所述方法包括:
检测所述音像资源的时间轴上设置的标签,所述标签在所述时间轴上的位置是根据所述文本中的预设词语出现的时间设置的;
响应于检测到所述标签,获取与所述标签对应的第二图像;
在当前用户界面,显示所述第二图像。
10.如权利要求9所述的方法,其特征在于,所述预设词语包括名词或情绪词语。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911220934.5A CN111083538A (zh) | 2019-12-03 | 2019-12-03 | 一种背景图像的显示方法及设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911220934.5A CN111083538A (zh) | 2019-12-03 | 2019-12-03 | 一种背景图像的显示方法及设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111083538A true CN111083538A (zh) | 2020-04-28 |
Family
ID=70312589
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911220934.5A Pending CN111083538A (zh) | 2019-12-03 | 2019-12-03 | 一种背景图像的显示方法及设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111083538A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112115283A (zh) * | 2020-08-25 | 2020-12-22 | 天津洪恩完美未来教育科技有限公司 | 绘本数据的处理方法、装置及设备 |
CN112199004A (zh) * | 2020-10-10 | 2021-01-08 | Vidaa美国公司 | 一种用户界面的显示方法及显示设备 |
CN115776600A (zh) * | 2021-09-06 | 2023-03-10 | 聚好看科技股份有限公司 | 显示设备及音乐播放界面展示的方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106802896A (zh) * | 2015-11-26 | 2017-06-06 | 沈阳东软睿道教育服务有限公司 | 基于移动终端的微课制作、播放方法和装置及学习平台 |
CN107610725A (zh) * | 2017-09-19 | 2018-01-19 | 广东小天才科技有限公司 | 一种视频制作方法及终端 |
US20180260492A1 (en) * | 2017-03-07 | 2018-09-13 | Enemy Tree LLC | Digital multimedia pinpoint bookmark device, method, and system |
CN110019936A (zh) * | 2017-11-02 | 2019-07-16 | 北京搜狗科技发展有限公司 | 一种媒体文件播放过程中的注释方法和装置 |
-
2019
- 2019-12-03 CN CN201911220934.5A patent/CN111083538A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106802896A (zh) * | 2015-11-26 | 2017-06-06 | 沈阳东软睿道教育服务有限公司 | 基于移动终端的微课制作、播放方法和装置及学习平台 |
US20180260492A1 (en) * | 2017-03-07 | 2018-09-13 | Enemy Tree LLC | Digital multimedia pinpoint bookmark device, method, and system |
CN107610725A (zh) * | 2017-09-19 | 2018-01-19 | 广东小天才科技有限公司 | 一种视频制作方法及终端 |
CN110019936A (zh) * | 2017-11-02 | 2019-07-16 | 北京搜狗科技发展有限公司 | 一种媒体文件播放过程中的注释方法和装置 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112115283A (zh) * | 2020-08-25 | 2020-12-22 | 天津洪恩完美未来教育科技有限公司 | 绘本数据的处理方法、装置及设备 |
CN112199004A (zh) * | 2020-10-10 | 2021-01-08 | Vidaa美国公司 | 一种用户界面的显示方法及显示设备 |
CN115776600A (zh) * | 2021-09-06 | 2023-03-10 | 聚好看科技股份有限公司 | 显示设备及音乐播放界面展示的方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109618206B (zh) | 呈现用户界面的方法和显示设备 | |
CN111405318B (zh) | 视频展示方法、装置及计算机存储介质 | |
CN110996136B (zh) | 视频资源的显示方法及装置 | |
CN111405338B (zh) | 一种智能画质的切换方法及显示设备 | |
CN113259741B (zh) | 一种剧集经典看点的展示方法及显示设备 | |
CN111131898B (zh) | 播放媒体资源的方法、装置、显示设备及存储介质 | |
CN112055240B (zh) | 一种显示设备及其与遥控器配对的操作提示展示方法 | |
CN111277884A (zh) | 视频播放方法及设备 | |
CN110675872A (zh) | 基于多***显示设备的语音交互方法及多***显示设备 | |
CN111031375B (zh) | 一种开机动画详情页的跳转方法及显示设备 | |
CN111479145A (zh) | 显示设备及电视节目的推送方法 | |
CN111770370A (zh) | 显示设备、服务器及媒资推荐的方法 | |
CN112399212A (zh) | 显示设备、分享文件的方法和服务器 | |
CN112543359B (zh) | 一种显示设备及自动配置视频参数的方法 | |
CN111083538A (zh) | 一种背景图像的显示方法及设备 | |
CN112380420A (zh) | 一种搜索方法及显示设备 | |
CN111343495A (zh) | 一种显示设备及播放终端中音乐的方法 | |
CN111176603A (zh) | 一种用于显示设备的图像显示方法及显示设备 | |
CN112073787B (zh) | 显示设备及首页显示方法 | |
CN111586463B (zh) | 显示设备 | |
CN113259733B (zh) | 一种显示设备 | |
CN112073777B (zh) | 一种语音交互方法及显示设备 | |
CN113573126A (zh) | 一种显示设备、移动终端及服务器 | |
CN113495654A (zh) | 一种控件展示方法及显示设备 | |
CN113467651A (zh) | 一种控件对应的内容的显示方法及显示设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20200428 |
|
RJ01 | Rejection of invention patent application after publication |