CN102737676A - 音乐播放装置、音乐播放方法、程序及数据创建装置 - Google Patents

音乐播放装置、音乐播放方法、程序及数据创建装置 Download PDF

Info

Publication number
CN102737676A
CN102737676A CN2012100889492A CN201210088949A CN102737676A CN 102737676 A CN102737676 A CN 102737676A CN 2012100889492 A CN2012100889492 A CN 2012100889492A CN 201210088949 A CN201210088949 A CN 201210088949A CN 102737676 A CN102737676 A CN 102737676A
Authority
CN
China
Prior art keywords
music
unit
image
phrase
speech
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2012100889492A
Other languages
English (en)
Inventor
角川元辉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN102737676A publication Critical patent/CN102737676A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43—Querying
    • G06F16/432—Query formulation
    • G06F16/433—Query formulation using audio data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60—Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/68—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/683—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/685—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using automatically derived transcript of audio data, e.g. lyrics
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • G11B20/10527—Audio or video recording; Data buffering arrangements
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • G11B20/10527—Audio or video recording; Data buffering arrangements
    • G11B2020/10537—Audio or video recording
    • G11B2020/10546—Audio or video recording specifically adapted for audio data

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Library & Information Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Mathematical Physics (AREA)
  • Artificial Intelligence (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Reverberation, Karaoke And Other Acoustics (AREA)
  • Telephone Function (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)
  • Electrophonic Musical Instruments (AREA)

Abstract

本公开提供了音乐播放装置、音乐播放方法、程序及数据创建装置。该音乐播放装置包括：播放单元，被配置为播放音乐；分析单元，被配置为分析所述音乐的歌词并提取所述歌词中所包括的词或短语；获取单元，被配置为使用所述分析单元所提取的词或短语来获取图像；以及显示控制单元，被配置为在所述音乐的播放期间，使显示装置显示所述获取单元所获取的图像。

Description

音乐播放装置、音乐播放方法、程序及数据创建装置
技术领域
本公开涉及音乐播放装置、音乐播放方法、程序及数据创建装置。
背景技术
迄今为止已设计出许多音乐播放装置以专门播放音乐。然而，具有以下显示功能的音乐播放装置如今也已开始广泛使用。
(1)视觉设计师(Visualizer)功能
根据正在播放的音乐的节奏来运动地显示预定设计图案的功能。
(2)歌词显示功能
随着正在播放的音乐显示该音乐的歌词的功能。
另外，JP 2005-181646A公开了一种技术，该技术显示适合于正在播放的音乐的氛围(乐器和旋律)的图像。
发明内容
然而，利用上述视觉设计师功能，可能存在所显示的设计图案及其运动不适合于音乐的氛围并且可能使用户眼睛疲劳的情况。此外，尽管歌词显示功能对用户而言是方便的，但是该功能可能不是非常令人感兴趣的。尽管如在JP 2005-181646A的技术中那样显示适合于音乐的氛围的图像是有效的，但是表征音乐的元素不仅仅是该音乐的诸如乐器和旋律的氛围。
因此，本公开提出一种新颖且改进的音乐播放装置、音乐播放方法、程序及数据创建装置，该音乐播放装置、音乐播放方法、程序及数据创建装置能够在音乐播放期间使显示装置根据该音乐的歌词来显示图像。
根据本公开的实施例，提供了一种音乐播放装置，包括：播放单元，被配置为播放音乐；分析单元，被配置为分析所述音乐的歌词并提取所述歌词中所包括的词或短语；获取单元，被配置为使用所述分析单元所提取的词或短语来获取图像；以及显示控制单元，被配置为在所述音乐的播放期间，使显示装置显示所述获取单元所获取的图像。
根据本公开的另一实施例，提供了一种音乐播放方法，包括：分析音乐的歌词并提取所述歌词中所包括的词或短语；使用所提取的词或短语来获取图像；以及使显示装置在所述音乐的播放期间显示所获取的图像。
根据本公开的另一实施例，提供了一种程序，该程序使计算机起到如下单元的作用：播放单元，被配置为播放音乐；分析单元，被配置为分析所述音乐的歌词并提取所述歌词中所包括的词或短语；获取单元，被配置为使用所述分析单元所提取的词或短语来获取图像；以及显示控制单元，被配置为在所述音乐的播放期间，使显示装置显示所述获取单元所获取的图像。
根据本公开的另一实施例，提供了一种数据创建装置，包括：分析单元，被配置为分析音乐的歌词并提取所述歌词中所包括的词或短语；获取单元，被配置为使用由所述分析单元提取的词或短语从网络获取图像；以及数据创建单元，被配置为基于所述获取单元所获取的图像来创建与所述音乐相关联的图像数据文件。
根据本公开的上述实施例，可以在音乐播放期间使显示装置根据该音乐的歌词显示图像。
附图说明
图1是示出根据本公开实施例的音乐播放***的配置的说明图；
图2是示出根据该实施例的音乐播放装置的硬件配置的说明图；
图3是示出根据本公开第一实施例的音乐播放装置的配置的功能框图；
图4是示出根据第一显示控制而显示的画面的具体示例的说明图；
图5是示出根据第二显示控制而显示的画面的具体示例的说明图；
图6是示出根据第三显示控制而显示的画面的具体示例的说明图；
图7是示出根据第四显示控制而显示的画面的具体示例的说明图；
图8是示出根据第五显示控制而显示的画面的具体示例的说明图；
图9是示出根据第一实施例的音乐播放装置的操作的流程图；
图10是示出根据本公开第二实施例的音乐播放装置的配置的功能框图；
图11是示出根据第二实施例的歌词分析的结果的说明图；
图12是示出根据第二实施例的图像显示的具体示例的说明图；
图13是示出根据第二实施例的音乐播放装置的操作的流程图；
图14是示出根据本公开第三实施例的音乐播放装置的配置的功能框图；
图15是示出根据第三实施例的歌词分析的结果的说明图；
图16是示出根据第三实施例的图像显示的具体示例的说明图；
图17是示出根据第三实施例的音乐播放装置的操作的流程图；以及
图18是示出根据本公开第四实施例的音乐播放装置的配置的功能框图。
具体实施方式
下面将参照附图详细描述本公开的优选实施例。注意，在本说明和附图中，以相同的附图标记来表示具有基本相同的功能和结构的结构元件，并省略对这些结构元件的重复说明。
根据本公开实施例，提供了一种音乐播放装置，包括：播放单元，被配置为播放音乐；分析单元，被配置为分析所述音乐的歌词并提取所述歌词中所包括的词或短语；获取单元，被配置为使用所述分析单元所提取的词或短语来获取图像；以及显示控制单元，被配置为在所述音乐的播放期间，使显示装置显示所述获取单元所获取的图像。
根据本公开实施例，提供了一种音乐播放方法，包括：分析音乐的歌词并提取所述歌词中所包括的词或短语；使用所提取的词或短语来获取图像；以及使显示装置在所述音乐的播放期间显示所获取的图像。
根据本公开实施例，提供了一种数据创建装置，包括：分析单元，被配置为分析音乐的歌词并提取所述歌词中所包括的词或短语；获取单元，被配置为使用由所述分析单元提取的词或短语从网络获取图像；以及数据创建单元，被配置为基于所述获取单元所获取的图像来创建与所述音乐相关联的图像数据文件。
将按照以下顺序描述“具体实施方式”。
1.音乐播放***的配置
2.每个实施例的描述
2-1.第一实施例
2-2.第二实施例
2-3.第三实施例
2-4.第四实施例
3.结论
《1.音乐播放***的配置》
可以通过如在“2-1.第一实施例”至“2-4.第四实施例”中示例性地详细描述的各种方式来实现根据本公开的技术。另外，根据每个实施例的音乐播放装置20包括：
A.播放音乐的播放单元(音乐播放单元272)；
B.分析音乐的歌词并提取歌词中所包括的词或短语的分析单元(230)；
C.使用由分析单元提取的词或短语来获取图像的获取单元(通信单元264和搜索单元268)；以及
D.使显示装置(图像显示单元284)在音乐播放期间显示由获取单元获取的图像的显示控制单元(280)。
下面将首先参考图1和图2描述每个实施例共有的基本配置。
图1是示出根据本公开实施例的音乐播放***1的配置的说明图。如图1中所示，根据本公开实施例的音乐播放***1包括通信网络12、音乐播放装置20、图像搜索服务器30以及图像服务器40A、40B、...。
通信网络12是用于从连接到通信网络12的装置发送来的信息的有线或无线传输通道。例如，通信网络12可以包括公共线路网，诸如因特网、电话线路网、或者卫星通信网络、包括以太网(Ethernet，注册商标)的各种LAN(局域网)、WAN(广域网)等。另外，通信网络12可以包括专用线路网，诸如IP-VAN(Internet Protocol-Virtual Private Network，因特网协议虚拟专用网络)。在本公开中，经由通信网络12连接了音乐播放装置20、图像搜索服务器30以及图像服务器40A、40B...。
图像服务器40是用于存储图像并同时将这些图像与词/短语相关联的网络节点。尽管本公开描述了图像主要是静止图像的示例，但是图像还可以是运动图像。
图像搜索服务器30响应于来自音乐播放装置20的请求而从图像服务器40搜索图像，并且将搜索结果发送到音乐播放装置20。更具体来说，图像搜索服务器30在接收到来自音乐播放装置20的至少一个搜索词/短语时，从图像服务器40中搜索与接收到的搜索词/短语匹配的图像，并且将搜索结果发送到音乐播放装置20。
音乐播放装置20具有音乐播放功能。另外，根据本公开的音乐播放装置20可以通过使用包括在音乐的歌词中的词/短语进行搜索来获取图像，并且在该音乐播放期间显示所获取的图像。将在“2.每个实施例的描述”中详细描述这种音乐播放装置20。
尽管图1示出便携式电话(智能电话)作为音乐播放装置20的示例，但是音乐播放装置20不限于便携式电话。例如，音乐播放装置20可以是信息处理装置，如PC(个人计算机)、家用视频处理装置(例如，DVD录像机或者盒式录像机)、PDA(个人数字助理)、家用游戏机、家用电器、PHS(个人手持电话***)、便携式音乐播放装置、便携式视频处理装置、便携式游戏机或者卡拉0k机。
(音乐播放装置的硬件配置)
下面将参照图2描述根据本公开的音乐播放装置20的硬件配置。图2是示出根据本公开的音乐播放装置20的硬件配置的说明图。如图2中所示，音乐播放装置20包括CPU(中央处理单元)201、ROM(只读存储器)202、RAM(随机访问存储器)203以及主机总线204。另外，音乐播放装置20包括桥205、外部总线206、接口207、输入装置208、输出装置210、存储单元(HDD)211、驱动器212以及通信装置215。
CPU 201起到算术处理单元和控制单元的作用，并且根据各种程序来控制音乐播放装置20内的全面操作。CPU 201可以是微处理器。ROM 202存储由CPU 201使用的程序、操作参数等。RAM 203临时存储在CPU 201的执行中使用的程序、在执行期间适当改变的参数等。这些单元经由包括CPU总线等的主机总线204相互连接。
主机总线204经由桥205连接到诸如PCI(***部件互联/接口)总线的外部总线206。注意，主机总线204、桥205和外部总线206并不一定需要分开布置，并且可以将这些部件的功能集成到单个总线中。
输入装置208包括：用户输入信息用的输入装置，如鼠标、键盘、触摸面板、按钮、麦克风、开关或控制杆；用于基于用户输入来产生输入信号并将该信号输出到CPU 201的输入控制电路等。音乐播放装置20的用户可以通过操作输入装置208来向音乐播放装置20输入各种数据，或者指示音乐播放装置20进行处理操作。
输出装置210包括显示装置，该显示装置例如诸如CRT(阴极射线管)显示装置、液晶显示装置(LCD)、OLED(有机发光二极管)装置或灯。此外，输出装置210包括音频输出装置，如扬声器或头戴式耳机。输出装置210例如输出所播放的内容。特别地，显示装置通过文本或图像来显示诸如所播放的视频数据的各种信息。同时，音频输出装置将所播放的音频数据等转换为音频并且输出该音频。
存储装置211是被构造为根据本实施例的音乐播放装置20的存储单元的示例的、用于存储数据的装置。存储装置211可以包括存储介质、用于在该存储介质上记录数据的记录装置、用于从该存储介质读取数据的读取装置、用于删除该存储介质上所记录的数据的删除装置等。存储装置211例如包括HDD(硬盘驱动器)。存储装置211存储用于驱动硬盘并且由CPU 201执行的程序和各种数据。
驱动器212是存储装置的读取器/写入器，并被并入在音乐播放装置20中或外部附接到音乐播放装置20。驱动器212读取记录在所安装的诸如磁盘、光盘、磁光盘或者半导体存储器的可移动存储介质24上的信息，并且将该信息输出到RAM 203。驱动器212还将信息写入到可移动存储介质24。
通信装置215例如是用于连接到通信网络12的、包括通信装置等的通信接口。通信装置215可以是以下中的任意一个：支持无线LAN(局域网)的通信装置、支持LTE(Long Term Evolution，长期演进)的通信装置或者进行有线通信的有线通信装置。
《2.每个实施例的描述》
前面描述了根据本公开的音乐播放***1的配置。接下来，将顺序地详细描述本公开的每个实施例。
<2-1.第一实施例>
根据本公开第一实施例的音乐播放装置20-1可以分析音乐的歌词，提取歌词中重要性高的词/短语，使用所提取的词/短语来获取图像，并在该音乐播放期间显示所获取的图像。根据这种配置，用户不仅能够在听觉上感受该音乐，而且还能够在视觉上感受根据该音乐的歌词的图像。因此，用户能够更深地享受该音乐。下面将参照图3至图9详细描述根据本公开第一实施例的这种音乐播放装置20-1。
(根据第一实施例的音乐播放装置的配置)
图3是示出根据本公开第一实施例的音乐播放装置20-1的配置的功能框图。如图3中所示，根据第一实施例的音乐播放装置20-1包括歌词存储单元216、音乐存储单元220、图像存储单元224、分析单元230、通信单元264、搜索单元268、音乐播放单元272、音乐输出单元276、显示控制单元280和图像显示单元284。
歌词存储单元216存储音乐存储单元220中所存储的音乐的歌词。音乐存储单元220存储用于播放音乐的数据。图像存储单元224存储图像，同时将这些图像与词/短语相关联。
歌词存储单元216、音乐存储单元220和图像存储单元224中的每一个都可以是诸如非易失性存储器、磁盘、光盘或MO(磁光)盘的存储介质。非易失性存储器的示例包括EEPROM(电可擦除可编程只读存储器)和EPROM(可擦除可编程ROM)。磁盘的示例包括硬盘和盘形磁体。光盘的示例包括CD(压缩盘)、DVD-R(可记录式数字多用途盘)和BD(蓝光盘(Blu-Ray Disc，注册商标))。
分析单元230分析音乐存储单元220中所存储的音乐以及歌词存储单元216中所存储的与该音乐有关的歌词，然后提取用于搜索图像的搜索词/短语。对于这种配置，分析单元230包括歌词获取单元231、语素分析单元232、音乐分析单元233、重要性确定单元236和词/短语提取单元238。注意，分析单元230可以以歌词的每个句子、每行、每个旋律部分等为单位执行以下分析。
歌词获取单元231从歌词存储单元216获取目标音乐的歌词。注意，目标音乐可以是以下中的任何一个：现在正在播放的音乐、用户指定的音乐、或者存储在音乐存储单元220中并且还没有播放的音乐。
语素分析单元232分析歌词获取单元231所获取的歌词的语素。例如，当歌词获取单元231获取歌词“I was born in the deep mountain ofKyoto...”时，语素分析单元232按下述那样来分析构成该歌词的词/短语(语素)以及每个词/短语的词类。
“I(人称代词)|was(动词)born(动词)|in(介词)|the(冠词)|deep(形容词)|mountain(普通名词)|of(介词)|Kyoto(专有名词)...”
同时，音乐分析单元233对该音乐中出现了要分析的歌词的那一部分的旋律部分(例如，独唱、过渡乐节和合唱)、节拍(节奏)、音量等进行分析。
另外，重要性确定单元236确定由语素分析单元232获得的每个词/短语的重要性。例如，重要性确定单元236根据以下准则中的至少一个来确定每个词/短语的重要性。
(1)基于词类的确定
重要性确定单元236可以基于每个词/短语的词类确定重要性。
示例：专有名词→×3，普通名词→×2，其它名词→×1
(2)基于专业词典/表的确定
重要性确定单元236可以将包括在专业词典/表中的词/短语的重要性设置为高。
示例：存在于姓氏词典、地名词典或美食词典中的词/短语的重要性可以被设置为×3。
(3)基于出现次数的确定
重要性确定单元236可以基于词/短语在要分析的歌词部分中的出现次数来确定重要性。
示例：如果词/短语出现两次→×2
(4)基于专辑名称或歌曲名称的确定
重要性确定单元236可以将含义与目标音乐的专辑名称或歌曲名称的含义接近的词/短语的重要性设置为高。
示例：如果专辑名称是“夏天”，则词“海”、“太阳”等的重要性可以被设置为×2。
(5)基于类型的确定
重要性确定单元236可以将含义与目标音乐的类型的含义接近的词/短语的重要性设置为高。
示例：当类型是“重金属”时，“尖叫”的重要性可以被设置为×2。
(6)基于播放日期/时间和播放地点的确定
重要性确定单元236可以基于播放日期/时间和播放地点来确定词/短语的重要性。注意，例如可以使用诸如GPS的位置估计技术来估计播放地点。
示例：当播放日期/时间是“早晨”时，可以将词“早晨”和“黎明”的重要性设置为×2。
当播放地点是“Kyoto”时，可以将词“Kyoto”的重要性设置为×2。
(7)基于用户偏好信息的确定
重要性确定单元236可以基于用户偏好信息设置词/短语的重要性。注意，可以从用户的音乐播放历史、曾被用于从通信网络12搜索信息的词/短语的历史等获取用户偏好信息。
示例：当用户偏好是“摩托车”时，可以将词“引擎”和“刹车”的重要性设置为×2。
(8)基于旋律部分的确定
重要性确定单元236可以根据要分析的歌词部分的旋律部分来调整重要性。
示例：可以将重要性调整为使得满足合唱＞过渡乐节＞独唱。
(9)基于节拍的确定
重要性确定单元236可以根据要分析的歌词部分的节拍来调整重要性。
示例：可以将快节拍部分的重要性设置为高。
(10)基于音量的确定
重要性确定单元236可以根据要分析的歌词部分的音量来调整重要性。
示例：可以将大音量部分的重要性设置为高。
例如，重要性确定单元236基于上述准则(1)至(3)确定歌词“I wasborn in the deep mountain of Kyoto...”中的词“Kyoto”的重要性为“9”，这是因为，“Kyoto”是专有名词，存在于地名词典中，并且只出现一次。同时，重要性确定单元236确定词“deep mountain”的重要性为“2”，这是因为，“deep mountain”是普通名词，不存在于专业词典中，并且只出现一次。
词/短语提取单元238基于由重要性确定单元236确定的每个词/短语的重要性，从歌词中所包括的词/短语中提取搜索词/短语。例如，词/短语提取单元238可以提取重要性最高的词“Kyoto”作为搜索词/短语，或者提取重要性最高的词“Kyoto”和重要性第二高的短语“deep mountain”两者。
注意，词/短语提取单元238可以基于要在要分析的歌词部分的播放期间显示的图像的数目来确定要提取的词/短语的数目。例如，当在要分析的歌词部分的播放期间只显示单个图像时，词/短语提取单元238可以只提取重要性最高的词/短语作为搜索词/短语。同时，当在要分析的歌词部分的播放期间显示n个图像时，词/短语提取单元238可以提取重要性最高的词/短语到重要性第n高的词/短语作为搜索词/短语。可替选地，当在要分析的歌词部分的播放期间显示n个图像时，词/短语提取单元238可以提取具有较高重要性的至少一个词/短语作为搜索词/短语。在此情况下，基于所提取的搜索词/短语中的每一个来检索总共n个图像。
通信单元264和搜索单元268具有基于由词/短语提取单元238提取的搜索词/短语来获取图像的获取单元的功能。注意，可以根据要分析的歌词部分的播放时间来确定由通信单元264和搜索单元268获取的图像的数目，使得用户能够充分识别每个图像。例如，要分析的歌词部分的播放时间越长，所获取的图像的数目被确定为越高。
通信单元264是用于与通信网络12通信的接口。通信单元264例如将分析单元230所提取的词/短语(例如，“Kyoto”)作为搜索请求发送到图像搜索服务器30，并且从图像搜索服务器30接收由图像搜索服务器30使用该搜索词/短语检索到的图像。
搜索单元268从音乐播放装置20-1的图像存储单元224搜索与分析单元230所提取的搜索词/短语匹配的图像。注意，可以由通信单元264或搜索单元268中的一个或者由这两者获取该图像。另外，通信单元264可以在开始播放该音乐之前获取该图像，并且图像存储单元224可以存储由通信单元264获取的图像，同时将该图像与该音乐相关联。在此情况下，搜索单元268可以在该音乐播放期间从图像存储单元224获取与该音乐相关联的图像。注意，当从通信单元264获取图像开始经过了给定时间段时，或者当已用尽了针对给定音乐获取的所有图像以进行显示时，通信单元264可以再次获取图像以更新图像存储单元224中的图像。可替选地，如果在音乐播放期间，与该音乐相关联的图像没有存储在图像存储单元224中，则通信单元264可以在该音乐播放期间实时从网络获取图像。
音乐播放单元272从音乐存储单元220读取要分析的音乐的播放数据，并且播放该数据。例如，音乐播放单元272对播放数据进行解码、D/A转换等，并且将播放信号提供给音乐输出单元276。
音乐输出单元276将从音乐播放单元272提供的播放信号输出为音频。音乐输出单元276可以是外部的音乐输出装置，如扬声器、耳机或头戴式耳机。
显示控制单元280使图像显示单元284根据音乐播放单元272播放的音乐的进展来显示已由通信单元264或搜索单元268基于搜索词/短语而获取的图像。在此，显示控制单元280能够以下面示例性示出的各种模式对基于搜索词/短语而获取的图像进行显示控制。注意，可以单独地执行或者在适当时相结合地执行下面描述的每个显示控制。
--第一显示控制--
显示控制单元280可以在分析单元230提取出单个搜索词/短语并且通信单元264或搜索单元268使用该单个搜索词/短语检索到单个图像时，使图像显示单元284在音乐中出现了该搜索词/短语的那个部分的播放期间显示检索到的图像。例如，当分析单元230提取出词“Kyoto”作为搜索词并且通信单元264或搜索单元268使用搜索词“Kyoto”检索到单个图像时，显示控制单元280使图像显示单元284显示图4中所示的画面。
图4是示出根据第一显示控制而显示的画面的具体示例的说明图。如图4中所示，显示控制单元280在音乐中出现歌词“I was born in the deepmountain of Kyoto...”的那个部分的播放期间将基于搜索词“Kyoto”检索到的图像P1与歌词一起显示在图像显示单元284上。注意，显示控制单元280不一定需要在图像显示单元284上显示歌词。
更具体来说，显示控制单元280可以根据搜索词/短语的重要性来控制图像的显示尺寸。例如，显示控制单元280可以在搜索词/短语的重要性较高时增加图像的显示尺寸。在此，搜索词/短语的重要性还依赖于旋律部分、节拍、音量等。因此，基于旋律部分、节奏、音量等控制图像的显示尺寸。
注意，显示控制单元280可以在与音乐中出现该搜索词/短语的那个部分不同的位置使图像显示单元284显示使用搜索词/短语获取的图像。例如，由于对于歌曲作者来说音乐中的合唱部分的歌词可能被视作该音乐最令人难忘、最有代表性的部分，因此显示控制单元280可以在整个音乐的播放期间都使图像显示单元284显示使用合唱部分中所包括的搜索词/短语而获取的图像。另外，为了获得铺垫效果，显示控制单元280可以在给定旋律部分的播放期间使图像显示单元284显示使用下一旋律部分中所包括的搜索词/短语而获取的图像。
--第二显示控制--
显示控制单元280可以在分析单元230提取出单个搜索词/短语并且通信单元264或搜索单元268使用该单个搜索词/短语检索到多个图像时，使图像显示单元284在音乐中出现该搜索词/短语的那个部分的播放期间顺序显示检索到的多个图像。例如，当分析单元239提取出词“Kyoto”作为搜索词，并且通信单元264或搜索单元268基于搜索词“Kyoto”检索到两个图像时，显示控制单元280使图像显示单元284显示图5中所示的画面。
图5是示出根据第二显示控制而显示的画面的具体示例的说明图。如图5中所示，显示控制单元280在开始播放音乐中出现歌词“I was born inthe deep mountain of Kyoto...”的那部分时，首先使图像显示单元284显示基于搜索词“Kyoto”检索到的图像之一“P1”。然后，随着音乐中出现歌词“I was born in the deep mountain of Kyoto...”的那部分的播放进展，显示控制单元280将图像显示单元284的显示切换到基于搜索词“Kyoto”检索到的另一图像P2。
注意，显示控制单元280还可以通过淡入或淡出而在图像之间切换。例如，显示控制单元280可以在将图像从图像P1切换到图像P2时，逐渐减小图像P1的α混合值(透明度)并逐渐增加图像P2的α混合值。
--第三显示控制--
显示控制单元280可以在分析单元230提取出多个搜索词/短语并且通信单元264或者搜索单元268使用各个搜索词/短语检索到图像时，使图像显示单元284在该音乐的对应部分的播放期间顺序显示使用各搜索词/短语检索到的图像。例如，当分析单元230提取出词“Kyoto”和“deepmountain”作为搜索词/短语并且通信单元264或者搜索单元268基于各个搜索词/短语“Kyoto”和“deep mountain”检索到图像时，显示控制单元280使图像显示单元284显示图6中所示的显示画面。
图6是示出根据第三显示控制而显示的画面的具体示例的说明图。如图6中所示，显示控制单元280在开始播放音乐中出现歌词“I was born inthe deep mountain of Kyoto...”的那部分时，使图像显示单元284显示使用搜索词“Kyoto”检索到的图像P1。然后，随着音乐中出现歌词“I wasborn in the deep mountain of Kyoto...”的那部分的播放进展，显示控制单元280将图像显示单元284的显示切换到使用搜索短语“deep mountain”检索到的图像P3。
在此，搜索词“Kyoto”的重要性是“9”，而搜索短语“deep mountain”的重要性是“2”。因此，如图6中所示，进行控制使得使用搜索短语“deepmountain”检索到的图像P3的显示尺寸变得小于图像P1的显示尺寸。
--第四显示控制--
显示控制单元280可以向通信单元264或搜索单元268所检索到的图像添加根据音乐的拍子和节奏的运动(例如，图像的抖动、扩展/收缩或转动)。例如，当分析单元230提取出词“Kyoto”作为搜索词并且通信单元264或搜索单元268基于搜索词“Kyoto”检索到图像时，显示控制单元280进行图7中所示的显示控制。
图7是示出根据第四显示控制而显示的画面的具体示例的说明图。如图7中所示，显示控制单元280在音乐中出现歌词“I was born in the deepmountain of Kyoto...”的那部分的播放期间，在画面上将基于搜索词“Kyoto”检索到的图像P1上下摆动。
在此，显示控制单元280可以以对应于该音乐的节奏的强度来摆动图像P1。第四显示控制允许图像P1的显示模式反映音乐的氛围。
--第五显示控制--
显示控制单元280可以在通信单元264或者搜索单元268检索到多个图像时使图像显示单元284在音乐中出现搜索词/短语的那部分的播放期间在不同区域中同时显示所述多个图像。例如，当分析单元230提取出词/短语“Kyoto”和“deep mountain”作为搜索词/短语并且通信单元264或搜索单元268基于各个搜索词/短语“Kyoto”和“deep mountain”检索到图像时，显示控制单元280使图像显示单元284显示图8中所示的画面。
图8是示出根据第五显示控制而显示的画面的具体示例的说明图。如图8中所示，显示控制单元280在音乐中出现歌词“I was born in the deepmountain of Kyoto...”的那部分的播放期间，使图像显示单元284将基于各个搜索词/短语“Kyoto”和“deep mountain”检索到的图像P1和P3同时显示在不同区域中。在此，搜索词“Kyoto”的重要性是“9”，而搜索短语“deep mountain”的重要性是“2”。因此，如图8中所示，进行控制使得使用搜索短语“deep mountain”检索的图像P3的显示尺寸变得小于图像P1的显示尺寸。
尽管图8示出了使多个图像显示在图像显示单元284的不同区域中的示例，但是显示控制单元280还可以使图像显示单元284以重叠的方式显示多个图像，同时设置每个图像的透明度。在此情况下，显示控制单元280可以将使用重要性较低的搜索词/短语检索到的图像的透明度设置为较低。
上面描述了由显示控制单元280进行的图像的显示控制。注意，显示控制单元280可以处理曾在该音乐播放期间显示的图像，使得该图像将不会被连续使用、将在经过了给定时间间隔后被使用、或者将根本不会被使用。
(根据第一实施例的音乐播放装置的操作)
接下来，将参照图9描述根据本公开第一实施例的音乐播放装置20-1的操作。
图9是示出根据第一实施例的音乐播放装置20-1的操作的流程图。如图9中所示，音乐播放装置20-1的语素分析单元232首先分析目标音乐的至少一部分的歌词(S304)。另外，音乐分析单元233分析目标音乐的旋律部分、节拍等(S308)。
之后，重要性确定单元236基于语素分析单元232和音乐分析单元233进行的分析的结果确定歌词中所包括的每个词/短语的重要性(S312)。接下来，词/短语提取单元238提取重要性高的词/短语作为搜索词/短语(S316)。
然后，通信单元264与图像搜索服务器30合作地进行操作，或者搜索单元268使用由词/短语提取单元238提取的搜索词/短语来获取图像(S320)。此后，显示控制单元280使图像显示单元284根据正在播放的音乐的进展来显示由通信单元264或者搜索单元268获取的图像(S324)。
如上所述，根据本公开的第一实施例，可以分析音乐的歌词，提取歌词中重要性高的词/短语，使用所提取的词/短语来获取图像，并在该音乐播放期间显示所获取的图像。根据该配置，用户不仅能够在听觉上感受音乐，而且还能够在视觉上感受根据该音乐的歌词的图像。这样，用户可以更深地享受音乐。
<2-2.第二实施例>
接下来，将描述本公开的第二实施例。根据本公开第二实施例的音乐播放装置20-2可以分析音乐的歌词，提取歌词中重要性高的词/短语，提取与重要性高的词/短语有关的词/短语，使用所提取的多个词/短语来获取图像，并且在该音乐播放期间显示所获取的图像。下面将参照图10至图13详细描述根据本公开第二实施例的音乐播放装置20-2。
(根据第二实施例的音乐播放装置的配置)
图10是示出根据本公开第二实施例的音乐播放装置20-2的配置的功能框图。如图10中所示，根据第二实施例的音乐播放装置20-2包括歌词存储单元216、音乐存储单元220、图像存储单元224、分析单元240、通信单元264、搜索单元268、音乐播放单元272、音乐输出单元276、显示控制单元280和图像显示单元284。音乐播放装置20-2的上述配置包括与根据第一实施例的音乐播放装置20-2的配置相同的配置。因此，下面将主要描述与根据第一实施例的音乐播放装置20-1的配置不同的配置。
分析单元240分析音乐存储单元220中所存储的音乐以及歌词存储单元216中所存储的与该音乐有关的歌词，并且提取用于搜索图像的搜索词/短语组。对于这种配置，分析单元240包括歌词获取单元241、语素分析单元242、音乐分析单元243、重要性确定单元246、修饰分析单元247和词/短语提取单元238。注意，分析单元240可以以歌词的每个句子、每行、每个旋律部分等为单位执行以下分析。
歌词获取单元241从歌词存储单元216获取目标音乐的歌词。注意，目标音乐可以是以下中的任何一个：现在正在播放的音乐、用户指定的音乐、或者存储在音乐存储单元220中并且还没有播放的音乐。
语素分析单元242分析由歌词获取单元241获取的歌词的语素。例如，当歌词获取单元241获取歌词“a small black dog ran to me...”时，语素分析单元242如图11中的(1)中所示那样分析构成歌词的词/短语(语素)以及每个词/短语的词类。
图11是示出根据第二实施例的歌词分析的结果的说明图。如图11中的(1)中所示，歌词“a small black dog ran to me...”被分解为“A(冠词)|small(形容词)|black(形容词)|dog(普通名词)|ran(动词)|to(介词)|me(人称代词)...”。
同时，音乐分析单元243分析音乐中出现要分析的歌词的那个部分的旋律部分(例如，独唱、过渡乐节、合唱)、节拍(节奏)、音量等。
另外，重要性确定单元246确定由语素分析单元242获得的每个词/短语的重要性。重要性确定单元246例如可以根据第一实施例中描述的准则(1)至(10)中的至少一个来确定每个词/短语的重要性。
在此情况下，重要性确定单元246基于准则(1)至(3)确定歌词“asmall black dog ran to me...”中的词“dog”的重要性为“2”，这是因为，“dog”是普通名词，不存在于专业词典中，并且只出现一次。
修饰分析单元247分析语素分析单元242所获得的每个词/短语的修饰。通过该修饰分析，例如发现如图11中的(2)中所示，在歌词“a smallblack dog ran to me...”中，词“dog”被词“black”和“small”修饰。
词/短语提取单元248提取重要性被重要性确定单元246确定为最高的词/短语以及修饰重要性最高的词/短语的词/短语。例如，在歌词“a smallblack dog ran to me...”中，重要性最高的词是“dog”，并且修饰词“dog”的词/短语是“black”和“small”。因此，词/短语提取单元248提取词“dog”、“black”和“small”作为一组搜索词/短语(搜索词/短语组)。
注意，词/短语提取单元248可以基于要在要分析的歌词部分的播放期间显示的图像的数目来确定提取的搜索词/短语组的数目。例如，词/短语提取单元248可以在要分析的歌词部分的播放期间只显示一个图像时，只提取包括最重要的词/短语的搜索词/短语组。同时，词/短语提取单元248可以在要分析的歌词部分的播放期间显示n个图像时，提取包括最重要的词/短语的搜索词/短语组至包括第n重要的词/短语的搜索词/短语组。另外，词/短语提取单元248可以在要分析的歌词部分的播放期间显示n个图像时，提取至少一个搜索词/短语组，该搜索词/短语组包括重要性较高的至少一个词/短语和修饰这个重要性较高的词/短语的词/短语的组合。在此情况下，基于所提取的搜索词/短语组中的每一个来搜索图像，使得检索到总共n个图像。
像第一实施例中那样，通信单元264和搜索单元268使用由分析单元240提取的搜索词/短语组获取图像。特别地，通信单元264和搜索单元268可以通过对构成搜索词/短语组的多个词/短语的“与”操作来获取图像。另外，如果可以指定搜索优先级，那么通信单元264和搜索单元268可以增加搜索词/短语组中被修饰的词/短语的优先级。
像第一实施例中那样，音乐播放单元272、音乐输出单元276、显示控制单元280和图像显示单元284进行操作，使得根据音乐的进展显示由通信单元264或搜索单元268获取的图像。例如，当使用包括词“dog”、“black”和“small”的搜索词/短语组获取图像时，图像显示单元284显示图12中所示的图像。
图12是示出根据第二实施例的图像显示的具体示例的说明图。如图12中所示，显示控制单元280在音乐中出现歌词“a small black dog ran tome...”的那个部分的播放期间，使图像显示单元284显示使用包括词“dog”、“black”和“small”的搜索词/短语组检索到的图像P4。
当词“dog”的重要性是相对低的水平“2”并且歌曲的节奏是慢节拍时，显示控制单元280可以使图像显示单元284以相对小的显示尺寸显示图像P4，同时根据第一实施例中描述的第一至第五显示控制中的任一个来波纹状地摆动图像P4。
(根据第二实施例的音乐播放装置的操作)
上面描述了根据第二实施例的音乐播放装置20-2的配置。接下来，将参照图13描述根据第二实施例的音乐播放装置20-2的操作。
图13是示出根据第二实施例的音乐播放装置20-2的操作的流程图。如图13中所示，首先，音乐播放装置20-2的语素分析单元242分析目标音乐的至少一部分的歌词(S404)。另外，音乐分析单元243分析目标音乐的旋律部分、节拍等(S408)。
此后，重要性确定单元246基于由语素分析单元242和音乐分析单元243进行的分析的结果，确定歌词中所包括的每个词/短语的重要性(S412)。另外，修饰分析单元247分析语素分析单元242所获得的每个词/短语的修饰(S416)。注意，可以在S412的处理之前进行S416的处理，或者可以并行地进行S416的处理和S412的处理。
接下来，词/短语提取单元248提取重要性高的词/短语以及修饰这个重要性高的词/短语的词/短语，作为搜索词/短语组(S420)。然后，通信单元264与图像搜索服务器30合作地操作，或者搜索单元268使用由词/短语提取单元248提取的搜索词/短语组获取图像(S424)。此后，显示控制单元280使图像显示单元284根据正在播放的音乐的进展来显示由通信单元264或者搜索单元268获取的图像(S428)。
如上所述，根据本公开第二实施例的音乐播放装置20-2可以分析音乐的歌词，提取歌词中重要性高的词/短语，提取修饰这个重要性高的词/短语的词/短语，使用所提取的多个词/短语获取图像，并且在该音乐播放期间显示所获取的图像。
<2-3.第三实施例>
接下来，将描述本公开的第三实施例。根据本公开第三实施例的音乐播放装置20-3可以分析音乐的歌词，分析构成歌词的主语和谓语，从主语中提取名词作为搜索词/短语，使用所提取的词/短语获取图像，并且在该音乐播放期间根据谓语来运动地显示所获取的图像。下面将参照图14至图17详细描述根据本公开第三实施例的音乐播放装置20-3。
图14是示出根据本公开第三实施例的音乐播放装置20-3的配置的功能框图。如图14中所示，根据第三实施例的音乐播放装置20-3包括歌词存储单元216、音乐存储单元220、图像存储单元224、分析单元250、通信单元264、搜索单元268、音乐播放单元272、音乐输出单元276、显示控制单元282和图像显示单元284。音乐播放装置20-3的上述配置包括与根据第一实施例的音乐播放装置20-1相同的配置。因此，下面将主要描述与根据第一实施例的音乐播放装置20-1的配置不同的配置。
分析单元250分析音乐存储单元220中所存储的音乐以及歌词存储单元216中所存储的与该音乐有关的歌词，并且提取用于搜索图像的搜索词/短语。对于这种配置，分析单元250包括歌词获取单元251、语素分析单元252、音乐分析单元253、修饰分析单元254、主语/谓语确定单元255、重要性确定单元256和词/短语提取单元258。注意，分析单元250可以以歌词中的每个句子、每行、每个旋律部分等为单位执行以下分析。
歌词获取单元251从歌词存储单元216获取目标音乐的歌词。注意，目标音乐可以是以下中的任何一个：现在正在播放的音乐、用户指定的音乐、或者存储在音乐存储单元220中并且还没有播放的音乐。
语素分析单元252分析歌词获取单元251所获取的歌词的语素。例如，当歌词获取单元251获取歌词“the sun exploded and Saturndisappeared...”时，语素分析单元252如图15中的(1)中所示那样分析构成该歌词的词/短语以及每个词/短语的词类。
图15是示出根据第三实施例的歌词分析的结果的说明图。如图15中(1)中所示，歌词“the sun exploded and Saturn disappeared...”被分解为“the(冠词)|sun(专有名词)|exploded(动词)|and(连词)|Saturn(专有名词)|disappeared...(动词)”。
同时，音乐分析单元253分析音乐中出现要分析的歌词的那个部分的旋律部分(例如，独唱、过渡乐节、合唱)、节拍(节奏)、音量等。
另外，修饰分析单元254分析语素分析单元252所获得的每个词/短语的修饰。通过该修饰分析，例如发现如图15中的(2)中所示，在歌词“the sun exploded and Saturn disappeared...”中，词“exploded”被词“sun”修饰。
主语/谓语确定单元255确定构成歌词的每个句子的主语和谓语。例如，主语/谓语确定单元255按下述那样确定简单句、并列句和复合句中每一个的主语和谓语。
·简单句：“The dog runs.”
主语＝“the dog”谓语＝“runs”
·并列句：“The dog runs and the cats cries.”
第一主语＝“the dog”第一谓语＝“runs”
第二主语＝“the cat”第二谓语＝“cries”
·复合句：“The cat follows the dog that is running.”
第一主语＝“the dog”第一谓语＝“is running”
第二主语＝“the cat”第二谓语＝“follows”
类似地，主语/谓语确定单元255按下述那样确定歌词“the sunexploded and Saturn disappeared...”的主语和谓语。注意，当如下面所述存在多对主语和谓语时，针对每一对主语和谓语进行如下处理。
第一主语＝“the sun”第一谓语＝“exploded”
第二主语＝“Saturn”第二谓语＝“disappeared”
重要性确定单元256确定构成主语/谓语确定单元255所确定的主语的每个词/短语的重要性。重要性确定单元256例如可以根据第一实施例中描述的准则(1)至(10)中的至少一个来确定每个词/短语的重要性。
在此情况下，重要性确定单元256确定构成主语的词“sun”的重要性是“3”，这是因为，“sun”是专有名词，不存在于专业词典中，并且只出现一次。
词/短语提取单元258提取重要性被重要性确定单元256确定为最高的那个词/短语。例如，词/短语提取单元258从构成歌词“the sun explodedand Saturn disappeared...”的第一主语中提取“sun”作为搜索词。
像第一实施例中那样，通信单元264和搜索单元268使用由分析单元250提取的搜索词/短语来获取图像。像第一实施例中那样，音乐播放单元272从音乐存储单元220中读取要分析的音乐的播放数据，并且音乐输出单元276将音乐播放单元272提供的播放信号输出为音频。
显示控制单元282使图像显示单元284根据主语/谓语确定单元255确定的谓语来运动地显示已由通信单元264或者搜索单元268基于搜索词/短语获取的图像。更具体来说，显示控制单元282可以准备一个使谓语与运动模式相关联的表，并且根据该表中与谓语相关联的运动模式来对图像进行显示控制。例如，当在该表中谓语“run”与运动模式“从一侧移动到另一侧”相关联并且谓语“explode”与运动模式“破裂”相关联时，显示控制单元282进行图16中所述的显示控制。
图16是示出根据第三实施例的图像显示的具体示例的说明图。如图16中所示，显示控制单元282在开始播放音乐中出现歌词“the sunexploded and Saturn disappeared...”的那个部分时，使图像显示单元284显示使用搜索词“sun”获取的图像P5。此后，显示控制单元282根据与谓语“explodes”相关联的运动模式使图像P5破裂(使该图像***成较小的部分并散落这些较小的部分)。
注意，当谓语是否定形式时，显示控制单元282可以例如通过在整个画面上显示×来进行显示控制，使得清楚地理解谓语是否定形式。另外，不仅可以使用主语和谓语而且还可以使用宾语来进行图像搜索和显示控制。另外，还可以通过分析歌词或音乐中所包括的词/短语来确定音乐的氛围，并且向图像添加与该音乐的氛围匹配的运动。
(根据第三实施例的音乐播放装置的操作)
上面已经描述了根据第三实施例的音乐播放装置20-3的配置。接下来，将参照图17描述根据第三实施例的音乐播放装置20-3的操作。
图17是示出根据第三实施例的音乐播放装置20-3的操作的流程图。如图17中所示，首先，音乐播放装置20-3的语素分析单元252分析目标音乐的至少一部分的歌词(S504)。然后，修饰分析单元254分析语素分析单元252所获得的每个词/短语的修饰(S508)。另外，音乐分析单元253分析目标音乐的旋律部分、节拍等(S512)。
接下来，主语/谓语确定单元255确定构成歌词的每个句子的主语和谓语(S516)，并且重要性确定单元256确定构成主语/谓语确定单元255所确定的主语的每个词/短语的重要性(S520)。
然后，通信单元264与图像搜索服务器30合作地操作，或者搜索单元268使用由词/短语提取单元258提取的搜索词/短语来获取图像(S528)。此后，显示控制单元280使图像显示单元284根据谓语来运动地显示由通信单元264或者搜索单元268获取的图像(S532)。
如上所述，根据本公开第三实施例的音乐播放装置20-3可以分析音乐的歌词，分析构成歌词的主语和谓语，从主语中提取名词作为搜索词/短语，使用所提取的词/短语获取图像，并且在该音乐播放期间根据谓语来运动地显示所获取的图像。
<2-4.第四实施例>
接下来，将描述本公开的第四实施例。在本公开的第四实施例中提出了一种方法，该方法包括：预先创建与音乐相关联的图像数据文件，并在播放该音乐的同时播放该图像数据文件。
图18是示出根据本公开的第四实施例的音乐播放装置20-4的配置的功能框图。如图18中所示，根据第四实施例的音乐播放装置20-4包括歌词存储单元216、音乐存储单元220、图像存储单元224、分析单元230、通信单元264、搜索单元268、音乐播放单元272、音乐输出单元276、显示控制单元280、图像显示单元284和数据创建单元288。音乐播放装置20-4的上述配置具有与根据第一实施例的音乐播放装置20-1的配置相同的配置。因此，下面将主要描述与根据第一实施例的音乐播放装置20-1的配置不同的配置。
通信单元264在获取音乐数据之后并且在开始播放音乐数据之前使用由分析单元230提取的搜索词/短语从网络获取图像。在此，通信单元264使用位于歌词的每个句子、每行、每个旋律部分等的范围中的搜索词/短语来获取与每个范围相对应的图像。
数据创建单元288基于由通信单元264获取的图像来创建运动图像数据(例如，诸如MPEG的图像数据文件)，在运动图像数据中，每个图像在音乐的对应范围中的播放时刻出现。注意，每个图像可以受到第一至第三实施例中描述的显示控制。另外，数据创建单元288可以创建包括音乐数据的运动图像数据。此外，数据创建单元288可以针对单首音乐创建多个模式的运动图像数据。
尽管上面描述了图像数据文件是运动图像数据的示例，但是本公开不限于此。例如，图像数据文件可以是通过将通信单元264获取的图像与目标音乐以及在该音乐中显示该图像的时刻相关联而获得的数据文件。
如上所述由数据创建单元288创建的运动图像数据被存储在图像存储单元224中。
此后，当播放该音乐时，搜索单元268从图像存储单元224搜索与该音乐相对应的运动图像数据，并且显示控制单元280播放由搜索单元268检索到的运动图像数据并使图像显示单元284显示播放画面。注意，当该运动图像数据不包括音乐数据时，显示控制单元280根据音乐播放速度来改变该运动图像数据的播放速度。
当从图像存储单元224检索到的图像数据文件是通过将图像与目标音乐以及在该音乐中显示该图像的时刻相关联而获得的数据文件时，显示控制单元280可以根据包括在该数据文件中的每个图像的显示时刻来控制图像显示。
如上所述，根据本公开第四实施例的音乐播放装置20-4还具有用于创建图像数据文件的数据创建装置的功能。因此，音乐播放装置20-4可以在音乐播放期间使用预先创建的图像数据文件来显示图像。
(补充)
尽管描述了将图像数据文件创建功能安装在音乐播放装置20-4上的示例，但是图像数据文件创建功能还可以安装在网络侧的服务器上。在此情况下，音乐播放装置20-4可以通过从服务器获取图像数据文件来根据音乐显示图像。
另外，搜索单元268可以在音乐播放期间，选择性地搜索以前从未使用过的图像数据文件(运动图像)。另外，当从通信单元264获取图像开始经过了给定时间段时，或者当已经用尽针对给定音乐创建的所有图像数据文件以进行显示时，通信单元264可以再次获取图像以更新图像存储单元224中的图像。可替选地，如果在音乐播放期间，与该音乐相关联的图像数据文件没有存储在图像存储单元224中，那么通信单元264可以在该音乐播放期间实时地从网络获取图像。
尽管上面已经描述了在播放音乐之前创建图像数据文件的示例，但是数据创建单元288可以在音乐播放期间使用由显示控制单元280创建的显示来创建图像数据文件。
《3.结论》
如上所述，根据本公开第一至第四实施例，用户不仅可以在听觉上感受音乐，而且还可以在视觉上感受根据该音乐的歌词的图像。因此，用户可以更深地享受音乐。
尽管已参照附图详细描述了本公开的优选实施例，但是本公开不限于此。对于本领域技术人员而言，显然可以进行各种修改或变更，只要这些修改或变更处于所附权利要求或者其等同的技术范围内即可。应该理解，这种修改或变更也在本公开的技术范围内。
例如，本说明中的音乐播放装置20的处理中的各步骤不一定需要根据流程图中描述的顺序来按照时间次序的顺序进行处理。例如，音乐播放装置20的处理中的各步骤可以按照不同于流程图中描述的顺序进行，或者并行地处理。
还可以创建计算机程序，该计算机程序使音乐播放装置20中所并入的硬件(如CPU 201、ROM 202和RAM 203)执行与音乐播放装置20的上述配置中的每一个相等同的功能。另外，还提供存储有该计算机程序的存储介质。
另外，还可以将本技术配置如下。
(1).一种音乐播放装置，包括：
播放单元，被配置为播放音乐；
分析单元，被配置为分析所述音乐的歌词并提取所述歌词中所包括的词或短语；
获取单元，被配置为使用所述分析单元所提取的词或短语来获取图像；以及
显示控制单元，被配置为在所述音乐的播放期间，使显示装置显示所述获取单元所获取的图像。
(2).根据(1)所述的音乐播放装置，其中
所述分析单元分析所述音乐的一部分的歌词，并且
所述显示控制单元在所述音乐的该部分的播放期间，使所述显示装置显示由所述获取单元使用从所述音乐的该部分的歌词中提取的词或短语而获取的图像。
(3).根据(1)或(2)所述的音乐播放装置，其中，所述分析单元确定所述歌词中所包括的每个词或短语的重要性，并基于每个词或短语的重要性来提取至少一个词或短语。
(4).根据(3)所述的音乐播放装置，其中，所述分析单元基于以下中的至少一个来确定每个词或短语的重要性：每个词或短语的词类；所述音乐的该部分所属的旋律部分；音量；或节奏。
(5).根据(3)或(4)所述的音乐播放装置，其中，所述显示控制单元根据被用于获取所述图像的词或短语的重要性来控制所述图像的显示尺寸。
(6).根据(1)至(5)中任意一项所述的音乐播放装置，其中，所述显示控制单元根据所述音乐的节奏来控制所述图像的运动。
(7).根据(1)至(6)中任意一项所述的音乐播放装置，其中
所述获取单元使用由所述分析单元提取的至少一个词或短语来获取一个或多个图像，并且
所述显示控制单元使所述显示装置在所述音乐的该部分的播放期间显示由所述获取单元获取的所述一个或多个图像。
(8).根据(1)至(7)中任意一项所述的音乐播放装置，其中，所述获取单元获取如下数目的图像：该数目对应于播放所述音乐的该部分所需的时间。
(9).根据(8)所述的音乐播放装置，其中，所述显示控制单元使所述显示装置顺序地显示由所述获取单元获取的所述一个或多个图像。
(10).根据(8)所述的音乐播放装置，其中，所述显示控制单元使所述获取单元获取的所述一个或多个图像同时显示在所述显示装置的显示画面的不同区域中。
(11).根据(8)所述的音乐播放装置，其中，所述显示控制单元使所述获取单元获取的所述一个或多个图像显示在所述显示装置的显示屏幕的重叠区域中，同时设置所述一个或多个图像的透明度。
(12).根据(11)所述的音乐播放装置，其中，所述显示控制单元根据被用于获取所述一个或多个图像的词或短语的重要性来控制所述一个或多个图像中的每一个的透明度。
(13).根据(3)至(12)中任意一项所述的音乐播放装置，其中，所述分析单元基于每个词或短语的重要性来提取单个词或短语，并进一步提取与所提取的单个词或短语有关的词或短语。
(14).根据(13)所述的音乐播放装置，其中，所述获取单元通过对所述分析单元所提取的多个词或短语的“与”操作来搜索图像。
(15).根据(3)所述的音乐播放装置，其中
所述分析单元分析所述音乐的该部分的歌词的主语和谓语，并从所述主语中提取词或短语，并且
所述显示控制单元使所述显示装置根据所述谓语来运动地显示由所述获取单元使用从所述主语中提取的词或短语而获取的图像。
(16).根据(1)至(15)中任意一项所述的音乐播放装置，还包括：
数据创建单元，被配置为基于由所述获取单元从网络获取的图像，创建与所述音乐相关联的图像数据文件；以及
存储单元，被配置为存储所述数据创建单元所创建的图像数据文件，其中
所述获取单元在所述音乐的播放期间，获取所述存储单元中所存储的与所述音乐相关联的图像数据文件。
(17).一种音乐播放方法，包括：
分析音乐的歌词并提取所述歌词中所包括的词或短语；
使用所提取的词或短语来获取图像；以及
使显示装置在所述音乐的播放期间显示所获取的图像。
(18).一种程序，该程序使计算机起到如下单元的作用：
播放单元，被配置为播放音乐；
分析单元，被配置为分析所述音乐的歌词并提取所述歌词中所包括的词或短语；
获取单元，被配置为使用所述分析单元所提取的词或短语来获取图像；以及
显示控制单元，被配置为在所述音乐的播放期间，使显示装置显示所述获取单元所获取的图像。
(19).一种数据创建装置，包括：
分析单元，被配置为分析音乐的歌词并提取所述歌词中所包括的词或短语；
获取单元，被配置为使用由所述分析单元提取的词或短语从网络获取图像；以及
数据创建单元，被配置为基于所述获取单元所获取的图像来创建与所述音乐相关联的图像数据文件。
本公开包含与2011年4月5日提交到日本专利局的日本优先权专利申请JP 2011-083961中所公开主题的相关的主题，该申请全部内容通过引用合并于此。

Claims (19)

1.一种音乐播放装置，包括：
播放单元，被配置为播放音乐；
分析单元，被配置为分析所述音乐的歌词并提取所述歌词中所包括的词或短语；
获取单元，被配置为使用所述分析单元所提取的词或短语来获取图像；以及
显示控制单元，被配置为在所述音乐的播放期间，使显示装置显示所述获取单元所获取的图像。
2.根据权利要求1所述的音乐播放装置，其中
所述分析单元分析所述音乐的一部分的歌词，并且
所述显示控制单元在所述音乐的该部分的播放期间，使所述显示装置显示由所述获取单元使用从所述音乐的该部分的歌词中提取的词或短语而获取的图像。
3.根据权利要求2所述的音乐播放装置，其中，所述分析单元确定所述歌词中所包括的每个词或短语的重要性，并基于每个词或短语的重要性来提取至少一个词或短语。
4.根据权利要求3所述的音乐播放装置，其中，所述分析单元基于以下中的至少一个来确定每个词或短语的重要性：每个词或短语的词类；所述音乐的该部分所属的旋律部分；音量；或节奏。
5.根据权利要求4所述的音乐播放装置，其中，所述显示控制单元根据被用于获取所述图像的词或短语的重要性来控制所述图像的显示尺寸。
6.根据权利要求5所述的音乐播放装置，其中，所述显示控制单元根据所述音乐的节奏来控制所述图像的运动。
7.根据权利要求6所述的音乐播放装置，其中
所述获取单元使用由所述分析单元提取的至少一个词或短语来获取一个或多个图像，并且
所述显示控制单元使所述显示装置在所述音乐的该部分的播放期间显示由所述获取单元获取的所述一个或多个图像。
8.根据权利要求7所述的音乐播放装置，其中，所述获取单元获取如下数目的图像：该数目对应于播放所述音乐的该部分所需的时间。
9.根据权利要求8所述的音乐播放装置，其中，所述显示控制单元使所述显示装置顺序地显示由所述获取单元获取的所述一个或多个图像。
10.根据权利要求8所述的音乐播放装置，其中，所述显示控制单元使所述获取单元获取的所述一个或多个图像同时显示在所述显示装置的显示画面的不同区域中。
11.根据权利要求8所述的音乐播放装置，其中，所述显示控制单元使所述获取单元获取的所述一个或多个图像显示在所述显示装置的显示屏幕的重叠区域中，同时设置所述一个或多个图像的透明度。
12.根据权利要求11所述的音乐播放装置，其中，所述显示控制单元根据被用于获取所述一个或多个图像的词或短语的重要性来控制所述一个或多个图像中的每一个的透明度。
13.根据权利要求3所述的音乐播放装置，其中，所述分析单元基于每个词或短语的重要性来提取单个词或短语，并进一步提取与所提取的单个词或短语有关的词或短语。
14.根据权利要求13所述的音乐播放装置，其中，所述获取单元通过对所述分析单元所提取的多个词或短语的“与”操作来搜索图像。
15.根据权利要求3所述的音乐播放装置，其中
所述分析单元分析所述音乐的该部分的歌词的主语和谓语，并从所述主语中提取词或短语，并且
所述显示控制单元使所述显示装置根据所述谓语来运动地显示由所述获取单元使用从所述主语中提取的词或短语而获取的图像。
16.根据权利要求1所述的音乐播放装置，还包括：
数据创建单元，被配置为基于由所述获取单元从网络获取的图像，创建与所述音乐相关联的图像数据文件；以及
存储单元，被配置为存储所述数据创建单元所创建的图像数据文件，其中
所述获取单元在所述音乐的播放期间，获取所述存储单元中所存储的与所述音乐相关联的图像数据文件。
17.一种音乐播放方法，包括：
分析音乐的歌词并提取所述歌词中所包括的词或短语；
使用所提取的词或短语来获取图像；以及
使显示装置在所述音乐的播放期间显示所获取的图像。
18.一种程序，该程序使计算机起到如下单元的作用：
播放单元，被配置为播放音乐；
分析单元，被配置为分析所述音乐的歌词并提取所述歌词中所包括的词或短语；
获取单元，被配置为使用所述分析单元所提取的词或短语来获取图像；以及
显示控制单元，被配置为在所述音乐的播放期间，使显示装置显示所述获取单元所获取的图像。
19.一种数据创建装置，包括：
分析单元，被配置为分析音乐的歌词并提取所述歌词中所包括的词或短语；
获取单元，被配置为使用由所述分析单元提取的词或短语从网络获取图像；以及
数据创建单元，被配置为基于所述获取单元所获取的图像来创建与所述音乐相关联的图像数据文件。
CN2012100889492A 2011-04-05 2012-03-29 音乐播放装置、音乐播放方法、程序及数据创建装置 Pending CN102737676A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011-083961 2011-04-05
JP2011083961A JP2012220582A (ja) 2011-04-05 2011-04-05 音楽再生装置、音楽再生方法、プログラム、およびデータ作成装置

Publications (1)

Publication Number Publication Date
CN102737676A true CN102737676A (zh) 2012-10-17

Family

ID=46966787

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2012100889492A Pending CN102737676A (zh) 2011-04-05 2012-03-29 音乐播放装置、音乐播放方法、程序及数据创建装置

Country Status (3)

Country Link
US (1) US20120259634A1 (zh)
JP (1) JP2012220582A (zh)
CN (1) CN102737676A (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102932993A (zh) * 2012-10-26 2013-02-13 浙江大学 手机远程控制的灯具及其控制方法
CN104142934A (zh) * 2013-05-07 2014-11-12 腾讯科技（深圳）有限公司 进行在线音频播放的方法、***及客户端
CN104583924A (zh) * 2014-08-26 2015-04-29 华为技术有限公司 一种处理媒体文件的方法和终端
CN108154889A (zh) * 2016-12-02 2018-06-12 上海博泰悦臻电子设备制造有限公司 一种音乐播放控制方法、***、播放器及一种调控***
CN109032492A (zh) * 2018-07-27 2018-12-18 腾讯音乐娱乐科技（深圳）有限公司 一种切歌的方法及装置
CN109802987A (zh) * 2018-09-11 2019-05-24 北京京东方技术开发有限公司 用于显示装置的内容推送方法、推送装置和显示设备
CN110268467A (zh) * 2017-02-07 2019-09-20 株式会社空涛达玛 显示控制***以及显示控制方法
CN110489573A (zh) * 2019-07-30 2019-11-22 维沃移动通信有限公司 界面显示方法及电子设备
CN112417183A (zh) * 2019-08-22 2021-02-26 北京峰趣互联网信息服务有限公司 音乐的播放方法、装置、电子设备及计算机可读存储介质

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5843104B2 (ja) * 2012-05-11 2016-01-13 ソニー株式会社 情報処理装置、情報処理方法、及び、プログラム
US10122983B1 (en) 2013-03-05 2018-11-06 Google Llc Creating a video for an audio file
JP6159989B2 (ja) * 2013-06-26 2017-07-12 Kddi株式会社 シナリオ生成システム、シナリオ生成方法およびシナリオ生成プログラム
JP6292981B2 (ja) * 2014-05-28 2018-03-14 株式会社エクシング カラオケ装置及びカラオケシステム
EP2963651A1 (en) * 2014-07-03 2016-01-06 Samsung Electronics Co., Ltd Method and device for playing multimedia
CN105224581B (zh) * 2014-07-03 2019-06-21 北京三星通信技术研究有限公司 在播放音乐时呈现图片的方法和装置
JP6486165B2 (ja) * 2015-03-27 2019-03-20 日本放送協会 候補キーワード評価装置及び候補キーワード評価プログラム
WO2018023234A1 (zh) * 2016-07-31 2018-02-08 杨洁 音乐与用户互动时的信息推送方法和音乐播放器
US10277834B2 (en) 2017-01-10 2019-04-30 International Business Machines Corporation Suggestion of visual effects based on detected sound patterns
US11508393B2 (en) * 2018-06-12 2022-11-22 Oscilloscape, LLC Controller for real-time visual display of music
CN111666445A (zh) * 2019-03-06 2020-09-15 深圳市冠旭电子股份有限公司 一种情景歌词的显示方法、装置及音箱设备
JP7308135B2 (ja) * 2019-11-27 2023-07-13 株式会社第一興商 カラオケシステム

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1092926A (zh) * 1993-03-12 1994-09-28 株式会社金星社 图像歌曲伴奏装置和图像显示方法
US20050200909A1 (en) * 2004-03-10 2005-09-15 Kim Yang-Moon Method of setting driver program of image processing device and image processing system with transparent function
US20090307207A1 (en) * 2008-06-09 2009-12-10 Murray Thomas J Creation of a multi-media presentation
US20110055213A1 (en) * 2009-08-28 2011-03-03 Kddi Corporation Query extracting apparatus, query extracting method and query extracting program

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001155466A (ja) * 1999-11-24 2001-06-08 Toshiba Corp 画像付音声情報を記録するシステム
JP4406815B2 (ja) * 2002-06-26 2010-02-03 ソニー株式会社 情報処理装置および方法、記録媒体、並びにプログラム
JP3892410B2 (ja) * 2003-04-21 2007-03-14 パイオニア株式会社 音楽データ選曲装置、音楽データ選曲方法、並びに、音楽データの選曲プログラムおよびそれを記録した情報記録媒体
US7475072B1 (en) * 2005-09-26 2009-01-06 Quintura, Inc. Context-based search visualization and context management using neural networks
KR20080043129A (ko) * 2006-11-13 2008-05-16 삼성전자주식회사 음악의 무드를 이용한 사진 추천 방법 및 그 시스템
KR100775585B1 (ko) * 2006-12-13 2007-11-15 삼성전자주식회사 문자 메시지에 대한 음악 추천 방법 및 그 시스템
US20100023485A1 (en) * 2008-07-25 2010-01-28 Hung-Yi Cheng Chu Method of generating audiovisual content through meta-data analysis
JP2011216071A (ja) * 2010-03-15 2011-10-27 Sony Corp 情報処理装置、情報処理方法及びプログラム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1092926A (zh) * 1993-03-12 1994-09-28 株式会社金星社 图像歌曲伴奏装置和图像显示方法
US20050200909A1 (en) * 2004-03-10 2005-09-15 Kim Yang-Moon Method of setting driver program of image processing device and image processing system with transparent function
US20090307207A1 (en) * 2008-06-09 2009-12-10 Murray Thomas J Creation of a multi-media presentation
US20110055213A1 (en) * 2009-08-28 2011-03-03 Kddi Corporation Query extracting apparatus, query extracting method and query extracting program

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102932993A (zh) * 2012-10-26 2013-02-13 浙江大学 手机远程控制的灯具及其控制方法
CN104142934A (zh) * 2013-05-07 2014-11-12 腾讯科技（深圳）有限公司 进行在线音频播放的方法、***及客户端
CN104142934B (zh) * 2013-05-07 2018-11-20 腾讯科技（深圳）有限公司 进行在线音频播放的方法、***及客户端
CN104583924A (zh) * 2014-08-26 2015-04-29 华为技术有限公司 一种处理媒体文件的方法和终端
CN104583924B (zh) * 2014-08-26 2018-02-02 华为技术有限公司 一种处理媒体文件的方法和终端
US10678427B2 (en) 2014-08-26 2020-06-09 Huawei Technologies Co., Ltd. Media file processing method and terminal
CN108154889A (zh) * 2016-12-02 2018-06-12 上海博泰悦臻电子设备制造有限公司 一种音乐播放控制方法、***、播放器及一种调控***
CN110268467A (zh) * 2017-02-07 2019-09-20 株式会社空涛达玛 显示控制***以及显示控制方法
CN110268467B (zh) * 2017-02-07 2022-11-01 株式会社空涛达玛 显示控制***以及显示控制方法
CN109032492A (zh) * 2018-07-27 2018-12-18 腾讯音乐娱乐科技（深圳）有限公司 一种切歌的方法及装置
CN109032492B (zh) * 2018-07-27 2020-09-15 腾讯音乐娱乐科技（深圳）有限公司 一种切歌的方法及装置
CN109802987A (zh) * 2018-09-11 2019-05-24 北京京东方技术开发有限公司 用于显示装置的内容推送方法、推送装置和显示设备
WO2020052324A1 (zh) * 2018-09-11 2020-03-19 京东方科技集团股份有限公司 用于显示装置的内容推送方法、推送装置和显示设备
US11410706B2 (en) 2018-09-11 2022-08-09 Beijing Boe Technology Development Co., Ltd. Content pushing method for display device, pushing device and display device
CN110489573A (zh) * 2019-07-30 2019-11-22 维沃移动通信有限公司 界面显示方法及电子设备
CN112417183A (zh) * 2019-08-22 2021-02-26 北京峰趣互联网信息服务有限公司 音乐的播放方法、装置、电子设备及计算机可读存储介质

Also Published As

Publication number Publication date
US20120259634A1 (en) 2012-10-11
JP2012220582A (ja) 2012-11-12

Similar Documents

Publication Publication Date Title
CN102737676A (zh) 音乐播放装置、音乐播放方法、程序及数据创建装置
US10885110B2 (en) Analyzing captured sound and seeking a match based on an acoustic fingerprint for temporal and geographic presentation and navigation of linked cultural, artistic, and historic content
KR101715971B1 (ko) 키워드 및 스트링 입력에 기초한 애니메이트된 미디어를 어셈블링하는 방법 및 시스템
US20110319160A1 (en) Systems and Methods for Creating and Delivering Skill-Enhancing Computer Applications
JP3974624B2 (ja) 表示装置
US11093544B2 (en) Analyzing captured sound and seeking a match for temporal and geographic presentation and navigation of linked cultural, artistic, and historic content
US20040175159A1 (en) Searchable DVD incorporating metadata
KR20070008238A (ko) 율동 기반 음악 동조화 장치 및 방법
CN102193903A (zh) 信息处理装置、信息处理方法以及程序
CN109614537A (zh) 用于生成视频的方法、装置、设备和存储介质
JP2019091014A (ja) マルチメディアを再生するための方法及び装置
CN106888154B (zh) 音乐分享方法及***
EP2442299B1 (en) Information processing apparatus, information processing method, and program
US11417315B2 (en) Information processing apparatus and information processing method and computer-readable storage medium
US20160048271A1 (en) Information processing device and information processing method
US20120271830A1 (en) Data processing device
JP2008186512A (ja) コンテンツ再生装置
KR20130015918A (ko) 학습자 및 문장의 수준을 고려한 어학 학습 장치 및 이를 이용한 학습 제공 방법
JP2008299411A (ja) マルチメディア再生機器
Roma et al. Freesound Radio: supporting music creation by exploration of a sound database
Cai et al. Design and implementation of karaoke system based on Android platform
JP7335175B2 (ja) カラオケ装置
US8251701B2 (en) Interactive language apparatus
JP2012165982A (ja) 運動支援装置、運動支援方法およびプログラム
Adeney The HarmonyGrid: music, space and performance in grid music systems

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20121017