CN107679068B - 多媒体文件的信息导入及显示方法、移动终端及存储设备 - Google Patents

Abstract

本发明公开了一种多媒体文件的信息导入及显示方法、移动终端及存储设备，涉及移动终端技术领域。本发明提供一种多媒体文件的信息导入方法，该导入方法包括获取多媒体文件的至少一图像；分析至少一图像，获取至少一图像中目标区域的坐标信息；将坐标信息与待导入的数据信息关联。本发明的方法能够在多媒体文件中***相关信息，以丰富内容，提高用户体验。

Description

多媒体文件的信息导入及显示方法、移动终端及存储设备

技术领域

本发明涉及移动终端技术领域，特别是涉及一种多媒体文件的信息导入及显示方法、移动终端及存储设备。

背景技术

在如今这个快节奏的社会中，越来越多的人使用多媒体文件来记录生活中的美好瞬间，然而现在的多媒体文件显示内容单一，并且缺乏互动性，用户在使用多媒体文件时无法及时获取到更多信息，用户体验不佳。

发明内容

本发明提供涉及一种媒体文件的信息导入及显示方法、移动终端及存储设备，以解决用户在使用多媒体文件时无法及时获取到更多信息的问题。

为解决上述技术问题，本发明采用的一个技术方案是：提供一种多媒体文件的信息导入方法，该导入方法包括获取多媒体文件的至少一图像；分析至少一图像，获取至少一图像中目标区域的坐标信息；将坐标信息与待导入的数据信息关联。

为解决上述技术问题，本发明采用的又一个技术方案是：提供一种多媒体文件的显示方法，该多媒体文件包括至少一个图像，至少一图像中包括关联有数据信息的目标区域；显示方法包括播放多媒体文件；接收对多媒体文件的指示指令；获取指示指令对应的一图像中的指定区域；判断指定区域是否与指定区域所在图像的目标区域有重合部分；若是，则显示目标区域关联的数据信息。

为解决上述技术问题，本发明采用的另一个技术方案是：提供一种移动终端，包括处理器及存储器，处理器耦接存储器；存储器用于存储程序数据，程序数据由处理器加载并执行，以实现上述方法中任一项所述的方法。

为解决上述技术问题，本发明实施例采用的再一个技术方案是：提供一种存储设备，该存储设备用于存储程序数据，程序数据能够被执行以实现上述移动终端的拍照方法的方法。

本发明的有益效果是：通过获取多媒体文件的至少一图像，然后分析至少一图像，获取至少一图像中目标区域的坐标信息，再将坐标信息与待导入的数据信息关联，能够在多媒体文件中添加数据信息，丰富了多媒体文件的内容，提高用户体验。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明一实施例一种多媒体文件的信息导入方法的流程示意图；

图2是本发明一实施例一种多媒体文件的显示方法的流程示意图；

图3是本发明存储设备一实施例的结构示意图；

图4是本发明移动终端一实施例的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本发明的一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明的描述中，“多个”的含义是至少两个，例如两个，三个等，除非另有明确具体的限定。此外，术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、***、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。

在本文中提及“实施例”意味着，结合实施例描述的特定特征、结构或特性可以包含在本发明的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例，也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是，本文所描述的实施例可以与其它实施例相结合。

本发明的方法应用于移动终端中，主要针对多媒体文件显示单一的情况，为了丰富多媒体文件的内容。具体来说，本发明提出了拓展多媒体文件信息的方法。

请参阅图1，图1是本发明一实施例一种多媒体文件的信息导入方法的流程示意图。在本实施例中，多媒体文件的信息导入方法可以包括以下步骤：

S11：获取多媒体文件的至少一图像。

多媒体文件一般包括声音、文字、图像等多媒体信息，例如，音频文件和影像文件，音频文件可以包括通过声音录入设备录制的原始声音的声音文件，还可以是一种音乐演奏指令序列，相当于乐谱的MIDI(Musical Instrument Digital Interface，乐器数字接口)文件，影像文件可以是图片文件，还可以是包含音频、视频信息的视频文件，在本实施例中，多媒体文件可以是视频文件也可以是图片文件。

在本步骤S11中，首先要获取多媒体文件的至少一图像。具体来说，当多媒体文件为图片文件时，图片文件可当作是一个图像，即获取图片文件的这一个图像；当多媒体文件为视频文件时，视频文件由多个图像构成，且每个图像都关联一个时间信息，即每个时间帧有一个图像，时间帧t可以是0.01秒、0.1秒、0.7秒、1秒、2秒、6秒等等，相应的多个图像的时间信息分别为t、2t、3t……，例如t为0.01秒时，图像1关联0.01秒、图像2关联0.02秒、图像3关联0.03秒等等。当多媒体文件为视频文件时，获取视频文件中的至少一个图像，可以是2个、5个、10个图像。由于本实施例用于在视频文件中导入相关信息，具体获取多少图像根据需要导入信息的图像决定。在本步骤S11中获取的至少一个图像后，进行下述步骤S12，确定图像中需要导入信息的目标区域。

S12：分析至少一图像，获取至少一图像中目标区域的坐标信息。

在本步骤S12中，对上述步骤S11获取的至少一个图像进行分析，并获取至少一图像中目标区域的坐标信息。

具体来说，多媒体文件的图像中可能包括多个目标区域，且每个目标区域对应一个坐标信息。因此本步骤S12中分析图像后获取到该图像中的所有目标区域的坐标信息。

坐标信息的获取过程是，对图像建立坐标轴，以得到图像中各个像素的坐标，继而根据目标区域中像素的坐标获得该目标区域的坐标信息。在此过程中，对于视频文件，为保证坐标信息的一致性，对视频文件中的每个图像建立的坐标轴均采用同一基准。其中，坐标信息可以是该目标区域中心像素的坐标值，也可以是该目标区域的坐标范围。

在本步骤S12中，获取至少一个图像中目标区域的坐标信息，即当多媒体文件为图片文件时，获取这一图像中目标区域的坐标信息，目标区域可以是一个，也可以是多个，例如图片文件为三个人的合照，三个人的头像各设定为一目标区域，即图片文件中包含三个目标区域，此时分析这一图像，获取这一图像中三个目标区域各自的坐标信息(623，342)、(689，450)、(752，426)。

当多媒体文件为视频文件时，获取至少一个图像中目标区域的坐标信息，同样的，目标区域可以是一个，也可以是多个，对应的坐标信息也可以是一个或多个，此时每一个图像关联一个时间信息，即该图像上的目标区域与目标区域对应的坐标信息关联同一时间信息，例如，视频文件为足球比赛某一球员进球的片段，此时分析视频文件中的三个图像，第一个、第二个图像均设定球员的全身为目标区域，第三个图像设定球员的头像为目标区域，此时第一个图像关联的时间信息为0.1秒、第二个图像关联的时间信息为0.2秒、第三个图像关联的时间信息为0.3秒，分别分析这三个图像并获取它们目标区域的坐标信息，第一个图像对应(789，456)、第二个图像对应(603，590)、第三个图像对应(457，804)。在本步骤S12中获取的坐标信息用于下述步骤S13中与数据信息进行关联。

S13：将坐标信息与待导入的数据信息关联。

在本步骤S13中，可以为每一个多媒体文件建立一个数据库，数据库中为待导入的数据信息，其中，数据信息可以是语音信息或文字信息，例如，一段语音信息、一个网址信息、一个文档信息等等，将数据库关联对应的多媒体文件。当对多媒体文件进行发送或接收操作时，也将与其对应的数据库也一并发送或接收；当对数据库进行删除操作时，不对多媒体文件进行操作。

在上述步骤S12中获取到的至少一图像中目标区域的坐标信息，在本步骤中将坐标信息与待导入的数据信息进行关联，还包括将坐标信息、与坐标信息对应图像关联的时间信息以及待导入的数据信息关联。具体来说，当多媒体文件为图片文件时，在一图像中将坐标信息与待导入的信息进行关联，例如，图片文件为并肩站立的三个人的合照时，三个人的头像各设定为一目标区域，三个目标区域各自的坐标信息(623，342)、(689，450)、(752，426)，待导入信息可以是三个人各自的姓名张三、李四、王五，则将坐标信息(623，342)关联张三、坐标信息(689，450)关联李四、坐标信息(752，426)关联王五，当导入信息为各自预先录制的一段语音信息时，则用同样的方法进行关联。

当多媒体文件为视频信息时，在至少一图像中将坐标信息、与坐标信息对应图像关联的时间信息以及待导入的数据信息关联，其中坐标信息可以为一个坐标值也可以是一个坐标值范围，例如，视频文件为足球比赛某一球员进球的片段，此时分析视频文件中的三个图像，第一个、第二个图像均设定该球员的全身为目标区域，第三个图像设定球员的头像为目标区域，此时第一个图像关联的时间信息为0.1秒且关联的坐标信息为(789，456)、第二个图像关联的时间信息为0.2秒且关联的坐标信息为(603，590)、第三个图像关联的时间信息为0.3秒且关联的坐标信息为(457，804)，待导入信息均为该球员的介绍链接，此时该链接分别连接第一个图像关联的时间信息0.1秒且关联的坐标信息为(789，456)、第二个图像关联的时间信息0.2秒且关联的坐标信息为(603，590)、第三个图像关联的时间信息0.3秒且关联的坐标信息为(457，804)。

在本步骤S13完成后，即完成了对多媒体文件的信息导入，则该多媒体文件可向用户呈现的不仅仅包括本身的图像，还包括通过本方法导入的信息。

本实施例通过获取多媒体文件的至少一图像，然后分析至少一图像，获取至少一图像中目标区域的坐标信息，再将坐标信息与待导入的数据信息关联，能够在多媒体文件中增加数据信息，丰富了多媒体文件内容，提高了用户体验。

对于导入信息的多媒体文件，本申请还提出了一种多媒体文件的显示方法，实现显示的多媒体文件中包括至少一图像，该至少一图像中包括关联有数据信息的目标区域，请参阅图2，图2是本发明一实施例一种多媒体文件的显示方法的流程示意图。在本实施例中，多媒体文件的显示方法可以包括以下步骤：

S21：播放多媒体文件。

多媒体文件一般包括声音、文字、图像等多媒体信息。例如，音频文件和影像文件，音频文件可以包括通过声音录入设备录制的原始声音的声音文件，还可以是一种音乐演奏指令序列，相当于乐谱的MIDI文件；影像文件可以是图片文件，还可以是包含音频、视频信息的视频文件。在本实施例中，多媒体文件可以是视频文件也可以是图片文件，其中多媒体文件包括至少一个图像，至少一图像中包括关联有数据信息的目标区域，当多媒体文件为图片文件时，图片文件可当作是一个图像，该图片文件的这一图像中包括关联有数据信息的目标区域；当多媒体文件为视频文件时，视频文件可视为包括多个图像，还包括多个时间信息，并且每个图像关联一个时间信息，其中图像中的目标区域通过坐标信息关联数据信息和对应的时间信息。具体实施方式与上述实施例的实施方式类似，此处不做赘述。

在本步骤S21中，首先播放多媒体文件，具体来说，当多媒体文件为图片文件时，显示图片文件即可，当多媒体文件为视频文件时，则播放视频文件。

S22：接收对多媒体文件的指示指令。

在本步骤S22中，接收对上述步骤S21中播放的多媒体文件的指示指令。其中，指示指令可以是放大/缩小指令、拖拉指令、裁剪指令、选中区域指令、点击指令等等，当多媒体文件为视频文件时，指示指令还可以调节播放速度指令、调整音量大小指令、调节亮度指令、开始/暂停播放指令等等，在本步骤S22中指示指令是用于下述步骤S23中选中目标区域，因此指示指令可以是点击指令或选中区域指令。具体来说，当多媒体文件为图片文件时，接收对这一图像上某个区域的点击指示指令或选中指示指令；当多媒体文件为视频文件时，接收指示指令，即在每一帧图像上接收指示指令。

S23：获取指示指令对应的一图像中的指定区域。

在本步骤S23中，在接收上述步骤S22的指示指令后，获取指示指令对应的一图像中的指定区域，其中，图像中的指定区域关联坐标信息，即获取指示指令对应的一图像中的指定区域的坐标信息。具体来说，当多媒体文件为图片文件时，指示指令为点击指令，获取点击指令对应的一图像中的指定区域对应的坐标信息；当多媒体文件为视频文件时，视频文件的每个图像都关联一个时间信息，获取指示指令对应一图像中的指定区域时，首先获取到指示指令对应的指示时间，然后根据指示时间获取与指示时间对应的图像，再根据指示指令获取所对应图像中的指定区域的坐标信息，例如，视频文件为足球比赛某一球员进球的片段，此时点击视频文件一图像中的该球员的头部区域时，首先获取点击操作对应的指示时间信息0.2秒，然后根据指示时间信息0.2秒获取0.2秒对应的图像，此时根据获取到的图像得到指定区域，即球员头部区域，并获得球员头部区域的坐标信息(603，590)。本步骤S23获取到的指定区域是用于下述步骤S24中与所在图像的目标区域进行匹配。

S24：判断指定区域是否与指定区域所在图像的目标区域有重合部分。

在本步骤S24中，是对上述步骤S23中获取的指定区域是否与指定区域所在图像的目标区域有重合的部分进行判断，指定区域与指定区域所在图像的目标区域均关联坐标信息，即判断指定区域的坐标信息是否与目标区域的坐标信息有重合部分，若判断为是，则执行下述步骤S25。例如，多媒体文件为图片文件时，图像信息为并肩站立的三个人的合照，其中指定区域为中间人物的头像，获取到指定区域的坐标信息为(695，432)，人物头像所在图像的目标区域的坐标信息范围是(689±50，450±50)，则判断出指定区域的坐标信息在指定区域所在图像的目标区域的范围内，即判定有重合部分，此时执行下述步骤S25；当多媒体文件为视频文件时，图像信息为足球比赛某一球员进球的片段，其中指定区域为该球员的头部区域，该球员头部区域的坐标信息(603，590)，该球员头部区域所在图像的目标区域的坐标信息范围是(590±40，540±60)，则判断出指定区域的坐标信息在指定区域所在图像的目标区域的范围内，即判定有重合部分，此时执行下述步骤S25。

S25：显示目标区域关联的数据信息。

在上述步骤S24中判断出指定区域与指定区域所在图像的目标区域有重合部分时，执行本步骤S25显示目标区域关联的数据信息。其中，数据信息可以是语音信息和文字信息，例如，一段语音信息、一个网址信息、一个文档信息等等，并且数据信息保存在关联多媒体文件的数据库中。多媒体文件的图像中目标区域是通过坐标信息来关联数据信息的，显示目标区域关联的数据信息时，可以是播放语音信息或显示文字信息。

具体来说，当多媒体文件是图片文件时，指定区域与目标区域重合，获取目标区域的坐标信息后显示目标区域关联的数据信息，例如，图像信息为并肩站立的三个人的合照，指定区域为中间人物的头像，指定区域与目标区域人物头像区域重合，目标区域坐标信息关联的数据信息是“姓名：李四，联系电话：123456789，地址：深圳市南山区xx街道”，显示数据信息的方式可以有多种，例如，在目标区域外侧显示包含数据信息文本框，也可以是在图片文件的底部直接显示数据信息。

当多媒体文件是视频信息时，指示时间对应图像的指定区域与目标区域重合，获取目标区域的坐标信息后显示目标区域关联的数据信息，例如，图像信息为足球比赛某一球员进球的片段，指令时间为0.2秒，指示时间对应图像的指定区域为该球员的头部区域，目标区域为该球员的全身区域，指定区域与目标区域重合，目标区域坐标信息关联的数据信息是该球员的一段人物介绍的网址，此时显示该网址，显示数据信息的方式与本步骤S25中当多媒体文件是图片文件时的显示方式类似，此处不做赘述，要说明的是，在本实施例中，显示该网址时，会提示用户是否打开连接，并不直接打开网址连接，在确认为用户真实需求后打开该该网址链接，在浏览器中显示该网址连接对应的网页信息；当数据信息为该球员的一段语音信息时，则显示语音信息提示框，并提示用户是否播放该语音消息，并不直接播放语音信息，在确认为用户真实需求后播放该语音信息，此时若视频文件中包含音频信息，则在播放语音信息时将音频文件的声音调低以突出语音信息的声音。需要说明的是，视频文件中可以出现一个时间段对应的连续的几个图像信息都包含同一目标区域相对应的数据信息，则在目标区域关联的数据信息时，则根据每一图像对应的设置进行显示，若显示的数据信息跟随目标区域移动而移动时，即可实现数据信息的动态显示。需要说明的是，当用户了解到多媒体文件可以显示信息，但不清楚目标区域的坐标信息时，可以在目标区域的坐标范围阈值处设定提示框。

本实施例多媒体文件包括至少一个图像，至少一图像中包括关联有数据信息的目标区域，通过播放多媒体文件，接收对多媒体文件的指示指令，然后获取指示指令对应的一图像中的指定区域，再判断指定区域是否与指定区域所在图像的目标区域有重合部分，若是，则显示目标区域关联的数据信息，能够在播放多媒体文件时及时获取到相关的数据信息，增加了多媒体文件的互动性，提高了用户体验。

上述方法应用于移动终端中，其逻辑过程通过计算机程序来表示，并具体通过移动终端实现。

对于计算机程序，以软件形式实现并作为独立的产品销售或使用时，可存储在一个电子设备可读取存储介质中，即，本发明还提供一种存储设备，设备上存储有程序数据，程序数据被处理器执行时实现上述方法的步骤。请参阅图3，图3是本发明存储设备一实施例的结构示意图，存储设备100中有程序数据能够被执行以实现上述实施例的方法，该存储设备可以为如U盘、光盘、服务器等。

对于移动终端的硬件结构，请参阅图4，图4是本发明移动终端一实施例的结构示意图。本实施例移动终端200包括处理器21和存储器22，处理器21耦接存储器22，存储器22中存储有程序数据，处理器21能够加载程序数据并执行，以实现上述多媒体文件的信息导入及显示方法。

具体来说，移动终端200用于实现多媒体文件的信息导入方法时，处理器21首先获取多媒体文件的至少一图像；然后分析至少一图像，获取至少一图像中目标区域的坐标信息；再将坐标信息与待导入的数据信息关联。

移动终端200用于实现多媒体文件的信息导入方法时，处理器21首先播放多媒体文件；然后接收对多媒体文件的指示指令；再获取指示指令对应的一图像中的指定区域；通过判断指定区域是否与指定区域所在图像的目标区域有重合部分；若是，则显示目标区域关联的数据信息。

需要说明的是，多媒体文件的信息导入方法与实现多媒体文件的信息导入方法可以由两个终端分别来实现，两个移动终端分别实现上述方法的实施方式与一个移动终端的实施方法类似，此处不做赘述。

对于移动终端实现多媒体文件的信息导入及显示方法，具体可参照图1和图2。

本实施例能够在多媒体文件中增加数据信息，丰富了多媒体文件内容，在播放多媒体文件时使用户及时获取到相关的数据信息，提高了用户体验。

以上所述仅为本发明的实施方式，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (3)

1.一种多媒体文件的显示方法，其特征在于，所述多媒体文件包括至少一个图像，至少一所述图像中包括关联有数据信息的目标区域；所述显示方法包括：

播放所述多媒体文件；

接收对所述多媒体文件的指示指令；

获取所述指示指令对应的一所述图像中的指定区域；

判断所述指定区域是否与所述指定区域所在图像的目标区域有重合部分；

若是，则显示所述目标区域关联的数据信息；

所述多媒体文件为视频文件，所述视频文件包括多个图像，每个所述图像关联一个时间信息，所述图像中目标区域通过坐标信息关联数据信息和对应的时间信息；

所述获取所述指示指令对应的一所述图像中的指定区域，包括：

获取所述指示指令对应的指示时间，根据所述指示时间获取与所述指示时间对应的图像；

根据所述指示指令获取所对应图像中的指定区域；

所述指示指令包括点击指示指令，所述根据所述指示指令获取所对应图像中的指定区域包括：

接收对所对应图像一区域的点击指示指令，获取所述点击指示指令对应的所述一区域作为指定区域；

获取所述指定区域的坐标信息；

判断所述指定区域是否与所述指定区域所在图像的目标区域有重合部分，包括：

判断所述指定区域的坐标信息是否与所述目标区域的坐标信息有重合部分；

所述数据信息包括语音信息和文字信息；

所述显示所述目标区域关联的数据信息，包括：

播放所述语音信息或显示所述文字信息；

所述播放所述语音信息包括：

显示语音信息提示框，提示是否播放所述语音信息；

当接收到对所述语音信息的播放确认指令时，播放所述语音信息；

当检测到所述视频文件中包含音频信息时，调低播放所述音频信息的声音以突出播放所述语音信息的声音。

2.一种移动终端，其特征在于，包括处理器及存储器，所述处理器耦接所述存储器；

所述存储器用于存储程序数据，所述程序数据由所述处理器加载并执行，以实现权利要求1中所述的方法。

3.一种存储设备，其特征在于，所述存储设备用于存储程序数据，

所述程序数据能够被执行以实现权利要求1中所述的方法。

Images