CN206021194U - 用于加强型增强现实多媒体的电子装置 - Google Patents

用于加强型增强现实多媒体的电子装置 Download PDF

Info

Publication number
CN206021194U
CN206021194U CN201521134016.8U CN201521134016U CN206021194U CN 206021194 U CN206021194 U CN 206021194U CN 201521134016 U CN201521134016 U CN 201521134016U CN 206021194 U CN206021194 U CN 206021194U
Authority
CN
China
Prior art keywords
data
interest
augmented reality
region
processor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201521134016.8U
Other languages
English (en)
Inventor
A·沙玛
G·杰拉斯
P·辛格
A·K·斯利瓦斯塔瓦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
STMicroelectronics International NV
Original Assignee
STMicroelectronics International NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by STMicroelectronics International NV filed Critical STMicroelectronics International NV
Application granted granted Critical
Publication of CN206021194U publication Critical patent/CN206021194U/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/44—Browsing; Visualisation therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/48—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/487—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using geographical or spatial information, e.g. location
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4728—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Data Mining & Analysis (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Library & Information Science (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Processing Or Creating Images (AREA)
  • Studio Devices (AREA)

Abstract

一种用于加强型增强现实多媒体的电子装置，该电子装置包括照相机传感器、显示器、非易失性存储单元和处理器。该处理器被配置成用于从该照相机传感器或视频文件采集视频数据、标识在该视频数据中的至少一个兴趣区以及在没有接收到用户输入的情况下针对该至少一个兴趣区生成增强现实数据，其中，该增强现实数据根据上下文与该至少一个兴趣区相关。该处理器被进一步配置成用于：在该显示器上显示该视频数据，其中，在从该照相机传感器或该视频文件采集该视频数据时，该增强现实数据实时地叠加于其上；并且将该视频数据和该增强现实数据存储在该非易失性存储单元中。

Description

用于加强型增强现实多媒体的电子装置
技术领域
本披露涉及增强现实***领域。
背景技术
增强现实是物理现实世界环境的生动直接观看或间接观看，其元素由计算机生成的感觉输入(如声音、视频、图形或GPS数据)增强。常规地，实时地并且在具有多个环境元素的语义上下文中使用增强。增强现实的示例是当在取景器中实时地观看对象时使用装置如智能电话或平板计算机显示对象的信息。
如果为了稍后播放而记录增强现实，其中，增强现实附加与取景器中的原始图像合并，结果无非是经编辑的视频流。当这确实将信息而不是原始取景器内容自身存在给取景器时，在播放过程中几乎不存在选项，使得增强现实附加比其可能在其他情况下更加无用。
因此，期望在增强现实领域中的进一步发展。
实用新型内容
提供本概述以便引入以下在详细描述中进一步描述的一些概念。本概述不旨在标识所要求保护的主题的关键特征或必要特征也不旨在用作限定所要求保护的主题的范围的辅助内容。
为解决上述问题，本公开的各种实施例涉及一种用于加强型增强现实多媒体的电子装置，包括：照相机传感器；显示器；非易失性存储单元；处理器，所述处理器被配置成用于：从所述照相机传感器采集视频数据；标识在所述视频数据中的至少一个兴趣区；在没有接收到用户输入的情况下针对所述至少一个兴趣区生成增强现实数据，所述增强现实数据根据上下文与所述至少一个兴趣区相关；在所述显示器上显示所述视频数据，其中，在从所述照相机传感器采集所述视频数据时，所述增强现实数据实时地叠加于其上；并且将所述视频数据和所述增强现实数据存储在所述非易失性存储单元中。
根据本公开的实施例，所述处理器将所述视频数据存储在所述非易失性存储单元中的视频文件中，并且其中，所述处理器将所述增强现实数据存储在所述视频文件的元数据部分中。
将元数据存储在单独的增强现实数据文本文件中的优点是通过或者更改或者替换数据以及增添新数据字段在稍后的时间点处对其更新容易。
根据本公开的实施例，所述至少一个兴趣区包括多个兴趣区；并且其中，所述处理器进一步被配置成用于：确定与同一对象相关的多个兴趣区；确定至少一个起止时间戳，所述至少一个起止时间戳包含所述视频文件中的所述多个兴趣区的连续存在；针对与不同对象相关的多个兴趣区确定至少一个起止时间戳；并且将包含所述视频文件中的所述多个兴趣区的所述连续存在的所述至少一个起止时间戳和针对与不同对象相关的多个兴趣区的所述至少一个起止时间戳存储在所述非易失性存储单元中的所述视频文件的所述元数据部分中。
根据本公开的实施例，所述视频数据存储在视频文件中；并且其中，所述增强现实数据存储在与所述视频文件分离但是相关联的元数据文件中。
根据本公开的实施例，所述至少一个兴趣区包括多个兴趣区；并且其中，所述处理器进一步被配置成用于：确定与同一对象相关的多个兴趣区；确定至少一个起止时间戳，所述至少一个起止时间戳包含所述视频文件中的所述多个兴趣区的连续存在；针对与不同对象相关的多个兴趣区确定至少一个起止时间戳；并且将包含所述视频文件中的所述多个兴趣区的所述连续存在的所述至少一个起止时间戳和针对与不同对象相关的多个兴趣区的所述至少一个起止时间戳存储在所述非易失性存储单元中的与所述视频文件分离但是相关联的所述元数据文件中。
通过本公开的各种实施例所述的电子装置，使得增强现实在视频播放方面得以加强。
附图说明
图1是可以在其上执行本披露的增强现实处理技术的电子装置的示意框图。
图2是根据本披露的增强现实处理技术的流程图。
图3是根据本披露的增强现实生成和显示技术的流程图。
图4是根据本披露展示了播放视频数据和可选地增强现实数据的流程图。
具体实施方式
将在下文描述一个或多个实施例。这些所描述的实施例仅是如由所附权利要求来单独限定的实现技术的示例。此外，为了提供集中的描述，可能不会在说明书中描述实际实现的不相关特征。
初始参照图1，现在描述可以用于执行增强现实技术的电子装置100。电子装置100可以是智能电话、平板计算机、增强现实头戴式耳机或者其他合适的电子装置。电子装置100包括处理器112，具有可选显示器114、可选非易失性存储单元116、可选照相机传感器118、可选收发器120、可选GPS收发器122、可选加速计124、可选罗盘126、可选气压计128、可选蓝牙收发器133以及耦接于其上的可选音频转换器135。显示器114在一些情况下可以是触敏的，并且非易失性存储单元116可以是磁或固态存储单元，如硬盘驱动器、固态驱动器或者闪存RAM。照相机传感器118可以是CMOS照相机传感器，并且收发器120可以是蜂窝收发器、WiFi收发器或蓝牙收发器。
此外参照图2，现在描述增强现实处理技术。处理器112可选地从照相机传感器118可选地实时地收集视频数据帧(框202)，并且可以可选地操作音频转换器135以获得与视频数据帧同时发生的音频记录。处理器112也可以从所记录的内容收集视频数据。当收集每个视频数据帧时，处理器112操作以便标识那个帧中的兴趣区(ROI)(框204)。示例ROI包括人脸、对象、地形部分、天空部分等。
处理器112然后在没有接收到用户输入的情况下或者在一些实例中在接收到用户输入的情况下针对ROI生成增强现实数据(框206)。通过在没有接收到用户输入的情况下针对ROI生成增强现实数据，意味着数据或者来自传感器或者来自数据库，而不是手动输入的(如由人听语音并经由键盘手动地输入适当的字幕)。尽管可以以此方式输入针对ROI的一些增强现实数据，一些增强现实数据将不会被输入。
例如，处理器112可以通过从内部传感器读取或采集数据来生成增强现实数据。因此，处理器112可以通过以下方式来生成增强现实数据：读取照相机传感器118的定向、在从GPS接收机122采集视频数据时读取电子装置100的位置的GPS坐标、在从气压计128捕获图像时读取与ROI或者电子装置100的位置相关联的天气状况、读取来自加速计124的数据或者读取来自罗盘126的数据。处理器112还可以通过经由收发器120如从提供了针对给定的GPS坐标位置的实时天气数据的源通过互联网接收以上数据来生成增强现实数据。
此外，处理器122可以通过分析视频数据自身或者通过分析与视频数据同时捕获的音频数据来生成增强现实数据。例如，处理器112可以通过对源自视频数据的声音执行音频分析来生成增强现实数据，或者可以通过对ROI执行图像分析、对ROI执行字符识别、对ROI执行对象识别以及对ROI的图像数据执行图像搜索来生成增强现实数据。这可以通过处理器112在本地完成，或者处理器112可以为了这些目的通过互联网采用远端源。此外，为了这个分析，处理器112可以组合本地源和远端源(非易失性存储器116和远端数据源130)。
每一项增强现实数据根据上下文与其对应的ROI相关。上下文关系意味着在ROI自身中示出的图像的信息，或者与在ROI自身中示出的图像的捕获相关的信息。上下文关系不意味着如时间戳/日期戳或者针对语音或者声音的字幕的信息。
处理器112可选地实时地在显示器114上显示视频数据和增强现实数据(框208)。增强现实数据覆盖在视频数据的顶部上。例如，视频数据中的个体的名字可以漂浮于其对应的头部之上或者与其相邻地以文本显示，或者对象的信息可以漂浮于对象之上或者与其相邻地以文本显示。
当视频数据和增强现实数据被处理器112显示在显示器114上时，其被处理器112以非合并的方式存储在非易失性存储器116中(框210)。通过被以非合并的方式存储，意味着增强现实数据并非简单地被存储为替换其覆盖的视频数据的多个部分的视频数据，而是反而被存储或者为视频文件自身的元数据(框212)或者为单独的元数据文件(框214)。例如，增强现实数据可以被存储为针对使用H.264或者HEVC算法编码或压缩的视频文件的补充增强信息(SEI)，或者被存储在与视频文件相关联的单独的增强现实文本文件(即，.art)中。在一些实例中，增强现实数据还可以被存储在容器用户数据中。在一些实例中，视频数据和增强现实数据的此存储不需要在播放的时候完成，并且可以或者在播放之前或者不存在播放时完成。
针对每个ROI，在增强现实数据被存储为视频文件自身的元数据或者为增强现实文本文件的情况下，元数据字段可以包括以下各项：
开始->停止时间戳
结构/数据的长度
给定ROI的数量[N]
ROI类型[N]
ROI[N]
对象ROI的缩略图(可选)
纬度(可选)
经度(可选)
用户评论(可选)
也可以包括其他字段。示例元数据可以是：
00:04:25，166-->00:04:28，625//起止PTS
52//结构/数据的长度
1//Rect数量
1//ROI字体
400 400 600 600//ROI
0.8//纬度
1.2//经度
欧巡赛是如此有趣//用户评论
00:04:29，751→00:04:31，044
<参数>
#索引
偏移0
偏移53
---
偏移12802
#CNT
98 12804//AR结构的Cout索引的偏移
#VER
V2.0
ART#
将元数据存储在单独的增强现实数据文本文件中的优点是通过或者更改或者替换数据以及增添新数据字段在稍后的时间点处对其更新容易。因此，例如，如果给定的ROI是电影中的演员，可以更新在稍后的时间点处那个电影的AR播放以包括在当前时间处的演员信息的播放，而不仅仅按照原始记录的时间播放。作为另一个示例，如果给定的ROI是著名的旅游胜地或者地标，可以更新AR播放以包括那个旅游胜地或者地标的当前信息。
在一些实例中，非易失性存储器116可能针对电子装置100不是本地的，并且可能反而针对经由局域网或互联网连接到电子装置100的服务器是本地的。在其他实例中，非易失性存储器116可能针对电子装置100不是本地的，但是可能反而是经由有线连接而连接的远端非易失性存储器134或者经由蓝牙连接而连接的非易失性存储器132。
由于视频数据和增强现实数据被存储，它们然后可以被处理器112在显示器114上非实时地播放(框216)。应当理解的是，由于增强现实数据和视频数据被以非合并的方式存储，在没有显示增强现实数据的情况下，甚至可以通过不支持播放增强现实数据的硬件和软件播放视频数据。
另外地参照图4，现在描述在一个实施例中播放增强现实数据和视频数据。视频数据和AR数据(框400)被缓冲(框402)，并且然后被发送到或者支持AR的视频播放器(框404)或者不支持AR的普通视频播放器(框406)。如果利用支持AR的视频播放器(框404)，那么在智能电话(框410)、平板计算机(框411)、膝上计算机(框412)或者TV(框413)上播放视频数据和AR数据。如果利用普通视频播放器(框406)，那么在智能电话(框410)、平板计算机(框411)、膝上计算机(框412)或者TV(框413)上播放视频数据。
在一些实例中，多个ROI可能与同一对象或人相关，并且可能令人期望的是元数据包括针对包含那个对象或人的连续存在的视频数据的起止时间的时间戳。因此，处理器112可以确定与同一对象或人相关的多个兴趣区，并且确定包含那个对象或人的连续存在的起止时间戳。处理器112还可以确定针对与不同对象或人相关的ROI的起止时间。因此，处理器112可以确定针对视频数据中的某个或者每个人和/或对象的起止时间。这些起止时间可以由处理器112根据增强现实数据被存储的位置被存储在或者视频文件的元数据部分中或者单独的视频文件中。
在处理器112非实时地播放视频数据和增强现实数据的过程中，根据上下文与增强现实数据相关的新增强现实数据在其被非实时地显示时可以在增强现实数据上叠加地显示。例如，增强现实数据可以包括在墙上叠加显示的广告以便广告产品A。新增强现实可以因此是针对在产品A上叠加的产品B的广告。
另外地参照图3的流程图300，现在描述由处理器112生成增强现实数据。首先，从或者照相机传感器118或者非易失性存储器116采集视频数据(框302)。将视频数据与AR数据(如来自框304的装置100的定向、GPS坐标或者用户输入)一起发送至在处理器112上执行的AR引擎(框306)。AR引擎(框306)执行图像分析、人脸识别、对象识别并且生成来自这些对象或人脸的ROI。AR引擎(框306)将从框304接收的AR数据与所生成的ROI和其他数据(图像分析、人脸识别、对象识别的结果)进行组合并且将其发送至在处理器112上执行的AR记录器(框308)。
AR记录器(框308)获得AR数据、其他数据和ROI并且将其处理成对记录有用的数据。在该过程中，AR记录器(框308)可以记录针对以上描述的ROI的开始和停止时间戳。AR记录器(框308)将这些结果发送至在处理器112上执行的AR格式器(框310)。AR格式器(框310)使用所接收的数据并将其格式化成期望的格式，并且然后将其发送至将AR数据存储在增强现实数据文件(如，.art文件)中的AR文件写入器(框314)。另外或替代性地，AR格式器(框310)将格式化的AR数据发送至转码器/编码器(框312)，该转码器/编码器也接收来自视频源(框302)的视频数据。转码器/编码器(框312)将视频数据与格式化的AR数据进行组合以创造具有嵌入式AR元数据的视频。
如所解释的，以上披露的意图是将AR ROI和来自任何合适的传感器的数据存储为元数据，从而使得在不存在附加处理时所述元数据的稍后检索是有可能的。也就是说，应当注意的是，在此所描述和使用的增强现实元数据不包括针对语音或者声音的隐藏字幕或者视觉时间戳和日期戳。
本披露已经关于有限数量的实施例来描述，得益于本披露的本领域的技术人员将理解的是，可以设想其他实施例而不脱离如本文中所披露的本披露的范围。因此，本披露的范围应仅由所附的权利要求来限定。

Claims (5)

1.一种用于加强型增强现实多媒体的电子装置，其特征在于，包括：
照相机传感器；
显示器；
非易失性存储单元；
处理器，所述处理器被配置成用于：
从所述照相机传感器采集视频数据；
标识在所述视频数据中的至少一个兴趣区；
在没有接收到用户输入的情况下针对所述至少一个兴趣区生成增强现实数据，所述增强现实数据根据上下文与所述至少一个兴趣区相关；
在所述显示器上显示所述视频数据，其中，在从所述照相机传感器采集所述视频数据时，所述增强现实数据实时地叠加于其上；并且
将所述视频数据和所述增强现实数据存储在所述非易失性存储单元中。
2.如权利要求1所述的电子装置，其特征在于，所述处理器被配置为将所述视频数据存储在所述非易失性存储单元中的视频文件中，并且其中，所述处理器被配置为将所述增强现实数据存储在所述视频文件的元数据部分中。
3.如权利要求2所述的电子装置，其特征在于，所述至少一个兴趣区包括多个兴趣区；并且其中，所述处理器进一步被配置成用于：
确定与同一对象相关的多个兴趣区；
确定至少一个起止时间戳，所述至少一个起止时间戳包含所述视频文件中的所述多个兴趣区的连续存在；
针对与不同对象相关的多个兴趣区确定至少一个起止时间戳；并且
将包含所述视频文件中的所述多个兴趣区的所述连续存在的所述至少一个起止时间戳和针对与不同对象相关的多个兴趣区的所述至少一个起止时间戳存储在所述非易失性存储单元中的所述视频文件的所述元数据部分中。
4.如权利要求1所述的电子装置，其特征在于，所述处理器还被配置为将所述视频数据存储在视频文件中；并且其中，所述处理器还被配置为将所述增强现实数据存储在与所述视频文件分离但是相关联的元数据文件中。
5.如权利要求4所述的电子装置，其特征在于，所述至少一个兴趣区包括多个兴趣区；并且其中，所述处理器进一步被配置成用于：
确定与同一对象相关的多个兴趣区；
确定至少一个起止时间戳，所述至少一个起止时间戳包含所述视频文件中的所述多个兴趣区的连续存在；
针对与不同对象相关的多个兴趣区确定至少一个起止时间戳；并且
将包含所述视频文件中的所述多个兴趣区的所述连续存在的所述至少一个起止时间戳和针对与不同对象相关的多个兴趣区的所述至少一个起止时间戳存储在所述非易失性存储单元中的与所述视频文件分离但是相关联的所述元数据文件中。
CN201521134016.8U 2015-06-25 2015-12-30 用于加强型增强现实多媒体的电子装置 Expired - Fee Related CN206021194U (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US14/750,699 2015-06-25
US14/750,699 US20160379410A1 (en) 2015-06-25 2015-06-25 Enhanced augmented reality multimedia system

Publications (1)

Publication Number Publication Date
CN206021194U true CN206021194U (zh) 2017-03-15

Family

ID=54843629

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201521134016.8U Expired - Fee Related CN206021194U (zh) 2015-06-25 2015-12-30 用于加强型增强现实多媒体的电子装置
CN201511021165.8A Pending CN106293052A (zh) 2015-06-25 2015-12-30 加强型增强现实多媒体***

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201511021165.8A Pending CN106293052A (zh) 2015-06-25 2015-12-30 加强型增强现实多媒体***

Country Status (3)

Country Link
US (1) US20160379410A1 (zh)
EP (1) EP3110162A1 (zh)
CN (2) CN206021194U (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106293052A (zh) * 2015-06-25 2017-01-04 意法半导体国际有限公司 加强型增强现实多媒体***

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180189252A1 (en) * 2017-01-05 2018-07-05 Nishant Dani Video graph and augmented browser
CN114390350B (zh) 2017-01-18 2023-08-01 交互数字Vc控股公司 用于选择场景以在增强现实界面中浏览历史记录的***和方法
CN107437272B (zh) * 2017-08-31 2021-03-12 深圳锐取信息技术股份有限公司 基于增强现实的互动娱乐方法、装置及终端设备
US10593086B2 (en) * 2017-10-13 2020-03-17 Schneider Electric Systems Usa, Inc. Augmented reality light beacon
CN109191369B (zh) 2018-08-06 2023-05-05 三星电子（中国）研发中心 2d图片集转3d模型的方法、存储介质和装置
US11496797B2 (en) * 2019-12-13 2022-11-08 At&T Intellectual Property I, L.P. Methods, systems, and devices for providing augmented reality content based on user engagement
US11776578B2 (en) * 2020-06-02 2023-10-03 Trapelo Corp. Automatic modification of values of content elements in a video
CN112287169B (zh) * 2020-10-29 2024-04-26 字节跳动有限公司 数据采集方法、装置及***、电子设备及存储介质

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080147325A1 (en) * 2006-12-18 2008-06-19 Maassel Paul W Method and system for providing augmented reality
US8488011B2 (en) * 2011-02-08 2013-07-16 Longsand Limited System to augment a visual data stream based on a combination of geographical and visual information
US20130177296A1 (en) * 2011-11-15 2013-07-11 Kevin A. Geisner Generating metadata for user experiences
US9292758B2 (en) * 2012-05-14 2016-03-22 Sphero, Inc. Augmentation of elements in data content
US10176635B2 (en) * 2012-06-28 2019-01-08 Microsoft Technology Licensing, Llc Saving augmented realities
US20160379410A1 (en) * 2015-06-25 2016-12-29 Stmicroelectronics International N.V. Enhanced augmented reality multimedia system

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106293052A (zh) * 2015-06-25 2017-01-04 意法半导体国际有限公司 加强型增强现实多媒体***

Also Published As

Publication number Publication date
CN106293052A (zh) 2017-01-04
EP3110162A1 (en) 2016-12-28
US20160379410A1 (en) 2016-12-29

Similar Documents

Publication Publication Date Title
CN206021194U (zh) 用于加强型增强现实多媒体的电子装置
US11482192B2 (en) Automated object selection and placement for augmented reality
US9317531B2 (en) Autocaptioning of images
US9779775B2 (en) Automatic generation of compilation videos from an original video based on metadata associated with the original video
US20160099023A1 (en) Automatic generation of compilation videos
US9966112B1 (en) Systems and methods to associate multimedia tags with user comments and generate user modifiable snippets around a tag time for efficient storage and sharing of tagged items
US20130179172A1 (en) Image reproducing device, image reproducing method
CN102214225A (zh) 记录数据的上下文标记
CN101960840A (zh) 使用个人视频录像机的图像比较设备以及使用该图像比较设备的方法
US10645468B1 (en) Systems and methods for providing video segments
ES2914124T3 (es) Focalización multimedia
CN102890699A (zh) 音频记录的地理标记
JP2015523010A (ja) 自動デジタルキュレーション及びアクションビデオのタグ付け
JP2001216726A (ja) オーディオ信号及び／又はビデオ信号生成装置、及びオーディオ信号及び／又はビデオ信号生成方法
US20120159326A1 (en) Rich interactive saga creation
WO2015172157A1 (en) Image organization by date
US20140245145A1 (en) Method and apparatus for playing contents
EP1758383A3 (en) A system and method for content-based navigation of live and recorded TV and video programs
CN102073668B (zh) 从数字视频文件搜索和提取数字图像
KR101001796B1 (ko) 동영상을 이용한 광고 방법 및 시스템
CN109101964B (zh) 确定多媒体文件中首尾区域的方法、设备及存储介质
US8896708B2 (en) Systems and methods for determining, storing, and using metadata for video media content
US20120059855A1 (en) Method and computer program product for enabling organization of media objects
CN104978389A (zh) 方法、***、服务器和客户端
US9807350B2 (en) Automated personalized imaging system

Legal Events

Date Code Title Description
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20170315

Termination date: 20191230