CN112037264B - 一种视频融合***及方法 - Google Patents

一种视频融合***及方法 Download PDF

Info

Publication number
CN112037264B
CN112037264B CN202011206384.4A CN202011206384A CN112037264B CN 112037264 B CN112037264 B CN 112037264B CN 202011206384 A CN202011206384 A CN 202011206384A CN 112037264 B CN112037264 B CN 112037264B
Authority
CN
China
Prior art keywords
information
video
scene
fusion
moving object
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011206384.4A
Other languages
English (en)
Other versions
CN112037264A (zh
Inventor
叶德建
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Qinghe Technology Co ltd
Zhejiang Qinghe Technology Co ltd
Original Assignee
Shanghai Qinghe Technology Co ltd
Zhejiang Qinghe Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Qinghe Technology Co ltd, Zhejiang Qinghe Technology Co ltd filed Critical Shanghai Qinghe Technology Co ltd
Priority to CN202011206384.4A priority Critical patent/CN112037264B/zh
Publication of CN112037264A publication Critical patent/CN112037264A/zh
Application granted granted Critical
Publication of CN112037264B publication Critical patent/CN112037264B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/246Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20212Image combination
    • G06T2207/20221Image fusion; Image merging
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • G06T2207/30201Face
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30242Counting objects in image

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请涉及一种视频融合***及方法。所述视频融合***包括:视频获取模块,其用于获取场景视频信息;活动物体数据统计***,其用于根据场景视频信息获取场景视频信息中的活动物体信息;数据生成模块,其用于根据各个所述场景视频信息和/或活动物体信息生成场景数据;融合计算模块,其用于对所述场景视频信息以及所述场景数据进行融合计算,从而生成融合信息,所述融合信息包括至少一个场景数据以及一个场景视频信息。采用本申请的视频融合***能够节省成本,且能够减少故障点,整体可靠性和可扩展性明显提升。

Description

一种视频融合***及方法
技术领域
本申请涉及云计算技术领域,尤其涉及一种视频融合***以及一种视频融合方法。
背景技术
现有技术无法将一个场景的所有视频以及信息放置在一起,例如,在景区场景中,分布有很多摄像头、广播设备、报警设备等,然而,他们都各自独立工作,整个过程通过人为来联系,既浪费了人力,还具有相当强的延迟性。
发明内容
本申请的目的在于提供一种视频融合***来克服或至少减轻现有技术的至少一个上述缺陷。
本申请首先提供了一种视频融合***,所述视频融合***包括:
视频获取模块,所述视频获取模块用于获取场景视频信息,所述场景视频信息通过单向视频应用***、半双向视频应用***以及双向视频应用***中的一个或多个获取;
活动物体数据统计***,所述活动物体数据统计***用于根据场景视频信息获取场景视频信息中的活动物体信息;
数据生成模块,所述数据生成模块用于根据各个所述场景视频信息和/或活动物体信息生成场景数据;
融合计算模块,所述融合计算模块用于对所述场景视频信息以及所述场景数据进行融合计算,从而生成融合信息,所述融合信息包括至少一个场景数据以及一个场景视频信息。
可选地,所述视频融合***进一步包括:
服务使用检测模块,所述服务使用检测模块用于检测互动装置的互动信息;
服务调整模块,所述服务调整模块用于根据所述互动装置的互动信息对对应的所述互动装置所提供的互动服务内容进行调整。
可选地,所述视频融合***进一步包括:
航拍信息获取模块,所述航拍信息获取模块用于获取航拍信息;
3D视图生成模块,所述3D视图生成模块用于根据航拍信息生成场景3D视图。
可选地,所述视频融合***进一步包括:
3D融合模块,所述3D融合模块用于将所述场景视频信息和/或活动物体信息与所述场景3D视图进行融合,以在所述场景3D视图中显示场景视频信息和/或活动物体信息中的全部信息或部分信息。
可选地,所述视频融合***进一步包括:
视频存储模块,所述视频存储模块用于存储通过单向视频应用***、半双向视频应用***以及双向视频应用***中的一个或多个获取的场景视频信息;
调取模块,所述调取模块用于调取所述视频存储模块存储的场景视频信息。
可选地,所述活动物体数据统计***包括:
特征识别模块,所述特征识别模块用于识别各个场景视频信息中的活动物体的特征;
统计模块,所述统计模块用于获取活动物体的数量信息、每个活动物体的位置信息以及每个活动物体的特征信息中的一个或多个。
可选地,所述活动物体数据统计***进一步包括:
特定活动物体预设模块,所述特定活动物体预设模块用于生成特定活动物体的特征信息;
特征锁定追踪模块,所述特征锁定追踪模块用于在各个所述场景视频信息中获取符合特定活动物体的特征信息的活动物体。
本申请还提供了一种视频融合方法,所述视频融合方法包括:
获取场景视频信息,所述场景视频信息通过单向视频应用***、半双向视频应用***以及双向视频应用***中的一个或多个获取;
根据场景视频信息获取场景视频信息中的活动物体信息;
根据各个所述场景视频信息和/或活动物体信息生成场景数据;
对所述场景视频信息以及所述场景数据进行融合计算,从而生成融合信息,所述融合信息包括至少一个场景数据以及一个场景视频信息。
可选地,所述视频融合方法进一步包括:
检测互动装置的互动信息;
根据所述互动装置的互动信息对对应的所述互动装置所提供的互动服务内容进行调整。
可选地,所述视频融合方法进一步包括:
获取航拍信息;
根据航拍信息生成场景3D视图。
本申请的视频融合***能够自单向视频应用***、半双向视频应用***以及双向视频应用***中获取场景视频信息以及通过活动物体数据统计***获取活动物体信息,并根据场景视频信息以及活动物体信息生成场景数据,通过融合计算模块将场景数据与场景视频信息进行融合,从而生成融合信息,以实现多场景一张图管理,能够节省成本,且能够减少故障点,整体可靠性和可扩展性明显提升。
附图说明
图1是视频融合***的***示意图。
图2是本申请一实施例中的应用示意图。
附图标记:
1、视频获取模块;2、活动物体数据统计***;3、数据生成模块;4、融合计算模块;5、单向视频应用***;6、半双向视频应用***;7、双向视频应用***。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请的一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本申请保护的范围。
图1是视频融合***的***示意图。
如图1所示的视频融合***包括视频获取模块1、活动物体数据统计***2、数据生成模块3以及融合计算模块4,视频获取模块1用于获取场景视频信息,场景视频信息通过单向视频应用***5、半双向视频应用***6以及双向视频应用***7中的一个或多个获取;活动物体数据统计***2用于根据场景视频信息获取场景视频信息中的活动物体信息;数据生成模块3用于根据各个场景视频信息和/或活动物体信息生成场景数据;融合计算模块4用于对场景视频信息以及场景数据进行融合计算,从而生成融合信息,所述融合信息包括至少一个场景数据以及一个场景视频信息。
在本实施例中,场景视频信息为能够通过单向视频应用***5、半双向视频应用***6以及双向视频应用***7获取的信息,场景视频信息例如场景图像、场景视频等。本发明中单向视频应用***5是指单向视频传输应用,如视频信息发布;半双向视频应用***6是指介于单向和双向之间的视频传输应用,如IPTV;双向视频应用***7是指实时双向视频传输应用,如视频会议。
在本实施例中,活动物体数据统计***用于根据上述的场景图像、场景视频通过特征抓取等方式获取在图像或者在视频中的活动物体,例如,人、动物等。
可以理解的是,活动物体数据统计***可以通过特征抓取的方式获取活动物体的数量,例如,在一个时间段内的活动物体的数量,又例如,活动物体数据统计***还可以获取某一画面或者多个画面中的活动物体的特征,例如,人脸特征、衣服特征、身高特征等。
可以理解的是,这种特征识别通过图像识别技术即可。
举例来说,融合计算模块可以将一个图片或者一个视频与场景数据进行融合,例如,通过视频获取模块获取的场景视频信息与活动物体数据统计***获取的活动物体信息融合在一起,从而生成一个场景图片,场景图片中具有活动物体信息。
在本实施例中,融合需要获取场景数据,场景数据由数据生成模块生成。场景数据生成方式可以是:将图片提取特征,以矩阵形式表示图片并以数据形式存储,将活动物体信息保存为数据。
在本实施例中,融合计算模块可以采用如下方式进行融合, JAVAWEB去做数据读取(读取场景数据)、VOE做前端技术、结合4G视界进行数据渲染,从而形成融合信息。
本申请的视频融合***能够自单向视频应用***、半双向视频应用***以及双向视频应用***中获取场景视频信息以及通过活动物体数据统计***获取活动物体信息,并根据场景视频信息以及活动物体信息生成场景数据,通过融合计算模块将场景数据与场景视频信息进行融合,从而生成融合信息,以实现多场景一张图管理,能够节省成本,且能够减少故障点,整体可靠性和可扩展性明显提升。
在本实施例中,视频融合***进一步包括航拍信息获取模块以及3D视图生成模块,航拍信息获取模块用于获取航拍信息;3D视图生成模块用于根据航拍信息生成场景3D视图。
在本实施例中,视频融合***进一步包括3D融合模块,3D融合模块用于将场景视频信息和/或活动物体信息与场景3D视图进行融合,以在场景3D视图中显示场景视频信息和/或活动物体信息中的全部信息或部分信息。
在本实施例中,本申请进一步包括可视化模块,所述可视化模块用于将场景视频信息和/或活动物体信息中的全部信息或部分信息进行可视化转换,从而形成表格或者图形。
参见图2,图2为应用本申请的视频融合***的实施例,该实施例的背景具体为:在某个景区,通过本申请的技术,获取了场景3D视图,具体地,通过航拍信息获取模块获取航拍信息,例如图2的场景视图,并通过3D视图生成模块生成场景3D视图。
在本实施例中,在场景3D视图中融入了场景视频信息和/或活动物体信息,例如,在图2的下侧(以图在正常视角下的方向为基准),有多张可选择的小视图,上述小视图通过视频获取模块获取,举例来说,视频获取模块通过单向视频应用***、半双向视频应用***以及双向视频应用***中的一个或多个获取(例如景区摄像头),从而获取场景视频信息。
又例如,在图2的左上方,有近30天客流数据,该数据通过活动物体数据统计***获取,举例来说,通过特征抓取,我们可以从各个视频中抓取到活动物体,并分辨出活动物体的数量,从而获取一定时间内的活动物体的数量信息作为活动物体信息。
本申请的数据生成模块,用于将上述的信息生成为数据,举例来说,将图像进行处理,以数据的形式存储在数据库中、将活动物体信息存储在数据库中,这些存储在数据库中的信息即为场景数据,当需要使用时,调用需要使用的场景数据,以生成图片或者表格等表现形式,并融合进场景3D视图中。并且场景视频信息和/或活动物体信息采用了某种表现形式进行表现,例如,文字、表格、3D图片中内嵌图片等表现形式。
例如,图2的左上方分有近30天客流数据,该数据可以通过活动物体数据统计***获取,并以图表形式显示。
又例如,图2的下侧有各个分景点的场景图,该场景图可以通过视频获取模块获取,并嵌入至3D图片中。
又例如,图2的右上方有今天客流数据,该数据可以通过活动物体数据统计***获取,并以图表形式显示。在本实施例中,视频融合***进一步包括视频存储模块以及调取模块,视频存储模块用于存储通过单向视频应用***、半双向视频应用***以及双向视频应用***中的一个或多个获取的场景视频信息;调取模块用于调取视频存储模块存储的场景视频信息。
通过调取以及存储,可以使使用者根据需要来调取数据。
在本实施例中,活动物体数据统计***包括特征识别模块以及统计模块,特征识别模块用于识别各个场景视频信息中的活动物体的特征;统计模块用于获取活动物体的数量信息、每个活动物体的位置信息以及每个活动物体的特征信息中的一个或多个。
在本实施例中,活动物体数据统计***进一步包括特定活动物体预设模块以及特征锁定追踪模块,特定活动物体预设模块用于生成特定活动物体的特征信息;特征锁定追踪模块用于在各个场景视频信息中获取符合特定活动物体的特征信息的活动物体。
采用这种方式,可以实施进行追踪。举例来说,在一个旅游景区中,我们通过各种不同的摄像头获取了场景视频信息,当某个小孩跟家长走失时,我们通过特定活动物体预设模块用于生成特定活动物体的特征信息,即走失小孩的体貌特征以及穿衣特征等,然后在各个场景视频信息中获取符合特定活动物体的特征信息的活动物体,从而搜索到该走失小孩即可。
在本实施例中,视频融合***进一步包括服务使用检测模块以及服务调整模块,服务使用检测模块用于检测互动装置的互动信息;服务调整模块用于根据互动装置的互动信息对对应的互动装置所提供的互动服务内容进行调整。
在本实施例中,互动装置可以是场景里的自动售卖机、安检用装置、取票机、验票机等。
采用这种方式,能够将一些在场景中不需要的互动装置通过自我调整的方式去除或者隐藏,从而节省资源,优化客户体验。
在一个实施例中,服务使用检测模块用于检测互动装置的互动信息具体包括:获取使用者根据对应的互动装置与使用者在一个周期内(例如一天、一个月或者一年)进行互动的次数。
在该实施例中,服务调整模块用于根据互动装置的互动信息对对应的互动装置所提供的互动服务内容进行调整包括:设置一个周期内的服务信息的使用次数阈值;判断互动的次数是否超过阈值,若否,则对互动装置进行调整。可以理解的是,若是,则不进行调整。
可以理解的是,调整可以是去除该项服务、或者将装置搬移到人流更多的地方等方式。
在一个备选实施例中,互动装置的互动信息包括获取一个周期内使用者对互动装置的互动信息以该互动信息可选择互动方式中的何种方式互动的数据。
在该备选实施例中,服务调整模块用于根据互动装置的互动信息对对应的所述互动装置所提供的互动服务内容进行调整包括:根据使用服务的可选择互动方式,分别为每种可选择互动方式设置使用次数阈值;分别判断在一个周期内,使用者采用的可选择互动方式是否超过对应的使用次数阈值,若否,则对服务进行调整。可以理解的是,若是,则不进行调整。可以理解的是,调整可以是去除该项服务、或者将装置搬移到人流更多的地方、或者去除该项可选择互动方式等方式。
在本实施例中,互动装置为视频点播装置;可选择互动方式为收费方式。
下面以举例的方式对本申请进行进一步详细阐述。可以理解的是,该举例并不构成对本申请的任何限制。
以某一个酒店为例,该酒店是深圳市区一家五星级酒店,其入住客户有付费看酒店提供的电影的需求(互动装置为网络电视机,互动信息为付费观看电影进行缴费时的三种付费方式)。付费方式有三种:支付宝付费、微信支付、酒店房账。
采用本申请的视频融合***通过服务使用检测模块获取上述的互动装置的互动信息,即假设在一年内,使用者用何种方式进行付费,例如,一共有100次付费,其中20次是支付宝、10次是微信支付,70次是酒店房账。
根据所述互动装置的互动信息对对应的所述互动装置所提供的互动服务内容进行调整。
具体地,根据可选择互动方式,分别为每种可选择互动方式设置使用次数阈值;
分别判断在一个周期内,使用者采用的可选择互动方式是否超过对应的使用次数阈值,若否,则对服务进行调整。
具体地,将支付宝付费、微信支付还是酒店房账三种方式分别设置了次数阈值,例如,都设置为10次,然后与在一个周期内的使用者的使用方式进行对比,若有一种方式没有达到阈值要求,就对服务进行调整,例如,修改服务的可选择互动方式。举例来说,当微信支付没有达到10次的阈值,则修改服务的可选择使用方式,直接将微信支付服务删除或隐藏。
本申请还提供了一种视频融合方法,所述视频融合方法包括:
步骤1:获取场景视频信息,所述场景视频信息通过单向视频应用***、半双向视频应用***以及双向视频应用***中的一个或多个获取;
步骤2:根据场景视频信息获取场景视频信息中的活动物体信息;
步骤3:根据各个场景视频信息和/或活动物体信息生成场景数据;
步骤4:对场景视频信息以及所述场景数据进行融合计算,从而生成融合信息,融合信息包括至少一个场景数据以及一个场景视频信息。
在本实施例中,视频融合方法进一步包括:
检测互动装置的互动信息;
根据所述互动装置的互动信息对对应的所述互动装置所提供的互动服务内容进行调整。
在本实施例中,所述视频融合方法进一步包括:
获取航拍信息;
根据航拍信息生成场景3D视图。
可以理解的是,上述对***的描述,也同样适用于对方法的描述。
本申请还提供了一种电子设备,包括存储器、处理器以及存储在存储器中并能够在处理器上运行的计算机程序,处理器执行计算机程序时实现如上的视频融合方法。
电子设备包括输入设备、输入接口、中央处理器、存储器、输出接口以及输出设备。其中,输入接口、中央处理器、存储器以及输出接口通过总线相互连接,输入设备和输出设备分别通过输入接口和输出接口与总线连接,进而与电子设备的其他组件连接。具体地,输入设备接收来自外部的输入信息,并通过输入接口将输入信息传送到中央处理器;中央处理器基于存储器中存储的计算机可执行指令对输入信息进行处理以生成输出信息,将输出信息临时或者永久地存储在存储器中,然后通过输出接口将输出信息传送到输出设备;输出设备将输出信息输出到电子设备的外部供用户使用。
也就是说,电子设备也可以被实现为包括:存储有计算机可执行指令的存储器;以及一个或多个处理器,该一个或多个处理器在执行计算机可执行指令时可以实现结合视频融合方法。
在一个实施例中,电子设备可以被实现为包括:存储器,被配置为存储可执行程序代码;一个或多个处理器,被配置为运行存储器中存储的可执行程序代码,以执行上述实施例中的视频融合方法。
本申请还提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时能够实现如上所述的视频融合方法。
计算设备包括中央处理单元(CPU),其可以根据存储在只读存储器(ROM)中的程序或者从存储部分加载到随机访问存储器(RAM)中的程序而执行各种适当的动作和处理。在RAM中,还存储有设备操作所需的各种程序和数据。CPU、ROM以及RAM通过总线彼此相连。输入/输出(I/O)接口也连接至总线。
以下部件连接至I/O接口:包括键盘、鼠标等的输入部分;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分;包括硬盘等的存储部分;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分。通信部分经由诸如因特网的网络执行通信处理。驱动器也根据需要连接至I/O接口。可拆卸介质,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器上,以便于从其上读出的计算机程序根据需要被安装入存储部分。
特别地,根据本申请的实施方式,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本申请的实施方式包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施方式中,该计算机程序可以通过通信部分从网络上被下载和安装,和/或从可拆卸介质被安装。在该计算机程序被中央处理单元(CPU)执行时,执行本申请的方法中限定的上述功能。需要说明的是,本申请的计算机存储介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的***、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本申请中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行***、装置或者器件使用或者与其结合使用。而在本申请中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行***、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、RF等等,或者上述的任意合适的组合。
附图中的流程图和框图,图示了按照本申请各种实施方式的***、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的***来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本申请实施方式中所涉及到的模块或单元可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的模块或单元也可以设置在处理器中,这些模块或单元的名称在某种情况下并不构成对该模块或单元本身的限定。
最后应说明的是:以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (7)

1.一种视频融合***,其特征在于,所述视频融合***包括:
视频获取模块(1),所述视频获取模块(1)用于获取场景视频信息,所述场景视频信息通过单向视频应用***(5)、半双向视频应用***(6)以及双向视频应用***(7)中的一个或多个获取;
活动物体数据统计***(2),所述活动物体数据统计***(2)用于根据场景视频信息获取场景视频信息中的活动物体信息;其中,所述活动物体数据统计***(2)包括:
特征识别模块,所述特征识别模块用于识别各个场景视频信息中的活动物体的特征;
统计模块,所述统计模块用于获取活动物体的数量信息、每个活动物体的位置信息以及每个活动物体的特征信息中的多个;
数据生成模块(3),所述数据生成模块(3)用于根据各个所述场景视频信息和/或活动物体信息生成场景数据;
融合计算模块(4),所述融合计算模块(4)用于对所述场景视频信息以及所述场景数据进行融合计算,从而生成融合信息,所述融合信息包括至少一个场景数据以及一个场景视频信息;
服务使用检测模块,所述服务使用检测模块用于检测互动装置的互动信息;所述互动装置的互动信息包括获取一个周期内使用者对互动装置的互动信息;
服务调整模块,所述服务调整模块用于根据所述互动装置的互动信息对对应的所述互动装置所提供的互动服务内容进行调整;
所述服务调整模块用于根据互动装置的互动信息对对应的所述互动装置所提供的互动服务内容进行调整包括:根据使用服务的可选择互动方式,分别为每种可选择互动方式设置使用次数阈值;分别判断在一个周期内,使用者采用的可选择互动方式是否超过对应的使用次数阈值,若否,则对服务进行调整;
所述互动装置为视频点播装置;
所述可选择互动方式为收费方式;
所述对服务进行调整包括去除该项服务或去除该项可选择互动方式。
2.如权利要求1所述的视频融合***,其特征在于,所述视频融合***进一步包括:
航拍信息获取模块,所述航拍信息获取模块用于获取航拍信息;
3D视图生成模块,所述3D视图生成模块用于根据航拍信息生成场景3D视图。
3.如权利要求2所述的视频融合***,其特征在于,所述视频融合***进一步包括:
3D融合模块,所述3D融合模块用于将所述场景视频信息和/或活动物体信息与所述场景3D视图进行融合,以在所述场景3D视图中显示场景视频信息和/或活动物体信息中的全部信息或部分信息。
4.如权利要求3所述的视频融合***,其特征在于,所述视频融合***进一步包括:
视频存储模块,所述视频存储模块用于存储通过单向视频应用***、半双向视频应用***以及双向视频应用***中的一个或多个获取的场景视频信息;
调取模块,所述调取模块用于调取所述视频存储模块存储的场景视频信息。
5.如权利要求4所述的视频融合***,其特征在于,所述活动物体数据统计***(2)进一步包括:
特定活动物体预设模块,所述特定活动物体预设模块用于生成特定活动物体的特征信息;
特征锁定追踪模块,所述特征锁定追踪模块用于在各个所述场景视频信息中获取符合特定活动物体的特征信息的活动物体。
6.一种视频融合方法,其特征在于,所述视频融合方法包括:
获取场景视频信息,所述场景视频信息通过单向视频应用***、半双向视频应用***以及双向视频应用***中的一个或多个获取;
根据场景视频信息获取场景视频信息中的活动物体信息,其中,所述活动物体信息包括:各个场景视频信息中的活动物体的特征;以及活动物体的数量信息、每个活动物体的位置信息以及每个活动物体的特征信息中的多个;
根据各个所述场景视频信息和/或活动物体信息生成场景数据;
对所述场景视频信息以及所述场景数据进行融合计算,从而生成融合信息,所述融合信息包括至少一个场景数据以及一个场景视频信息;所述视频融合方法进一步包括:
检测互动装置的互动信息;
根据所述互动装置的互动信息对对应的所述互动装置所提供的互动服务内容进行调整;
所述互动信息包括获取一个周期内使用者对互动装置的互动信息;
所述根据互动装置的互动信息对对应的所述互动装置所提供的互动服务内容进行调整包括:根据使用服务的可选择互动方式,分别为每种可选择互动方式设置使用次数阈值;分别判断在一个周期内,使用者采用的可选择互动方式是否超过对应的使用次数阈值,若否,则对服务进行调整;
所述互动装置为视频点播装置;
所述可选择互动方式为收费方式;
所述对服务进行调整包括去除该项服务或去除该项可选择互动方式。
7.如权利要求6所述的视频融合方法,其特征在于,所述视频融合方法进一步包括:
获取航拍信息;
根据航拍信息生成场景3D视图。
CN202011206384.4A 2020-11-03 2020-11-03 一种视频融合***及方法 Active CN112037264B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011206384.4A CN112037264B (zh) 2020-11-03 2020-11-03 一种视频融合***及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011206384.4A CN112037264B (zh) 2020-11-03 2020-11-03 一种视频融合***及方法

Publications (2)

Publication Number Publication Date
CN112037264A CN112037264A (zh) 2020-12-04
CN112037264B true CN112037264B (zh) 2021-02-05

Family

ID=73573559

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011206384.4A Active CN112037264B (zh) 2020-11-03 2020-11-03 一种视频融合***及方法

Country Status (1)

Country Link
CN (1) CN112037264B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110249095A1 (en) * 2010-04-12 2011-10-13 Electronics And Telecommunications Research Institute Image composition apparatus and method thereof
CN106303741A (zh) * 2016-08-25 2017-01-04 武克易 基于特征数据查找的广告播放***
CN109840951A (zh) * 2018-12-28 2019-06-04 北京信息科技大学 针对平面地图进行增强现实的方法及装置
CN110310306A (zh) * 2019-05-14 2019-10-08 广东康云科技有限公司 基于实景建模与智能识别的目标跟踪方法、***及介质
CN111007936A (zh) * 2018-10-08 2020-04-14 阿里巴巴集团控股有限公司 实体店中的终端设备及其信息处理方法、装置及***

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9965779B2 (en) * 2015-02-24 2018-05-08 Google Llc Dynamic content display time adjustment

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110249095A1 (en) * 2010-04-12 2011-10-13 Electronics And Telecommunications Research Institute Image composition apparatus and method thereof
CN106303741A (zh) * 2016-08-25 2017-01-04 武克易 基于特征数据查找的广告播放***
CN111007936A (zh) * 2018-10-08 2020-04-14 阿里巴巴集团控股有限公司 实体店中的终端设备及其信息处理方法、装置及***
CN109840951A (zh) * 2018-12-28 2019-06-04 北京信息科技大学 针对平面地图进行增强现实的方法及装置
CN110310306A (zh) * 2019-05-14 2019-10-08 广东康云科技有限公司 基于实景建模与智能识别的目标跟踪方法、***及介质

Also Published As

Publication number Publication date
CN112037264A (zh) 2020-12-04

Similar Documents

Publication Publication Date Title
CN108427911B (zh) 一种身份验证方法、***、装置及设备
CN107872732B (zh) 一种自助式互动视频直播***
CN111669612B (zh) 基于直播的信息投放方法、装置和计算机可读存储介质
CN112954450B (zh) 视频处理方法、装置、电子设备和存储介质
CN112182299B (zh) 一种视频中精彩片段的获取方法、装置、设备和介质
CN113569825B (zh) 视频监控方法、装置、电子设备和计算机可读介质
WO2021143228A1 (zh) 数据推送方法、装置、电子设备、计算机存储介质和计算机程序
CN112770042B (zh) 图像处理方法及装置、计算机可读介质、无线通信终端
CN111464819A (zh) 直播图像检测方法、装置、设备及存储介质
CN111385484B (zh) 信息处理方法和装置
CN115379125B (zh) 交互信息发送方法、装置、服务器和介质
CN115761090A (zh) 特效渲染方法、装置、设备、计算机可读存储介质及产品
CN112037264B (zh) 一种视频融合***及方法
CN109640119B (zh) 用于推送信息的方法和装置
CN110809166B (zh) 视频数据处理方法、装置和电子设备
CN114565952A (zh) 行人轨迹生成方法、装置、设备和存储介质
Duan et al. Flad: a human-centered video content flaw detection system for meeting recordings
CN115278355B (zh) 视频剪辑方法、装置、设备、计算机可读存储介质及产品
CN111385460A (zh) 图像处理方法和装置
CN112312207B (zh) 智能电视终端与移动终端流量打通的方法、装置及设备
CN115222969A (zh) 标识信息识别方法、装置、设备、可读存储介质及产品
CN110321857B (zh) 基于边缘计算技术的精准客群分析方法
CN114143429A (zh) 图像拍摄方法、装置、电子设备和计算机可读存储介质
CN113762156B (zh) 观影数据处理方法、装置及存储介质
CN112818914B (zh) 一种视频内容的分类方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
EE01 Entry into force of recordation of patent licensing contract
EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20201204

Assignee: Beijing Qinghe Technology Co.,Ltd.

Assignor: Zhejiang Qinghe Technology Co.,Ltd.|SHANGHAI QINGHE TECHNOLOGY CO.,LTD.

Contract record no.: X2022980017469

Denomination of invention: A Video Fusion System and Method

Granted publication date: 20210205

License type: Common License

Record date: 20221010

PE01 Entry into force of the registration of the contract for pledge of patent right
PE01 Entry into force of the registration of the contract for pledge of patent right

Denomination of invention: A video fusion system and method

Granted publication date: 20210205

Pledgee: Shanghai Rural Commercial Bank Co.,Ltd. Yangpu Sub branch

Pledgor: Zhejiang Qinghe Technology Co.,Ltd.|SHANGHAI QINGHE TECHNOLOGY CO.,LTD.

Registration number: Y2024310000337