CN111277800A - 监控视频编码及播放方法、装置、电子设备及存储介质 - Google Patents

监控视频编码及播放方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN111277800A
CN111277800A CN202010137454.9A CN202010137454A CN111277800A CN 111277800 A CN111277800 A CN 111277800A CN 202010137454 A CN202010137454 A CN 202010137454A CN 111277800 A CN111277800 A CN 111277800A
Authority
CN
China
Prior art keywords
video
motion
information
motion information
playing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010137454.9A
Other languages
English (en)
Inventor
邹雪梅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Goke Microelectronics Co ltd
Original Assignee
Chengdu Goke Microelectronics Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chengdu Goke Microelectronics Co ltd filed Critical Chengdu Goke Microelectronics Co ltd
Priority to CN202010137454.9A priority Critical patent/CN111277800A/zh
Publication of CN111277800A publication Critical patent/CN111277800A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/177—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a group of pictures [GOP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47202—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting content on demand, e.g. video on demand
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8455—Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本申请提供一种监控视频编码及播放方法、装置、电子设备及存储介质，涉及视频处理技术领域。该方法包括：采用预设算法，对采集的视频图像进行运动物体检测，获取运动信息，该运动信息包括：视频图像中的运动块、以及各运动块的位置信息、时间信息，并向播放端设备发送该运动信息，以使播放端设备根据运动信息查找对应位置和时间的视频帧。本申请的方法能够在不影响原有视频编码质量的前提下，且不会对编码器的配置有任何限制，获取了视频图像中的运动信息，以便于根据运动信息查找对应位置和时间的视频帧来提高查看监控视频的效率。

Description

监控视频编码及播放方法、装置、电子设备及存储介质
技术领域
本发明涉及视频处理技术领域，具体而言，涉及一种监控视频编码及播放方法、装置、电子设备及存储介质。
背景技术
随着网络技术和多媒体技术的发展，视频监控的应用越来越广泛。面对社会治安状况的日趋复杂，公共安全问题不断凸显，城市犯罪突出，我们可以借助视频监控制***存储的大量图像信息，来进行安全防范、证据提取等。
现有技术中，监控视频一般是按照固定的时长进行存储，比如24小时为一个存储片段，当用户在查看监控回放时，通过在监控***中输入时间戳信息，从感兴趣的时间段开始依次查看视频，需要耗费大量的时间来查找目标信息，因此，通常都是采用倍速播放来提高查找效率。
但采用现有技术，由于倍速播放是基于跳帧解码的机制，比如2倍速，就是每隔2帧丢掉1帧，丢掉的这一帧不进行解码和播放，这种机制就限制了丢掉的帧为非关键帧，常见的是丢掉B帧(B帧编码是双向预测的帧间压缩)，当编码器不支持B帧的情况时，用户想按照指定倍速播放，解码端只有将关键帧丢掉，导致当前GOP(图像组，Group of picture)后面的解码图像就会错误，造成原有视频编码质量受损，影响监控效果。
发明内容
本发明的目的在于，针对上述现有技术中的不足，提供一种监控视频编码及播放方法、装置、电子设备及存储介质，以有效避免现有技术中存在的倍速播放时有可能造成原有视频编码质量受损、影响监控效果的问题，且可以筛选出选定区域和时间段的运动情况，提升监控视频查看效率。
为实现上述目的，本申请实施例采用的技术方案如下：
第一方面，本申请实施例提供了一种监控视频编码方法，应用于编码端设备，该方法包括：
采用预设算法，对采集的视频图像进行运动物体检测，获取运动信息，所述运动信息包括：所述视频图像中的运动块、以及各运动块的位置信息、时间信息；
向播放端设备发送所述运动信息，以使所述播放端设备根据所述运动信息查找对应位置和时间的视频帧。
可选地，所述向播放端设备发送所述运动信息，包括：
将所述运动信息编码至所述视频图像中，获取编码后的视频图像；
向所述播放端设备发送所述编码后的视频图像。
可选地，所述将所述运动信息编码至所述视频图像中，获取编码后的视频图像，包括：
在存在运动块的视频帧的图像组GOP后添加补充增强信息SEI；
在所述SEI中添加所述运动信息。
可选地，所述向所述播放端设备发送所述编码后的视频图像，包括：
向所述播放端设备发送所述视频图像中包含所述运动块的视频帧。
第二方面，本申请实施例提供了一种监控视频播放方法，应用于播放端设备，所述方法包括：
接收编码端设备发送的视频图像对应的运动信息，所述运动信息包括：所述视频图像中的运动块、以及各运动块的位置信息、时间信息；
按照预设格式，存储所述运动信息；
接收视频查看指令，所述视频查看指令包括：待查看时间信息、区域位置信息；
根据所述视频查看指令、所述运动信息，播放所述视频图像中所述待查看时间信息、区域位置信息对应的视频帧。
可选地，所述按照预设格式，存储所述运动信息，包括：
将所述运动信息按照对应的时间信息写入链表的不同节点中。
可选地，所述根据所述视频查看指令、所述运动信息，播放所述视频图像中所述待查看时间信息、区域位置信息对应的视频帧，包括：
根据所述视频查看指令、所述运动信息，查找所述区域位置信息对应的备选运动块；
在所述备选运动块中，查找所述时间信息所对应时间范围内包含运动物体的目标运动块；
输出并播放所述目标运动块对应的视频帧。
第三方面，本申请实施例还提供了一种监控视频编码装置，应用于编码端设备，所述装置包括运动检测模块及编码模块；
所述运动检测模块，采用预设算法，对采集的视频图像进行运动物体检测，获取运动信息，所述运动信息包括：所述视频图像中的运动块、以及各运动块的位置信息、时间信息；
所述编码模块，用于向播放端设备发送所述运动信息，以使所述播放端设备根据所述运动信息查找对应位置和时间的视频帧。
可选地，所述编码模块，具体用于：
将所述运动信息编码至所述视频图像中，获取编码后的视频图像；
向所述播放端设备发送所述编码后的视频图像。
可选地，所述编码模块，具体用于：
在存在运动块的视频帧的图像组GOP后添加补充增强信息SEI；
在所述SEI中添加所述运动信息。
可选地，所述编码模块，用于向所述播放端设备发送所述视频图像中包含所述运动块的视频帧。
第四方面，本申请实施例还提供了一种监控视频播放装置，应用于播放端设备，所述装置包括：接收模块、存储模块、查看模块及播放模块；
所述接收模块，用于接收编码端设备发送的视频图像对应的运动信息，所述运动信息包括：所述视频图像中的运动块、以及各运动块的位置信息、时间信息；
所述存储模块，用于按照预设格式，存储所述运动信息；
所述查看模块，用于接收视频查看指令，所述视频查看指令包括：待查看时间信息、区域位置信息；
所述播放模块，用于根据所述视频查看指令、所述运动信息，播放所述视频图像中所述待查看时间信息、区域位置信息对应的视频帧。
可选地，所述存储模块，具体用于：
将所述运动信息按照对应的时间信息写入链表的不同节点中。
可选地，所述查看模块，具体用于：
根据所述视频查看指令、所述运动信息，查找所述区域位置信息对应的备选运动块；
在所述备选运动块中，查找所述时间信息所对应时间范围内包含运动物体的目标运动块；
输出并播放所述目标运动块对应的视频帧。
第五方面，本申请实施例还提供一种电子设备，包括：处理器、存储介质和总线，所述存储介质存储有所述处理器可执行的程序指令，当电子设备运行时，所述处理器与所述存储介质之间通过总线通信，所述处理器执行所述程序指令，执行上述第一方面和/或第二方面所提供的方法。
第六方面，本申请实施例还提供一种存储介质，所述存储介质上存储有计算机程序，所述计算机程序被处理器运行时，执行上述第一方面和/或第二方面所提供的方法。
本申请的有益效果是：
本申请所提供的一种监控视频编码及播放方法、装置、电子设备及存储介质，该方法包括：采用预设算法，对采集的视频图像进行运动物体检测，获取运动信息，该运动信息包括：视频图像中的运动块、以及各运动块的位置信息、时间信息，并向播放端设备发送该运动信息，以使播放端设备根据运动信息查找对应位置和时间的视频帧，并在播放端按照预设格式，存储该运动信息，然后，接收视频查看指令，该视频查看指令包括：待查看时间信息、区域位置信息，最后，播放端根据该视频查看指令、运动信息，播放视频图像中待查看时间信息、区域位置信息对应的视频帧，实现了在不影响原有视频编码质量的前提下，且不会对编码器的配置有任何限制，获取了视频图像中的运动信息，以便于根据运动信息查找对应位置和时间的视频帧来提高查看监控视频的效率。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本发明的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。
图1为本申请一实施例提供的监控视频***结构示意图；
图2为本申请另一实施例提供的监控视频***的结构示意图；
图3为本申请一实施例提供的监控视频编码方法的流程示意图；
图4为本申请实施例提供的监控视频编码方法中运动信息的结构示意图；
图5为本申请另一实施例提供的监控视频编码方法的流程示意图；
图6为本申请另一实施例提供的监控视频播放方法流程示意图；
图7为本申请另一实施例提供的监控视频播放方法流程示意图；
图8为本申请一实施例提供的监控视频编码装置的结构示意图；
图9为本申请另一实施例提供的监控视频播放装置的结构示意图；
图10为本申请另一实施例提供的监控视频编码及播放***结构示意图；
图11为本申请另一实施例提供的监控视频编码及播放***结构示意图；
图12为本申请一实施例提供的电子设备的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。
图1为本申请一实施例提供的监控视频***结构示意图，如图1所示，该监控视频***10包括：编码端设备11及播放端设备12，编码端设备11通过网络13与播放端设备12进行通信，以实现数据通讯或交互。网络13可以是有线网络，也可以是无线网络。
其中，编码端设备11和播放端设备12指具有数据处理能力的电子设备。编码端设备11和播放端设备12可以是，但不限于，智能手机、电脑(personal computer，PC)、平板电脑、数字助理(personal digital assistant，PDA)、移动上网设备(mobile Internetdevice，MID)等。
可选地，编码设备11和播放端设备12也可以集成于同一电子设备，例如计算机，在此不做限制。
请参阅图2，是图1所示的编码端设备11的方框示意图。编码端设备11包括监控视频编码装置100、存储单元200、处理单元300、通信单元400以及监控视频播放装置500。
存储单元200、处理单元300以及通信单元400各元件相互之间直接或间接地电性连接，以实现数据的传输或交互。例如，这些元件相互之间可以通过一条或多条通讯总线或信号线实现电性连接。监控视频编码装置100包括至少一个可以软件或固件(firmware)的形式存储于存储单元200中的功能模块。处理单元300用于执行存储单元200中存储的可执行程序代码，例如本实施例中的监控视频编码装置100和监控视频播放装置500所包括的可执行程序代码，处理单元300在调用存储单元200上存储的可执行程序代码时，以实现本实施例中的监控视频编码和播放方法。
其中，存储单元200可以是，但不限于，随机存取存储单元(Random AccessMemory，RAM)，只读存储单元(Read Only Memory，ROM)，可编程只读存储单元(Programmable Read-Only Memory，PROM)，可擦除只读存储单元(Erasable ProgrammableRead-Only Memory，EPROM)，电可擦除只读存储单元(Electric Erasable ProgrammableRead-Only Memory，EEPROM)等。
存储单元200用于存储程序，例如，本发明提供的监控视频编码装置100所对应的功能模块。
处理单元300可以是一种集成电路芯片，具有信号处理能力。处理单元300可以是通用处理单元，包括中央处理单元(Central Processing Unit，CPU)、网络处理单元(Network Processor，NP)等；还可以是数字信号处理单元(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)或者其他可编程逻辑单元件、分立门或者晶体管逻辑单元件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理单元可以是微处理单元或者该处理单元也可以是任何常规的处理单元等。
通信单元400用于通过网络13建立编码端设备11与播放端设备12之间的通信连接，并用于通过网络13接收和发送数据。
应当理解，图2所示的结构仅为示意，监控视频***10可以包括比图2所示更多或者更少的组件，或者具有与图2所示不同的配置。图2中所示的各组件可以采用硬件、软件或其组合实现。
请参阅图3，为本申请一实施例提供的监控视频编码方法的流程示意图，该监控视频编码方法应用于图2所示的编码端设备11，编码端设备11是指视频采集端，对采集的视频图像进行压缩、及运动物体检测等。下面将对图3所示的具体流程做详细阐述：
步骤S30，采用预设算法，对采集的视频图像进行运动物体检测，获取运动信息。
其中，该运动信息可以包括但不限于视频图像中的运动块、以及各运动块的位置信息、时间信息。该运动快用于描述视频图像中发生运动的事物，区分于静止的背景图像。
具体的，采集视频图像信息的方式可以是通过摄像头采集监控场景中的图像信息，在接收到采集的视频图像信息后，其中，视频图像可以划分为多个GOP(Group ofpicture，图像组)，采用预设算法对监控场景中的视频图像进行运动物体检测，该预设算法可以是帧间差分法、高斯背景建模(GMM)、光流法、Vibe算法等，在此不作具体限定，根据实际场景需求进行选取。检测到的运动信息可以包括但不限于每个检测区间内一帧图像中对应的运动块、以及各运动块的位置信息、时间信息，需要说明，上述检测区间需要与GOP相关联，建议设置为1个GOP，在此不作具体限定，也可以根据实际场景需求进行选取。
若运动信息中的同一个运动块在当前检测区间中的多帧图像存在运动，就算作一个运动块，运动块的大小，可以根据情况调节，比如32*32(pix*pix)，64*64(pix*pix)等，在此不作具体限定。
例如，请参考图4，为本申请实施例提供的监控视频编码的运动信息的结构示意图，其中，GOP中的运动信息的数据格式以及长度如图4所示，运动信息包括有运动块的个数、以及各运动块的位置信息和时间信息等，运动信息长度的计算公式为：32*(2+N)bit，在此不作具体限定，可以根据实际情况灵活设置。
步骤S31，向播放端设备发送该运动信息，以使播放端设备根据该运动信息查找对应位置和时间的视频帧。
播放端设备是指用户查看监控视频的装置，在获取视频图像的运动信息后，可以向播放端设备发送该运动信息。然后，在播放端设备回放监控视频的时候，就可以根据该运动信息查找对应位置和时间的视频帧，大大地提高了查看监控视频的效率。
综上所述，本申请实施例提供了一种监控视频编码方法，可以采用预设算法，对采集的视频图像进行运动物体检测，获取运动信息，该运动信息包括：视频图像中的运动块、以及各运动块的位置信息、时间信息等，以及向播放端设备发送该运动信息，实现了可以通过上述运动信息，获取到监控场景中是否存在的运动物体，进而在播放端设备回放监控视频的时候根据运动信息查找对应位置和时间的视频帧，大大地提高了查看监控视频的效率，且不会对编码器的配置有任何限制。
可选地，不限于以下两种发送方式向播放端设备发送运动信息，第一种是将运动信息编码到视频流中发送到播放端设备，播放端设备通过解码获取视频帧对应的运动信息，与视频图像同步性较高；第二种是将该运动信息通过网络单独发送运动信息到播放端设备，这种方式实现简单，播放端设备收到后需要与视频图像进行匹配。
请参阅图5，为本申请另一实施例提供的监控视频编码方法的流程示意图，可选地，第一种方式中将运动信息与视频图像一起编码后再发送至播放端设备，具体的详细步骤如下。
步骤S50，将运动信息编码至视频图像中，获取编码后的视频图像。
可选地，将运动信息编码到视频流中的传输的方式，在存在运动块的视频帧的图像组GOP后添加补充增强信息SEI，在SEI中添加运动信息，按照编码标准，将运动信息添加到视频流中，即获取编码后的视频图像，其中，编码后视频流为H264或者H265码流。
需要说明的是，常见的H264和H265视频编码标准，都定义了类型为SEI的NAL。比如H264中，每个SEI消息都有一个payloadType，当payloadType为5时，sei_playload可以使用户自定义数据，那么就可以利用它来传输运动信息，这种发送方式的优势是能够将运动信息和视频流同步发送到播放端设备。
步骤S51，向播放端设备发送编码后的视频图像。
通过网络将编码后的视频图像发送到播放端视频，通过解码器来解析接收到的视频图像，也可以利用这个解码器对运动信息进行解码提取，即便播放端设备没有实时解码，只需要对包含SEI单元的信息进行解码提取即可，运算量很小。
可选地，向播放端设备发送编码后的视频图像，包括：向播放端设备发送视频图像中包含运动块的视频帧。其中，如果当前GOP没有检测到运动块，则不向播放端设备发送该GOP，也可有效减少数据传输量，提高编码端设备的运算效率。
请参照图6，为本申请另一实施例提供的监控视频播放方法，应用于播放端设备，下面将对图6所示的具体流程做详细阐述。
步骤S60，接收编码端设备发送的视频图像对应的运动信息。
其中，上述运动信息包括：视频图像中的运动块、以及各运动块的位置信息、时间信息。
播放端设备接收编码端设备发送的视频图像对应的运动信息，便于进行后续的操作需求。
步骤S61，按照预设格式，存储上述运动信息。
通常，对于监控视频***，需要将近期的视频图像存储起来，便于用户查看，保存的时长，用户可以结合视频分辨率、硬盘大小来进行设置。当播放端设备中的存储的视频图像超出用户设置的时长，则可以将过期的视频序列清除，可有效降低播放端设备的运算负担，提高播放端设备的运算效率。
具体的，按照预设格式，存储上述运动信息，该运动信息可以是实时采集数据，也可以是分析处理后的信息，例如在某些监控视频场景下发送报警信息、提示信息等，在此不具体限制。本申请实施例不对场景做限制，可以应用于各种监控视频的场景。
步骤S62，接收视频查看指令。
其中，该视频查看指令包括：待查看时间信息、区域位置信息。
具体的，视频查看指令包括但不限于待查看时间信息、区域位置信息，在此不做具体限制，还可以包括区域位置大小等。
步骤S63，根据视频查看指令、运动信息，播放视频图像中待查看时间信息、区域位置信息对应的视频帧。
在接收到视频查看指令后，可选地，对区域位置信息对应的链表进行遍历，输出位于待查看时间信息、区域位置信息对应的所有视频帧，用户可以依次点击查找的所有视频帧，可以快速找到目标帧信息。
综上所述，本发明实施例提供的一种监控视频播放方法，通过接收编码端设备发送的视频图像对应的运动信息，该运动信息包括：视频图像中的运动块、以及各运动块的位置信息、时间信息，以及按照预设格式，存储上述运动信息，然后，接收视频查看指令，该视频查看指令包括：待查看时间信息、区域位置信息，并根据该视频查看指令、运动信息，播放视频图像中待查看时间信息、区域位置信息对应的视频帧，以便用户能够快速监控到目标帧信息，提高了查看效率，且不会对编码器的配置有任何限制。
例如，按照预设格式，存储运动信息，包括：将运动信息按照对应的时间信息写入链表的不同节点中。
具体的，可以通过数组以及链表的形式存储近段时间视频中每个区域的运动情况，并进行不断更新，C++语句示例如下。
初始化：链表中结点定义为：
Figure BDA0002397198570000141
Figure BDA0002397198570000151
节点value的值记录的是运动信息中的时间信息。
Next会指向下一个运动信息时刻。
数组定义为：Node motionInfo[blkNum]，存放运动信息链表的头结点。
初化这个结构体数组全为空，表示每个运动块暂时还没有任何历史运动信息。
blkNum为一帧图像中划分的运动块的个数，每个运动块的大小blockSize可以为16*16，32*32，一般情况下，需要结合编码图像的分辨率来协调设定，分辨率越大，可以把运动块定义得大一些，在此不做具体限制，可以根据实际情况灵活设置运动块的大小。
相当于数组中存放的是一个链表的头节点，如果motionInfo[1]为0，则表示ID为1的运动块，在对应时间内是一直处于静止状态，如果motionInfo[2]为1，则表示ID为2的运动块，在对应时间内是存在运动物体。
在对运动信息进行存储时，也可以对增加新的运动信息或者删除过期的运动信息，具体如下。
增加：当编码端设备发送过来的运动信息指示当前时间段检测到若干个运动块的信息，则在数组中所有运动块的头节点后增加新的节点，新节点的值就是传过来的时间信息。
删除：结合播放端设备接收到的视频查看指令，可以将指定保存时长之前的运动信息进行删除，具体的，可以从数组中每个运动块对应的头节点开始遍历，如果时间戳位于保存时长段之前，则删除该节点，且用更新后的头节点将数组中value和Node*next替换，由于接收到的运动信息中的时间信息是按照逐步递增的顺序，所以当检测到保存时间信息内的节点时，就不必要继续往后查找其他的运动信息。
请参照图7，为本申请实施例提供的监控视频播放方法，根据视频查看指令、运动信息，播放视频图像中待查看时间信息、区域位置信息对应的视频帧，具体步骤如图7所示，下面做详细阐述。
步骤S71，根据视频查看指令、运动信息，查找区域位置信息对应的备选运动块。
在本实施例中，假设，接收视频查看指令，其中，待查看时间信息设置为前天晚上八点到今天早上八点，区域位置信息设置为甲业主车的区域，例如，区域位置信息对应到以下位置的运动块：
Figure BDA0002397198570000161
首先，对motionInfo[]数组中对应运动块位置进行筛选，例如，如果motionInfo[20]的value为0，则这个运动块一直处于静止状态，就将该运动块进行剔除，如果motionInfo[40]的value为非0，则这个运动块存在运动物体，将该运动块进行保留，经过这个筛选，假设保留下来的运动块是40/41/60/61。
步骤S72，在该备选运动块中，查找时间信息所对应时间范围内包含运动物体的目标运动块。
然后，根据保留下来的运动块是40/41/60/61，再结合时间信息进行筛选，假设motionInfo[40]为头节点的整个链表中，所有value都不在待查看时间信息内，则排除该区域位置，如果在motionInfo[41]中，发现满足待查看时间信息，则记录下来，然后在motionInfo[60]中，发现满足待查看时间信息，则继续记录下来，如果与motionInfo[41]记录的时间信息一致，就不需要重复记录，经过筛选，就可以把满足待查看时间信息、区域位置信息，将存在运动信息的所有时间戳筛选下来，即根据用户设置的前天晚上八点到今天早上八点，以及在业主车的周围这个区域，存在运动信息的所有时间戳。
步骤S73，输出并播放目标运动块对应的视频帧。
最后，用户在播放端设备上逐一播放查找的目标运动块对应的视频帧，可以快速获取到目标信息。
综上所述，本发明实施例提供的一种监控视频编码及播放方法，通过采用预设算法对采集的视频图像进行运动物体检测，获取运动信息，该运动信息包括：视频图像中的运动块、以及各运动块的位置信息、时间信息，并向播放端设备发送该运动信息，在播放端按照预设格式，存储该运动信息，以及根据视频查看指令，播放该视频图像中待查看时间信息、区域位置信息对应的视频帧，输出并播放目标运动块对应的视频帧，从而能够在不影响原有视频编码质量的前提下，根据视频查看指令和运动信息可以快速查找到目标视频帧，大大地提高了查看监控视频的效率。
请参照图8，是本申请一实例提供的监控视频编码装置的结构示意图，包括运动检测模块710及编码模块720。
其中，运动检测模块710，用于采用预设算法，对采集的视频图像进行运动物体检测，获取运动信息，上述运动信息包括：视频图像中的运动块、以及各运动块的位置信息、时间信息。
编码模块720，用于向播放端设备发送上述运动信息，以使所述播放端设备根据所述运动信息查找对应位置和时间的视频帧。
可选地，编码模块720，具体用于：将上述运动信息编码至视频图像中，获取编码后的视频图像；向播放端设备发送编码后的视频图像。
可选地，编码模块720，具体用于：在存在运动块的视频帧的图像组GOP后添加补充增强信息SEI；在SEI中添加运动信息。
可选地，编码模块720，用于向播放端设备发送视频图像中包含运动块的视频帧。
请参照图9，是本申请另一实例提供的监控视频播放装置的结构示意图，包括：接收模块910、存储模块920、查看模块930及播放模块940。
接收模块910，用于接收编码端设备发送的视频图像对应的运动信息，上述运动信息包括：视频图像中的运动块、以及各运动块的位置信息、时间信息。
存储模块920，用于按照预设格式，存储上述运动信息。
查看模块930，用于接收视频查看指令，该视频查看指令包括：待查看时间信息、区域位置信息。
播放模块940，用于根据该视频查看指令、上述运动信息，播放该视频图像中待查看时间信息、区域位置信息对应的视频帧。
可选地，存储模块920，具体用于：将上述运动信息按照对应的时间信息写入链表的不同节点中。
可选地，播放模块940，具体用于：根据视频查看指令、运动信息，查找区域位置信息对应的备选运动块；在备选运动块中，查找时间信息所对应时间范围内包含运动物体的目标运动块；输出并播放目标运动块对应的视频帧。
上述装置用于执行前述实施例提供的方法，其实现原理和技术效果类似，在此不再赘述。
以上这些模块可以是被配置成实施以上方法的一个或多个集成电路，例如：一个或多个特定集成电路(Application Specific Integrated Circuit，简称ASIC)，或，一个或多个微处理器(digital singnal processor，简称DSP)，或，一个或者多个现场可编程门阵列(Field Programmable Gate Array，简称FPGA)等。再如，当以上某个模块通过处理元件调度程序代码的形式实现时，该处理元件可以是通用处理器，例如中央处理器(CentralProcessing Unit，简称CPU)或其它可以调用程序代码的处理器。再如，这些模块可以集成在一起，以片上***(system-on-a-chip，简称SOC)的形式实现。
请参考图10，为本申请另一实施例提供的监控视频编码及播放***结构示意图，请结合图10所示，监控视频编码及播放***包括：上述编码端设备和上述播放端设备，其中，编码端包括：运动检测模块01和编码模块02，播放端包括解码器03、运动区域维护模块04、用户配置模块05、视频存储模块06、候选点提取模块07和视频播放模块08，下面将对图10所示的监控视频编码及播放***工作流程做详细阐述。
具体的，编码端将采集的视频图像发送给运动检测模块01，通过预设算法对采集的视频图像进行运动物体检测获取运动信息，例如，采用高斯背景建模来检测视频图像中的每一帧图像中对应的运动块个数以及运动块的位置信息，可以通过两种方式将获取的运动信息发送到播放端。
其中，第一种，可以将运动信息先发送到编码模块02，即将运动信息编码到视频流中，将运动信息和视频流信息一同发送到播放端，并分两路存储，第一路是通过解码器03解析提取运动信息，并发送到运动区域维护模块04，以便进行后续监控视频相关处理，第二路是直接存放到视频存储模块06。
第二种，请参考图11，为本申请另一实施例提供的监控视频编码及播放***结构示意图，将运动信息直接发送到播放端中的运动区域维护模块04，编码模块02将采集的视频流信息发送到播放端的视频存储模块06，即视频流信息和运动信息分开发送到播放端不同模块。
运动区域维护模块04，用于通过数组以及链表的形式维护近段时间视频图像中的运动情况，并不断更新，增加新的运动信息或者删除过期的运动信息。
用户配置模块05是用于接收用户输入视频查看指令，视频查看指令可以包括：待查看时间信息、区域位置信息，然后候选点提取根据用户配置模块05输入的视频查看指令中的区域位置信息将对位于区域位置信息的所有运动块对应的链表进行遍历，输出位于待查看时间信息内处于运动状态的所有时间点的视频帧。
视频播放模块08，可以播放视频图像中待查看时间信息、区域位置信息对应的视频帧。
假设，业主甲从昨天晚上八点到今天早上八点这一时间段内把车停在小区停车场，开车的时候发现车辆被人为破坏，可以根据待查看时间信息、区域位置信息来查看监控视频，业主可以在用户配置模块05先框选出的车以及车的周边的位置信息，假设，该区域信息占了整个监控视场的十分之一且平均有十分之一的时间摄像头所在视野存在运动物体，根据用户输入的12小时的待查看时间信息及框选的区域位置信息后，***筛选出来的对应的视频帧时常为12*(1/10)*(1/10)，等于0.12小时，即业主甲在视频播放模块大约播放查看七分钟十二秒的视频，就可快速查看完业主车辆周围存在运动物体的所有视频，提高了查看监控视频的效率。
图12为本申请一实施例提供的电子设备的结构示意图，该电子设备可以集成于终端设备或者终端设备的芯片，该终端可以是具备数据处理功能的计算设备。
该电子设备包括：处理器901、存储器902。
存储器902用于存储程序，处理器901调用存储器902存储的程序，以执行上述方法实施例。具体实现方式和技术效果类似，这里不再赘述。
可选地，本发明还提供一种存储介质，例如计算机可读存储介质，包括程序，该程序在被处理器执行时用于执行上述方法实施例。
在本发明所提供的几个实施例中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个***，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。
上述以软件功能单元的形式实现的集成的单元，可以存储在一个计算机可读取存储介质中。上述软件功能单元存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)或处理器(英文：processor)执行本发明各个实施例所述方法的部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(英文：Read-Only Memory，简称：ROM)、随机存取存储器(英文：Random Access Memory，简称：RAM)、磁碟或者光盘等各种可以存储程序代码的介质。

Claims (11)

1.一种监控视频编码方法，其特征在于，应用于编码端设备，所述方法包括：
采用预设算法，对采集的视频图像进行运动物体检测，获取运动信息，所述运动信息包括：所述视频图像中的运动块、以及各运动块的位置信息、时间信息；
向播放端设备发送所述运动信息，以使所述播放端设备根据所述运动信息查找对应位置和时间的视频帧。
2.如权利要求1所述的方法，其特征在于，所述向播放端设备发送所述运动信息，包括：
将所述运动信息编码至所述视频图像中，获取编码后的视频图像；
向所述播放端设备发送所述编码后的视频图像。
3.如权利要求2所述的方法，其特征在于，所述将所述运动信息编码至所述视频图像中，获取编码后的视频图像，包括：
在存在运动块的视频帧的图像组GOP后添加补充增强信息SEI；
在所述SEI中添加所述运动信息。
4.如权利要求2或3所述的方法，其特征在于，所述向所述播放端设备发送所述编码后的视频图像，包括：
向所述播放端设备发送所述视频图像中包含所述运动块的视频帧。
5.一种监控视频播放方法，其特征在于，应用于播放端设备，所述方法包括：
接收编码端设备发送的视频图像对应的运动信息，所述运动信息包括：所述视频图像中的运动块、以及各运动块的位置信息、时间信息；
按照预设格式，存储所述运动信息；
接收视频查看指令，所述视频查看指令包括：待查看时间信息、区域位置信息；
根据所述视频查看指令、所述运动信息，播放所述视频图像中所述待查看时间信息、区域位置信息对应的视频帧。
6.如权利要求5所述的方法，其特征在于，所述按照预设格式，存储所述运动信息，包括：
将所述运动信息按照对应的时间信息写入链表的不同节点中。
7.如权利要求5或6所述的方法，其特征在于，所述根据所述视频查看指令、所述运动信息，播放所述视频图像中所述待查看时间信息、区域位置信息对应的视频帧，包括：
根据所述视频查看指令、所述运动信息，查找所述区域位置信息对应的备选运动块；
在所述备选运动块中，查找所述时间信息所对应时间范围内包含运动物体的目标运动块；
输出并播放所述目标运动块对应的视频帧。
8.一种监控视频编码装置，其特征在于，应用于编码端设备，所述装置包括运动检测模块及编码模块；
所述运动检测模块，用于采用预设算法，对采集的视频图像进行运动物体检测，获取运动信息，所述运动信息包括：所述视频图像中的运动块、以及各运动块的位置信息、时间信息；
所述编码模块，用于向播放端设备发送所述运动信息，以使所述播放端设备根据所述运动信息查找对应位置和时间的视频帧。
9.一种监控视频播放装置，其特征在于，应用于播放端设备，所述装置包括：接收模块、存储模块、查看模块及播放模块；
所述接收模块，用于接收编码端设备发送的视频图像对应的运动信息，所述运动信息包括：所述视频图像中的运动块、以及各运动块的位置信息、时间信息；
所述存储模块，用于按照预设格式，存储所述运动信息；
所述查看模块，用于接收视频查看指令，所述视频查看指令包括：待查看时间信息、区域位置信息；
所述播放模块，用于根据所述视频查看指令、所述运动信息，播放所述视频图像中所述待查看时间信息、区域位置信息对应的视频帧。
10.一种电子设备，其特征在于，包括：处理器、存储介质和总线，所述存储介质存储有所述处理器可执行的程序指令，当电子设备运行时，所述处理器与所述存储介质之间通过总线通信，所述处理器执行所述程序指令，执行如权利要求1至7任一所述的方法。
11.一种存储介质，其特征在于，所述存储介质上存储有计算机程序，所述计算机程序被处理器运行时，执行如权利要求1至7任一所述的方法。
CN202010137454.9A 2020-03-02 2020-03-02 监控视频编码及播放方法、装置、电子设备及存储介质 Pending CN111277800A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010137454.9A CN111277800A (zh) 2020-03-02 2020-03-02 监控视频编码及播放方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010137454.9A CN111277800A (zh) 2020-03-02 2020-03-02 监控视频编码及播放方法、装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN111277800A true CN111277800A (zh) 2020-06-12

Family

ID=71000427

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010137454.9A Pending CN111277800A (zh) 2020-03-02 2020-03-02 监控视频编码及播放方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN111277800A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111949825A (zh) * 2020-08-21 2020-11-17 上海连尚网络科技有限公司 在视频中添加和显示物品信息的方法、电子设备及存储介质
CN112333502A (zh) * 2020-07-30 2021-02-05 深圳Tcl新技术有限公司 智能电视显示方法、智能电视及计算机可读存储介质
CN112818165A (zh) * 2021-01-18 2021-05-18 长沙海信智能***研究院有限公司 数据处理方法、装置、设备及存储介质
CN114374858A (zh) * 2022-01-14 2022-04-19 京东方科技集团股份有限公司 多播放端***及其视频拼接方法和装置

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI232675B (en) * 2003-12-02 2005-05-11 Univ Nat Chiao Tung Video compression device and method
CN101339561A (zh) * 2008-08-07 2009-01-07 北京中星微电子有限公司 一种监控视频图像的检索方法、装置和监控***
CN101742286A (zh) * 2008-11-11 2010-06-16 北京中星微电子有限公司 视频编、解码方法和视频编、解码装置
CN103020624A (zh) * 2011-09-23 2013-04-03 杭州海康威视***技术有限公司 混合车道监控视频智能标记、检索回放方法及其装置
CN106060652A (zh) * 2016-06-08 2016-10-26 北京中星微电子有限公司 一种视频码流中全景信息的标识方法和标识装置
CN106385562A (zh) * 2016-09-23 2017-02-08 浙江宇视科技有限公司 一种视频摘要生成方法、装置及视频监控***
CN106713909A (zh) * 2016-11-16 2017-05-24 广州弘度信息科技有限公司 一种视频编码方法、装置及***
CN108235113A (zh) * 2016-12-14 2018-06-29 上海交通大学 一种全景视频渲染和呈现属性指示方法及***
CN108289194A (zh) * 2017-12-28 2018-07-17 天津天地伟业信息***集成有限公司 录像快速回放方法和装置
US10469750B1 (en) * 2018-05-22 2019-11-05 BioForce Analytics LLC Method for embedding motion data of an object into a video file to allow for synchronized visualization of the motion data upon playback of the video file

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI232675B (en) * 2003-12-02 2005-05-11 Univ Nat Chiao Tung Video compression device and method
CN101339561A (zh) * 2008-08-07 2009-01-07 北京中星微电子有限公司 一种监控视频图像的检索方法、装置和监控***
CN101742286A (zh) * 2008-11-11 2010-06-16 北京中星微电子有限公司 视频编、解码方法和视频编、解码装置
CN103020624A (zh) * 2011-09-23 2013-04-03 杭州海康威视***技术有限公司 混合车道监控视频智能标记、检索回放方法及其装置
CN106060652A (zh) * 2016-06-08 2016-10-26 北京中星微电子有限公司 一种视频码流中全景信息的标识方法和标识装置
CN106385562A (zh) * 2016-09-23 2017-02-08 浙江宇视科技有限公司 一种视频摘要生成方法、装置及视频监控***
CN106713909A (zh) * 2016-11-16 2017-05-24 广州弘度信息科技有限公司 一种视频编码方法、装置及***
CN108235113A (zh) * 2016-12-14 2018-06-29 上海交通大学 一种全景视频渲染和呈现属性指示方法及***
CN108289194A (zh) * 2017-12-28 2018-07-17 天津天地伟业信息***集成有限公司 录像快速回放方法和装置
US10469750B1 (en) * 2018-05-22 2019-11-05 BioForce Analytics LLC Method for embedding motion data of an object into a video file to allow for synchronized visualization of the motion data upon playback of the video file

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112333502A (zh) * 2020-07-30 2021-02-05 深圳Tcl新技术有限公司 智能电视显示方法、智能电视及计算机可读存储介质
CN111949825A (zh) * 2020-08-21 2020-11-17 上海连尚网络科技有限公司 在视频中添加和显示物品信息的方法、电子设备及存储介质
CN111949825B (zh) * 2020-08-21 2024-05-28 上海连尚网络科技有限公司 在视频中添加和显示物品信息的方法、电子设备及存储介质
CN112818165A (zh) * 2021-01-18 2021-05-18 长沙海信智能***研究院有限公司 数据处理方法、装置、设备及存储介质
CN114374858A (zh) * 2022-01-14 2022-04-19 京东方科技集团股份有限公司 多播放端***及其视频拼接方法和装置

Similar Documents

Publication Publication Date Title
CN111277800A (zh) 监控视频编码及播放方法、装置、电子设备及存储介质
US20210350828A1 (en) Reference and Non-Reference Video Quality Evaluation
US6646676B1 (en) Networked surveillance and control system
JP4099973B2 (ja) 映像データ送信方法及び映像データ受信方法、並びに映像監視システム
JP3719933B2 (ja) 階層的ディジタル動画要約及び閲覧方法、並びにその装置
US9756348B2 (en) Method, device and system for producing a merged digital video sequence
AU2005272046B2 (en) Method and apparatus for detecting motion in MPEG video streams
CN101860731B (zh) 视频信息处理方法、***及服务器
CN108259934B (zh) 用于回放所记录的视频的方法和装置
US6842540B1 (en) Surveillance system
US20120195363A1 (en) Video analytics with pre-processing at the source end
CN107800989B (zh) 基于动态帧率检测的视频显示方法、***及网络录像机
WO2017184257A1 (en) Methods and systems of generating a background picture for video coding
CN101448146A (zh) 视频监控***中的前端设备及前端设备中的信号处理方法
CN113794903A (zh) 视频图像处理方法、装置及服务器
EP1333682A1 (en) Motion detection from an encoded image bit stream
CN113645448A (zh) 一种适用于指挥调度的视频解码方法和装置
CN109194965B (zh) 处理方法、处理装置、显示方法和显示装置
KR20190021993A (ko) 압축영상에 대한 신택스 기반의 이동객체 영역 추출 방법
CN104980763B (zh) 一种视频码流、视频编解码方法及装置
CN114531528B (zh) 用于视频处理的方法和图像处理设备
CN117119143B (zh) 基于全息视频的视频侦查***和方法、设备及存储介质
CN115695879B (zh) 一种视频播放方法、***、装置、电子设备及存储介质
US20240244229A1 (en) Systems and methods for predictive coding
US20220109866A1 (en) Quality-sparing code burn-in for video

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20200612

RJ01 Rejection of invention patent application after publication