CN110191322A - 一种共享预警的视频监控方法及*** - Google Patents

一种共享预警的视频监控方法及*** Download PDF

Info

Publication number
CN110191322A
CN110191322A CN201910488429.2A CN201910488429A CN110191322A CN 110191322 A CN110191322 A CN 110191322A CN 201910488429 A CN201910488429 A CN 201910488429A CN 110191322 A CN110191322 A CN 110191322A
Authority
CN
China
Prior art keywords
video
early warning
dynamic
establishes
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910488429.2A
Other languages
English (en)
Other versions
CN110191322B (zh
Inventor
付文元
郑勇
崔晓章
魏伟
刘颖
龙佩翔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chongqing Liangjiang New Area Management Committee
Original Assignee
Chongqing Liangjiang New Area Management Committee
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chongqing Liangjiang New Area Management Committee filed Critical Chongqing Liangjiang New Area Management Committee
Priority to CN201910488429.2A priority Critical patent/CN110191322B/zh
Publication of CN110191322A publication Critical patent/CN110191322A/zh
Application granted granted Critical
Publication of CN110191322B publication Critical patent/CN110191322B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Alarm Systems (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

本发明公开了一种共享预警的视频监控方法，包括以下步骤:步骤A，建立视频共享，步骤A1，针对视频数据类型建立数据库；步骤A2，基于该数据库设定数码转换方式；步骤B，建立预警机制，步骤B1，建立用于视频结构化的数据分析模型；步骤B2，基于所述分析模型进行区域划分，获得若干子区域，将子区域化整为可数的单位点；步骤B3，基于所述子区域建立动态捕捉算法；步骤B4，针对动态捕捉算法设定触发于不同条件下的阈值，每个阈值的临界反应会产生一条警报。本发明实现不同数据格式的共享接入，提高了实用性，同时对多种环境进行智能监控，极大提高了视频监控的处理能力，节约了人力成本。

Description

一种共享预警的视频监控方法及***
技术领域
本发明涉及视频监控领域，尤其涉及一种共享预警的视频监控方法及***。
背景技术
目前，对于视频监控***的运维工作主要是靠人工检测和处理，监测难度大，故障处理不及时，而且运维工作量巨大，导致运维的成本不断增加，使视频监控***的使用效果大打折扣，严重影响了现场监控工作的有效开展。因此，提高视频监控***运维工作的信息化水平，建设信息化的视频监控运维管理***已成为视频监控行业发展的趋势。通常，监控运维***一般是通过有限的人力去巡查庞大并迅速增长的视频监控设备，极不具有现实意义，使得视频监控设备在运维保障服务方面产生以下各种问题：故障排除延迟严重，事件无法及时响应；设备模式标准多样，维保模式效率低下；现行维保技术落后，工程人员信息不畅等问题。
如图1所示，现有技术中对于视频监控***的设置一般是将摄像头连接到NVR(NetworkVideo Recorder即网络硬盘录像机)上，再将NVR注册到流媒体服务器，然后通过流媒体服务器厂商提供的监控终端查看视频。但是因为流媒体服务器不能转换不同的视频数据格式，由此，对于数据的应用必须是统一的标准格式，对接的设备也是固定的，设备适应范围狭窄；同时***功能为单一的实时视频实现，工作人员需全时监控监控设备，人员劳动强度大，极易引起疲劳，进而导致监管疏忽，以当失火、漏电等险情、人员失和打斗、非法人员闯入、人员病发等意外发生时，不能及时地监控到，以至于发生不可估量的后果。
综上所述，本领域亟待一种解决上述问题的视频监控方法及***。
发明内容
本发明的目的在于提供一种共享预警的视频监控方法及***，实现不同数据格式的共享接入，提高了实用性，同时对多种环境进行智能监控，极大提高了视频监控的处理能力，节约了人力成本。
本发明解决其技术问题所采用的技术方案是：一种共享预警的视频监控方法，包括以下步骤:
步骤A，建立视频共享，
步骤A1，针对视频数据类型建立数据库；
步骤A2，基于该数据库设定数码转换方式；
步骤B，建立预警机制，
步骤B1，建立用于视频结构化的数据分析模型；
步骤B2，基于所述分析模型进行区域划分，获得若干子区域，将子区域化整为可数的单位点；
步骤B3，基于所述子区域建立动态捕捉算法；
步骤B4，针对动态捕捉算法设定触发于不同条件下的阈值，每个阈值的临界反应会产生一条警报。
优选的，所述步骤A2中的数码转换方式包括将不同视频数据一致转换成SDI信号。
优选的，所述步骤B1中的数据分析模型为动态处理模块，其包括空间和时间轴的建立，其中，空间轴为为三维，包括X轴、Y轴和Z轴，时间轴以帧为单位。
优选的，所述步骤B2中的子区域包括数据块，所述单位点上的数据块排列成三维阵列的像素点。
优选的，所述步骤B3中的动态捕捉算法包括动态基值判断公式：
S＝ΔN-ΔM；
其中，i为时间初值，j为动态捕捉时间值，X、Y、Z分别为X轴、Y轴、Z轴上的对应域点，为i时间上的动作位移量，为j时间上的动作位移量，T为i至j时间段上的位移速度，S为动态位移距离，C为动态基值。
优选的，所述步骤B4中的不同条件包括根据特定事件定义的条件类型，每一件定义条件所对应的阈值均不同，该阈值用于与所述动态基值进行比对，一旦动态基值大于阈值，则触发警报。
本发明同时提供了一种共享预警的视频监控***，包括监管平台、供应商视频服务和工地现场视频设备，上述三者之间进行数据交互，监管平台包括数据采集模块和数据处理模块，供应商视频服务包括IPC、NVR、DVR、流媒体服务器、视频结构化分析服务器、中心管理服务器和存储管理服务器，工地现场视频设备包括摄像头。
优选的，包括所供应商视频服务向所述工地现场视频设备采集现场监控设备信息，而后经其处理提交监控设备信息至监管平台中的视频监控数据接口。
优选的，还包括所述监管平台向供应商视频服务中的视频播放接口发送请求获取视频播放地址，而后供应商视频服务将目标抓取指令发送至工地现场视频设备，工地现场视频设备将所抓取的现场视频流经供应商视频服务返回视频播放地址至监管平台中。
本发明的有益效果在于：通过数码转换实现不同视频数据的通用，使得视频设备的选择广泛，不再限制于固定设备的统一使用，极为方便，同时使得不同数据类型的视频共享于监控平台中，增强了实用性；通过预警机制的实现，使得监控工作智能化，进而提高了工作效率，节约了人力成本，加大了监管工作的安全性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将结合附图及实施例对本发明作进一步说明，下面描述中的附图仅仅是本发明的部分实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他附图：
图1为本发明背景技术中现有技术之一的结构示意图；
图2为本发明一种共享预警的视频监控***的模块结构示意图；
图3为本发明一种共享预警的视频监控***的另一模块结构示意图。
具体实施方式
为了使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的技术方案进行清楚、完整的描述，显然，所描述的实施例是本发明的部分实施例，而不是全部实施例。基于本发明的实施例，本领域普通技术人员在没有付出创造性劳动的前提下所获得的所有其他实施例，都属于本发明的保护范围。
在实施例1中，一种共享预警的视频监控方法，包括以下步骤:
步骤A，建立视频共享，
步骤A1，针对视频数据类型建立数据库；
步骤A2，基于该数据库设定数码转换方式；
步骤B，建立预警机制，
步骤B1，建立用于视频结构化的数据分析模型；
步骤B2，基于所述分析模型进行区域划分，获得若干子区域，将子区域化整为可数的单位点；
步骤B3，基于所述子区域建立动态捕捉算法；
步骤B4，针对动态捕捉算法设定触发于不同条件下的阈值，每个阈值的临界反应会产生一条警报。
进一步的，所述步骤A2中的数码转换方式包括将不同视频数据一致转换成SDI信号。在交换视频数据的过程中，包括将编码完成的视频数据解压缩为基带信号，根据传输情况进行再编码，并加以适当的封装，使用相同的接口协议，以流的方式，在不同的视频产品之间进行传输共享。其中，无论视频采集设备内部采用何种压缩编码方式，在下一接收端传输视频数据时，首先通过其内置的数据解码单元将视频数据解码送至SDI编码器，这种数据交换的前提是基于不同的设备之间建立相同协议的接口，如SDI接口，并设置相应的编解码服务端，同时使用按照一种可以共同识别的数据流作为中介进行视音频数据的交换。另外，在数据库与各节点的视频数据传输中采用分布式技术，能将存储计算指令分配到各个节点，避免由单个处理节点进行超负荷运算，大大提升数据存储、计算、检索速度。
进一步的，所述步骤B1中的数据分析模型为动态处理模块，其包括空间和时间轴的建立，其中，空间轴为为三维，包括X轴、Y轴和Z轴，时间轴以帧为单位。考虑到视频数据由非结构化的空间和时间数据组成，在此设立三维框架，并以时间帧为切换单位在每一帧之间对应三维空间关系，以此形成分析模型框架，进而以时间帧为动态变化关系的节点，形成动态空间关系架构。
进一步的，所述步骤B2中的子区域包括数据块，所述单位点上的数据块排列成三维阵列的像素点。在对视屏数据进行动态捕捉时，包括对每帧图像的静态分析，其中，包括计算每帧图像像素点的变化情况。
优选的，所述步骤B3中的动态捕捉算法包括动态基值判断公式：
S＝ΔN-ΔM；
其中，i为时间初值，j为动态捕捉时间值，X、Y、Z分别为X轴、Y轴、Z轴上的对应域点，为i时间上的动作位移量，为j时间上的动作位移量，T为i至j时间段上的位移速度，S为动态位移距离，C为动态基值。i值和j值相互循环替代，以保持时间上的连续性，同时防止捕捉时的动态关系跳帧。
进一步的，所述步骤B4中的不同条件包括根据特定事件定义的条件类型，每一件定义条件所对应的阈值均不同，该阈值用于与所述动态基值进行比对，一旦动态基值大于阈值，则触发警报。其中，触发的条件包括：1)人群的不正常聚集：2)人群的不正常滞留；3)两人以上不正常肢体行为或接触；4)两人以上持械对峙或斗殴；5)特殊人员(体型怪异、服装凸起等)出现；6)多人同时奔跑(同向或异向)；7)进入禁止进入区域；8)烟雾弥漫、火花溅起、光照过强、水流等，但是触发条件不限于上述类型。具体的，触发判断包括对像素点色彩、聚集范围、大小、距离、变化速度等的捕捉判断。每一条触发条件为对应一个预定好的阈值，动态捕捉算法把计算出的每一时帧间的动态基质与阈值警醒比较，若超出阈值，则在监控平台中形成一条警报，且该警报对应于所捕捉的视频中。
本发明同时提供了一种共享预警的视频监控***，如图2及3所示，包括监管平台、供应商视频服务和工地现场视频设备，上述三者之间进行数据交互，监管平台包括数据采集模块和数据处理模块，供应商视频服务包括IPC、NVR、DVR、流媒体服务器、视频结构化分析服务器、中心管理服务器和存储管理服务器，工地现场视频设备包括摄像头。数据采集模块包括视频监控数据接口，其用于数据的接收与发送；数据处理模块用于监控数据的处理，其包括外部操作端的接入，以及预警机制的提供；IPC、NVR、DVR用于接入流媒体服务器，然后将视频信息包括项目、通道号、获取视频流的地址等按照监管平台约定的签名规则发送到监管平台，监管平台在进行视频播放时，先根据监管平台约定的签名规则请求视频供应商之前发送的获取视频流的地址得到实时视频流播放地址，视频供应商会对该请求进行验证，以保证数据安全，然后再进行播放；视频结构化分析服务器、中心管理服务器和存储管理服务器用于配合预警机制的实现，同时实现数据转换和共享。
进一步的，包括所供应商视频服务向所述工地现场视频设备采集现场监控设备信息，而后经其处理提交监控设备信息至监管平台中的视频监控数据接口。
进一步的，还包括所述监管平台向供应商视频服务中的视频播放接口发送请求获取视频播放地址，而后供应商视频服务将目标抓取指令发送至工地现场视频设备，工地现场视频设备将所抓取的现场视频流经供应商视频服务返回视频播放地址至监管平台中。

Claims (9)

1.一种共享预警的视频监控方法，其特征在于，包括以下步骤：
步骤A，建立视频共享，
步骤A1，针对视频数据类型建立数据库；
步骤A2，基于该数据库设定数码转换方式；
步骤B，建立预警机制，
步骤B1，建立用于视频结构化的数据分析模型；
步骤B2，基于所述分析模型进行区域划分，获得若干子区域，将子区域化整为可数的单位点；
步骤B3，基于所述子区域建立动态捕捉算法；
步骤B4，针对动态捕捉算法设定触发于不同条件下的阈值，每个阈值的临界反应会产生一条警报。
2.根据权利要求1所述的共享预警的视频监控方法，其特征在于，所述步骤A2中的数码转换方式包括将不同视频数据一致转换成SDI信号。
3.根据权利要求1所述的共享预警的视频监控方法，其特征在于，所述步骤B1中的数据分析模型为动态处理模块，其包括空间和时间轴的建立，其中，空间轴为为三维，包括X轴、Y轴和Z轴，时间轴以帧为单位。
4.根据权利要求1所述的共享预警的视频监控方法，其特征在于，所述步骤B2中的子区域包括数据块，所述单位点上的数据块排列成三维阵列的像素点。
5.根据权利要求1所述的共享预警的视频监控方法，其特征在于，所述步骤B3中的动态捕捉算法包括动态基值判断公式：
S＝ΔN-ΔM；
其中，i为时间初值，j为动态捕捉时间值，X、Y、Z分别为X轴、Y轴、Z轴上的对应域点，ΔM为i时间上的动作位移量，ΔN为j时间上的动作位移量，T为i至j时间段上的位移速度，S为动态位移距离，C为动态基值。
6.根据权利要求1或5所述的共享预警的视频监控方法，其特征在于，所述步骤B4中的不同条件包括根据特定事件定义的条件类型，每一件定义条件所对应的阈值均不同，该阈值用于与所述动态基值进行比对，一旦动态基值大于阈值，则触发警报。
7.一种共享预警的视频监控***，其特征在于，包括监管平台、供应商视频服务和工地现场视频设备，上述三者之间进行数据交互，监管平台包括数据采集模块和数据处理模块，供应商视频服务包括IPC、NVR、DVR、流媒体服务器、视频结构化分析服务器、中心管理服务器和存储管理服务器，工地现场视频设备包括摄像头。
8.根据权利要求7所述的共享预警的视频监控***，其特征在于，包括所供应商视频服务向所述工地现场视频设备采集现场监控设备信息，而后经其处理提交监控设备信息至监管平台中的视频监控数据接口。
9.根据权利要求7或8所述的共享预警的视频监控***，其特征在于，还包括所述监管平台向供应商视频服务中的视频播放接口发送请求获取视频播放地址，而后供应商视频服务将目标抓取指令发送至工地现场视频设备，工地现场视频设备将所抓取的现场视频流经供应商视频服务返回视频播放地址至监管平台中。
CN201910488429.2A 2019-06-05 2019-06-05 一种共享预警的视频监控方法 Expired - Fee Related CN110191322B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910488429.2A CN110191322B (zh) 2019-06-05 2019-06-05 一种共享预警的视频监控方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910488429.2A CN110191322B (zh) 2019-06-05 2019-06-05 一种共享预警的视频监控方法

Publications (2)

Publication Number Publication Date
CN110191322A true CN110191322A (zh) 2019-08-30
CN110191322B CN110191322B (zh) 2021-06-22

Family

ID=67720711

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910488429.2A Expired - Fee Related CN110191322B (zh) 2019-06-05 2019-06-05 一种共享预警的视频监控方法

Country Status (1)

Country Link
CN (1) CN110191322B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112417668A (zh) * 2020-11-17 2021-02-26 甘肃省祁连山水源涵养林研究院 一种生态保护智能预警方法、装置及服务器

Citations (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1812421A (zh) * 2006-03-06 2006-08-02 ***通信集团公司 数据业务鉴权方法
CN1858551A (zh) * 2006-05-26 2006-11-08 浙江工业大学 基于全方位计算机视觉的工程车防盗报警***
CN101461178A (zh) * 2006-06-30 2009-06-17 Posdata株式会社 Dvr服务器和在基于网络的dvr***中控制对监控装置的访问的方法
CN201467360U (zh) * 2009-06-12 2010-05-12 上海新联纬讯科技发展有限公司 一种展览场地人员流量检测***
CN102098492A (zh) * 2009-12-11 2011-06-15 上海弘视通信技术有限公司 音视频联合分析的打架斗殴检测***及其检测方法
CN103079062A (zh) * 2013-02-05 2013-05-01 武汉科技大学 一种智能视频监控***
CN103530995A (zh) * 2013-10-12 2014-01-22 重庆邮电大学 基于目标空间关系约束的视频监控智能预警***及方法
CN103839373A (zh) * 2013-03-11 2014-06-04 成都百威讯科技有限责任公司 一种突发异常事件智能识别报警装置及报警***
WO2014110502A1 (en) * 2013-01-11 2014-07-17 The Regents Of The University Of Michigan Monitoring proximity of objects at construction jobsites via three-dimensional virtuality in real-time
CN105187796A (zh) * 2015-09-14 2015-12-23 北京奇虎科技有限公司 一种数据传输方法、装置及***
CN105763835A (zh) * 2014-12-14 2016-07-13 西安子竹电子科技有限公司 一种小区智能监控***
CN106303468A (zh) * 2016-11-02 2017-01-04 北京弘恒科技有限公司 事前预警智能识别报警***
CN106375721A (zh) * 2016-09-14 2017-02-01 重庆邮电大学 一种基于云平台的智能视频监控***
CN107169448A (zh) * 2017-05-12 2017-09-15 甘肃政法学院 一种融合处理有效信息并动态捕捉及预警方法
CN108073858A (zh) * 2016-11-14 2018-05-25 北京航天长峰科技工业集团有限公司 基于深度摄像机的人群聚集监控识别***
US20190371144A1 (en) * 2018-05-31 2019-12-05 Henry Shu Method and system for object motion and activity detection

Patent Citations (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1812421A (zh) * 2006-03-06 2006-08-02 ***通信集团公司 数据业务鉴权方法
CN1858551A (zh) * 2006-05-26 2006-11-08 浙江工业大学 基于全方位计算机视觉的工程车防盗报警***
CN101461178A (zh) * 2006-06-30 2009-06-17 Posdata株式会社 Dvr服务器和在基于网络的dvr***中控制对监控装置的访问的方法
CN201467360U (zh) * 2009-06-12 2010-05-12 上海新联纬讯科技发展有限公司 一种展览场地人员流量检测***
CN102098492A (zh) * 2009-12-11 2011-06-15 上海弘视通信技术有限公司 音视频联合分析的打架斗殴检测***及其检测方法
WO2014110502A1 (en) * 2013-01-11 2014-07-17 The Regents Of The University Of Michigan Monitoring proximity of objects at construction jobsites via three-dimensional virtuality in real-time
CN103079062A (zh) * 2013-02-05 2013-05-01 武汉科技大学 一种智能视频监控***
CN103839373A (zh) * 2013-03-11 2014-06-04 成都百威讯科技有限责任公司 一种突发异常事件智能识别报警装置及报警***
CN103530995A (zh) * 2013-10-12 2014-01-22 重庆邮电大学 基于目标空间关系约束的视频监控智能预警***及方法
CN105763835A (zh) * 2014-12-14 2016-07-13 西安子竹电子科技有限公司 一种小区智能监控***
CN105187796A (zh) * 2015-09-14 2015-12-23 北京奇虎科技有限公司 一种数据传输方法、装置及***
CN106375721A (zh) * 2016-09-14 2017-02-01 重庆邮电大学 一种基于云平台的智能视频监控***
CN106303468A (zh) * 2016-11-02 2017-01-04 北京弘恒科技有限公司 事前预警智能识别报警***
CN108073858A (zh) * 2016-11-14 2018-05-25 北京航天长峰科技工业集团有限公司 基于深度摄像机的人群聚集监控识别***
CN107169448A (zh) * 2017-05-12 2017-09-15 甘肃政法学院 一种融合处理有效信息并动态捕捉及预警方法
US20190371144A1 (en) * 2018-05-31 2019-12-05 Henry Shu Method and system for object motion and activity detection

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
王军华: "智能视频监控***中运动行人分析的研究", 《中国优秀硕士学位论文全文库信息科技辑》 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112417668A (zh) * 2020-11-17 2021-02-26 甘肃省祁连山水源涵养林研究院 一种生态保护智能预警方法、装置及服务器

Also Published As

Publication number Publication date
CN110191322B (zh) 2021-06-22

Similar Documents

Publication Publication Date Title
CN206894809U (zh) 电力安全作业及运维智能监管***
CN108174165A (zh) 电力安全作业及运维智能监管***及方法
CN107277442A (zh) 一种基于智能全景实时视频vr巡检监控装置及监控方法
CN104394389A (zh) 一种智能分布式视频监视***
CN104079885A (zh) 无人监守联动跟踪的网络摄像方法及装置
CN206075468U (zh) 视频监控与消防报警联动***
CN102300082A (zh) 一种核电站数字视频监控***及方法
CN103795987B (zh) 嵌入式视频采集处理***及其实现方法
CN104375485A (zh) 一种用于变配电安全生产的辅助监控***及其监控方法
CN102073844A (zh) 智能监控***和方法
CN107231546A (zh) 基于云安全服务器的自主追踪移动特征的家用监控***
CN104092989A (zh) 基于无线网络视频传输的配电线路运检装置
CN101976888A (zh) 变电站视频及环境监控主站***
CN115297305A (zh) 一种基于边缘计算的多视频流安全风险预警***及方法
CN110188617A (zh) 一种机房智能监控方法及***
CN211184122U (zh) 铁路作业安全防控和大客流预警联动的智能视频分析***
CN110191322A (zh) 一种共享预警的视频监控方法及***
CN102355575A (zh) 一种具有预警功能的分布式视频监控装置
CN110241791A (zh) 一种基于gis的智能水闸群远程监控***
CN103454228B (zh) 采用运动侦测技术的烟气黑度监控***
CN207589029U (zh) 一种智能移动全景视频图像监控***
CN110809138B (zh) 一种基于无反馈光的视频单向传输***
CN209947072U (zh) 一种医警联动报警装置及其应用***
CN110519565A (zh) 监控方法及装置、存储介质、处理器
CN209845008U (zh) 基于片上***的集群监控***

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20210622