CN108055507A - 一种用于视频分析***通信的数据组包方法 - Google Patents

一种用于视频分析***通信的数据组包方法 Download PDF

Info

Publication number
CN108055507A
CN108055507A CN201711375920.1A CN201711375920A CN108055507A CN 108055507 A CN108055507 A CN 108055507A CN 201711375920 A CN201711375920 A CN 201711375920A CN 108055507 A CN108055507 A CN 108055507A
Authority
CN
China
Prior art keywords
metadata
video
intelligent
target
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201711375920.1A
Other languages
English (en)
Inventor
刘念林
邱吉刚
吴新勇
李汶隆
李红波
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sichuan Jiuzhou Electric Group Co Ltd
Original Assignee
Sichuan Jiuzhou Electric Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sichuan Jiuzhou Electric Group Co Ltd filed Critical Sichuan Jiuzhou Electric Group Co Ltd
Priority to CN201711375920.1A priority Critical patent/CN108055507A/zh
Publication of CN108055507A publication Critical patent/CN108055507A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/144Movement detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种用于视频分析***通信的数据组包方法,所述方法包括:采集端、发送端、用户终端,采集端用于智能视频元数据的采集、编码,发送端用于各个不同采集端的视频元数据的组包,然后将数据包发送到用户终端,用户终端用于对智能元数据的解析,活动目标的提取以及报警信息的展示;第一步:采集端为各个不同厂家的视频智能数据采集模块,采集视频智能元数据;第二步:通过厂家提供的接口获取智能元数据,并将元数据进行组包,并将组包通过一定的协议发送给用户终端,更快速的在海量视频信息中进行例如活动目标查找、视频摘要检索等智能应用,能够灵活的依据实际视频分析应用的类型进行扩展,具有良好的扩展性和兼容性。

Description

一种用于视频分析***通信的数据组包方法
技术领域
本发明涉及视频分析领域,具体地,涉及一种用于视频分析***通信的数据组包方法。
背景技术
视频分析在安全和监控上的应用正日趋普及。视频分析由最初的基于PC的应用,发展到可以嵌入到视频平台的多个设备中(如摄像机、编码器、存储器等)。智能视频分析可以自动分析和抽取视频源中的关键信息,极大地提高了视频监控的效率,然而在实际应用中,视频智能分析***要兼容众多厂家的智能分析设备或者智能分析平台,每个厂家的数据接口不一致,***接收到的智能元数据形式多样化,无法满足设备厂家与视频分析***之间稳定高效的通信),迫切需要定义提供一种兼容性好、扩展性强的智能元数据组包方法。
现有技术的主要缺点:(1)***通信时数据组包方法不具备灵活的扩展性和兼容性;(2)在海量视频资源中查找活动目标、显示警报信息等视频分析应用时效率低下,耗费大量的时间和物理资源;(3)没有统一的元数据结构,数据碎片化严重,智能分析的结果不能很好地传递和保存,不能形成统一有效地管理。
发明内容
本发明提供了一种用于视频分析***通信的数据组包方法,解决现有技术中各个厂家视频分析设备采集的智能元数据格式差异大,实际应用时耗费大量的时间和物理资源,本发明提供的视频分析通信数据组包方法,在数据组包时通过包含元数据的时间信息、目标信息和警报信息组成的多维度描述元数据的智能信息,更快速的在海量视频信息中进行例如活动目标查找、视频摘要检索等智能应用,同时,本发明提供的通信组包方法能够灵活的依据实际视频分析应用的类型进行扩展,具有良好的扩展性和兼容性。
为实现上述发明目的,本申请提供了一种用于视频分析***通信的数据组包方法,包括采集端、发送端、用户终端,其中采集端主要是用于智能视频元数据的采集、编码,发送端主要用于各个不同采集端的视频元数据的组包,然后将数据包发送到用户终端,用户终端主要用于对智能元数据的解析,活动目标的提取以及报警信息的展示。
第一步:采集端为各个不同厂家的视频智能数据采集模块,采集视频智能元数据;
第二步:通过厂家提供的接口获取智能元数据,并将元数据进行组包,并将包通过一定的协议发送给用户终端,其中,智能元数据组包结构包括:
主体结构tag_STMetaData,用于描述元数据的所有智能信息,tag_STMetaData包括:元数据的时间信息llBeginTime、活动目标信息arObjectInfo、报警信息arEventInfo、当前元数据包的开始标记lBeginFlag、当前元数据包的结束标记lEndFlag,产生元数据的通道号lChannel。
其中,本申请的技术方案具有以下特点:采用由通道编号、活动目标信息、报警事件信息组成的智能元数据结构,在视频***应用中针对接入不同的视频分析设备产生的智能元数据具有灵活的兼容性和扩展性;采用由目标编号、目标类型、目标位置信息、速度信息等组成的活动目标元数据结构;采用由报警编号、报警类型、报警事件规则设定参数、报警目标列表等组成的报警事件元数据结构。
进一步的,活动目标信息的结构tag_STMetaObjectInfo,包括:运动目标的类别lObjectType、运动方向及速度;当前目标数据开始标记、结束标记;运动目标编号;运动目标类型;目标图像特征数据;目标图像描述信息;目标信息运动方向用X/Y/Z坐标,目标信息的宽度、高度、厚度信息;目标信息各个运动方向的速度信息。
进一步的,运动方向用目标的X坐标lXPosition,Y坐标lYPosition,Z坐标lZPosition表示;目标宽度用lWidth表示、高度用lHeight表示、厚度用lZLength表示;运动目标X轴速度用lXSpeed表示、运动目标Y轴速度用lYSpeed表示、运动目标Z轴速度用lZSpeed表示。
进一步的,目标的速度能够换算为在X轴、Y轴或者Z轴上面的像素个数。
进一步的,目标图像信息用strObjectInfo表示。
进一步的,目标的图像特征数据arObjectInfo,包括:物体的颜色、纹理、直方图和人物姿态。
进一步的,中报警信息结构,用于描述报警事件和其相关联对象的行为和数据。
进一步的,报警信息结构STMetaAlarmInfo,包括:报警元数据开始标记lBeginFlag、结束标记lEndFlag;报警类型lEventType;报警编号lEventID,报警特征数据arEventInfo;当前事件规则设定参数arEventRuleInfo。
进一步的,活动目标编号列表arObjcetID,关联的所有运动目标编号;警报的触发时间llEventTime,警报的时间入点、时间出点。
第三步:用户终端对接收到视频元数据进行解析,提取活动目标信息和报警事件信息,并提交到相应的模块进行解码显示。
本申请提供的一个或多个技术方案,至少具有如下技术效果或优点:
(1)支持不同厂家智能分析设备或平台的智能元数据流,提高了视频分析***与智能设备之间的兼容性;(2)通过包含元数据的时间信息、目标信息和报警信息组成的多维度描述元数据的智能信息,更快速的在海量视频信息中进行例如活动目标查找、视频摘要检索等智能应用;(3)本发明提供的智能元数据流所包含的运动目标信息、报警事件信息结构随视频分析应用具有灵活的扩展性。
附图说明
此处所说明的附图用来提供对本发明实施例的进一步理解,构成本申请的一部分,并不构成对本发明实施例的限定;
图1是本申请中用于视频分析***智能元数据结构的结构示意图;
图2是本申请中元数据目标信息结构示意图;
图3是本申请中数据事件信息结构示意图;
图4为视频分析***内部通信流程示意图。
具体实施方式
本发明提供了一种用于视频分析***通信的数据组包方法,解决现有技术中各个厂家视频分析设备采集的智能元数据格式差异大,实际应用时耗费大量的时间和物理资源,本发明提供的视频分析通信数据组包方法,在数据组包时通过包含元数据的时间信息、目标信息和警报信息组成的多维度描述元数据的智能信息,更快速的在海量视频信息中进行例如活动目标查找、视频摘要检索等智能应用,同时,本发明提供的通信组包方法能够灵活的依据实际视频分析应用的类型进行扩展,具有良好的扩展性和兼容性。
为了能够更清楚地理解本发明的上述目的、特征和优点,下面结合附图和具体实施方式对本发明进行进一步的详细描述。需要说明的是,在相互不冲突的情况下,本申请的实施例及实施例中的特征可以相互组合。
在下面的描述中阐述了很多具体细节以便于充分理解本发明,但是,本发明还可以采用其他不同于在此描述范围内的其他方式来实施,因此,本发明的保护范围并不受下面公开的具体实施例的限制。
请参考图1-图4,本申请提供了一种用于视频分析***通信的数据组包方法,所述方法包括:
采集端、发送端、用户终端,采集端用于智能视频元数据的采集、编码,发送端用于各个不同采集端的视频元数据的组包,然后将数据包发送到用户终端,用户终端用于对智能元数据的解析,活动目标的提取以及报警信息的展示;
第一步:采集端为各个不同厂家的视频智能数据采集模块,采集视频智能元数据;
第二步:通过厂家提供的接口获取智能元数据,并将元数据进行组包,并将组包通过一定的协议发送给用户终端,其中,智能元数据组包结构包括:
(1)定义一个完整的智能元数据的主体结构tag_STMetaData,描述元数据的所有智能信息,它主要包含元数据的时间信息llBeginTime、活动目标信息arObjectInfo、报警信息arEventInfo、当前元数据包的开始标记lBeginFlag、当前元数据包的结束标记lEndFlag,产生元数据的通道号lChannel;
(2)特别地,上述(1)中活动目标信息的结构tag_STMetaObjectInfo,包括运动目标的类别lObjectType、运动方向及速度。当前目标数据开始标记、结束标记;运动目标编号;运动目标类型;目标图像特征数据;目标图像描述信息;目标信息运动方向用X/Y/Z坐标,目标信息的宽度、高度、厚度信息;目标信息各个运动方向的速度信息;
(3)特别地,上述(2)中运动方向可以用目标的X坐标lXPosition,Y坐标lYPosition,Z坐标lZPosition表示;目标宽度lWidth、高度lHeight、厚度lZLength表示;运动目标X轴速度lXSpeed、运动目标Y轴速度lYSpeed、运动目标Z轴速度lZSpeed表示。
(4)目标的速度可以换算为在X轴、Y轴或者Z轴上面的像素个数。
(5)特别地,上述(2)中目标图像信息用strObjectInfo表示。
(6)特别地,上述(2)中目标的图像特征数据arObjectInfo,比如物体的颜色、纹理、直方图和人物姿态等。
(7)特别地,上述(1)中报警信息结构,用来描述报警事件和其相关联对象的一系列行为和数据。
(8)特别地,上述(1)中报警信息结构STMetaAlarmInfo,包括报警元数据开始标记lBeginFlag、结束标记lEndFlag;报警类型lEventType,包括周界入侵,火警,物品遗留,物品丢失,恶意遮挡,打架斗殴,人群聚集/分散,人倒地,人匍匐穿越,车辆逆行,人/动物跨越警戒线,车辆违规变道,声音异常等;报警编号lEventID,报警特征数据arEventInfo,描述了事件本身可能包含的一些特征数据;当前事件规则设定参数arEventRuleInfo,是当前事件对应的规则设定参数,每种事件定义可能不一样;
(9)特别地,上述(8)中活动目标编号列表arObjcetID,则表示上述(2)中关联的所有运动目标编号。警报的触发时间llEventTime,警报的时间入点、时间出点。
尽管已描述了本发明的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。

Claims (9)

1.一种用于视频分析***通信的数据组包方法,其特征在于,所述方法包括:
采集端、发送端、用户终端,采集端用于智能视频元数据的采集、编码,发送端用于各个不同采集端的视频元数据的组包,然后将数据包发送到用户终端,用户终端用于对智能元数据的解析,活动目标的提取以及报警信息的展示;
第一步:采集端为各个不同厂家的视频智能数据采集模块,采集视频智能元数据;
第二步:通过厂家提供的接口获取智能元数据,并将元数据进行组包,并将组包通过一定的协议发送给用户终端,其中,智能元数据组包结构包括:
主体结构tag_STMetaData,用于描述元数据的所有智能信息,tag_STMetaData包括:元数据的时间信息llBeginTime、活动目标信息arObjectInfo、报警信息arEventInfo、当前元数据包的开始标记lBeginFlag、当前元数据包的结束标记lEndFlag,产生元数据的通道号lChannel。
2.根据权利要求1所述的用于视频分析***通信的数据组包方法,其特征在于,活动目标信息的结构tag_STMetaObjectInfo,包括:运动目标的类别lObjectType、运动方向及速度;当前目标数据开始标记、结束标记;运动目标编号;运动目标类型;目标图像特征数据;目标图像描述信息;目标信息运动方向用X/Y/Z坐标,目标信息的宽度、高度、厚度信息;目标信息各个运动方向的速度信息。
3.根据权利要求2所述的用于视频分析***通信的数据组包方法,其特征在于,运动方向用目标的X坐标lXPosition,Y坐标lYPosition,Z坐标lZPosition表示;目标宽度用lWidth表示、高度用lHeight表示、厚度用lZLength表示;运动目标X轴速度用lXSpeed表示、运动目标Y轴速度用lYSpeed表示、运动目标Z轴速度用lZSpeed表示。
4.根据权利要求2所述的用于视频分析***通信的数据组包方法,其特征在于,目标的速度能够换算为在X轴、Y轴或者Z轴上面的像素个数。
5.根据权利要求2所述的用于视频分析***通信的数据组包方法,其特征在于,目标图像信息用strObjectInfo表示。
6.根据权利要求1所述的用于视频分析***通信的数据组包方法,其特征在于,目标的图像特征数据arObjectInfo,包括:物体的颜色、纹理、直方图和人物姿态。
7.根据权利要求1所述的用于视频分析***通信的数据组包方法,其特征在于,中报警信息结构,用于描述报警事件和其相关联对象的行为和数据。
8.根据权利要求1所述的用于视频分析***通信的数据组包方法,其特征在于,报警信息结构STMetaAlarmInfo,包括:报警元数据开始标记lBeginFlag、结束标记lEndFlag;报警类型lEventType;报警编号lEventID,报警特征数据arEventInfo;当前事件规则设定参数arEventRuleInfo。
9.根据权利要求8所述的用于视频分析***通信的数据组包方法,其特征在于,活动目标编号列表arObjcetID,关联的所有运动目标编号;警报的触发时间llEventTime,警报的时间入点、时间出点。
CN201711375920.1A 2017-12-19 2017-12-19 一种用于视频分析***通信的数据组包方法 Pending CN108055507A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711375920.1A CN108055507A (zh) 2017-12-19 2017-12-19 一种用于视频分析***通信的数据组包方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711375920.1A CN108055507A (zh) 2017-12-19 2017-12-19 一种用于视频分析***通信的数据组包方法

Publications (1)

Publication Number Publication Date
CN108055507A true CN108055507A (zh) 2018-05-18

Family

ID=62130042

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711375920.1A Pending CN108055507A (zh) 2017-12-19 2017-12-19 一种用于视频分析***通信的数据组包方法

Country Status (1)

Country Link
CN (1) CN108055507A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111800602A (zh) * 2020-06-02 2020-10-20 深圳英飞拓科技股份有限公司 基于5g传输视频、行人图片和结构化数据的方法及装置
CN111800603A (zh) * 2020-06-02 2020-10-20 深圳英飞拓科技股份有限公司 一种基于5g传输车辆视频图片数据的方法、***及储存介质

Citations (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1742484A (zh) * 2002-11-29 2006-03-01 索尼株式会社 视频信号处理器、视频信号记录器、视频信号再现器、视频信号处理器处理方法、视频信号记录器处理方法、视频信号再现器处理方法、记录介质
JP2007328490A (ja) * 2006-06-07 2007-12-20 Hitachi Software Eng Co Ltd 不審者通知システム
CN101098469A (zh) * 2006-06-30 2008-01-02 索尼株式会社 图像处理***及其服务器和图像处理方法
CN101098468A (zh) * 2006-06-30 2008-01-02 索尼株式会社 图像处理设备、图像处理***以及滤波器设置方法
CN101252681A (zh) * 2008-03-07 2008-08-27 北京中星微电子有限公司 一种基于avs的视频监控***
CN101527045A (zh) * 2009-04-02 2009-09-09 浙江工商大学 基于多智能体mafs的视频多目标检测、跟踪方法
CN101615295A (zh) * 2008-06-24 2009-12-30 索尼株式会社 图像处理***、图像处理方法和计算机程序
CN101662634A (zh) * 2009-09-05 2010-03-03 太原理工大学 音视频智能分析终端的应用方法
CN101908052A (zh) * 2009-11-27 2010-12-08 新奥特(北京)视频技术有限公司 一种多媒体节目的制作方法及装置
CN102148958A (zh) * 2010-02-08 2011-08-10 北京中星微电子有限公司 一种在模拟视频数据中嵌入监控附加信息的方法及***
CN102523235A (zh) * 2011-12-31 2012-06-27 四川九洲电器集团有限责任公司 一种自适应支持多监控设备的方法
CN103763529A (zh) * 2014-01-24 2014-04-30 深圳英飞拓科技股份有限公司 一种数字监控平台***及其快速接入报警设备的方法
CN103947193A (zh) * 2011-11-25 2014-07-23 三菱电机株式会社 摄像装置、影像记录装置、影像显示装置、影像监视装置、影像监视***以及影像监视方法
CN105450978A (zh) * 2014-06-24 2016-03-30 杭州海康威视数字技术股份有限公司 用于在视频监控***中实现结构化描述的方法和装置
CN105760376A (zh) * 2014-12-15 2016-07-13 深圳Tcl数字技术有限公司 提取多媒体文件元信息的方法及装置
CN106603565A (zh) * 2016-12-30 2017-04-26 上海浦东软件园汇智软件发展有限公司 一种数据传输、显示的方法及设备

Patent Citations (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1742484A (zh) * 2002-11-29 2006-03-01 索尼株式会社 视频信号处理器、视频信号记录器、视频信号再现器、视频信号处理器处理方法、视频信号记录器处理方法、视频信号再现器处理方法、记录介质
JP2007328490A (ja) * 2006-06-07 2007-12-20 Hitachi Software Eng Co Ltd 不審者通知システム
CN101098469A (zh) * 2006-06-30 2008-01-02 索尼株式会社 图像处理***及其服务器和图像处理方法
CN101098468A (zh) * 2006-06-30 2008-01-02 索尼株式会社 图像处理设备、图像处理***以及滤波器设置方法
CN101252681A (zh) * 2008-03-07 2008-08-27 北京中星微电子有限公司 一种基于avs的视频监控***
CN101615295A (zh) * 2008-06-24 2009-12-30 索尼株式会社 图像处理***、图像处理方法和计算机程序
CN101527045A (zh) * 2009-04-02 2009-09-09 浙江工商大学 基于多智能体mafs的视频多目标检测、跟踪方法
CN101662634A (zh) * 2009-09-05 2010-03-03 太原理工大学 音视频智能分析终端的应用方法
CN101908052A (zh) * 2009-11-27 2010-12-08 新奥特(北京)视频技术有限公司 一种多媒体节目的制作方法及装置
CN102148958A (zh) * 2010-02-08 2011-08-10 北京中星微电子有限公司 一种在模拟视频数据中嵌入监控附加信息的方法及***
CN103947193A (zh) * 2011-11-25 2014-07-23 三菱电机株式会社 摄像装置、影像记录装置、影像显示装置、影像监视装置、影像监视***以及影像监视方法
CN102523235A (zh) * 2011-12-31 2012-06-27 四川九洲电器集团有限责任公司 一种自适应支持多监控设备的方法
CN103763529A (zh) * 2014-01-24 2014-04-30 深圳英飞拓科技股份有限公司 一种数字监控平台***及其快速接入报警设备的方法
CN105450978A (zh) * 2014-06-24 2016-03-30 杭州海康威视数字技术股份有限公司 用于在视频监控***中实现结构化描述的方法和装置
CN105760376A (zh) * 2014-12-15 2016-07-13 深圳Tcl数字技术有限公司 提取多媒体文件元信息的方法及装置
CN106603565A (zh) * 2016-12-30 2017-04-26 上海浦东软件园汇智软件发展有限公司 一种数据传输、显示的方法及设备

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111800602A (zh) * 2020-06-02 2020-10-20 深圳英飞拓科技股份有限公司 基于5g传输视频、行人图片和结构化数据的方法及装置
CN111800603A (zh) * 2020-06-02 2020-10-20 深圳英飞拓科技股份有限公司 一种基于5g传输车辆视频图片数据的方法、***及储存介质

Similar Documents

Publication Publication Date Title
US10965886B2 (en) System and method of generating a composite frame
AU2009243442B2 (en) Detection of abnormal behaviour in video objects
CN110110710A (zh) 一种场景异常状态识别方法、***和智能终端
CN116188821B (zh) 版权检测方法、***、电子设备和存储介质
CN103297754B (zh) 一种监控视频自适应感兴趣区域编码***
US8416296B2 (en) Mapper component for multiple art networks in a video analysis system
Zha et al. Detecting group activities with multi-camera context
CN105975956A (zh) 一种基于红外全景摄像头的独居老人异常行为识别方法
CN109828967A (zh) 一种伴随关系获取方法、***、设备、存储介质
CN102595099B (zh) 一种基于信号检测技术的视频数据合成方法
WO2005081127A2 (en) System and method for generating a viewable video index for low bandwidth applications
CN105450978B (zh) 用于在视频监控***中实现结构化描述的方法和装置
CN104717468B (zh) 基于集群轨迹分类的集群场景智能监控方法及***
CN108055507A (zh) 一种用于视频分析***通信的数据组包方法
JP2018523886A (ja) 解析装置、解析方法、及びプログラム
CN110348371B (zh) 人体三维动作自动提取方法
CN104517100A (zh) 手势预判方法和***
CN112422909B (zh) 一种基于人工智能的视频行为分析管理***
Karlsson et al. Tracking and identification of animals for a digital zoo
CN112218150A (zh) 终端及其录像分析显示方法和装置
CN102902965A (zh) 实现多目标跟踪的视频图像数据结构化描述处理的方法
Selman et al. PEL-CNF: Probabilistic event logic conjunctive normal form for video interpretation
Terroso-Saenz et al. CEP-traj: An event-based solution to process trajectory data
CN108737487A (zh) 数据同步方法和装置、存储介质及电子装置
CN106202456B (zh) 发送图片的方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20180518

RJ01 Rejection of invention patent application after publication