CN108712644A - 一种tw_ar智能导览***及导览方法 - Google Patents

一种tw_ar智能导览***及导览方法 Download PDF

Info

Publication number
CN108712644A
CN108712644A CN201810478302.8A CN201810478302A CN108712644A CN 108712644 A CN108712644 A CN 108712644A CN 201810478302 A CN201810478302 A CN 201810478302A CN 108712644 A CN108712644 A CN 108712644A
Authority
CN
China
Prior art keywords
server
video data
information
navigator
intelligence
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810478302.8A
Other languages
English (en)
Inventor
胡钟山
何龙飞
高志顺
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhenjiang Kai Di Digital World Science And Technology Co Ltd
Original Assignee
Zhenjiang Kai Di Digital World Science And Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhenjiang Kai Di Digital World Science And Technology Co Ltd filed Critical Zhenjiang Kai Di Digital World Science And Technology Co Ltd
Priority to CN201810478302.8A priority Critical patent/CN108712644A/zh
Publication of CN108712644A publication Critical patent/CN108712644A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • G06Q50/14Travel agencies
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09FDISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F27/00Combined visual and audible advertising or displaying, e.g. for public address

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Tourism & Hospitality (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • Health & Medical Sciences (AREA)
  • Strategic Management (AREA)
  • Marketing (AREA)
  • Human Resources & Organizations (AREA)
  • General Health & Medical Sciences (AREA)
  • Economics (AREA)
  • Primary Health Care (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开一种TW_AR智能导览***,包括服务器、路由器和AR导览器终端,AR导览器终端和服务器之间通过路由器通信连接,AR导览器终端采集现场视频数据,传输至服务器,服务器实时高速分析、识别、处理收集到的视频数据,以AR技术融合其他的处理信息,并加载增强到原视频信息中,实时地传输到AR智能导览终端上。本发明的服务器实时接收AR导览器终端上传的图像、视频数据,并通过TW_AR Server应用程序实现高速识别和处理,并快速的将处理后的增强现实画面回传到AR导览器终端上,使游览者能实时、快速的进一步深入了解游览内容,将真实世界信息和虚拟世界信息“无缝”集成,给游览者带来超越现实的感官体验。

Description

一种TW_AR智能导览***及导览方法
技术领域
本发明属于智能导览技术领域,具体涉及一种TW_AR智能导览***导览方法。
背景技术
在游览特定的展馆,如博物馆、科技馆、项目窗口展示馆等,或者小型景区,或者产品宣传、推广时,因为路线不清楚,或者误入展厅,找不到自己想要看的展览或者景色而导致游客或浪费了大量的时间,同时也增加了展馆的拥堵。另外,展馆的展品繁多,在不允许频繁接触或翻动展品的情况下,不容易直观全面地了解展品的内容,现有技术中的导览***大多数只能根据现场游览的内容,再去选择相应的语音或者视频讲解,不能将讲解和现场画面进行很好的匹配、融合,更不能高速实时、更加逼真的将展览相关的音频、图像、视频或者三维场景呈现在游览者的眼前,降低了游览者的参观游览体验。
发明内容
发明目的:针对现有技术存在的不足,本发明的目的是提供一种数据处理、传输速度快、通过AR眼镜高清的将处理后的视频语音数据呈现在游览者眼前的TW_AR智能导览***及导览方法。
技术方案:为了实现上述发明目的,本发明采用的技术方案如下:
一种TW_AR智能导览***,包括服务器、路由器和AR导览器终端,所述AR导览器终端和服务器之间通过路由器通信连接,所述AR导览器终端采集现场图像、视频数据,传输至服务器,所述服务器实时高速分析、识别、处理收集到的视频数据,以AR技术融合其他的处理信息,并加载增强到原视频信息中,实时地传输到AR智能导览终端上。
作为优选,所述AR导览器终端为AR眼镜,所述AR眼镜包括摄像头、显示镜片、音频模块、触控板、通信模块和电源模块;
所述摄像头,用于采集现场图像、视频数据;
所述显示镜片,用于显示从服务器获取的处理后的图像、视频信息;
所述音频模块,用于语音识别和播放从服务器获取的音频数据;
所述触控板,用于操作AR眼镜;
所述通信模块,用于与路由器和服务器进行信息双向传输。
作为优选,所述服务器安装有TW_AR Server应用程序。
作为优选,所述AR导览器终端和服务器之间通过Wifi进行信号传输。
本发明还公开一种TW_AR智能导览方法,主要包括以下步骤:
S1:AR导览器终端连接服务器并进行身份验证和登陆;
S2:AR导览器终端通过摄像头获取游览现场的实时图像、视频数据;
S3:AR导览器终端上传实时图像、视频数据至服务器;
S4:所述服务器接收实时图像、视频数据,并识别、跟踪提前预置于服务器上的识别图,如果服务器识别、跟踪成功,执行步骤S5,如果服务器识别、跟踪不成功,转至步骤S2;
S5:以AR技术融合附加的处理信息,并加载增强到原图像、视频数据信息中。
S6:服务器回传增强现实画面、配音至AR导览器终端;
S7:通过显示屏显示增强现实画面、通过耳机播放配音。
其中,所述服务器内安装有AR数据库,所述AR数据库内预存有游览场馆的识别图及其附加的处理信息。
其中,所述服务器通过TW_AR Server应用程序实时识别、跟踪、分析、处理收集到的图像、视频数据;将识别图的特征提取并建成索引树,然后再以实时收到的图像、视频数据为被比对对象,根据索引树的信息,快速分类出结果,实现高速识别,跟踪。
其中,所述步骤5中,附加的处理信息为音频、视频、图片和/或三维场景,服务器通过TW_AR Server应用程序把实时跟踪的识别图信息赋值到附加的处理信息上,使之实时“绑定”到收到的图像、视频数据之上,形成增强现实画面。
其中,在所述服务器内安装有TW_AR Server服务器软件,在所述AR导览器终端内安装有TW_AR Client客户端软件。
有益效果:与现有技术相比,本发明具有以下优点:
本发明的智能导览方法基于智能导览***的软硬件而实现,本发明的服务器实时接收AR导览器终端上传的图像、视频数据,并通过TW_AR Server应用程序实现高速识别和处理,并快速的将处理后的增强现实画面回传到AR导览器终端上,使游览者能实时、快速的进一步深入了解游览内容,将真实世界信息和虚拟世界信息“无缝”集成,给游览者带来超越现实的感官体验。
附图说明
图1是TW_AR智能导览***拓扑图;
图2是TW_AR智能导览***信号传输关系图;
图3是TW_AR智能导览***数据关系图;
图4是TW_AR智能导览***软件构架图;
图5是TW_AR智能导览***软件流程图;
图6是TW_AR智能导览***流程框图。
具体实施方式
下面结合具体实施例,进一步阐明本发明,实施例在以本发明技术方案为前提下进行实施,应理解这些实施例仅用于说明本发明而不用于限制本发明的范围。
如图1所示,一种TW_AR智能导览***,硬件***包括服务器、路由器和AR导览器终端,软件***由一套服务器软件server和一套客户端软件client构成,服务器软件server运行于高性能服务器中,客户端软件client分别运行于各AR导览器终端之中。AR导览器终端和服务器之间通过路由器通信连接,AR导览器终端采集现场视频数据,传输至服务器,服务器实时高速分析、识别、处理收集到的视频数据,以AR技术融合其他的处理信息,并加载增强到原视频信息中,实时地传输到AR智能导览终端上。
AR导览器终端为AR眼镜,AR眼镜包括摄像头、显示镜片、音频模块、触控板、通信模块和电源模块;摄像头,用于采集现场视频数据;显示镜片,用于显示从服务器获取的处理后的视频信息;音频模块,用于语音识别和播放从服务器获取的音频数据;触控板,用于操作AR眼镜;通信模块,用于与路由器和服务器进行信息双向传输。本实施例的AR眼镜采用1280x720高清摄像头,1080P显示屏,环绕立体声耳机,android,1.5G***。
服务器采用高性能服务器,本实施例的服务器的配置为:CPU频率:频率3GHz;CPU核心:四核;CPU线程数:四线程;内存容量:8GB;硬盘接口类型:SATA;标配硬盘容量:1TB;网络控制器:On-Board LOM 1GBE双端口(BCM5720GbE LOM);***:支持Microsoft WindowsServer 2012。
服务器安装有TW_AR Server应用程序。AR导览器终端和服务器之间通过Wifi进行信号传输,Wifi支持802.11a/b/g/n/ac双频无线网络。
本发明还公开一种TW_AR智能导览方法,主要包括以下步骤:
S1:AR导览器终端连接服务器并进行身份验证和登陆;
S2:AR导览器终端通过摄像头获取游览现场的实时图像、视频数据;
S3:AR导览器终端上传实时图像、视频数据至服务器;
S4:所述服务器接收实时图像、视频数据,并识别、跟踪提前预置于服务器上的识别图,如果服务器识别、跟踪成功,执行步骤S5,如果服务器识别、跟踪不成功,转至步骤S2;
S5:以AR技术融合附加的处理信息,并加载增强到原图像、视频数据信息中。
S6:服务器回传增强现实画面、配音至AR导览器终端;
S7:AR导览器终端通过显示屏显示增强现实画面、通过耳机播放配音。
服务器内安装连接有AR数据库,所述AR数据库内预存有游览场馆的识别图及其附加的处理信息;在所述服务器内安装有TW_AR Server服务器软件,在所述AR导览器终端内安装有TW_AR Client客户端软件。
步骤4中,服务器通过TW_AR Server应用程序实时识别、跟踪、分析、处理收集到的图像、视频数据;将识别图的特征提取并建成索引树,然后再以实时收到的图像、视频数据为被比对对象,根据索引树的信息,快速分类出结果,实现高速识别,跟踪。
步骤5中,附加的处理信息为音频、视频、图片和/或三维场景,服务器通过TW_ARServer应用程序把实时跟踪的识别图信息赋值到附加的处理信息上,使之实时“绑定”到收到的图像、视频数据之上,形成增强现实画面。
TW_AR Server应用程序是AR增强现实软件平台,TW_AR识别引擎是启迪数字天下自主开发的移动增强现实(AR)开发平台,提供一整套先进的增强现实(AR)技术服务。增强现实(Augmented Reality,简称AR),是一种实时地计算影像的位置及角度并叠加相应图像的技术,这种技术的目标是在屏幕上把虚拟三维世界叠加在现实世界并进行互动。TW_AR识别引擎SDK增强现实开发包旨在让各平台的开发者更方便地开发AR应用和游戏,以及快速集成TW_AR识别引擎云识别服务。在本发明中,TW_AR Server应用程序实时高速分析、识别、处理从客户端软件收集到的图像、视频数据,以AR(增强现实)技术融合附加的处理信息,并加载增强到原视频信息中,实时地传输到AR智能导览终端上然后由AR智能导览终端在其显示装置上实时呈现。
本发明的工作原理:
该AR智能导览器以眼镜的方式给使用者现场佩戴,单目高清摄像头实时采集现场图像、视频数据,传输给后台处理的服务器,服务器通过TW_AR Server应用程序实时高速分析、识别、处理收集到了的数据,再以AR技术融合更多的处理信息,并加载增强到原图像、视频信息中,再通过wifi信号实时地反馈到AR智能导览器上,通过视网膜显示屏幕现实图像和视频画面,通过音频装置播放配音。
本发明的AR导览器终端作为计算机的网路终端,一台计算机可以通过无线网络连接多台AR导览器终端;该AR导览器终端具有无线局域网高速通讯功能,能实时与服务器互通视频、语音等数据;该AR导览器终端以眼镜的方式给使用者佩戴,集成单目高清摄像头,数据显示以视网膜显示屏集成到眼镜镜片中;使得游览者方便的获取游览场景的具体信息,获取现场导视讲解宣传。
本发明的应用场景:特定的场馆,如科普馆、科技馆、项目窗口展示馆等,作为现场导视讲解宣传工具;小的景区,如特色小镇景区、特色景区、名人故居等,作为专业导览导游工具;作为特定环境下了技术展示,产品宣传、推广等应用。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (9)

1.一种TW_AR智能导览***,其特征在于:包括服务器、路由器和AR导览器终端,所述AR导览器终端和服务器之间通过路由器通信连接,所述AR导览器终端采集现场图像、视频数据,传输至服务器,所述服务器实时高速分析、识别、处理收集到的视频数据,以AR技术融合其他的处理信息,并加载增强到原视频信息中,实时地传输到AR智能导览终端上。
2.根据权利要求1所述的TW_AR智能导览***,其特征在于:所述AR导览器终端为AR眼镜,所述AR眼镜包括摄像头、显示镜片、音频模块、触控板、通信模块和电源模块;
所述摄像头,用于采集现场图像、视频数据;
所述显示镜片,用于显示从服务器获取的处理后的图像、视频信息;
所述音频模块,用于语音识别和播放从服务器获取的音频数据;
所述触控板,用于操作AR眼镜;
所述通信模块,用于与路由器和服务器进行信息双向传输。
3.根据权利要求1所述的TW_AR智能导览***,其特征在于:所述服务器安装有TW_ARServer应用程序。
4.根据权利要求2所述的TW_AR智和能导览***,其特征在于:所述AR导览器终端和服务器之间通过Wifi进行信号传输。
5.一种TW_AR智能导览方法,其特征在于,包括以下步骤:
S1:AR导览器终端连接服务器并进行身份验证和登陆;
S2:AR导览器终端通过摄像头获取游览现场的实时图像、视频数据;
S3:AR导览器终端上传实时图像、视频数据至服务器;
S4:所述服务器接收实时图像、视频数据,并识别、跟踪提前预置于服务器上的识别图,如果服务器识别、跟踪成功,执行步骤S5,如果服务器识别、跟踪不成功,转至步骤S2;
S5:以AR技术融合附加的处理信息,并加载增强到原图像、视频数据信息中。
S6:服务器回传增强现实画面、配音至AR导览器终端;
S7:AR导览器终端通过显示屏显示增强现实画面、通过耳机播放配音。
6.根据权利要求5所述的TW_AR智能导览方法,其特征在于:所述服务器内安装有AR数据库,所述AR数据库内预存有游览场馆的识别图及其附加的处理信息。
7.根据权利要求5所述的TW_AR智能导览方法,其特征在于:所述服务器通过TW_ARServer应用程序实时识别、跟踪、分析、处理收集到的图像、视频数据;将识别图的特征提取并建成索引树,然后再以实时收到的图像、视频数据为被比对对象,根据索引树的信息,快速分类出结果,实现高速识别,跟踪。
8.根据权利要求5所述的TW_AR智能导览方法,其特征在于:所述步骤4中,附加的处理信息为音频、视频、图片和/或三维场景,服务器通过TW_AR Server应用程序把实时跟踪的识别图信息赋值到附加的处理信息上,使之实时“绑定”到收到的图像、视频数据之上,形成增强现实画面。
9.根据权利要求5所述的TW_AR智能导览方法,其特征在于:在所述服务器内安装有TW_AR Server服务器软件,在所述AR导览器终端内安装有TW_AR Client客户端软件。
CN201810478302.8A 2018-05-18 2018-05-18 一种tw_ar智能导览***及导览方法 Pending CN108712644A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810478302.8A CN108712644A (zh) 2018-05-18 2018-05-18 一种tw_ar智能导览***及导览方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810478302.8A CN108712644A (zh) 2018-05-18 2018-05-18 一种tw_ar智能导览***及导览方法

Publications (1)

Publication Number Publication Date
CN108712644A true CN108712644A (zh) 2018-10-26

Family

ID=63868127

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810478302.8A Pending CN108712644A (zh) 2018-05-18 2018-05-18 一种tw_ar智能导览***及导览方法

Country Status (1)

Country Link
CN (1) CN108712644A (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110009793A (zh) * 2019-04-03 2019-07-12 广东工业大学 一种文化活动智能向导***
CN110160529A (zh) * 2019-06-17 2019-08-23 河南田野文化艺术有限公司 一种ar增强现实的导览***
CN110889337A (zh) * 2019-11-08 2020-03-17 福建工程学院 一种基于ar的说明方法和说明***
CN111147811A (zh) * 2019-11-20 2020-05-12 重庆特斯联智慧科技股份有限公司 一种自动人脸追踪的三维成像***、成像方法和成像设备
CN111491125A (zh) * 2020-04-20 2020-08-04 深圳市谦视智能科技有限责任公司 一种ar智能眼镜及记录仪
CN111540056A (zh) * 2020-04-20 2020-08-14 爱知世元(北京)网络股份有限公司 一种ar智能导览方法和ar智能导览***
CN114003190A (zh) * 2021-12-30 2022-02-01 江苏移动信息***集成有限公司 一种适应多场景和多设备的增强现实方法和装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106357924A (zh) * 2016-10-31 2017-01-25 沈阳工业大学 基于手机app的增强现实眼镜的景区导游***
CN107221066A (zh) * 2017-05-16 2017-09-29 嘉兴市天篷农业休闲有限公司 一种旅游体验增强ar***
US20180047396A1 (en) * 2012-09-18 2018-02-15 Qualcomm Incorporated Leveraging head mounted displays to enable person-to-person interactions
CN107816984A (zh) * 2017-08-28 2018-03-20 深圳市赛亿科技开发有限公司 一种基于ar眼镜的导览方法及***
CN207181824U (zh) * 2017-09-14 2018-04-03 呼伦贝尔市瑞通网络信息咨询服务有限公司 景区讲解ar设备

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180047396A1 (en) * 2012-09-18 2018-02-15 Qualcomm Incorporated Leveraging head mounted displays to enable person-to-person interactions
CN106357924A (zh) * 2016-10-31 2017-01-25 沈阳工业大学 基于手机app的增强现实眼镜的景区导游***
CN107221066A (zh) * 2017-05-16 2017-09-29 嘉兴市天篷农业休闲有限公司 一种旅游体验增强ar***
CN107816984A (zh) * 2017-08-28 2018-03-20 深圳市赛亿科技开发有限公司 一种基于ar眼镜的导览方法及***
CN207181824U (zh) * 2017-09-14 2018-04-03 呼伦贝尔市瑞通网络信息咨询服务有限公司 景区讲解ar设备

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110009793A (zh) * 2019-04-03 2019-07-12 广东工业大学 一种文化活动智能向导***
CN110160529A (zh) * 2019-06-17 2019-08-23 河南田野文化艺术有限公司 一种ar增强现实的导览***
CN110889337A (zh) * 2019-11-08 2020-03-17 福建工程学院 一种基于ar的说明方法和说明***
CN111147811A (zh) * 2019-11-20 2020-05-12 重庆特斯联智慧科技股份有限公司 一种自动人脸追踪的三维成像***、成像方法和成像设备
CN111147811B (zh) * 2019-11-20 2021-04-13 重庆特斯联智慧科技股份有限公司 一种自动人脸追踪的三维成像***、成像方法和成像设备
CN111491125A (zh) * 2020-04-20 2020-08-04 深圳市谦视智能科技有限责任公司 一种ar智能眼镜及记录仪
CN111540056A (zh) * 2020-04-20 2020-08-14 爱知世元(北京)网络股份有限公司 一种ar智能导览方法和ar智能导览***
CN111491125B (zh) * 2020-04-20 2022-05-13 深圳市谦视智能科技有限责任公司 一种ar智能眼镜及记录仪
CN114003190A (zh) * 2021-12-30 2022-02-01 江苏移动信息***集成有限公司 一种适应多场景和多设备的增强现实方法和装置
CN114003190B (zh) * 2021-12-30 2022-04-01 江苏移动信息***集成有限公司 一种适应多场景和多设备的增强现实方法和装置

Similar Documents

Publication Publication Date Title
CN108712644A (zh) 一种tw_ar智能导览***及导览方法
US11483268B2 (en) Content navigation with automated curation
US11488355B2 (en) Virtual world generation engine
CN110602554B (zh) 封面图像确定方法、装置及设备
CN111556278B (zh) 一种视频处理的方法、视频展示的方法、装置及存储介质
CN107682688B (zh) 基于增强现实的视频实时录制方法及录制设备
CN108701207A (zh) 用于面部识别和视频分析以识别上下文视频流中的个人的装置和方法
US20090161963A1 (en) Method. apparatus and computer program product for utilizing real-world affordances of objects in audio-visual media data to determine interactions with the annotations to the objects
CN110914872A (zh) 用认知洞察力导航视频场景
CN106165386A (zh) 用于照片上传和选择的自动化技术
CN110033423B (zh) 用于处理图像的方法和装置
CN110796721A (zh) 虚拟形象的颜色渲染方法、装置、终端及存储介质
CN109034069A (zh) 用于生成信息的方法和装置
CN106161988A (zh) 一种增强现实视频生成方法
CN110800314B (zh) 计算机***、远程操作通知方法以及记录介质
CN110930517A (zh) 一种全景视频交互***及方法
CN110393008A (zh) 相册生成装置、相册生成***及相册生成方法
CN110149551A (zh) 媒体文件播放方法和装置、存储介质及电子装置
CN111242704A (zh) 用于在现实场景中叠加直播人物影像的方法和电子设备
CN111246196B (zh) 视频处理方法、装置、电子设备及计算机可读存储介质
CN112562056A (zh) 虚拟演播室中虚拟灯光的控制方法、装置、介质与设备
CN114463470A (zh) 虚拟空间浏览方法、装置、电子设备和可读存储介质
CN111832579A (zh) 地图兴趣点数据处理方法、装置、电子设备以及可读介质
CN108833354A (zh) 虚拟宠物构建方法及装置
KR20190101620A (ko) 증강현실 기술을 이용한 무빙 트릭아트 구현 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20181026