CN106412598A - 基于cuda显卡编码的无线视频传输***及其传输方法 - Google Patents

基于cuda显卡编码的无线视频传输***及其传输方法 Download PDF

Info

Publication number
CN106412598A
CN106412598A CN201610821577.8A CN201610821577A CN106412598A CN 106412598 A CN106412598 A CN 106412598A CN 201610821577 A CN201610821577 A CN 201610821577A CN 106412598 A CN106412598 A CN 106412598A
Authority
CN
China
Prior art keywords
video
module
coding
cuda
wireless
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610821577.8A
Other languages
English (en)
Inventor
陆许明
徐永键
谭洪舟
张嘉文
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SYSU HUADU INDUSTRIAL SCIENCE AND TECHNOLOGY INSTITUTE
Sun Yat Sen University
Original Assignee
SYSU HUADU INDUSTRIAL SCIENCE AND TECHNOLOGY INSTITUTE
Sun Yat Sen University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SYSU HUADU INDUSTRIAL SCIENCE AND TECHNOLOGY INSTITUTE, Sun Yat Sen University filed Critical SYSU HUADU INDUSTRIAL SCIENCE AND TECHNOLOGY INSTITUTE
Priority to CN201610821577.8A priority Critical patent/CN106412598A/zh
Publication of CN106412598A publication Critical patent/CN106412598A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明提供一种基于CUDA显卡编码的无线视频传输***及其传输方法,该发明的编码发送端***模块通过屏幕采集模块从所要获取的屏幕视频的计算机中获取屏幕视频数据流,并将视频数据流的原始数据码流转换为YUV420P或YUV422像素格式的视频数据;CUDA视频编码模块和x265视频编码模块分别将YUV420P或YUV422像素格式的视频数据压缩成HEVC数据流再经由ORTP发送模块发送出去由解码接收端模块接收,能够实现编码速度的大幅提高,有利于网络实时传输,并且对CPU的占用率低,并且在无法使用显卡硬编码时,本发明仍然能够通过软编码对视频数据进行编码。

Description

基于CUDA显卡编码的无线视频传输***及其传输方法
技术领域
本发明涉及图形图像及视频编解码领域,更具体地,涉及一种基于CUDA显卡编码的无线视频传输***及其传输方法。
背景技术
H.264/MPEG-4part 10AVC(H.264/AVC)视频编码标准,是由国际化标准组织(ISO)和国际电信联盟(ITU)于2003年共同提出的一种数字视频压缩格式标准。这种视频压缩格式标准的编码质量和压缩比相比于原有的标准均有了大幅度的提高。并且在相同的视觉感知质量上,其编码效率比H.263、MPEG-2和MPEG-4提高了50%左右,并且具有良好的网络友好性。这些优秀的性能让H.264/AVC广泛应用于广播电视、无线多媒体等各个领域。
但随着网络技术和终端处理能力的不断提高,人们提出了更多更高的要求。包括能够提供超高清视频传输,3D视频传输,移动无线传输等等需求,以满足新的家庭影院、远程监控、数字广播以及移动流媒体等各个领域的应用。
新一代的视频编码标准HEVC(High Efficiency Video Coding)于2013年完成标准定稿。在H.264/AVC high profile的基础上,压缩效率提高一倍。即在保证视频图像质量的前提下,视频流的码率减少50%。同时,更重要的是,HEVC标准同时也支持4K(4096x2160)和8K(8192x4320)超高清视频,让网络视频跟上了显示屏“高分辨率化”的脚步。
目前,复杂的计算正在从利用中央处理器(CPU)处理向CPU和GPU协同处理的方向发展。CUDA是NVIDIA发明的一种并行计算平台和编程模型。它利用图形处理器(GPU)的处理能力,能够大幅度提升计算性能。在包括图像与视频处理、流体力学模拟及光线追踪等各个领域广泛运用。利用CUDA并行计算架构,能够极大的提升HEVC的编码效率,同时保证一定的图像质量,大幅度降低编码时对CPU核的占用。
当前,无线视频传输***常采用CPU软编码的方式进行编码,而大量的视频数据常常会使得CPU在处理视频编解码时负担过大,对CPU性能有一定的要求,性能不足则难以承担编码消耗。如果利用嵌入式***中的CPU进行编码,则需要保证其性能,提高了硬件上的成本;如果采用PC机上的CPU进行编码,则编码会持续占用CPU,影响用户的体验。另外,也有采用片上***Soc(System on Chip)方案,使用嵌入式处理器和专用硬件配合工作的编解码器。这种方案降低了对CPU的占用,但同时相应也增加了硬件上的成本。目前类似的无线视频传输***中,视频源获取端的嵌入式设备与视频源计算机通过HDMI线连接,同时,还需要外接电源。增加了复杂度。
发明内容
本发明提供一种基于CUDA显卡编码的无线视频传输***,该***可提高编码速度,有利于网络实时传输,并且对CPU的占用率低。
本发明的又一目的在于提供一种基于CUDA显卡编码的无线视频传输***的传输方法。
为了达到上述技术效果,本发明的技术方案如下:
一种基于CUDA显卡编码的无线视频传输***,包括编码发送端***模块和解码接收端模块;
所述编码发送端***模块包括屏幕采集模块、CUDA视频编码模块、x265视频编码模块、ORTP发送模块和无线发送模块;屏幕采集模块与所要获取的屏幕视频的计算机连接,屏幕采集模块、CUDA视频编码模块、ORTP发送模块和无线发送模块顺次连接,x265视频编码模块分别于屏幕采集模块和ORTP发送模块连接;
所述解码接收端模块包括顺次连接的无线接收模块和视频解码输出模块,视频解码输出模块还与所要进行显示的显示设备连接。
进一步地,所述屏幕采集模块获取计算机屏幕视频数据流,将视频数据流的原始数据码流转换为YUV420P或YUV422像素格式的视频数据。
进一步地,所述CUDA视频编码模块将YUV420P或YUV422视频数据利用显卡硬编码压缩成HEVC数据流。
进一步地,所述x265视频编码模块使用软编码的方式将YUV420P或者YUV422视频数据压缩编码成HEVC数据流。
进一步地,所述ORTP发送模块利用ORTP协议栈,将HEVC数据流发送至指定的接收端模块中。
优选地,所述屏幕采集模块采用USB接口与所要获取的屏幕视频的计算机连接,所要获取的屏幕视频的计算机通过该USB接口对整个编码发送端***模块供电。
优选地,所述视频解码输出模块采用HDMI接口与所要进行显示的显示设备连接。
一种基于CUDA显卡编码的无线视频传输***的传输方法,包括以下步骤:
S1:屏幕采集模块从所要获取的屏幕视频的计算机中获取屏幕视频数据流,并将视频数据流的原始数据码流转换为YUV420P或YUV422像素格式的视频数据;
S2:CUDA视频编码模块接收屏幕采集模块传送过来的YUV420P或YUV422像素格式的视频数据,并将YUV420P或YUV422像素格式的视频数据利用显卡硬编码压缩成HEVC数据流;
S3:x265视频编码模块接收屏幕采集模块传送过来的YUV420P或YUV422像素格式的视频数据,并将YUV420P或YUV422像素格式的视频数据使用软编码的方式压缩编码成HEVC数据流;
S4:CUDA视频编码模块和x265视频编码模块将各自的HEVC数据流攒送给ORTP发送模块,ORTP发送模块利用ORTP协议栈,将HEVC数据流发送至指定的接收端模块中。
优选地,所述无线发送模块和无线接收模块之间采用Wi-Fi设备模块建立无线连接。
进一步地,所述编码发送端***模块采用USB设备Gadget驱动的方式驱动,使得整个编码发送端***模块模拟成一个大容量存储器以及USB Gadget网络设备,并运行于多种操作***上,包括Windows及Linux。编码发送端***模块使用Linux嵌入式操作***,通过在该设备中使用专用的USB设备Gadget驱动,该设备被同时模拟成一个大容量存储器以及USB Gadget网络设备,该设备实现了跨平台的使用。
本发明中,无需安装任何驱动或客户端,只需要将编码发送端***模块***计算机的USB接口,不需要额外外接电源。该编码发送端***模块被模拟成一个大容量存储器和一个Gadget网络设备,大容量存储器中存储有编码端程序,并被设置为自动运行,Gadget网络设备结合发送端设备上的Wi-Fi模块,即可通过Wi-Fi与接收解码端建立网络连接。编码发送端***模块自行建立与解码接收端模块之间的网络连接,并实现对计算机屏幕视频流的获取,将其编码成HEVC数据流,最后利用Wi-Fi发送出去。
与现有技术相比,本发明技术方案的有益效果是:
本发明的编码发送端***模块通过屏幕采集模块从所要获取的屏幕视频的计算机中获取屏幕视频数据流,并将视频数据流的原始数据码流转换为YUV420P或YUV422像素格式的视频数据;CUDA视频编码模块和x265视频编码模块分别将YUV420P或YUV422像素格式的视频数据压缩成HEVC数据流再经由ORTP发送模块发送出去由解码接收端模块接收,能够实现编码速度的大幅提高,有利于网络实时传输,并且对CPU的占用率低,并且在无法使用显卡硬编码时,本发明仍然能够通过软编码对视频数据进行编码。
附图说明
图1为本发明***的结构图;
图2为本发明方法的流程图。
具体实施方式
附图仅用于示例性说明,不能理解为对本专利的限制;
为了更好说明本实施例,附图某些部件会有省略、放大或缩小,并不代表实际产品的尺寸;
对于本领域技术人员来说,附图中某些公知结构及其说明可能省略是可以理解的。
下面结合附图和实施例对本发明的技术方案做进一步的说明。
实施例1
如图1所示,一种基于CUDA显卡编码的无线视频传输***,包括编码发送端***模块和解码接收端模块;
编码发送端***模块包括屏幕采集模块、CUDA视频编码模块、x265视频编码模块、ORTP发送模块和无线发送模块;屏幕采集模块与所要获取的屏幕视频的计算机连接,屏幕采集模块、CUDA视频编码模块、ORTP发送模块和无线发送模块顺次连接,x265视频编码模块分别于屏幕采集模块和ORTP发送模块连接;
解码接收端模块包括顺次连接的无线接收模块和视频解码输出模块,视频解码输出模块还与所要进行显示的显示设备连接。
屏幕采集模块获取计算机屏幕视频数据流,将视频数据流的原始数据码流转换为YUV420P或YUV422像素格式的视频数据。
CUDA视频编码模块将YUV420P或YUV422视频数据利用显卡硬编码压缩成HEVC数据流。
x265视频编码模块使用软编码的方式将YUV420P或者YUV422视频数据压缩编码成HEVC数据流。
ORTP发送模块利用ORTP协议栈,将HEVC数据流发送至指定的接收端模块中。
屏幕采集模块采用USB接口与所要获取的屏幕视频的计算机连接,所要获取的屏幕视频的计算机通过该USB接口对整个编码发送端***模块供电。
视频解码输出模块采用HDMI接口与所要进行显示的显示设备连接。
无线发送模块和无线接收模块之间采用Wi-Fi设备模块建立无线连接。
编码发送端***模块采用USB设备Gadget驱动的方式驱动,使得整个编码发送端***模块模拟成一个大容量存储器以及USB Gadget网络设备,并运行于多种操作***上。
实施例2
如图2所示,一种基于CUDA显卡编码的无线视频传输***的传输方法,包括以下步骤:
S1:屏幕采集模块从所要获取的屏幕视频的计算机中获取屏幕视频数据流,并将视频数据流的原始数据码流转换为YUV420P或YUV422像素格式的视频数据;
S2:CUDA视频编码模块接收屏幕采集模块传送过来的YUV420P或YUV422像素格式的视频数据,并将YUV420P或YUV422像素格式的视频数据利用显卡硬编码压缩成HEVC数据流;
S3:x265视频编码模块接收屏幕采集模块传送过来的YUV420P或YUV422像素格式的视频数据,并将YUV420P或YUV422像素格式的视频数据使用软编码的方式压缩编码成HEVC数据流;
S4:CUDA视频编码模块和x265视频编码模块将各自的HEVC数据流攒送给ORTP发送模块,ORTP发送模块利用ORTP协议栈,将HEVC数据流发送至指定的接收端模块中。
本发明的编码发送端***模块通过屏幕采集模块从所要获取的屏幕视频的计算机中获取屏幕视频数据流,并将视频数据流的原始数据码流转换为YUV420P或YUV422像素格式的视频数据;CUDA视频编码模块和x265视频编码模块分别将YUV420P或YUV422像素格式的视频数据压缩成HEVC数据流再经由ORTP发送模块发送出去由解码接收端模块接收,能够实现编码速度的大幅提高,有利于网络实时传输,并且对CPU的占用率低。在无法使用显卡硬编码时,本发明仍然能够通过软编码对视频数据进行编码。
同时,编码发送端***模块无需安装任何驱动或客户端,只需要将编码发送端***模块***计算机的USB接口,不需要额外外接电源。该编码发送端***模块被模拟成一个大容量存储器和一个Gadget网络设备,大容量存储器中存储有编码端程序,并被设置为自动运行,Gadget网络设备结合发送端设备上的Wi-Fi模块,即可通过Wi-Fi与接收解码端建立网络连接。编码发送端***模块自行建立与解码接收端模块之间的网络连接,并实现对计算机屏幕视频流的获取,将其编码成HEVC数据流,最后利用Wi-Fi发送出去。
相同或相似的标号对应相同或相似的部件;
附图中描述位置关系的用于仅用于示例性说明,不能理解为对本专利的限制;
显然,本发明的上述实施例仅仅是为清楚地说明本发明所作的举例,而并非是对本发明的实施方式的限定。对于所属领域的普通技术人员来说,在上述说明的基础上还可以做出其它不同形式的变化或变动。这里无需也无法对所有的实施方式予以穷举。凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明权利要求的保护范围之内。

Claims (10)

1.一种基于CUDA显卡编码的无线视频传输***,其特征在于,包括编码发送端***模块和解码接收端模块;
所述编码发送端***模块包括屏幕采集模块、CUDA视频编码模块、x265视频编码模块、ORTP发送模块和无线发送模块;屏幕采集模块与所要获取的屏幕视频的计算机连接,屏幕采集模块、CUDA视频编码模块、ORTP发送模块和无线发送模块顺次连接,x265视频编码模块分别于屏幕采集模块和ORTP发送模块连接;
所述解码接收端模块包括顺次连接的无线接收模块和视频解码输出模块,视频解码输出模块还与所要进行显示的显示设备连接。
2.根据权利要求1所述的基于CUDA显卡编码的无线视频传输***,其特征在于,所述屏幕采集模块获取计算机屏幕视频数据流,将视频数据流的原始数据码流转换为YUV420P或YUV422像素格式的视频数据。
3.根据权利要求2所述的基于CUDA显卡编码的无线视频传输***,其特征在于,所述CUDA视频编码模块将YUV420P或YUV422视频数据利用显卡硬编码压缩成HEVC数据流。
4.根据权利要求3所述的基于CUDA显卡编码的无线视频传输***,其特征在于,所述x265视频编码模块使用软编码的方式将YUV420P或者YUV422视频数据压缩编码成HEVC数据流。
5.根据权利要求4所述的基于CUDA显卡编码的无线视频传输***,其特征在于,所述ORTP发送模块利用ORTP协议栈,将HEVC数据流发送至指定的接收端模块中。
6.根据权利要求1所述的基于CUDA显卡编码的无线视频传输***,其特征在于,所述屏幕采集模块采用USB接口与所要获取的屏幕视频的计算机连接,所要获取的屏幕视频的计算机通过该USB接口对整个编码发送端***模块供电。
7.根据权利要求1所述的基于CUDA显卡编码的无线视频传输***,其特征在于,所述视频解码输出模块采用HDMI接口与所要进行显示的显示设备连接。
8.一种如权利要求1、6、7任一项所述的基于CUDA显卡编码的无线视频传输***的传输方法,其特征在于,包括以下步骤:
S1:屏幕采集模块从所要获取的屏幕视频的计算机中获取屏幕视频数据流,并将视频数据流的原始数据码流转换为YUV420P或YUV422像素格式的视频数据;
S2:CUDA视频编码模块接收屏幕采集模块传送过来的YUV420P或YUV422像素格式的视频数据,并将YUV420P或YUV422像素格式的视频数据利用显卡硬编码压缩成HEVC数据流;
S3:x265视频编码模块接收屏幕采集模块传送过来的YUV420P或YUV422像素格式的视频数据,并将YUV420P或YUV422像素格式的视频数据使用软编码的方式压缩编码成HEVC数据流;
S4:CUDA视频编码模块和x265视频编码模块将各自的HEVC数据流攒送给ORTP发送模块,ORTP发送模块利用ORTP协议栈,将HEVC数据流发送至指定的接收端模块中。
9.根据权利要求8所述的基于CUDA显卡编码的无线视频传输***的传输方法,其特征在于,所述无线发送模块和无线接收模块之间采用Wi-Fi设备模块建立无线连接。
10.根据权利要求8所述的基于CUDA显卡编码的无线视频传输***的传输方法,其特征在于,所述编码发送端***模块采用USB设备Gadget驱动的方式驱动,使得整个编码发送端***模块模拟成一个大容量存储器以及USBGadget网络设备,并运行于多种操作***上。
CN201610821577.8A 2016-09-13 2016-09-13 基于cuda显卡编码的无线视频传输***及其传输方法 Pending CN106412598A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610821577.8A CN106412598A (zh) 2016-09-13 2016-09-13 基于cuda显卡编码的无线视频传输***及其传输方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610821577.8A CN106412598A (zh) 2016-09-13 2016-09-13 基于cuda显卡编码的无线视频传输***及其传输方法

Publications (1)

Publication Number Publication Date
CN106412598A true CN106412598A (zh) 2017-02-15

Family

ID=58000148

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610821577.8A Pending CN106412598A (zh) 2016-09-13 2016-09-13 基于cuda显卡编码的无线视频传输***及其传输方法

Country Status (1)

Country Link
CN (1) CN106412598A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109819236A (zh) * 2019-02-15 2019-05-28 西安勺子智能科技有限公司 一种基于无人机双目视频的多用户vr直播***
CN116260975A (zh) * 2023-01-17 2023-06-13 成都曾自科技有限公司 一种基于cuda的视频压缩方法、设备及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102143386A (zh) * 2010-01-28 2011-08-03 复旦大学 一种基于图形处理器的的流媒体服务器加速方法
GB2509966A (en) * 2013-01-10 2014-07-23 Barco Nv Encoding a video data stream using hardware acceleration
CN104281542A (zh) * 2014-09-26 2015-01-14 中兴通讯股份有限公司 多功能usb终端设备的适配方法、装置及***
CN104378649A (zh) * 2014-08-19 2015-02-25 中国科学院信息工程研究所 一种利用国密sm1算法对视频流进行实时加密的方法及***
CN104980752A (zh) * 2015-06-11 2015-10-14 武汉大千信息技术有限公司 利用cpu和gpu实现多路自适应并行转码的方法及***
CN105163128A (zh) * 2015-08-31 2015-12-16 华南理工大学 一种利用gpu并行加速图像转换的屏幕图像获取方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102143386A (zh) * 2010-01-28 2011-08-03 复旦大学 一种基于图形处理器的的流媒体服务器加速方法
GB2509966A (en) * 2013-01-10 2014-07-23 Barco Nv Encoding a video data stream using hardware acceleration
CN104378649A (zh) * 2014-08-19 2015-02-25 中国科学院信息工程研究所 一种利用国密sm1算法对视频流进行实时加密的方法及***
CN104281542A (zh) * 2014-09-26 2015-01-14 中兴通讯股份有限公司 多功能usb终端设备的适配方法、装置及***
CN104980752A (zh) * 2015-06-11 2015-10-14 武汉大千信息技术有限公司 利用cpu和gpu实现多路自适应并行转码的方法及***
CN105163128A (zh) * 2015-08-31 2015-12-16 华南理工大学 一种利用gpu并行加速图像转换的屏幕图像获取方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109819236A (zh) * 2019-02-15 2019-05-28 西安勺子智能科技有限公司 一种基于无人机双目视频的多用户vr直播***
CN116260975A (zh) * 2023-01-17 2023-06-13 成都曾自科技有限公司 一种基于cuda的视频压缩方法、设备及存储介质
CN116260975B (zh) * 2023-01-17 2024-01-23 成都曾自科技有限公司 一种基于cuda的视频压缩方法、设备及存储介质

Similar Documents

Publication Publication Date Title
CN102625149B (zh) 使用基于片的再现***的低等待时间远程显示再现
KR20200140824A (ko) 3d 객체를 나타내는 포인트 클라우드를 인코딩/디코딩하기 위한 방법 및 장치
CN102905132B (zh) 无线视频传输的压缩和解压缩装置
US11477481B2 (en) Method and device for coding the geometry of a point cloud
CN102404578A (zh) 一种多通道视频传输***及方法
CN106303521B (zh) 一种基于感知敏感度的hevc率失真优化方法
CN103124350B (zh) 基于rle的图像压缩方法及装置
EP3777180B1 (en) A method and apparatus for encoding/decoding a point cloud representing a 3d object
CN102308583A (zh) 对多视角图像进行编码和解码的设备和方法
CN102308582A (zh) 用于对图像进行分割编码的方法
WO2021191495A1 (en) A method, an apparatus and a computer program product for video encoding and video decoding
CN106412598A (zh) 基于cuda显卡编码的无线视频传输***及其传输方法
CN109479127A (zh) 使用视频译码压缩图片分段数据
CN104575427A (zh) 一种适合嵌入式***解码的高压缩比无损图像压缩方法
KR20130098147A (ko) 입체 3차원 비디오 정보의 통신을 위한 방법 및 시스템
CN102687509B (zh) 使用jpeg-ls的可调节压缩
CN102843566B (zh) 一种3d视频数据的通讯方法和设备
CN104469400A (zh) 一种基于rfb协议的图像数据压缩方法
CN102572440A (zh) 一种基于深度图和分布式视频编码的多视点视频传输方法
CN108711191A (zh) 一种视频处理方法和vr设备
CN202276420U (zh) 基于h264的无线视频监控***
CN102355582B (zh) 一种三维立体视频编码的率失真模型优化方法
CN101969559A (zh) 视频码流的转换压缩方法与***
CN105306941A (zh) 一种视频编码方法
WO2019185983A1 (en) A method, an apparatus and a computer program product for encoding and decoding digital volumetric video

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20170215

RJ01 Rejection of invention patent application after publication