CN113740855B - 占位识别方法、装置、毫米波雷达及存储介质 - Google Patents

占位识别方法、装置、毫米波雷达及存储介质 Download PDF

Info

Publication number
CN113740855B
CN113740855B CN202110926413.2A CN202110926413A CN113740855B CN 113740855 B CN113740855 B CN 113740855B CN 202110926413 A CN202110926413 A CN 202110926413A CN 113740855 B CN113740855 B CN 113740855B
Authority
CN
China
Prior art keywords
echo signal
time domain
area
domain echo
echo signals
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110926413.2A
Other languages
English (en)
Other versions
CN113740855A (zh
Inventor
包红燕
李梦
杨长林
刘啸天
李棋
秦屹
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Whst Co Ltd
Original Assignee
Whst Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Whst Co Ltd filed Critical Whst Co Ltd
Priority to CN202110926413.2A priority Critical patent/CN113740855B/zh
Publication of CN113740855A publication Critical patent/CN113740855A/zh
Priority to PCT/CN2022/110322 priority patent/WO2023016350A1/zh
Application granted granted Critical
Publication of CN113740855B publication Critical patent/CN113740855B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88—Radar or analogous systems specially adapted for specific applications
    • G01S13/93—Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931—Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S3/00—Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received
    • G01S3/02—Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received using radio waves
    • G01S3/14—Systems for determining direction or deviation from predetermined direction
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/02—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
    • G01S7/41—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
    • G01S7/414—Discriminating targets with respect to background clutter
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/02—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
    • G01S7/41—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
    • G01S7/415—Identification of targets based on measurements of movement associated with the target

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Electromagnetism (AREA)
  • Radar Systems Or Details Thereof (AREA)

Abstract

本发明提供一种占位识别方法、装置、毫米波雷达及存储介质。该方法包括：对预设区域的每一路天线回波信号分别进行采样，得到时域回波信号集；预设区域的每一路天线回波信号为对车辆内部的预设区域进行探测得到的回波信号；针对时域回波信号集中的每一时域回波信号，对该时域回波信号进行一维FFT变换处理，得到该时域回波信号的距离信息；根据时域回波信号集中的各个时域回波信号的距离信息确定车辆内部的各个占位区域分别对应的有效回波信号集，并根据各个占位区域分别对应的有效回波信号集分别判定各个占位区域是否被占位。本发明能够提高车辆占位识别的可靠性。

Description

占位识别方法、装置、毫米波雷达及存储介质
技术领域
本发明涉及占位安全技术领域，尤其涉及一种占位识别方法、装置、毫米波雷达及存储介质。
背景技术
随着汽车的普及，汽车安全越来越受到重视。安全带作为保证乘车人员安全的重要保护设备，其在车辆安全中尤为重要。汽车逐渐从物理安全向网络安全和安全辅助***方面转变。目前，大多是通过压力传感器检测该位置是否有人，再通过安全带的佩戴状态判断是否进行告警。或者通过摄像头采集该位置的图像信息判断是否有人，结合安全带的佩戴状态判断是否进行告警。
而采用压力传感器可能会对是否有人误判，进而导致安全带告警误判。摄像头对光线要求极高，易受灰尘等影响，且成本高，也可能存在安全带告警误判。即现有的安全带告警方式容易出现误判，占位识别准确度较差。
发明内容
本发明实施例提供了一种占位识别方法、装置、毫米波雷达及存储介质，以解决现有的安全带告警方式容易出现误判，占位识别准确度较差的问题。
第一方面，本发明实施例提供了一种占位识别方法，包括：
对预设区域的每一路天线回波信号分别进行采样，得到时域回波信号集；预设区域的每一路天线回波信号为对车辆内部的预设区域进行探测得到的回波信号；
针对时域回波信号集中的每一时域回波信号，对该时域回波信号进行一维FFT变换处理，得到该时域回波信号的距离信息；
根据时域回波信号集中的各个时域回波信号的距离信息确定车辆内部的各个占位区域分别对应的有效回波信号集，并根据各个占位区域分别对应的有效回波信号集分别判定各个占位区域是否被占位。
在一种可能的实现方式中，时域回波信号集中的各个时域回波信号均包括多个采样点的回波信号；时域回波信号的距离信息包括该时域回波信号对应的多个采样点的回波信号的距离值；
根据时域回波信号集中的各个时域回波信号的距离信息确定车辆内部的各个占位区域分别对应的有效回波信号集，包括：
针对时域回波信号集中每个时域回波信号，选取该时域回波信号中的所有距离值在预设范围内的采样点的回波信号，作为该时域回波信号对应的有效回波信号；
对各个有效回波信号分别进行二维DOA波达估计，得到各个有效回波信号分别对应的采样点的位置信息；
根据各个有效回波信号分别对应的采样点的位置信息确定车辆内部的各个占位区域分别对应的有效回波信号集。
在一种可能的实现方式中，根据各个占位区域分别对应的有效回波信号集分别判定各个占位区域是否被占位，包括：
根据各个占位区域分别对应的有效回波信号集，得到各个占位区域的点云信息；
针对每个占位区域，根据该占位区域的点云信息计算该占位区域的每一点云的微动速度，并根据该占位区域的每一点云的微动速度确定该占位区域是否被占位。
在一种可能的实现方式中，根据该占位区域的每一点云的微动速度确定该占位区域是否被占位，包括：
若该占位区域中微动速度大于预设微动速度的点云的数量大于预设数量，则判定该占位区域被占位。
在一种可能的实现方式中，时域回波信号集中的各个时域回波信号均包括多个采样点的回波信号；
在对该时域回波信号进行一维FFT变换处理之前，该方法还包括：
求取该时域回波信号中各个采样点的回波信号的信号平均值；
将该时域回波信号中的各个采样点的回波信号分别与对应的信号平均值作差，得到该时域回波信号的过滤后的时域回波信号；
相应的，对该时域回波信号进行一维FFT变换处理，得到该时域回波信号的距离信息，包括：
对过滤后的时域回波信号进行一维FFT变换处理，得到该时域回波信号的距离信息。
在一种可能实现的方式中，该方法还包括：
将各个占位区域的占位判定结果发送至车辆中控；
针对每个占位区域的占位判定结果，该占位区域的占位判定结果用于指示车辆中控在该占位区域的占位判定结果为占位，且检测到该占位区域的安全带未系，且检测到车辆的车速大于预设车速阈值时，进行该占位区域的安全带声光告警。
第二方面，本发明实施例提供了一种占位识别装置，包括：
采样模块，用于对预设区域的每一路天线回波信号进行采样，得到时域回波信号集；预设区域的每一路天线回波信号为对车辆内部的预设区域进行探测得到的回波信号；
变换模块，用于针对时域回波信号集中的每一时域回波信号，对该时域回波信号进行一维FFT变换处理，得到该时域回波信号的距离信息；
判断模块，用于根据时域回波信号集中的各个时域回波信号的距离信息确定车辆内部的各个占位区域分别对应的时域回波信号，并根据各个占位区域分别对应的时域回波信号分别判定各个占位区域是否被占位。
在一种可能实现的方式中，时域回波信号集中的各个时域回波信号均包括多个采样点的回波信号；时域回波信号的距离信息包括该时域回波信号对应的多个采样点的回波信号的距离值；
判断模块，可以包括：
有效信号选取单元，用于针对时域回波信号集中每个时域回波信号，选取该时域回波信号中的所有距离值在预设范围内的采样点的回波信号，作为该时域回波信号对应的有效回波信号；
估计单元，用于对各个有效回波信号分别进行二维DOA波达估计，得到各个有效回波信号分别对应的采样点的位置信息；
有效信号确定单元，用于根据各个有效回波信号分别对应的采样点的位置信息确定车辆内部的各个占位区域分别对应的有效回波信号集。
第三方面，本发明实施例提供了一种毫米波雷达，包括存储器、处理器以及存储在存储器中并可在处理器上运行的计算机程序，处理器执行计算机程序时实现如上第一方面或第一方面的任一种可能的实现方式占位识别方法的步骤。
第四方面，本发明实施例提供了一种计算机可读存储介质，计算机可读存储介质存储有计算机程序，计算机程序被处理器执行时实现如上第一方面或第一方面的任一种可能的实现方式占位识别方法的步骤。
本发明实施例提供一种占位识别方法、装置、毫米波雷达及存储介质，通过对预设区域的每一路天线回波信号分别进行采样，得到时域回波信号集；预设区域的每一路天线回波信号为对车辆内部的预设区域进行探测得到的回波信号；针对时域回波信号集中的每一时域回波信号，对该时域回波信号进行一维FFT变换处理，得到该时域回波信号的距离信息；根据时域回波信号集中的各个时域回波信号的距离信息确定车辆内部的各个占位区域分别对应的有效回波信号集，并根据各个占位区域分别对应的有效回波信号集分别判定各个占位区域是否被占位。天线回波信号可以准确反映车内环境的状况，通过对天线回波信号进行处理，判断占位区域是否被占位，可以提高占位识别的可靠性，进一步提高车辆行驶的安全性。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的占位识别方法的实现流程图；
图2是本发明实施例提供的占位识别装置的结构示意图；
图3是本发明实施例提供的毫米波雷达的示意图。
具体实施方式
以下描述中，为了说明而不是为了限定，提出了诸如特定***结构、技术之类的具体细节，以便透彻理解本发明实施例。然而，本领域的技术人员应当清楚，在没有这些具体细节的其它实施例中也可以实现本发明。在其它情况中，省略对众所周知的***、装置、电路以及方法的详细说明，以免不必要的细节妨碍本发明的描述。
为使本发明的目的、技术方案和优点更加清楚，下面将结合附图通过具体实施例来进行说明。
在本发明的实施例中，在车内顶部设置有毫米波雷达，该毫米波雷达采用单片微波集成电路(Monolithic Microwave Integrated Circuit，MMIC)和多进多出(MultipleInput Multiple Output，MIMO)技术，MMIC高度集成的处理器和传感器缩小了产品尺寸，MIMO阵列天线排布，既缩小了天线尺寸又能保证良好的角度分辨能力，且电磁波能够穿透顶棚材质，使得产品便于隐藏安装在车内顶部。
毫米波雷达采用CAN通讯方式，支持休眠唤醒网络管理和远程固件刷写升级功能，同时采用先进的信号处理技术，能够实现距离、速度、方位角和俯仰角等多维分辨，进一步提高车内目标的识别性能。
相比超声波和摄像头等外露式传感器，由于雷达发射的电磁波能够穿透顶棚材质，可实现非外露安装方式，即安装在车内顶棚和钣金中间，乘客在车内完全感受不到任何装置的存在，很好地避免了车体材质的切割破坏，便于安装实现，且隐藏在顶棚和钣金中间，隐私效果好，不会给乘客带来压力感。
参见图1，其示出了本发明实施例提供的占位识别方法的实现流程图。如图1所示，一种占位识别方法，可以包括：
S101，对预设区域的每一路天线回波信号分别进行采样，得到时域回波信号集；预设区域的每一路天线回波信号为对车辆内部的预设区域进行探测得到的回波信号。
可选的，本发明实施例的占位识别方法的执行主体为毫米波雷达，预设区域为毫米波雷达在车辆内部可以探测到的区域。如预设区域可以包括车辆内部的前排区域，和/或车辆内部的后排区域。每一路天线对应一路时域回波信号，将所有天线的时域回波信号形成时域回波信号集。
可选的，在雷达中，距离维、方位维、俯仰维为在球坐标空间下的空间位置。采样可以是对每一路天线沿距离维和时间维对天线回波信号进行ADC采样，如快时间采样方式。
在本发明实施例中，毫米波雷达包括阵列排布的多路发射天线以及多路接收天线，当毫米波雷达处于工作状态时，毫米波雷达通过多路发射天线向车辆内部发射多路探测信号，并通过多路接收天线接收对应的多路天线回波信号。
具体的，毫米波雷达上电工作，发射天线向预设区域发射特定频率的电磁波，电磁波遇到物体发生反射，反射的电磁波携带了目标信息，目标信息包括该预设区域的距离、速度、空间角度信息，接收天线接收该反射的电磁波(也即回波信号)，并对该反射的电磁波进行采样，得到时域回波信号。
S102，针对时域回波信号集中的每一时域回波信号，对该时域回波信号进行一维FFT变换处理，得到该时域回波信号的距离信息。
可选的，一维FFT变换处理用于将时域回波信号变换至频域回波信号，进而得到在预设区域内该时域回波信号的距离信息，即可以得到该时域回波信号在预设区域的距离分布。
S103，根据时域回波信号集中的各个时域回波信号的距离信息确定车辆内部的各个占位区域分别对应的有效回波信号集，并根据各个占位区域分别对应的有效回波信号集分别判定各个占位区域是否被占位。
可选的，占位区域为预设区域中的部分区域，如预设区域为车辆内部的前排空间，则占位区域可以为主驾驶区域或者副驾驶区域。占位区域被占位可以理解为该占位区域有人，如一个占位区域为副驾驶，该占位区域被占位表现为副驾驶有人。
本发明实施例通过对预设区域的每一路天线回波信号分别进行采样，得到时域回波信号集；预设区域的每一路天线回波信号为对车辆内部的预设区域进行探测得到的回波信号；针对时域回波信号集中的每一时域回波信号，对该时域回波信号进行一维FFT变换处理，得到该时域回波信号的距离信息；根据时域回波信号集中的各个时域回波信号的距离信息确定车辆内部的各个占位区域分别对应的有效回波信号集，并根据各个占位区域分别对应的有效回波信号集分别判定各个占位区域是否被占位。天线回波信号可以准确反映车内环境的状况，通过对天线回波信号进行处理，判断占位区域是否被占位，可以提高占位识别的可靠性，进一步提高车辆行驶的安全性。
在本发明的一些实施例中，时域回波信号集中的各个时域回波信号均包括多个采样点的回波信号；时域回波信号的距离信息包括该时域回波信号对应的多个采样点的回波信号的距离值；
上述S103中“根据时域回波信号集中的各个时域回波信号的距离信息确定车辆内部的各个占位区域分别对应的有效回波信号集”，可以包括：
针对时域回波信号集中每个时域回波信号，选取该时域回波信号中的所有距离值在预设范围内的采样点的回波信号，作为该时域回波信号对应的有效回波信号；
对各个有效回波信号分别进行二维DOA波达估计，得到各个有效回波信号分别对应的采样点的位置信息；
根据各个有效回波信号分别对应的采样点的位置信息确定车辆内部的各个占位区域分别对应的有效回波信号集。
可选的，预设范围可以为不小于第一预设距离值，且不大于第二预设距离值的范围，第一预设距离值小于第二预设距离值。预设范围可以根据实际乘车的乘客与毫米波雷达的距离确定。
示例性的，一般情况下，乘客距离毫米波雷达的范围大于0.5m，因此预设范围可以设置为0.5m～1.5m，选取距离值在0.5m～1.5m范围的内的时域回波信号，作为有效回波信号。在预设范围内的区域可以为车辆内部的有效区域，各个有效回波信号为有效区域内的回波信号，通过对有效区域内的各个有效回波信号进行处理，得到各个有效回波信号的位置信息，再根据各个有效回波信号的位置信息确定各个占位区域，如位置信息可以包括俯仰角信息和方位角信息，可以根据俯仰角信息和方位角信息确定各个占位区域，进而判断各个占位区域是否被占位。
可选的，每一个采样点对应一个预设区域内实际的点。可以对各个有效回波信号进行多路天线之间的方位向(横向)和俯仰向(纵向)二维DOA波达估计，以得到各个有效回波信号分别对应的采样点的位置信息，即可以得到该预设距离范围内的各个采样点的位置信息。位置信息可以包括方位角信息和俯仰角信息。通过二维DOA波达估计可以增强指定方向信号的功率，同时对天线旁瓣相消，降低杂波干扰。
示例性的，二维DOA波达估计的过程可以为：
设目标方位角θ的导向矢量为α、各方位Ri阵元空时采样数据的协方差矩阵为R，则最优权系数W＝μRα，其中μ为常数，然后寻找min(WHRW)时的θ，即为最佳目标来向θ。同理求得俯仰向ψ，即完成方位俯仰二维DOA估计。
可选的，以毫米波雷达为中心，各个占位区域相对毫米波雷达的位置不同。如主驾驶相对毫米波雷达的位置，和副驾驶相对毫米波雷达的位置不同。因此，可以根据各个有效回波信号分别对应的采样点的位置信息，确定车辆内部的各个占位区域，以及各个占位区域对应的时域回波信号。
在本发明的一些实施例中，上述S103中“根据各个占位区域分别对应的有效回波信号集分别判定各个占位区域是否被占位”，可以包括：
根据各个占位区域分别对应的有效回波信号集，得到各个占位区域的点云信息；
针对每个占位区域，根据该占位区域的点云信息计算该占位区域的每一点云的微动速度，并根据该占位区域的每一点云的微动速度确定该占位区域是否被占位。
可选的，每个占位区域可以对应一个点云信息，点云信息可以包括该占位区域对应的各个点云的三维坐标，可以通过现有技术根据该占位区域的点云信息计算该占位区域的每一点云的微动速度。
在本发明的一些实施例中，根据该占位区域的每一点云的微动速度确定该占位区域是否被占位，可以包括：
若该占位区域中微动速度大于预设微动速度的点云的数量大于预设数量，则判定该占位区域被占位。
可选的，若该占位区域中微动速度大于预设微动速度的点云的数量不大于预设数量，则判定该占位区域未被占位。
本发明实施例通过根据微动速度和点云数量两个条件判断该占位区域是否被占位，可以剔除一些偶然干扰因素，比单独一个条件的判断准确。
在本发明的一些实施例中，时域回波信号集中的各个时域回波信号均包括多个采样点的回波信号；
在对该时域回波信号进行一维FFT变换处理之前，方法还可以包括：
求取该时域回波信号中各个采样点的回波信号的信号平均值；
将该时域回波信号中的各个采样点的回波信号分别与对应的信号平均值作差，得到该时域回波信号的过滤后的时域回波信号；
相应的，对该时域回波信号进行一维FFT变换处理，得到该时域回波信的的距离信息，包括：
对过滤后的时域回波信号进行一维FFT变换处理，得到该时域回波信的的距离信息。
可选的，以上过程为时域回波信号的静态杂波剔除。由于肢体微动信号属于弱目标，极易受座舱复杂回波干扰，通过对时域回拨信号进行静态杂波剔除，可以提高占位识别的可靠性。
在本发明的一些实施例中，求取采样点的回波信号的信号平均值的公式为：
其中，该时域回波信号为S＝[S1，S2，...，Sn]，Smeani为该时域回波信号中第i个采样点的回波信号Si的信号平均值，i＝1～n，j＝1～m，n为该时域回波信号包括的采样点的回波信号的数量，m为时刻的数量，SiSm为回波信号Si在m时刻的信号。
示例性的，对某一时域回波信号，可以求取每一距离维采样点沿时间维的均值并减去该均值，得到过滤后的时域回波信号。
例如，设某一天线的时域回波信号为S＝[S1，S2，...，Sn]，其中j＝1～m，n为距离维采样点，m为时间维采样点，均值Smean＝[Smean1，Smean2，...，Smeann]，/>得到剔除静态杂波后的时域回波信号S'＝[S1-Smean，S2-Smean，...，Sn-Smean]，可以降低静物杂波的干扰。
在本发明的一些实施例中，该方法还可以包括：
将各个占位区域的占位判定结果发送至车辆中控；
针对每个占位区域的占位判定结果，该占位区域的占位判定结果用于指示车辆中控在该占位区域的占位判定结果为占位，且检测到该占位区域的安全带未系，且检测到车辆的车速大于预设车速阈值时，进行该占位区域的安全带声光告警。
可选的，本发明实施例的毫米波雷达可以将占位判定结果发送至车辆中控，车辆中控根据占位判定结果结合其余条件判断是否进行安全带声光告警。
可选的，占位判定结果还用于指示车辆中控在占位判定结果为未占位，或者检测到占位区域的安全带已系，或者检测到车辆的车速不大于预设车速阈值时，不进行安全带声光告警。
示例性的，本发明实施例中进行安全带告警过程可以为：
步骤一、毫米波雷达通过多路天线向车内预设区域发送探测信号，对接收到的每一路天线回波信号进行采样得到时域回波信号集。
步骤二、对时域回波信号集中的各个时域回波信号进行静态杂波剔除，得到过滤后的时域回波信号集。
步骤三、对过滤后的时域回波信号集中的时域回波信号进行一维FFT变换处理，得到各个时域回波信号的距离信息。
步骤四、根据各个时域回波信号的距离信息确定各个占位区域以及各个占位区域对应的有效回波信号。选取距离信息在预设范围内的时域回波信号，作为有效回波信号；对各个有效回波信号分别进行二维DOA波达估计，得到各个有效回波信号分别对应的采样点的位置信息；根据各个有效回波信号分别对应的采样点的位置信息，确定各个占位区域的点云信息。
步骤五、针对每个占位区域，根据该占位区域的点云信息计算该占位区域的每一点云的微动速度，并根据该占位区域的每一点云的微动速度确定该占位区域是否被占位。
步骤六、将占位判定结果发送至车辆中控，占位判定结果用于指示车辆中控是否进行安全带声光告警。
在本发明的一些实施例中，该方法还可以包括：
获取车辆状态信号；车辆状态信号包括解锁状态信号、行车状态信号或者闭锁状态信号；
在车辆状态信号为解锁状态信号时，向第一特定区域发送探测信号，对接收到的第一特定区域的回波信号进行手势识别，并根据手势识别结果控制车辆执行对应的预设操作；
在车辆状态信号为行车状态信号时，向第一特定区域和预设区域发送探测信号，对接收到的第一特定区域的回波信号进行手势识别，并根据手势识别结果控制车辆执行对应的预设操作，对接收到的预设区域的回波信号进行占位识别，并根据占位识别结果判定是否进行安全带告警；
在车辆状态信号为闭锁状态信号时，向第二特定区域发送探测信号，对接收到的第二特定区域的回波信号进行生命体识别，并根据生命体识别结果判定是否进行人员滞留告警。
示例性的，车辆解锁状态下，毫米波雷达可实现手势识别功能，进而控制天窗开关和空调温度等；
车辆行驶过程中，雷达探测座位上有无人员，当车速大于某一速度时，当有人且未系安全带时，进行声光报警，提示乘客系好安全带；
车辆锁车状态下，自锁车开始的前30min内，探测车内有无滞留孩童，防止高温窒息事故的发生；一般情况下，工作时长可由用户进行设置，工作时间到后，雷达进入休眠(sleep)模式，工作电流<100uA，功耗极低，符合汽车安全需求。
在本发明的一些实施例中，对接收到的第一特定区域的回波信号进行手势识别，可以包括：
对第一特定区域的每一路天线回波信号进行采样，得到手势回波信号集；第一特定区域的每一路天线回波信号为对车辆内部的第一特定区域进行探测得到的回波信号；
对手势回波信号集中的各个手势回波信号进行一维FFT变换，并对一维变换后的各个手势回波信号进行二维FFT变换，得到第一特定区域中各个采样点的点云数据；采样点的点云数据包括该采样点的距离和速度；
对第一特定区域内所有速度不为零的采样点的点云数据进行计算，得到各个速度不为零的采样点的点云数据的幅度；
对各个速度不为零的采样点的点云数据的幅度分别进行非相参积累处理，并选取所有非相参积累处理后的幅度大于预设幅度的采样点的点云数据形成目标点云数据集；
对目标点云数据集进行二维DOA波达估计，得到目标点云数据集中各个点云数据对应采样点的空间角度信息；
根据目标点云数据集中各个点云数据对应采样点的空间角度信息进行手势识别。
可选的，由于人员手势距离雷达0.5m，且是有速度的运动手势，故可以截取0～0.5m内、速度非零的点云数据，对新得到的点云数据进行非相参积累处理，并选取所有非相参积累处理后幅度大于预设幅度的点云数据形成目标点云数据集。
可选的，目标点云数据集中各个点云数据都包含距离、速度、方位角、俯仰角等多种信息。
示例性的，手势识别的过程可以为：
设定1：第一特定区域的左侧对应毫米波雷达方位的负角度、第一特定区域的右侧对应毫米波雷达方位的正角度；
设定2：距离毫米波雷达50cm内的一组由左向右滑动的匀速手势共历时60帧，按时间先后来看，将60帧划分为三个阶段(这里为了说明，以三个阶段为例，实际可进一步细化)；
则点集轨迹应该呈现为：
第一个阶段(1～20帧)，点集集中在方位负角度上；
第二个阶段(21～40帧)，点集集中在方位零角度上；
第三个阶段(41～60帧)，点集集中在方位正角度上。
所有运动手势按上述轨迹原理进行分类，利用不同运动手势呈现的点集轨迹信息不同，即可判断出该手势是何种类型，从而实现手势识别。
在本发明的一些实施例中，根据生命体识别结果判定是否进行人员滞留告警，包括：
将生命体识别结果发送至车辆中控，生命体识别结果用于指示车辆中控在检测到生命体识别结果为预设区域存在生命体时，进行预设区域的人员滞留告警。
可选的，人员滞留告警即为孩童防遗忘功能，本发明实施例的毫米波雷达不仅适用于大幅度运动目标的探测，而且对胸腔微动信号也有很高的检测精度。毫米波雷达采用了4GHz大带宽，将微小的胸腔位移转换成明显的相位变化，当相位的频率和相关性信息满足阈值要求时，则判定为存在真实目标，即车内存在生命体。如果检测到车内有生命体，将有生命体的结果通过CAN总线方式发送到车辆中控，控制双闪鸣笛报警，同时，车辆中控通过车联网将报警信息发至客户手机端，双重保障滞留儿童的安全。
在本发明的一些实施例中，该方法还可以包括：
记录并上传安全带告警和人员滞留告警；
将人员滞留告警发送至用户端。
可选的，可以将安全带告警和人员滞留告警进行记录，通过数据分析进一步优化车辆告警信息提醒过程。
本发明实施例的毫米波技术频段高，带宽大，探测精度极高，不受光线、温度、灰尘、气候等影响，利用其独特的多普勒原理，对车内驾乘人员的运动感知灵敏，探测精度高，可实现手势识别、占位安全带提醒、孩童防遗忘等功能，为智能车辆告警的发展提供了智能化解决方案。
应理解，上述实施例中各步骤的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本发明实施例的实施过程构成任何限定。
以下为本发明的装置实施例，对于其中未详尽描述的细节，可以参考上述对应的方法实施例。
图2示出了本发明实施例提供的占位识别装置的结构示意图，为了便于说明，仅示出了与本发明实施例相关的部分，详述如下：
如图2所示，占位识别装置20，可以包括：
采样模块201，用于对预设区域的每一路天线回波信号分别进行采样，得到时域回波信号集；预设区域的每一路天线回波信号为对车辆内部的预设区域进行探测得到的回波信号；
变换模块202，用于针对时域回波信号集中的每一时域回波信号，对该时域回波信号进行一维FFT变换处理，得到该时域回波信号的距离信息；
判断模块203，用于根据时域回波信号集中的各个时域回波信号的距离信息确定车辆内部的各个占位区域分别对应的有效回波信号集，并根据各个占位区域分别对应的有效回波信号集分别判定各个占位区域是否被占位。
在本发明的一些实施例中，判断模块203，时域回波信号集中的各个时域回波信号均包括多个采样点的回波信号；时域回波信号的距离信息包括该时域回波信号对应的多个采样点的回波信号的距离值；
判断模块203，可以包括：
有效信号选取单元，用于针对时域回波信号集中每个时域回波信号，选取该时域回波信号中的所有距离值在预设范围内的采样点的回波信号，作为该时域回波信号对应的有效回波信号；
估计单元，用于对各个有效回波信号分别进行二维DOA波达估计，得到各个有效回波信号分别对应的采样点的位置信息；
有效信号确定单元，用于根据各个有效回波信号分别对应的采样点的位置信息确定车辆内部的各个占位区域分别对应的有效回波信号集。
在本发明的一些实施例中，判断模块203，还可以包括
点云信息确定单元，用于根据各个占位区域分别对应的有效回波信号集，得到各个占位区域的点云信息；
计算单元，用于针对每个占位区域，根据该占位区域的点云信息计算该占位区域的每一点云的微动速度，并根据该占位区域的每一点云的微动速度确定该占位区域是否被占位。
在本发明的一些实施例中，计算单元还用于若该占位区域中微动速度大于预设微动速度的点云的数量大于预设数量，则判定该占位区域被占位。
在本发明的一些实施例中，时域回波信号集中的各个时域回波信号均包括多个采样点的回波信号；占位识别装置20还可以包括：
预处理模块，用于求取该时域回波信号中各个采样点的回波信号的信号平均值；
差值模块，用于将该时域回波信号中的各个采样点的回波信号分别与对应的信号平均值作差，得到该时域回波信号的过滤后的时域回波信号
相应的，变换模块202，还用于对过滤后的时域回波信号进行一维FFT变换处理，得到该时域回波信号的距离信息。
在本发明的一些实施例中，占位识别装置20还可以包括：
占位发送模块，用于将各个占位区域的占位判定结果发送至车辆中控；针对每个占位区域的占位判定结果，该占位区域的占位判定结果用于指示车辆中控在该占位区域的占位判定结果为占位，且检测到该占位区域的安全带未系，且检测到车辆的车速大于预设车速阈值时，进行该占位区域的安全带声光告警。
图3是本发明实施例提供的毫米波雷达的示意图。如图3所示，该实施例的毫米波雷达30包括：处理器300、存储器301以及存储在存储器301中并可在处理器300上运行的计算机程序302。处理器300执行计算机程序302时实现上述各个占位识别方法实施例中的步骤，例如图1所示的S101至S103。或者，处理器300执行计算机程序302时实现上述各装置实施例中各模块/单元的功能，例如图2所示模块/单元201至203的功能。
示例性的，计算机程序302可以被分割成一个或多个模块/单元，一个或者多个模块/单元被存储在存储器301中，并由处理器300执行，以完成本发明。一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段，该指令段用于描述计算机程序302在毫米波雷达30中的执行过程。例如，计算机程序302可以被分割成图2所示的模块/单元201至203。
毫米波雷达30可包括，但不仅限于，处理器300、存储器301。本领域技术人员可以理解，图3仅仅是毫米波雷达30的示例，并不构成对毫米波雷达30的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件。
所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，仅以上述各功能单元、模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能单元、模块完成，即将装置的内部结构划分成不同的功能单元或模块，以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中，上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。另外，各功能单元、模块的具体名称也只是为了便于相互区分，并不用于限制本申请的保护范围。上述***中单元、模块的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述或记载的部分，可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
在本发明所提供的实施例中，应该理解到，所揭露的装置/终端和方法，可以通过其它的方式实现。例如，以上所描述的装置/终端实施例仅仅是示意性的，例如，模块或单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个***，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口，装置或单元的间接耦合或通讯连接，可以是电性，机械或其它的形式。
作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明实现上述实施例方法中的全部或部分流程，也可以通过计算机程序来指令相关的硬件来完成，的计算机程序可存储于一计算机可读存储介质中，该计算机程序在被处理器执行时，可实现上述各个占位识别方法实施例的步骤。其中，计算机程序包括计算机程序代码，计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。计算机可读介质可以包括：能够携带计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random Access Memory，RAM)、电载波信号、电信信号以及软件分发介质等。需要说明的是，计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减，例如在某些司法管辖区，根据立法和专利实践，计算机可读介质不包括是电载波信号和电信信号。
以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围，均应包含在本发明的保护范围之内。

Claims (8)

1.一种占位识别方法，其特征在于，包括：
对预设区域的每一路天线回波信号分别进行采样，得到时域回波信号集；所述预设区域的每一路天线回波信号为对车辆内部的预设区域进行探测得到的回波信号；
针对所述时域回波信号集中的每一时域回波信号，对该时域回波信号进行一维FFT变换处理，得到该时域回波信号的距离信息；
根据所述时域回波信号集中的各个时域回波信号的距离信息确定车辆内部的各个占位区域分别对应的有效回波信号集，并根据各个占位区域分别对应的有效回波信号集分别判定各个占位区域是否被占位；
所述根据各个占位区域分别对应的有效回波信号集分别判定各个占位区域是否被占位，包括：
根据各个占位区域分别对应的有效回波信号集，得到各个占位区域的点云信息；
针对每个占位区域，根据该占位区域的点云信息计算该占位区域的每一点云的微动速度，并根据该占位区域的每一点云的微动速度确定该占位区域是否被占位；
所述根据该占位区域的每一点云的微动速度确定该占位区域是否被占位，包括：
若该占位区域中微动速度大于预设微动速度的点云的数量大于预设数量，则判定该占位区域被占位。
2.根据权利要求1所述的占位识别方法，其特征在于，所述时域回波信号集中的各个时域回波信号均包括多个采样点的回波信号；时域回波信号的距离信息包括该时域回波信号对应的多个采样点的回波信号的距离值；
所述根据所述时域回波信号集中的各个时域回波信号的距离信息确定车辆内部的各个占位区域分别对应的有效回波信号集，包括：
针对所述时域回波信号集中每个时域回波信号，选取该时域回波信号中的所有距离值在预设范围内的采样点的回波信号，作为该时域回波信号对应的有效回波信号；
对各个有效回波信号分别进行二维DOA波达估计，得到各个有效回波信号分别对应的采样点的位置信息；
根据各个有效回波信号分别对应的采样点的位置信息确定车辆内部的各个占位区域分别对应的有效回波信号集。
3.根据权利要求1所述的占位识别方法，其特征在于，所述时域回波信号集中的各个时域回波信号均包括多个采样点的回波信号；
在所述对该时域回波信号进行一维FFT变换处理之前，所述方法还包括：
求取该时域回波信号中各个采样点的回波信号的信号平均值；
将该时域回波信号中的各个采样点的回波信号分别与对应的信号平均值作差，得到该时域回波信号的过滤后的时域回波信号；
相应的，所述对该时域回波信号进行一维FFT变换处理，得到该时域回波信号的距离信息，包括：
对所述过滤后的时域回波信号进行一维FFT变换处理，得到该时域回波信号的距离信息。
4.根据权利要求1至3任一项所述的占位识别方法，其特征在于，所述方法还包括：
将各个占位区域的占位判定结果发送至车辆中控；
针对每个占位区域的占位判定结果，该占位区域的占位判定结果用于指示所述车辆中控在该占位区域的占位判定结果为占位，且检测到该占位区域的安全带未系，且检测到车辆的车速大于预设车速阈值时，进行该占位区域的安全带声光告警。
5.一种占位识别装置，其特征在于，包括：
采样模块，用于对预设区域的每一路天线回波信号分别进行采样，得到时域回波信号集；所述预设区域的每一路天线回波信号为对车辆内部的预设区域进行探测得到的回波信号；
变换模块，用于针对所述时域回波信号集中的每一时域回波信号，对该时域回波信号进行一维FFT变换处理，得到该时域回波信号的距离信息；
判断模块，用于根据所述时域回波信号集中的各个时域回波信号的距离信息确定车辆内部的各个占位区域分别对应的有效回波信号集，并根据各个占位区域分别对应的有效回波信号集分别判定各个占位区域是否被占位；
判断模块，包括：
点云信息确定单元，用于根据各个占位区域分别对应的有效回波信号集，得到各个占位区域的点云信息；
计算单元，用于针对每个占位区域，根据该占位区域的点云信息计算该占位区域的每一点云的微动速度，并根据该占位区域的每一点云的微动速度确定该占位区域是否被占位；
计算单元还用于若该占位区域中微动速度大于预设微动速度的点云的数量大于预设数量，则判定该占位区域被占位。
6.根据权利要求5所述的占位识别装置，其特征在于，所述时域回波信号集中的各个时域回波信号均包括多个采样点的回波信号；时域回波信号的距离信息包括该时域回波信号对应的多个采样点的回波信号的距离值；
判断模块，可以包括：
有效信号选取单元，用于针对所述时域回波信号集中每个时域回波信号，选取该时域回波信号中的所有距离值在预设范围内的采样点的回波信号，作为该时域回波信号对应的有效回波信号；
估计单元，用于对各个有效回波信号分别进行二维DOA波达估计，得到各个有效回波信号分别对应的采样点的位置信息；
有效信号确定单元，用于根据各个有效回波信号分别对应的采样点的位置信息确定车辆内部的各个占位区域分别对应的有效回波信号集。
7.一种毫米波雷达，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如上的权利要求1至4中任一项所述占位识别方法的步骤。
8.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如上的权利要求1至4中任一项所述占位识别方法的步骤。
CN202110926413.2A 2021-08-12 2021-08-12 占位识别方法、装置、毫米波雷达及存储介质 Active CN113740855B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202110926413.2A CN113740855B (zh) 2021-08-12 2021-08-12 占位识别方法、装置、毫米波雷达及存储介质
PCT/CN2022/110322 WO2023016350A1 (zh) 2021-08-12 2022-08-04 占位识别方法及应用其的车辆控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110926413.2A CN113740855B (zh) 2021-08-12 2021-08-12 占位识别方法、装置、毫米波雷达及存储介质

Publications (2)

Publication Number Publication Date
CN113740855A CN113740855A (zh) 2021-12-03
CN113740855B true CN113740855B (zh) 2023-10-13

Family

ID=78730896

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110926413.2A Active CN113740855B (zh) 2021-08-12 2021-08-12 占位识别方法、装置、毫米波雷达及存储介质

Country Status (1)

Country Link
CN (1) CN113740855B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023016350A1 (zh) * 2021-08-12 2023-02-16 森思泰克河北科技有限公司 占位识别方法及应用其的车辆控制方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017181225A (ja) * 2016-03-30 2017-10-05 本田技研工業株式会社 乗員検知装置
DE102017214009A1 (de) * 2017-08-10 2019-02-14 Volkswagen Aktiengesellschaft Verfahren und Vorrichtung zur Erkennung der Anwesenheit und/oder Bewegung eines Fahrzeuginsassen
CN110865365A (zh) * 2019-11-27 2020-03-06 江苏集萃智能传感技术研究所有限公司 一种基于毫米波雷达的停车场噪声消除方法
CN111830483A (zh) * 2020-09-16 2020-10-27 福瑞泰克智能***有限公司 一种具有微动效应的目标的确定方法、装置、电子设备及存储介质
CN112816960A (zh) * 2021-02-03 2021-05-18 森思泰克河北科技有限公司 车内生命探测方法、装置、设备和存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017181225A (ja) * 2016-03-30 2017-10-05 本田技研工業株式会社 乗員検知装置
DE102017214009A1 (de) * 2017-08-10 2019-02-14 Volkswagen Aktiengesellschaft Verfahren und Vorrichtung zur Erkennung der Anwesenheit und/oder Bewegung eines Fahrzeuginsassen
CN110865365A (zh) * 2019-11-27 2020-03-06 江苏集萃智能传感技术研究所有限公司 一种基于毫米波雷达的停车场噪声消除方法
CN111830483A (zh) * 2020-09-16 2020-10-27 福瑞泰克智能***有限公司 一种具有微动效应的目标的确定方法、装置、电子设备及存储介质
CN112816960A (zh) * 2021-02-03 2021-05-18 森思泰克河北科技有限公司 车内生命探测方法、装置、设备和存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
相干激光微多普勒雷达的干扰抑制研究;李跃新 等;中国激光;全文 *

Also Published As

Publication number Publication date
CN113740855A (zh) 2021-12-03

Similar Documents

Publication Publication Date Title
KR20190129622A (ko) 자동차 레이더 시스템에서 탐지된 타겟들의 클러스터링 방법 및 이를 위한 장치
CN113561911B (zh) 车辆控制方法、装置、毫米波雷达及存储介质
KR102243363B1 (ko) 레이더 장치 및 그를 이용한 타겟 식별방법
US11527080B2 (en) System and method for classification of objects in vehicle using feature vectors
JP2022162069A (ja) 電子機器、電子機器の制御方法、及びプログラム
CN110806580A (zh) 移动平台上的雷达***中的振动减轻
CN113189575B (zh) 一种用于烟雾场景下人员定位的探测方法和装置
CN114212045A (zh) 一种车内乘员检测方法及***
CN114966589A (zh) 一种基于毫米波雷达的多目标检测方法
CN113740855B (zh) 占位识别方法、装置、毫米波雷达及存储介质
US20200116855A1 (en) Radar apparatus for vehicle and method for controlling the same
JPH0883400A (ja) 車両障害物識別システム
JP2024023926A (ja) 電子機器、電子機器の制御方法、及び電子機器の制御プログラム
Li et al. In-vehicle occupant detection system using mm-wave radar
EP4239364A1 (en) Electronic device, electronic device control method, and program
WO2021085083A1 (ja) 電子機器、電子機器の制御方法、及びプログラム
US20220221567A1 (en) Electronic device, method for controlling electronic device, and program
WO2023016350A1 (zh) 占位识别方法及应用其的车辆控制方法
WO2022024690A1 (ja) 電子機器、電子機器の制御方法、及びプログラム
US20230400553A1 (en) Electronic device, method for controlling electronic device, and program
WO2023002871A1 (ja) 電子機器、電子機器の制御方法、及びプログラム
CN115932825A (zh) 基于毫米波雷达的车内滞留人员监测方法
JP2000111644A (ja) 車両検出装置
EP3865909A1 (en) Electronic device, method for controlling electronic device, and program for controlling electronic device
CN115144857A (zh) 一种探测目标个数估计方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant