JP7229676B2 - 生体情報検出装置および生体情報検出方法 - Google Patents
生体情報検出装置および生体情報検出方法 Download PDFInfo
- Publication number
- JP7229676B2 JP7229676B2 JP2018096701A JP2018096701A JP7229676B2 JP 7229676 B2 JP7229676 B2 JP 7229676B2 JP 2018096701 A JP2018096701 A JP 2018096701A JP 2018096701 A JP2018096701 A JP 2018096701A JP 7229676 B2 JP7229676 B2 JP 7229676B2
- Authority
- JP
- Japan
- Prior art keywords
- wavelength
- data signal
- signal
- image
- amplitude
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000001514 detection method Methods 0.000 title claims description 72
- QVGXLLKOCUKJST-UHFFFAOYSA-N atomic oxygen Chemical compound [O] QVGXLLKOCUKJST-UHFFFAOYSA-N 0.000 claims description 26
- 229910052760 oxygen Inorganic materials 0.000 claims description 26
- 239000001301 oxygen Substances 0.000 claims description 26
- 238000004364 calculation method Methods 0.000 claims description 21
- 230000003111 delayed effect Effects 0.000 claims description 21
- 230000002123 temporal effect Effects 0.000 claims description 9
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 claims description 8
- 230000003595 spectral effect Effects 0.000 claims description 6
- 238000012545 processing Methods 0.000 claims description 5
- 238000010586 diagram Methods 0.000 description 34
- 102000001554 Hemoglobins Human genes 0.000 description 16
- 108010054147 Hemoglobins Proteins 0.000 description 16
- 238000000034 method Methods 0.000 description 15
- 238000003384 imaging method Methods 0.000 description 13
- 238000001228 spectrum Methods 0.000 description 13
- 238000013500 data storage Methods 0.000 description 9
- 239000008280 blood Substances 0.000 description 8
- 210000004369 blood Anatomy 0.000 description 8
- 238000009499 grossing Methods 0.000 description 8
- 238000012937 correction Methods 0.000 description 7
- 238000010521 absorption reaction Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 5
- 206010019280 Heart failures Diseases 0.000 description 4
- 239000003086 colorant Substances 0.000 description 4
- 238000003702 image correction Methods 0.000 description 4
- 230000007423 decrease Effects 0.000 description 3
- 208000023504 respiratory system disease Diseases 0.000 description 3
- 238000012935 Averaging Methods 0.000 description 2
- 241000282412 Homo Species 0.000 description 2
- 241001465754 Metazoa Species 0.000 description 2
- 230000000295 complement effect Effects 0.000 description 2
- 230000001815 facial effect Effects 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 230000035945 sensitivity Effects 0.000 description 2
- 206010035664 Pneumonia Diseases 0.000 description 1
- 208000004756 Respiratory Insufficiency Diseases 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 210000001367 artery Anatomy 0.000 description 1
- 210000004204 blood vessel Anatomy 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 239000000428 dust Substances 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 210000004209 hair Anatomy 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000000691 measurement method Methods 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 230000010349 pulsation Effects 0.000 description 1
- 201000004193 respiratory failure Diseases 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/145—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
- A61B5/1455—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters
- A61B5/14551—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters for measuring blood gases
- A61B5/14552—Details of sensors specially adapted therefor
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0075—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by spectroscopy, i.e. measuring spectra, e.g. Raman spectroscopy, infrared absorption spectroscopy
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
- G06T7/0014—Biomedical image inspection using an image reference approach
- G06T7/0016—Biomedical image inspection using an image reference approach involving temporal comparison
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/90—Determination of colour characteristics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
- H04N23/11—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths for generating image signals from visible and infrared light wavelengths
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/20—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from infrared radiation only
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/30—Transforming light or analogous information into electric information
- H04N5/33—Transforming infrared radiation
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B2562/00—Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
- A61B2562/02—Details of sensors specially adapted for in-vivo measurements
- A61B2562/0233—Special features of optical sensors or probes classified in A61B5/00
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10048—Infrared image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30101—Blood vessel; Artery; Vein; Vascular
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30101—Blood vessel; Artery; Vein; Vascular
- G06T2207/30104—Vascular flow; Blood flow; Perfusion
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Animal Behavior & Ethology (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Heart & Thoracic Surgery (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Biomedical Technology (AREA)
- Biophysics (AREA)
- Pathology (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Quality & Reliability (AREA)
- Optics & Photonics (AREA)
- Radiology & Medical Imaging (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Description
201b フィルタ(バンドパスもしくはローパスフィルタ)
300a 第1の映像入力部(カラー)
300b 第2の映像入力部(IR)
400 検出領域信号生成部
103 空間フィルタ
500 スペクトル算出部
600 SpO2算出部
Claims (12)
- 可視光および赤外光により画像を取得するカメラと、
前記可視光による画像の時間的な波長の変化を検出して第1の波長差分データ信号を生成する第1の波長揺らぎ検出部と、
前記第1の波長差分データ信号の振幅を検出する第1の振幅検出部と、
前記赤外光による画像の時間的な波長の変化を検出して第2の波長差分データ信号を生成する第2の波長揺らぎ検出部と、
前記第2の波長差分データ信号の振幅を検出する第2の振幅検出部と、
前記第1の波長差分データ信号の振幅と前記第2の波長差分データ信号の振幅の比率を算出する比率算出部と、
前記算出された振幅の比率に基づいて酸素飽和濃度を算出する酸素飽和濃度算出部と、
を備え、
前記第1の波長揺らぎ検出部は、前記可視光による画像から得られるカラーデータ信号をHSV信号に変換して得られるH信号を第1の波長データ信号として入力とし、前記第1の波長データ信号と該第1の波長データ信号を遅延させた第1の遅延波長データ信号の差分を前記第1の波長差分データ信号とし、
前記第2の波長揺らぎ検出部は、前記赤外光による画像から得られるカラーデータ信号をHSV信号に変換して得られるH信号を第2の波長データ信号として入力とし、前記第2の波長データ信号と該第2の波長データ信号を遅延させた第2の遅延波長データ信号の差分を前記第2の波長差分データ信号とする、
生体情報検出装置。 - 前記酸素飽和濃度算出部は、
算出された振幅の比率と酸素飽和濃度との関係を示す相関テーブルに基づいて、前記比率を酸素飽和濃度に変換する、
請求項1記載の生体情報検出装置。 - 可視光により取得された画像に基づいて特定の色領域を検出する、検出領域信号生成部を備え、
前記第1の波長揺らぎ検出部は、前記特定の色領域を波長の変化検出の対象領域とする、
請求項1記載の生体情報検出装置。 - 前記第2の波長揺らぎ検出部も、前記特定の色領域を波長の変化検出の対象領域とする、
請求項3記載の生体情報検出装置。 - 前記検出領域信号生成部は、
カメラにより撮像された映像信号を、映像の波長とスペクトル強度へと分解する、
請求項3記載の生体情報検出装置。 - 前記検出領域信号生成部は、
映像の波長とスペクトル強度への分解を、映像信号をHSV色空間に変換し、色相を波長とし、明度をスペクトル強度とすることにより行なう、
請求項5記載の生体情報検出装置。 - 前記カメラとして赤外及び可視光の個別の複数台のカメラではなく、1台のカメラで赤外および可視光を同時に取得できるフィルタを有するカメラを使用し、画素値より赤外及び可視光成分を抽出する、
請求項1記載の生体情報検出装置。 - 前記検出領域信号生成部は、
映像の波長とスペクトル強度への分解を、映像信号をHSV色空間に変換し、色相を波長とし、明度をスペクトル強度とすることにより行ない、
前記酸素飽和濃度算出部は、
前記明度を光の強度を表す信号として用い、酸素飽和濃度の算出を補正する、
請求項5記載の生体情報検出装置。 - 可視光により生体の画像を取得する第1のステップ、
赤外光により生体の画像を取得する第2のステップ、
前記可視光による画像の時間的な波長の変化を検出して第1の波長差分データ信号を生成する第3のステップ、
前記第1の波長差分データ信号の振幅を検出する第4のステップ、
前記赤外光による画像の時間的な波長の変化を検出して第2の波長差分データ信号を生成する第5のステップ、
前記第2の波長差分データ信号の振幅を検出する第6のステップ、
前記第1の波長差分データ信号の振幅と前記第2の波長差分データ信号の振幅の比率を算出する第7のステップ、
前記算出された振幅の比率に基づいて生体の情報を推定する第8のステップ、
を備え、
前記第3のステップは、前記可視光による画像から得られるカラーデータ信号をHSV信号に変換して得られるH信号を第1の波長データ信号とし、前記第1の波長データ信号と該第1の波長データ信号を遅延させた第1の遅延波長データ信号の差分を前記第1の波長差分データ信号とし、
前記第5のステップは、前記赤外光による画像から得られるカラーデータ信号をHSV信号に変換して得られるH信号を第2の波長データ信号とし、前記第2の波長データ信号と該第2の波長データ信号を遅延させた第2の遅延波長データ信号の差分を前記第2の波長差分データ信号とする、
生体情報検出方法。 - 前記可視光による画像から、前記生体の特定の色の領域を検出する第9のステップを備え、
前記第3のステップおよび前記第5のステップにおいて、時間的な波長の変化を検出する領域を、前記生体の特定の色の領域に限定する、
請求項9記載の生体情報検出方法。 - 前記振幅の比率と酸素飽和濃度を対応付けたテーブルを記憶したメモリを用い、
前記第8のステップでは、前記テーブルを参照することにより、酸素飽和濃度を推定する、
請求項9記載の生体情報検出方法。 - 前記可視光により取得された生体の画像から明るさの情報を取得し、該明るさの情報に基づいて、前記第8のステップにおける生体の情報の推定処理を補正する、
請求項9記載の生体情報検出方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018096701A JP7229676B2 (ja) | 2018-05-21 | 2018-05-21 | 生体情報検出装置および生体情報検出方法 |
US16/414,280 US10881338B2 (en) | 2018-05-21 | 2019-05-16 | Biological information detection apparatus and biological information detection method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018096701A JP7229676B2 (ja) | 2018-05-21 | 2018-05-21 | 生体情報検出装置および生体情報検出方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019201674A JP2019201674A (ja) | 2019-11-28 |
JP7229676B2 true JP7229676B2 (ja) | 2023-02-28 |
Family
ID=68534584
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018096701A Active JP7229676B2 (ja) | 2018-05-21 | 2018-05-21 | 生体情報検出装置および生体情報検出方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US10881338B2 (ja) |
JP (1) | JP7229676B2 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6866531B2 (ja) * | 2018-03-06 | 2021-04-28 | 富士フイルム株式会社 | 医療画像処理システム及び内視鏡システム |
CN111277767B (zh) * | 2020-02-21 | 2021-07-20 | 北京猎户星空科技有限公司 | 一种红外控制点的确定方法、装置、电子设备及存储介质 |
US11402273B2 (en) * | 2020-03-27 | 2022-08-02 | Ecb Consulting Llc | Systems and approaches for improving accuracy of temperature measurements using thermal imaging |
US11917272B2 (en) * | 2020-10-28 | 2024-02-27 | Semiconductor Components Industries, Llc | Imaging systems for multi-spectral imaging |
KR102411622B1 (ko) * | 2021-08-02 | 2022-06-22 | 상명대학교산학협력단 | 비접촉 산소포화도 측정 방법 및 장치 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015027459A (ja) | 2013-07-26 | 2015-02-12 | タタ・コンサルタンシー・サーヴィシズ・リミテッド | 生理学的パラメータの監視 |
JP2016193021A (ja) | 2015-03-31 | 2016-11-17 | 株式会社エクォス・リサーチ | 脈波検出装置、及び脈波検出プログラム |
JP2017104491A (ja) | 2015-12-07 | 2017-06-15 | パナソニック株式会社 | 生体情報測定装置、生体情報測定方法及びプログラム |
JP2018008039A (ja) | 2016-06-30 | 2018-01-18 | パナソニックIpマネジメント株式会社 | 生体情報検出装置 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5672144B2 (ja) | 2011-05-20 | 2015-02-18 | 富士通株式会社 | 心拍数・呼吸数検出装置,方法およびプログラム |
EP3496603A1 (en) * | 2016-08-09 | 2019-06-19 | Koninklijke Philips N.V. | Device for use in blood oxygen saturation measurement |
-
2018
- 2018-05-21 JP JP2018096701A patent/JP7229676B2/ja active Active
-
2019
- 2019-05-16 US US16/414,280 patent/US10881338B2/en active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015027459A (ja) | 2013-07-26 | 2015-02-12 | タタ・コンサルタンシー・サーヴィシズ・リミテッド | 生理学的パラメータの監視 |
JP2016193021A (ja) | 2015-03-31 | 2016-11-17 | 株式会社エクォス・リサーチ | 脈波検出装置、及び脈波検出プログラム |
JP2017104491A (ja) | 2015-12-07 | 2017-06-15 | パナソニック株式会社 | 生体情報測定装置、生体情報測定方法及びプログラム |
JP2018008039A (ja) | 2016-06-30 | 2018-01-18 | パナソニックIpマネジメント株式会社 | 生体情報検出装置 |
Also Published As
Publication number | Publication date |
---|---|
US10881338B2 (en) | 2021-01-05 |
JP2019201674A (ja) | 2019-11-28 |
US20190350505A1 (en) | 2019-11-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7229676B2 (ja) | 生体情報検出装置および生体情報検出方法 | |
EP3057486B1 (en) | Automatic camera adjustment for remote photoplethysmography | |
US8805019B2 (en) | Processing images of at least one living being | |
US20190000391A1 (en) | Device, system and method for generating a photoplethysmographic image carrying vital sign information of a subject | |
CN107028602B (zh) | 生物体信息测定装置、生物体信息测定方法以及记录介质 | |
CN105451646A (zh) | 用于提取生理信息的设备、***和方法 | |
JP2018510669A (ja) | 皮膚検出に関するデバイス、システム、及び方法 | |
JP2020510487A (ja) | 対象の生理学的信号を測定及び処理するデバイス、システム並びに方法 | |
JP6167614B2 (ja) | 血流指標算出プログラム、血流指標算出装置および血流指標算出方法 | |
JP2018534968A (ja) | 生理情報を抽出するためのデバイス、システム、及び方法 | |
US20160300342A1 (en) | Image processing device, imaging device, image processing method, and computer-readable recording medium | |
JP2017535356A (ja) | 被検体の血液内の物質の濃度を決定するためのデバイス、システム及び方法 | |
JP2019532747A (ja) | 被検体のバイタルサインを得るためのデバイス、システム及び方法 | |
JP6462594B2 (ja) | 撮像装置、画像処理装置および画像処理方法 | |
Karlen et al. | Detection of the optimal region of interest for camera oximetry | |
US11045146B2 (en) | Device, system and method for determining a vital sign of a subject | |
WO2019145142A1 (en) | Device, system and method for determining at least one vital sign of a subject | |
JP7237768B2 (ja) | 生体情報検出装置 | |
JP6419093B2 (ja) | 撮像装置 | |
US10477119B2 (en) | Imaging device | |
US20220343517A1 (en) | Device, method and system for registering a first image frame and a second image frame | |
Rachim et al. | High sampling rate smartphone-PPG via built-in rolling shutter image sensor | |
WO2020169550A1 (en) | Device, system and method for determining physiological information | |
Procka et al. | System for contactless monitoring of tissue perfusion | |
JP7212499B2 (ja) | 生体情報検出装置及び生体情報検出方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210318 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20211215 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220111 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220726 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220921 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230117 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230215 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7229676 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |