JP6459184B2 - 表示システム、健康器具、制御装置およびプログラム - Google Patents
表示システム、健康器具、制御装置およびプログラム Download PDFInfo
- Publication number
- JP6459184B2 JP6459184B2 JP2014035026A JP2014035026A JP6459184B2 JP 6459184 B2 JP6459184 B2 JP 6459184B2 JP 2014035026 A JP2014035026 A JP 2014035026A JP 2014035026 A JP2014035026 A JP 2014035026A JP 6459184 B2 JP6459184 B2 JP 6459184B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- video
- mirror image
- display
- signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 claims description 14
- 238000006243 chemical reaction Methods 0.000 claims description 7
- 238000000605 extraction Methods 0.000 claims description 7
- 230000004048 modification Effects 0.000 description 14
- 238000012986 modification Methods 0.000 description 14
- 238000010586 diagram Methods 0.000 description 11
- WBMKMLWMIQUJDP-STHHAXOLSA-N (4R,4aS,7aR,12bS)-4a,9-dihydroxy-3-prop-2-ynyl-2,4,5,6,7a,13-hexahydro-1H-4,12-methanobenzofuro[3,2-e]isoquinolin-7-one hydrochloride Chemical compound Cl.Oc1ccc2C[C@H]3N(CC#C)CC[C@@]45[C@@H](Oc1c24)C(=O)CC[C@@]35O WBMKMLWMIQUJDP-STHHAXOLSA-N 0.000 description 6
- 230000006870 function Effects 0.000 description 6
- 206010033799 Paralysis Diseases 0.000 description 5
- 208000004983 Phantom Limb Diseases 0.000 description 2
- 206010056238 Phantom pain Diseases 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 238000002560 therapeutic procedure Methods 0.000 description 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 208000002193 Pain Diseases 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/60—Rotation of whole images or parts thereof
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
- A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/107—Static hand or arm
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
- G16H20/30—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to physical therapies or activities, e.g. physiotherapy, acupressure or exercising
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
- G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
- G16H40/63—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
- A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
- A61M2021/0005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus
- A61M2021/0044—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the sight sense
- A61M2021/005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the sight sense images, e.g. video
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
- A61M2205/00—General characteristics of the apparatus
- A61M2205/50—General characteristics of the apparatus with microprocessors or computers
- A61M2205/502—User interfaces, e.g. screens or keyboards
- A61M2205/507—Head Mounted Displays [HMD]
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0112—Head-up displays characterised by optical features comprising device for genereting colour display
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0132—Head-up displays characterised by optical features comprising binocular systems
- G02B2027/0134—Head-up displays characterised by optical features comprising binocular systems of stereoscopic type
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B2027/0178—Eyeglass type
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- Public Health (AREA)
- Theoretical Computer Science (AREA)
- Primary Health Care (AREA)
- Life Sciences & Earth Sciences (AREA)
- Medical Informatics (AREA)
- Epidemiology (AREA)
- Human Computer Interaction (AREA)
- Hematology (AREA)
- Optics & Photonics (AREA)
- Multimedia (AREA)
- Acoustics & Sound (AREA)
- Psychology (AREA)
- Anesthesiology (AREA)
- Biophysics (AREA)
- Heart & Thoracic Surgery (AREA)
- Physical Education & Sports Medicine (AREA)
- Animal Behavior & Ethology (AREA)
- Veterinary Medicine (AREA)
- Business, Economics & Management (AREA)
- General Business, Economics & Management (AREA)
- Rehabilitation Tools (AREA)
- Controls And Circuits For Display Device (AREA)
- Computer Hardware Design (AREA)
- Computer Graphics (AREA)
Description
この表示システムによれば、鏡像を利用する用途に利用することができる。
この表示システムによれば、鏡像と背景とを併せて表示する用途に利用することができる。
この表示システムによれば、より臨場感のある鏡像を提供することができる。
この表示システムによれば、より臨場感のある鏡像を提供することができる。
この表示システムによれば、身体部分の映像の鏡像を得ることができる。
この表示システムによれば、人体部分の鏡像を利用することができる。
この表示システムによれば、人体部分の鏡像を利用することができる。
この表示システムによれば、より臨場感のある鏡像を提供することができる。
この健康器具によれば、鏡像を利用するリハビリを行うことができる。
この表示制御方法によれば、鏡像を利用する用途に利用することができる。
図1は、一実施形態に係る表示システム1の概要を示す図である。この例で、表示システム1は、四肢の麻痺がある患者のリハビリ支援に用いられる健康器具である。具体的には、表示システム1は、例えば左手に麻痺があるが右手は動く患者に対し、右手の画像を撮影し、撮影した画像の鏡像(左手に見える)をこの患者に見せることにより左手が動いているかのような錯覚を与え、左手の機能回復を図るリハビリ方法を提供する。この方法はミラーセラピーと呼ばれている。
図5は、一実施形態に係る表示システム1の動作を示すフローチャートである。図5のフローは、例えば、支援プログラムの実行が指示されたことを契機として開始される。以下の説明においては、支援プログラムを処理の主体として記載する場合があるが、これは、支援プログラムを実行しているCPU301が、他のハードウェアと協働してその処理を実行することを意味する。なお、図5のフローの開始時点において、ユーザー(患者)はHMD10を頭部に装着しており、支援プログラムにより指定される姿勢をとっている。
(1)MAX=MINの場合:
H=0
(2)Rが最大の場合:
(1)MAX=0の場合:
S=0
(2)MAX≠0の場合:
V=MAX
本発明は上述の実施形態に限定されるものではなく、種々の変形実施が可能である。以下、変形例をいくつか説明する。以下の変形例のうち2つ以上のものが組み合わせて用いられてもよい。
HMD10は、シースルー型のHMDではなく、背景を透過しないクローズドなHMDであってもよい。この場合、支援プログラムは、腕以外の部分に、別の映像(カメラで撮影した映像またはあらかじめ用意された背景映像)を合成してもよい。
映像取り込みサイドの映像は消去されず、そのまま表示されてもよい。クローズドなHMDを用いた場合はこれで両腕の映像が表示される。シースルーのHMDを用いた場合は映像の腕と透過して見える実際の腕が重なってしまうが、使用状況によっては問題ない場合もある。
映像源はカメラ20からのリアルタイム映像に限定されない。例えば患者の右手を動かす映像をあらかじめ撮影しておき、リハビリ時にはこの映像を繰り返し再生して映像源としてもよい。
腕以外の背景を除去する処理(ステップS104)は省略されてもよい。すなわち、背景も含め、取り込みサイドの映像がそのまま鏡像となってもよい。クローズドなHMDを用いる場合はこれが有効である。
人体(肌色)を抽出する方法は実施形態で説明したものに限定されない。映像データをHSV系に変換せず、RGB系のまま、RGB各成分の階調値の関係からその画素が肌色かどうか判断してもよい。
HMD10に表示する映像は、立体視映像であってもよい。HMD10においては右目用の映像と左目用の映像とをそれぞれ独立に表示することができるので、立体視映像の表示は容易である。これにより、より臨場感のあるリハビリを行うことができる。
図11は、変形例7に係るカメラ20の配置を示す図である。カメラ20は、HMD10に取り付けられていてもよい。この配置によれば、カメラ20により撮影される映像はユーザーの視野により近いものとなり、より臨場感のあるリハビリを行うことができる。
表示システム1の用途はリハビリに限定されない。表示システム1は、リハビリ以外の用途、例えばゲームに用いられてもよい。
Claims (10)
- ヘッドマウントディスプレイと、
入力映像信号により示される映像のうち、一部の領域の映像から鏡像を生成する鏡像生成手段と、
前記鏡像生成手段により生成された鏡像を、前記ヘッドマウントディスプレイに表示させる制御手段と
を有し、
前記制御手段は、前記入力映像信号により示される映像のうち、人間の体以外の部分を消去する
ことを特徴とする表示システム。 - 前記ヘッドマウントディスプレイは、透過型表示部を有する
ことを特徴とする請求項1に記載の表示システム。 - 前記制御手段は、前記入力映像信号により示される映像のうち、前記一部の領域の映像を消去した映像を、前記ヘッドマウントディスプレイに表示させる
ことを特徴とする請求項2に記載の表示システム。 - 前記入力映像信号は、カメラにより撮影されたリアルタイム映像を示す
ことを特徴とする請求項1ないし3のいずれか一項に記載の表示システム。 - 前記入力映像信号により示される映像は、身体部分の映像を示す
ことを特徴する請求項1ないし4のいずれか一項に記載の表示システム。 - 前記入力映像信号はRGB表色系に従った信号であり、
前記RGB表色系の信号をHSV表色系の信号に変換する変換手段と、
前記変換手段により変換された信号により示される映像から、人間の体の部分を抽出する抽出手段を有し、
前記制御手段は、前記抽出手段により抽出された部分以外の部分を消去する
ことを特徴とする請求項5に記載の表示システム。 - 前記ヘッドマウントディスプレイは、立体視映像を表示する
ことを特徴とする請求項1ないし6のいずれか一項に記載の表示システム。 - ヘッドマウントディスプレイと、
入力映像信号により示される映像のうち、一部の領域の映像から鏡像を生成する鏡像生成手段と、
前記鏡像生成手段により生成された鏡像を、前記ヘッドマウントディスプレイに表示させる制御手段と
を有し、
前記制御手段は、前記入力映像信号により示される映像のうち、人間の体以外の部分を消去する
健康器具。 - 入力映像信号により示される映像のうち、一部の領域の映像から鏡像を生成し、
前記生成された鏡像を、ヘッドマウントディスプレイに表示するとともに、前記入力映像信号により示される映像のうち、人間の体以外の部分を消去する
ことを特徴とする制御装置。 - 入力映像信号により示される映像のうち、一部の領域の映像から鏡像を生成する処理と、
前記生成された鏡像を、ヘッドマウントディスプレイに表示させる処理であって、前記入力映像信号により示される映像のうち、人間の体以外の部分を消去する処理と、
をコンピューターに実行させるためのプログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014035026A JP6459184B2 (ja) | 2014-02-26 | 2014-02-26 | 表示システム、健康器具、制御装置およびプログラム |
CN201510080339.1A CN104869353A (zh) | 2014-02-26 | 2015-02-13 | 显示***、健康器械和显示控制方法 |
US14/623,191 US20150242998A1 (en) | 2014-02-26 | 2015-02-16 | Display system, health apparatus, and display control method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014035026A JP6459184B2 (ja) | 2014-02-26 | 2014-02-26 | 表示システム、健康器具、制御装置およびプログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2015161699A JP2015161699A (ja) | 2015-09-07 |
JP2015161699A5 JP2015161699A5 (ja) | 2017-03-30 |
JP6459184B2 true JP6459184B2 (ja) | 2019-01-30 |
Family
ID=53882692
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014035026A Active JP6459184B2 (ja) | 2014-02-26 | 2014-02-26 | 表示システム、健康器具、制御装置およびプログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US20150242998A1 (ja) |
JP (1) | JP6459184B2 (ja) |
CN (1) | CN104869353A (ja) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017037563A (ja) * | 2015-08-13 | 2017-02-16 | セイコーエプソン株式会社 | 医療機器、プログラム |
CN106422203B (zh) * | 2016-11-23 | 2018-11-16 | 佛山科学技术学院 | 一种基于镜像疗法的光电多模态反馈的上肢康复训练方法 |
AT520385B1 (de) * | 2017-06-07 | 2020-11-15 | Vorrichtung mit einer Erfassungseinheit für die Position und Lage einer ersten Gliedmasse eines Benutzers | |
US10354573B2 (en) * | 2017-07-25 | 2019-07-16 | Lenovo (Singapore) Pte Ltd | Screen color calibration |
CN108392816A (zh) * | 2018-04-19 | 2018-08-14 | 温州医科大学 | 一种下肢数字化镜像疗法康复训练*** |
JP7450183B2 (ja) * | 2020-03-05 | 2024-03-15 | 株式会社電通総研 | 幻肢痛ケアシステム、被術者装置、及びプログラム |
JP6986725B1 (ja) * | 2021-05-19 | 2021-12-22 | 株式会社アイ・サポート | 段ボール製ミラーボックス、及び段ボール製ミラーボックスを用いたミラーセラピー方法 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002157606A (ja) * | 2000-11-17 | 2002-05-31 | Canon Inc | 画像表示制御装置、複合現実感提示システム、画像表示制御方法、及び処理プログラムを提供する媒体 |
JP4136420B2 (ja) * | 2002-03-29 | 2008-08-20 | キヤノン株式会社 | 情報処理方法および装置 |
JP4025230B2 (ja) * | 2003-03-31 | 2007-12-19 | 株式会社東芝 | 疼痛治療支援装置及び仮想空間に幻肢画像を動画的に表示する方法 |
JP4618795B2 (ja) * | 2005-07-15 | 2011-01-26 | 独立行政法人産業技術総合研究所 | リハビリ装置 |
JP5712351B2 (ja) * | 2010-06-18 | 2015-05-07 | パナソニックIpマネジメント株式会社 | ミラーセラピーシステム |
JPWO2012173001A1 (ja) * | 2011-06-13 | 2015-02-23 | シチズンホールディングス株式会社 | 情報入力装置 |
JP5351311B1 (ja) * | 2012-06-29 | 2013-11-27 | 株式会社ソニー・コンピュータエンタテインメント | 立体映像観察デバイスおよび透過率制御方法 |
US8911343B2 (en) * | 2012-10-20 | 2014-12-16 | Pieter C Wiest | System and method utilizing a smart phone for alleviating phantom limb discomfort |
-
2014
- 2014-02-26 JP JP2014035026A patent/JP6459184B2/ja active Active
-
2015
- 2015-02-13 CN CN201510080339.1A patent/CN104869353A/zh active Pending
- 2015-02-16 US US14/623,191 patent/US20150242998A1/en not_active Abandoned
Also Published As
Publication number | Publication date |
---|---|
CN104869353A (zh) | 2015-08-26 |
JP2015161699A (ja) | 2015-09-07 |
US20150242998A1 (en) | 2015-08-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6459184B2 (ja) | 表示システム、健康器具、制御装置およびプログラム | |
CN112444996B (zh) | 具有张紧调节的头戴式设备 | |
US20160156850A1 (en) | Methods and Apparatus for Vision Enhancement | |
US11546527B2 (en) | Methods and apparatuses for compensating for retinitis pigmentosa | |
US9810907B2 (en) | Display apparatus, display method, and program | |
US11372479B2 (en) | Multi-modal vision enhancement system | |
EP3486760A1 (en) | Preview picture presentation method, device and terminal | |
WO2020102110A8 (en) | Event-based ir camera | |
US10839706B2 (en) | Motion training device, program, and display method | |
JP5607473B2 (ja) | 視度補正装置 | |
US9805612B2 (en) | Interest-attention feedback method for separating cognitive awareness into different left and right sensor displays | |
US11081015B2 (en) | Training device, training method, and program | |
CN104706422A (zh) | 一种头戴式医疗装置、医疗***及其操作方法 | |
JP2017046233A5 (ja) | ||
JP2017212720A (ja) | 画像処理装置、画像処理方法およびプログラム | |
JP6932526B2 (ja) | 画像表示装置、画像表示方法及びプログラム | |
US11839516B2 (en) | Medical imaging equipment and medical imaging method | |
JP5979110B2 (ja) | ヘッドマウントディスプレイ、及び、制御プログラム | |
JP7262763B2 (ja) | リハビリ支援装置、及びプログラム | |
KR102185519B1 (ko) | 다이렉트 인코딩 방식의 씨스루 헤드 마운트 디스플레이를 위한 실세계 영상 왜곡 방법 및 실세계 영상 왜곡 기능을 가지는 다이렉트 인코딩 방식의 씨스루 헤드 마운트 디스플레이 | |
JP2013255594A (ja) | 画像処理装置及び画像処理方法 | |
US20170242482A1 (en) | Training device, corresponding area specifying method, and program | |
JP6275904B1 (ja) | 口腔内治療支援システムおよび口腔内治療支援方法 | |
CN111193830A (zh) | 一种基于智能手机的便携式增强现实医学图像观察辅助设备 | |
KR20200099047A (ko) | 씨스루 헤드 마운트 디스플레이를 위한 실세계 영상 왜곡 방법 및 실세계 영상 왜곡 기능을 가지는 씨스루 헤드 마운트 디스플레이 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170224 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170224 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180125 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180206 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180406 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20181002 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181101 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20181204 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20181217 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6459184 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |