JP2017184144A - 画像処理装置、撮像装置、および画像処理プログラム - Google Patents
画像処理装置、撮像装置、および画像処理プログラム Download PDFInfo
- Publication number
- JP2017184144A JP2017184144A JP2016072073A JP2016072073A JP2017184144A JP 2017184144 A JP2017184144 A JP 2017184144A JP 2016072073 A JP2016072073 A JP 2016072073A JP 2016072073 A JP2016072073 A JP 2016072073A JP 2017184144 A JP2017184144 A JP 2017184144A
- Authority
- JP
- Japan
- Prior art keywords
- depth
- field
- subject
- image processing
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 111
- 230000003287 optical effect Effects 0.000 claims abstract description 37
- 238000001514 detection method Methods 0.000 claims description 10
- 230000008859 change Effects 0.000 claims description 5
- 230000004075 alteration Effects 0.000 abstract 1
- 238000000034 method Methods 0.000 description 26
- 230000008569 process Effects 0.000 description 24
- 230000004048 modification Effects 0.000 description 7
- 238000012986 modification Methods 0.000 description 7
- 238000006243 chemical reaction Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000004907 flux Effects 0.000 description 4
- 238000004458 analytical method Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 210000001747 pupil Anatomy 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000010411 cooking Methods 0.000 description 1
- 238000007405 data analysis Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000001771 impaired effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
Images
Landscapes
- Studio Devices (AREA)
Abstract
Description
本発明の第2の態様による撮像装置は、第1の態様による画像処理装置と、撮像部と、を備える。
本発明の第3の態様による画像処理プログラムは、撮像光学系を透過した被写体からの光が入射する複数のマイクロレンズと前記マイクロレンズ毎に複数設けられた受光部とを有する撮像部から出力された第1画像データに対して、前記撮像光学系の光軸方向の焦点が合う被写体の位置と被写界深度とを設定する設定ステップと、前記設定ステップで設定された前記焦点が合う被写体の位置と前記被写界深度とを有する複数の第2画像データを複数の前記第1画像データから生成して、前記複数の第2画像データを有する動画データを生成する生成ステップと、前記生成ステップで生成された前記動画データの少なくとも一部の第2画像データの前記焦点が合う被写体の位置と前記被写界深度とのうちの少なくとも一方を変更する変更ステップと、をコンピュータに実行させる。。
以下、本発明の第1の実施形態について図面を参照して説明する。
図1は、撮像装置10の構成図である。なお、撮像装置10は、デジタルカメラの例で説明するが、デジタルカメラに限らず、例えばスマートフォン端末、ゲーム機、タブレット端末、パーソナルコンピュータ、時計型や眼鏡型の情報端末などであってもよい。
なお、視差画像とは、図2を参照すると、複数の光点Pを通過した光束が複数のマイクロレンズ13を通過して複数の受光素子31に入射して得られる画素値を合成した画像である。
なお調整窓の数はキーフレームの数よりも少なくてもよい。例えば、調整窓を一つとして、複数のキーフレームのうちのユーザが調整を行うキーフレームを一つ選択して、その選択されたキーフレームに対応する調整窓だけを表示してもよい。
図4のグラフは、一方の軸を時間軸、他方の軸を像面位置とした直線で示されているが、曲線により像面位置を表示してもよい。また、図4のグラフは、像面位置を表す直線の周囲に被写界深度を表す範囲を表示しているが、像面位置を表す曲線の周囲に被写界深度を表す範囲を表示してもよい。
第2の実施形態について図面を参照して説明する。撮像装置10の構成は、図1に示した第1の実施形態と同様であるので、その説明を省略する。さらに、制御部17が実行するフローチャートは、図3に示した第1の実施形態と同様であるので、その説明を省略するが、第2の実施形態では、図3のステップS12の処理が異なる。以下、図3のステップS12に代わる部分のフローチャートについて、図5を参照して説明する。なお、このフローチャートで示す各処理は、制御部17が不図示のROMに格納されたプログラムを実行することにより行われる。
ステップS1201において、動画のN枚のフレームのそれぞれについて、遠景の被写体を主要被写体と認識して像面位置を設定する。
次に、ステップS1202において、遠景の像面位置に応じた被写界深度を設定する。具体的には、像面位置が遠くにある場合は、全体にピントが合うように被写界深度を深く設定する。
次に、ステップS1206において、移動体の像面位置に応じて被写界深度を設定する。具体的には、人や車などの移動体にピントが合うように被写界深度を浅く設定する。
ステップS1203またはステップS1207で、動画のフレームが全て終了した場合はリフォーカス画像処理を終了する。
なお、ユーザによるリフォーカス動画の調整は、図3のステップ15で説明した第1の実施形態と同様である。
第3の実施形態について図面を参照して説明する。撮像装置10の構成は、図1に示した第1の実施形態と同様であるので、その説明を省略する。さらに、制御部17が実行するフローチャートは、図3に示した第1の実施形態と同様であるので、その説明を省略するが、第3の実施形態では、図3のステップS12の処理が異なる。以下、図3のステップS12に代わる部分のフローチャートについて、図6を参照して説明する。なお、このフローチャートで示す各処理は、制御部17が不図示のROMに格納されたプログラムを実行することにより行われる。
ステップS1212において、全ての人物をカバーする像面位置および被写界深度の設定が可能ではないと判別された場合は、ステップS1214の処理へ進む。
すなわち、制御部17(ステップS1214〜S1215)は、主要被写体に関する情報を登録する登録部を更に備えるように構成し、検出された複数の主要被写体のうち、登録部に情報が登録されている主要被写体を被写界深度内に含めるように被写界深度および像面位置を設定してもよい。これにより、登録された被写体にピントがあった動画を生成することができる。
なお、登録する主要被写体は人物の顔に限定されず、特定の車両、構造物などでもよい。
なお、ユーザによるリフォーカス動画の調整は、図3のステップ15で示した第1の実施形態と同様である。
第4の実施形態について図面を参照して説明する。撮像装置10の構成は、図1に示した第1の実施形態と同様であるので、その説明を省略する。さらに、制御部17が実行するフローチャートは、図3に示した第1の実施形態と同様であるので、その説明を省略するが、第4の実施形態では、図3のステップS12の処理が異なる。以下、図3のステップS12に代わる部分のフローチャートについて、図7を参照して説明する。なお、このフローチャートで示す各処理は、制御部17が不図示のROMに格納されたプログラムを実行することにより行われる。
図7のステップS1221において、動画撮影時の撮像シーンを判別する。撮像シーンのうち、ポートレート、ペット、料理、子供、クローズアップ、パーティ、キャンドルライトを第1撮像シーンとし、風景、夜景を第2撮像シーンとする。ステップS1221では、フレームが第1撮像シーンか第2撮像シーンかを判別する。
ステップS1226で、動画のフレームが全て終了した場合はリフォーカス画像処理を終了する。
なお、ユーザによるリフォーカス動画の調整は、図3のステップ15で示した第1の実施形態と同様である。
一般に、複数の被写体がそれぞれ距離を隔てて存在した場合に、これを動画撮影データからリフォーカス画像処理してピントの合った画像を得るには限界がある。以下では、動画撮影時のスルー画像において、リフォーカス画像処理の可能範囲を表示する例を説明する。
(1)撮像装置10は、複数のマイクロレンズ13と複数のマイクロレンズ13よりも多くの受光素子とを有する撮像素子14により撮像された第1動画像データが入力される画像処理部15と、第1動画像データに含まれる複数のフレームに対して、被写界深度と光軸方向の所定範囲内の像面位置とを設定する制御部17(ステップS12)と、複数のフレームの各々を制御部(設定部)17で設定された被写界深度を有する像面位置の画像に変換した第2動画像データを出力する制御部17(ステップS13)と、を備えた。したがって、動画の複数フレームの各々において適切な像面位置と被写界深度を設定したリフォーカス動画が生成される。一フレームずつ像面位置と被写界深度を設定する必要がない。
図3のステップS15において、既に説明したように、リフォーカス動画データの各フレームを解析し、解析結果に応じて、撮影時間を横軸にして像面位置および被写界深度を表示部19にグラフ表示する。図4は、この場合の表示例であり、図9は、この表示例の変形例を示す。以下、図9に基づいて説明する。
以上の実施形態の画像処理装置、撮像装置では、各フレームの像面位置と被写界深度を制御部17が自動的に行うものとして説明した。しかし、手動で像面位置と被写界深度を設定してもよい。たとえば、動画の原画像の全てのフレームについて、デフォルトで設定した像面位置と被写界深度によりリフォーカス画像処理を行ってリフォーカス画像を生成して保存する。保存した特定の像面位置と特定の被写界深度のリフォーカス画像を表示し、図4に示すような編集画面上で一フレームごとに手動で最適な像面位置と被写界深度を設定してもよい。
したがって、本発明は、複数のマイクロレンズ13と複数のマイクロレンズ13よりも多くの受光素子31とを有する撮像素子14により撮像されて得た第1動画像データを入力する入力ステップと、第1動画像データに含まれる複数のフレームの各々に対して、被写界深度と光軸方向の所定範囲内の像面位置とを設定する設定ステップと、複数のフレームの各々を設定ステップで設定された被写界深度を有する像面位置の画像に変換した第2動画像データを出力する出力ステップとをコンピュータに実行させる画像処理プログラムも含む。
11 撮像部
12 撮像レンズ
13 マイクロレンズ
14 撮像素子
15 画像処理部
16 撮像制御部
17 制御部
18 記録インタフェース
19 表示部
20 操作部
21 可搬型メモリ
Claims (21)
- 撮像光学系を透過した被写体からの光が入射する複数のマイクロレンズと前記マイクロレンズ毎に複数設けられた受光部とを有する撮像部から出力された第1画像データに対して、前記撮像光学系の光軸方向の焦点が合う被写体の位置と被写界深度とを設定する設定部と、
前記設定部で設定された前記焦点が合う被写体の位置と前記被写界深度とを有する複数の第2画像データを複数の前記第1画像データから生成して、前記複数の第2画像データを有する動画データを生成する生成部と、
前記生成部で生成された前記動画データの少なくとも一部の第2画像データの前記焦点が合う被写体の位置と前記被写界深度とのうちの少なくとも一方を変更する変更部と
を備える画像処理装置。 - 請求項1に記載の画像処理装置において、
前記第1画像データから主要被写体を検出する検出部を備え、
前記設定部は、前記検出部で検出された前記主要被写体が前記被写界深度内に含まれるように前記被写界深度と前記焦点が合う被写体の位置とを設定する画像処理装置。 - 請求項2に記載の画像処理装置において、
前記設定部は、前記主要被写体が前記撮像光学系の光軸方向の第1の位置にあると第1の被写界深度を設定し、前記主要被写体が前記第1の位置よりも前記撮像光学系に近い第2の位置にあると前記第1の被写界深度よりも深い第2の被写界深度を設定する画像処理装置。 - 請求項3に記載の画像処理装置において、
前記設定部は、前記主要被写体が前記検出部により検出されていない前記第1画像データには第1の被写界深度を設定し、前記主要被写体が前記検出部により検出された前記第1画像データには前記第1の被写界深度よりも浅い第2の被写界深度を設定する画像処理装置。 - 請求項2に記載の画像処理装置において、
前記設定部は、前記検出部により複数の前記主要被写体が検出された場合には、前記複数の主要被写体が前記被写界深度内に含まれるように前記被写界深度と前記焦点が合う被写体の位置を設定する画像処理装置。 - 請求項2に記載の画像処理装置において、
前記設定部は、前記撮像光学系の光軸方向の第1の位置にある第1主要被写体と前記第1の位置よりも前記撮像光学系から遠い第2の位置にある第2主要被写体が前記検出部によって検出されると、前記第1主要被写体が前記被写界深度内に含まれるように前記被写界深度と前記焦点が合う被写体の位置を設定する画像処理装置。 - 請求項6に記載の画像処理装置において、
前記設定部は、前記第1主要被写体から前記撮像部の方向に所定距離だけ離れた位置に前記焦点が合う被写体の位置を設定する画像処理装置。 - 請求項2に記載の画像処理装置において、
前記主要被写体に関する情報を登録する登録部を更に備え、
前記設定部は、前記検出部により検出された複数の前記主要被写体のうち、前記登録部に前記情報が登録されている前記主要被写体を前記被写界深度内に含めるように前記被写界深度と前記焦点が合う被写体の位置を設定する画像処理装置。 - 請求項2から請求項8までのいずれか一項に記載の画像処理装置において、
前記撮像光学系の焦点距離を取得する焦点距離取得部を備え、
前記設定部は、前記焦点距離取得部により第1焦点距離が取得された場合には第1被写界深度を設定し、前記焦点距離取得部により前記第1焦点距離よりも短い第2焦点距離が取得された場合には前記第1被写界深度よりも浅い第2被写界深度を設定する画像処理装置。 - 請求項1から請求項8までのいずれか一項に記載の画像処理装置において、
前記第1画像データについて、撮像シーンを認識し第1撮像シーンおよび第2撮像シーンのいずれか一方に分類するシーン認識部を更に備え、
前記設定部は、前記第1撮像シーンに分類された前記第1画像データと前記第2撮像シーンに分類された前記第1画像データとで、設定する前記被写界深度および前記焦点が合う被写体の位置を異ならせる画像処理装置。 - 請求項1から請求項10までのいずれか一項に記載の画像処理装置において、
前記複数の第1画像データの各々に設定された前記焦点が合う被写体の位置と前記被写界深度とを表示部に表示する表示制御部を備える画像処理装置。 - 請求項11に記載の画像処理装置において、
前記表示制御部は、一方の軸を時間軸、他方の軸を前記焦点が合う被写体の位置として直線または曲線により前記焦点が合う被写体の位置を前記表示部に表示する画像処理装置。 - 請求項12に記載の画像処理装置において、
前記表示制御部は、前記焦点が合う被写体の位置を表す直線または曲線の周囲に前記被写界深度を表す範囲を前記表示部に表示する画像処理装置。 - 請求項11に記載の画像処理装置において、
前記表示制御部は、前記表示部に時間軸を第1軸、前記焦点が合う被写体の位置を第2軸、前記被写界深度を第3軸とする三次元表示を行う画像処理装置。 - 請求項11から請求項14までのいずれか一項に記載の画像処理装置において、
前記設定部は、設定した前記被写界深度および前記焦点が合う被写体の位置を、前記変更部により変更された焦点が合う被写体の位置と被写界深度との少なくとも一方に再設定し、
前記表示制御部は、再設定された前記被写界深度および前記焦点が合う被写体の位置により前記表示部の表示を変更する画像処理装置。 - 請求項15に記載の画像処理装置において、
前記設定部は、前記複数の第1画像データのうちの所定第1画像データをキーフレームに設定し、
前記変更部は、前記設定部により設定された前記キーフレームの前記焦点が合う被写体の位置と前記被写界深度とは異なる焦点が合う被写体の位置と被写界深度との少なくとも一方が変更され、
前記設定部は、2つのキーフレームの間の第1画像データにおける前記焦点が合う被写体の位置と前記被写界深度を、一方のキーフレームに対する前記変更された焦点が合う被写体の位置と被写界深度との少なくとも一方と、他方のキーフレームにに対する前記変更された焦点が合う被写体の位置と被写界深度との少なくとも一方との間で段階的に変化させる画像処理装置。 - 請求項16に記載の画像処理装置において、
前記設定部は、前記被写界深度および前記焦点が合う被写体の位置が変化した第1画像データをキーフレームに設定する画像処理装置。 - 請求項2から請求項9までのいずれか一項に記載の画像処理装置において、
前記設定部は、前記検出部による前記主要被写体の検出結果が変化した第1画像データをキーフレームに設定する画像処理装置。 - 請求項1から請求項18までのいずれか一項に記載の画像処理装置と、
前記撮像部と、
を備える撮像装置。 - 請求項19に記載の撮像装置において、
前記焦点が合う被写体の位置の範囲を報知する報知部を備える撮像装置。 - 撮像光学系を透過した被写体からの光が入射する複数のマイクロレンズと前記マイクロレンズ毎に複数設けられた受光部とを有する撮像部から出力された第1画像データに対して、前記撮像光学系の光軸方向の焦点が合う被写体の位置と被写界深度とを設定する設定ステップと、
前記設定ステップで設定された前記焦点が合う被写体の位置と前記被写界深度とを有する複数の第2画像データを複数の前記第1画像データから生成して、前記複数の第2画像データを有する動画データを生成する生成ステップと、
前記生成ステップで生成された前記動画データの少なくとも一部の第2画像データの前記焦点が合う被写体の位置と前記被写界深度とのうちの少なくとも一方を変更する変更ステップと、
をコンピュータに実行させる画像処理プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016072073A JP6693236B2 (ja) | 2016-03-31 | 2016-03-31 | 画像処理装置、撮像装置、および画像処理プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016072073A JP6693236B2 (ja) | 2016-03-31 | 2016-03-31 | 画像処理装置、撮像装置、および画像処理プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017184144A true JP2017184144A (ja) | 2017-10-05 |
JP6693236B2 JP6693236B2 (ja) | 2020-05-13 |
Family
ID=60007783
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016072073A Active JP6693236B2 (ja) | 2016-03-31 | 2016-03-31 | 画像処理装置、撮像装置、および画像処理プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6693236B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11232315B2 (en) | 2020-04-28 | 2022-01-25 | NextVPU (Shanghai) Co., Ltd. | Image depth determining method and living body identification method, circuit, device, and medium |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011211291A (ja) * | 2010-03-29 | 2011-10-20 | Sanyo Electric Co Ltd | 画像処理装置、撮像装置及び表示装置 |
JP2012095186A (ja) * | 2010-10-28 | 2012-05-17 | Sanyo Electric Co Ltd | 電子機器 |
WO2014129127A1 (ja) * | 2013-02-21 | 2014-08-28 | Necカシオモバイルコミュニケーションズ株式会社 | 画像処理装置、画像処理方法、及び非一時的なコンピュータ可読媒体 |
JP2015139020A (ja) * | 2014-01-21 | 2015-07-30 | 株式会社ニコン | 電子機器及び制御プログラム |
JP2015192363A (ja) * | 2014-03-28 | 2015-11-02 | 富士フイルム株式会社 | 画像再生装置,画像再生方法および画像再生装置のコンピュータを制御するプログラム |
JP2016136699A (ja) * | 2015-01-23 | 2016-07-28 | キヤノン株式会社 | 情報処理装置及びその制御方法、プログラム、並びに記憶媒体 |
-
2016
- 2016-03-31 JP JP2016072073A patent/JP6693236B2/ja active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011211291A (ja) * | 2010-03-29 | 2011-10-20 | Sanyo Electric Co Ltd | 画像処理装置、撮像装置及び表示装置 |
JP2012095186A (ja) * | 2010-10-28 | 2012-05-17 | Sanyo Electric Co Ltd | 電子機器 |
WO2014129127A1 (ja) * | 2013-02-21 | 2014-08-28 | Necカシオモバイルコミュニケーションズ株式会社 | 画像処理装置、画像処理方法、及び非一時的なコンピュータ可読媒体 |
JP2015139020A (ja) * | 2014-01-21 | 2015-07-30 | 株式会社ニコン | 電子機器及び制御プログラム |
JP2015192363A (ja) * | 2014-03-28 | 2015-11-02 | 富士フイルム株式会社 | 画像再生装置,画像再生方法および画像再生装置のコンピュータを制御するプログラム |
JP2016136699A (ja) * | 2015-01-23 | 2016-07-28 | キヤノン株式会社 | 情報処理装置及びその制御方法、プログラム、並びに記憶媒体 |
Also Published As
Publication number | Publication date |
---|---|
JP6693236B2 (ja) | 2020-05-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6288952B2 (ja) | 撮像装置およびその制御方法 | |
JP5898501B2 (ja) | 画像処理装置、撮像装置、制御方法、プログラム及び記録媒体 | |
US10511781B2 (en) | Image pickup apparatus, control method for image pickup apparatus | |
JP6202910B2 (ja) | 映像処理装置およびその制御方法、プログラム | |
US20080181460A1 (en) | Imaging apparatus and imaging method | |
JP5750551B2 (ja) | 複数被写体の距離計測装置及び方法 | |
JP5814692B2 (ja) | 撮像装置及びその制御方法、プログラム | |
JP5788518B2 (ja) | 単眼立体撮影装置、撮影方法及びプログラム | |
US8823778B2 (en) | Imaging device and imaging method | |
JP5612774B2 (ja) | 追尾枠の初期位置設定装置およびその動作制御方法 | |
JP2013145314A5 (ja) | ||
JP6159097B2 (ja) | 画像処理装置、撮像装置、制御方法、及びプログラム | |
JP6752681B2 (ja) | 表示制御装置、表示制御装置の制御方法及びプログラム並びに記憶媒体 | |
US20140226039A1 (en) | Image capturing apparatus and control method thereof | |
JP2016219991A (ja) | 画像処理装置及びその制御方法、並びにプログラム | |
JP2012178688A (ja) | 立体画像撮影装置 | |
JP5526733B2 (ja) | 画像合成装置、画像再生装置、および撮像装置 | |
JP2013160991A (ja) | 撮像装置 | |
JP6693236B2 (ja) | 画像処理装置、撮像装置、および画像処理プログラム | |
JP2017041857A (ja) | 画像処理装置、その制御方法、プログラム及び撮像装置 | |
JP6491442B2 (ja) | 画像処理装置、画像処理方法、プログラム及び記録媒体 | |
JP2019032370A (ja) | 撮像装置、及びその制御方法 | |
JP2008219367A (ja) | 撮像装置及び撮像方法 | |
JP6336284B2 (ja) | 画像処理装置、その制御方法およびプログラム | |
JP6478536B2 (ja) | 画像処理装置および撮像装置、ならびにそれらの制御方法、プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190226 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20191126 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20191210 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200210 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20200210 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200317 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200330 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6693236 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |