JP6773903B2 - 画像処理装置、撮像システム、画像処理方法、及び記録媒体 - Google Patents
画像処理装置、撮像システム、画像処理方法、及び記録媒体 Download PDFInfo
- Publication number
- JP6773903B2 JP6773903B2 JP2019522000A JP2019522000A JP6773903B2 JP 6773903 B2 JP6773903 B2 JP 6773903B2 JP 2019522000 A JP2019522000 A JP 2019522000A JP 2019522000 A JP2019522000 A JP 2019522000A JP 6773903 B2 JP6773903 B2 JP 6773903B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- fresnel zone
- zone pattern
- complex
- pattern
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims description 51
- 238000003384 imaging method Methods 0.000 title claims description 31
- 238000003672 processing method Methods 0.000 title claims description 24
- 238000003860 storage Methods 0.000 claims description 18
- 238000010586 diagram Methods 0.000 description 27
- 230000006870 function Effects 0.000 description 23
- 230000010363 phase shift Effects 0.000 description 17
- 238000002834 transmittance Methods 0.000 description 14
- 101100391560 Oryza sativa subsp. japonica FZP gene Proteins 0.000 description 10
- 230000000052 comparative effect Effects 0.000 description 9
- 238000000034 method Methods 0.000 description 8
- 230000005540 biological transmission Effects 0.000 description 7
- 238000007796 conventional method Methods 0.000 description 5
- 238000004519 manufacturing process Methods 0.000 description 5
- 230000015654 memory Effects 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 238000011156 evaluation Methods 0.000 description 3
- 230000002093 peripheral effect Effects 0.000 description 3
- 238000012937 correction Methods 0.000 description 2
- 230000006866 deterioration Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 230000001131 transforming effect Effects 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000002349 favourable effect Effects 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 239000004615 ingredient Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/55—Optical parts specially adapted for electronic image sensors; Mounting thereof
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B3/00—Simple or compound lenses
- G02B3/02—Simple or compound lenses with non-spherical faces
- G02B3/08—Simple or compound lenses with non-spherical faces with discontinuous faces, e.g. Fresnel lens
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B5/00—Optical elements other than lenses
- G02B5/18—Diffraction gratings
- G02B5/1876—Diffractive Fresnel lenses; Zone plates; Kinoforms
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/95—Computational photography systems, e.g. light-field imaging systems
- H04N23/955—Computational photography systems, e.g. light-field imaging systems for lensless imaging
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20048—Transform domain processing
- G06T2207/20056—Discrete and fast Fourier transform, [DFT, FFT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20221—Image fusion; Image merging
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Optics & Photonics (AREA)
- Theoretical Computer Science (AREA)
- Computing Systems (AREA)
- Image Processing (AREA)
- Studio Devices (AREA)
- Length Measuring Devices By Optical Means (AREA)
- Stereoscopic And Panoramic Photography (AREA)
- Diffracting Gratings Or Hologram Optical Elements (AREA)
Description
図1は、本発明における画像処理の概要を説明するための図である。なお、ここでは簡単のため1次元で距離無限遠の点光源を撮影し、画像を再構成する場合について説明する。図1の(a)部分は被写体からの光がフレネルゾーンプレートに入射してイメージセンサに形成された投影像であり、点光源の方向に応じて投影像がシフトしている。この投影像に対し、(b)部分に示す第1のフレネルゾーンパターン(中心における局所的な空間周波数の位相が0°)を乗算して得られた画像が(c)部分に示す画像であり、この画像を実部の画像とする。実部の画像のX方向における信号強度を(f)部分に示す。
本発明における画像処理の詳細について、さらに詳細に説明する。
<撮像システムの構成>
図4は第1の実施形態に係る撮像システム10(撮像システム)の構成を示すブロック図である。撮像システム10は、撮像モジュール100(撮像部)と撮像装置本体200(画像処理装置)とを備える。撮像システム10はデジタルカメラの他、スマートフォン、タブレット端末、監視カメラ等に適用できる。
撮像モジュール100は、フレネルゾーンプレート110(フレネルゾーンプレート)と撮像素子120(イメージセンサ)とを備え、被写体からの光がフレネルゾーンプレート110を透過して形成された投影像を撮像素子120により取得する。フレネルゾーンプレート110は、中心が撮像素子120の中心と一致し、かつ撮像素子120の受光面と平行な状態で撮像素子120の受光面側に配置される。撮像モジュール100を撮像装置本体200に対し交換可能にしてもよい。また、撮像モジュール100に対しフレネルゾーンプレート110を交換可能にしてもよい。このように、特性(大きさ、ピッチ、位相、イメージセンサとの距離等)の異なるフレネルゾーンプレートを使い分けることで、取得する投影像の特性(画角、深度(距離測定精度)等)を制御し、所望の特性の画像を再構成することができる。なお、以下の説明においてフレネルゾーンプレート110を“FZP”(Fresnel Zone Plate)と記載することがある。
図7の(a)部分は、フレネルゾーンプレート110の例であるFZP1を示す図である。FZP1では、入射する光の透過率が中心からの距離に応じて連続的に変化しており、白色に近い領域(透過領域)ほど光の透過率が高く、黒色に近い領域(遮光領域)ほど光の透過率が低い。全体としては透過領域と遮光領域とが交互に同心円状に配置された状態となっており、これら透過領域及び遮光領域がフレネルゾーンプレートを構成する。同心円の間隔は、FZP1の中心から周辺に向かうにつれて狭くなる。このような同心円状のパターン(局所的な空間周波数の変化)は上述した式(1),(2),(6)等により表され、これらの式における同心円の細かさを「ピッチ」と呼ぶ。ピッチは上述したβの値によって定まり、βが小さいと粗いパターンになり、βが大きいと細かいパターンになる。撮像モジュール100にメモリを設けてピッチの情報(βの値)を記憶しておき、画像処理部210(情報入力部:図5参照)がこの情報を取得して使用してもよい。
撮像素子120は、2次元方向に(二次元状に)に配列された光電変換素子により構成される複数の画素を有するイメージセンサである。各画素にマイクロレンズを設けて集光効率を上げてもよい。また、各画素にカラーフィルタ(例えば赤色、青色、及び緑色)を配設してカラー画像を再構成できるようにしてもよい。この場合、第1,第2の投影像の取得に際しては、通常のデジタルカメラにおけるカラー画像生成の際のデモザイク処理(同時化処理ともいう)と同様に、カラーフィルタの配列パターンに応じた補間処理が行われる。これにより各画素(受光素子)で不足した色の信号が生成され、全画素において各色(例えば赤色、青色、及び緑色)の信号が得られる。このような処理は、例えば画像処理部210(投影像入力部210A)により行うことができる。
撮像装置本体200は画像処理部210と、記憶部220と、表示部230と、操作部240とを備え、撮像モジュール100が取得した投影像に基づく被写体の画像復元等を行う。
また、上述した各種のプロセッサには、FPGA(Field Programmable Gate Array)などの製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス(Programmable Logic Device:PLD)も含まれる。さらに、ASIC(Application Specific Integrated Circuit)などの特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路なども上述した各種のプロセッサに含まれる。
記憶部220はCD(Compact Disk)、DVD(Digital Versatile Disk)、ハードディスク(Hard Disk)、各種半導体メモリ等の非一時的記録媒体により構成され、図6に示す画像及び情報を互いに関連づけて記憶する。投影像220Aは、撮像モジュール100から取得した投影像である。フレネルゾーンプレート情報220Bはフレネルゾーンプレート110の局所的な空間周波数の情報(βの値等のピッチ情報を含む)である。フレネルゾーンプレート情報220Bは撮像モジュール100から取得した情報でもよいし、操作部240を介して入力した情報でもよい。フレネルゾーンパターン情報220Cはフレネルゾーンパターンを示す情報であり、局所的な空間周波数の位相が異なる複数のフレネルゾーンパターンについて記録することが好ましい。複素画像220Dは、フレネルゾーンパターン情報220Cが示すフレネルゾーンパターン(第1,第2のフレネルゾーンパターン)を投影像に乗算して得られた、実部の画像と虚部の画像とからなる複素画像である。再構成画像220Eは、複素画像220Dを2次元複素フーリエ変換して得られた空間領域の画像である。
表示部230は図示せぬ液晶ディスプレイ等の表示装置を含んで構成され、投影像、複素画像、再構成画像等を表示するとともに、操作部240を介した指示入力時のUI(User Interface)用の画面表示にも用いられる。操作部240は図示せぬキーボード、マウス、ボタン等のデバイスにより構成され、ユーザはこれらデバイスにより投影像取得指示、画像再構成指示、合焦距離の条件、局所的な空間周波数の情報(ピッチ、位相)等を入力することができる。なお、表示部230の表示装置をタッチパネルにより構成し、画像表示の他に操作部240として用いてもよい。
上述した構成の撮像システム10による画像処理について説明する。図9は本実施形態に係る画像処理方法の手順を示すフローチャートである。
ステップS100では、画像処理部210(投影像入力部210A)が撮像モジュール100を制御して、撮像素子120から被写体の投影像を取得する。取得する投影像は、被写体からの光がフレネルゾーンプレート110に入射して撮像素子120に形成された投影像である。
ステップS110では、画像処理部210(情報入力部210D)が投影像取得に用いたフレネルゾーンプレート110の局所的な空間周波数の情報(フレネルゾーンプレート110のピッチ)を入力する。この情報は撮像モジュール100の図示せぬメモリから入力してもよいし、操作部240に対するユーザの操作に応じて入力してもよい。また、ステップS100で取得した投影像を情報入力部210Dが解析して入力してもよい。ピッチは上述した式(1)〜(3),(6)等におけるβの値により定まるので、具体的にはβの値を入力すればよい。なお、既知の被写体(例えば、距離無限遠の点光源)を撮影した場合は、撮影画像を解析することによりピッチ(βの値)を取得することができる。また、ピッチ(βの値)を変えながら画像の再構成を繰り返し、鮮明な画像が得られる値を求めてもよい。
ステップS120では、画像処理部210(複素画像生成部210B)が投影像に第1,第2のフレネルゾーンパターンをそれぞれ乗算して、実部の画像と虚部の画像とからなる複素画像を生成する。ステップS120で乗算されるフレネルゾーンパターンは、記憶部220に記憶されたパターン(フレネルゾーンパターン情報220C)のうちステップS110で入力したピッチ(βの値)に応じて選択したパターンを用いることができる。また、記憶部220に記憶されたパターンをピッチ(βの値)に応じて変化(必要に応じて拡大または縮小してよい)させたパターンを用いることもできる。画像処理部210(複素画像生成部210B)は、生成した複素画像を複素画像220Dとして記憶部220に記憶する。
第1のフレネルゾーンパターンは例えば図8の(a)部分に示すパターン(中心における位相が0°。なお、「°」は角度の単位の「度」を表す。)とすることができ、これを投影像に乗算することにより実部の画像が得られる。また、第2のフレネルゾーンパターンは例えば図8の(b)部分に示すパターン(第1のフレネルゾーンパターンとピッチが同じ、位相が90°ずれている)とすることができ、これを投影像に乗算することにより虚部の画像が得られる。式(6)等について上述したように第1,第2のフレネルゾーンパターンの位相ずれは90°であることが好ましいが、後述する実施例から分かるように、正または負に70°以上110°以下の範囲であれば鮮明な画像を再構成することができる。第1のフレネルゾーンパターンまたは第2のフレネルゾーンパターンの局所的な空間周波数の位相を、フレネルゾーンプレート110の位相と同一にしてもよい。
被写体(光源)が無限遠方に存在する場合は、フレネルゾーンプレート110には平行光が入射し、撮像素子120に形成される投影像はフレネルゾーンプレート110と同じ大きさになるが、被写体が有限距離に存在する場合は広がりを持った光が入射し、距離が近いほど投影像が大きくなる。したがって、合焦させる被写体距離に応じて拡大率が異なるパターンを第1,第2のフレネルゾーンパターンとして使用することにより、所望の距離に合焦した画像を得ることができる。例えば、被写体距離に応じた複数のパターンをフレネルゾーンパターン情報220Cとして記憶部220に記憶しておき、これを読み出して使用することができる。また、1つのフレネルゾーンパターンを基準パターンとして記憶しておき、被写体距離に応じて異なる拡大率で拡大してもよい。この場合、距離無限大に対応しフレネルゾーンプレートと同じ大きさになるパターンを基準とすることができる。図10は、被写体距離に応じてフレネルゾーンパターンの拡大率が異なる様子を示す図である。
ステップS130では、画像処理部210(フーリエ変換部210C)が、上述した式(10)のように複素画像を2次元複素フーリエ変換して被写体の画像(空間領域の画像)を再構成する。画像処理部210(表示制御部210E)は、再構成した画像を表示部230に表示する(ステップS140)。また、画像処理部210(フーリエ変換部210C)は、再構成した画像を再構成画像220Eとして記憶部220に記憶する。
上述した第1,第2のフレネルゾーンパターンの位相ずれの好ましい範囲を、実施例及び比較例を参照して具体的に説明する。図11は、投影像取得用のフレネルゾーンプレートの位相、及び複素画像取得用のフレネルゾーンパターンの位相(「実部」と記載されている列が第1のフレネルゾーンパターンの位相、「虚部」と記載されている列が第2のフレネルゾーンパターンの位相)を示す表である。条件8(実施例1)〜条件14(実施例7)、及び条件22(実施例8)〜条件25(実施例11)が、本発明における第1,第2のフレネルゾーンパターンの位相ずれの好ましい数値範囲を示す。
本発明における第1,第2のフレネルゾーンパターンの好ましい位相ずれ(70°〜110°)の範囲を満たす条件8(実施例1)〜条件14(実施例7)、及び条件22(実施例8)〜条件25(実施例11)では、再構成された画像に像の重なりがまったく、あるいはほとんどなく、鮮明な画像が得られる。また、上述した従来技術のように、鮮明な画像を得るために画角を制限する必要もない。これらの実施例の中でも、条件11(位相ずれが90°)の場合に最も鮮明な画像が得られる。これに対して、位相ずれの値が上述した好ましい範囲を外れる条件1〜7(比較例1〜7)及び条件15〜21(比較例8〜14)では、位相ずれの値が好ましい範囲を大きく外れるほど像の重なりが大きく不鮮明な画像になってしまう。また、投影像に対し1つのフレネルゾーンパターンを乗算する条件26(従来技術)においても、図16の(e)部分に示すように像の重なりが大きく不鮮明な画像になってしまう。
以上で本発明の実施形態及び実施例に関して説明してきたが、本発明は上述した実施形態及び実施例に限定されず、本発明の精神を逸脱しない範囲において種々の変形が可能である。
100 撮像モジュール
110 フレネルゾーンプレート
120 撮像素子
200 撮像装置本体
210 画像処理部
210A 投影像入力部
210B 複素画像生成部
210C フーリエ変換部
210D 情報入力部
210E 表示制御部
210F ROM
220 記憶部
220A 投影像
220B フレネルゾーンプレート情報
220C フレネルゾーンパターン情報
220D 複素画像
220E 再構成画像
230 表示部
240 操作部
F フレネルゾーンプレート
FZP1 フレネルゾーンプレート
FZP2 フレネルゾーンプレート
L 光軸
SD 影
S100〜S140 画像処理方法の各ステップ
d 距離
θ 入射角
Claims (17)
- 被写体からの光が単一のフレネルゾーンプレートに入射して形成された投影像を入力する投影像入力部と、
第1のフレネルゾーンパターンと、前記第1のフレネルゾーンパターンとは各領域における局所的な空間周波数が同一であり、かつ前記局所的な空間周波数の位相が異なる第2のフレネルゾーンパターンと、を前記投影像にそれぞれ乗算して、実部の画像と虚部の画像とからなる複素画像を生成する複素画像生成部と、
前記複素画像を2次元複素フーリエ変換することにより空間領域の画像を再構成するフーリエ変換部と、
を備える画像処理装置。 - 前記投影像と、前記複素画像と、前記空間領域の画像と、前記第1のフレネルゾーンパターンを示す情報と、前記第2のフレネルゾーンパターンを示す情報と、を記憶する記憶部をさらに備える請求項1に記載の画像処理装置。
- 前記複素画像生成部は、前記投影像に前記第1のフレネルゾーンパターンを示す情報を乗算して前記実部の画像を生成し、前記投影像に前記第2のフレネルゾーンパターンを示す情報を乗算して前記虚部の画像を生成する請求項2に記載の画像処理装置。
- 前記第1のフレネルゾーンパターンと前記第2のフレネルゾーンパターンとは70°以上110°以下の範囲において正または負に前記局所的な空間周波数の位相がずれている請求項1から3のいずれか1項に記載の画像処理装置。
- 前記第1のフレネルゾーンパターンの前記局所的な空間周波数の位相または前記第2のフレネルゾーンパターンの前記局所的な空間周波数の位相が前記フレネルゾーンプレートの局所的な空間周波数の位相と同一である請求項1から4のいずれか1項に記載の画像処理装置。
- 前記複素画像生成部は、合焦させる被写体距離に応じて拡大率の異なる前記第1のフレネルゾーンパターン及び前記第2のフレネルゾーンパターンを使用して前記複素画像を生成する請求項1から5のいずれか1項に記載の画像処理装置。
- 前記フレネルゾーンプレートの局所的な空間周波数の情報を入力する情報入力部をさらに備え、
前記複素画像生成部は前記入力した情報に基づく局所的な空間周波数を有する前記第1のフレネルゾーンパターン及び前記第2のフレネルゾーンパターンを前記投影像にそれぞれ乗算する請求項1から6のいずれか1項に記載の画像処理装置。 - 前記被写体からの光を入射する前記単一のフレネルゾーンプレートと、前記フレネルゾーンプレートを透過した前記光により前記投影像が形成されるイメージセンサと、を有し、前記イメージセンサから前記投影像を取得する撮像部と、
請求項1から7のいずれか1項に記載の画像処理装置と、
を備え、
前記投影像入力部は前記撮像部が取得した前記投影像を入力する撮像システム。 - 被写体からの光が単一のフレネルゾーンプレートに入射して形成された投影像を入力するステップと、
第1のフレネルゾーンパターンと、前記第1のフレネルゾーンパターンとは各領域における局所的な空間周波数が同一であり、かつ前記局所的な空間周波数の位相が異なる第2のフレネルゾーンパターンと、を前記投影像にそれぞれ乗算して、実部の画像と虚部の画像とからなる複素画像を生成するステップと、
前記複素画像を2次元複素フーリエ変換することにより空間領域の画像を再構成するステップと、
を備える画像処理方法。 - 前記複素画像を生成するステップでは、前記投影像に、画像処理装置の記憶部に記憶された前記第1のフレネルゾーンパターンを示す情報を乗算して前記実部の画像を生成し、前記投影像に、前記記憶部に記憶された前記第2のフレネルゾーンパターンを示す情報を乗算して前記虚部の画像を生成する請求項9に記載の画像処理方法。
- 前記第1のフレネルゾーンパターンと前記第2のフレネルゾーンパターンとは70°以上110°以下の範囲において正または負に前記局所的な空間周波数の位相がずれている請求項9または10に記載の画像処理方法。
- 前記第1のフレネルゾーンパターンの前記局所的な空間周波数の位相または前記第2のフレネルゾーンパターンの前記局所的な空間周波数の位相が前記単一のフレネルゾーンプレートの局所的な空間周波数の位相と同一である請求項9から11のいずれか1項に記載の画像処理方法。
- 前記複素画像を生成するステップでは、合焦させる被写体距離に応じて拡大率の異なる前記第1のフレネルゾーンパターン及び前記第2のフレネルゾーンパターンを使用して前記複素画像を生成する請求項9から12のいずれか1項に記載の画像処理方法。
- 前記被写体からの光を入射する前記フレネルゾーンプレートと、前記単一のフレネルゾーンプレートを透過した前記光により前記投影像が形成されるイメージセンサと、により前記イメージセンサから前記投影像を取得するステップをさらに有し、
前記投影像を入力するステップでは前記取得した前記投影像を入力する請求項9から13のいずれか1項に記載の画像処理方法。 - 前記単一のフレネルゾーンプレートの局所的な空間周波数の情報を入力するステップをさらに有し、
前記複素画像を生成するステップでは前記入力した情報に基づく局所的な空間周波数を有する前記第1のフレネルゾーンパターン及び前記第2のフレネルゾーンパターンを前記投影像にそれぞれ乗算する請求項9から14のいずれか1項に記載の画像処理方法。 - 被写体からの光が単一のフレネルゾーンプレートに入射して形成された投影像を入力する機能と、
第1のフレネルゾーンパターンと、前記第1のフレネルゾーンパターンとは各領域における局所的な空間周波数が同一であり、かつ前記局所的な空間周波数の位相が異なる第2のフレネルゾーンパターンと、を前記投影像にそれぞれ乗算して、実部の画像と虚部の画像とからなる複素画像を生成する機能と、
前記複素画像を2次元複素フーリエ変換することにより空間領域の画像を再構成する機能と、
をコンピュータに実現させる画像処理プログラムのコンピュータ読み取り可能なコードが記録された記録媒体。 - 前記複素画像を生成する機能は、画像処理装置の記憶部に記憶された前記第1のフレネルゾーンパターンを示す情報を前記投影像に乗算して前記実部の画像を生成し、前記記憶部に記憶された前記第2のフレネルゾーンパターンを示す情報を前記投影像に乗算して前記実部の画像を生成する請求項16に記載の記録媒体。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017109269 | 2017-06-01 | ||
JP2017109269 | 2017-06-01 | ||
PCT/JP2018/014981 WO2018221019A1 (ja) | 2017-06-01 | 2018-04-10 | 画像処理装置、撮像システム、画像処理方法、及び記録媒体 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2018221019A1 JPWO2018221019A1 (ja) | 2020-03-19 |
JP6773903B2 true JP6773903B2 (ja) | 2020-10-21 |
Family
ID=64454630
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019522000A Active JP6773903B2 (ja) | 2017-06-01 | 2018-04-10 | 画像処理装置、撮像システム、画像処理方法、及び記録媒体 |
Country Status (5)
Country | Link |
---|---|
US (1) | US10999481B2 (ja) |
EP (1) | EP3633973B1 (ja) |
JP (1) | JP6773903B2 (ja) |
CN (1) | CN110720207B (ja) |
WO (1) | WO2018221019A1 (ja) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3633968A4 (en) | 2017-06-01 | 2020-06-03 | FUJIFILM Corporation | IMAGING DEVICE, IMAGE PROCESSING DEVICE, IMAGING SYSTEM, IMAGE PROCESSING METHOD, AND RECORDING MEDIUM |
US11663708B2 (en) * | 2018-03-06 | 2023-05-30 | Sony Corporation | Image processing apparatus, imaging apparatus, and image processing method |
CN111869195B (zh) * | 2018-03-14 | 2022-07-08 | 索尼公司 | 图像处理装置、成像装置及图像处理方法 |
JP6924163B2 (ja) * | 2018-03-27 | 2021-08-25 | 株式会社日立製作所 | 撮像装置、撮像モジュールおよび撮像方法 |
JP7065761B2 (ja) * | 2018-12-26 | 2022-05-12 | 株式会社日立製作所 | 距離計測装置および距離計測方法 |
CN109474818B (zh) * | 2019-01-03 | 2024-05-10 | Oppo广东移动通信有限公司 | 一种图像传感器以及成像模组 |
US11991452B2 (en) * | 2019-07-31 | 2024-05-21 | Maxell, Ltd. | Imaging device, portable terminal, and exposure control method |
WO2021024452A1 (ja) * | 2019-08-08 | 2021-02-11 | マクセル株式会社 | 撮像装置および方法 |
WO2023171358A1 (ja) * | 2022-03-07 | 2023-09-14 | ソニーグループ株式会社 | マスクユニット、並びに撮像装置および撮像装置の作動方法 |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0881843A3 (en) * | 1997-05-28 | 2005-04-06 | Nippon Telegraph And Telephone Corporation | Method and apparatus for transmitting or processing images. |
WO2008094141A1 (en) * | 2007-01-29 | 2008-08-07 | Celloptic, Inc. | System, apparatus and method for extracting image cross-sections of an object from received electromagnetic radiation |
WO2008134135A2 (en) * | 2007-03-21 | 2008-11-06 | Lumidigm, Inc. | Biometrics based on locally consistent features |
CN101150402B (zh) * | 2007-11-01 | 2011-02-16 | 北京理工大学 | 一种基于分数阶傅立叶变换的双图加密方法 |
CN101430428B (zh) * | 2008-11-25 | 2011-01-26 | 中国科学院微电子研究所 | 超分辨菲涅耳波带片 |
GB0822149D0 (en) * | 2008-12-04 | 2009-01-14 | Univ Sheffield | Provision of image data |
WO2011008233A1 (en) * | 2009-05-07 | 2011-01-20 | President And Fellows Of Harvard College | Methods and apparatus for fluorescence sensing employing fresnel zone plates |
US8559014B2 (en) * | 2009-09-25 | 2013-10-15 | Hwan J. Jeong | High-resolution, common-path interferometric imaging systems and methods |
CN103270456B (zh) * | 2011-10-20 | 2016-11-23 | 松下知识产权经营株式会社 | 显示装置及显示*** |
US9823486B2 (en) * | 2013-03-11 | 2017-11-21 | Stc. Unm | Rotating point-spread function (PSF) design for three-dimensional imaging |
US10423002B2 (en) | 2015-06-17 | 2019-09-24 | Maxell, Ltd. | Imaging apparatus capable of generating an image using moire without a lens |
KR102441587B1 (ko) * | 2015-08-03 | 2022-09-07 | 삼성전자주식회사 | 홀로그래픽 이미지를 처리하는 방법 및 장치 |
CN105931196B (zh) * | 2016-04-11 | 2018-10-19 | 天津大学 | 基于傅里叶光学建模的编码光圈相机图像恢复方法 |
US10649118B2 (en) * | 2016-09-26 | 2020-05-12 | Hitachi, Ltd. | Imaging device |
JP2018055831A (ja) | 2016-09-26 | 2018-04-05 | 東芝ライテック株式会社 | 照明装置 |
-
2018
- 2018-04-10 EP EP18810056.4A patent/EP3633973B1/en active Active
- 2018-04-10 CN CN201880035494.3A patent/CN110720207B/zh active Active
- 2018-04-10 JP JP2019522000A patent/JP6773903B2/ja active Active
- 2018-04-10 WO PCT/JP2018/014981 patent/WO2018221019A1/ja active Application Filing
-
2019
- 2019-11-12 US US16/681,701 patent/US10999481B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
CN110720207A (zh) | 2020-01-21 |
EP3633973A4 (en) | 2020-04-08 |
US20200084350A1 (en) | 2020-03-12 |
CN110720207B (zh) | 2021-04-27 |
WO2018221019A1 (ja) | 2018-12-06 |
JPWO2018221019A1 (ja) | 2020-03-19 |
EP3633973A1 (en) | 2020-04-08 |
EP3633973B1 (en) | 2020-11-11 |
US10999481B2 (en) | 2021-05-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6773903B2 (ja) | 画像処理装置、撮像システム、画像処理方法、及び記録媒体 | |
JP6970800B2 (ja) | 画像処理装置、画像処理方法、及び画像処理プログラム | |
JP6713549B2 (ja) | 撮像装置及び撮像モジュール | |
JP7373015B2 (ja) | 撮像方法 | |
JP6934072B2 (ja) | 撮像装置 | |
US10488561B2 (en) | Imaging device | |
JP2023016864A (ja) | 撮像装置および方法 | |
JP2020048031A (ja) | 撮像装置および撮像方法 | |
JP6947891B2 (ja) | 携帯情報端末 | |
WO2019131191A1 (ja) | ワイドコンバージョンレンズ及び撮像装置 | |
JP6770164B2 (ja) | 撮像装置 | |
JP2022003801A (ja) | 撮像装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191108 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200701 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200831 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200911 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201001 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6773903 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |