JP6419115B2 - 画像処理装置、画像処理方法、及びプログラム - Google Patents
画像処理装置、画像処理方法、及びプログラム Download PDFInfo
- Publication number
- JP6419115B2 JP6419115B2 JP2016141601A JP2016141601A JP6419115B2 JP 6419115 B2 JP6419115 B2 JP 6419115B2 JP 2016141601 A JP2016141601 A JP 2016141601A JP 2016141601 A JP2016141601 A JP 2016141601A JP 6419115 B2 JP6419115 B2 JP 6419115B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- scan
- images
- image processing
- similarity
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Eye Examination Apparatus (AREA)
Description
以下、図面を参照しながら、本実施形態に係る画像処理装置を備える画像処理システムについて説明する。
<ステップS201>
ステップS201では、網膜層を撮影するために、不図示の制御部により、断層画像撮影装置120を制御する。まず、測定光が照射される方向である深度方向(図3(a)のz方向)とz方向と直交する平面方向(図3(a)のx方向)との位置を調整する。ここで深度方向の位置を合わせるとは、断層像を得るためのコヒーレントゲートの位置を合わせることに相当する。
<ステップS202>
ステップS201で、不図示の制御部により網膜層を撮影するのに適した位置に調整を行った後、ステップS202で、不図示の撮影指示部により撮影開始を指示する。
<ステップS203>
ステップS203では、操作者が撮影指示をすると、不図示の制御部により、ほぼ同一箇所を繰り返し走査し、複数の二次元断層画像を撮影する。
<ステップS204>
ステップS204では、画像処理部113が、記憶部112に記憶された二次元断層画像群を用いて、新たな二次元断層画像を生成する。高画質化した二次元断層画像の生成処理について、図2(b)を参照して説明する。
<ステップS210>
ステップS210では、第一の位置合わせ部115において、二次元断層画像同士の位置合わせを行う。位置合わせ処理としては、例えば、2つの二次元断層画像の類似性を示す評価関数を事前に定義しておき、この評価関数の値が最も良くなるように断層画像を変形する。評価関数としては、画素値で評価する方法が挙げられる(例えば、式(1)の相関係数を用いて評価を行う方法が挙げられる)。また、画像の変形処理としては、アフィン変換を用いて並進や回転を行ったり、拡大率を変化させたりする処理が挙げられる。位置合わせ処理として、特徴点ベースで位置を合わせてもよい。例えば、二次元断層画像から各網膜層や病変などの特徴部を抽出する。内境界膜、神経線維層、視細胞内節外節接合部、網膜色素上皮層は輝度値が高く、層の境界はコントラストが高いため、これらの層や特徴部の検出結果を利用して位置合わせを行う。
<ステップS211>
ステップS211では、判定部117において、対応するAスキャン画像毎に重ね合わせを行うAスキャン画像を判定する。この処理について図4を用いて説明を行う。Ti’とTi+1’は、異なる時点で撮像された二次元断層画像で、ステップS210において位置合わせを行ったものである。Aij’、A(i+1)j’は、位置合わせ後のTi’とTi+1’において、それぞれ対応するAスキャン画像を表している。なお、本発明におけるAスキャン画像は、図4において、z軸方向に並行な1本の画素列のことをAスキャン画像としている。
(a)の閾値の場合は、評価値の悪いものは重ね合わせに用いないので、評価値の良い領域のみ重ね合わせることが出来る。
(b)の固定枚数としてM枚選択する場合は、画像単位での重ね合わせ平均化処理を行うデータ数にバラツキがなくなる。各Aスキャン画像単位での重ね合わせ平均化処理を行うデータ数にもバラツキがなくなるものである。ノイズの低減化の程度が揃えられるので、画質を同程度にする場合にはより好適である。
(c)の変化率を見る場合は、病気などで全体的に画質が悪く全体的に類似度が低くなる場合においても、類似する領域同士を選択することが出来るといった特徴がある。
(d)の方法は、副走査方向の単位時間あたりの移動距離が大きくなる場合にも好適である。副走査方向のずれが所定値を超えると網膜の組織構造が異なってくるので、不必要に評価値を算出部116が計算するのを押さえることがでるためである。即ち、変化率を見る事で組織構造の変化もわかることになる。
<ステップS212>
ステップS212では、生成部118が重ね合わせ処理を行う。ここでは、Aスキャン画像が2つの場合の重ね合わせについて説明をする。図3(b)は、二次元断層画像をAスキャン画像毎に処理し、1枚の二次元断層画像を合成画像として生成する処理を説明するための図である。つまり、異なる時点で撮像された、異なる二次元断層画像上に位置するAスキャン画像の加算平均処理を例として説明する。図3(c)は、各画素あたりM個(本例では2個)の画素を用いて加算平均処理を行うことにより生成された高画質化された二次元断層画像である。つまり、図3(c)において、Aij”は対応するAスキャン画像について加算平均処理を行うことにより算出された新たなAスキャン画像である。
<ステップS205>
ステップS205では、表示制御部114は、ステップS204で生成した高画質な二次元断層画像を不図示の表示部に表示する。また、断層画像撮影装置120の測定光の走査範囲を固定して、ほぼ同一の網膜の領域を走査する例を説明したが、網膜全体を順次走査しても本発明を適用できることは上述したとおりである。
(実施例2)
上記第1の実施形態では、位置合わせを行った二次元断層画像において、対応するAスキャン画像と周辺の領域を用いて領域間の類似度を計算し、各領域単位で重ね合わせ処理に用いる領域の判定を行った。本実施形態では、位置合わせを行った二次元断層画像において、Aスキャン画像と周辺の領域を用いて、近傍領域において評価値が高くなる領域を探索し、重ね合わせ処理を行うことを特徴としている。本実施形態によれば、大局的な特徴を用いて全体的に位置合わせを行い、さらに局所的な特徴を用いて位置合わせを行った後に、重ね合わせ処理を行う。
<ステップS704>
ステップS704では、画像処理部613が、大局的な位置合わせと局所的な位置合わせを行い、画像重ね合わせ処理を行うことで、高画質な二次元断層画像を生成する。高画質な二次元断層画像生成処理について、図7(b)を参照して説明する。
<ステップS710>
ステップS710では、第一の位置合わせ部115において、二次元断層画像同士の位置合わせを行う。この処理は、第1実施形態のステップS210と同様なので、説明は省略する。
<ステップS711>
ステップS710で大局的な位置合わせを行った二次元断層画像において、対応するAスキャン画像単位で位置合わせを行うことにより、局所的な位置合わせを行う。この処理について図8(a)を用いて説明を行う。Ti’とTi+1’は、同一断面を異なる時点で撮像した画像で、ステップS710において位置合わせを行った二次元断層画像である。Aij’はTi’におけるAスキャン画像を表している。斜線の領域Rij”はAij’を中心にx軸方向に+−αの範囲を表している。R(i+1)j”は、Ti+1’においてRij”に対応する矩形領域を表しており、S(i+1)j’は、R(i+1)j”の矩形領域を動かす探索範囲を表している。基準Aスキャン画像をAij’とし、類似度を計算する領域をRij”とする場合、探索範囲S(i+1)j’内において、R(i+1)j”の矩形領域を走査して、算出部116が評価値を計算する。
<ステップS712>
ステップS712では、生成部118において、対応するAスキャン画像同士の重ね合わせ処理を行う。生成部118では、ステップS711において、評価値が最大となる位置の矩形領域R(i+1)j”の中心に位置するAスキャン画像と、基準画像のAスキャン画像Aij’との重ね合わせ処理を行う。
(その他の実施形態)
上記のそれぞれの実施形態は、本発明を画像処理装置として実現したものである。しかしながら、本発明の実施形態は画像処理装置のみに限定されるものではない。本発明をコンピュータ上で動作するソフトウェアとして実現することも可能である。画像処理装置のCPUは、RAMやROMに格納されたコンピュータプログラムやデータを用いてコンピュータ全体の制御を行う。また、画像処理装置の各部に対応するソフトウェアの実行を制御して、各部の機能を実現する。
120 断層画像撮影装置
112 記憶部
113 画像処理部
114 表示制御部
115 第一の位置合わせ部
116 算出部
117 判定部
118 生成部
619 第二の位置合わせ部
Claims (5)
- 同一位置を複数回走査するように制御されたOCT(Optical Coherence Tomography)の測定光に基づいて得られた被検眼の眼底の複数の断層画像が位置合わせされた後に、前記複数の断層画像それぞれにおけるAスキャン方向に対して直交する方向に所定の幅を有する前記断層画像の一部の領域である部分領域間の類似度を算出する算出手段と、
前記算出手段により算出された類似度が所定値よりも高い前記部分領域に含まれるAスキャン画像を前記複数の断層画像間において対応する複数のAスキャン画像から選択する選択手段と、
前記選択手段により選択された複数のAスキャン画像から1のAスキャン画像を生成する生成手段と、
を備え、前記Aスキャン方向に対して直交する方向における前記部分領域の幅はAスキャン画像の幅よりも大きいことを特徴とする画像処理装置。 - 前記部分領域はAスキャン画像を中心とした領域であり、前記部分領域に含まれるAスキャン画像は前記部分領域の中心のAスキャン画像であることを特徴とする請求項1に記載の画像処理装置。
- 前記算出手段は、前記Aスキャン方向に対して直交する方向における異なる複数の位置の前記部分領域において前記類似度を算出し、
前記選択手段は、前記Aスキャン方向に対して直交する方向における異なる複数の位置の前記部分領域において前記Aスキャン画像を選択することを特徴とする請求項1または請求項2に記載の画像処理装置。 - プロセッサにより、同一位置を複数回走査するように制御されたOCT(Optical Coherence Tomography)の測定光に基づいて得られた被検眼の眼底の複数の断層画像が位置合わせされた後に、前記複数の断層画像それぞれにおけるAスキャン方向に対して直交する方向に所定の幅を有する前記断層画像の一部の領域である部分領域間の類似度を算出する算出工程と、
プロセッサにより、前記算出手段により算出された類似度が所定値よりも高い前記部分領域に含まれるAスキャン画像を複数の断層画像間において対応する複数のAスキャン画像から選択する選択工程と、
プロセッサにより、前記選択手段により選択された複数のAスキャン画像から1のAスキャン画像を生成する生成工程と、
を備える画像処理方法。 - 請求項4に記載の画像処理方法をコンピュータに実行させるプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016141601A JP6419115B2 (ja) | 2016-07-19 | 2016-07-19 | 画像処理装置、画像処理方法、及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016141601A JP6419115B2 (ja) | 2016-07-19 | 2016-07-19 | 画像処理装置、画像処理方法、及びプログラム |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010131257A Division JP6039156B2 (ja) | 2010-06-08 | 2010-06-08 | 画像処理装置、画像処理方法、及びプログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018192764A Division JP6720267B2 (ja) | 2018-10-11 | 2018-10-11 | 画像処理装置、画像処理方法、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016179348A JP2016179348A (ja) | 2016-10-13 |
JP6419115B2 true JP6419115B2 (ja) | 2018-11-07 |
Family
ID=57130718
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016141601A Expired - Fee Related JP6419115B2 (ja) | 2016-07-19 | 2016-07-19 | 画像処理装置、画像処理方法、及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6419115B2 (ja) |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102005034332A1 (de) * | 2005-07-22 | 2007-01-25 | Carl Zeiss Meditec Ag | Einrichtung und Verfahren zur Beobachtung, Dokumentation und/oder Diagnose des Augenhintergrundes |
JP5523658B2 (ja) * | 2007-03-23 | 2014-06-18 | 株式会社トプコン | 光画像計測装置 |
EP1978394A1 (en) * | 2007-04-06 | 2008-10-08 | Global Bionic Optics Pty Ltd. | Optical system for increasing depth of field |
JP5199031B2 (ja) * | 2008-11-05 | 2013-05-15 | 株式会社ニデック | 眼科撮影装置 |
-
2016
- 2016-07-19 JP JP2016141601A patent/JP6419115B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2016179348A (ja) | 2016-10-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6039156B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
KR102543875B1 (ko) | 의료용 화상 처리 장치, 의료용 화상 처리 방법, 컴퓨터 판독가능 매체, 및 학습 완료 모델 | |
JP5025715B2 (ja) | 断層画像撮影装置、画像処理装置、画像処理システム、画像処理装置の制御方法及びプログラム | |
JP6025311B2 (ja) | 眼科診断支援装置および方法 | |
JP5404358B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
US20110137157A1 (en) | Image processing apparatus and image processing method | |
US10165939B2 (en) | Ophthalmologic apparatus and ophthalmologic apparatus control method | |
JP7362403B2 (ja) | 画像処理装置および画像処理方法 | |
JP6207225B2 (ja) | 画像処理装置及び画像処理方法 | |
JP6128841B2 (ja) | 画像処理装置 | |
JP2015160105A (ja) | 画像処理装置、画像処理方法及びプログラム | |
Kolar et al. | Registration of 3D retinal optical coherence tomography data and 2D fundus images | |
JP2019047841A (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP6419115B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP6720267B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP5634587B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP5631361B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP2020093125A (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP2021069667A (ja) | 画像処理装置、画像処理方法及びプログラム | |
WO2015129718A1 (ja) | 画像処理装置、画像処理方法、及び画像処理プログラム | |
JP2017119226A (ja) | 画像処理装置、画像処理方法および画像処理プログラム | |
JP2013144236A (ja) | 眼科装置及び眼科方法 | |
JP2018202237A (ja) | 画像処理装置およびその制御方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160809 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160809 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170718 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170919 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180313 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180511 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180911 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20181009 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6419115 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |