JP5631361B2 - Image processing apparatus, image processing method, and program - Google Patents
Image processing apparatus, image processing method, and program Download PDFInfo
- Publication number
- JP5631361B2 JP5631361B2 JP2012137263A JP2012137263A JP5631361B2 JP 5631361 B2 JP5631361 B2 JP 5631361B2 JP 2012137263 A JP2012137263 A JP 2012137263A JP 2012137263 A JP2012137263 A JP 2012137263A JP 5631361 B2 JP5631361 B2 JP 5631361B2
- Authority
- JP
- Japan
- Prior art keywords
- tomographic image
- image
- eye
- movement
- amount
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Eye Examination Apparatus (AREA)
Description
本発明は、断層画像撮影装置、及び該断層画像撮影装置により撮影された断層画像を処理する画像処理装置ならびに画像処理方法に関するものである。 The present invention relates to a tomographic imaging apparatus, an image processing apparatus that processes a tomographic image captured by the tomographic imaging apparatus, and an image processing method.
光干渉断層計（ＯＣＴ；Ｏｐｔｉｃａｌ Ｃｏｈｅｒｅｎｃｅ Ｔｏｍｏｇｒａｐｈｙ）などの眼部断層画像撮影装置では、網膜に照射した近赤外光の反射光と参照光とを干渉させることにより干渉光を取得し、該取得した干渉光に基づいて断層画像を生成する。一般に、このように干渉光に基づいて生成される断層画像の画質は、網膜に入射される近赤外光の強度に依存する。このため、断層画像の画質を向上させるためには、網膜に照射する近赤外光の強度を上げる必要があるが、安全性の観点から、網膜に照射可能な近赤外光の強度には一定程度の限界がある。 In an ophthalmic tomography apparatus such as an optical coherence tomography (OCT), interference light is acquired by causing interference between reflected light of near-infrared light irradiated on the retina and reference light. A tomographic image is generated based on the interference light. In general, the image quality of a tomographic image generated based on interference light in this way depends on the intensity of near-infrared light incident on the retina. For this reason, in order to improve the image quality of tomographic images, it is necessary to increase the intensity of near-infrared light that irradiates the retina. There is a certain limit.
このため、安全上、問題のない強度範囲で近赤外光の照射を行いつつ、高画質な断層画像を生成することが望まれている。このような要求に対して、主として、これまで以下の２つの手法による取り組みがなされてきた。
（ｉ）オーバーサンプリングを用いる方法
（ｉｉ）重ね合わせを用いる方法
そこで、以下、当該２つの手法による取り組みについて簡単に説明する。
For this reason, it is desired to generate a high-quality tomographic image while irradiating near-infrared light within a safe intensity range for safety. In response to such demands, efforts have been made mainly by the following two methods.
(I) Method of using oversampling (ii) Method of using superposition Hereafter, the approach by the two methods will be briefly described.
はじめにオーバーサンプリング法について図９を参照しながら説明する。図９（ａ）は断層画像撮影装置において撮影された網膜の断層画像の一例を示す図である。図９（ａ）において、Ｔｉは２次元断層画像（Ｂ−ｓｃａｎ像）を表しており、Ａｉｊは走査線（Ａ−ｓｃａｎ）を表している。図９（ａ）に示すように、２次元断層画像Ｔｉは、同一平面上に位置する複数の走査線Ａｉｊによって構成されている。 First, the oversampling method will be described with reference to FIG. FIG. 9A is a diagram illustrating an example of a tomographic image of the retina photographed by the tomographic image photographing apparatus. In FIG. 9A, T i represents a two-dimensional tomographic image (B-scan image), and A ij represents a scanning line (A-scan). As shown in FIG. 9A, the two-dimensional tomographic image T i is composed of a plurality of scanning lines A ij located on the same plane.
図９（ｃ）は、図９（ａ）に示す２次元断層画像Ｔｉの撮影において、網膜に照射される近赤外光を、眼底表面から網膜の深度方向に向かって見た場合の照射分布の一例を示す図である。図９（ｃ）においてＡｉ１〜Ａｉｍに示す楕円は、近赤外光のビーム径を表している。 FIG. 9 (c), in the shooting of the two-dimensional tomographic images T i shown in FIG. 9 (a), irradiation in the case of near infrared light irradiated on the retina, looking toward the fundus oculi surface to the depth direction of the retina It is a figure which shows an example of distribution. In FIG. 9C, the ellipses indicated by A i1 to A im represent the beam diameter of near infrared light.
一方、図９（ｂ）は、断層像撮影装置において撮影された網膜の断層画像の一例であり、図９（ａ）と同じ撮影範囲を２倍の走査線数で撮影した場合の２次元断層画像Ｔｉ’を示す図である。また、図９（ｄ）は、図９（ｂ）に示す２次元断層画像Ｔｉ’の撮影において、網膜に照射される近赤外光を、眼底表面から網膜の深度方向に向かって見た場合の照射分布の一例を示す図である。図９（ｄ）において、Ａｉ１〜Ａｉ２ｍに示す楕円は、近赤外光のビーム径を表している。 On the other hand, FIG. 9B is an example of a tomographic image of the retina taken by the tomographic imaging apparatus, and a two-dimensional tomogram when the same imaging range as that of FIG. 9A is taken with twice the number of scanning lines. It is a figure which shows image Ti '. FIG. 9D shows the near-infrared light irradiated on the retina viewed from the fundus surface toward the depth of the retina in the photographing of the two-dimensional tomographic image T i ′ shown in FIG. 9B. It is a figure which shows an example of the irradiation distribution in a case. In FIG. 9D , the ellipses shown in A i1 to A i2m represent the beam diameter of near infrared light.
図９（ａ）、（ｂ）からわかるように、撮影範囲が同じである場合、走査線数が増えるほど、２次元断層画像の解像度は上がる。また、図９（ｃ）、（ｄ）からわかるように、解像度を上げるために走査線数を増やすにあたっては、網膜に照射される近赤外光を、隣接するビーム同士でオーバーラップするように照射させる必要がある。 As can be seen from FIGS. 9A and 9B, when the imaging range is the same, the resolution of the two-dimensional tomographic image increases as the number of scanning lines increases. Further, as can be seen from FIGS. 9C and 9D, when increasing the number of scanning lines in order to increase the resolution, the near-infrared light irradiated on the retina is overlapped between adjacent beams. It is necessary to irradiate.
そして、このように、隣接するビーム同士でオーバーラップするように照射させることで、解像度の高い２次元断層画像を生成する手法を、一般に、オーバーサンプリング法と呼んでいる。 A method of generating a high-resolution two-dimensional tomographic image by irradiating the adjacent beams so as to overlap each other is generally called an oversampling method.
一方、重ね合わせ法とは、同一の撮影範囲を同一の走査線数で複数回走査することで撮影された複数の断層画像を、互いに重ね合わせて合成することにより、ノイズの少ない断面画像を生成する手法である（例えば、下記特許文献１参照）。
On the other hand, the superposition method generates a cross-sectional image with less noise by superimposing and synthesizing multiple tomographic images captured by scanning the same imaging range multiple times with the same number of scanning lines. (For example, refer to
しかしながら、高画質な断層画像を生成するための上記２つの手法の場合、以下のような課題がある。例えば、特許文献１に開示された重ね合わせ法の場合、重ね合わせて合成される複数の断層画像は、互いに異なる時刻に撮影された断層画像である。そして、それぞれの断層画像を用いて、対応する画素の画素値を平均化するため、各断層画像内に含まれるノイズの低減において有効である。しかしながら、それぞれの断層画像自体の解像度は同じであるため、合成することにより高解像度の断層画像を生成することは困難である。
However, the above two methods for generating a high-quality tomographic image have the following problems. For example, in the case of the superposition method disclosed in
一方、オーバーサンプリング法の場合、走査線数を増やし、オーバーラップの幅を広げることで、より高解像度の断層画像を生成することができる。しかしながら、走査線数が増えると、１枚の断層画像を撮影するのにかかる時間が増加し、眼球の固視微動や頭の動き等の影響を受けやすくなる。この結果、撮影された断層画像内に歪みが生じることとなる。 On the other hand, in the case of the oversampling method, it is possible to generate a tomographic image with higher resolution by increasing the number of scanning lines and widening the overlap width. However, as the number of scanning lines increases, the time taken to capture a single tomographic image increases, and it is likely to be affected by eye movements of the eyeball, movements of the head, and the like. As a result, distortion occurs in the captured tomographic image.
このため、高画質な断層画像を生成するためには、眼球の固視微動や頭の動き等の影響を受けにくい撮影条件のもとで、極力、ノイズの少ない高解像度の断層画像が生成できるように撮影を行うことが望ましい。一方で、眼球の固視微動の大きさや頭の動きの大きさ等には個人差があり、眼球の固視微動や頭の動き等の影響を受けにくい撮影条件は、常に一定とは限らない。 Therefore, in order to generate a high-quality tomographic image, it is possible to generate a high-resolution tomographic image with as little noise as possible under imaging conditions that are not easily influenced by eye movements of the eyeball or movement of the head. It is desirable to perform shooting. On the other hand, there are individual differences in the size of eye movements and head movements, and the shooting conditions that are not easily affected by eye movements or head movements are not always constant. .
本発明は上記課題に鑑みてなされたものであり、眼球の固視微動や頭の動き等の影響を極力抑えた、低ノイズかつ高解像度の断層画像を生成できるようにすることを目的とする。 The present invention has been made in view of the above problems, and an object of the present invention is to generate a low-noise and high-resolution tomographic image in which the influences of eye movements of the eyeball and movement of the head are suppressed as much as possible. .
上記の目的を達成するために本発明に係る画像処理装置は以下のような構成を備える。即ち、
被検眼の動き量を検出する検出手段と、
前記検出された動き量が大きいほど、前記被検眼の複数の２次元断層画像をそれぞれ取得する際の走査速度を上げるように、該走査速度を決定する決定手段と、
前記決定された走査速度で前記被検眼の複数の２次元断層画像を取得する取得手段と、
前記取得された複数の２次元断層画像から、前記被検眼の動きに基づき生じる２次元断層画像内の面内方向の歪みが他の２次元断層画像よりも小さい２次元断層画像を選択する選択手段とを備える。
In order to achieve the above object, an image processing apparatus according to the present invention comprises the following arrangement. That is,
Detection means for detecting the amount of movement of the eye to be examined;
Determining means for determining the scanning speed so as to increase the scanning speed when acquiring each of a plurality of two-dimensional tomographic images of the eye to be examined, as the detected amount of movement is larger;
Obtaining means for obtaining a plurality of two-dimensional tomographic images of the eye to be examined at the determined scanning speed;
Selection means for selecting, from the plurality of acquired two-dimensional tomographic images, a two-dimensional tomographic image in which in-plane distortion in the two-dimensional tomographic image generated based on the movement of the eye to be examined is smaller than other two-dimensional tomographic images. With.
本発明によれば、眼球の固視微動や頭の動き等の影響を極力抑えた、低ノイズかつ高解像度の断層画像を生成することができるようになる。 According to the present invention, it is possible to generate a low-noise and high-resolution tomographic image in which the influences of eyeball fine movement and head movement are suppressed as much as possible.
［第１の実施形態］
以下、図面を参照しながら、本発明の第１の実施形態について説明する。なお、本実施形態に係る画像処理装置は、オーバーサンプリング法または重ね合わせ法による撮影を行うにあたり、被検眼の動き量を検出し、該検出した動き量に応じた撮影条件に基づいて撮影を行うことを特徴としている。
[First Embodiment]
Hereinafter, a first embodiment of the present invention will be described with reference to the drawings. Note that the image processing apparatus according to the present embodiment detects the amount of movement of the subject's eye when performing imaging by the oversampling method or the superposition method, and performs imaging based on the imaging condition corresponding to the detected amount of movement. It is characterized by that.
本実施形態によれば、個人ごとの眼の動き量に応じた撮影条件のもとでオーバーサンプリング法または重ね合わせ法による撮影を行うため、眼球の固視微動や頭の動き等の影響を極力抑えた、低ノイズかつ高解像度の断層画像を生成することが可能となる。 According to the present embodiment, since the photographing is performed by the oversampling method or the superposition method under the photographing condition corresponding to the amount of eye movement for each individual, the influence of eye movements of the eyeball or the movement of the head is minimized. It is possible to generate a tomographic image with low noise and high resolution.
以下、本実施形態に係る画像処理装置を備える画像処理システムについて、詳細を説明する。 Hereinafter, details of the image processing system including the image processing apparatus according to the present embodiment will be described.
＜画像処理システムの構成＞
図１は、本実施形態に係る画像処理装置１１０を備える画像処理システム１００の構成を示す図である。図１に示すように、画像処理システム１００は、画像処理装置１１０が、インタフェースを介して断層画像撮影装置１２０及び眼底画像撮影装置１３０と接続されることにより構成されている。
<Configuration of image processing system>
FIG. 1 is a diagram illustrating a configuration of an
断層画像撮影装置１２０は、眼部の断層画像を撮影する装置であり、当該装置としては、例えば、タイムドメイン方式のＯＣＴやフーリエドメイン方式のＯＣＴ等が挙げられる。なお、断層画像撮影装置１２０は既知の装置であるため、詳細な説明は省略し、ここでは、画像処理装置１１０からの指示により設定される、走査線数、撮影枚数等によって動作内容が変更される機能についてのみ説明を行う。
The
図１において、ガルバノミラー１２１は近赤外光の照射位置を制御する。また、ガルバノミラー駆動部１２２は、平面方向の走査線数（平面方向の走査速度）を規定する。
In FIG. 1, a
パラメータ設定部１２３は、ガルバノミラー駆動部１２２によるガルバノミラー１２１の動作制御に用いられる各種パラメータを、ガルバノミラー駆動部１２２に設定する。パラメータ設定部１２３により設定されるパラメータにより、断層画像撮影装置１２０による断層画像の撮影における撮影条件が決定される。具体的には、画像処理装置１１０からの指示により設定される走査線数、撮影枚数により、平面方向の主走査方向及び平面方向の副走査方向の走査速度が決定される。
The
眼底画像撮影装置１３０は、眼部の眼底画像を撮影する装置であり、当該装置としては、例えば、眼底カメラやＳＬＯ等が挙げられる。
The fundus
画像処理装置１１０は、断層画像撮影装置１２０により撮影された断層画像を処理し、表示部１１７において表示される断層画像を生成する。画像処理装置１１０は、画像取得部１１１と、記憶部１１２と、第１の動き検出部１１３と、第２の動き検出部１１４と、決定部１１５と、画像作成部１１６と、表示部１１７とを備える。
The
画像取得部１１１は、断層画像撮影装置１２０や眼底画像撮影装置１３０で撮影された断層画像や眼底画像を取得し、記憶部１１２に格納する。第１の動き検出部１１３は、断層画像撮影装置１２０において撮影時に計測された反射光強度（信号強度）に基づいて、被検眼の深度方向の動き量を検出する。第２の動き検出部１１４は、眼底画像撮影装置１３０において撮影された眼底画像に基づいて、被検眼の平面方向の動き量を検出する。
The
決定部１１５は、第１の動き検出部１１３と第２の動き検出部１１４とにおいて検出された被検眼の動き量に基づいて、オーバーサンプリング法または重ね合わせ法による撮影を行うためのパラメータ（走査線数、撮影枚数等）を決定する。
The
画像作成部１１６は、決定部１１５により決定されたパラメータのもとで、オーバーサンプリング法または重ね合わせ法により撮影された断層画像を処理し、表示部１１７において表示される断層画像を生成する。表示部１１７は、画像作成部１１６において生成された断層画像を表示する。
The
＜画像処理装置における断層画像処理の流れ＞
次に、図２及び図３を参照しながら、本実施形態の画像処理装置１１０における断層画像処理の流れについて説明する。
<Flow of tomographic image processing in image processing apparatus>
Next, the flow of tomographic image processing in the
ステップＳ２０１では、画像処理装置１１０からの指示に基づいて、断層画像撮影装置１２０及び眼底画像撮影装置１３０が、それぞれ被検眼の動き量を検出するために被検眼を撮影する。画像取得部１１１では、断層画像撮影装置１２０において撮影された断層画像及び眼底画像撮影装置１３０において撮影された眼底画像（これらを総称して、動き検出用画像ともいう）を取得する。
In step S <b> 201, based on an instruction from the
図３は、画像取得部１１１において取得された動き検出用画像の一例を示す図である。このうち、図３（Ａ）は、断層画像撮影装置１２０において撮影した断層画像の一例を、図３（Ｂ）は、眼底画像撮影装置１３０において撮影された眼底画像の一例をそれぞれ示している。なお、図３（Ｂ）において、参照記号Ｆは、眼底を示している。
FIG. 3 is a diagram illustrating an example of a motion detection image acquired by the
ステップＳ２０２では、第１の動き検出部１１３と第２の動き検出部１１４が、被検眼の動き量を検出する。第１の動き検出部１１３では、断層画像撮影装置１２０において断層画像を撮影する際に被検眼に照射された近赤外光の反射光強度（反射信号の強度）に基づいて、眼の深度方向（図３（Ａ）のｚ軸方向）の動き量を検出する。
In step S202, the
また、第２の動き検出部１１４では、眼底画像撮影装置１３０より取得した眼底画像において、血管分岐部などの特徴点を追跡することで、眼の平面方向（図３（Ｂ）のｘ−ｙ軸方向）の動き量を検出する。なお、特徴点の検出及び追跡は、例えば、ＫＬＴ法（非特許文献１参照）等を用いて実行されるものとする（ただし、特徴点の検出及び追跡は、ＫＬＴ法に限定されるものではない）。
Further, the second
ステップＳ２０３では、決定部１１５が、第１の動き検出部１１３、第２の動き検出部１１４で検出した被検眼の動き量に応じて、断層画像撮影装置１２０が撮影を行う際の撮影条件を構成するパラメータを決定する。更に、決定したパラメータを断層画像撮影装置１２０のパラメータ設定部１２３に設定する。なお、決定部１１５におけるパラメータ決定処理の詳細については後述する。
In step S <b> 203, the
ステップＳ２０４では、画像処理装置１１０からの指示に基づいて、決定部１１５において決定されたパラメータを用いて断層画像撮影装置１２０が撮影を行うことにより得られた断層画像を、画像取得部１１１が取得する。
In step S <b> 204, the
ステップＳ２０５では、画像作成部１１６が、ステップＳ２０４において取得した断層画像を処理し（例えば、複数画素の加算平均処理を行うことで、各画素の画素値を算出し）、表示部１１７において表示される断層画像を生成する。なお、画像作成部１１６における当該断層画像生成処理の詳細は後述する。ステップＳ２０６では、表示部１１７が、画像作成部１１６において生成された断層画像を表示する。
In step S205, the
＜各部における処理の詳細＞
次に、画像処理装置１１０を構成する各部の処理の詳細について説明する。
<Details of processing in each part>
Next, details of processing of each unit constituting the
＜決定部１１５におけるパラメータ決定処理の詳細＞
はじめに、決定部１１５におけるパラメータ決定処理の詳細について説明する。なお、本実施形態に係る画像処理装置１１０では、高画質な断層画像を生成すべく、１画素あたりの加算平均処理に用いる画素数として画素数ｎ（ｎ＞１）を用いることとする。
<Details of Parameter Determination Process in
First, details of the parameter determination process in the
決定部１１５では、当該画素数ｎによる加算平均処理を実現しつつ、かつ１枚の断層画像内に歪みが生じることがないように、各パラメータ（撮影枚数、走査線数）を決定していく。以下、詳細に説明する。
The
断層画像生成時の横方向解像度をｒｘ、同一断面における断層画像の撮影枚数をｋ、１枚の断層画像における走査線数をＡｍとすると、横方向解像度ｒｘと、撮影枚数ｋと走査線数Ａｍとの関係は（１）式のようになる。 When the lateral resolution during the tomographic image generation rx, the number of scanning lines of shots of the tomographic image at the same section in k, 1 tomographic image and A m, and lateral resolution rx, the number of scanning lines and number of shots k relationship between a m is as (1).
一方、断層画像撮影装置１２０で用いられる光源の周波数をｆ［Ｈｚ］とすると、１枚の断層画像を撮影するのに要する時間ｔ［ｓ］は（２）式により求めることができる。
On the other hand, when the frequency of the light source used in the tomographic
ここで、断層画像撮影装置１２０で用いられる光源の波長に基づいて、断層画像の横方向分解能ＯＲｘと深度方向分解能ＯＲｚとを求めることができる。
Here, the lateral resolution ORx and the depth resolution ORz of the tomographic image can be obtained based on the wavelength of the light source used in the
そして、決定部１１５では、１枚の断層画像内において歪みが生じることがないようにするために、１枚の断層画像を撮影する時間内に検出された被検眼の動き量の平均値あるいは中央値が、当該分解能を超えないようにパラメータを決定する。
Then, in order to prevent distortion from occurring in one tomographic image, the
つまり、被検眼が、横方向分解能ＯＲｘ移動するのに要する時間をｔＯＲｘ［ｓ］、深度方向分解能ＯＲｚ移動するのに要する時間をｔＯＲｚ［ｓ］とすると、ｔＯＲｘ及びｔＯＲｚがｔを超えないようにパラメータを決定する。具体的には、走査線数Ａｍは、（２）式を用いて、（３）式により求める。 That is, if the time required for the eye to move the horizontal resolution ORx is t ORx [s] and the time required for the depth resolution ORz to move is t ORz [s], t ORx and t ORz are t. Determine the parameters not to exceed. Specifically, the number of scanning lines Am is obtained from equation (3) using equation (2).
更に、撮影枚数ｋは、（１）式と（３）式とを用いて、（４）式により求める。 Further, the number of shots k is obtained from equation (4) using equations (1) and (3).
次に、図４を用いて、１枚の断層画像における走査線数Ａｍと、同一断面における撮影枚数ｋとの関係について説明する。図４における縦軸目盛りは、断層画像撮影時の横方向解像度ｒｘを５１２、加算平均処理に用いる画素数ｎを４とした場合の数値である。 Next, with reference to FIG. 4, the number of scanning lines A m in one tomographic image, the relationship between the number of shots k in the same cross-section will be described. The vertical scale in FIG. 4 is a numerical value when the horizontal resolution rx at the time of tomographic image shooting is 512 and the number of pixels n used for the averaging process is 4.
図４において、左の縦軸とグラフの実線が走査線数Ａｍを表し、右の縦軸とグラフの破線が撮影枚数ｋを表している。また、横軸は眼の動き量を表している。図４に示すように、１枚の断層画像内に歪みが生じることがないようにパラメータが決定された場合、眼の動き量が大きくなるにつれ、走査線数Ａｍの数は少なくなり、撮影枚数が増えることとなる。 4, the solid line of the vertical axis and the graph on the left represents the number of scanning lines A m, is a broken line of the vertical axis and the graph of the right represents the number of shots k. The horizontal axis represents the amount of eye movement. As shown in FIG. 4, if the parameter so as not to distort is determined in one tomographic image, as the motion amount of the eye increases, the number of the number A m scanning lines decreases, shooting The number of sheets will increase.
なお、図４では、走査線数Ａｍを５１２、１０２４、２０４８の３段階としているため、グラフはステップ関数状になっているが、走査線数Ａｍは、これに限定されるものではない。例えば、任意の走査線数に対応した右下がりの線形関数、あるいは非線形関数となるように構成してもよい。 In FIG. 4, since the number of scanning lines A m three stages of 512, 1024, 2048, graph has become step functions like, the number of scanning lines A m is not limited thereto . For example, it may be configured to be a linear function or a non-linear function with a downward slope corresponding to an arbitrary number of scanning lines.
＜画像作成部１１６における断層画像生成処理の詳細＞
次に、画像作成部１１６における断層画像生成処理の詳細について説明する。図５（ａ）は、オーバーサンプリング法により撮影された断層画像を処理し断層画像を生成する断層画像生成処理（同一断層画像上に位置する走査線の加算平均処理）を説明するための図である。
<Details of Tomographic Image Generation Processing in
Next, details of the tomographic image generation processing in the
図５（ｂ）は、重ね合わせ法により撮影された複数の断層画像を処理し断層画像を生成する断層画像生成処理（異なる時刻に撮影された、異なる断層画像上に位置する走査線の加算平均処理）を説明するための図である。 FIG. 5B is a tomographic image generation process for processing a plurality of tomographic images photographed by the superposition method to generate a tomographic image (addition average of scanning lines photographed at different times and located on different tomographic images. It is a figure for demonstrating a process.
図５（ｃ）は、オーバーサンプリング法及び重ね合わせ法の組み合わせにより撮影された断層画像を処理し断層画像を生成する断層画像生成処理（同一断層画像上及び異なる断層画像上に位置する走査線の加算平均処理）を説明するための図である。図５（ｄ）は、断層画像生成処理により生成された断層画像を示す図である。以下、各処理の詳細について説明する。 FIG. 5C shows a tomographic image generation process for generating a tomographic image by processing a tomographic image captured by a combination of the oversampling method and the superposition method (scan lines located on the same tomographic image and different tomographic images). It is a figure for demonstrating an addition average process. FIG. 5D shows a tomographic image generated by the tomographic image generation process. Details of each process will be described below.
（１）オーバーサンプリング法で撮影された断層画像に基づく断層画像生成処理
まず、図５（ａ）を用いて、オーバーサンプリング法で撮影した断層画像に基づく断層画像生成処理について説明する。ここでは、横方向解像度ｒｘの２倍の解像度で撮影が行われた場合の例について説明する。
(1) Tomographic image generation process based on a tomographic image captured by the oversampling method First, a tomographic image generation process based on a tomographic image captured by the oversampling method will be described with reference to FIG. Here, an example will be described in which shooting is performed at a resolution twice the horizontal resolution rx.
図５（ａ）において、Ａｉ２ｊ’、Ａｉ２ｊ＋１’は、各走査線を表している。なお、Ａｉ２ｊ＋１’は、Ａｉ２ｊ’を撮影した１／ｆ［ｓ］後に撮影された走査線を示している。図５（ｄ）は、各画素あたり、ｎ個の画素を用いて加算平均処理を行うことにより生成された断層画像である。 In FIG. 5A, A i2j ′ and A i2j + 1 ′ represent each scanning line. A i2j + 1 ′ indicates a scanning line captured 1 / f [s] after capturing A i2j ′. FIG. 5D is a tomographic image generated by performing an averaging process using n pixels for each pixel.
つまり、図５（ｄ）において、Ａｉｊは対応する走査線について加算平均処理を行うことにより算出された新たな走査線である。図５（ａ）の場合、Ａｉｊは、Ａｉ２ｊ’、Ａｉ２ｊ＋１’の走査線について加算平均処理を行うことにより算出される。なお、オーバーサンプリング法により撮影された断層画像についての断層画像生成処理の方法は、加算平均処理に限定されるものではなく、中央値算出処理、重み付加算平均処理などを用いてもよい。 That is, in FIG. 5D, A ij is a new scanning line calculated by performing the averaging process on the corresponding scanning line. In the case of FIG. 5A, A ij is calculated by performing an averaging process on the scanning lines of A i2j ′ and A i2j + 1 ′. Note that the method of tomographic image generation processing for a tomographic image photographed by the oversampling method is not limited to addition averaging processing, and median calculation processing, weighted addition averaging processing, or the like may be used.
（２）重ね合わせ法で撮影された断層画像についての断層画像生成処理
次に、図５（ｂ）を用いて、重ね合わせ法により撮影された断層画像に基づく断層画像生成処理について説明する。ここでは、同一断面における撮影枚数ｋが２の場合について説明する。
(2) Tomographic image generation processing for a tomographic image photographed by the superposition method Next, a tomographic image generation processing based on a tomographic image photographed by the superposition method will be described with reference to FIG. Here, a case where the number of shots k in the same cross section is 2 will be described.
複数の断層画像に基づいて重ね合わせ処理を行う場合には、不図示の位置合わせ部において、事前に断層画像同士（Ｔｉ’’とＴｉ＋１’’）の位置合わせを行っておく必要がある。断層画像間の位置合わせ処理としては、例えば、２つの断層画像の類似度を表す評価関数を事前に定義しておき、この評価関数の値が最も良くなるように断層画像を変形する。評価関数としては、例えば、画素値で評価する方法が挙げられる（例えば、相互情報量を用いて評価を行う方法が挙げられる）。また、断層画像の変形処理としては、例えば、アフィン変換を用いて並進や回転を行ったり、拡大率を変化させたりする処理が挙げられる。なお、以下、複数断層画像での重ね合わせ処理においては、断層画像間の位置合わせ処理は既に完了しているものとする。 When performing superimposition processing based on a plurality of tomographic images, it is necessary to align the tomographic images (T i ″ and T i + 1 ″) in advance in an alignment unit (not shown). . As the alignment processing between tomographic images, for example, an evaluation function representing the similarity between two tomographic images is defined in advance, and the tomographic image is deformed so that the value of this evaluation function becomes the best. As the evaluation function, for example, a method of evaluating with a pixel value is cited (for example, a method of performing evaluation using mutual information amount is cited). In addition, as the tomographic image deformation process, for example, a process of performing translation or rotation using affine transformation or changing an enlargement ratio can be cited. In the following description, it is assumed that the alignment process between tomographic images has already been completed in the overlay process with a plurality of tomographic images.
図５（ｂ）において、Ｔｉ’’とＴｉ＋１’’とは、同一断面をそれぞれ異なる時刻に撮影された断層画像である。Ａｉｊ’’、Ａ（ｉ＋１）ｊ’’は、断層画像Ｔｉ’’とＴｉ＋１’’におけるそれぞれの走査線を表している。なお、Ａ（ｉ＋１）ｊ’’は、Ａｉｊ’’を撮影したＡｍ／ｆ＋β［ｓ］後に撮影した走査線を示している。ここでβは、走査線の位置を断層画像の最後の位置（図５（ｂ）のＡｉｍ）から最初の位置（図５（ｂ）のＡｉ１）に戻すための時間である。 In FIG. 5B, T i ″ and T i + 1 ″ are tomographic images taken at the same time at the same cross section. A ij ″ and A (i + 1) j ″ represent respective scanning lines in the tomographic images T i ″ and T i + 1 ″. A (i + 1) j ″ represents a scanning line photographed after A m / f + β [s] in which A ij ″ is photographed. Here, β is a time for returning the position of the scanning line from the last position (A im in FIG. 5B) to the first position (A i1 in FIG. 5B) of the tomographic image.
図５（ｂ）の断層画像から図５（ｄ）の断層画像を生成する場合、図５（ｄ）におけるＡｉｊは、Ａｉｊ’’、Ａ（ｉ＋１）ｊ’’の走査線について加算平均処理を行うことにより算出される。 When the tomographic image of FIG. 5 (d) is generated from the tomographic image of FIG. 5 (b), A ij in FIG. 5 (d) is an average of the scanning lines of A ij ″ and A (i + 1) j ″. Calculated by performing processing.
（３）オーバーサンプリング法及び重ね合わせ法の組み合わせにより撮影された断層画像についての断層画像生成処理
次に、図５（ｃ）を用いて、オーバーサンプリング法と重ね合わせ法との組み合わせにより撮影された断層画像に基づく断層画像生成処理について説明する。ここでは、１画素あたりの重ねあわせを行う数ｎを４とし、横方向解像度をｒｘの２倍の解像度とし、同一断面における撮影枚数ｋが２の場合について説明する。
(3) Tomographic image generation processing for a tomographic image photographed by a combination of the oversampling method and the superposition method Next, using FIG. 5C, the image was photographed by a combination of the oversampling method and the superposition method. A tomographic image generation process based on a tomographic image will be described. Here, a case will be described in which the number n of superpositions per pixel is 4, the lateral resolution is twice the resolution of rx, and the number of shots k in the same cross section is 2.
図５（ｃ）において、Ａｉ２ｊ’’’、Ａｉ２ｊ＋１’’’は、断層画像Ｔｉ’’’における各走査線を表し、Ａ（ｉ＋１）２ｊ’’’、Ａ（ｉ＋１）２ｊ＋１’’’は、断層画像Ｔｉ＋１’’’における各走査線を表している。 In FIG. 5C, A i2j ″ ″ and A i2j + 1 ″ ″ represent respective scanning lines in the tomographic image T i ″ ″, and A (i + 1) 2j ′ ″, A (i + 1) 2j + 1 ″. 'Represents each scanning line in the tomographic image T i + 1 '''.
図５（ｃ）の断層画像から図５（ｄ）の断層画像を生成する場合、図５（ｄ）におけるＡｉｊは、Ａｉ２ｊ’’’、Ａｉ２ｊ＋１’’’、Ａ（ｉ＋１）２ｊ’’’、Ａ（ｉ＋１）２ｊ＋１’’’の走査線について加算平均処理を行うことにより算出される。 When the tomographic image of FIG. 5 (d) is generated from the tomographic image of FIG. 5 (c), A ij in FIG. 5 (d) is A i2j ′ ″, A i2j + 1 ′ ″, A (i + 1) 2j ′. ″, A (i + 1) 2j + 1 ′ ″ is calculated by performing an averaging process on the scanning line.
以上の説明から明らかなように、本実施形態では、個人ごとの眼の動き量を検出した上で撮影条件を設定し、当該撮影条件のもとでオーバーサンプリング法または重ね合わせ法により撮影することで得られた断層画像を処理する構成とした。 As is clear from the above description, in the present embodiment, shooting conditions are set after detecting the amount of eye movement for each individual, and shooting is performed using the oversampling method or the superposition method under the shooting conditions. The tomographic image obtained in the above is processed.
この結果、眼球の固視微動や頭の動き等の影響を極力抑えた、低ノイズかつ高解像度の断層画像を生成することが可能となった。 As a result, it has become possible to generate a low-noise and high-resolution tomographic image in which the influences of eye movement and head movement are suppressed as much as possible.
なお、本実施形態では、１枚の高画質な２次元断層画像を生成する方法について説明したが、本発明はこれに限らない。例えば、同様の方法を用いて３次元断層画像を生成するように構成してもよい。更には、放射線状や円形状に走査した断層画像においても、同様の方法により高画質な断層画像を生成することが可能である。 In the present embodiment, the method for generating one high-quality two-dimensional tomographic image has been described. However, the present invention is not limited to this. For example, a similar method may be used to generate a three-dimensional tomographic image. Furthermore, a high-quality tomographic image can be generated by a similar method even in a tomographic image scanned in a radial or circular shape.
［第２の実施形態］
上記第１の実施形態では、動き量を検出するための撮影を行い、撮影条件を設定した上で、再度、断層画像を撮影する構成としたが、本発明はこれに限定されない。例えば、所定の撮影条件のもとで撮影を行い、取得された断層画像を処理する際に、被検眼の動き量に応じた処理を行うように構成してもよい。以下、本実施形態の詳細について説明する。
[Second Embodiment]
In the first embodiment, the configuration is such that imaging for detecting the amount of motion is performed, imaging conditions are set, and a tomographic image is captured again. However, the present invention is not limited to this. For example, it may be configured to perform processing according to the amount of movement of the eye to be examined when imaging is performed under a predetermined imaging condition and the acquired tomographic image is processed. Details of this embodiment will be described below.
＜画像処理システムの構成＞
図６は、本実施形態に係る画像処理装置６１０を備える画像処理システム６００の構成を示す図である。図６に示すように、上記第１の実施形態において説明した画像処理システム１００とは、画像処理装置６１０の機能構成が相違する。したがって、以下では、当該相違点を中心に説明する。
<Configuration of image processing system>
FIG. 6 is a diagram illustrating a configuration of an
図６に示すように、画像処理装置６１０は、画像取得部１１１と、記憶部１１２と、第１の動き検出部６１３と、第２の動き検出部６１４と、画像作成部６１６と、表示部１１７と、決定部６１５とを備える。このうち、画像取得部１１１と、記憶部１１２と、表示部１１７については、上記第１の実施形態と同様の機能を有するため、ここでは説明を省略する。
As shown in FIG. 6, the
第１の動き検出部６１３は、断層画像撮影装置１２０において撮影時に計測された反射光強度（信号強度）に基づいて、被検眼の深さ方向の動き量を検出する。更に、１枚の断層画像を撮影する間に、断層画像撮影装置１２０で用いる光源の波長から求められる深度方向分解能ＯＲｚを超える動き量を検出した場合に、当該検出時の時刻を記憶部１１２に記録する。
The first
第２の動き検出部６１４は、眼底画像撮影装置１３０において撮影された眼底画像に基づいて、被検眼の平面方向の動き量を検出する。更に、断層画像撮影装置１２０が１枚の断層画像を撮影している間に、眼底画像に基づいて、断層画像撮影装置１２０で用いる光源の波長から求められる横方向分解能ＯＲｘを超える動き量を検出した場合に、当該検出時の時刻を記憶部１１２に記録する。
The second
決定部６１５は、動き量の小さい断面画像を基準断面画像として選択するとともに、動き量が所定の閾値を超えている画素の有無を記憶部１１２の記録結果に基づいて判断する。更に、動き量が所定の閾値を超えている画素があった場合には、当該画素について、加算平均処理に用いる走査線を選択する。
The determining
画像作成部６１６は、記憶部１１２に記録された断面画像のうち、決定部６１５において基準断面画像として選択された断面画像について、動き量が所定の閾値を超えている画素に対して、選択された走査線を用いて加算平均処理を行う。
Of the cross-sectional images recorded in the
＜画像処理装置における断層画像処理の流れ＞
次に、図７を参照しながら、本実施形態の画像処理装置６１０における断層画像処理の流れについて説明する。
<Flow of tomographic image processing in image processing apparatus>
Next, the flow of tomographic image processing in the
ステップＳ７０１では、画像処理装置６１０からの指示に基づいて、断層画像撮影装置１２０及び眼底画像撮影装置１３０が、それぞれ被検眼の撮影を行う。なお、断層画像撮影装置１２０では、予めパラメータ設定部１２３に設定されているパラメータを用いて被検眼の撮影を行う（例えば、走査線数Ａｍを２０４８、同一断面における撮影枚数ｋを４として撮影を行う）。
In step S701, based on an instruction from the
ステップＳ７０２では、第１の動き検出部６１３と第２の動き検出部６１４が、被検眼の動き量を検出する。なお、動き量の検出方法は、上記第１の実施形態において説明済みであるため、ここでは説明を省略する。第１の動き検出部６１３、第２の動き検出部６１４では、更に、１枚の断層画像を撮影する間に、光源の波長から求められる横方向分解能ＯＲｘ、深度方向分解能ＯＲｚを超える動き量があった場合にこれを検出し、該検出した時刻を記憶部１１２に記録していく。
In step S702, the
ステップＳ７０３では、ステップＳ７０２で検出した動き量と、ステップＳ７０１で撮影した断層画像とに基づいて、決定部６１５が、加算平均処理を行う画素を選択する合成画像選択処理を行う。ここで、当該合成画素選択処理（ステップＳ７０３）の詳細について、図７（ｂ）のフローチャートを用いて説明する。
In step S703, based on the amount of motion detected in step S702 and the tomographic image captured in step S701, the
なお、合成画素選択処理（ステップＳ７０３）の説明にあたっては、選択された画素において加算平均処理に用いられる画素数ｎが４、横方向解像度ｒｘが５１２、走査線数Ａｍが２０４８、同一断面における撮影枚数ｋが４であるものとする。
Incidentally, when the description of the composite pixel selecting process (step S703), 4 is the number of pixels n used in the averaging process in the selected pixels,
ステップＳ７１０では、決定部６１５が、複数の断層画像の中から基準となる断層画像を選択する。基準断層画像の選択は、ステップＳ７０２において、１枚の断層画像を撮影する時間内に、横方向分解能ＯＲｘ、深度方向分解能ＯＲｚを超える被検眼の動き量がない断層画像を選択する。その条件を満たす断層画像がない場合には、１枚の断層画像を撮影する時間内で最大動き量が最も小さい断層画像、もしくは、動き量の平均値が最も小さい断層画像を選択する。あるいは、各断層画像をそれぞれ基準断層画像に設定し、その他の断層画像とそれぞれの断層画像との間で位置合わせを行い、その他の断層画像との位置合わせ評価値の平均値が高かった断層画像を最終的に選択する。
In step S710, the
ステップＳ７２０では、基準断層画像が所定の条件を満たしているかを判断する。具体的には、ステップＳ７１０において選択した基準断層画像の被検眼の動き量が、横方向分解能及び深度方向分解能を超えているか否かを判断する。ステップＳ７２０において横方向分解能及び深度方向分解能を超えていないと判断した場合には、合成画素選択処理を終了する。 In step S720, it is determined whether the reference tomographic image satisfies a predetermined condition. Specifically, it is determined whether or not the amount of movement of the eye to be examined in the reference tomographic image selected in step S710 exceeds the horizontal resolution and depth resolution. If it is determined in step S720 that the horizontal resolution and the depth resolution are not exceeded, the composite pixel selection process is terminated.
一方、基準断層画像の被検眼の動き量が横方向分解能または深度方向分解能を超えていると判断した場合には、オーバーサンプリング法と重ね合わせ法の組み合わせにより撮影された断層画像の走査線について加算平均処理を行うべく、ステップＳ７３０に進む。 On the other hand, if it is determined that the amount of movement of the eye in the reference tomographic image exceeds the lateral resolution or depth resolution, the scanning line of the tomographic image taken by the combination of the oversampling method and the overlay method is added. In order to perform the averaging process, the process proceeds to step S730.
ステップＳ７３０では、決定部６１５が、基準断層画像の各走査線において、各走査線が撮影された時刻と、横方向分解能ＯＲｘまたは深度方向分解能ＯＲｚを超える動き量が検出された時刻とを対応付ける。そして、横方向分解能または深度方向分解能を超える動き量を検出した時刻に撮影された基準断層画像の走査線と、その走査線との間で加算平均処理を行う同一断面上の基準断層画像以外の断層画像の走査線とを選択する。
In step S730, the
図７（ａ）の説明に戻る。ステップＳ７０４では、画像作成部６１６が、断層画像撮影装置１２０で撮影した断層画像を処理する。ここでは、ステップＳ７１０において選択された基準断層画像について、ステップＳ７３０において選択された走査線を用いて加算平均処理を行い、表示部１１７において表示される断層画像を生成する。なお、加算平均処理は、走査線毎に、ステップＳ２０５で示す方法に基づいて行われるものとする。
Returning to the description of FIG. In step S <b> 704, the
以上の説明から明らかなように、本実施形態では、被検眼の撮影を行いながら、被検眼の動き量を検出し、取得された断層画像に対して、当該検出した動き量に応じた処理を行う構成とした。 As is clear from the above description, in the present embodiment, the amount of movement of the eye to be examined is detected while photographing the eye to be examined, and processing corresponding to the detected amount of movement is performed on the acquired tomographic image. The configuration is to be performed.
この結果、眼球の固視微動や頭の動き等の影響を極力抑えた、低ノイズかつ高解像度の断層画像を生成することが可能となった。 As a result, it has become possible to generate a low-noise and high-resolution tomographic image in which the influences of eye movement and head movement are suppressed as much as possible.
［第３の実施形態］
上記第１の実施形態では、被検眼の動き量を検出するための撮影において取得された断層画像及び眼底画像に基づいてパラメータを決定し、当該決定したパラメータを用いて撮影することにより取得された断層画像を処理する構成とした。しかしながら、本発明はこれに限られない。例えば、決定したパラメータを用いて撮影する間も、動き量を検出しておき、所定の閾値以上の動き量が検出された場合には、再度、パラメータを決定しなおし、自動的に撮影をやり直すように構成してもよい。
[Third Embodiment]
In the first embodiment, a parameter is determined based on a tomographic image and a fundus image acquired in imaging for detecting the amount of movement of the eye to be examined, and acquired by imaging using the determined parameter. The tomographic image is processed. However, the present invention is not limited to this. For example, the amount of movement is detected during shooting using the determined parameter, and when a movement amount equal to or greater than a predetermined threshold is detected, the parameter is determined again and the shooting is automatically performed again. You may comprise as follows.
このような構成とすることにより、撮影中にまばたきやマイクロサッカードなど大きな変化が生じた場合であっても、撮影中に検出した動き量からパラメータが再設定されるため、高画質な断層画像の生成を維持することが可能となる。 With such a configuration, even if a large change such as blinking or microsaccade occurs during shooting, the parameters are reset from the amount of motion detected during shooting, so a high-quality tomographic image Can be maintained.
以下、本実施形態の詳細について図８を参照しながら説明する。なお、本実施形態の画像処理装置の機能構成は、上記第１の実施形態の画像処理装置の機能構成と同じである。また、本実施形態の画像処理装置における断層画像処理（図８）のうち、ステップＳ８０１からステップＳ８０４までの処理は、上記第１の実施形態の画像処理装置における断層画像処理（図２）のステップＳ２０１からステップＳ２０４までの処理と同様である。更に、ステップＳ８０５、ステップＳ８０７、ステップＳ８０８の処理は、ステップＳ２０２、ステップＳ２０５、ステップＳ２０６の処理と同様である。このため、以下では、ステップＳ８０６の処理についてのみ説明する。 Hereinafter, details of the present embodiment will be described with reference to FIG. Note that the functional configuration of the image processing apparatus of the present embodiment is the same as the functional configuration of the image processing apparatus of the first embodiment. Of the tomographic image processing (FIG. 8) in the image processing apparatus of the present embodiment, the processing from step S801 to step S804 is the step of tomographic image processing (FIG. 2) in the image processing apparatus of the first embodiment. This is the same as the processing from S201 to step S204. Furthermore, the processes of step S805, step S807, and step S808 are the same as the processes of step S202, step S205, and step S206. For this reason, only the process of step S806 will be described below.
ステップＳ８０６では、決定部１１５が、被検眼の動き量が一定の閾値を超えた場合に、再度、撮影を行うか否かを判断する。具体的には、１枚の断層画像を撮影している途中で、被検者のまばたきやマイクロサッカードにより、眼の位置が大幅にずれるといった事態が起きた場合に、決定部１１５では、ステップＳ８０３に戻り、パラメータを再設定する決定を行う。被検眼の位置ずれが起きた場合は、それまでに撮影した同一断面の断層画像とも位置がずれている。このため、再度パラメータを設定しなおし、撮影を行う（ステップＳ８０４）。
In step S806, the
以上の説明から明らかなように、本実施形態では、断層画像の撮影中も動き量を検出し、検出した動き量が所定の閾値を超えた場合には、再度撮影を行う構成とした。この結果、撮影中に、例えば、まばたきやマイクロサッカードなどといった大きな変化が生じた場合であっても、自動的に再撮影が行われるため、高画質な断層画像の生成を維持することが可能となる。 As is clear from the above description, in the present embodiment, the amount of motion is detected even during tomographic image capturing, and when the detected amount of motion exceeds a predetermined threshold, capturing is performed again. As a result, even if a major change such as blinking or microsaccade occurs during imaging, re-imaging is performed automatically, so it is possible to maintain the generation of high-quality tomographic images. It becomes.
［他の実施形態］
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。
[Other Embodiments]
The present invention can also be realized by executing the following processing. That is, software (program) that realizes the functions of the above-described embodiments is supplied to a system or apparatus via a network or various storage media, and a computer (or CPU, MPU, etc.) of the system or apparatus reads the program. It is a process to be executed.
Claims (21)
前記検出された動き量が大きいほど、前記被検眼の複数の２次元断層画像をそれぞれ取得する際の走査速度を上げるように、該走査速度を決定する決定手段と、
前記決定された走査速度で前記被検眼の複数の２次元断層画像を取得する取得手段と、
前記取得された複数の２次元断層画像から、前記被検眼の動きに基づき生じる２次元断層画像内の面内方向の歪みが他の２次元断層画像よりも小さい２次元断層画像を選択する選択手段と
を備えることを特徴とする画像処理装置。 Detection means for detecting the amount of movement of the eye to be examined;
Determining means for determining the scanning speed so as to increase the scanning speed when acquiring each of a plurality of two-dimensional tomographic images of the eye to be examined, as the detected amount of movement is larger;
Obtaining means for obtaining a plurality of two-dimensional tomographic images of the eye to be examined at the determined scanning speed;
Selection means for selecting, from the plurality of acquired two-dimensional tomographic images, a two-dimensional tomographic image in which in-plane distortion in the two-dimensional tomographic image generated based on the movement of the eye to be examined is smaller than other two-dimensional tomographic images. An image processing apparatus comprising:
前記取得手段は、前記再度決定された走査速度で前記被検眼の複数の２次元断層画像を取得することを特徴とする請求項４に記載の画像処理装置。 The determining means determines the scanning speed again when the amount of motion detected again is equal to or greater than a threshold,
The image processing apparatus according to claim 4, wherein the acquisition unit acquires a plurality of two-dimensional tomographic images of the eye to be examined at the scanning speed determined again.
１枚のＯＣＴ断層画像の撮影中の前記眼球の深さ方向の動き量を検出するとともに、撮影された眼底画像を用いて、該１枚のＯＣＴ断層画像の撮影中の眼底の平面方向の動き量を検出する検出手段と、
同一断面について撮影された前記眼球の複数のＯＣＴ断層画像のうち、前記撮影中に前記検出手段により検出された、前記眼球の深さ方向の動き量が最も小さく、前記眼底の平面方向の動き量が最も小さいＯＣＴ断層画像を、ＯＣＴ断層画像内の歪みが他のＯＣＴ断層画像よりも小さい基準ＯＣＴ断層画像として選択する選択手段と、
前記ＯＣＴ断層画像を、位置合わせする位置合わせ手段と、
横方向分解能または深さ方向分解能を超える動き量が検出された際に撮影された前記基準ＯＣＴ断層画像の走査線と、同一断面における前記基準ＯＣＴ断層画像以外のＯＣＴ断層画像の走査線とを選択し、前記基準ＯＣＴ断層画像の走査線と前記基準ＯＣＴ断層画像以外のＯＣＴ断層画像の走査線との間で、平均化処理を行うことにより、ＯＣＴ断層画像を生成する生成手段と
を備えることを特徴とする画像処理装置。 An image processing apparatus for processing an OCT tomographic image of an eyeball,
The amount of movement in the depth direction of the eyeball during the photographing of one OCT tomographic image is detected, and the movement of the fundus in the planar direction during the photographing of the one OCT tomographic image is detected using the photographed fundus image. Detecting means for detecting the amount;
Of the plurality of OCT tomographic images of the eyeball photographed for the same cross section, the amount of movement of the eyeball in the depth direction detected by the detection means during the photographing is the smallest, and the amount of movement of the fundus in the plane direction Selecting means for selecting the OCT tomographic image having the smallest OCT tomographic image as a reference OCT tomographic image in which the distortion in the OCT tomographic image is smaller than that of other OCT tomographic images ;
Alignment means for aligning the OCT tomographic image;
A scanning line of the reference OCT tomographic image taken when a motion amount exceeding the lateral resolution or depth resolution is detected, and a scanning line of an OCT tomographic image other than the reference OCT tomographic image in the same section are selected. And generating means for generating an OCT tomographic image by performing an averaging process between a scanning line of the reference OCT tomographic image and a scanning line of an OCT tomographic image other than the reference OCT tomographic image. A featured image processing apparatus.
前記検出された動き量が大きいほど、前記被検眼の複数の２次元断層画像をそれぞれ取得する際の走査速度を上げるように、該走査速度を決定する工程と、
前記決定された走査速度で前記被検眼の複数の２次元断層画像を取得する工程と、
前記取得された複数の２次元断層画像から、前記被検眼の動きに基づき生じる２次元断層画像内の面内方向の歪みが他の２次元断層画像よりも小さい２次元断層画像を選択する工程と
を有することを特徴とする画像処理方法。 Detecting the amount of movement of the eye to be examined;
Determining the scanning speed so as to increase the scanning speed when acquiring each of a plurality of two-dimensional tomographic images of the eye to be examined, as the detected amount of movement is larger;
Obtaining a plurality of two-dimensional tomographic images of the eye to be examined at the determined scanning speed;
Selecting a two-dimensional tomographic image in which in-plane distortion in the two-dimensional tomographic image generated based on the movement of the eye to be examined is smaller than other two-dimensional tomographic images from the plurality of acquired two-dimensional tomographic images; An image processing method comprising:
１枚のＯＣＴ断層画像の撮影中の前記眼球の深さ方向の動き量を検出するとともに、撮影された眼底画像を用いて、該１枚のＯＣＴ断層画像の撮影中の眼底の平面方向の動き量を検出する工程と、
同一断面について撮影された前記眼球の複数のＯＣＴ断層画像のうち、前記撮影中に前記検出する工程において検出された、前記眼球の深さ方向の動き量が最も小さく、前記眼底の平面方向の動き量が最も小さいＯＣＴ断層画像を、ＯＣＴ断層画像内の歪みが他のＯＣＴ断層画像よりも小さい基準ＯＣＴ断層画像として選択する工程と、
前記ＯＣＴ断層画像を、位置合わせする工程と、
横方向分解能または深さ方向分解能を超える動き量が検出された際に撮影された前記基準ＯＣＴ断層画像の走査線と、同一断面における前記基準ＯＣＴ断層画像以外のＯＣＴ断層画像の走査線とを選択し、前記基準ＯＣＴ断層画像の走査線と前記基準ＯＣＴ断層画像以外のＯＣＴ断層画像の走査線との間で、平均化処理を行うことにより、ＯＣＴ断層画像を生成する工程と
を有することを特徴とする画像処理方法。 An image processing method for processing an OCT tomographic image of an eyeball,
The amount of movement in the depth direction of the eyeball during the photographing of one OCT tomographic image is detected, and the movement of the fundus in the planar direction during the photographing of the one OCT tomographic image is detected using the photographed fundus image. Detecting the amount;
Of the plurality of OCT tomographic images of the eyeball imaged on the same cross section, the amount of movement in the depth direction of the eyeball detected in the detecting step during the imaging is the smallest, and the movement of the fundus in the plane direction Selecting an OCT tomographic image having the smallest amount as a reference OCT tomographic image in which distortion in the OCT tomographic image is smaller than other OCT tomographic images ;
Aligning the OCT tomographic image;
A scanning line of the reference OCT tomographic image taken when a motion amount exceeding the lateral resolution or depth resolution is detected, and a scanning line of an OCT tomographic image other than the reference OCT tomographic image in the same section are selected. And generating an OCT tomographic image by performing an averaging process between a scanning line of the reference OCT tomographic image and a scanning line of an OCT tomographic image other than the reference OCT tomographic image. An image processing method.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012137263A JP5631361B2 (en) | 2012-06-18 | 2012-06-18 | Image processing apparatus, image processing method, and program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012137263A JP5631361B2 (en) | 2012-06-18 | 2012-06-18 | Image processing apparatus, image processing method, and program |
Related Parent Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2009278945A Division JP5025715B2 (en) | 2009-12-08 | 2009-12-08 | Tomographic imaging apparatus, image processing apparatus, image processing system, control method and program for image processing apparatus |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2012176291A JP2012176291A (en) | 2012-09-13 |
| JP2012176291A5 JP2012176291A5 (en) | 2013-02-21 |
| JP5631361B2 true JP5631361B2 (en) | 2014-11-26 |
Family
ID=46978554
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2012137263A Active JP5631361B2 (en) | 2012-06-18 | 2012-06-18 | Image processing apparatus, image processing method, and program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP5631361B2 (en) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US11170480B2 (en) | 2015-04-29 | 2021-11-09 | University of Pittsburgh—of the Commonwealth System of Higher Education | Image enhancement using virtual averaging |
| JP6486427B2 (en) * | 2017-08-25 | 2019-03-20 | キヤノン株式会社 | Optical coherence tomography apparatus and control method thereof |
Family Cites Families (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001289781A (en) * | 2000-04-07 | 2001-10-19 | Japan Science & Technology Corp | Light wave vertical cross section tomography observation apparatus |
| JP4822969B2 (en) * | 2006-07-27 | 2011-11-24 | 株式会社ニデック | Ophthalmic imaging equipment |
| JP5089940B2 (en) * | 2006-08-29 | 2012-12-05 | 株式会社トプコン | Eye movement measuring device, eye movement measuring method, and eye movement measuring program |
| JP4921201B2 (en) * | 2007-02-23 | 2012-04-25 | 株式会社トプコン | Optical image measurement device and program for controlling optical image measurement device |
| JP5523658B2 (en) * | 2007-03-23 | 2014-06-18 | 株式会社トプコン | Optical image measuring device |
| JP5448353B2 (en) * | 2007-05-02 | 2014-03-19 | キヤノン株式会社 | Image forming method using optical coherence tomography and optical coherence tomography apparatus |
| JP2010012109A (en) * | 2008-07-04 | 2010-01-21 | Nidek Co Ltd | Ocular fundus photographic apparatus |
| JP5340693B2 (en) * | 2008-11-05 | 2013-11-13 | 株式会社ニデック | Ophthalmic imaging equipment |
| JP5543171B2 (en) * | 2009-10-27 | 2014-07-09 | 株式会社トプコン | Optical image measuring device |
-
2012
- 2012-06-18 JP JP2012137263A patent/JP5631361B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| JP2012176291A (en) | 2012-09-13 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5025715B2 (en) | Tomographic imaging apparatus, image processing apparatus, image processing system, control method and program for image processing apparatus | |
| JP6039156B2 (en) | Image processing apparatus, image processing method, and program | |
| US10022047B2 (en) | Ophthalmic apparatus | |
| CN106073700B (en) | Image generating method and video generation device | |
| JP5404358B2 (en) | Image processing apparatus, image processing method, and program | |
| US10165939B2 (en) | Ophthalmologic apparatus and ophthalmologic apparatus control method | |
| JP6608138B2 (en) | Image processing apparatus, image processing method, image processing program, and recording medium storing the program | |
| JP7374615B2 (en) | Information processing device, information processing method and program | |
| EP3453312B1 (en) | Image processing apparatus, image processing method, and program | |
| JP2015160105A (en) | Image processing device, image processing method and program | |
| JP2021122559A (en) | Image processing device, image processing method, and program | |
| JP5631361B2 (en) | Image processing apparatus, image processing method, and program | |
| US20200226755A1 (en) | Image processing apparatus, ophthalmic imaging apparatus, image processing method, and computer-readable medium | |
| JP7005382B2 (en) | Information processing equipment, information processing methods and programs | |
| JP5634587B2 (en) | Image processing apparatus, image processing method, and program | |
| JP2022033290A (en) | Information processing device, information processing method, and program | |
| JP6461937B2 (en) | Image processing apparatus, image processing method, and image processing program | |
| JP2012176291A5 (en) | Image processing apparatus, image processing method, and program | |
| JP2021069667A (en) | Image processing device, image processing method and program | |
| JP6419115B2 (en) | Image processing apparatus, image processing method, and program | |
| JP6461936B2 (en) | Image processing apparatus, image processing method, and image processing program | |
| JP6720267B2 (en) | Image processing apparatus, image processing method, and program | |
| JP7086708B2 (en) | Image processing equipment, image processing methods and programs | |
| WO2015129718A1 (en) | Image processing device, image processing method and image processing program | |
| JP2020093125A (en) | Image processing device, image processing method and program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20121210 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20121228 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140407 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140605 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140908 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20141007 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 5631361 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |