JP6853690B2 - 眼科撮影装置 - Google Patents

Description

この発明は、眼科撮影装置に関する。

眼科分野において画像診断は重要な位置を占める。典型的な眼科モダリティとして、被検眼の正面画像を取得可能なモダリティと、断面像や３次元画像を取得可能なモダリティとがある。正面画像を取得可能なモダリティとしては、走査型レーザー検眼鏡（ＳＬＯ）、眼底カメラ、スリットランプ顕微鏡、手術用顕微鏡、スペキュラーマイクロスコープなどがある。また、断面像等を取得可能なモダリティとしては、光干渉断層計（ＯＣＴ装置）、超音波診断装置などがある。

一般に、正面画像を取得可能なモダリティは、横方向分解能が高く、軸方向分解能（縦方向分解能）が低い。これに対し、断面像等を取得可能なモダリティは、横方向分解能が低く、軸方向分解能が高い。例えば、ＳＬＯの横方向分解能は数マイクロメートル程度であり、軸方向分解能は数百マイクロメートル程度である。一方、光干渉断層計の横方向分解能は数十マイクロメートル程度であり、軸方向分解能は５〜１０マイクロメートル程度である。

特開２０１６−２１４７６８号公報

この発明の目的は、眼科画像診断のための新たな手法を提供することにある。

実施形態の第１の態様は、被検眼を撮影して第１正面画像を取得する正面画像取得部と、前記被検眼をスキャンして３次元画像を取得する３次元画像取得部と、前記３次元画像から第２正面画像を作成する正面画像作成部と、前記第１正面画像と前記第２正面画像との間の一致度を評価する評価部とを含む眼科撮影装置である。

実施形態の第２の態様は、前記評価部により求められた前記一致度の評価値が所定条件を満足するときに、前記第１正面画像に基づいて前記第２正面画像を加工する画像加工部を含む。

実施形態の第３の態様において、前記正面画像作成部は、前記３次元画像から、深さ領域が異なる複数の第２正面画像を作成し、前記評価部は、前記複数の第２正面画像のそれぞれと前記第１正面画像との間の一致度を評価し、前記複数の第２正面画像について前記評価部により求められた複数の評価値のうちの最大値に対応する第２正面画像を特定する画像特定部を含み、前記画像加工部は、前記画像特定部により特定された前記第２正面画像を前記第１正面画像に基づいて加工する。

実施形態の第４の態様は、前記評価部により求められた評価値が所定閾値以上であるか判定する判定部を含み、前記評価値が前記所定閾値以上であると前記判定部により判定されたとき、前記画像加工部は、前記第１正面画像に基づいて前記第２正面画像を加工する。

実施形態の第５の態様において、前記画像加工部は、前記第１正面画像と前記第２正面画像との合成画像を作成する。

実施形態の第６の態様において、前記画像加工部は、前記第１正面画像の一部を前記第２正面画像に埋め込む。

実施形態の第７の態様において、前記画像加工部は、前記第１正面画像に基づいて前記第２正面画像の画素値を変更する。

実施形態の第８の態様において、前記正面画像作成部は、前記３次元画像から、深さ領域が異なる複数の第２正面画像を作成し、前記評価部は、前記複数の第２正面画像のそれぞれと前記第１正面画像との間の一致度を評価する。

実施形態の第９の態様は、前記複数の第２正面画像について前記評価部により求められた複数の評価値に基づいて、前記複数の第２正面画像のうちのいずれかを選択する第１選択部を含む。

実施形態の第１０の態様は、前記正面画像作成部は、前記３次元画像にセグメンテーションを施して層領域を特定するセグメンテーション部と、前記層領域を所定方向に投影して第２正面画像を作成する投影処理部とを含む。

実施形態の第１１の態様は、前記第１正面画像と前記第２正面画像との間の位置合わせを行う第１レジストレーション部を含み、前記評価部は、前記位置合わせがなされた前記第１正面画像と前記第２正面画像との間の一致度を評価する。

実施形態の第１２の態様において、前記第１レジストレーション部は、前記第１正面画像を解析して第１特徴点群を検出し、且つ、前記第２正面画像を解析して第２特徴点群を検出する特徴点検出部を含み、前記第１特徴点群及び前記第２特徴点群に基づいて前記第１正面画像と前記第２正面画像との間の位置合わせを行う。

実施形態の第１３の態様において、前記第１レジストレーション部は、前記特徴点検出部に入力される前記第１正面画像及び前記第２正面画像の少なくとも一方に、ガンマ曲線補正、シグモイド曲線補正、輝度補正、ガウシアンフィルタ、及びメディアンフィルタのうちの少なくとも１つを含む前処理を施す前処理部を含み、前記特徴点検出部は、前記第１正面画像にエッジ検出を施して前記第１特徴点群を検出し、且つ、前記第２正面画像にエッジ検出を施して前記第２特徴点群を検出する。

実施形態の第１４の態様は、前記第１正面画像と前記３次元画像との間の位置合わせを行う第２レジストレーション部を含み、前記評価部は、前記位置合わせの結果に基づいて前記第１正面画像と前記第２正面画像との間の一致度を評価する。

実施形態の第１５の態様において、前記正面画像取得部は、異なる波長帯に対応する２以上の第１正面画像を取得し、前記評価部は、前記２以上の第１正面画像のそれぞれと前記第２正面画像との間の一致度を評価する。

実施形態の第１６の態様において、前記正面画像取得部は、異なる波長帯に対応する２以上の第１正面画像を取得し、前記正面画像作成部は、前記３次元画像から、深さ領域が異なる複数の第２正面画像を作成し、前記評価部は、前記２以上の第１正面画像のそれぞれについて、前記複数の第２正面画像のうちの少なくとも一部との間の一致度を評価する。更に、実施形態の第１６の態様は、前記評価部により求められた評価値に基づいて、前記２以上の第１正面画像のそれぞれに対応する第２正面画像を選択する第２選択部を含む。

実施形態の第１７の態様は、被検眼を撮影して第１正面画像を取得する正面画像取得部と、前記被検眼の３次元画像を受け付ける３次元画像受付部と、前記３次元画像から第２正面画像を作成する正面画像作成部と、前記第１正面画像と前記第２正面画像との間の一致度を評価する評価部とを含む眼科撮影装置である。

実施形態の第１８の態様は、被検眼の第１正面画像を受け付ける正面画像受付部と、前記被検眼をスキャンして３次元画像を取得する３次元画像取得部と、前記３次元画像から第２正面画像を作成する正面画像作成部と、前記第１正面画像と前記第２正面画像との間の一致度を評価する評価部とを含む眼科撮影装置である。

実施形態の第１９の態様は、被検眼の第１正面画像及び３次元画像を受け付ける画像受付部と、前記３次元画像から第２正面画像を作成する正面画像作成部と、前記第１正面画像と前記第２正面画像との間の一致度を評価する評価部とを含む眼科画像処理装置である。

実施形態によれば、眼科画像診断のための新たな手法を提供することができる。

実施形態に係る眼科撮影装置の構成の一例を示す概略図である。 実施形態に係る眼科撮影装置の構成の一例を示す概略図である。 実施形態に係る眼科撮影装置の構成の一例を示す概略図である。 実施形態に係る眼科撮影装置の構成の一例を示す概略図である。 実施形態に係る眼科撮影装置の構成の一例を示す概略図である。 実施形態に係る眼科撮影装置が実行する処理の一例を説明するための概略図である。 実施形態に係る眼科撮影装置が実行する処理の一例を説明するための概略図である。 実施形態に係る眼科撮影装置が実行する処理の一例を説明するための概略図である。 実施形態に係る眼科撮影装置の構成の一例を示す概略図である。 実施形態に係る眼科撮影装置の構成の一例を示す概略図である。 実施形態に係る眼科撮影装置の構成の一例を示す概略図である。 実施形態に係る眼科撮影装置の構成の一例を示す概略図である。 実施形態に係る眼科撮影装置の構成の一例を示す概略図である。 実施形態に係る眼科撮影装置の構成の一例を示す概略図である。 実施形態に係る眼科撮影装置の動作の一例を示すフローチャートである。

例示的な実施形態を以下に説明する。引用文献に記載された事項や任意の公知技術を実施形態に援用することができる。

実施形態に係る装置は、被検眼の正面画像の正面画像を取得する機能と、被検眼の３次元画像を取得する機能とを備える。

正面画像取得機能は、例えば、被検眼を撮影して正面画像を取得する正面画像取得部、又は、被検眼の正面画像を外部から受け付ける正面画像受付部によって実現される。正面画像取得部は、例えば、ＳＬＯ、眼底カメラ、スリットランプ顕微鏡、及び手術用顕微鏡のいずれかであってよい。正面画像受付部は、例えば、通信回線を介して正面画像を受信するための通信インターフェイス、記録媒体に記録された正面画像を読み出すためのインターフェイスのいずれかであってよい。

３次元画像取得機能は、例えば、被検眼をスキャンして３次元画像を取得する３次元画像取得部、又は、被検眼の３次元画像を外部から受け付ける３次元画像受付部によって実現される。３次元画像取得部は、例えば、光干渉断層計、超音波診断装置のいずれかであってよい。３次元画像受付部は、例えば、通信回線を介して３次元画像を受信するための通信インターフェイス、記録媒体に記録された３次元画像を読み出すためのインターフェイスのいずれかであってよい。

正面画像取得部及び３次元画像取得部の一方又は双方が設けられる場合、実施形態の装置は眼科撮影装置として構成される。これに対し、正面画像受付部及び３次元画像受付部の双方が設けられる場合、実施形態の装置は眼科画像処理装置として構成される。

以下、特に明記しない限り、被検者から見て左右方向をＸ方向とし、上下方向をＹ方向とし、前後方向（奥行き方向）をＺ方向とする。Ｚ方向は、光学系の光軸に沿う方向である。Ｘ方向、Ｙ方向及びＺ方向は、３次元直交座標系を定義する。Ｚ方向における分解能が軸方向分解能である。また、Ｚ方向に直交するＸＹ面における分解能が横方向分解能である。

＜光学系１００＞
実施形態に係る眼科撮影装置の光学系の例を図１〜図３に示す。この実施形態では、ＳＬＯと光干渉断層計とを組み合わせた眼科撮影装置について説明するが、前述したように実施形態はこれに限定されない。

眼科撮影装置は、複数の撮影モードで動作可能である。例えば、スキャン範囲のサイズ（画角、倍率）に関する動作モードとして、広角撮影モードと高倍撮影モードがある。画角の切り替えは、例えば、屈折力が異なる２以上の対物レンズを選択的に使用することで実現される。或いは、光偏向器（光スキャナ）による光ビームの偏向角度を変化させることで画角を変更するよう構成してもよい。また、１以上のズームレンズの移動又は選択的使用が可能なズーム光学系を用いて画角を変更するよう構成してもよい。画角を変更するための手法や構成はこれらに限定されない。

図１は、広角撮影モード時の光学系の例を表す。図２は、画角を切り替えるための対物レンズ系の例を表す。図３は、高倍撮影モード時の眼科撮影装置の光学系の例を表す。図１及び図３における符号Ｐは、眼底Ｅｆと光学的に共役な位置（眼底共役位置）を示し、符号Ｑは、被検眼Ｅの瞳と光学的に共役な位置（瞳共役位置）を示す。

光学系１００は、光ビームで眼底Ｅｆをスキャンしてデータを収集する。光学系１００は、対物レンズ系１１０を介して被検眼Ｅに投射される光ビームで眼底Ｅｆをスキャンする走査系と、投射された光ビームの戻り光を対物レンズ系１１０を介して検出する検出系とを含む。検出系からの出力（つまり、光学系１００により収集されたデータ）に基づいて眼底Ｅｆの画像が構築される。光学系１００は、ＳＬＯ光学系１３０とＯＣＴ光学系１４０とを含む。ＳＬＯ光学系１３０は、ＳＬＯ走査系とＳＬＯ検出系とを含む。ＯＣＴ光学系１４０は、ＯＣＴ走査系とＯＣＴ検出系とを含む。

眼科撮影装置には、前眼部を観察・撮影するための前眼部撮影系１２０が設けられている。光学系１００、対物レンズ系１１０及び前眼部撮影系１２０は、Ｘ方向、Ｙ方向及びＺ方向に移動可能である。前眼部撮影系１２０により得られる前眼部像は、光学系１００のアライメントやトラッキングに用いられる。

＜対物レンズ系１１０＞
例示的な実施形態では、撮影モード毎に対物レンズ（ユニット）が準備され、選択された撮影モードに応じた対物レンズユニットが選択的に使用される。この実施形態では、図２に示すように、広角撮影モード（例えば画角１００度）のための対物レンズユニット１１０Ａと、高倍撮影モード（例えば画角５０度）のための対物レンズユニット１１０Ｂとが、光学系１００の光路に選択的に配置される。

対物レンズ系１１０は、対物レンズユニット１１０Ａ及び１１０Ｂに加えて画角変更機構１１５を含む。画角変更機構１１５は、例えば公知の回転機構又はスライド機構を含み、対物レンズユニット１１０Ａ及び１１０Ｂを選択的に（互いに排他的に）光路に配置する。画角変更機構１１５は、対物レンズユニット１１０Ａ（１１０Ｂ）の光軸が光学系１００の光軸Ｏに略一致するように対物レンズユニット１１０Ａ（１１０Ｂ）を光路に配置する。

画角変更機構１１５は、対物レンズユニット１１０Ａ及び１１０Ｂを手動で移動するための構成を備えていてよい。この場合、光路に配置された対物レンズユニットの種別を検出する種別検出部を設け、その検出結果から撮影モードを特定し、この特定結果に応じた制御を実行するよう構成することができる。画角変更機構１１５は、対物レンズユニット１１０Ａ及び１１０Ｂを電動で（更には自動で）移動するための構成を備えていてよい。この場合、後述の制御部２００は、選択された撮影モードに対応する対物レンズユニットを光路に配置するための制御信号を画角変更機構１１５に送る。

広角撮影モード用の対物レンズユニット１１０Ａは、レンズ１１１Ａ及び１１２Ａと、ダイクロイックミラーＤＭ１Ａと、凹レンズ１１３Ａとを含む。ダイクロイックミラーＤＭ１Ａは、光学系１００の光路と前眼部撮影系１２０の光路とを結合する。ダイクロイックミラーＤＭ１Ａは、光学系１００により導かれる光を透過させ、前眼部撮影のための光を反射する。ダイクロイックミラーＤＭ１Ａと凹レンズ１１３Ａとの間には眼底共役位置Ｐが配置されている。

高倍撮影モード用の対物レンズユニット１１０Ｂは、レンズ１１１Ｂと、ダイクロイックミラーＤＭ１Ｂとを含む。ダイクロイックミラーＤＭ１Ｂは、ダイクロイックミラーＤＭ１Ａと同様の作用を有する。

ダイクロイックミラーＤＭ１ＡとダイクロイックミラーＤＭ１Ｂとは、光学系１００の光路における（ほぼ）同じ位置に配置される。それにより、撮影モードを切り替えたときに、前眼部撮影系１２０の位置や向きを調整する必要がなくなる。

例示的な実施形態において、単一のダイクロイックミラーを複数の対物レンズユニットが共用するように構成することができる。例えば、図２に示す例において、ダイクロイックミラーＤＭ１Ａ及びＤＭ１Ｂが同じ部材であってよい。つまり、レンズ１１１Ａ及び１１２Ａ並びに凹レンズ１１３Ａのみを含む対物レンズユニット１１０Ａと、レンズ１１１Ｂのみを含む対物レンズユニット１１０Ｂとを選択的に使用する構成を適用できる。

対物レンズ系１１０を光軸Ｏに沿って移動することができる。つまり、光学系１００に対して対物レンズ系１１０をＺ方向に移動することができる。それにより、ＳＬＯ光学系１３０の焦点位置及びＯＣＴ光学系１４０の焦点位置が変更される。

例示的な実施形態において、３つ以上の対物レンズユニットを選択的に使用することができる。例えば、高倍撮影モード用、中倍撮影モード用、及び低倍撮影モード用の対物レンズユニットと、これらを選択的に光路に配置する画角変更機構とを設けてよい。

以下、対物レンズユニット１１０Ａが光路に配置された状態について主に説明する。対物レンズユニット１１０Ｂが配置された状態における同様又は類似の事項については、特に明記しない限り、その説明を省略する。

＜前眼部撮影系１２０＞
前眼部撮影系１２０は、前眼部照明光源１２１と、レンズ１２２と、前眼部撮影カメラ１２３と、結像レンズ１２４と、ビームスプリッタＢＳ１とを含む。ビームスプリッタＢＳ１は、前眼部照明光の光路とその戻り光の光路とを結合する。

前眼部照明光源１２１は、赤外ＬＥＤ等の赤外光源を含む。前眼部照明光源１２１により発せられた前眼部照明光は、レンズ１２２により屈折し、ビームスプリッタＢＳ１によりダイクロイックミラーＤＭ１Ａに向けて反射され、ダイクロイックミラーＤＭ１Ａにより被検眼Ｅに向けて反射される。被検眼Ｅからの前眼部照明光の戻り光は、ダイクロイックミラーＤＭ１Ａにより反射され、ビームスプリッタＢＳ１を透過し、結像レンズ１２４により前眼部撮影カメラ１２３（撮像素子の検出面）に集光される。撮像素子の検出面は、瞳共役位置Ｑ（又はその近傍）に配置されている。撮像素子は、例えば、ＣＣＤイメージセンサ又はＣＭＯＳイメージセンサである。

＜ＳＬＯ光学系１３０及びＯＣＴ光学系１４０＞
ＳＬＯ光学系１３０の光路とＯＣＴ光学系１４０の光路とはダイクロイックミラーＤＭ２により結合されている。例示的な実施形態において、ＳＬＯ光学系１３０の少なくとも一部はテレセントリック光学系であり、ＯＣＴ光学系１４０の少なくとも一部はテレセントリック光学系であり、これらテレセントリック光学系の光路がダイクロイックミラーＤＭ２により結合される。本例によれば、対物レンズ系１１０を移動して光学系１００の焦点位置を変更しても、瞳（例えば対物レンズ系１１０による射出瞳）の収差が大きくならないため、フォーカス調整を容易化することができる。

＜ＳＬＯ光学系１３０＞
ＳＬＯ光学系１３０は、ＳＬＯ光源１３１と、コリメートレンズ１３２と、ビームスプリッタＢＳ２と、集光レンズ１３３と、共焦点絞り１３４と、検出器１３５と、光スキャナ１３６と、レンズ１３７とを含む。ビームスプリッタＢＳ２は、被検眼Ｅに投射されるＳＬＯ光の光路とその戻り光の光路とを結合する。

ＳＬＯ光源１３１は、ＳＬＯに使用可能な波長の光を出力する。ＳＬＯ光源１３１は、例えば、レーザーダイオード、スーパールミネッセントダイオード、又は、レーザードリブンライトソース等を含む。ＳＬＯ光源１３１は、眼底共役位置Ｐ（又はその近傍）に配置されている。ＳＬＯ光源１３１は、可視光源及び／又は赤外光源を含む。可視光源から出力される可視光は、眼底Ｅｆに固視標を投影するための固視光として用いられてよい。

ＳＬＯ光源１３１は、異なる波長帯の光を選択的に出力可能に構成されてもよい。また、ＳＬＯ光源１３１は、波長帯が異なる２以上の光を並行して出力できるように構成されてもよい。ＳＬＯ撮影には可視光及び赤外光の少なくとも一方が用いられる。

光スキャナ１３６は、Ｘ方向に光を偏向する光スキャナ１３６Ｘと、Ｙ方向に光を偏向する光スキャナ１３６Ｙとを含む。光スキャナ１３６Ｘ及び１３６Ｙの一方は低速スキャナ（ガルバノミラー等）であり、他方は高速スキャナ（レゾナントミラー、ポリゴンミラー、ＭＥＭＳミラー等）である。光スキャナ１３６Ｙの反射面は、瞳共役位置Ｑ（又はその近傍）に配置されている。

共焦点絞り１３４に形成された開口は、眼底共役位置Ｐ（又はその近傍）に配置されている。検出器１３５は、例えば、アバランシェフォトダイオード又は光電子増倍管を含んでいる。

ＳＬＯ光源１３１から出力された光ビーム（ＳＬＯ光）は、コリメートレンズ１３２により平行光束とされ、ビームスプリッタＢＳ２を透過し、光スキャナ１３６により偏向され、レンズ１３７により屈折され、ダイクロイックミラーＤＭ２を透過し、対物レンズ系１１０を介して眼底Ｅｆに投射される。眼底Ｅｆに投射されたＳＬＯ光の戻り光は、同じ光路を逆向きに進行してビームスプリッタＢＳ２に導かれ、ビームスプリッタＢＳ２により反射され、集光レンズ１３３により集光され、共焦点絞り１３４の開口を通過し、検出器１３５によって検出される。

＜ＯＣＴ光学系１４０＞
ＯＣＴ光学系１４０は、合焦レンズ１４１と、光スキャナ１４２と、コリメートレンズ１４３と、干渉光学系１５０とを含む。

合焦レンズ１４１は、ＯＣＴ光学系１４０の光軸に沿って移動される。それにより、ＳＬＯ光学系１３０とは独立に、ＯＣＴ光学系１４０の焦点位置が変更される。対物レンズ系１１０の移動によりＳＬＯ光学系１３０及びＯＣＴ光学系１４０の合焦状態が調整された後、合焦レンズ１４１の移動によりＯＣＴ光学系１４０の合焦状態を微調整できる。

光スキャナ１４２は、Ｘ方向に光を偏向させる光スキャナ１４２Ｘと、Ｙ方向に光を偏向させる光スキャナ１４２Ｙとを含む。光スキャナ１４２Ｘ及び１４２Ｙのそれぞれは、例えばガルバノミラーである。２つの光スキャナ１４２Ｘ及び１４２Ｙの中間位置は瞳共役位置Ｑ（又はその近傍）に相当する。

コリメートレンズ１４３は、光ファイバｆ４のファイバ端ｃ３から出射したＯＣＴ光（測定光）を平行光束として光スキャナ１４２に導き、且つ、眼底Ｅｆからの測定光の戻り光をファイバ端ｃ３に向けて集光する。

干渉光学系１５０は、ＯＣＴ光源１５１と、ファイバーカプラ１５２及び１５３と、参照プリズム１５４と、検出器１５５とを含む。干渉光学系１５０は、例えば、スウェプトソースＯＣＴ又はスペクトラルドメインＯＣＴを実行するための構成を備える。スウェプトソースＯＣＴでは、波長可変光源がＯＣＴ光源１５１として用いられ、バランスドフォトダイオードが検出器１５５として用いられる。スペクトラルドメインＯＣＴでは、低コヒーレンス光源（広帯域光源）がＯＣＴ光源１５１として用いられ、分光器が検出器１５５として用いられる。

ＯＣＴ光源１５１は、例えば、中心波長が１０５０ｎｍの光を発する光ビームＬ０を発する。光Ｌ０は、光ファイバｆ１を通じてファイバーカプラ１５２に導かれて測定光ＬＳと参照光ＬＲとに分割される。

参照光ＬＲは、光ファイバｆ２を通じてファイバ出射端ｃ１から出射し、コリメートレンズ１５６により平行光束とされ、参照プリズム１５４により折り返され、コリメートレンズ１５７により集束光束とされてファイバ入射端ｃ２に入射し、光ファイバｆ３を通じてファイバーカプラ１５３に導かれる。参照プリズム１５４は、従来と同様に、参照光ＬＲの光路長を変更するために移動される。更に、偏波コントローラやアッテネータや光路長補正部材や分散補償部材が、参照光の光路に設けられていてもよい。

一方、ファイバーカプラ１５２により生成された測定光ＬＳは、光ファイバｆ４を通じてファイバ端ｃ３から出射し、コリメートレンズ１４３により平行光束とされ、光スキャナ１４２及び合焦レンズ１４１を経由し、ダイクロイックミラーＤＭ２により反射され、対物レンズ系１１０により屈折されて眼底Ｅｆに投射される。測定光ＬＳは、眼底Ｅｆの様々な深さ位置にて反射・散乱される。後方散乱光を含む測定光ＬＳの戻り光は、同じ経路を逆向きに進行してファイバーカプラ１５２に導かれ、光ファイバｆ５を通じてファイバーカプラ１５３に到達する。

ファイバーカプラ１５３は、光ファイバｆ５を通じて入射した測定光ＬＳと、光ファイバｆ３を通じて入射した参照光ＬＲとを重ね合わせて干渉光を生成する。図１等はスウェプトソースＯＣＴの場合を表す。ファイバーカプラ１５３は、所定の分岐比（例えば１：１）で干渉光を分岐して一対の干渉光ＬＣを生成する。一対の干渉光ＬＣは検出器１５５（バランスドフォトダイオード）により検出される。なお、スペクトラルドメインＯＣＴの場合、検出器１５５（分光器）は、ファイバーカプラ１５３により生成された干渉光を複数の波長成分に分解して検出する。

検出器１５５は、一対の干渉光ＬＣを検出した結果（検出信号）を図示しないデータ収集システム（Ｄａｔａ Ａｃｑｕｉｓｉｔｉｏｎ Ｓｙｓｔｅｍ。又はＤＡＱ）に送る。データ収集システムには、ＯＣＴ光源１５１からクロックが供給される。このクロックは、波長可変光源により所定の波長範囲内にて掃引される各波長の出力タイミングに同期して生成される。データ収集システムは、このクロックに基づいて検出信号をサンプリングする。サンプリング結果は、ＯＣＴ画像を形成するためのプロセッサに送られる。

＜処理系＞
実施形態に係る眼科撮影装置の処理系の幾つかの構成例を説明する。図４に例示された処理系は、各種のデータ処理（信号処理、画像処理、演算、制御、記憶等）を実行するためのプロセッサを含む。

なお、「プロセッサ」は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）、プログラマブル論理デバイス（例えば、ＳＰＬＤ（Ｓｉｍｐｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ｄｅｖｉｃｅ）、ＣＰＬＤ（Ｃｏｍｐｌｅｘ Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ｄｅｖｉｃｅ）、ＦＰＧＡ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ））等の回路を意味する。プロセッサは、例えば、記憶回路や記憶装置に格納されているプログラムを読み出し実行することで、実施形態に係る機能を実現する。

＜制御部２００＞
制御部２００は、眼科撮影装置の各部を制御するための構成を備える。制御部２００は、主制御部２０１と、記憶部２０２とを含む。主制御部２０１の機能はプロセッサ等により実現される。記憶部２０２には各種データや各種情報や各種コンピュータプログラムが記憶される。記憶部２０２は、半導体メモリや磁気記憶装置を含む。

眼科撮影装置が実行する処理は、ハードウェア資源（プロセッサ等）とソフトウェア（コンピュータプログラム等）との協働によって実現される。また、眼科撮影装置に設けられた各種の機構の少なくとも一部にはアクチュエータがそれぞれ設けられており、主制御部２０１はアクチュエータに向けて制御信号を送る。

＜主制御部２０１＞
主制御部２０１は、眼科撮影装置の各部を制御する。例えば、対物レンズ系１１０に関する制御の例として、主制御部２０１は、対物レンズユニット１１０Ａ及び１１０Ｂの一方を光路に配置するための画角変更機構１１５の制御や、対物レンズ系１１０を光軸Ｏに沿って移動させるための図示しない移動機構の制御を実行することができる。

ＳＬＯ光学系１３０に関する制御の例として、主制御部２０１は、ＳＬＯ光源１３１の制御、光スキャナ１３６の制御、検出器１３５の制御を実行することができる。ＳＬＯ光源１３１の制御には、点灯、消灯、波長帯の選択、光量の調整、絞りの調整などが含まれる。光スキャナ１３６の制御には、走査位置の制御、走査範囲の制御、走査パターンの制御、走査速度の制御などが含まれる。検出器１３５の制御には、検出素子の露光の調整、ゲインの調整、検出レートの調整などが含まれる。

ＯＣＴ光学系１４０に関する制御の例として、主制御部２０１は、ＯＣＴ光源１５１の制御、光スキャナ１４２の制御、合焦レンズ１４１の移動制御、参照プリズム１５４の移動制御、検出器１５５の制御を実行することができる。ＯＣＴ光源１５１の制御には、点灯、消灯、波長帯の選択、光量の調整、絞りの調整などが含まれる。光スキャナ１４２の制御には、走査位置の制御、走査範囲の制御、走査パターンの制御、走査速度の制御などが含まれる。検出器１５５の制御には、検出素子の露光の調整、ゲインの調整、検出レートの調整などが含まれる。

前眼部撮影系１２０に関する制御の例として、主制御部２０１は、前眼部照明光源１２１の制御、前眼部撮影カメラ１２３の制御などを実行することができる。前眼部照明光源１２１の制御には、点灯、消灯、光量の調整、絞りの調整などが含まれる。前眼部撮影カメラ１２３の制御には、撮像素子の露光の調整、ゲインの調整、撮影レートの調整などが含まれる。

光学系１００に関する制御の例として、光学系１００をＸ方向、Ｙ方向及びＺ方向に移動するための光学系移動機構１００Ａの制御などがある。光学系移動機構１００Ａは、例えば、光学系をＸ方向に移動するための機構と、Ｙ方向に移動するための機構と、Ｚ方向に移動するための機構とを含む。これら機構のそれぞれは、例えば、駆動力を発生するアクチュエータを含む。このような電動機構の代わりに、又は、それに加えて、光学系移動機構１００Ａは力学的機構を含んでもよい。

ＳＬＯ撮影を行うとき、主制御部２０１は、例えば、ＳＬＯ光源１３１を所定のタイミングで点灯（点滅）させつつ、所定の走査パターン（例えばラスタースキャン）に応じて光スキャナ１３６を制御する。他の例において、主制御部２０１は、ＳＬＯ光源１３１を連続点灯させつつ、所定の走査パターンに応じて光スキャナ１３６を制御する。

可視光で撮影を行う場合、主制御部２０１は、上記のような撮影制御を行いつつ、所定の固視位置に対応するタイミング（固視タイミング）でのみ、撮影用可視光と異なる可視光（固視用可視光）を出力するようにＳＬＯ光源１３１を制御する。固視タイミングにおいて、撮影用可視光の出力を停止するとともに固視用可視光を出力してもよい。或いは、固視タイミングにおいて、撮影用可視光と固視用可視光の双方を出力してもよい。

不可視光（赤外光）で撮影を行う場合、主制御部２０１は、上記のような撮影制御を行いつつ、所定の固視タイミングでのみ可視光を出力するようにＳＬＯ光源１３１を制御する。

ＯＣＴを行うとき、主制御部２０１は、ＯＣＴ光源１５１を所定のタイミングで点灯（点滅）させつつ、所定の走査パターンに応じて光スキャナ１４２を制御する。他の例において、主制御部２０１は、ＯＣＴ光源１５１を連続点灯させつつ、所定の走査パターンに応じて光スキャナ１４２を制御する。

＜記憶部２０２＞
記憶部２０２には、眼科撮影装置により利用される情報、データ、プログラム等が記憶される。また、記憶部２０２には、眼科撮影装置により取得されたデータ（ＳＬＯ画像、ＯＣＴ画像、前眼部像等）が記憶される。

＜画像形成部２１０＞
画像形成部２１０は、光学系１００により収集されたデータに基づいて眼底Ｅｆの画像を形成する。この実施形態の眼科撮影装置はＳＬＯとＯＣＴの双方を実行可能であるので、画像形成部２１０は、ＳＬＯ画像形成部２１１とＯＣＴ画像形成部２１２とを含む。

他の実施形態において、眼科撮影装置は、ＳＬＯとＯＣＴのいずれか一方のみを実行可能であってよい。この場合、画像形成部２１０は、ＳＬＯ画像形成部２１１とＯＣＴ画像形成部２１２のいずれか一方のみを含んでいてよい。

ＳＬＯ画像形成部２１１は、ＳＬＯ光学系１３０により収集されたデータに基づいてＳＬＯ画像を形成する。より具体的には、ＳＬＯ画像形成部２１１は、従来のＳＬＯと同様に、検出器１３５から入力される検出信号と、制御部２００から入力される画素位置信号とに基づいて、ＳＬＯ画像を形成する。

ＯＣＴ画像形成部２１２は、ＯＣＴ光学系１４０により収集されたデータに基づいてＯＣＴ画像を形成する。より具体的には、ＯＣＴ画像形成部２１２は、検出器１５５から入力される検出信号と、制御部２００から入力される画素位置信号とに基づいて、ＯＣＴ画像を形成する。ＯＣＴ画像形成部２１２は、従来と同様に、一連の波長走査毎に（Ａライン毎に）、検出器１５５からの出力に基づきスペクトル分布を生成し、このスペクトル分布にフーリエ変換等の信号処理を施す。それにより、各Ａラインにおける反射強度プロファイルが得られる。更に、ＯＣＴ画像形成部２１２は、各Ａラインの反射強度プロファイルを画像化することにより断面像（Ｂスキャン像）を形成する。

ＯＣＴ画像形成部２１２は、複数のＢスキャン像に基づいて３次元画像を形成することができる。この３次元画像は、スタックデータ、ボリュームデータ等の３次元データセットである。更に、ＯＣＴ画像形成部２１２は、３次元データセットをレンダリングすることにより表示用画像を形成することができる。

画像形成部２１０は、前眼部撮影カメラ１２３からの出力に基づいて前眼部像を形成することができる。画像形成部２１０により形成された各種の画像（画像データ）は、例えば記憶部２０２に保存される。

＜データ処理部２２０＞
データ処理部２２０は、各種のデータ処理を実行する。データ処理の例として、画像形成部２１０又は他の装置により形成された画像データに対する処理がある。この処理の例として、各種の画像処理や、画像に対する解析処理や、画像データに基づく画像評価などの診断支援処理がある。

データ処理部２２０について図５〜図１２を参照しつつ説明する。以下に説明する複数の例のうちのいずれか２つ以上を組み合わせることができる。

データ処理部２２０は、ＯＣＴを用いて取得された眼底Ｅｆの３次元画像から正面画像を作成する機能（正面画像作成部）と、この正面画像とＳＬＯにより取得された正面画像との間の一致度を評価する機能（評価部）とを備える。以下、これら機能を少なくとも備えた幾つかの例を説明する。

＜データ処理部２２０Ａ＞
図５に示すデータ処理部２２０Ａは、正面画像作成部２２１と、レジストレーション部２２２と、評価部２２３と、画像加工部２２４とを含む。

正面画像作成部２２１は、ＯＣＴ画像形成部２１２（又は他のＯＣＴ装置）により形成された眼底Ｅｆの３次元画像から正面画像を形成する。このような正面画像をＯＣＴ正面画像と呼ぶことにする。ＯＣＴ正面画像の典型的な例として、プロジェクション画像とシャドウグラムがある。

プロジェクション画像は、３次元画像を所定方向に投影することによって作成される。典型的なＳＬＯ画像と同様に、眼底Ｅｆの３次元画像から作成されたＯＣＴ正面画像には、眼底Ｅｆの表面の形態が表現される。３次元画像を投影する方向は、典型的には、Ｚ方向（深さ方向、軸方向、Ａスキャン方向）である。

シャドウグラムは、３次元画像の一部（例えば特定の層に相当する部分データ）を所定方向に投影することによって作成される。シャドウグラムには、選択された部分データ（典型的には３次元データ）に表現されている組織の形態が投影像として表現される。例えば、眼底Ｅｆの内境界膜（ＩＬＭ）に相当する部分データから作成されたシャドウグラムには、内境界膜（眼底Ｅｆの表面）の形態が表現される。また、内網状層（ＩＰＬ）と内顆粒層とを含む複合層に相当する部分データから作成されたシャドウグラムには、内網状層及び内顆粒層の形態が表現される。

本例の正面画像作成部２２１は、セグメンテーション部２２１１と、投影処理部２２１２とを含む。プロジェクション画像の作成のみが可能な実施形態では、セグメンテーション部２２１１を設ける必要はない。

セグメンテーション部２２１１は、ＯＣＴを用いて取得された３次元画像を解析して少なくとも１つのセグメントを特定する。特定されるセグメントは、典型的には、眼の層組織の画像又は層境界の画像である（層領域）。このような処理はセグメンテーションと呼ばれ、例えばＺ方向における画素値（輝度値）の変化に基づき実行される。

眼底Ｅｆの３次元画像から特定されるセグメントの例として、内境界膜の画像、神経線維層の画像、神経節細胞層の画像、内網状層の画像、内顆粒層の画像、外網状層の画像、外顆粒層の画像、外境界膜の画像、網膜色素上皮の画像、ブルッフ膜の画像、脈絡膜の画像、脈絡膜強膜境界の画像、強膜の画像などがある。

一例において、セグメンテーション部２２１１は、３次元画像に描出された複数のセグメントを特定する処理と、特定された複数のセグメントのうちから注目する１以上のセグメントを選択する処理とを実行するように構成される。この場合、選択された１以上のセグメントのデータ、又は、選択された１以上のセグメントを示す情報が、投影処理部２２１２に送られる。

他の例において、セグメンテーション部２２１１は、３次元画像から注目する部分データ（３次元データ）を抽出する処理と、抽出された部分データに描出された１以上のセグメントを特定する処理とを実行するように構成される。この場合、特定された１以上のセグメントのデータ、又は、特定された１以上のセグメントを示す情報が、投影処理部２２１２に送られる。

投影処理部２２１２は、セグメンテーション部２２１１から送られた１以上のセグメントのデータを所定方向に投影することによりシャドウグラムを作成する。この投影処理は、例えば、Ｚ方向に一列に配列された画素群の輝度値を加算する処理を含む。

プロジェクション画像を作成する場合、投影処理部２２１２は、ＯＣＴを用いて取得された３次元画像を所定方向に投影する。

いずれの場合においても、投影方向はＺ方向に限定されず、任意方向であってよい。例えば、注目セグメントの向き又は他の組織の向きに基づいて投影方向を決定することができる。注目セグメントの向きを考慮する場合、例えば、注目セグメントの前面（前眼部側の面）の法線又は後面の法線を求め、この法線の向きに基づき投影方向を決定することができる。他の組織の向きを考慮する場合には、例えば、眼底Ｅｆの表面の法線の向き、眼底Ｅｆ内部の特定層の法線の向き、視神経乳頭の凹み方向、黄斑の凹み方向、眼軸の向き、視軸の向きなどに基づいて、投影方向を決定することができる。

レジストレーション部２２２は、眼底ＥｆのＳＬＯ画像と、投影処理部２２１２により形成されたＯＣＴ正面画像との間の位置合わせ（レジストレーション）を行う。レジストレーションは、例えば、それぞれの画像から特徴領域を検出する第１処理と、双方から検出された特徴領域を基準として双方の画像を位置合わせする第２処理とを含む。

第１処理で検出される特徴領域は、例えば、視神経乳頭に相当する領域、黄斑に相当する領域、血管に相当する領域、病変部に相当する領域、レーザー治療痕に相当する領域のいずれかであってよい。第１処理において、レジストレーション部２２２は、画素値や画素配列を参照して特徴領域を検出することができる。

第２処理において、レジストレーション部２２２は、例えば、ＳＬＯ画像から検出された特徴領域とＯＣＴ正面画像から検出された特徴領域とができるだけ一致するように、ＳＬＯ画像とＯＣＴ正面画像との相対位置を調整する。このとき、レジストレーション部２２２は、特徴領域の輪郭や代表点（中心点、重心点等）を特定し、それらを一致させるようにレジストレーションを行ってもよい。

本例のレジストレーション部２２２は、前処理部２２２１と、特徴点検出部２２２２と、位置合わせ部２２２３とを含む。

前処理部２２２１は、画像中の特徴点の検出を容易にするための処理（前処理）を実行する。後述のように、本例では、特徴点を検出するためにエッジ検出が実行される。エッジ検出の精度は、画像中の特徴点が鮮明であるほど向上する。本例の前処理は、画像中の特徴点を鮮明化するための処理（ノイズ低減、ノイズ除去、コントラスト調整等）を含んでよい。

本例の前処理は、ガンマ曲線補正、シグモイド曲線補正、輝度補正、ガウシアンフィルタ、及びメディアンフィルタのうちの少なくとも１つを含んでいてよい。ガンマ補正は、画像の階調の応答特性を示すガンマ値に関する公知の非線形輝度変換である。シグモイド曲線補正は、シグモイド関数（シグモイド曲線）を用いた公知の非線形輝度変換である。輝度補正は、画像の輝度値が或る範囲に偏って分布している場合に、この輝度分布をより広範囲に拡張する公知の輝度変換である。ガウシアンフィルタは、ガウス関数を用いた公知のスムージング処理（ノイズ低減処理）である。メディアンフィルタは、特定画素の値を、その周囲の画素群の輝度値の中央値に変換する公知のスムージング処理（ノイズ低減処理）である。

前処理部２２２１は、ＳＬＯ画像及びＯＣＴ正面画像のそれぞれに対し、例えば次の種類の処理を次の順序で適用する：ガンマ補正又はシグモイド曲線補正；輝度補正；ガウシアンフィルタ；メディアンフィルタ。なお、前処理部２２２１が実行する処理の種類や順序は、これに限定されない。また、前処理部２２２１は、ＳＬＯ画像及びＯＣＴ正面画像のいずれか一方のみに対して前処理を適用してもよい。また、前処理部２２２１は、前処理を適用するか否か判断したり、適用される処理の種別を決定したり、処理の順序を決定したりすることが可能に構成されてもよい。

特徴点検出部２２２２は、ＳＬＯ画像を解析して複数の特徴点（第１特徴点群）を検出する。更に、特徴点検出部２２２２は、ＯＣＴ正面画像を解析して複数の特徴点（第２特徴点群）を検出する。ここで、ＳＬＯ画像及びＯＣＴ正面画像の少なくとも一方は、前処理が施された画像である。典型的には、ＳＬＯ画像及びＯＣＴ正面画像ともに前処理が施された画像である。

本例の特徴点検出部２２２２は、ＳＬＯ画像にエッジ検出を適用することで、ＳＬＯ画像に描出された血管等の特徴部位のエッジを表す第１特徴点群を検出する。同様に、本例の特徴点検出部２２２２は、ＯＣＴ正面画像にエッジ検出を適用することで、ＯＣＴ正面画像に描出された血管等の特徴部位のエッジを表す第２特徴点群を検出する。なお、特徴点の検出に適用される方法は、エッジ検出に限定されない。

特徴点の個数が多過ぎると後段の画像位置合わせの処理時間が増大する。そこで、特徴点検出部２２２２は、ＳＬＯ画像から検出された特徴点の個数を間引きして第１特徴点群を生成することができる。同様に、特徴点検出部２２２２は、ＯＣＴ正面画像から検出された特徴点の個数を間引きして第２特徴点群を生成することができる。

位置合わせ部２２２３は、ＳＬＯ画像から検出された第１特徴点群及びＯＣＴ正面画像から検出された第２特徴点群に基づいて、ＳＬＯ画像とＯＣＴ正面画像との間の位置合わせを行う。

本例の画像位置合わせでは、例えば、ＳＬＯ画像が基準画像に設定され、ＯＣＴ正面画像が比較画像に設定される。この場合、ＳＬＯ画像に対してＯＣＴ正面画像の位置が調整される。この位置調整には、画像の向きの調整、及び、画像のサイズの調整の少なくとも一方が含まれてよい。

複数のＳＬＯ画像が存在する場合、位置合わせ部２２２３は、これらＳＬＯ画像のうちから基準画像を選択することができる。この選択は、例えば、複数のＳＬＯ画像のそれぞれのコントラストを評価する処理と、評価値が最大のＳＬＯ画像を特定する処理とを含む。これにより特定されたＳＬＯ画像を基準画像として設定することができる。

ＳＬＯ画像中の第１特徴点群とＯＣＴ正面画像中の第２特徴点群との間の変位が大きい場合、位置合わせのための探索範囲が広くなり、処理時間が増大する可能性がある。そこで、本例では、上記変位が大きい場合の処理時間と小さい場合の処理時間との差が小さい移動限定相関法を用いる。なお、位置合わせに適用される方法は、位相限定相関法に限定されない。

位相限定相関法を用いる本例において、位置合わせ部２２２３は、ＳＬＯ画像（基準画像）にフーリエ変換を適用して振幅特性と位相特性とを求める。同様に、位置合わせ部２２２３は、ＯＣＴ正面画像（比較画像）にフーリエ変換を適用して振幅特性と位相特性とを求める。次に、位置合わせ部２２２３は、ＳＬＯ画像の位相特性とＯＣＴ正面画像の位相特性との間の差分を求める。次に、位置合わせ部２２２３は、求められた差分に逆フーリエ変換を適用することで、ＳＬＯ画像に対するＯＣＴ正面画像の変位を打ち消すようなＯＣＴ正面画像の移動方向及び移動量を求める。最後に、位置合わせ部２２２３は、求められた移動方向及び移動量に基づきＯＣＴ正面画像を移動させることで、ＳＬＯ画像とＯＣＴ正面画像との間の位置合わせを行う。

評価部２２３は、ＳＬＯ画像とＯＣＴ正面画像との間の一致度を評価する。本例では、評価部２２３は、レジストレーション部２２２によって相対的な位置が調整されたＳＬＯ画像及びＯＣＴ正面画像について、これらの一致の程度を表す値（評価値）を算出する。

評価部２２３により評価される一致度には、例えば、ＳＬＯ画像とＯＣＴ正面画像との間の位置の一致度だけでなく、ＳＬＯ画像に描出されている組織とＯＣＴ正面画像に描出されている組織との一致度も反映される。例えば、レジストレーションが高精度・高確度で行われたとしても、ＳＬＯ画像に描出された眼底Ｅｆの深さ領域とＯＣＴ正面画像に描出された眼底Ｅｆの深さ領域とが相違する場合には、ＳＬＯ画像とＯＣＴ正面画像との間の一致度は低くなる。

ＳＬＯ画像とＯＣＴ正面画像との間の一致度を評価する方法は任意である。例えば、本例の評価部２２３は、レジストレーション後のＳＬＯ画像及びＯＣＴ正面画像について、これらの差分画像を作成する。この処理は、例えば、ＳＬＯ画像の画素とＯＣＴ正面画像の画素との間の対応付けと、対応付けられた画素の間における輝度値の差を算出する処理とを含む。

更に、評価部２２３は、求められた複数の差を積分する。この積分値は、一致度が高いほど小さくなり、逆に一致度が低いほど大きくなる。この積分値が、ＳＬＯ画像とＯＣＴ正面画像との間の一致度を示す評価値として用いられる。評価値はこれに限定されず、任意の方法で評価値を求めることができる。

画像加工部２２４は、評価部２２３により求められた一致度の評価値が所定条件を満足するときに、ＳＬＯ画像に基づいてＯＣＴ正面画像を加工する。この条件については、幾つかの例を後述する（図６及び図７を参照）。

画像加工部２２４が実行する処理の例を説明する。第１の例において、画像加工部２２４は、ＳＬＯ画像とＯＣＴ正面画像との合成画像を作成することができる。この合成画像は、例えば、評価部２２３によるＳＬＯ画像の画素とＯＣＴ正面画像の画素との対応付けに基づいて、ＳＬＯの画素の輝度値とＯＣＴの画素の輝度値との統計値を算出する処理を含む。この統計演算は、例えば、算術平均又は重み付け平均を含む。

第２の例において、画像加工部２２４は、ＳＬＯ画像の一部をＯＣＴ正面画像に埋め込む。一般に、ＳＬＯ画像の横方向分解能は、ＯＣＴ正面画像の横方向分解能よりも高い。そのため、ＳＬＯ画像には描出されているが、ＯＣＴ正面画像には描出されていない部位が存在する場合がある。また、ＳＬＯ画像では鮮明に描出されているが、ＯＣＴ正面画像では鮮明に描出されていない部位が存在する場合がある。

本例において実行可能な処理について説明する。画像加工部２２４は、ＳＬＯ画像とＯＣＴ正面画像との差分画像を取得する。差分画像は、評価部２２３により作成された前述の差分画像でもよいし、画像加工部２２４により作成された差分画像でもよい。差分画像は、例えば、ＳＬＯ画像の画素値からＯＣＴ正面画像の画素値を減算することにより作成される。

例えば、画像加工部２２４は、差分画像の画素値をＯＣＴ正面画像の画素値に加算することにより新たなＯＣＴ正面画像を作成する。これにより、ＳＬＯ画像の一部がＯＣＴ正面画像に埋め込まれる。

或いは、画像加工部２２４は、差分画像に対応するＳＬＯ画像中の画像領域を特定し、特定された画像領域の画素値をＯＣＴ正面画像の画素値に加算することで新たなＯＣＴ正面画像を作成する。これにより、ＳＬＯ画像の一部がＯＣＴ正面画像に埋め込まれる。

他の例において、主制御部２０１は、ＳＬＯ画像（及びＯＣＴ正面画像）をユーザインターフェイス部２３０に表示させる。ユーザは、ユーザインターフェイス部２３０を用いて、ＳＬＯ画像中の所望の画像領域を指定する。画像加工部２２４は、指定された画像領域に対応するＯＣＴ正面画像中の画像領域を特定する。更に、画像加工部２２４は、ＯＣＴ正面画像中の画像領域をＳＬＯ画像中の画像領域で置換する。これにより、ＳＬＯ画像の一部がＯＣＴ正面画像に埋め込まれる。

更に他の例において、主制御部２０１は、ＯＣＴ正面画像（及びＳＬＯ画像）をユーザインターフェイス部２３０に表示させる。ユーザは、ユーザインターフェイス部２３０を用いて、ＯＣＴ正面画像中の所望の画像領域を指定する。画像加工部２２４は、指定された画像領域に対応するＳＬＯ画像中の画像領域を特定する。更に、画像加工部２２４は、ＯＣＴ正面画像中の画像領域をＳＬＯ画像中の画像領域で置換する。これにより、ＳＬＯ画像の一部がＯＣＴ正面画像に埋め込まれる。

画像加工部２２４が実行する処理の第３の例を説明する。本例において、画像加工部２２４は、ＳＬＯ画像に基づいてＯＣＴ正面画像の画素値を調整する。前述したように、ＳＬＯ画像では鮮明に描出されているが、ＯＣＴ正面画像では鮮明に描出されていない部位が存在する場合がある。ＯＣＴ正面画像の鮮明化に本例を用いることができる。以下、図６Ａ〜図６Ｂを参照する。

図６Ａに示す画像Ｇ１は、ＯＣＴ正面画像（の一部）である。ＯＣＴ正面画像Ｇ１に示すグリッドは、画素の配置を表している。ＯＣＴ正面画像Ｇ１には、眼底Ｅｆの血管が描出されている。図６Ｂは、図示しないＳＬＯ画像に描出されている当該血管Ｖと、ＯＣＴ正面画像Ｇ１との位置関係を示す。血管Ｖの輪郭（境界）を符号Ｖ１及びＶ２で示す。ＯＣＴ正面画像Ｇ１と、血管Ｖの輪郭Ｖ１及びＶ２との位置関係から分かるように、ＯＣＴ正面画像Ｇ１に描出された血管Ｖの輪郭は不鮮明である。

画像加工部２２４は、血管Ｖの輪郭Ｖ１及びＶ２がより鮮明に描出されるようにＯＣＴ正面画像Ｇ１の画素値を調整する。例えば、画像加工部２２４は、図６Ｃに示すように、画素ｐ１、ｐ２及びｐ４の輝度値を小さくし、且つ、画素ｐ３の輝度値を大きくすることにより、新たなＯＣＴ正面画像Ｇ２を作成する。加工後のＯＣＴ正面画像Ｇ２には、加工前のＯＣＴ正面画像Ｇ１と比較して、血管Ｖの輪郭Ｖ１及びＶ２がより鮮明に描出されている。

＜データ処理部２２０Ｂ＞
図７に示すデータ処理部２２０Ｂは、正面画像作成部２２１と、レジストレーション部２２２と、評価部２２３と、画像特定部２２５と、画像加工部２２４とを含む。正面画像作成部２２１、レジストレーション部２２２、評価部２２３、及び画像加工部２２４は、データ処理部２２０Ａのそれらと同様に構成されてよい。

本例の正面画像作成部２２１は、ＯＣＴを用いて取得された３次元画像から、深さ領域が異なる複数のＯＣＴ正面画像を作成する。深さ領域は、例えば、自動又は手動で設定される。異なる深さ領域は、互いに排他的であってもよいし、これらの間にオーバーラップが存在してもよい。

例えば、正面画像作成部２２１は、網膜表層に相当するＯＣＴ正面画像と、網膜中層に相当するＯＣＴ正面画像と、網膜深層に相当するＯＣＴ正面画像と、脈絡膜に相当するＯＣＴ正面画像とを作成することができる。

本例のレジストレーション部２２２は、正面画像作成部２２１により作成された複数のＯＣＴ正面画像のそれぞれと、ＳＬＯ画像との間のレジストレーションを行う。

なお、ＳＬＯ画像に描出された深さ領域とＯＣＴ正面画像に描出された深さ領域とがオーバーラップしない場合など、互いの深さ領域が大きく異なる場合には、ＳＬＯ画像とＯＣＴ正面画像とのレジストレーションを行えない場合がある。また、互いの深さ領域のオーバーラップが小さい場合などには、レジストレーションの確度や精度が低くなることがある。このようなＯＣＴ正面画像を以降の処理の対象から除外することができる。

本例の評価部２２３は、正面画像作成部２２１により作成された複数のＯＣＴ正面画像のそれぞれと、ＳＬＯ画像との間の一致度を評価する。前述のように、複数のＯＣＴ正面画像のいずれかを評価処理から除外することができる。

画像特定部２２５は、複数のＯＣＴ正面画像について評価部２２３により求められた複数の評価値のうちの最大値に対応するＯＣＴ正面画像を特定する。

例えば、ＳＬＯ画像が網膜表層を描出しており、且つ、網膜表層に相当するＯＣＴ正面画像の評価値「ａ１」と、網膜中層に相当するＯＣＴ正面画像の評価値「ａ２」と、網膜深層に相当するＯＣＴ正面画像の評価値「ａ３」と、脈絡膜に相当するＯＣＴ正面画像の評価値「ａ４」とが得られたとする。この場合、画像特定部２２５は、これら評価値「ａ１」〜「ａ４」を比較して、これらのうちの最大値を特定する。本例では、評価値「ａ１」が最大値として特定される。

画像特定部２２５は、最大値に対応するＯＣＴ正面画像（本例では網膜表層に相当するＯＣＴ正面画像）を特定する。

本例の画像加工部２２４は、画像特定部２２５により特定されたＯＣＴ正面画像をＳＬＯ画像に基づいて加工する。

なお、画像特定部２２５は、２以上のＯＣＴ正面画像を特定してもよい。この場合、画像加工部２２４は、特定された２以上のＯＣＴ正面画像のそれぞれを、ＳＬＯ画像に基づいて加工することができる。或いは、画像加工部２２４は、特定された２以上のＯＣＴ正面画像から新たなＯＣＴ正面画像（例えば合成画像）を作成し、この新たなＯＣＴ正面画像をＳＬＯ画像に基づき加工することができる。

一例において、画像特定部２２５は、評価値が最も大きいＯＣＴ正面画像（第１ＯＣＴ正面画像）と、２番目に評価値が大きいＯＣＴ正面画像（第２ＯＣＴ正面画像）とを特定する。画像加工部２２４は、ＳＬＯ画像に基づいて第１ＯＣＴ正面画像を加工し、且つ、ＳＬＯ画像に基づいて第２ＯＣＴ正面画像を加工する。或いは、画像加工部２２４は、第１ＯＣＴ正面画像と第２ＯＣＴ正面画像との合成画像を作成し、この合成画像をＳＬＯ画像に基づき加工する。

＜データ処理部２２０Ｃ＞
図８に示すデータ処理部２２０Ｃは、正面画像作成部２２１と、レジストレーション部２２２と、評価部２２３と、判定部２２６と、画像加工部２２４とを含む。正面画像作成部２２１、レジストレーション部２２２、評価部２２３、及び画像加工部２２４は、データ処理部２２０Ａのそれらと同様に構成されてよい。

判定部２２６は、評価部２２４により求められた評価値が所定閾値以上であるか判定する。閾値は、デフォルト値、自動設定された値、及び、手動設定された値のいずれかであってよい。

正面画像作成部２２１が複数のＯＣＴ正面画像を作成した場合、判定部２２６は、これらＯＣＴ正面画像のそれぞれの評価値について判定を行うことができる。

評価値が閾値以上であると判定部２２６により判定されたとき、画像加工部２２４は、このＯＣＴ正面画像をＳＬＯ画像に基づいて加工する。他方、評価値が閾値未満であると判定部２２６により判定されたとき、画像加工部２２４は、このＯＣＴ正面画像の加工を行わない。

＜データ処理部２２０Ｄ＞
図９に示すデータ処理部２２０Ｄは、正面画像作成部２２１と、レジストレーション部２２２と、評価部２２３と、選択部２２７と、画像加工部２２４とを含む。正面画像作成部２２１、レジストレーション部２２２、評価部２２３、及び画像加工部２２４は、データ処理部２２０Ａのそれらと同様に構成されてよい。

本例の正面画像作成部２２１は、ＯＣＴを用いて取得された３次元画像から、深さ領域が異なる複数のＯＣＴ正面画像を作成する。

本例の評価部２２３は、正面画像作成部２２１により作成された複数のＯＣＴ正面画像のそれぞれと、ＳＬＯ画像との間の一致度を評価する。前述のように、複数のＯＣＴ正面画像のいずれかを評価処理から除外することができる。

選択部２２７は、複数のＯＣＴ正面画像について評価部２２３により求められた複数の評価値に基づいて、これらＯＣＴ正面画像のうちのいずれかを選択する。この選択は、例えば、評価値の大きさの比較、閾値との比較などのいずれかであってよい。

画像加工部２２４は、選択部２２７により選択された各ＯＣＴ正面画像をＳＬＯ画像に基づいて加工する。

＜データ処理部２２０Ｅ＞
図１０に示すデータ処理部２２０Ｅは、レジストレーション部２２８と、正面画像作成部２２１と、評価部２２３と、画像加工部２２４とを含む。正面画像作成部２２１、評価部２２３、及び画像加工部２２４は、データ処理部２２０Ａのそれらと同様に構成されてよい。また、レジストレーション部２２８は、データ処理部２２０Ａのレジストレーション部２２２と同様に構成されてよい。

他の例では、３次元画像から作成されたＯＣＴ正面画像とＳＬＯ画像とのレジストレーションを行うのに対し、本例では、ＯＣＴを用いて取得された３次元画像とＳＬＯ画像のレジストレーションを行う。

３次元画像とＳＬＯ画像とのレジストレーションを行うタイミングと、３次元画像からＯＣＴ正面画像を作成するタイミングは、任意である。例えば、レジストレーションを行った後に、ＯＣＴ正面画像を作成することができる。又は、ＯＣＴ正面画像を作成した後に、レジストレーションを行うことができる。或いは、レジストレーションとＯＣＴ正面画像の作成とを並行して行うことができる。

レジストレーション部２２８は、ＯＣＴを用いて取得された３次元画像とＳＬＯ画像との間の位置合わせを行う。３次元画像とＳＬＯ画像との間の位置合わせは、例えば、３次元画像からシャドウグラム（又はプロジェクション画像）を作成する処理と、作成されたシャドウグラムとＳＬＯ画像とを位置合わせする処理と、この位置合わせの結果を３次元画像に反映させる処理とを含む。

３次元画像とＳＬＯ画像との間の位置合わせは、例えば、ＳＬＯ画像から特徴領域を検出する処理と、３次元画像中の特徴領域を検出する処理と、双方の特徴領域に基づきＳＬＯ画像と３次元画像とを位置合わせする処理とを含む。

本例の評価部２２３は、レジストレーション部２２８により実行された位置合わせの結果に基づいて、正面画像作成部２２１により３次元画像から作成されたＯＣＴ正面画像と、ＳＬＯ画像との間の一致度を評価する。

例えば、評価部２２３はレジストレーション部２２８により実行された位置合わせの結果を利用してＯＣＴ正面画像とＳＬＯ画像との位置合わせを行い、位置合わせがなされたＯＣＴ正面画像とＳＬＯ画像との間の一致度を評価する。

例えば、評価部２２３により得られた評価値が閾値以上である場合、画像加工部２２４は、ＳＬＯ画像に基づいてＯＣＴ正面画像を加工する。他の例において、画像加工部２２４は、評価部２２３により得られた複数の評価値の比較によって選択されたＯＣＴ正面画像を、ＳＬＯ画像に基づいて加工する。

＜データ処理部２２０Ｆ＞
例えば図１１に示す光学系が適用される場合のように、波長帯が異なる２以上のＳＬＯ画像を眼科撮影装置が取得可能である場合、図１２に示すデータ処理部２２０Ｆを適用することができる。

まず、図１１に示す光学系について説明する。この光学系が適用される場合、眼科撮影装置は、複数の波長帯の光ビームを出力することができる。

図１１に示す光学系は、図１及び図３のＳＬＯ光源１３１及びコリメートレンズ１３２の代わりに適用されるＳＬＯ光源ユニット１３１Ａを表す。他の部分については上記実施形態と同様であってよい。

ＳＬＯ光源ユニット１３１Ａは、赤外光と可視光の双方を出力可能である。ＳＬＯ光源ユニット１３１Ａは、赤外光源１３１ａと、赤色光源１３１ｒと、緑色光源１３１ｇと、青色光源１３１ｂとを含む。赤外光源１３１ａは（近）赤外帯域の光ビームを出力する。赤色光源１３１ｒは、赤色帯域の光ビームを出力する。緑色光源１３１ｇは、緑色帯域の光ビームを出力する。青色光源１３１ｂは、青色帯域の光ビームを出力する。これら光源１３１ａ、１３１ｒ、１３１ｇ及び１３１ｂのそれぞれは、例えば、半導体レーザーである。

赤外光源１３１ａから出力された赤外光はコリメートレンズ１３２ａにより平行光束に変換される。赤色光源１３１ｒから出力された赤色光はコリメートレンズ１３２ｒにより平行光束に変換される。緑色光源１３１ｇから出力された緑色光はコリメートレンズ１３２ｇにより平行光束に変換される。青色光源１３１ｂから出力された青色光はコリメートレンズ１３２ｂにより平行光束に変換される。

ビームスプリッタＢＳｒは、コリメートレンズ１３２ｒにより平行光束とされた赤色光を、コリメートレンズ１３２ａにより平行光束とされた赤外光の光路に合成する。ビームスプリッタＢＳｇは、コリメートレンズ１３２ｇにより平行光束とされた緑色光を、コリメートレンズ１３２ａにより平行光束とされた赤外光の光路に合成する。ビームスプリッタＢＳｂは、コリメートレンズ１３２ｂにより平行光束とされた青色光を、コリメートレンズ１３２ａにより平行光束とされた赤外光の光路に合成する。３つのビームスプリッタＢＳｒ、ＢＳｇ及びＢＳｂにより、波長帯が異なる４つの光ビームの光路が合成される。この合成光路は、ビームスプリッタＢＳ２に導かれている。

主制御部２０１は、赤外光源１３１ａ、赤色光源１３１ｒ、緑色光源１３１ｇ及び青色光源１３１ｂのそれぞれを制御する。主制御部２０１は、これら光源１３１ａ、１３１ｒ、１３１ｇ及び１３１ｂの同期制御を行うための同期回路を含んでいてよい。この同期回路は、これら光源１３１ａ、１３１ｒ、１３１ｇ及び１３１ｂの制御と光スキャナ１３６の制御とを同期させるよう構成されてもよい。

図１２に示すデータ処理部２２０Ｆは、データ処理部２２０Ｆは、波長帯が異なる２以上のＳＬＯ画像のそれぞれと、ＯＣＴ正面画像との間の一致度を評価することができる。３次元画像から複数のＯＣＴ正面画像が作成された場合、データ処理部２２０Ｆは、波長帯が異なる２以上のＳＬＯ画像のそれぞれに対応するＯＣＴ正面画像を複数のＯＣＴ正面画像のうちから選択することができる。

データ処理部２２０Ｆは、正面画像作成部２２１と、レジストレーション部２２２と、評価部２２３と、選択部２２９と、画像加工部２２４とを含む。正面画像作成部２２１、レジストレーション部２２２、評価部２２３、及び画像加工部２２４は、データ処理部２２０Ａのそれらと同様に構成されてよい。

本例のＳＬＯ光学系１３０は、異なる波長帯に対応する２以上のＳＬＯ画像を取得する。ＯＣＴ光学系１４０は、上記実施形態と同様に３次元画像を取得する。これら画像がデータ処理部２２０Ｆに入力される。

正面画像作成部２２１は、ＯＣＴを用いて取得された３次元画像から、深さ領域が異なる複数のＯＣＴ正面画像を作成する。

レジストレーション部２２２は、２以上のＳＬＯ画像と複数のＯＣＴ正面画像との任意の組み合わせについてレジストレーションを実行する。例えば、レジストレーション部２２２は、２以上のＳＬＯ画像のそれぞれと、複数のＯＣＴ正面画像のそれぞれとの位置合わせを行う。ＳＬＯ画像が描出する深さ領域とＯＣＴ正面画像が描出する深さ領域との間の対応付けが可能である場合、レジストレーション部２２２は、同じ深さ領域（又は類似の深さ領域）に対応するＳＬＯ画像とＯＣＴ正面画像との位置合わせを行うように構成されてよい。レジストレーションが施されなかった画像を、以降の処理の対象から除外することができる。

評価部２２３は、２以上のＳＬＯ画像のそれぞれについて、複数のＯＣＴ正面画像のうちの少なくとも一部との間の一致度を評価する。例えば、２以上のＳＬＯ画像のそれぞれについて、評価部２２３は、このＳＬＯ画像と各ＯＣＴ正面画像との間の一致度を評価する。他の例において、評価部２２３は、レジストレーションが施されたＳＬＯ画像とＯＣＴ正面画像の組み合わせのそれぞれについて、評価値を算出する。

選択部２２９は、評価部２２３により求められた評価値に基づいて、２以上のＳＬＯ画像のそれぞれに対応するＯＣＴ正面画像を選択する。例えば、２以上のＳＬＯ画像のそれぞれについて、選択部２２９は、このＳＬＯ画像に基づき算出された（１以上の）評価値のうちの最大値を特定し、この最大値に対応するＯＣＴ正面画像を当該ＳＬＯ画像に対応するＯＣＴ画像として選択する。

他の例において、２以上のＳＬＯ画像のそれぞれについて、選択部２２９は、このＳＬＯ画像に基づき算出された（１以上の）評価値を所定閾値と比較し、閾値以上の評価値に対応するＯＣＴ正面画像を当該ＳＬＯ画像に対応するＯＣＴ画像として選択する。

選択部２２９は、１つのＳＬＯ画像について２以上のＯＣＴ正面画像を選択してもよい。この場合、例えば評価値の大きさに基づいて、これらＯＣＴ正面画像に順位付けを行うことができる。

画像加工部２２４は、選択部２２７により選択されたＯＣＴ正面画像を、対応するＳＬＯ画像に基づいて加工する。

＜ユーザインターフェイス部２３０＞
ユーザインターフェイス（ＵＩ）部２３０は、ユーザと眼科撮影装置との間で情報のやりとりを行うための機能を備える。ＵＩ部２３０は、表示デバイスと操作デバイス（入力デバイス）とを含む。表示デバイスは、例えば液晶ディスプレイ（ＬＣＤ）を含む。操作デバイスは、各種のハードウェアキー及び／又はソフトウェアキーを含む。

制御部２００は、操作デバイスに対する操作内容を受け、この操作内容に対応した制御信号を各部に出力する。操作デバイスの少なくとも一部と表示デバイスの少なくとも一部とを一体的に構成することが可能である。タッチパネルディスプレイはその一例である。

＜動作＞
実施形態に係る眼科撮影装置の動作について説明する。動作の典型的な例を図１３に示す。

（Ｓ１：３D−ＯＣＴを実行）
まず、被検眼Ｅに対する眼科撮影装置のアライメント、眼底Ｅｆに対するフォーカス調整、ＯＣＴ撮影条件の最適化等の準備的処理が実行される。これらは公知の手法で実行される。また、被検眼Ｅへの固視光の投射が開始される。

準備的処理の完了後、主制御部２０１は、眼底Ｅｆの３次元ＯＣＴスキャンを実行するために、ＯＣＴ光学系１４０、ＯＣＴ画像形成部２１２等を制御する。それにより、眼底Ｅｆの３次元画像が得られる。この３次元画像は、例えばボリュームデータである。

（Ｓ２：マルチカラーＳＬＯを実行）
本例の眼科撮影装置は、図１１に示す光学系を含むものとする。主制御部２０１は、眼底ＥｆのマルチカラーＳＬＯ撮影を実行するために、ＳＬＯ光学系１３０、ＳＬＯ画像形成部２１１等を制御する。

それにより、赤外光源１３１ａからの赤外光に基づく赤外ＳＬＯ画像と、赤色光源１３１ｒからの赤色光に基づく赤色ＳＬＯ画像と、緑色光源１３１ｇからの緑色光に基づく緑色ＳＬＯ画像と、青色光源１３１ｂからの青色光に基づく青色ＳＬＯ画像とが得られる。

本例では、可視光でＳＬＯ撮影を行うため、被検眼Ｅの縮瞳の影響を考慮して、ＯＣＴの後にＳＬＯ撮影を行っている。しかし、ＯＣＴの前にＳＬＯ撮影を行ったり、ＯＣＴとＳＬＯ撮影とを並行して行ったりすることも可能である。

（Ｓ３：画像を保存）
主制御部２０１は、ステップＳ１で取得された３次元画像と、ステップＳ２で取得された赤外ＳＬＯ画像、赤色ＳＬＯ画像、緑色ＳＬＯ画像、及び青色ＳＬＯ画像とを、記憶部２０２（又は、他の記憶装置）に格納する。このとき、被検者識別情報（患者ＩＤ等）、シリアル番号、撮影日時、取得された画像の種別などの情報が、画像に付帯される。

（Ｓ４：画像の選択）
例えばユーザからの指示を受けて、主制御部２０１は、所定の画面をユーザインターフェイス部２３０に表示させる。この画面には、被検者のリストが提示される。ユーザは、ユーザインターフェイス部２３０を用いて、この被検者リストから所望の被検者を選択する。

主制御部２０１は、選択された被検者に関する撮影情報（シリアル番号、撮影日時、画像の種別等）のリストを表示する。ユーザは、この撮影情報リストから所望のシリアル番号を選択する。

主制御部２０１は、選択されたシリアル番号に対応する画像を記憶部２０２（又は、他の記憶装置）から取得する。例えばユーザからの指示を受けて、主制御部２０１は、取得された画像をユーザインターフェイス部２３０に表示させる。

本例では、ステップＳ１で取得された３次元画像と、ステップＳ２で取得された赤外ＳＬＯ画像、赤色ＳＬＯ画像、緑色ＳＬＯ画像、及び青色ＳＬＯ画像とが、記憶部２０２（又は、他の記憶装置）から取得される。主制御部２０１は、赤外ＳＬＯ画像、赤色ＳＬＯ画像、緑色ＳＬＯ画像、及び青色ＳＬＯ画像を、選択的に、又は、並列的に、表示することができる。また、３次元画像のレンダリング画像を表示可能であってもよい。

（Ｓ５：基準画像となるＳＬＯ画像の指定）
ユーザは、ユーザインターフェイス部２３０を用いて、ステップＳ４で選択されたＳＬＯ画像のうちから、基準画像を指定する。本例では、赤外ＳＬＯ画像、赤色ＳＬＯ画像、緑色ＳＬＯ画像、及び青色ＳＬＯ画像が指定されたとする。

（Ｓ６：ＳＬＯ画像に前処理を適用）
前処理部２２２１は、赤外ＳＬＯ画像、赤色ＳＬＯ画像、緑色ＳＬＯ画像、及び青色ＳＬＯ画像のそれぞれに、所定の前処理を適用する。

（Ｓ７：ＳＬＯ画像にエッジ検出を適用）
特徴点検出部２２２２は、ステップＳ６で前処理が適用された赤外ＳＬＯ画像、赤色ＳＬＯ画像、緑色ＳＬＯ画像、及び青色ＳＬＯ画像のそれぞれに、エッジ検出を適用する。それにより、赤外ＳＬＯ画像中の特徴点群、赤色ＳＬＯ画像中の特徴点群、緑色ＳＬＯ画像中の特徴点群、及び青色ＳＬＯ画像中の特徴点群が、それぞれ取得される。

（Ｓ８：３Ｄ−ＯＣＴ画像にセグメンテーションを適用）
セグメンテーション部２２１１は、ステップＳ４で選択された３次元画像を解析して複数のセグメントを特定する。本例では、例えば、網膜表層に含まれる１以上のセグメントと、網膜中層に含まれる１以上のセグメントと、網膜深層に含まれる１以上のセグメントと、脈絡膜に含まれる１以上のセグメントとが特定されたとする。

（Ｓ９：ＯＣＴ正面画像を作成）
投影処理部２２１２は、ステップＳ８で特定された各セグメントをＺ方向に投影することによりシャドウグラムを作成する。本例では、網膜表層に相当する１以上のＯＣＴ正面画像と、網膜中層に相当する１以上のＯＣＴ正面画像と、網膜深層に相当する１以上のＯＣＴ正面画像と、脈絡膜に相当する１以上のＯＣＴ正面画像とが作成される。

（Ｓ１０：ＯＣＴ正面画像に前処理を適用）
前処理部２２２１は、ステップＳ９で作成されたＯＣＴ正面画像のそれぞれに、所定の前処理を適用する。

（Ｓ１１：ＯＣＴ正面画像にエッジ検出を適用）
特徴点検出部２２２２は、ステップＳ１０で前処理が適用されたＯＣＴ正面画像のそれぞれに、エッジ検出を適用する。それにより、各ＯＣＴ正面画像中の特徴点群が取得される。

（Ｓ１２：ＳＬＯ画像とＯＣＴ正面画像のレジストレーションを実行）
位置合わせ部２２２３は、各基準画像（ＳＬＯ画像）に対する１以上のＯＣＴ正面画像の組み合わせを設定する。

このとき、位置合わせ部２２２３は、例えば、各基準画像に対して、考慮しているＯＣＴ正面画像の全てを組み合わせることができる。本例においては、位置合わせ部２２２３は、赤外ＳＬＯ画像に対してステップ９で作成された複数のＯＣＴ正面画像のそれぞれを対応付け、赤色ＳＬＯ画像に対して複数のＯＣＴ正面画像のそれぞれを対応付け、緑色ＳＬＯ画像に対して複数のＯＣＴ正面画像のそれぞれを対応付け、青色ＳＬＯ画像に対して複数のＯＣＴ正面画像のそれぞれを対応付けることができる。ステップＳ９で作成されたＯＣＴ正面画像の個数を「Ｎ」とすると、この場合における組み合わせの総数は、ステップＳ５で選択されたＳＬＯ画像の個数「４」と、ＯＣＴ正面画像の個数を「Ｎ」との積である「４×Ｎ」となる。

他の例を説明する。ＳＬＯの波長帯とＯＣＴの深さ領域とが予め対応付けられている場合や、ＳＬＯの波長帯とＯＣＴの深さ領域との対応付けをユーザが行った場合などにおいては、位置合わせ部２２２３は、１つの基準画像（ＳＬＯ画像）に対して、この基準画像の波長帯に対応する深さ領域のＯＣＴ正面画像を１つ以上対応付けることができる。本例において、赤外の波長帯と脈絡膜とが対応付けられ、赤色の波長帯と網膜深層とが対応付けられ、緑色の波長帯と網膜中層とが対応付けられ、青色の波長帯と網膜表層とが対応付けられているとする。この場合、位置合わせ部２２２３は、赤外ＳＬＯ画像に対して脈絡膜に相当する１以上のＯＣＴ正面画像のそれぞれを対応付け、赤色ＳＬＯ画像に対して網膜深層に相当する１以上のＯＣＴ正面画像のそれぞれを対応付け、緑色ＳＬＯ画像に対して網膜中層に相当する１以上のＯＣＴ正面画像のそれぞれを対応付け、青色ＳＬＯ画像に対して網膜表層に相当する１以上のＯＣＴ正面画像のそれぞれを対応付けることができる。脈絡膜に相当するＯＣＴ正面画像の個数を「Ｎａ」、網膜深層に相当するＯＣＴ正面画像の個数を「Ｎｄ」、網膜中層に相当するＯＣＴ正面画像の個数を「Ｎｍ」、網膜表層に相当するＯＣＴ正面画像の個数を「Ｎｓ」とすると、この場合における組み合わせの総数は、これらの和である「Ｎａ＋Ｎｄ＋Ｎｍ＋Ｎｓ」となる。

このような各組み合わせについて、位置合わせ部２２２３は、ステップＳ７で検出された当該ＳＬＯ画像中の特徴点群と、ステップ１１で検出された当該ＯＣＴ正面画像中の特徴点群とに基づいて、当該ＳＬＯ画像と当該ＯＣＴ正面画像との位置合わせを行う。

（Ｓ１３：一致度を評価）
ステップＳ１２でレジストレーションがなされた組み合わせのそれぞれについて、評価部２２３は、当該ＳＬＯ画像と当該ＯＣＴ正面画像との一致度を評価する。それにより、各基準画像（ＳＬＯ画像）について、１以上のＯＣＴ正面画像に対応する１以上の評価値が得られる。

（Ｓ１４：ＳＬＯ画像に対応するＯＣＴ正面画像を選択）
各基準画像（ＳＬＯ画像）について、データ処理部２２０は、ステップＳ１３で取得された１以上の評価値に基づいて、当該ＳＬＯ画像に対応するＯＣＴ正面画像を選択する。この処理は、例えば、画像特定部２２５、判定部２２６、選択部２２７、又は選択部２２９を利用して実行される。

本例では、例えば、赤外ＳＬＯ画像については脈絡膜に相当するＯＣＴ正面画像が選択され、赤色ＳＬＯ画像については網膜深層に相当するＯＣＴ正面画像が選択され、緑色ＳＬＯ画像については網膜中層に相当するＯＣＴ正面画像が選択され、青色ＳＬＯ画像については網膜表層に相当するＯＣＴ正面画像が選択される。

（Ｓ１５：ＯＣＴ正面画像を加工）
各基準画像（ＳＬＯ画像）について、画像加工部２２４は、ステップＳ１４で選択されたＯＣＴ正面画像を当該ＳＬＯ画像に基づいて加工する。

主制御部２０１は、加工されたＯＣＴ正面画像をユーザインターフェイス部２３０に表示させることができる。このとき、加工前のＯＣＴ正面画像や、対応するＳＬＯ画像を、加工後のＯＣＴ正面画像とともに表示させることができる。加工後のＯＣＴ正面画像は、観察、診断、解析等に利用される。

本例のように、２以上の可視成分（赤色成分、緑色成分、青色成分）のＳＬＯ画像が得られた場合、２以上の可視成分のＳＬＯ画像に対応する２以上のＯＣＴ画像を合成することができる。

例えば、赤色ＳＬＯ画像に対応する「赤色」ＯＣＴ正面画像と、緑色ＳＬＯ画像に対応する「緑色」ＯＣＴ正面画像と、青色ＳＬＯ画像に対応する「青色」ＯＣＴ正面画像とが得られた場合、これら３つのＯＣＴ正面画像を合成することで、赤色ＳＬＯ画像と緑色ＳＬＯ画像と青色ＳＬＯ画像との合成画像であるカラーＳＬＯ画像に相当する「カラー」ＯＣＴ正面画像を作成することができる。また、「緑色」ＯＣＴ正面画像と「青色」ＯＣＴ正面画像とを合成することにより、「レッドフリー」ＯＣＴ正面画像を作成することができる。

＜作用・効果＞
実施形態に係る眼科撮影装置により提供することが可能な作用及び効果の幾つかの例を以下に説明する。

実施形態に係る眼科撮影装置は、正面画像取得部と、３次元画像取得部と、正面画像作成部と、評価部とを含む。

正面画像取得部は、被検眼を撮影して第１正面画像を取得するように構成される。上記の実施形態では、正面画像取得部は、対物レンズ系１１０とＳＬＯ光学系１３０とＳＬＯ画像形成部２１１とを含み、被検眼Ｅの眼底ＥｆをＳＬＯ光でスキャンしてＳＬＯ画像を形成する。他の実施形態において、正面画像取得部は、眼底カメラ、スリットランプ顕微鏡、手術用顕微鏡など、任意のモダリティであってよい。

３次元画像取得部は、被検眼をスキャンして３次元画像を取得するように構成される。上記の実施形態では、３次元画像取得部は、対物レンズ系１１０とＯＣＴ光学系１４０とＯＣＴ画像形成部２１２とを含み、被検眼Ｅの眼底ＥｆのＯＣＴ光（測定光ＬＳ）でスキャンして３次元画像を形成する。他の実施形態において、３次元画像取得部は、超音波診断装置など、任意のモダリティであってよい。

正面画像作成部は、３次元画像取得部により取得された３次元画像から第２正面画像を作成するように構成される。上記の実施形態では、正面画像作成部は、正面画像作成部２２１を含み、ＯＣＴを用いて取得された３次元画像からＯＣＴ正面画像を形成する。

評価部は、正面画像取得部により取得された第１正面画像と、正面画像作成部により作成された第２正面画像との間の一致度を評価するように構成される。上記の実施形態では、評価部は、評価部２２３を含み、ＳＬＯ画像とＯＣＴ正面画像との間の一致度を評価する。

このような実施形態によれば、横方向分解能が比較的高い第１正面画像（例：ＳＬＯ画像）と、横方向分解能が比較的低い第２正面画像（例：ＯＣＴ正面画像）との間の一致の度合を評価することができる。それにより、第１正面画像と第２正面画像との間の関係を把握したり、これらの間の対応付けを行ったり、双方を用いた画像処理や解析処理を行ったりすることが可能となる。

実施形態において、眼科撮影装置は、画像加工部を更に含んでよい。画像加工部は、評価部により求められた一致度の評価値が所定条件を満足するときに、第１正面画像に基づいて第２正面画像を加工するように構成される。上記の実施形態では、画像加工部は、画像加工部２２４を含み、評価部２２３により求められた一致度の評価値が所定条件を満足するときに、ＳＬＯ画像に基づいてＯＣＴ正面画像を加工する。

実施形態において、画像加工部は、例えば、次のいずれかの処理を実行するように構成される。第１の例において、画像加工部は、第１正面画像と第２正面画像との合成画像を作成する。第２の例において、画像加工部は、第１正面画像の一部を第２正面画像に埋め込む。第３の例において、画像加工部は、第１正面画像に基づいて第２正面画像の画素値を変更する。

このような実施形態によれば、横方向分解能が比較的高い第１正面画像（例：ＳＬＯ画像）を利用して、横方向分解能が比較的低い第２正面画像（例：ＯＣＴ正面画像）を加工することで、新たな第２正面画像を取得することができる。加工後の第２正面画像は、加工前の第２正面画像よりも詳細に被検眼を描出した画像である。

実施形態において、正面画像作成部は、３次元画像取得部により取得された３次元画像から、深さ領域が異なる複数の第２正面画像を作成することができる。この場合、評価部は、正面画像作成部により作成された複数の第２正面画像のそれぞれと、正面画像取得部により取得された第１正面画像との間の一致度を評価することができる。

更に、この実施形態の眼科撮影装置は、画像特定部を更に含んでよい。画像特定部は、正面画像作成部により作成された複数の第２正面画像について評価部により求められた複数の評価値のうちの最大値に対応する第２正面画像を特定する。上記の実施形態では、画像特定部は、画像特定部２２５を含み、複数のＯＣＴ正面画像について評価部２２３により求められた複数の評価値のうちの最大値に対応するＯＣＴ正面画像を特定する。画像特定部は、一致度の評価値が所定条件を満足するような第２正面画像を特定するように機能する。

画像加工部は、画像特定部により特定された第２正面画像を第１正面画像に基づいて加工することができる。

このような実施形態によれば、第１正面画像と一致度が高い第２正面画像を特定し、更に、横方向分解能が比較的高い第１正面画像（例：ＳＬＯ画像）を利用して、横方向分解能が比較的低い第２正面画像（例：ＯＣＴ正面画像）を加工することができる。

実施形態において、眼科撮影装置は、判定部を更に含んでよい。判定部は、評価部により求められた評価値が所定閾値以上であるか判定する。上記の実施形態において、判定部は、判定部２２６を含み、評価部２２３により求められた評価値が所定閾値以上であるか判定する。判定部は、一致度の評価値が所定条件を満足するか否か判定するように機能する。

評価値が所定閾値以上であると判定部により判定されたとき、画像加工部は、第１正面画像に基づいて第２正面画像を加工することができる。

このような実施形態によれば、第１正面画像と一致度が高い第２正面画像を特定し、更に、横方向分解能が比較的高い第１正面画像（例：ＳＬＯ画像）を利用して、横方向分解能が比較的低い第２正面画像（例：ＯＣＴ正面画像）を加工することができる。

実施形態において、正面画像作成部は、３次元画像取得部により取得された３次元画像から、深さ領域が異なる複数の第２正面画像を作成することができる。この場合、評価部は、正面画像作成部により作成された複数の第２正面画像のそれぞれと、正面画像取得部により取得された第１正面画像との間の一致度を評価することができる。

このような実施形態によれば、様々な深さ領域を表す複数の第２正面画像のそれぞれと、第１正面画像との間の一致の度合を把握することができる。

更に、実施形態に係る眼科撮影装置は、第１選択部を含んでよい。第１選択部は、正面画像作成部により３次元画像から作成された複数の第２正面画像について評価部により求められた複数の評価値に基づいて、複数の第２正面画像のうちのいずれかを選択するように構成される。上記の実施形態では、第１選択部は、選択部２２７を含み、正面画像作成部２２１により作成された複数のＯＣＴ正面画像について評価部２２３により求められた複数の評価値に基づいて、複数のＯＣＴ正面画像のうちのいずれかを選択する。

このような実施形態によれば、様々な深さ領域を表す複数の第２正面画像のうちから、第１正面画像との間の一致の度合が高い第２正面画像を自動で選択することができる。

実施形態において、正面画像作成部は、セグメンテーション部と、投影処理部とを含んでよい。

セグメンテーション部は、３次元画像取得部により取得された３次元画像にセグメンテーションを施して層領域を特定する。上記の実施形態では、セグメンテーション部は、セグメンテーション部２２１１を含み、ＯＣＴ画像形成部２１２により形成された３次元画像にセグメンテーションを施して、眼底Ｅｆの層領域を特定する。

投影処理部は、セグメンテーション部により特定された層領域を所定方向に投影することで第２正面画像を作成する。上記の実施形態では、投影処理部は、投影処理部２２１２を含み、セグメンテーション部２２１１により特定された層領域を所定方向（例：Ｚ方向）に投影することによってＯＣＴ正面画像を作成する。

このような実施形態によれば、所望の層領域（所望の組織）を表現した第２正面画像を取得することができる。

実施形態において、眼科撮影装置は、第１レジストレーション部を更に含んでよい。第１レジストレーション部は、第１正面画像と第２正面画像との間の位置合わせを行う。上記の実施形態では、第１レジストレーション部は、レジストレーション部２２２を含み、ＳＬＯ画像形成部２１１により形成されたＳＬＯ画像と、正面画像作成部２２１により３次元画像から作成されたＯＣＴ正面画像との間の位置合わせを行う。

評価部は、第１レジストレーション部により位置合わせがなされた第１正面画像と第２正面画像との間の一致度を評価することができる。

このような実施形態によれば、位置合わせがなされた第１正面画像と第２正面画像との間の一致の度合を評価できるので、第１正面画像と第２正面画像との間の位置ズレが一致度の評価に与える影響を小さくすることが可能である。それにより、第１正面画像に描出されている組織と第２正面画像に描出されている組織との間の一致度を、より高い確度・より高い精度で評価することができる。

実施形態において、第１レジストレーション部は、特徴点検出部を含んでよい。特徴点検出部は、第１正面画像を解析して第１特徴点群を検出し、且つ、第２正面画像を解析して第２特徴点群を検出する。上記の実施形態では、特徴点検出部は、特徴点検出部２２２２を含み、ＳＬＯ画像を解析して第１特徴点群を検出し、且つ、ＯＣＴ正面画像を解析して第２特徴点群を検出する。

更に、第１レジストレーション部は、特徴点検出部により検出された第１特徴点群及び第２特徴点群に基づいて、第１正面画像と第２正面画像との間の位置合わせを行うことができる。

このような実施形態によれば、画像中の特徴点を利用することで、第１正面画像と第２正面画像との位置合わせを高確度・高精度で行うことができる。

実施形態において、第１レジストレーション部は、前処理部を含んでよい。前処理部は、特徴点検出部に入力される第１正面画像及び第２正面画像の少なくとも一方に、ガンマ曲線補正、シグモイド曲線補正、輝度補正、ガウシアンフィルタ、及びメディアンフィルタのうちの少なくとも１つを含む前処理を施す。上記の実施形態では、前処理部は、前処理部２２２１を含み、特徴点検出部２２２２に入力されるＳＬＯ画像及びＯＣＴ正面画像の少なくとも一方に、ガンマ曲線補正、シグモイド曲線補正、輝度補正、ガウシアンフィルタ、及びメディアンフィルタのうちの少なくとも１つを含む前処理を施す。

特徴点検出部は、第１正面画像にエッジ検出を施して第１特徴点群を検出し、且つ、第２正面画像にエッジ検出を施して第２特徴点群を検出することができる。

このような実施形態によれば、エッジ検出と、これを好適に行うための前処理とを介して、特徴点を検出することができる。それにより、第１正面画像と第２正面画像との位置合わせをより高い確度・より高い精度で行うことができる。

実施形態において、眼科撮影装置は、第２レジストレーション部を更に含んでよい。第２レジストレーション部は、正面画像取得部により取得された第１正面画像と、３次元画像取得部により取得された３次元画像との間の位置合わせを行うように構成される。上記の実施形態では、第２レジストレーション部は、レジストレーション部２２８を含み、ＳＬＯ画像形成部２１１により形成された第１正面画像と、ＯＣＴ画像形成部２１２により形成された３次元画像との間の位置合わせを行う。

評価部は、第２レジストレーション部により実行された位置合わせの結果に基づいて、第１正面画像と第２正面画像との間の一致度を評価することができる。

このような実施形態によれば、第１正面画像と３次元画像との間の位置合わせの結果を利用して、第１正面画像と、３次元画像から作成された第２正面画像との位置合わせを行うことができる。それにより、位置合わせがなされた第１正面画像と第２正面画像との間の一致の度合を評価できる。したがって、第１正面画像と第２正面画像との間の位置ズレが一致度の評価に与える影響を小さくすることが可能である。よって、第１正面画像に描出されている組織と第２正面画像に描出されている組織との間の一致度を、より高い確度・より高い精度で評価することができる。

実施形態において、正面画像取得部は、異なる波長帯に対応する２以上の第１正面画像を取得することができる。この場合、評価部は、２以上の第１正面画像のそれぞれと第２正面画像との間の一致度を評価することができる。

このような実施形態によれば、様々な波長帯に対応する第１正面画像が取得されたときに、これら第１正面画像のそれぞれについて、第２正面画像との一致の度合を評価することができる。それにより、様々な波長帯に対応する第１正面画像（例：ＳＬＯ画像）のそれぞれについて、第２正面画像（例：ＯＣＴ正面画像）との間の一致の度合を評価することができる。それにより、第１正面画像と第２正面画像との間の関係を把握したり、これらの間の対応付けを行ったり、双方を用いた画像処理や解析処理を行ったりすることが可能となる。

実施形態において、正面画像取得部は、異なる波長帯に対応する２以上の第１正面画像を取得することができる。この場合、正面画像作成部は、３次元画像取得部により取得された３次元画像から、深さ領域が異なる複数の第２正面画像を作成することができる。更に、評価部は、異なる波長帯に対応する２以上の第１正面画像のそれぞれについて、正面画像作成部により作成された複数の第２正面画像のうちの少なくとも一部との間の一致度を評価することができる。

この場合、眼科撮影装置は、第２選択部を含んでよい。第２選択部は、評価部により求められた評価値に基づいて、異なる波長帯に対応する２以上の第１正面画像のそれぞれに対応する第２正面画像を選択するように構成される。上記の実施形態では、第２選択部は、選択部２２９を含み、評価部２２３により求められた評価値に基づいて、異なる波長帯に対応する２以上のＳＬＯ画像のそれぞれに対応するＯＣＴ正面画像を選択する。

このような実施形態によれば、様々な波長帯に対応する第１正面画像が取得されたときに、これら第１正面画像のそれぞれについて、この第１正面画像の波長帯に対応する深さ領域の第２正面画像を特定することができる。それにより、同様の組織を描出している第第１正面画像（例：ＳＬＯ画像）と第２正面画像（例：ＯＣＴ正面画像）とを用いた診断や画像処理や解析処理を行うことが可能となる。

＜他の実施形態・変形例＞
以上に示された実施形態は、この発明を実施するための一例に過ぎない。この発明を実施しようとする者は、この発明の要旨の範囲内において任意の変形、省略、追加等を施すことが可能である。以下、他の実施形態や変形例について説明する。なお、上記の実施形態に含まれる任意の構成や機能を、以下に説明する例に組み合わせることが可能である。

上記の実施形態に係る眼科撮影装置は、被検眼を撮影して第１正面画像を取得する正面画像取得部と、被検眼をスキャンして３次元画像を取得する３次元画像取得部との双方を含んでいる。しかし、実施形態はこれに限定されない。

例えば、他の実施形態に係る眼科撮影装置は、正面画像取得部と、３次元画像受付部と、正面画像作成部と、評価部とを含む。

正面画像作成部は、上記実施形態と同様に、被検眼を撮影して第１正面画像を取得するように構成される。

３次元画像受付部は、上記実施形態の３次元画像取得部と異なり、被検眼の３次元画像を外部から受け付けるように構成される。３次元画像受付部の典型的な例は、通信回線を介して３次元画像を受信するための通信インターフェイス、又は、記録媒体に記録された３次元画像を読み出すためのインターフェイスである。

正面画像作成部は、３次元画像受付部により受け付けられた３次元画像から第２正面画像を作成するように構成される。正面画像作成部は、上記の実施形態と同様に構成されてよい。

評価部は、上記の実施形態と同様に、第１正面画像と第２正面画像との間の一致度を評価するように構成される。

このような実施形態に係る眼科撮影装置は、典型的には、上記の実施形態の構成要素からＯＣＴ光学系１４０とＯＣＴ画像形成部２１２とを削除し、且つ、３次元画像受付部（上記のインターフェイス等）を付加したものである。この実施形態に係る眼科撮影装置は、例えば、ＯＣＴ機能や超音波撮影機能を備えない眼科撮影装置であって、典型的にはＳＬＯ、眼底カメラ、スリットランプ顕微鏡、手術用顕微鏡などのモダリティである。

このような実施形態によれば、横方向分解能が比較的高い第１正面画像と、横方向分解能が比較的低い第２正面画像との間の一致の度合を評価することができる。それにより、第１正面画像と第２正面画像との間の関係を把握したり、これらの間の対応付けを行ったり、双方を用いた画像処理や解析処理を行ったりすることが可能となる。

更に他の実施形態に係る眼科撮影装置は、正面画像受付部と、３次元画像取得部と、正面画像作成部と、評価部とを含む。

正面画像受付部は、上記実施形態の正面画像取得部と異なり、被検眼の第１正面画像を外部から受け付けるように構成される。正面画像受付部の典型的な例は、通信回線を介して３次元画像を受信するための通信インターフェイス、又は、記録媒体に記録された３次元画像を読み出すためのインターフェイスである。

３次元画像作成部は、上記実施形態と同様に、被検眼をスキャンして３次元画像を取得するように構成される。

正面画像作成部は、上記実施形態と同様に、３次元画像取得部により取得された３次元画像から第２正面画像を作成するように構成される。

評価部は、上記の実施形態と同様に、第１正面画像と第２正面画像との間の一致度を評価するように構成される。

このような実施形態に係る眼科撮影装置は、典型的には、上記の実施形態の構成要素からＳＬＯ光学系１３０とＳＬＯ画像形成部２１１とを削除し、且つ、正面画像受付部（上記のインターフェイス等）を付加したものである。この実施形態に係る眼科撮影装置は、例えば、ＳＬＯ、眼底カメラ、スリットランプ顕微鏡、手術用顕微鏡などとしての機能を備えない眼科撮影装置であって、典型的には３次元スキャンを実行可能な光干渉断層計である。

このような実施形態によれば、横方向分解能が比較的高い第１正面画像と、横方向分解能が比較的低い第２正面画像との間の一致の度合を評価することができる。それにより、第１正面画像と第２正面画像との間の関係を把握したり、これらの間の対応付けを行ったり、双方を用いた画像処理や解析処理を行ったりすることが可能となる。

実施形態は、眼科撮影装置に限定されず、正面画像取得部及び３次元画像取得部の双方を含まない情報処理装置（眼科画像処理装置）であってよい。実施形態に係る眼科画像処理装置は、画像受付部と、正面画像作成部と、評価部とを含む。

画像受付部は、被検眼の第１正面画像及び３次元画像を受け付ける。画像受付部の典型的な例は、通信回線を介して第１正面画像及び３次元画像を受信するための通信インターフェイス、又は、記録媒体に記録された第１正面画像及び３次元画像を読み出すためのインターフェイスである。

正面画像作成部は、上記の実施形態と同様に、３次元画像から第２正面画像を作成するように構成される。

評価部は、上記の実施形態と同様に、第１正面画像と第２正面画像との間の一致度を評価するように構成される。

このような実施形態に係る眼科画像処理装置は、典型的には、上記の実施形態の構成要素から光学系１００と光学系移動機構１００Ａと画像形成部２１０とを削除し、且つ、画像受付部（上記のインターフェイス等）を付加したものである。この実施形態に係る眼科画像処理装置は、例えば、医療機関に設置された情報処理装置（サーバー、コンピュータ端末など）、クラウドサーバー、モバイルコンピュータなどであってよい。

このような実施形態によれば、横方向分解能が比較的高い第１正面画像と、横方向分解能が比較的低い第２正面画像との間の一致の度合を評価することができる。それにより、第１正面画像と第２正面画像との間の関係を把握したり、これらの間の対応付けを行ったり、双方を用いた画像処理や解析処理を行ったりすることが可能となる。

１００ 光学系
１３０ ＳＬＯ光学系
１４０ ＯＣＴ光学系
２１１ ＳＬＯ画像形成部
２１２ ＯＣＴ画像形成部
２２０ データ処理部
２２１ 正面画像作成部
２２１１ セグメンテーション部
２２１２ 投影処理部
２２２ レジストレーション部
２２２１ 前処理部
２２２２ 特徴点検出部
２２２３ 位置合わせ部
２２３ 評価部
２２４ 画像加工部
２２５ 画像特定部
２２６ 判定部
２２７ 選択部
２２８ レジストレーション部
２２９ 選択部

Claims (2)

1. 被検眼を撮影して第１正面画像を取得する正面画像取得部と、
   前記被検眼をスキャンして３次元画像を取得する３次元画像取得部と、
   前記３次元画像から第２正面画像を作成する正面画像作成部と、
   前記第１正面画像と前記第２正面画像との間の一致度を評価する評価部と、
   前記評価部により求められた前記一致度の評価値が所定条件を満足するときに、前記第１正面画像に基づいて前記第２正面画像を加工する画像加工部と
   を含み、
   前記画像加工部は、前記第１正面画像の一部を前記第２正面画像に埋め込む
   ことを特徴とする眼科撮影装置。
2. 被検眼を撮影して第１正面画像を取得する正面画像取得部と、
   前記被検眼をスキャンして３次元画像を取得する３次元画像取得部と、
   前記３次元画像から第２正面画像を作成する正面画像作成部と、
   前記第１正面画像と前記第２正面画像との間の一致度を評価する評価部と、
   前記評価部により求められた前記一致度の評価値が所定条件を満足するときに、前記第１正面画像に基づいて前記第２正面画像を加工する画像加工部と
   を含み、
   前記画像加工部は、前記第１正面画像に基づいて前記第２正面画像の画素値を変更する
   ことを特徴とする眼科撮影装置。

Images