JP5989523B2 - 眼科装置 - Google Patents

眼科装置 Download PDF

Info

Publication number
JP5989523B2
JP5989523B2 JP2012261893A JP2012261893A JP5989523B2 JP 5989523 B2 JP5989523 B2 JP 5989523B2 JP 2012261893 A JP2012261893 A JP 2012261893A JP 2012261893 A JP2012261893 A JP 2012261893A JP 5989523 B2 JP5989523 B2 JP 5989523B2
Authority
JP
Japan
Prior art keywords
unit
image
optical system
eye
control unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2012261893A
Other languages
English (en)
Other versions
JP2013248376A (ja
Inventor
隆 藤村
隆 藤村
大策 子川
大策 子川
隆一 森嶋
隆一 森嶋
浩昭 岡田
浩昭 岡田
林 健史
健史 林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Topcon Corp
Original Assignee
Topcon Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority to JP2012261893A priority Critical patent/JP5989523B2/ja
Application filed by Topcon Corp filed Critical Topcon Corp
Priority to ES13784763.8T priority patent/ES2629514T3/es
Priority to PCT/JP2013/060993 priority patent/WO2013164943A1/ja
Priority to US14/396,220 priority patent/US9526416B2/en
Priority to PL13784763T priority patent/PL2845534T3/pl
Priority to EP13784763.8A priority patent/EP2845534B1/en
Publication of JP2013248376A publication Critical patent/JP2013248376A/ja
Priority to US15/233,616 priority patent/US9980643B2/en
Application granted granted Critical
Publication of JP5989523B2 publication Critical patent/JP5989523B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/14Arrangements specially adapted for eye photography
    • A61B3/15Arrangements specially adapted for eye photography with means for aligning, spacing or blocking spurious reflection ; with means for relaxing
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/0016Operational features thereof
    • A61B3/0025Operational features thereof characterised by electronic signal processing, e.g. eye models
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/0016Operational features thereof
    • A61B3/0041Operational features thereof characterised by display arrangements
    • A61B3/0058Operational features thereof characterised by display arrangements for multiple images
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/0083Apparatus for testing the eyes; Instruments for examining the eyes provided with means for patient positioning
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/14Arrangements specially adapted for eye photography
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/14Arrangements specially adapted for eye photography
    • A61B3/145Arrangements specially adapted for eye photography by video means
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/14Arrangements specially adapted for eye photography
    • A61B3/15Arrangements specially adapted for eye photography with means for aligning, spacing or blocking spurious reflection ; with means for relaxing
    • A61B3/152Arrangements specially adapted for eye photography with means for aligning, spacing or blocking spurious reflection ; with means for relaxing for aligning
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/14Arrangements specially adapted for eye photography
    • A61B3/15Arrangements specially adapted for eye photography with means for aligning, spacing or blocking spurious reflection ; with means for relaxing
    • A61B3/154Arrangements specially adapted for eye photography with means for aligning, spacing or blocking spurious reflection ; with means for relaxing for spacing

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Medical Informatics (AREA)
  • Surgery (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Physics & Mathematics (AREA)
  • Molecular Biology (AREA)
  • Ophthalmology & Optometry (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Eye Examination Apparatus (AREA)

Description

この発明は、被検眼を光学的に検査する眼科装置に関する。
眼科装置には、被検眼の画像を得るための眼科撮影装置と、被検眼の特性を測定するための眼科測定装置が含まれる。
眼科撮影装置の例として、光コヒーレンストモグラフィ(Optical Coherence Tomography、OCT)を用いて断層像を得る光干渉断層計、眼底を写真撮影する眼底カメラ、共焦点光学系を用いたレーザ走査により眼底の画像を得る走査型レーザ検眼鏡(Scanning Laser Ophthalmoscope、SLO)、スリット光を用いて角膜の光切片を切り取ることにより画像を得るスリットランプなどがある。
また、眼科測定装置の例として、被検眼の屈折特性を測定する眼屈折検査装置(レフラクトメータ、ケラトメータ)、眼圧計、角膜の特性(角膜厚、細胞分布等)を得るスペキュラーマイクロスコープ、ハルトマン−シャックセンサを用いて被検眼の収差情報を得るウェーブフロントアナライザなどがある。
これら装置を用いた眼科検査においては、検査の精度や確度の観点から、装置光学系と被検眼との位置合わせが極めて重要である。この位置合わせにはアライメントやトラッキングがある。アライメントには、被検眼の軸に対して装置光学系の光軸を一致させる動作(xyアライメント)と、被検眼と装置光学系との間の距離を合わせる動作(zアライメント)とが含まれる。トラッキングは、被検眼の動きを検出して装置光学系の位置を被検眼に追従させるものである。
特開2009−112664号公報 特許第4136690号公報
従来の位置合わせでは、xy方向(光軸に垂直な方向)の位置合わせとz方向(光軸に沿う方向)の位置合わせとを異なる手法で行なっている。つまり、位置合わせを行うためには被検眼と装置光学系との位置関係を検出する必要があるが、xy方向の位置関係とz方向の位置関係とを異なる手法で求めている。それにより双方の位置合わせの間に誤差が生じ、取得された画像や測定値の確度が低下すること、そして検査の再現性の低下などが問題となっていた。また、2系統の位置合わせに対応して異なる2系統の光学系や演算機能を搭載しなければならないなど、装置構成の複雑化も問題視されていた。
また、眼科装置には、被検者の顔を保持して被検眼の位置を固定するための顎受けや額当てが用いられる。従来、顎受けや額当ての位置の調整は、検者が操作することによって行われていた。装置光学系の高さ位置の調整についても同様に、検者によって行われていた。これらの作業は撮影や測定の効率を低減させるものであり、被検者や検者への負担となる可能性があった。
また、従来の眼科装置では、装置光学系や顎受け等を移動させているときに、被検眼と装置光学系が好適な位置関係に近づいているのか、或いはそれから遠のいているのかを判断することが困難であった。実際、従来の眼科装置では、所望の位置に一旦移動させ、その状態で得られる赤外観察像などを参照して当該判断を行うしか方法がなかった。
この発明の目的は、被検眼と装置光学系との間の位置合わせを好適に行うことが可能な眼科装置を提供することにある。
上記目的を達成するために、請求項1に記載の発明は、被検眼を検査するための検査用光学系と、被検者の顔を支持する支持部と、前記検査用光学系と前記支持部とを相対的にかつ3次元的に移動する駆動部と、被検眼の前眼部を異なる方向から実質的に同時に撮影する2以上の撮影部と、前記2以上の撮影部により実質的に同時に得られた2以上の撮影画像を解析することで、被検眼の3次元位置を求める解析部と、前記3次元位置に基づき前記駆動部を制御することで、前記検査用光学系と前記支持部とを相対移動させる制御部とを有する眼科装置である。
請求項2に記載の発明は、請求項1に記載の眼科装置であって、前記駆動部は、前記検査用光学系を3次元的に移動する第1駆動部を含み、前記制御部は、前記3次元位置に基づいて、前記検査用光学系の光軸を被検眼の軸に合わせるように、かつ、被検眼に対する前記検査用光学系の距離が所定の作動距離になるように前記第1駆動部を制御することを特徴とする。
請求項3に記載の発明は、請求項2に記載の眼科装置であって、前記解析部は、前記2以上の撮影画像のそれぞれを解析することで、前眼部の所定の特徴部位に相当する当該撮影画像中の特徴位置を特定する特徴位置特定部と、前記2以上の撮影部の位置と前記2以上の撮影画像中の前記特徴位置とに基づいて、前記特徴部位の3次元位置を前記被検眼の3次元位置として算出する3次元位置算出部とを含むことを特徴とする。
請求項4に記載の発明は、請求項3に記載の眼科装置であって、光路の一部を前記検査用光学系と共有し、被検眼の前眼部を動画撮影する動画撮影光学系と、被検眼に対する前記検査用光学系の位置合わせを行うための指標を被検眼に投影する投影光学系と、操作部とを有し、前記制御部は、前記特徴位置特定部により前記特徴位置が特定されなかった場合に、前記投影光学系を制御して前記指標を被検眼に投影させ、前記指標が投影された状態の前眼部の動画像を前記動画撮影光学系に取得させ、取得された前記動画像を表示部に表示させ、前記操作部を用いた操作に応じて前記第1駆動部を制御して前記検査用光学系を移動させることを特徴とする。
請求項5に記載の発明は、請求項4に記載の眼科装置であって、前記操作部を用いて前記検査用光学系が移動された後に、前記特徴位置特定部は、前記特徴部位に相当する前記動画像中の画像位置を特定し、前記制御部は、特定された前記画像位置を示す情報を前記動画像に重ねて表示させることを特徴とする。
請求項6に記載の発明は、請求項3に記載の眼科装置であって、前記特徴部位は前眼部の瞳孔中心または角膜頂点であることを特徴とする。
請求項7に記載の発明は、請求項3に記載の眼科装置であって、操作部を有し、前記制御部は、前記2以上の撮影画像のうちの少なくとも1つを表示部に表示させ、前記3次元位置算出部は、前記特徴位置特定部により前記特徴位置が特定されなかった場合に、前記2以上の撮影部の位置と、表示された撮影画像に対して前記操作部を用いて指定された画像位置とに基づいて、前記特徴部位の3次元位置の算出を行なうことを特徴とする。
請求項8に記載の発明は、請求項7に記載の眼科装置であって、前記3次元位置算出部は、前記2以上の撮影画像のうちの1つの撮影画像に対して画像位置が指定された場合、当該指定された画像位置に対応する他の撮影画像中の画像位置を特定し、前記2以上の撮影部の位置と、当該指定された画像位置および当該特定された画像位置とに基づいて、前記特徴部位の3次元位置の算出を行なうことを特徴とする。
請求項9に記載の発明は、請求項7に記載の眼科装置であって、前記制御部は、前記2以上の撮影画像のそれぞれを解析して当該撮影画像の画質を評価し、画質の評価結果に基づき1つの撮影画像を選択して前記表示部に表示させることを特徴とする。
請求項10に記載の発明は、請求項3に記載の眼科装置であって、操作部を有し、前記特徴位置特定部は、前記2以上の撮影画像のそれぞれを解析することで、前記特徴位置の1以上の候補位置を特定し、前記制御部は、前記2以上の撮影画像のうちの少なくとも1つと、特定された候補位置を示す候補位置情報とを表示部に表示させ、前記3次元位置算出部は、前記2以上の撮影部の位置と、表示された1以上の候補位置情報のうち前記操作部を用いて指定された候補位置情報に対応する候補位置とに基づいて、前記特徴部位の3次元位置の算出を行なうことを特徴とする。
請求項11に記載の発明は、請求項2に記載の眼科装置であって、前記制御部は、前記検査用光学系の現在位置を取得する光学系位置取得部を含み、取得された前記現在位置と前記解析部により求められた前記被検眼の3次元位置とに基づいて、前記第1駆動部に前記検査用光学系を移動させることを特徴とする。
請求項12に記載の発明は、請求項2に記載の眼科装置であって、前記2以上の撮影部は、被検眼の前眼部を異なる方向から並行して動画撮影し、前記解析部は、前記動画撮影において実質的に同時に得られた2以上のフレームを逐次に解析することで、被検眼の3次元位置を逐次に求め、前記制御部は、逐次に求められる前記3次元位置に基づき前記第1駆動部を逐次に制御することにより、前記検査用光学系の位置を被検眼の動きに追従させることを特徴とする。
請求項13に記載の発明は、請求項2に記載の眼科装置であって、前記駆動部は、前記支持部を移動する第2駆動部を含み、前記制御部は、前記2以上の撮影部により実質的に同時に得られた2以上の撮影画像の前記解析部による解析結果に基づいて前記第2駆動部を制御することにより前記支持部を移動させることを特徴とする。
請求項14に記載の発明は、請求項13に記載の眼科装置であって、前記第2駆動部は少なくとも上下方向に前記支持部を移動することを特徴とする。
請求項15に記載の発明は、請求項13に記載の眼科装置であって、前記解析部は、前記2以上の撮影画像と前記2以上の撮影部の位置とに基づいて、前記支持部の移動目標位置を決定する移動目標位置決定部を含み、前記制御部は、前記支持部を前記移動目標位置に移動させるように前記第2駆動部を制御することを特徴とする。
請求項16に記載の発明は、請求項13に記載の眼科装置であって、被検者の変更を示す情報の入力がなされたときに、前記制御部は、前記支持部を所定の初期位置に移動させるように前記第2駆動部を制御することを特徴とする。
請求項17に記載の発明は、請求項13に記載の眼科装置であって、前記支持部に対する被検者の近接を検知する近接検知部を有し、前記近接が検知されたときに、前記制御部は、前記2以上の撮影部を制御して実質的に同時に撮影を行わせることを特徴とする。
請求項18に記載の発明は、請求項13に記載の眼科装置であって、被検者の識別情報を入力するための入力部と、検査において適用された前記検査用光学系の位置および/または前記支持部の位置を示す位置情報を、当該被検者の識別情報と関連付けて記憶する第1記憶部とを有し、前記制御部は、前記入力部により識別情報が入力されたときに、当該識別情報に関連付けられた位置情報を前記第1記憶部から取得し、取得された位置情報が示す位置に前記検査用光学系および/または前記支持部を移動させるように前記第1駆動部および/または前記第2駆動部を制御することを特徴とする。
請求項19に記載の発明は、請求項13に記載の眼科装置であって、前記支持部に対する被検者の顔の接触を検知する接触検知部を有し、前記接触が検知されているとき、前記制御部は、前記第1駆動部および前記第2駆動部のうち前記第1駆動部についてのみ制御を実行可能であることを特徴とする。
請求項20に記載の発明は、請求項19に記載の眼科装置であって、前記接触が検知されていないとき、前記制御部は、前記第1駆動部および前記第2駆動部の双方の制御を実行可能であることを特徴とする。
請求項21に記載の発明は、請求項13に記載の眼科装置であって、前記2以上の撮影部の少なくとも1つにより得られた撮影画像を解析することで、前眼部の画像が当該撮影画像中の所定領域に含まれているか否か判定する判定部を有し、前記制御部は、前眼部の画像が前記所定領域に含まれていると判定された場合には前記第1駆動部の制御を行い、前眼部の画像が前記所定領域に含まれていないと判定された場合には前記第2駆動部の制御を行うことを特徴とする。
請求項22に記載の発明は、請求項1に記載の眼科装置であって、前記2以上の撮影部のそれぞれは光学系を含み、前記2以上の撮影部のそれぞれについて、前記光学系により撮影画像に発生する歪曲収差に関する収差情報をあらかじめ記憶した第2記憶部を有し、前記解析部は、前記2以上の撮影画像のそれぞれの歪みを前記収差情報に基づいて補正する補正部を有し、補正された前記2以上の撮影画像に基づいて前記被検眼の3次元位置を求めることを特徴とする。
請求項23に記載の発明は、請求項22に記載の眼科装置であって、前記収差情報は、前記2以上の撮影部のそれぞれについて、所定の基準点に対する位置を違えて当該撮影部で前記基準点を撮影して得られた複数の撮影画像を解析することにより生成されることを特徴とする。
請求項24に記載の発明は、請求項1に記載の眼科装置であって、前記2以上の撮影部の少なくとも1つを移動する撮影移動部と、前記2以上の撮影部の少なくとも1つにより得られた撮影画像を解析することで、前眼部の画像が当該撮影画像中の所定領域に含まれているか否か判定する判定部とを有し、前記制御部は、前眼部の画像が前記所定領域に含まれていないと判定された場合に、前記撮影移動部を制御して前記2以上の撮影部の少なくとも1つを前記支持部から離れる方向および/または前記検査用光学系の光軸から離れる方向に移動させ、前記判定部は、前記2以上の撮影部の少なくとも1つが移動された後に、前記判定を再度行うことを特徴とする。
請求項25に記載の発明は、請求項1に記載の眼科装置であって、前記2以上の撮影部の少なくとも1つにより得られた撮影画像を解析することで、前眼部の画像が当該撮影画像中の所定領域に含まれているか否か判定する判定部を有し、前記制御部は、前眼部の画像が前記所定領域に含まれていないと判定された場合に、所定の警告情報を出力部に出力させることを特徴とする。
請求項26に記載の発明は、請求項1に記載の眼科装置であって、前記2以上の撮影部により実質的に同時に得られた2以上の撮影画像の合成画像を形成する画像合成部を有することを特徴とする。
請求項27に記載の発明は、請求項26に記載の眼科装置であって、前記制御部は前記合成画像を表示部に表示させることを特徴とする。
請求項28に記載の発明は、請求項1に記載の眼科装置であって、前記制御部は、前記2以上の撮影部により実質的に同時に得られた2以上の撮影画像の少なくとも1つを表示部に表示させることを特徴とする。
請求項29に記載の発明は、請求項1に記載の眼科装置であって、前記2以上の撮影部は、前記検査用光学系の光路外の異なる位置に設けられた2つのカメラからなることを特徴とする。
請求項30に記載の発明は、請求項1に記載の眼科装置であって、前記2以上の撮影部は、前記検査用光学系の光軸よりも下方に設けられていることを特徴とする。
請求項31に記載の発明は、請求項に記載の眼科装置であって、光路の一部を前記検査用光学系と共有し、被検眼の前眼部を動画撮影する動画撮影光学系と、被検眼に対する前記検査用光学系の位置合わせを行うための指標を被検眼に投影する投影光学系と、操作部とを有し、前記制御部は、前記投影光学系を制御して前記指標を被検眼に投影させ、前記指標が投影された状態の前眼部の動画像を前記動画撮影光学系に取得させ、取得された前記動画像を表示部に表示させ、前記解析部により取得された前記3次元位置に基づいて、被検眼と前記検査用光学系との相対位置を示す相対位置情報を取得し、取得された相対位置情報を前記表示部に表示させ、前記操作部を用いた操作に応じて前記第1駆動部を制御して前記検査用光学系を移動させることを特徴とする。
請求項32に記載の発明は、請求項31に記載の眼科装置であって、前記相対位置情報は、前記検査用光学系の光軸方向、並びに当該光軸方向に直交する水平方向および上下方向のそれぞれにおける前記相対位置を含むことを特徴とする。
請求項33に記載の発明は、請求項32に記載の眼科装置であって、前記制御部は、前記光軸方向における前記相対位置を表示色で示すことを特徴とする。
請求項34に記載の発明は、請求項31に記載の眼科装置であって、あらかじめ取得された被検眼の特性の測定情報を記憶する記憶部を有し、前記制御部は、前記3次元位置と前記測定情報とに基づいて前記相対位置情報を取得することを特徴とする。
請求項35に記載の発明は、請求項1に記載の眼科装置であって、前記2以上の撮影部のそれぞれと被検眼との間に、環境照明の波長以外の波長の光を遮断するフィルタが設けられていることを特徴とする。
請求項36に記載の発明は、被検眼を検査するための検査用光学系と、前記検査用光学系を3次元的に移動する駆動部と、被検眼の前眼部を異なる方向から実質的に同時に撮影する2以上の撮影部と、前記2以上の撮影部により実質的に同時に得られた2以上の撮影画像を解析することで、被検眼の3次元位置を求める解析部と、前記3次元位置に基づいて、前記検査用光学系の光軸を被検眼の軸に合わせるように、かつ、被検眼に対する前記検査用光学系の距離が所定の作動距離になるように前記駆動部を制御する制御部とを有する眼科装置である。
なお、上記した複数の請求項に係る構成を任意に組み合わせることが可能である。
この発明によれば、被検眼と装置光学系との間の位置合わせを好適に行うことが可能である。
実施形態に係る眼科装置の構成の一例を表す概略図である。 実施形態に係る眼科装置の構成の一例を表す概略図である。 実施形態に係る眼科装置の構成の一例を表す概略ブロック図である。 実施形態に係る眼科装置の構成の一例を表す概略図である。 実施形態に係る眼科装置の構成の一例を表す概略図である。 実施形態に係る眼科装置が実行する処理を説明するための概略図である。 実施形態に係る眼科装置が実行する処理を説明するための概略図である。 実施形態に係る眼科装置の動作例を表すフローチャートである。 実施形態に係る眼科装置の動作例を表すフローチャートである。 実施形態に係る眼科装置の動作例を表すフローチャートである。 実施形態に係る眼科装置の構成の一例を表す概略ブロック図である。 実施形態に係る眼科装置の動作例を表すフローチャートである。 実施形態に係る眼科装置の動作例を表すフローチャートである。 実施形態に係る眼科装置の動作例を表すフローチャートである。 変形例に係る眼科装置の構成の一例を表す概略ブロック図である。 実施形態に係る眼科装置の構成の一例を表す概略図である。 実施形態に係る眼科装置の動作例を表すフローチャートである。 実施形態に係る眼科装置の動作例を表すフローチャートである。
この発明に係る眼科装置の実施形態の一例について、図面を参照しながら詳細に説明する。この発明に係る眼科装置は被検眼の光学的な検査に用いられる。このような眼科装置には、前述のように、眼科撮影装置と眼科測定装置が含まれる。眼科撮影装置としては、光干渉断層計、眼底カメラ、走査型レーザ検眼鏡スリットランプなどがある。また、眼科測定装置としては、眼屈折検査装置、眼圧計、スペキュラーマイクロスコープ、ウェーブフロントアナライザなどがある。以下の実施形態では、光干渉断層計にこの発明を適用した場合について詳述するが、それ以外の任意の眼科装置にこの発明を適用することが可能である。
この明細書において、OCTによって取得される画像をOCT画像と総称することがある。また、OCT画像を形成するための計測動作をOCT計測と呼ぶことがある。なお、この明細書に記載された文献の記載内容を、以下の実施形態の内容として適宜援用することが可能である。
また、以下の実施形態では、低コヒーレンス光源と分光器が搭載された、いわゆるスペクトラルドメイン(Spectral Domain)タイプのOCTを用いた光干渉断層計について説明するが、スペクトラルドメイン以外のタイプ、たとえばスウェプトソースタイプ、インファスタイプのOCTの手法を用いた光干渉断層計に対してこの発明を適用することも可能である。なお、スウェプトソース(Swept Source)OCTとは、被測定物体に照射される光の波長を走査(波長掃引)し、各波長の光の反射光と参照光とを重ね合わせて得られる干渉光を検出してスペクトル強度分布を取得し、それに対してフーリエ変換を施すことにより被測定物体の形態を画像化する手法である。また、インファス(en−face)OCTとは、所定のビーム径を有する光を被測定物体に照射し、その反射光と参照光とを重ね合わせて得られる干渉光の成分を解析することにより、光の進行方向に直交する断面における被測定物体の画像を形成する手法であり、フルフィールド(full−field)タイプとも呼ばれる。
また、以下の実施形態ではOCT装置と眼底カメラとを組み合わせた装置について説明するが、この発明の適用対象はこのような複合機には限定されず、単体機としての眼科装置(たとえば眼底カメラ単体)にこの発明を適用することも可能である。
〈第1の実施形態〉
[構成]
図1に示すように、眼科装置1は、眼底カメラユニット2、OCTユニット100および演算制御ユニット200を含んで構成される。眼底カメラユニット2は、従来の眼底カメラとほぼ同様の光学系を有する。OCTユニット100には、眼底のOCT画像を取得するための光学系が設けられている。演算制御ユニット200は、各種の演算処理や制御処理等を実行するコンピュータを具備している。
〔眼底カメラユニット〕
図1に示す眼底カメラユニット2には、被検眼Eの眼底Efの表面形態を表す2次元画像(眼底像)を取得するための光学系が設けられている。眼底像には、観察画像や撮影画像などが含まれる。観察画像は、たとえば、近赤外光を用いて所定のフレームレートで形成されるモノクロの動画像である。なお、被検眼Eの前眼部Eaに光学系のピントが合っている場合、眼底カメラユニット2は前眼部Eaの観察画像を取得することができる。前眼部Eaを動画撮影するための光学系は「動画撮影光学系」の一例に相当する。撮影画像は、たとえば、可視光をフラッシュ発光して得られるカラー画像、または近赤外光若しくは可視光を照明光として用いたモノクロの静止画像であってもよい。眼底カメラユニット2は、これら以外の画像、たとえばフルオレセイン蛍光画像やインドシアニングリーン蛍光画像や自発蛍光画像などを取得可能に構成されていてもよい。
眼底カメラユニット2には、被検者の顔を支持するための顎受けと額当てが設けられている。顎受けおよび額当ては、図4Aおよび図4Bに示す支持部440に相当する。なお、図4Aおよび図4Bにおいて、符号410は、光学系駆動部2A等の駆動系や、演算制御回路が格納されたベースを示す。また、符号420は、ベース410上に設けられた、光学系が格納された筐体を示す。また、符号430は、筐体420の前面に突出して設けられた、対物レンズ22が収容されたレンズ収容部を示す。
眼底カメラユニット2には、照明光学系10と撮影光学系30が設けられている。照明光学系10は眼底Efに照明光を照射する。撮影光学系30は、この照明光の眼底反射光を撮像装置(CCDイメージセンサ(単にCCDと呼ぶことがある)35、38。)に導く。また、撮影光学系30は、OCTユニット100からの信号光を眼底Efに導くとともに、眼底Efを経由した信号光をOCTユニット100に導く。
照明光学系10の観察光源11は、たとえばハロゲンランプにより構成される。観察光源11から出力された光(観察照明光)は、曲面状の反射面を有する反射ミラー12により反射され、集光レンズ13を経由し、可視カットフィルタ14を透過して近赤外光となる。更に、観察照明光は、撮影光源15の近傍にて一旦集束し、ミラー16により反射され、リレーレンズ17、18、絞り19およびリレーレンズ20を経由する。そして、観察照明光は、孔開きミラー21の周辺部(孔部の周囲の領域)にて反射され、ダイクロイックミラー46を透過し、対物レンズ22により屈折されて眼底Efを照明する。なお、観察光源としてLED(Light Emitting Diode)を用いることも可能である。
観察照明光の眼底反射光は、対物レンズ22により屈折され、ダイクロイックミラー46を透過し、孔開きミラー21の中心領域に形成された孔部を通過し、ダイクロイックミラー55を透過し、合焦レンズ31を経由し、ミラー32により反射される。更に、この眼底反射光は、ハーフミラー39Aを透過し、ダイクロイックミラー33により反射され、集光レンズ34によりCCDイメージセンサ35の受光面に結像される。CCDイメージセンサ35は、たとえば所定のフレームレートで眼底反射光を検出する。表示装置3には、CCDイメージセンサ35により検出された眼底反射光に基づく画像(観察画像)が表示される。なお、撮影光学系のピントが前眼部に合わせられている場合、被検眼Eの前眼部の観察画像が表示される。
撮影光源15は、たとえばキセノンランプにより構成される。撮影光源15から出力された光(撮影照明光)は、観察照明光と同様の経路を通って眼底Efに照射される。撮影照明光の眼底反射光は、観察照明光のそれと同様の経路を通ってダイクロイックミラー33まで導かれ、ダイクロイックミラー33を透過し、ミラー36により反射され、集光レンズ37によりCCDイメージセンサ38の受光面に結像される。表示装置3には、CCDイメージセンサ38により検出された眼底反射光に基づく画像(撮影画像)が表示される。なお、観察画像を表示する表示装置3と撮影画像を表示する表示装置3は、同一のものであってもよいし、異なるものであってもよい。また、被検眼Eを赤外光で照明して同様の撮影を行う場合には、赤外の撮影画像が表示される。また、撮影光源としてLEDを用いることも可能である。
LCD(Liquid Crystal Display)39は、固視標や視力測定用指標を表示する。固視標は被検眼Eを固視させるための指標であり、眼底撮影時やOCT計測時などに使用される。
LCD39から出力された光は、その一部がハーフミラー39Aにて反射され、ミラー32に反射され、合焦レンズ31およびダイクロイックミラー55を経由し、孔開きミラー21の孔部を通過し、ダイクロイックミラー46を透過し、対物レンズ22により屈折されて眼底Efに投影される。
LCD39の画面上における固視標の表示位置を変更することにより、被検眼Eの固視位置を変更できる。被検眼Eの固視位置としては、たとえば従来の眼底カメラと同様に、眼底Efの黄斑部を中心とする画像を取得するための位置や、視神経乳頭を中心とする画像を取得するための位置や、黄斑部と視神経乳頭との間の眼底中心を中心とする画像を取得するための位置などがある。また、固視標の表示位置を任意に変更することも可能である。
更に、眼底カメラユニット2には、従来の眼底カメラと同様にアライメント光学系50とフォーカス光学系60が設けられている。アライメント光学系50は、被検眼Eに対する装置光学系の位置合わせ(アライメント)を行うための指標(アライメント指標)を生成する。アライメント指標を被検眼Eに投影するための構成は「投影光学系」の一例に相当する。フォーカス光学系60は、眼底Efに対してフォーカス(ピント)を合わせるための指標(スプリット指標)を生成する。
アライメント光学系50のLED51から出力された光(アライメント光)は、絞り52、53およびリレーレンズ54を経由してダイクロイックミラー55により反射され、孔開きミラー21の孔部を通過し、ダイクロイックミラー46を透過し、対物レンズ22により被検眼Eの角膜に投影される。
アライメント光の角膜反射光は、対物レンズ22、ダイクロイックミラー46および上記孔部を経由し、その一部がダイクロイックミラー55を透過し、合焦レンズ31を通過し、ミラー32により反射され、ハーフミラー39Aを透過し、ダイクロイックミラー33に反射され、集光レンズ34によりCCDイメージセンサ35の受光面に投影される。CCDイメージセンサ35による受光像(アライメント指標)は、観察画像とともに表示装置3に表示される。ユーザは、従来の眼底カメラと同様の操作を行ってアライメントを実施する。また、演算制御ユニット200がアライメント指標の位置を解析して光学系を移動させることによりアライメントを行ってもよい(オートアライメント機能)。なお、この実施形態では、後述の前眼部カメラ300を用いてオートアライメントを実行することができるので、アライメント指標を用いたオートアライメントが可能なことは必須な事項ではない。ただし、前眼部カメラ300を用いたオートアライメントが成功しなかったときにアライメント指標を用いたオートアライメントを行えるように構成したり、前眼部カメラ300を用いたオートアライメントとアライメント指標を用いたオートアライメントとを選択的に使用できるように構成したりすることも可能である。
フォーカス調整を行う際には、照明光学系10の光路上に反射棒67の反射面が斜設される。フォーカス光学系60のLED61から出力された光(フォーカス光)は、リレーレンズ62を通過し、スプリット指標板63により2つの光束に分離され、二孔絞り64を通過し、ミラー65に反射され、集光レンズ66により反射棒67の反射面に一旦結像されて反射される。更に、フォーカス光は、リレーレンズ20を経由し、孔開きミラー21に反射され、ダイクロイックミラー46を透過し、対物レンズ22により屈折されて眼底Efに投影される。
フォーカス光の眼底反射光は、アライメント光の角膜反射光と同様の経路を通ってCCDイメージセンサ35により検出される。CCDイメージセンサ35による受光像(スプリット指標)は、観察画像とともに表示装置3に表示される。演算制御ユニット200は、従来と同様に、スプリット指標の位置を解析して合焦レンズ31およびフォーカス光学系60を移動させてピント合わせを行う(オートフォーカス機能)。また、スプリット指標を視認しつつ手動でピント合わせを行ってもよい。
ダイクロイックミラー46は、眼底撮影用の光路からOCT計測用の光路を分岐させている。ダイクロイックミラー46は、OCT計測に用いられる波長帯の光を反射し、眼底撮影用の光を透過させる。このOCT計測用の光路には、OCTユニット100側から順に、コリメータレンズユニット40と、光路長変更部41と、ガルバノスキャナ42と、合焦レンズ43と、ミラー44と、リレーレンズ45とが設けられている。
光路長変更部41は、図1に示す矢印の方向に移動可能とされ、OCT計測用の光路の光路長を変更する。この光路長の変更は、被検眼Eの眼軸長に応じた光路長の補正や、干渉状態の調整などに利用される。光路長変更部41は、たとえばコーナーキューブと、これを移動する機構とを含んで構成される。
ガルバノスキャナ42は、OCT計測用の光路を通過する光(信号光LS)の進行方向を変更する。それにより、眼底Efを信号光LSで走査することができる。ガルバノスキャナ42は、たとえば、信号光LSをx方向に走査するガルバノミラーと、y方向に走査するガルバノミラーと、これらを独立に駆動する機構とを含んで構成される。それにより、信号光LSをxy平面上の任意の方向に走査することができる。
眼底カメラユニット2には前眼部カメラ300が設けられている。前眼部カメラ300は、前眼部Eaを異なる方向から実質的に同時に撮影する。この実施形態では、眼底カメラユニット2の被検者側の面に2台のカメラが設けられている(図4Aに示す前眼部カメラ300A、300Bを参照)。また、前眼部カメラ300Aおよび300Bはそれぞれ、図1および図4Aに示すように、照明光学系10の光路および撮影光学系30の光路から外れた位置に設けられている。以下、2台の前眼部カメラ300Aおよび300Bをまとめて符号300で表すことがある。
この実施形態では、2台の前眼部カメラ300Aおよび300Bが設けられているが、この発明における前眼部カメラの個数は2以上の任意の個数である。しかし、後述の演算処理を考慮すると、異なる2方向から実質的に同時に前眼部を撮影可能な構成であれば十分である。また、この実施形態では、照明光学系10および撮影光学系30とは別個に前眼部カメラ300を設けているが、少なくとも撮影光学系30を用いて同様の前眼部撮影を行うことができる。つまり、2以上の前眼部カメラのうちの1つを撮影光学系30を含む構成によって担うようにしてもよい。いずれにしても、この実施形態は、異なる2(以上の)方向から実質的に同時に前眼部を撮影可能に構成されていればよい。
なお、「実質的に同時」とは、2以上の前眼部カメラによる撮影において、眼球運動を無視できる程度の撮影タイミングのズレを許容することを示す。それにより、被検眼Eが実質的に同じ位置(向き)にあるときの画像を2以上の前眼部カメラによって取得することができる。
また、2以上の前眼部カメラによる撮影は動画撮影でも静止画撮影でもよいが、この実施形態では動画撮影を行う場合について特に詳しく説明する。動画撮影の場合、撮影開始タイミングを合わせるよう制御したり、フレームレートや各フレームの撮影タイミングを制御したりすることにより、上記した実質的に同時の前眼部撮影を実現することができる。一方、静止画撮影の場合、撮影タイミングを合わせるよう制御することにより、これを実現することができる。
〔OCTユニット〕
図2を参照しつつOCTユニット100の構成の一例を説明する。OCTユニット100には、眼底EfのOCT画像を取得するための光学系が設けられている。この光学系は、従来のスペクトラルドメインタイプのOCT装置と同様の構成を有する。すなわち、この光学系は、低コヒーレンス光を参照光と信号光に分割し、眼底Efを経由した信号光と参照光路を経由した参照光とを干渉させて干渉光を生成し、この干渉光のスペクトル成分を検出するように構成されている。この検出結果(検出信号)は演算制御ユニット200に送られる。
なお、スウェプトソースタイプのOCT装置の場合には、低コヒーレンス光源を出力する光源の代わりに波長掃引光源が設けられるとともに、干渉光をスペクトル分解する光学部材が設けられない。一般に、OCTユニット100の構成については、OCTのタイプに応じた公知の技術を任意に適用することができる。
光源ユニット101は広帯域の低コヒーレンス光L0を出力する。低コヒーレンス光L0は、たとえば、近赤外領域の波長帯(約800nm〜900nm程度)を含み、数十マイクロメートル程度の時間的コヒーレンス長を有する。なお、人眼では視認できない波長帯、たとえば1040〜1060nm程度の中心波長を有する近赤外光を低コヒーレンス光L0として用いてもよい。
光源ユニット101は、スーパールミネセントダイオード(Super Luminescent Diode:SLD)や、LEDや、SOA(Semiconductor Optical Amplifier)等の光出力デバイスを含んで構成される。
光源ユニット101から出力された低コヒーレンス光L0は、光ファイバ102によりファイバカプラ103に導かれて信号光LSと参照光LRに分割される。
参照光LRは、光ファイバ104により導かれて光減衰器(アッテネータ)105に到達する。光減衰器105は、公知の技術を用いて、演算制御ユニット200の制御の下、光ファイバ104に導かれる参照光LRの光量を自動で調整する。光減衰器105により光量が調整された参照光LRは、光ファイバ104により導かれて偏波調整器(偏波コントローラ)106に到達する。偏波調整器106は、たとえば、ループ状にされた光ファイバ104に対して外部から応力を与えることで、光ファイバ104内を導かれる参照光LRの偏光状態を調整する装置である。なお、偏波調整器106の構成はこれに限定されるものではなく、任意の公知技術を用いることが可能である。偏波調整器106により偏光状態が調整された参照光LRは、ファイバカプラ109に到達する。
ファイバカプラ103により生成された信号光LSは、光ファイバ107により導かれ、コリメータレンズユニット40により平行光束とされる。更に、信号光LSは、光路長変更部41、ガルバノスキャナ42、合焦レンズ43、ミラー44、およびリレーレンズ45を経由してダイクロイックミラー46に到達する。そして、信号光LSは、ダイクロイックミラー46により反射され、対物レンズ22により屈折されて眼底Efに照射される。信号光LSは、眼底Efの様々な深さ位置において散乱(反射を含む)される。眼底Efによる信号光LSの後方散乱光は、往路と同じ経路を逆向きに進行してファイバカプラ103に導かれ、光ファイバ108を経由してファイバカプラ109に到達する。
ファイバカプラ109は、信号光LSの後方散乱光と、光ファイバ104を経由した参照光LRとを干渉させる。これにより生成された干渉光LCは、光ファイバ110により導かれて出射端111から出射される。更に、干渉光LCは、コリメータレンズ112により平行光束とされ、回折格子113により分光(スペクトル分解)され、集光レンズ114により集光されてCCDイメージセンサ115の受光面に投影される。なお、図2に示す回折格子113は透過型であるが、たとえば反射型の回折格子など、他の形態の分光素子を用いることも可能である。
CCDイメージセンサ115は、たとえばラインセンサであり、分光された干渉光LCの各スペクトル成分を検出して電荷に変換する。CCDイメージセンサ115は、この電荷を蓄積して検出信号を生成し、これを演算制御ユニット200に送る。
この実施形態ではマイケルソン型の干渉計を採用しているが、たとえばマッハツェンダー型など任意のタイプの干渉計を適宜に採用することが可能である。また、CCDイメージセンサに代えて、他の形態のイメージセンサ、たとえばCMOS(Complementary Metal Oxide Semiconductor)イメージセンサなどを用いることが可能である。
〔演算制御ユニット〕
演算制御ユニット200の構成について説明する。演算制御ユニット200は、CCDイメージセンサ115から入力される検出信号を解析して眼底EfのOCT画像を形成する。そのための演算処理は、従来のスペクトラルドメインタイプのOCT装置と同様である。
また、演算制御ユニット200は、眼底カメラユニット2、表示装置3およびOCTユニット100の各部を制御する。たとえば演算制御ユニット200は、眼底EfのOCT画像を表示装置3に表示させる。
また、眼底カメラユニット2の制御として、演算制御ユニット200は、観察光源11、撮影光源15およびLED51、61の動作制御、LCD39の動作制御、合焦レンズ31、43の移動制御、反射棒67の移動制御、フォーカス光学系60の移動制御、光路長変更部41の移動制御、ガルバノスキャナ42の動作制御、前眼部カメラ300の動作制御などを行う。
また、OCTユニット100の制御として、演算制御ユニット200は、光源ユニット101の動作制御、光減衰器105の動作制御、偏波調整器106の動作制御、CCDイメージセンサ115の動作制御などを行う。
演算制御ユニット200は、たとえば、従来のコンピュータと同様に、マイクロプロセッサ、RAM、ROM、ハードディスクドライブ、通信インターフェイスなどを含んで構成される。ハードディスクドライブ等の記憶装置には、眼科装置1を制御するためのコンピュータプログラムが記憶されている。演算制御ユニット200は、各種の回路基板、たとえばOCT画像を形成するための回路基板を備えていてもよい。また、演算制御ユニット200は、キーボードやマウス等の操作デバイス(入力デバイス)や、LCD等の表示デバイスを備えていてもよい。
眼底カメラユニット2、表示装置3、OCTユニット100および演算制御ユニット200は、一体的に(つまり単一の筺体内に)構成されていてもよいし、2つ以上の筐体に別れて構成されていてもよい。
〔制御系〕
眼科装置1の制御系の構成について図3を参照しつつ説明する。
(制御部)
眼科装置1の制御系は、制御部210を中心に構成される。制御部210は、たとえば、前述のマイクロプロセッサ、RAM、ROM、ハードディスクドライブ、通信インターフェイス等を含んで構成される。制御部210には、主制御部211と、記憶部212と、光学系位置取得部213とが設けられている。
(主制御部)
主制御部211は前述した各種の動作制御を行う。なお、合焦レンズ31の移動制御は、図示しない合焦駆動部を制御して合焦レンズ31を光軸方向に移動させるものである。それにより、撮影光学系30の合焦位置が変更される。また、主制御部211は、光学系駆動部2Aを制御して、眼底カメラユニット2に設けられた光学系を3次元的に移動させることができる。
この制御は、オートアライメントやトラッキングにおいて実行される。ここで、トラッキングとは、被検眼Eの眼球運動に合わせて装置光学系を移動させるものである。トラッキングは、たとえばアライメントよりも後の段階で実行される(場合によってはピント合わせも事前に実行される)。トラッキングは、装置光学系の位置を眼球運動に追従させることにより、アライメント(およびピント)が合った好適な位置関係を維持する機能である。
なお、この実施形態の光学系駆動部2Aは眼底カメラユニット2に搭載された光学系を移動させるものであるが、光学系駆動部2Aによって眼底カメラユニット2に搭載された光学系およびOCTユニット100に搭載された光学系を移動させるように構成されていてもよい。光学系駆動部2Aは「第1駆動部」の一例である。
また、この実施形態の前眼部カメラ300は眼底カメラユニット2の筐体に設けられているので、光学系駆動部2Aを制御することにより前眼部カメラ300を移動させることができる。このような光学系駆動部2Aは「撮影移動部」の一例として機能するものである。また、2以上の前眼部カメラ300をそれぞれ独立に移動させることが可能な撮影移動部を設けることができる。具体的には、撮影移動部は、各前眼部カメラ300に対して設けた駆動機構(アクチュエータ、動力伝達機構等)を含む構成であってもよい。また、撮影移動部は、単一のアクチュエータにより発生された動力を前眼部カメラ300ごとに設けられた動力伝達機構によって伝達することにより、2以上の前眼部カメラ300を移動させるように構成されていてもよい。
また、主制御部211は、記憶部212にデータを書き込む処理や、記憶部212からデータを読み出す処理を行う。
(記憶部)
記憶部212は、各種のデータを記憶する。記憶部212に記憶されるデータとしては、たとえば、OCT画像の画像データ、眼底像の画像データ、被検眼情報などがある。被検眼情報は、患者IDや氏名などの被検者に関する情報や、左眼/右眼の識別情報などの被検眼に関する情報を含む。また、記憶部212には、眼科装置1を動作させるための各種プログラムやデータが記憶されている。
特に、記憶部212には収差情報212aがあらかじめ記憶されている。収差情報212aには、各前眼部カメラ300について、それに搭載された光学系の影響により撮影画像に発生する歪曲収差に関する情報が記録されている。ここで、前眼部カメラ300に搭載された光学系には、たとえばレンズ等の歪曲収差を発生させる光学素子が含まれている。収差情報212aは、これらの光学素子が撮影画像に与える歪みを定量化したパラメータと言える。
収差情報212aの生成方法の例を説明する。前眼部カメラ300の器差(歪曲収差の差異)を考慮して各前眼部カメラ300について次のような測定が行われる。作業者は、所定の基準点を準備する。基準点とは、歪曲収差の検出に用いられる撮影ターゲットである。作業者は、基準点と前眼部カメラ300との相対位置を変更しつつ複数回の撮影を行う。それにより、異なる方向から撮影された基準点の複数の撮影画像が得られる。作業者は、取得された複数の撮影画像をコンピュータで解析することにより、この前眼部カメラ300の収差情報212aを生成する。なお、この解析処理を行うコンピュータは、画像処理部230であってもよいし、それ以外の任意のコンピュータ(製品出荷前の検査用コンピュータ、メンテナンス用コンピュータ等)のであってもよい。
収差情報212aを生成するための解析処理には、たとえば以下の工程が含まれる:
各撮影画像から基準点に相当する画像領域を抽出する抽出工程;
各撮影画像における基準点に相当する画像領域の分布状態(座標)を算出する分布状態算出工程;
得られた分布状態に基づいて歪曲収差を表すパラメータを算出する歪曲収差算出工程;
得られたパラメータに基づいて歪曲収差を補正するための係数を算出する補正係数算出工程。
なお、光学系が画像に与える歪曲収差に関連するパラメータとしては、主点距離、主点位置(縦方向、横方向)、レンズのディストーション(放射方向、接線方向)などがある。収差情報212aは、各前眼部カメラ300の識別情報と、これに対応する補正係数とを関連付けた情報(たとえばテーブル情報)として構成される。このようにして生成された収差情報212aは、主制御部211によって記憶部212に格納される。このような収差情報212aの生成およびこれに基づく収差補正は、カメラのキャリブレーション(Calibration)などと呼ばれる。
(光学系位置取得部)
光学系位置取得部213は、眼科装置1に搭載された検査用光学系の現在位置を取得する。検査用光学系とは、被検眼Eを光学的に検査するために用いられる光学系である。この実施形態の眼科装置1(眼底カメラとOCT装置の複合機)における検査用光学系は、被検眼の画像を得るための光学系である。
光学系位置取得部213は、たとえば、主制御部211による光学系駆動部2Aの移動制御の内容を表す情報を受けて、光学系駆動部2Aにより移動される検査用光学系の現在位置を取得する。この処理の具体例を説明する。主制御部211は、所定のタイミング(装置起動時、患者情報入力時など)で光学系駆動部2Aを制御して、検査用光学系を所定の初期位置に移動させる。それ以降、主制御部211は、光学系駆動部2Aが制御される度に、その制御内容を記録する。それにより、制御内容の履歴が得られる。光学系位置取得部213は、この履歴を参照して現在までの制御内容を取得し、この制御内容に基づいて検査用光学系の現在位置を求める。
また、主制御部211が光学系駆動部2Aを制御する度にその制御内容を光学系位置取得部213に送信し、光学系位置取得部213が当該制御内容を受ける度に検査用光学系の現在位置を逐次求めるようにしてもよい。
他の構成例として、検査用光学系の位置を検知する位置センサを光学系位置取得部213に設けるようにしてもよい。
以上のようにして光学系位置取得部213により検査用光学系の現在位置が取得された場合、主制御部211は、取得された現在位置と、後述の解析部231により求められた被検眼Eの3次元位置とに基づいて、光学系駆動部2Aに検査用光学系を移動させることができる。具体的には、主制御部211は、光学系位置取得部213による取得結果によって検査用光学系の現在位置を認識し、解析部231による解析結果によって被検眼Eの3次元位置を認識する。そして、主制御部211は、被検眼Eの3次元位置に対する検査用光学系の位置が所定の位置関係になるように、検査用光学系の現在位置を起点としてその位置を変更する。この所定の位置関係は、x方向およびy方向の位置がそれぞれ一致し、かつ、z方向の距離が所定の作動距離になるようなものである。
(画像形成部)
画像形成部220は、CCDイメージセンサ115からの検出信号に基づいて、眼底Efの断層像の画像データを形成する。この処理には、従来のスペクトラルドメインタイプの光コヒーレンストモグラフィと同様に、ノイズ除去(ノイズ低減)、フィルタ処理、FFT(Fast Fourier Transform)などの処理が含まれている。他のタイプのOCT装置の場合、画像形成部220は、そのタイプに応じた公知の処理を実行する。
画像形成部220は、たとえば、前述の回路基板を含んで構成される。なお、この明細書では、「画像データ」と、それに基づく「画像」とを同一視することがある。
(画像処理部)
画像処理部230は、画像形成部220により形成された画像に対して各種の画像処理や解析処理を施す。たとえば、画像処理部230は、画像の輝度補正や分散補正等の各種補正処理を実行する。また、画像処理部230は、眼底カメラユニット2により得られた画像(眼底像、前眼部像等)に対して各種の画像処理や解析処理を施す。
画像処理部230は、断層像の間の画素を補間する補間処理などの公知の画像処理を実行して、眼底Efの3次元画像の画像データを形成する。なお、3次元画像の画像データとは、3次元座標系により画素の位置が定義された画像データを意味する。3次元画像の画像データとしては、3次元的に配列されたボクセルからなる画像データがある。この画像データは、ボリュームデータ或いはボクセルデータなどと呼ばれる。ボリュームデータに基づく画像を表示させる場合、画像処理部230は、このボリュームデータに対してレンダリング処理(ボリュームレンダリングやMIP(Maximum Intensity Projection:最大値投影)など)を施して、特定の視線方向から見たときの擬似的な3次元画像の画像データを形成する。表示部240Aには、この擬似的な3次元画像が表示される。
また、3次元画像の画像データとして、複数の断層像のスタックデータを形成することも可能である。スタックデータは、複数の走査線に沿って得られた複数の断層像を、走査線の位置関係に基づいて3次元的に配列させることで得られる画像データである。すなわち、スタックデータは、元々個別の2次元座標系により定義されていた複数の断層像を、1つの3次元座標系により表現する(つまり1つの3次元空間に埋め込む)ことにより得られる画像データである。
更に、画像処理部230には、解析部231と、画像判定部232と、画像合成部233とが設けられている。
(解析部)
解析部231は、2以上の前眼部カメラ300により実質的に同時に得られた2以上の撮影画像を解析することで、被検眼Eの3次元位置を求める。この処理を実行するための構成の一例として、解析部231には、画像補正部2311と、特徴位置特定部2312と、3次元位置算出部2313が設けられている。
(画像補正部)
画像補正部2311は、前眼部カメラ300により得られた各撮影画像の歪みを、記憶部212に記憶されている収差情報212aに基づいて補正する。この処理は、たとえば、歪曲収差を補正するための補正係数に基づく公知の画像処理技術によって実行される。画像補正部2311は「補正部」の一例である。なお、前眼部カメラ300の光学系が撮影画像に与える歪曲収差が十分に小さい場合などには、収差情報212aおよび画像補正部2311を設けなくてもよい。
(特徴位置特定部)
特徴位置特定部2312は、(画像補正部2311により歪曲収差が補正された)各撮影画像を解析することで、前眼部Eaの所定の特徴部位に相当する当該撮影画像中の位置(特徴位置と呼ぶ)を特定する。所定の特徴部位としては、たとえば被検眼Eの瞳孔中心または角膜頂点が用いられる。以下、瞳孔中心を特定する処理の具体例を説明する。
まず、特徴位置特定部2312は、撮影画像の画素値(輝度値など)の分布に基づいて、被検眼Eの瞳孔に相当する画像領域(瞳孔領域)を特定する。一般に瞳孔は他の部位よりも低い輝度で描画されるので、低輝度の画像領域を探索することによって瞳孔領域を特定することができる。このとき、瞳孔の形状を考慮して瞳孔領域を特定するようにしてもよい。つまり、略円形かつ低輝度の画像領域を探索することによって瞳孔領域を特定するように構成することができる。
次に、特徴位置特定部2312は、特定された瞳孔領域の中心位置を特定する。上記のように瞳孔は略円形であるので、瞳孔領域の輪郭を特定し、この輪郭(の近似円または近似楕円)の中心位置を特定し、これを瞳孔中心とすることができる。また、瞳孔領域の重心を求め、この重心位置を瞳孔中心としてもよい。
なお、他の特徴部位に対応する特徴位置を特定する場合であっても、上記と同様に撮影画像の画素値の分布に基づいて当該特徴位置を特定することが可能である。
(3次元位置算出部)
3次元位置算出部2313は、2以上の前眼部カメラ300の位置と、特徴位置特定部2312により特定された2以上の撮影画像中の特徴位置とに基づいて、被検眼Eの特徴部位の3次元位置を算出する。この処理について図5Aおよび図5Bを参照しつつ説明する。
図5Aは、被検眼Eと前眼部カメラ300Aおよび300Bとの間の位置関係を示す上面図である。図5Bは、被検眼Eと前眼部カメラ300Aおよび300Bとの間の位置関係を示す側面図である。2つの前眼部カメラ300Aおよび300Bの間の距離(基線長)を「B」で表す。2つの前眼部カメラ300Aおよび300Bの基線と、被検眼Eの特徴部位Pとの間の距離(撮影距離)を「H」で表す。各前眼部カメラ300Aおよび300Bと、その画面平面との間の距離(画面距離)を「f」で表す。
このような配置状態において、前眼部カメラ300Aおよび300Bによる撮影画像の分解能は次式で表される。ここで、Δpは画素分解能を表す。
xy方向の分解能(平面分解能):Δxy=H×Δp/f
z方向の分解能(奥行き分解能):Δz=H×H×Δp/(B×f)
3次元位置算出部2313は、2つの前眼部カメラ300Aおよび300Bの位置(既知である)と、2つの撮影画像において特徴部位Pに相当する特徴位置とに対して、図5Aおよび図5Bに示す配置関係を考慮した公知の三角法を適用することにより、特徴部位Pの3次元位置、つまり被検眼Eの3次元位置を算出する。
3次元位置算出部2313により算出された被検眼Eの3次元位置は制御部210に送られる。制御部210は、この3次元位置の算出結果に基づいて、検査用光学系の光軸を被検眼Eの軸に合わせるように、かつ、被検眼Eに対する検査用光学系の距離が所定の作動距離になるように光学系駆動部2Aを制御する。ここで、作動距離とは、ワーキングディスタンスとも呼ばれる既定値であり、検査用光学系を用いた検査時における被検眼Eと検査用光学系との間の距離を意味する。
また、前眼部カメラ300が前眼部Eaを異なる方向から並行して動画撮影する場合、たとえば次のような処理(1)および(2)を行うことにより、被検眼Eの動きに対する検査用光学系のトラッキングを実行することが可能である。
(1)解析部231が、2以上の前眼部カメラ300による動画撮影において実質的に同時に得られた2以上のフレームを逐次に解析することで、被検眼Eの3次元位置を逐次に求める。
(2)制御部210が、解析部231により逐次に求められる被検眼Eの3次元位置に基づき光学系駆動部2Aを逐次に制御することにより、検査用光学系の位置を被検眼Eの動きに追従させる。
(画像判定部)
画像判定部232は、2以上の前眼部カメラ300のうちの少なくとも1つにより得られた撮影画像を解析することで、前眼部Eaの画像が当該撮影画像中の所定領域に含まれているか否か判定する。
この所定領域は、前眼部カメラ300による撮影範囲内においてあらかじめ設定され、たとえば当該撮影範囲の中心を含む領域として設定される。ここで、前眼部カメラ300による撮影条件(前眼部カメラ300の位置、撮影倍率等)に応じて当該所定領域の範囲を変化させることができる。また、後述の特徴点の設定に応じて当該所定領域の範囲を決定することができる。また、被検者の顔を支持する支持部440(顎受け、額当て等。図4Aおよび図4Bを参照。)の位置またはその近傍位置に相当するように当該所定領域を設定することができる。画像判定部232は「判定部」の一例に相当する。
画像判定部232が実行する処理の具体例を説明する。まず、画像判定部232は、前眼部Eaの所定の特徴点に相当する画像領域を撮影画像中から特定する。この特徴点としては、瞳孔中心、瞳孔輪郭、虹彩中心、虹彩輪郭、角膜頂点などがある。特徴点に相当する画像領域の特定処理は、たとえば特徴位置特定部2312が実行する処理と同様である。なお、特徴点と特徴部位とが同一の場合には、特徴位置特定部2312による特定結果を画像判定部232が行う処理に利用することができる。
次に、画像判定部232は、特定された特徴点が撮影画像(のフレーム)中の所定領域に含まれているか否か判定する。この処理は、所定領域に相当する座標と特徴点の座標とを比較することによって行われる。
画像判定部232は、この判定結果を制御部210に送る。制御部210は、前眼部Eaの画像が所定領域に含まれていないと判定された場合に、光学系駆動部2A(撮影移動部)を制御して前眼部カメラ300を支持部440(つまり被検者の顔)から離れる方向および/または支持部440の外側方向に移動させる。支持部440から離れる方向とは、図1等に示す座標系における−z方向である。また、支持部440の外側方向とは、前眼部カメラ300が検査用光学系の光軸から離れる方向である。検査用光学系から離れる方向については、水平方向(±x方向)および/または垂直方向(±y方向)において定義することが可能である。つまり、xy平面内の任意の方向において、検査用光学系から離れる方向を定義することが可能である。
また、前眼部カメラ300の移動方向および/または移動距離については、たとえば、移動前における前眼部カメラ300と支持部440との位置関係に基づいて設定することができる。また、画像判定部232による判定処理と、前眼部カメラ300の移動処理とを交互に行うことにより、前眼部カメラ300を好適な位置に追い込んでいくように制御を行うことも可能である。また、特徴点に相当する画像領域と所定領域との間の距離(ピクセル数)に応じて前眼部カメラ300の移動方向および/または移動距離を決定するように構成してもよい。また、特徴点に相当する画像領域と所定領域内の所定位置(たとえば中心位置)との間の距離に応じて前眼部カメラ300の移動方向および/または移動距離を決定するように構成することも可能である。
画像判定部232による判定結果に基づく他の動作例を説明する。制御部210は、前眼部Eaの画像が所定領域に含まれていないと判定された場合に、所定の警告情報を出力部に出力させる。この出力部としては、表示部240A、図示しない音声出力部などがある。表示部240Aを出力部として用いる場合、制御部210は、所定の文字列情報、画像情報、ポップアップウインドウ等からなる警告メッセージを表示部240Aに表示させる。音声出力部を出力部として用いる場合、制御部210は、所定の音声情報、警告音等を音声出力部に出力させる。
このような警告情報によりユーザは前眼部Eaの画像が所定領域に含まれていないことを認識する。そして、ユーザは、操作部240Bを用いて前眼部カメラ300を3次元的に移動させる。なお、制御部210が、前眼部カメラ300の移動方向および/または移動距離を表す情報(移動情報)を警告情報とともに出力させるようにしてもよい。この移動情報は、たとえば、画像判定部232により得られる特徴点に相当する画像領域と所定領域との間の位置関係に基づいて生成される。ユーザによる手動での移動が完了したら、画像判定部232による判定処理を再度行うように構成してもよい。
(画像合成部)
画像合成部233は、2以上の前眼部カメラ300により実質的に同時に得られた2以上の撮影画像の合成画像を形成する。この合成画像の例として、2以上の撮影画像に基づく立体画像や視点変換により得られる画像(視点変換画像)がある。視点変換画像の視点は、たとえば検査用光学系の光軸上に設定される。これらの合成画像は公知の画像合成処理を用いることにより得られる。
以上のように機能する画像処理部230は、たとえば、前述のマイクロプロセッサ、RAM、ROM、ハードディスクドライブ、回路基板等を含んで構成される。ハードディスクドライブ等の記憶装置には、上記機能をマイクロプロセッサに実行させるコンピュータプログラムがあらかじめ格納されている。
(ユーザインターフェイス)
ユーザインターフェイス240には、表示部240Aと操作部240Bとが含まれる。表示部240Aは、前述した演算制御ユニット200の表示デバイスや表示装置3を含んで構成される。操作部240Bは、前述した演算制御ユニット200の操作デバイスを含んで構成される。操作部240Bには、眼科装置1の筐体や外部に設けられた各種のボタンやキーが含まれていてもよい。たとえば眼底カメラユニット2が従来の眼底カメラと同様の筺体を有する場合、操作部240Bは、この筺体に設けられたジョイスティックや操作パネル等を含んでいてもよい。また、表示部240Aは、眼底カメラユニット2の筺体に設けられたタッチパネルなどの各種表示デバイスを含んでいてもよい。
なお、表示部240Aと操作部240Bは、それぞれ個別のデバイスとして構成される必要はない。たとえばタッチパネルのように、表示機能と操作機能とが一体化されたデバイスを用いることも可能である。その場合、操作部240Bは、このタッチパネルとコンピュータプログラムとを含んで構成される。操作部240Bに対する操作内容は、電気信号として制御部210に入力される。また、表示部240Aに表示されたグラフィカルユーザインターフェイス(GUI)と、操作部240Bとを用いて、操作や情報入力を行うようにしてもよい。
[動作]
眼科装置1の動作について説明する。眼科装置1の動作例を図6〜図8に示す。なお、これら動作例のうちの任意の2つ以上を組み合わせることが可能である。
〔第1の動作例〕
図6を参照しつつ第1の動作例を説明する。第1の動作例は、眼科装置1によるオートアライメントの基本的な流れと、前眼部Eaの特徴部位(ここでは瞳孔中心)の特定が不調であった場合や前眼部Eaの画像が撮影画像中の所定領域に含まれていない場合に実行される処理とを説明するものである。
(S1:患者登録)
まず、ユーザは、ユーザインターフェイス240を用いて被検者の患者情報を入力する。患者情報としては、患者ID、患者氏名などがある。
(S2:撮影種別の選択)
次に、ユーザは、ユーザインターフェイス240を用いて、被検者に対して実施される撮影の種別を選択入力する。この撮影種別の項目としては、撮影部位(視神経乳頭、黄斑、双方等)、撮影眼(左眼、右眼、両眼)、画像撮影パターン(眼底像のみ、OCT画像のみ、双方)、OCTスキャンパターン(ラインスキャン、十字スキャン、ラジアルスキャン、円スキャン、3次元スキャン等)などがある。
(S3:オートアライメント開始)
撮影種別の選択が完了したらオートアライメントの開始指示がなされる。この開始指示は、ステップ2に示す撮影種別の選択を受けて制御部210が自動で行うものであってもよいし、操作部240Bを用いてユーザが手動で行うものであってもよい。
(S4:前眼部の撮影開始)
オートアライメントの開始指示がなされると、制御部210は前眼部カメラ300Aおよび300Bによる前眼部Eaの撮影をそれぞれ開始させる。この撮影は、前眼部Eaを撮影対象とする動画撮影である。各前眼部カメラ300Aおよび300Bは所定のフレームレートで動画撮影を行う。ここで、前眼部カメラ300Aおよび300Bによる撮影タイミングが制御部210によって同期されていてもよい。各前眼部カメラ300Aおよび300Bは、取得されたフレームをリアルタイムで順次に制御部210に送る。制御部210は、双方の前眼部カメラ300Aおよび300Bにより得られたフレームを、撮影タイミングに応じて対応付ける。つまり、制御部210は、双方の前眼部カメラ300Aおよび300Bにより実質的に同時に取得されたフレーム同士を対応付ける。この対応付けは、たとえば、上記の同期制御に基づいて、または、前眼部カメラ300Aおよび300Bからのフレームの入力タイミングに基づいて実行される。制御部210は、対応付けられた一対のフレームを解析部231に送る。
(S5:瞳孔中心の特定)
画像補正部2311は、制御部210から送られた各フレームの歪みを、記憶部212に記憶されている収差情報212aに基づいて補正する。この補正処理は前述の要領で実行される。歪みが補正された一対のフレームは、特徴位置特定部2312に送られる。
特徴位置特定部2312は、画像補正部2311から送られた各フレームを解析することで、前眼部Eaの瞳孔中心に相当する当該フレーム中の特徴位置を特定するための処理を実行する。
(S6:瞳孔中心の特定に成功したか?)
瞳孔中心に相当する特徴位置の特定に失敗した場合(S6:NO)、特徴位置特定部2312は、その旨を示す情報を制御部210に送り、ステップ7に移行する。一方、特徴位置の特定に成功した場合(S6:YES)、ステップ8に移行する。
(S7:前眼部カメラの移動)
特徴位置の特定に失敗した場合において(S6:NO)、制御部210は、特徴位置特定部2312からの情報を受けたことに対応し、前述の撮影移動部を制御して、前眼部カメラ300Aおよび300Bを支持部440から離れる方向および/または支持部440の外側方向に移動させる。
支持部440から離れる方向に前眼部カメラ300Aおよび300Bを移動させる場合、前眼部カメラ300Aおよび300Bと被検者(被検眼E)との間の距離が大きくなるので、被検者の顔面のより広い範囲を撮影することが可能となり、前眼部カメラ300Aおよび300Bによる好適な撮影可能範囲に被検眼Eが配置される可能性が高まる。また、支持部440の外側方向に前眼部カメラ300Aおよび300Bを移動させる場合、被検者の耳側の方向に前眼部カメラ300Aおよび300Bが移動するので、好適な撮影可能範囲に被検眼Eが配置される可能性が高まる。また、これら2方向への移動を組み合わせることにより、好適な撮影可能範囲に被検眼Eが配置される可能性が更に高まる。
この動作例では、前眼部カメラ300Aおよび300Bの移動中および移動後においても前眼部Eaの動画撮影は継続されているものとする。これに対し、前眼部カメラ300Aおよび300Bの移動に際して動画撮影を停止し、移動の完了後に自動または手動で動画撮影を再開するようにしてもよい。
ステップ7における前眼部カメラ300Aおよび300Bの移動の完了後には、前眼部カメラ300Aおよび300Bによる動画撮影、瞳孔中心の特定(ステップ5)、特定成功の判定(ステップ6)が再度実行される。なお、このルーチンが所定回数繰り返された場合に、手動でのアライメントに移行するように構成することができる。
(S8:前眼部の画像がフレームの所定領域内に位置するか?)
瞳孔中心に相当する特徴位置の特定に成功した場合(S6:YES)、画像判定部232は、前眼部Eaに相当する画像がフレームの所定領域内に位置しているか判定する。この動作例では、ステップ6で特定された特徴位置を用いて当該判定処理を実行する。なお、他の情報を用いて判定処理を行う場合には、ステップ5および6とステップ8との順序は任意である。
前眼部Eaの画像がフレームの所定領域内に位置していないと判定された場合(S8:NO)、ステップ7に移行して前述の処理が実行される。一方、前眼部Eaの画像がフレームの所定領域内に位置していると判定された場合(S8:YES)、ステップ9に移行する。
(S9:被検眼の3次元位置の算出)
3次元位置算出部2313は、前眼部カメラ300Aおよび300Bの位置と、特徴位置特定部2312により一対のフレームについて特定された特徴位置とに基づいて、被検眼Eの瞳孔中心の3次元位置を算出する。この処理は前述の要領で実行される。
(S10:検査用光学系の移動)
制御部210は、ステップ9で算出された瞳孔中心の3次元位置に基づいて、検査用光学系の光軸を被検眼Eの軸に合わせるように、かつ、被検眼Eに対する検査用光学系の距離が所定の作動距離になるように光学系駆動部2Aを制御する。
(S11:位置は収束?)
ステップ10による検査用光学系の移動がなされると、制御部210は、検査用光学系の位置が収束したか判定を行う。この判定処理は、たとえばアライメント指標を利用して行う。アライメント指標は、アライメントの状態に応じてその観察状態が変化する。具体的には、アライメントが好適な状態においてはアライメント指標の2つの像がほぼ同じ位置に観察され、アライメント状態が悪化するほど2つの像の位置が離れて観察される。制御部210は、CCDイメージセンサ35により撮影された2つの像の間の距離を求め、この距離が所定閾値以下であるか判断する。この距離が所定閾値以下であると判断された場合(S11:YES)、検査用光学系の位置は収束したものと判定して処理は終了となる。これに対し、この距離が所定閾値を超えると判断された場合(S11:NO)、検査用光学系の位置は収束していないと判定してステップ9に戻る。ステップ9〜ステップ11の処理は、たとえばステップ11において所定回数「NO」と判定されるまで繰り返される。ステップ11における「NO」の判定が所定回数繰り返された場合、制御部210は、たとえば所定の警告情報を出力させる。また、ステップ11における「NO」の判定が所定回数繰り返されたことに対応して、手動でのアライメントを行う動作モード、またはアライメント指標を用いたオートアライメントを行う動作モードに移行するように制御部210が制御を行うことも可能である。なお、位置収束判定処理はこれに限定されるものではなく、検査用光学系の位置が適切に収束しているか否かを判定可能な処理であればその手法は任意である。
以上で、この動作例によるアライメントの説明は終了である。なお、ステップ4(動画撮影)〜ステップ11(位置収束判定)を繰り返し実行することにより、被検眼Eに対する検査用光学系のトラッキングが可能である。なお、ステップ11の説明において、検査用光学系の位置が収束しない場合に(S11:NO)、ステップ9に戻るように記載しているが、ステップ5(瞳孔中心の特定)に戻るように構成することが可能である。すなわち、ステップ4において前眼部の撮影が開始された後、所定の時間間隔でフレームが順次に得られるが、ステップ5以降の処理は各フレーム(または、間引きして得られた各フレーム)に対して実行される。ステップ11の位置収束判定を再度行う場合には、新たに取得されたフレームに対してステップ5〜ステップ10の処理を実行し、それを受けて位置判定処理が再度実行されることとなる。
〔第2の動作例〕
図7を参照しつつ第2の動作例を説明する。第2の動作例は、前眼部Eaの特徴部位(ここでは瞳孔中心)の特定が不調であった場合や前眼部Eaの画像が撮影画像中の所定領域に含まれていない場合に警告情報を出力するものである。
(S21〜S25:患者登録〜瞳孔中心の特定)
ステップ21〜ステップ25は、第1の動作例のステップ1〜ステップ5と同様に実行される。
(S26:瞳孔中心の特定に成功したか?)
瞳孔中心に相当する特徴位置の特定に失敗した場合(S26:NO)、特徴位置特定部2312は、その旨を示す情報を制御部210に送り、ステップ27に移行する。一方、特徴位置の特定に成功した場合(S26:YES)、ステップ29に移行する。
(S27:警告情報の出力)
特徴位置の特定に失敗した場合において(S26:NO)、制御部210は、特徴位置特定部2312からの情報を受けたことに対応し、前述の警告情報を出力させる。
(S28:前眼部カメラの移動操作)
警告情報を認識したユーザは、操作部240Bを用いて前眼部カメラ300Aおよび300Bを移動させる。このとき、制御部210が前眼部カメラ300Aおよび300Bによる撮影画像を表示部240Aに表示させることができる。ユーザはこの表示画像を参照しつつ前眼部カメラ300Aおよび300Bの移動操作を行うことができる。
ステップ28における前眼部カメラ300Aおよび300Bの移動操作の完了後には、前眼部カメラ300Aおよび300Bによる動画撮影、瞳孔中心の特定(ステップ25)、特定成功の判定(ステップ26)が再度実行される。なお、このルーチンが所定回数繰り返された場合に、手動でのアライメントに移行するように構成することができる。
(S29:前眼部の画像がフレームの所定領域内に位置するか?)
瞳孔中心に相当する特徴位置の特定に成功した場合(S26:YES)、画像判定部232は、第1の動作例と同様に、前眼部Eaに相当する画像がフレームの所定領域内に位置しているか判定する。
前眼部Eaの画像がフレームの所定領域内に位置していないと判定された場合(S29:NO)、ステップ27に移行して警告情報の出力が実行され、更にステップ28に移行して前眼部カメラ300Aおよび300Bの移動操作が行われる。一方、前眼部Eaの画像がフレームの所定領域内に位置していると判定された場合(S29:YES)、ステップ30に移行する。
(S30:被検眼の3次元位置の算出)
3次元位置算出部2313は、第1の動作例と同様に、前眼部カメラ300Aおよび300Bの位置と、特徴位置特定部2312により一対のフレームについて特定された特徴位置とに基づいて、被検眼Eの瞳孔中心の3次元位置を算出する。
(S31:検査用光学系の移動)
制御部210は、ステップ30で算出された瞳孔中心の3次元位置に基づいて、検査用光学系の光軸を被検眼Eの軸に合わせるように、かつ、被検眼Eに対する検査用光学系の距離が所定の作動距離になるように光学系駆動部2Aを制御する。この処理は第1の動作例のステップ10と同様にして実行される。
(S32:位置は収束?)
ステップ31による検査用光学系の移動がなされると、制御部210は、第1の動作例のステップ11と同様の位置収束判定処理を行う。検査用光学系の位置が収束したと判定された場合(S32:YES)、処理は終了となる。一方、検査用光学系の位置が収束していないと判定された場合(S32:NO)、ステップ30に戻る。ステップ30〜ステップ32の処理の反復や警告については、第1の動作例と同様である。以上で、この動作例の説明は終了である。
〔第3の動作例〕
図8を参照しつつ第3の動作例を説明する。第3の動作例は、前眼部Eaの特徴部位(ここでは瞳孔中心)の特定が不調であった場合や前眼部Eaの画像が撮影画像中の所定領域に含まれていない場合に手動でのアライメントに移行するものである。
(S41〜S45:患者登録〜瞳孔中心の特定)
ステップ41〜ステップ45は、第1の動作例のステップ1〜ステップ5と同様に実行される。
(S46:瞳孔中心の特定に成功したか?)
瞳孔中心に相当する特徴位置の特定に失敗した場合(S46:NO)、特徴位置特定部2312は、その旨を示す情報を制御部210に送り、ステップ47に移行する。一方、特徴位置の特定に成功した場合(S46:YES)、ステップ49に移行する。
(S47:アライメント指標の投影)
特徴位置の特定に失敗した場合において(S46:NO)、制御部210は、特徴位置特定部2312からの情報を受けたことに対応し、アライメント光学系50を制御して被検眼Eにアライメント指標を投影させる。また、制御部210は、眼底カメラユニット2および表示部240Aを制御して、アライメント指標が投影された状態の前眼部Eaの観察画像(動画像)を表示させる。
(S48:手動アライメントの実行)
ユーザは、表示された観察画像を参照しつつ操作部240Bを用いて手動アライメントを実行する。この場合の処理は以上で終了となる。前眼部カメラ300Aおよび300Bによる動画撮影、瞳孔中心の特定(ステップ45)、特定成功の判定(ステップ46)のルーチンが所定回数繰り返された場合に、手動アライメントに移行するようにしてもよい。
(S49:前眼部の画像がフレームの所定領域内に位置するか?)
瞳孔中心に相当する特徴位置の特定に成功した場合(S46:YES)、画像判定部232は、第1の動作例と同様に、前眼部Eaに相当する画像がフレームの所定領域内に位置しているか判定する。
前眼部Eaの画像がフレームの所定領域内に位置していないと判定された場合(S49:NO)、ステップ47に移行して被検眼Eにアライメント指標が投影され、更にステップ48に移行して手動アライメントが行われる。一方、前眼部Eaの画像がフレームの所定領域内に位置していると判定された場合(S49:YES)、ステップ50に移行する。
(S50:被検眼の3次元位置の算出)
3次元位置算出部2313は、第1の動作例と同様に、前眼部カメラ300Aおよび300Bの位置と、特徴位置特定部2312により一対のフレームについて特定された特徴位置とに基づいて、被検眼Eの瞳孔中心の3次元位置を算出する。
(S51:検査用光学系の移動)
制御部210は、ステップ50で算出された瞳孔中心の3次元位置に基づいて、検査用光学系の光軸を被検眼Eの軸に合わせるように、かつ、被検眼Eに対する検査用光学系の距離が所定の作動距離になるように光学系駆動部2Aを制御する。この処理は第1の動作例のステップ10と同様にして実行される。
なお、ステップ48の手動アライメントが実行された後に、この手動アライメントの結果に基づき特定された前眼部Eaの特徴部位を示す情報を表示させることができる。この処理は、たとえば、特徴位置特定部2312が、特徴部位に相当する観察画像(のフレーム)中の画像位置を特定し、更に、制御部210が、特定された画像位置を示す情報を観察画像に重ねて表示させることにより実行される。
(S52:位置は収束?)
ステップ51による検査用光学系の移動がなされると、制御部210は、第1の動作例のステップ11と同様の位置収束判定処理を行う。検査用光学系の位置が収束したと判定された場合(S52:YES)、処理は終了となる。一方、検査用光学系の位置が収束していないと判定された場合(S52:NO)、ステップ50に戻る。ステップ50〜ステップ52の処理の反復や警告については、第1の動作例と同様である。以上で、この動作例の説明は終了である。
〔第4の動作例〕
第4の動作例は、第1〜第3の動作例を含むこの実施形態の任意の動作態様に組み合わせて適用可能なものである。
第4の動作例は画像合成部233を用いて実行される。すなわち、制御部210は、画像合成部233を制御して、2以上の前眼部カメラ300Aおよび300Bにより実質的に同時に得られた2つの撮影画像の合成画像を形成させる。この合成画像は、たとえば前述の立体画像や視点変換画像である。なお、この動作例の処理を実行されるタイミングは、2つの撮影画像が得られた後の任意のタイミングであってよい。
[作用・効果]
眼科装置1の作用および効果について説明する。
眼科装置1は、眼底カメラ光学系およびOCT光学系(検査用光学系)と、支持部440と、光学系駆動部2A(駆動部、第1駆動部)と、2つの前眼部カメラ300Aおよび300B(撮影部)と、解析部231と、制御部210とを有する。
検査用光学系は、被検眼Eを検査するための光学系であり、この実施形態では被検眼の画像を得るために用いられる。
光学系駆動部2Aは、検査用光学系を3次元的に移動する。それにより、検査用光学系と支持部440とが相対的にかつ3次元的に移動される。
前眼部カメラ300Aおよび300Bは、被検眼Eの前眼部Eaを異なる方向から実質的に同時に撮影する。なお、この実施形態では撮影部が2つ設けられているが、2以上の任意の個数であってよい。ただし、撮影部により得られる画像の使用目的を鑑みると2つで十分である。なお、撮影範囲が異なる3つ以上の撮影部を使用し、実質的に同時に得られた3つ以上の画像のうち好適なもの(たとえば前眼部Eaが好適に描写されているもの)を選択して後段の処理に供するように構成することも可能である。
解析部231は、2つの前眼部カメラ300Aおよび300Bにより実質的に同時に得られた2つの撮影画像を解析することで、被検眼Eの3次元位置を求める。
制御部210は、解析部231により求められた被検眼Eの3次元位置に基づき光学系駆動部2Aを制御することにより、検査用光学系と支持部440とを相対移動させる。つまり、この実施形態の制御部210は、解析部231により求められた被検眼Eの3次元位置に基づいて、検査用光学系の光軸を被検眼Eの軸に合わせるように、かつ、被検眼Eに対する検査用光学系の距離が所定の作動距離になるように光学系駆動部2Aを制御する。ここで、被検眼Eの軸とは、被検眼Eの角膜側から網膜側に向かう方向に定義された任意の軸であり、その例として眼軸や視軸がある。また、被検眼Eの軸は、許容できる範囲(測定誤差、器差等)のずれを含んでいてもよい。たとえば、この実施形態では画像を解析して前眼部Eaの特徴部位(瞳孔中心、角膜頂点等)を求めているが、前方から見た場合において瞳孔中心と角膜頂点とは一般には一致しない。被検眼Eの軸は、このような事項を考慮した範囲の誤差を含んでいてもよい。なお、この実施形態に係るアライメントやトラッキングの後には、検査用光学系を用いた検査(眼底撮影、OCT計測等)が実行されるので、被検眼Eの軸の誤差は、後段の検査に悪影響を与えない程度において許容されるものである。
解析部231は、特徴位置特定部2312と3次元位置算出部2313とを含んでいてもよい。特徴位置特定部2312は、2つの前眼部カメラ300Aおよび300Bにより実質的に同時に得られた2つの撮影画像のそれぞれを解析することで、前眼部Eaの所定の特徴部位に相当する当該撮影画像中の特徴位置を特定する。この特徴部位は、たとえば瞳孔中心または角膜頂点である。3次元位置算出部2313は、2つの前眼部カメラ300Aおよび300Bの位置と上記2つの撮影画像中の特徴位置とに基づいて特徴部位の3次元位置を求める。この特徴部位の3次元位置が被検眼Eの3次元位置として用いられる。
また、検査用光学系の現在位置を取得する光学系位置取得部213を制御部210に設けることができる。その場合、制御部210は、光学系位置取得部213により取得された現在位置と解析部231により求められた被検眼Eの3次元位置とに基づいて光学系駆動部2Aに検査用光学系を移動させるように構成される。
このような眼科装置1によれば、従来のようにxy方向(光軸に垂直な方向)の位置合わせとz方向(光軸に沿う方向)の位置合わせとを異なる手法で行なうのではなく、実質的に同時に取得された2以上の撮影画像に基づいて被検眼Eと検査用光学系との間の3次元的な位置関係を求めることが可能である。したがって、被検眼Eと眼科装置1の光学系との間の3次元的な位置合わせを高い確度で行うことが可能である。
眼科装置1は、動画撮影光学系と、アライメント光学系50(投影光学系)と、表示部240Aと、操作部240Bとを有していてもよい。動画撮影光学系は、光路の一部を検査用光学系と共有し、被検眼Eの前眼部Eaを動画撮影する。この実施形態では、眼底カメラ光学系において観察画像を取得するための構成部分が動画撮影光学系として用いられている。また、この動画撮影光学系は、OCT光学系との間において、光路の一部(対物レンズ22からダイクロイックミラー46までの間)を共有している。アライメント光学系50は、被検眼Eに対する検査用光学系の位置合わせを行うための指標(アライメント指標)を被検眼Eに投影する。制御部210は、特徴位置特定部2312により前眼部Eaの特徴位置が特定されなかった場合に、動作モードを手動アライメントモードに切り替える。具体的には、制御部210は、前眼部Eaの特徴部位が特定されなかった場合に、次の動作を実行させる:(1)アライメント光学系50を制御してアライメント指標を被検眼Eに投影させる;(2)アライメント指標が投影された状態の前眼部Eaの動画像を動画撮影光学系に取得させる;(3)動画撮影光学系により取得された前眼部Eaの動画像を表示部240Aに表示させる;(4)表示された動画像を参照しつつユーザが操作部240Bを用いて行った操作に応じて光学系駆動部2Aを制御して検査用光学系を移動させる。このような動作モードの切り替えを行うことにより、2以上の撮影画像に基づくオートアライメントに成功しなかった場合にスムースに手動でのアライメントに移行することが可能となる。それにより、検査時間の短縮を図ることができ、患者や検査者への負担の軽減を図ることが可能となる。
上記動作モードの切り替えに基づく手動アライメントが終了した後に、特徴位置特定部2312が上記特徴部位に相当する動画像中の画像位置を特定し、この特定された画像位置を示す情報を制御部210が動画像に重ねて表示させるように構成することができる。この構成によれば、手動アライメントの結果に基づき特定された特徴位置を動画像に基づきリアルタイムで把握することができる。なお、当該動作において、特徴位置特定部2312は、手動アライメントの終了後に順次に得られるフレームのそれぞれについて上記画像位置を特定し、制御部210は、各フレームに当該画像位置を示す情報を重畳して表示させることができる。それにより、フレーム内における当該画像位置の位置が被検眼Eの動きに応じて変化する動画像が得られる。
次のような構成を適用することにより、上記のオートアライメントと同様のトラッキングを実行することが可能である。そのために、2以上の撮影部は、被検眼Eの前眼部Eaを異なる方向から並行して動画撮影する。解析部231は、この動画撮影において実質的に同時に得られた2以上のフレームを逐次に解析することで、被検眼Eの3次元位置を逐次に求める。更に、制御部210は、解析部231により逐次に求められる3次元位置に基づき光学系駆動部2Aを逐次に制御することにより、検査用光学系の位置を被検眼Eの動きに追従させる。このような構成によれば、高確度のトラッキングを実現することが可能である。
解析部231による被検眼Eの3次元位置を求める処理を次のようにして行うことが可能である。この構成において、眼科装置1は、各撮影部の収差情報212aをあらかじめ記憶した記憶部212(第2記憶部)を有する。収差情報212aは、撮影部の光学系によりその撮影画像に発生する歪曲収差に関する情報である。収差情報212aは、所定の基準点に対する位置を違えて当該撮影部で前記基準点を撮影して得られた複数の撮影画像を解析することにより生成される。解析部231は、各撮影画像の歪みを当該撮影部に対応する収差情報212aに基づいて補正する画像補正部2311を有する。そして、解析部231は、画像補正部2311によりそれぞれ補正された2以上の撮影画像に基づいて被検眼Eの3次元位置を求める処理を行う。このような構成によれば、各撮影部の光学系に起因する歪曲収差を考慮することができるので、より高確度でのアライメントやトラッキングが可能となる。
検査の実施が可能な位置に被検眼Eが位置していない場合に、撮影部を好適な位置に移動させることができる。これを実現するために、眼科装置1は、撮影移動部と、支持部440と、画像判定部232(判定部)とを更に有する。撮影移動部は、2以上の撮影部の少なくとも1つを移動する。支持部440は、被検者の顔を支持する。画像判定部232は、2以上の撮影部の少なくとも1つにより得られた撮影画像を解析することで、前眼部Eaの画像が当該撮影画像中の所定領域に含まれているか否か判定する。制御部210は、前眼部Eaの画像が上記所定領域に含まれていないと判定された場合に、撮影移動部を制御して2以上の撮影部の少なくとも1つを支持部440から離れる方向および/または検査用光学系の光軸から離れる方向に移動させる。その後、画像判定部232は、上記判定処理を再度実行する。このような構成によれば、検査を行えない位置に被検眼Eが位置している場合に、被検眼Eの撮影に好適と考えられる方向に撮影部を移動させて再度判定処理を行うことができる。なお、この処理の態様の例として、撮影部を所定距離だけ移動させて段階的に判定処理を行う方法、所定速度で移動させながらリアルタイムで判定処理を行う方法などがある。また、上記判定処理において前眼部Eaの画像が撮影画像中の所定領域に含まれていると判定された場合、制御部210は、撮影部を移動させるためのルーチンから離脱して、後段の処理を実行させるための制御に移行する。
眼科装置1は、2以上の撮影部により実質的に同時に得られた2以上の撮影画像の合成画像を形成する画像合成部233を有していてもよい。その場合、制御部210は、画像合成部233により形成された合成画像を表示部240Aに表示させる。合成画像は、たとえば前述の立体画像や視点変換画像である。このような構成によれば、被検眼Eの多様な観察態様(立体的な画像、異なる視点での観察等)が実現される。
〈第2の実施形態〉
上記した第1の実施形態では、検査用光学系を移動させることにより、検査用光学系と支持部440との間の相対移動を実現している。この実施形態では、支持部440の移動が可能な構成を適用することにより当該相対移動を実現する場合について説明する。以下、第1の実施形態と同様の構成要素については同じ符号を用いることとする。また、この実施形態の眼科装置を符号1000で示す。
[構成]
眼科装置1000は、たとえば第1の実施形態の眼科装置1とほぼ同様のハードウェア構成を有する(図1および図2を参照)。眼科装置1000の制御系の構成例を図9に示す。図3に示す第1の実施形態の制御系との相違点は、解析部231に移動目標位置決定部2314が設けられていること、そして顎受け駆動部440Aおよび近接検知部500が設けられていることである。なお、図示は省略されているが、ユーザインターフェイス240には、第1の実施形態と同様に、表示部240Aと操作部240Bとが設けられている。また、第1の実施形態と共通の構成要素に関する説明は省略するが、眼科装置1000は、これら共通の構成要素を用いて第1の実施形態と同様の処理を実行することが可能である。以下、第1の実施形態と異なる部分を重点的に説明する。
(顎受け駆動部)
顎受け駆動部440Aは、主制御部211の制御を受けて支持部440を移動する。顎受け駆動部440Aは、少なくとも上下方向に支持部440を移動する。つまり、顎受け駆動部440Aは、上下方向にのみ支持部440を移動させるように構成されていてもよいし、上下方向に加えて左右方向および/または前後方向に支持部440を移動させるように構成されていてもよい。顎受け駆動部440Aは「第2駆動部」の一例である。
なお、この実施形態の第2駆動部は、被検者の顔を支持する複数の部材(顎受け、額当て等)を一体的に移動させるように機能するが、各部材を個別に移動させるように構成されていてもよい。たとえば、顎受けを移動させる駆動機構と額当てを移動させる駆動機構とを別々に設けるようにしてもよい。
(移動目標位置決定部)
移動目標位置決定部2314は、前眼部カメラ300Aおよび300Bにより実質的に同時に得られた2つの撮影画像と、前眼部カメラ300Aおよび300Bの位置とに基づいて、支持部440の移動目標位置を決定する。移動目標位置とは、後段の処理において支持部440が移動される位置を意味する。また、移動目標位置は、顎受け駆動部440Aによる支持部440の移動可能方向における位置を示す。たとえば支持部440が上下方向にのみ移動可能とされている場合、移動目標位置は上下方向における位置(つまり高さ位置)を示す。
移動目標位置決定部2314が実行する処理の例を説明する。前提として、第1の実施形態と同様に、この実施形態の眼科装置1000は、前眼部カメラ300Aおよび300Bを用いて実質的に同時に撮影を行なうことにより、視点の異なる2つの画像を取得する。移動目標位置決定部2314は、2つの撮影画像に対して公知の画像処理(たとえばパターンマッチング、閾値処理など)を施すことにより、2つの撮影画像の双方に描画されている所定の対象物に相当する画像領域を特定する。この対象物は、たとえば被検者の顔の部位(眼など)である。
更に、移動目標位置決定部2314は、前眼部カメラ300Aおよび300Bの位置から得られる2つの撮影画像の視差に基づいて、特定された画像領域に相当する3次元位置を取得する。この処理は、たとえば第1の実施形態で説明した被検眼Eの3次元位置を求める処理と同様にして実行することが可能である(図5A、図5Bを参照)。
なお、移動目標位置決定部2314は、後述の動作例で説明するように、被検眼Eの前眼部を撮影して得られた画像に基づいて移動目標位置を決定することも可能である。また、検査用光学系の位置と支持部440の位置とは相対的なものであるから、移動目標位置決定部2314は、上記と同様の処理を行うことにより、検査用光学系(眼底カメラユニット2)の移動目標位置を決定することも可能である。
(近接検知部)
近接検知部500は、支持部440に対する被検者の近接を検知する。近接検知部500は、たとえば近接センサを含んで構成される。近接センサは、近接スイッチなどとも呼ばれ、検出対象の移動情報や存在情報を電気信号に変換するデバイスである。近接センサに適用される検出方式としては、赤外線方式、静電容量方式、超音波方式などがある。また、明るさを検知する照度センサを近接センサとして用いることも可能である。
上記のようなセンサを用いずに被検者の近接を検知する方法の例を説明する。まず、前眼部カメラ300Aおよび300Bの少なくとも一方を用いて動画撮影を開始する。被検者が支持部440に近づいてくると、被検者(の顔)がフレームに入ってくる。画像処理部230は、当該動画撮影の各フレームを解析することで、被検者がフレームに入ってきたことを検出する。更に、画像処理部230は、逐次に入力されるフレームを解析することで、被検者の顔(の所定部位)の描画サイズの時系列変化を求める。そして、画像処理部230は、この描画サイズが所定値以上となったときに、被検者が支持部440に近接したと判定する。なお、描画サイズを示すパラメータは、たとえば、フレームのサイズや、描画されたオブジェクト(支持部440等)のサイズを基準として算出される。この例が適用される場合、前眼部カメラ300Aおよび300Bの少なくとも一方と、画像処理部230が、近接検知部500として機能する。
[動作]
眼科装置1000の動作について説明する。眼科装置1000の動作例を図10〜図12に示す。なお、これら動作例のうちの任意の2つ以上を組み合わせることが可能である。また、これら動作例のうちの任意の1つ以上と、第1の実施形態で説明した動作例のうちの任意の1つ以上とを組み合わせることも可能である。
〔第1の動作例〕
図10を参照しつつ第1の動作例を説明する。なお、第1の実施形態の図6に示すステップ1(患者登録)およびステップ2(撮影種別の選択)については、図10に示す処理の前または途中の任意のタイミングで行うことが可能である。
(S61:被検者の近接を検知する)
まず、主制御部211が、近接検知部500の動作を開始させる。近接検知部500は、少なくとも支持部440に対する被検者の近接を検知するまで、検知動作を継続する(S61:NO)。
(S62:前眼部撮影・画像表示を開始する)
近接検知部500が支持部440に対する被検者の近接を検知すると(S61:YES)、主制御部211は、前眼部カメラ300Aおよび300Bカメラを制御して被検眼Eの前眼部撮影を開始させる。更に、主制御部211は、この前眼部撮影において前眼部カメラ300Aおよび300Bの一方または双方により得られる画像を、リアルタイムで4表示部240Aに表示させる。双方の画像を表示させる場合、その表示画像は前述の合成画像(立体画像、視点変換画像等)であってよい。また、このステップの処理態様は、たとえば前眼部の動画撮影および動画表示である。
(S63:前眼部の画像がフレームの所定領域内に位置するか?)
解析部231および画像判定部232は、ステップ62で得られた画像を解析することにより、前眼部の画像がフレームの所定領域内に位置するか判定する。この処理は、第1の実施形態の図6のステップ5〜ステップ8と同様にして行うことが可能である。また、この処理は、ステップ62で開始された前眼部撮影において時系列的に得られる画像に対して逐次に行なうことが可能である。
前眼部の画像が所定領域内に位置すると判定された場合(S63:YES)、処理は、ステップ66のオートアライメント(検査用光学系の移動)に移行する。他方、前眼部の画像が所定領域内に位置しないと判定された場合(S63:NO)、処理は、ステップ64およびステップ65(支持部440の移動)に移行する。
(S64:移動目標位置を決定する)
前眼部の画像が所定領域内に位置しない場合(S63:NO)、移動目標位置決定部2314は、ステップ62の前眼部撮影において実質的に同時に得られた2つの撮影画像と、前眼部カメラ300Aおよび300Bの位置とに基づいて、支持部440の移動目標位置を決定する。
(S65:支持部を移動する)
主制御部211は、ステップ64で決定された移動目標位置に支持部440を移動させるように、顎受け駆動部440Aを制御する。支持部440の移動が完了したら、処理は、ステップ63の判定処理に戻る。すなわち、ステップ63において「YES(前眼部の画像が所定領域内に位置する)」と判定されるまで、ステップ63〜ステップ65が繰り返される。
この反復処理において、その反復回数が所定回数に達した場合、または処理が所定時間だけ継続された場合などに、当該反復処理を停止するとともに報知処理を行うことができる。この報知処理は、たとえば、支持部440の位置合わせを手動で行うことを促す情報を出力するものである。
(S66:検査用光学系を移動しつつオートアライメントを行う)
ステップ63において「YES」と判定された場合、主制御部211は、たとえば第1の実施形態の図6(特にステップ9〜ステップ11)に示すオートアライメントを行う。それにより、被検眼Eと検査用光学系との相対位置が、検査を実施可能な位置関係に導かれる。
〔第2の動作例〕
図11を参照しつつ第2の動作例を説明する。この動作例に係る処理は、被検者の変更に伴って実行されるものである。
(S71:被検者変更情報の入力)
まず、被検者の変更を示す情報(被検者変更情報)が主制御部211に入力される。この情報入力は、たとえば、一の被検者の検査を終了するタイミングで、または新たな被検者の検査を開始するタイミングで行われる。前者の例として、一の被検者の検査を終了する旨の操作が行われたタイミングや、一の被検者の検査で取得された情報を保存する処理を行うタイミングなどがある。後者の例として、新たな被検者の検査を開始する旨の操作が行われたタイミングや、第1の実施形態の図6のステップ1に示す患者登録が行われたタイミングなどがある。このような操作や処理が実行されたことを示す情報が被検者変更情報である。なお、所定の操作が行われたことを示す被検者変更情報は、操作部240Bから主制御部211に入力される。また、所定の処理が実行されたことは主制御部211自身が認識しているので、この場合の被検者変更情報は主制御部211から主制御部211自身に入力されると考えることができる。
(S72:支持部を初期位置に移動する)
被検者変更情報の入力を受けて、主制御部211は、支持部440を所定の初期位置に移動させるように顎受け駆動部440Aを制御する。この初期位置は事前に設定される。たとえば、身体を測定して得られる情報(身長、座高等)の標準値に基づき算出された高さ位置を初期位置とすることができる。また、被検者が腰掛ける椅子の高さを調整可能であり、かつ椅子の高さ情報を取得可能である場合には、椅子の高さを考慮して初期位置を決定することができる。たとえば、椅子の高さと上記標準値とに基づいて初期位置を決定することが可能である。また、患者登録が既になされている場合には、当該被検者の年齢や身長、座高等に基づいて初期位置を決定することができる。また、健康診断のように特定の年齢層(大人、小人等)や性別の被検者群に対して検査を行う場合には、その年齢層や性別に応じてあらかじめ設定された複数の初期位置を選択的に適用するように構成することが可能である。
(S73:検査用光学系と支持部の位置合わせを行う)
支持部440が初期位置に移動されたら、検査用光学系と支持部440との相対位置を合わせるための位置合わせが実行される。この位置合わせ処理は、たとえば第1の実施形態または第2の実施形態で説明した任意の動作例である。
〔第3の動作例〕
図12を参照しつつ第3の動作例を説明する。この動作例は、当該被検者に対して過去に実施された検査で適用された位置に、検査用光学系や支持部440を移動させるものである。
この動作例の前提として、眼科装置1000は、検査において適用された検査用光学系の位置および/または支持部440の位置を示す位置情報を、当該被検者の識別情報(患者ID等)と関連付けて記憶する機能を有する。この処理は、たとえば、患者登録において入力された患者IDと、実際の検査における位置情報とを関連付けて記憶するものである。その具体例として、各患者の電子カルテに、位置情報を記録させるための領域を設けることができる。患者IDと位置情報は、眼科装置1000に搭載された記憶装置(記憶部212)や、外部装置(電子カルテシステム)の記憶装置に記憶される。前者の場合、記憶部212が「第1記憶部」として機能する。後者の場合についても、眼科装置1000にて生成された位置情報を記憶部212に少なくとも一時的に記憶させた後に患者IDと関連付けて外部装置に送る処理と、過去に記憶された位置情報を外部装置から取得して患者IDと関連付けて記憶部212に少なくとも一時的に記憶させる処理が実行されるので、第1記憶部には少なくとも記憶部212が含まれると考えることができる。
(S81:患者登録)
まず、患者登録を行う。患者登録は、たとえば第1の実施形態と同様に、ユーザがユーザインターフェイス240を用いて被検者の患者情報(被検者の識別情報を含む)を入力することにより行われる。
(S82:位置情報を取得する)
主制御部211は、ステップ81で入力された識別情報に関連付けられた位置情報を取得する。この処理は、たとえば、入力された識別情報を検索クエリとして、記憶部212(または外部装置の記憶装置)内を検索することにより行われる。
なお、入力された識別情報に関連付けられた位置情報が取得されない場合も考えられる。その場合、目的の位置情報が取得されなかった旨や、以下の処理の代わりに所定の代替処理を行うよう促す旨の報知処理を実行するように構成することが可能である。この代替処理としては、手動での位置合わせや、第1の実施形態または第2の実施形態で説明した任意の処理がある。
(S83:位置情報が示す位置に検査用光学系・支持部を移動する)
主制御部211は、ステップ82で取得された位置情報が示す位置に検査用光学系および/または支持部440を移動させるように、光学系駆動部2Aおよび/または顎受け駆動部440Aを制御する。この処理において、検査用光学系と支持部440の双方の位置が位置情報に含まれる場合には、双方またはいずれか一方を移動可能である。また、検査用光学系と支持部440のいずれか一方のみの位置が位置情報に含まれる場合には、その一方を移動可能である。
(S84:検査用光学系と支持部の位置合わせを行う)
位置情報が示す位置に検査用光学系および/または支持部440を移動されたら、検査用光学系と支持部440との相対位置を合わせるための位置合わせが実行される。この位置合わせ処理は、たとえば第1の実施形態または第2の実施形態で説明した任意の動作例である。
なお、ステップ84の位置合わせ処理を行うのは、一般に、ステップ83の処理だけでは、被検眼Eと検査用光学系とを最適な位置関係に配置できないからである。その理由は、支持部440に対する顔の当接位置が微妙に異なること、被検眼Eの検査には非常に精密な位置合わせが必要であること、などである。
[変形例]
この実施形態の変形例について説明する。この変形例に係る眼科装置の例を図13に示す。この眼科装置1100は接触検知部600を有している。なお、図13には近接検知部500が記載されていないが、眼科装置1100は近接検知部500を有していてもよい。
接触検知部600は、支持部440に対する被検者の顔の接触を検知する。接触検知部600は、たとえば、支持部440において被検者の顔が接触する位置(顎受けの中央位置、額当ての中央位置等)に設けられている。接触検知部600は、接触を検知可能な任意の構成を有する。たとえば、接触検知部600は、接点の電気的な接続/非接続の切り替えにより接触状態であるか非接触状態であるかを判定可能なマイクロスイッチを含んで構成される。
接触検知部600による検出結果が接触状態を示しているとき、つまり支持部440に対して顔が接触しているとき、主制御部211は、顎受け駆動部440Aの制御は行わず、光学系駆動部2Aについてのみ制御を行う。たとえば、接触状態であるときに支持部440の移動要求が入力された場合、主制御部211は、この移動要求に応じた支持部440の移動を実行しない。このとき、支持部440の移動を受け付けられない旨の報知を行うことができる。また、接触状態であるときに検査用光学系の移動要求が入力された場合、主制御部211は、この移動要求に基づき光学系駆動部2Aを制御して検査用光学系を移動させることが可能である。
一方、接触検知部600による検出結果が非接触状態を示しているとき、つまり支持部440に対して顔が接触していないとき、主制御部211は、光学系駆動部2Aおよび顎受け駆動部440Aの双方の制御を実行することが可能である。
[作用・効果]
この実施形態に係る眼科装置(眼科装置1000および1100)の作用および効果について説明する。なお、第1の実施形態と共通する構成が奏する作用および効果は第1の実施形態と同様であるから、再度の説明は省略する。
この実施形態に係る眼科装置は、支持部440を移動する顎受け駆動部440A(第2駆動部)を含む。解析部231は、前眼部カメラ300Aおよび300Bにより実質的に同時に得られた2つの撮影画像を解析する。主制御部211(制御部)は、解析部231による解析結果に基づいて顎受け駆動部440Aを制御することにより支持部440を移動させる。このような眼科装置によれば、支持部440(および検査用光学系)を相対的に移動させることができるので、支持部440により顔を支持された被検者の被検眼Eと検査用光学系との間の位置合わせを好適に行うことが可能である。
解析部231は、前眼部カメラ300Aおよび300Bにより取得された撮影画像と、前眼部カメラ300Aおよび300Bの位置とに基づいて、支持部440の移動目標位置を決定する移動目標位置決定部2314を含んでいてもよい。その場合、主制御部211は、決定された移動目標位置に支持部440を移動させるように顎受け駆動部440Aを制御することができる。それにより、支持部440の移動動作を自動で行うことが可能となる。
被検者の変更を示す情報の入力がなされたときに、主制御部211は、支持部440を所定の初期位置に移動させるように顎受け駆動部440Aを制御することができる。それにより、支持部440の移動を所定位置から行うことができるので、被検眼Eと検査用光学系との間の位置合わせを迅速に行うことができる。
この実施形態に係る眼科装置は、支持部440に対する被検者の近接を検知する近接検知部500を有していてもよい。その場合、近接が検知されたときに、主制御部211は、実質的に同時に撮影を行うように前眼部カメラ300Aおよび300Bを制御することができる。それにより、前眼部の撮影およびそれを受けて実行される処理を、好適なタイミングで、かつ自動で行うことが可能となる。
この実施形態に係る眼科装置は、入力部と、第1記憶部とを有していてもよい。入力部は、被検者の識別情報を入力するためのものであり、前述したように操作部240Bや主制御部211により構成される。第1記憶部は、検査において適用された検査用光学系の位置および/または支持部440の位置を示す位置情報を、当該被検者の識別情報と関連付けて記憶するものであり、記憶部212を含んで構成される。このような構成が適用される場合において、主制御部211は、入力部により識別情報が入力されたときに、この識別情報に関連付けられた位置情報を第1記憶部から取得し、更に、この位置情報が示す位置に検査用光学系および/または支持部440を移動させるように、光学系駆動部2Aおよび/または顎受け駆動部440Aを制御することができる。それにより、過去の検査において適用された検査用光学系や支持部440の位置を再現することができる。したがって、被検眼Eと検査用光学系との間の位置合わせを迅速に行うことが可能である。
この実施形態に係る眼科装置は、支持部440に対する被検者の顔の接触を検知する接触検知部600を有していてもよい。その場合、接触検知部600により接触が検知されているときに、光学系駆動部2Aおよび顎受け駆動部440Aのうち光学系駆動部2Aについてのみ制御を実行可能であるように、主制御部211を構成することが可能である。一方、支持部440に対する顔の接触が検知されていないときには、光学系駆動部2Aおよび顎受け駆動部440Aの双方の制御を実行可能であるように、主制御部211を構成することが可能である。このような構成によれば、支持部440に顔を接触させた状態で支持部440が移動することを防止できる。
この実施形態に係る眼科装置は、前眼部カメラ300Aおよび300Bの少なくとも1つにより得られた撮影画像を解析することで、前眼部の画像が撮影画像(フレーム)中の所定領域に含まれているか否か判定する画像判定部232(判定部)を有していてもよい。その場合、前眼部の画像が所定領域に含まれていると判定された場合には光学系駆動部2Aの制御を行い、前眼部の画像が所定領域に含まれていないと判定された場合には顎受け駆動部440Aの制御を行うように、主制御部211を構成することが可能である。このような構成によれば、撮影画像に基づいて駆動制御を好適に使い分けることができる。たとえば前者の場合には検査用光学系の位置の微調整を行うことができ、後者の場合には支持部440の位置の粗調整を行うことができる。
〈第3の実施形態〉
この実施形態に係る眼科装置は、撮影部の配置を特徴とする。この実施形態に係る眼科装置の構成例を図14に示す。
第1の実施形態の図4Aと同様に、符号410はベースを示し、符号420は筐体を示し、符号430は対物レンズ22が収容されたレンズ収容部を示し、符号440は支持部440を示す。
この実施形態では、前眼部カメラ300Aおよび300Bが、対物レンズ22のレンズ中心22aよりも下方(−y方向)に配置されている。レンズ中心22aは、眼科装置の検査用光学系の光軸が通過する位置に相当する。y方向におけるレンズ中心22aと前眼部カメラ300Aおよび300Bとの変位は、後述の作用効果を考慮して任意に設定される。各前眼部カメラ300Aおよび300Bは、その光軸を上方に向けて(検査時には被検眼Eの方向に向けて)傾けた状態で配置されている。この傾き角度(仰角)についても任意に設定される。
また、「撮影部が検査用光学系の光軸よりも下方に設けられる」とは、撮影部全体が光軸よりも下方に位置する場合だけでなく、撮影部の一部が光軸と同じ高さ位置である場合や光軸よりも上方に位置する場合も含むものとする。たとえば、撮影部の外形が大きい場合に、その一部が検査用光学系の光軸よりも上方に位置することがありうる。なお、いずれの場合においても、撮影部の光軸が、検査用光学系の光軸を含む水平面に下方から交差するように、撮影部と検査用光学系との相対位置が設定されていればよい。
この実施形態によれば、前眼部カメラ300Aおよび300B(撮影部)により取得される撮影画像に被検者の瞼や睫毛が映り込む可能性を低減できる。また、眼の窪み(眼窩)が深い被検者であっても、好適に前眼部撮影を行うことができる。
〈第4の実施形態〉
撮影部により取得された撮影画像から前眼部の特徴部位(瞳孔中心、角膜頂点等)を検出できない場合がある。たとえば、睫毛が撮影画像に映り込んだ場合や、瞼が十分に開いていない状態で撮影が行われた場合に、このようなことが起こりうる。また、被検者の鼻が高い場合や眼の窪みが深い場合に、撮影視野が遮られて好適な撮影画像が得られないときにも、前眼部の特徴部位を検出できないことがある。また、化粧(アイシャドウ、マスカラなど)の影響によって好適な撮影画像が得られない場合もある。この実施形態では、撮影部により取得された撮影画像から前眼部の特徴部位を検出できない場合に適用可能な処理の例を説明する。
この実施形態に係る眼科装置は、たとえば第1の実施形態と同様の構成を有する(特に、図3を参照する)。この実施形態に係る眼窩装置の動作例を図15に示す。なお、患者登録、撮影種別の選択、およびオートアライメント開始操作は、既になされているものとする。
(S91:前眼部の撮影を開始する)
制御部210は、前眼部カメラ300Aおよび300Bを制御して前眼部Eaの撮影を開始させる。この撮影は、前眼部Eaを撮影対象とする動画撮影である。制御部210は、時系列的に取得される画像を表示部240Aに動画表示させる。
(S92:瞳孔中心の特定処理を行う)
画像補正部2311は、制御部210から送られた各フレームの歪みを、記憶部212に記憶されている収差情報212aに基づいて補正する。歪みが補正された一対のフレームは、特徴位置特定部2312に送られる。
特徴位置特定部2312は、画像補正部2311から送られた各フレームを解析することで、前眼部Eaの特徴部位(瞳孔中心とする)に相当する当該フレーム中の特徴位置を特定するための処理を実行する。
(S93:特定成功?)
瞳孔中心に相当する特徴位置の特定に成功した場合(S93:YES)、特徴位置特定部2312は、その旨を示す情報を制御部210に送り、ステップ94に移行する。一方、特徴位置の特定に失敗した場合(S93:NO)、特徴位置特定部2312は、その旨を示す情報を制御部210に送り、ステップ95に移行する。
(S94:オートアライメントを実行する)
ステップ93において特徴位置の特定に成功した場合(S93:YES)、制御部210は、装置各部を制御してオートアライメントを実行させる。このオートアライメント動作は、たとえば、第1の実施形態の図6のステップ8〜ステップ11に示す動作を含む。この場合におけるアライメント動作は、これで終了となる。
(S95:撮影画像・指定マークを表示する)
ステップ93において特徴位置の特定に失敗した場合(S93:NO)、制御部210は、前眼部カメラ300Aおよび300Bの一方または双方による撮影画像を表示部240Aに表示させる。また、制御部210は、ユーザによる画像位置の指定操作を補助するための指定マークを表示部240Aに表示させる。
指定マークについて説明する。指定マークは、撮影画像中の位置を示す画像であり、所定の形状(点状、十字状、矢印状など)を有する。指定マークは、常時表示されていてもよいし、後段のステップ96においてユーザが画像位置を指定したことに対応して表示されてもよい。
撮影画像の表示について説明する。ステップ95に移行する段階では、ステップ91で開始された動画表示が行われている。ステップ95における撮影画像の表示は、この動画像表示を継続させるものであってよい。また、この動画像表示から他の表示モードに切り替えてもよい。その一例として、この動画像表示に用いられている1つのフレームを表示させることができる。つまり、静止画像表示に切り替えることができる。表示されるフレームは、たとえば、ステップ95への移行タイミングで表示されたフレームである。
表示モードの切り替えの他の例を説明する。制御部210は、2つの前眼部カメラ300Aおよび300Bによりそれぞれ取得される撮影画像の一方を選択的に表示させることができる。この処理は、たとえば次のようにして実行される。
まず、制御部210は、前眼部カメラ300Aおよび300Bにより取得される撮影画像をそれぞれ解析し、その撮影画像の画質を評価する。この画質評価処理は、たとえば、フレアの有無や程度の評価、睫毛等の映り込みの評価、黒目の像の形態(形状、サイズ)の評価などがある。この「画質の評価」は、観察に適しているか否か、或いは観察にどの程度適しているかを示す、所定の要素を評価するものである。
画質評価処理は、適用されている要素に応じた処理内容を含む。たとえばフレアの評価では、画素値(輝度値)が所定閾値以上の画像領域が存在するか否かを判定する処理や、所定閾値に対する画素値の差を算出する処理や、当該判定結果や当該算出結果に基づいて画質を評価する処理などが実行される。また、睫毛等の映り込みの評価では、画素値に基づいて睫毛等(前眼部Ea以外の物体)に相当する画像領域を特定する処理や、その睫毛等の画像領域と前眼部Eaの画像領域との重なり状態を特定する処理や、特定された重なり状態に基づいて画質を評価する処理などが実行される。また、黒目の像の形態の評価では、黒目に相当する画像領域を特定する処理や、この画像領域の形態を求める処理や、求められた形態に基づいて画質を評価する処理などが実行される。
制御部210は、画質の評価結果に基づいて、前眼部カメラ300Aおよび300Bにより取得された撮影画像のうちから、1つの撮影画像を選択する。選択される撮影画像は、静止画像でも動画像でもよい。制御部210は、選択された撮影画像を表示部240Aに表示させる。
(S96:撮影画像中の位置を指定する)
ユーザは、ステップ95で表示された撮影画像を観察し、特徴部位(瞳孔中心)に相当する画像位置を指定する。この指定操作は操作部240Bを用いて行われる。指定操作の一例として、指定マーカを所望の位置に移動させる操作を、操作部240Bを用いて行うことができる。指定操作の他の例として、表示部240Aがタッチパネルである場合(つまり表示部240Aと操作部240Bが一体構成である場合)、ユーザは、表示されている撮影画像中の所望の位置にタッチする。撮影画像中の画像位置を指定したら、ユーザは、その指定結果を確定する操作を操作部240Bを用いて行う。制御部210は、指定された画像位置を示す位置情報を取得する。この位置情報は、たとえば、撮影画像が定義されている座標系における座標である。
なお、上記のように1つの撮影画像を表示させて画像位置を指定する代わりに、前眼部カメラ300Aおよび300Bにより取得された一対の撮影画像を表示させ、双方の撮影画像に対して画像位置を指定するように構成してもよい。その場合、2つの指定位置のたとえば平均位置、つまり2つの指定位置の座標の中間の座標を指定結果として位置情報を作成することができる。
(S97:被検眼の3次元位置を算出する)
3次元位置算出部2313は、前眼部カメラ300Aおよび300Bの位置と、ステップ96で指定された画像位置とに基づいて、前眼部Eaの特徴部位(瞳孔中心)の3次元位置を算出する。この処理は、たとえば第1の実施形態の図6のステップ9において、特徴位置特定部2312により特定された特徴位置の代わりに、ステップ96で指定された画像位置を用いて同様の処理を行うものである。ここで、上記位置情報は撮影画像が定義されている座標系における座標であるから、この代替適用を行うことは容易である。
ステップ96において、前眼部カメラ300Aおよび300Bの一方により取得された撮影画像に対してのみ画像位置の指定がなされた場合、3次元位置算出部2313は、他方により取得された撮影画像における対応位置を特定する処理を行う。この処理の例を説明する。まず、3次元位置算出部2313は、双方の撮影画像に対して画像位置合わせ処理を行って、双方の撮影画像の座標系を対応付ける(つまり双方の座標系の間の座標変換を求める)。3次元位置算出部2313は、この座標変換に基づいて、一方の撮影画像に対する指定位置に対応する、他方の撮影画像の画像位置を特定する。3次元位置算出部2313は、前眼部カメラ300Aおよび300Bの位置と、一方の撮影画像に対して指定された画像位置と、他の撮影画像について特定された画像位置とに基づいて、前眼部Eaの特徴部位の3次元位置を算出する。
(S98:アライメントを行う)
制御部210は、ステップ97で算出された瞳孔中心の3次元位置に基づいて、被検眼Eに対する検査用光学系のアライメントを行う。このアライメントは、たとえば、第1の実施形態の図6のステップ10(検査用光学系の移動処理)およびステップ11(位置の収束判定処理)と同様にして実行される。
この実施形態によれば、撮影画像から前眼部の特徴部位(瞳孔中心、角膜頂点等)を検出できない場合に、ユーザが指定した位置を用いてアライメントを行うことができる。したがって、特徴部位を検出できない場合であっても、円滑かつ迅速にアライメントを行うことができる。
[変形例]
特徴位置特定部2312により特定される画像位置を、前眼部Eaの特徴部位に相当する特徴位置の候補として扱うことができる。その場合の動作の例を説明する。
特徴位置特定部2312は、第1の実施形態と同様の処理を実行することで、特徴部位に相当する特徴位置の候補位置を特定する。特定される候補位置の数は1つまたは2つ以上である。
制御部210は、表示部240Aに撮影画像を表示させるとともに、特徴位置特定部2312により特定された各候補位置を示す情報(候補位置情報)を表示させる。候補位置情報は、たとえば、候補位置に相当する撮影画像中の位置(座標)を示す画像であり、所定の形状(点状、十字状、矢印状など)を有する。
ユーザは、表示されている候補位置情報のうち所望のものを指定する。この指定操作は操作部240Bを用いて行われる。3次元位置算出部2313は、指定された候補位置情報の座標と、前眼部カメラ300Aおよび300Bの位置とに基づいて、前眼部Eaの特徴部位の3次元位置を算出する。
なお、一方の撮影画像に対してのみ候補位置の指定がなされた場合などの処理については、上記実施形態と同様である。また、上記実施形態と同じ要領で、表示されている候補位置情報を任意に移動できるように構成することも可能である。
この変形例において、候補位置情報が1つだけ表示される場合、ユーザが行う指定操作は、その候補位置を容認するか否かを判断することに相当する。容認しない場合、ユーザは所定の操作を行う。この操作を受けた制御部210は、動作モードを上記実施形態の処理(図15)に切り替えることができる。
一方、2つ以上の候補位置情報が表示される場合、ユーザが行う指定操作は、候補位置を選択することに相当する。いずれの候補位置も選択しない場合、ユーザは所定の操作を行う。この操作を受けた制御部210は、動作モードを上記実施形態の処理(図15)に切り替えることができる。
この変形例によれば、前眼部Eaの特徴部位に相当する特徴位置の候補をユーザが選択することができるので、アライメントの確度向上や円滑化などを図ることが可能である。
〈第5の実施形態〉
上記実施形態で説明したように、前眼部の撮影条件によってアライメントを好適に行なえない場合がある。たとえば、被検眼の個人差(角膜形状、角膜−水晶体間の距離など)により、前眼部の撮影画像にフレアが混入することがある。このような問題を解決できない場合には、手動でアライメントを行うこととなる。手動アライメントは、ユーザが被検眼の画像を観察しつつ好適なアライメント位置を探索することにより行われる。しかし、このような手動アライメントは、ユーザの経験や熟練度に大きく依存する。よって、アライメントの再現性が低く、スキルによるばらつきも大きくなってしまう。この実施形態では、このような事情に着目してなされた眼科装置について説明する。
この実施形態の眼科装置は上記実施形態と同様の構成を有する(特に、図3を参照する)。特に、この実施形態の眼科装置は、アライメント指標を被検眼Eに投影するアライメント光学系50を有する。この実施形態に係る眼窩装置の動作例を図16に示す。なお、患者登録や撮影種別の選択は、既になされているものとする。また、上記実施形態で説明したアライメントモードが好適に行われなかったことに対応して、図16に示す動作モードを行うことができる。また、図16に示す動作モードを検査当初から実行するようにしてもよい。
(S101:観察画像を表示する)
まず、制御部210は、眼底カメラユニット2に被検眼Eの観察画像(動画像)を取得させ、時系列的に取得される観察画像をリアルタイムで表示部240Aに動画表示させる。
(S102:アライメント指標を投影する)
制御部210は、アライメント光学系50を制御して、被検眼Eにアライメント指標を投影させる。なお、ステップ101およびステップ102の実行タイミングは任意である。ステップ101およびステップ102が実行されると、表示される観察画像にはアライメント指標の像が描出されている。また、制御部210は、アライメントを行うための補助となる情報を、観察画像とともに表示させる。この情報の例として、検査用光学系の移動に伴い表示位置が移動するアライメント指標の誘導目標位置を示す画像がある。
(S103:被検眼の3次元位置を求める)
制御部210は、前眼部カメラ300Aおよび300Bを制御して撮影画像を取得させる。解析部231は、取得された撮影画像に基づいて被検眼Eの3次元位置を求める。この処理は、たとえば第1の実施形態と同様にして実行される。
(S104:相対位置情報を取得する)
制御部210は、ステップ103で取得された被検眼Eの3次元位置に基づいて、被検眼Eと検査用光学系との相対位置を示す相対位置情報を取得する。この処理は、たとえば次のようにして実行される。まず、制御部210は、検査用光学系の現在位置を取得する。この現在位置は、たとえば、眼底カメラユニット2を移動させる光学系駆動部2Aに対する制御履歴から取得される。また、眼底カメラユニット2の位置を検出する位置センサを設け、この位置センサによる検出結果から現在位置を取得することもできる。なお、ステップ103で取得される被検眼Eの3次元位置(座標)を定義する座標系と、検査用光学系の現在位置(座標)を定義する座標系は共通であるとする。或いは、双方の座標系の間の座標変換は既知であるとする。
相対位置情報について説明する。相対位置情報は、上記のように、被検眼Eと検査用光学系との相対位置を示す情報である。この相対位置の例として、被検眼Eおよび検査用光学系の一方に対する他方の位置、所定の基準位置に対する被検眼Eの位置と検査用光学系の位置との差(ベクトル差、座標の差)などがある。
また、これらと同値であるが、この実施形態では、アライメント目標位置に対する検査用光学系の変位を相対位置情報とする。アライメント目標位置は、被検眼Eの検査を行うための好適な検査用光学系の位置であり、x方向(左右方向)およびy方向(上下方向)においては被検眼Eの軸と検査用光学系の光軸とが一致し、z方向(前後方向、光軸方向)においては被検眼Eから所定の作動距離だけ離れた位置である。作動距離は既知であり、ステップ103で被検眼Eの3次元位置が取得されているので、たとえば上記の共通の座標系におけるアライメント目標位置の座標を求めることは容易である。このような相対位置情報は、検査用光学系の光軸方向、並びにこの光軸方向に直交する水平方向および上下方向のそれぞれにおける相対位置を含むものである。
(S105:相対位置情報を表示する)
制御部210は、ステップ104で取得された相対位置情報を表示部240Aに表示させる。相対位置情報の表示態様の例を以下に説明する。
第1の例として、制御部210は、x方向、y方向およびz方向のそれぞれの変位を示す数値を表示させることができる。その場合、制御部210は、たとえば、観察画像の表示領域内または表示領域外にあらかじめ設けられた3つの表示スペースに数値を表示させることができる。
同様に、変位を示す文字列情報を表示させることができる。たとえば、x方向の変位がアライメント目標位置の左側に存在する場合には、その旨を示す文字列を表示させることができる。
第2の例として、制御部210は、x方向、y方向およびz方向のそれぞれの変位を示す画像を表示させることができる。その場合、制御部210は、たとえば、アライメント目標位置を示す画像を表示させるとともに、このアライメント目標位置に対する各方向の変位を示す画像を、その変位に応じた位置に表示させることができる。たとえば、検査用光学系の現在位置がアライメント目標位置の左上に位置する場合、x方向およびy方向の変位を示す画像(たとえば点状の画像)を、アライメント目標位置を示す画像の左上に表示させることができる。このとき、双方の画像の表示位置の間の距離はxy平面における変位に基づき決定される。
第2の例において、観察画像は被検眼Eを正面から撮影した画像であるから、x方向およびy方向については変位を直感的に認識できるように表示させることは容易である。一方、z方向(光軸方向)については、変位を直感的に認識できるように工夫する必要がある。その一例として、制御部210は、z方向における変位(相対位置)を表示色で示すことができる。具体的には、たとえば、アライメント目標位置を含む所定の許容範囲内にz方向の変位が存在する場合にはz方向の変位を示す画像を緑色で表示させ、変位が許容範囲の最小値よりも小さい場合には画像を赤色で表示させ、変位が許容範囲の最大値よりも大きい場合には画像を黄色で表示させる。また、変位の方向だけでなく変位の量も示すために、z方向の変位を示す画像の表示色の濃度を変化させたり、第1の例の数値や画像をz方向の変位を示す画像とともに表示させたりすることが可能である。
第3の例として、検査用光学系を移動させるべき方向や量を示す情報(文字列情報、画像)を表示させることができる。文字列情報の例として、アライメント目標位置に対して検査用光学系の光軸が右に1cmだけ変位している場合に、この変位を打ち消すための検査用光学系の移動方向および移動量を示す情報「左:1cm」を表示させることができる。画像の例としては、同様のケースにおいて、検査用光学系の移動方向を示す矢印(左を指す矢印)を表示させることができる。このとき、たとえば矢印の長さによって移動量を示すことが可能である。
(S106:手動アライメントを行う)
ユーザは、表示されている観察画像および相対位置情報を参照しつつ、操作部240Bを用いた所定の操作を行なうことで、検査用光学系を移動させる。
このとき、制御部210は、検査用光学系の移動内容に応じて相対位置情報の表示を変更することができる。たとえば、制御部210は、検査用光学系の移動内容に応じて相対位置情報をリアルタイムで再度取得し、この新たな相対位置情報をリアルタイムで表示させる。それにより、上記の数値や文字列、画像の表示がリアルタイムで更新される。具体例として、ユーザの操作により検査用光学系のz方向の位置が徐々にアライメント目標位置(作動距離)に近づく場合、z方向の変位を示す画像の表示色が黄色から緑色に変化する。
この実施形態に係る眼科装置によれば、前眼部カメラ300Aおよび300Bにより取得された撮影画像から算出される被検眼Eの高確度な3次元位置に基づいて、被検眼Eに対する検査用光学系の相対位置、つまりアライメント目標位置に対する検査用光学系の位置ずれを呈示することが可能である。よって、ユーザの経験や熟練度に依存することなく、定量的な情報に基づいてアライメントを行うことが可能である。それにより、アライメントの再現性の向上や、スキルによるばらつきの防止を図ることができる。
なお、被検眼情報を参照することにより、手動アライメントの確度の更なる向上を図ることが可能である。被検眼情報は、たとえば、被検眼Eに対してあらかじめ実施された検査により取得された、被検眼の特性を示す測定情報である。この測定情報は、当該眼科装置により取得されたものでも、他の眼科装置により取得されたものでもよい。測定情報は、たとえば患者ID等に関連付けられて記憶部212に事前に記憶される。
制御部210は、患者ID等に基づいて被検眼Eに対応する測定情報を選択する。更に、制御部210は、選択された測定情報と、解析部231により取得された被検眼Eの3次元位置に基づいて、相対位置情報を生成する。この処理の例として、角膜形状の偏りに基づいて、x方向およびy方向の相対位置を補正することができる。また、眼軸長に基づいて、z方向の相対位置を補正することができる。後者は、眼底を検査する場合に特に有効である。
このように被検眼Eの測定情報を考慮して相対位置情報を生成することにより、被検眼の個人差に応じたより高確度の相対位置情報を取得し呈示することが可能となる。
〈第6の実施形態〉
従来の眼科装置によるアライメントは、アライメント指標を角膜に投影し、その投影像が所定位置に配置されるように検査用光学系を移動させることにより行われていた。これに対し、この発明の実施形態では、2以上の撮影部により実質的に同時に得られた2以上の撮影画像を解析して被検眼の3次元位置を求め、この3次元位置に基づき検査用光学系や支持部を移動させることにより、アライメントを行う。
ここで、被検眼の3次元位置を求めるための解析処理は、各撮影画像に描出されている虹彩や瞳孔に基づいて行われる。よって、アライメントは、従来のように角膜を基準とするのではなく、虹彩(または虹彩がなす開口である瞳孔)を基準としてなされることが望ましい。この実施形態では、虹彩(瞳孔)を基準とする(z方向の)アライメントの確度向上を図る技術について説明する。以下、第1の実施形態の構成を示す図3を参照して説明を行う。
記憶部212には、角膜と虹彩(瞳孔)との間の距離を示す距離情報があらかじめ記憶されている。距離情報に示す距離は任意の方法で取得されたものである。たとえば、模型眼(グルストランド模型眼など)に基づく標準的な距離、複数の被検眼の測定結果に基づく統計的な距離、当該被検眼について過去に測定された個別的な距離などがある。
なお、角膜と虹彩との間の距離の測定は、たとえば次のようにして実行できる。まず、被検眼の前眼部をOCT計測して前眼部断層像を取得する。次に、この前眼部断層像を解析して、角膜に相当する画像領域(角膜領域)と、虹彩に相当する画像(虹彩領域)をそれぞれ抽出する。続いて、角膜領域(の角膜後面領域)と虹彩領域(の虹彩前面領域)との間の画素数をカウントするなどして、角膜と虹彩との間の距離を求める。ここで、この距離は、z方向に沿った距離である。このような測定は、眼科装置1自身で行ってもよいし、他の装置で行なってもよい。
解析部231の特徴位置特定部2312は、第1の実施形態と同様に、前眼部カメラ300Aおよび300Bのそれぞれの撮影画像から、虹彩(瞳孔)に相当する特徴位置を特定する。
3次元位置算出部2313は、前眼部カメラ300Aおよび300Bの位置と、特徴位置特定部2312により特定された特徴位置とに基づいて、この特徴部位の3次元位置を算出する。この処理において、記憶部212に記憶された距離情報を参照することができる。たとえば、被検眼Eの角膜(頂点)と検査用光学系との間の距離を取得可能な場合、この距離と、距離情報に示す距離とを加算することで、検査用光学系と虹彩との間の距離を高確度で取得できる。なお、角膜と検査用光学系との間の距離は、図1に示すアライメント光学系50を用いた従来のアライメントによって取得できる。
また、第1の実施形態のようにして取得された虹彩(瞳孔)と検査用光学系との間の距離から、距離情報に示す距離を減算することで、検査用光学系と角膜(頂点)との間の距離が得られる。そして、この得られた距離を用いてz方向のアライメントを行うことが可能である。
〈変形例〉
以上に説明した構成は、この発明を好適に実施するための一例に過ぎない。よって、この発明の要旨の範囲内における任意の変形(省略、置換、付加等)を適宜に施すことが可能である。
上記実施形態において、主制御部211は、画像合成部233により形成された合成画像を表示部240Aに表示させることが可能である。それにより、前眼部の立体的な形態を観察することが可能である。
上記実施形態において、主制御部211は、前眼部カメラ300Aおよび300Bにより実質的に同時に得られた2つの撮影画像の少なくとも1つを表示部240Aに表示させることが可能である。それにより、前眼部の形態を異なる視点(撮影位置)から観察することができる。
眼科装置1が検査に用いる光が前眼部カメラ300による撮影画像に映り込むと、撮影画像に対する画像処理に影響を与えるおそれがある。たとえば眼科装置1に搭載されたLEDやSLDからの光は比較的強度が高く、これが撮影画像に映り込むと画像処理を好適に行えない可能性がある。この問題を解決するために、上記実施形態において、前眼部カメラ300(2以上の撮影部)のそれぞれと被検眼Eとの間に、環境照明の波長以外の波長の光を遮断するフィルタを設けることが可能である。環境照明とは、眼科装置1が配置されている環境において使用されている照明を意味し、たとえば眼科装置1が設置されている部屋に設置されている照明がこれに該当する。また、環境照明は太陽光を含んでいてもよい。なお、当該構成の目的を考慮すると、フィルタは、環境照明に含まれる波長のうち、前眼部カメラ300による撮影に影響を与える波長を遮断するように構成されていてもよい。たとえば、環境照明に含まれる波長のうち、眼科装置1が検査に用いる波長成分(上記LEDやSLDの出力波長など)を遮断するように構成することが可能である。フィルタの具体例として、900nm以下の波長を遮断するフィルタを用いることができる。このような構成を適用することで、前眼部カメラ300による撮影に対する外乱の影響を回避して、前眼部の特徴部位(瞳孔など)が鮮明に描画された撮影画像が得られる。それにより、撮影画像から特徴位置(瞳孔中心など)を特定する解析処理を好適に行うことが可能となる。
上記の実施形態においては、光路長変更部41の位置を変更することにより、信号光LSの光路と参照光LRの光路との光路長差を変更しているが、この光路長差を変更する手法はこれに限定されるものではない。たとえば、参照光の光路に反射ミラー(参照ミラー)を配置し、この参照ミラーを参照光の進行方向に移動させて参照光の光路長を変更することによって、当該光路長差を変更することが可能である。また、被検眼Eに対して眼底カメラユニット2やOCTユニット100を移動させて信号光LSの光路長を変更することにより当該光路長差を変更するようにしてもよい。また、特に被測定物体が生体部位でない場合などには、被測定物体を深度方向(z方向)に移動させることにより光路長差を変更することも可能である。
上記の実施形態を実現するためのコンピュータプログラムを、コンピュータによって読み取り可能な任意の記録媒体に記憶させることができる。この記録媒体としては、たとえば、半導体メモリ、光ディスク、光磁気ディスク(CD−ROM/DVD−RAM/DVD−ROM/MO等)、磁気記憶媒体(ハードディスク/フロッピー(登録商標)ディスク/ZIP等)などを用いることが可能である。
また、インターネットやLAN等のネットワークを通じてこのプログラムを送受信することも可能である。
1、1000、1100 眼科装置
2 眼底カメラユニット
2A 光学系駆動部
10 照明光学系
30 撮影光学系
31 合焦レンズ
41 光路長変更部
42 ガルバノスキャナ
50 アライメント光学系
60 フォーカス光学系
100 OCTユニット
101 光源ユニット
105 光減衰器
106 偏波調整器
115 CCDイメージセンサ
200 演算制御ユニット
210 制御部
211 主制御部
212 記憶部
212a 収差情報
213 光学系位置取得部
220 画像形成部
230 画像処理部
231 解析部
2311 画像補正部
2312 特徴位置特定部
2313 3次元位置算出部
2314 移動目標位置決定部
232 画像判定部
233 画像合成部
240A 表示部
240B 操作部
300、300A、300B 前眼部カメラ
410 ベース
420 筐体
430 レンズ収容部
440 支持部
440A 顎受け駆動部
500 近接検知部
600 接触検知部
E 被検眼
Ea 前眼部
Ef 眼底
LS 信号光
LR 参照光
LC 干渉光

Claims (36)

  1. 被検眼を検査するための検査用光学系と、
    被検者の顔を支持する支持部と、
    前記検査用光学系と前記支持部とを相対的にかつ3次元的に移動する駆動部と、
    被検眼の前眼部を異なる方向から実質的に同時に撮影する2以上の撮影部と、
    前記2以上の撮影部により実質的に同時に得られた2以上の撮影画像を解析することで、被検眼の3次元位置を求める解析部と、
    前記3次元位置に基づき前記駆動部を制御することで、前記検査用光学系と前記支持部とを相対移動させる制御部と
    を有する眼科装置。
  2. 前記駆動部は、前記検査用光学系を3次元的に移動する第1駆動部を含み、
    前記制御部は、前記3次元位置に基づいて、前記検査用光学系の光軸を被検眼の軸に合わせるように、かつ、被検眼に対する前記検査用光学系の距離が所定の作動距離になるように前記第1駆動部を制御する
    ことを特徴とする請求項1に記載の眼科装置。
  3. 前記解析部は、
    前記2以上の撮影画像のそれぞれを解析することで、前眼部の所定の特徴部位に相当する当該撮影画像中の特徴位置を特定する特徴位置特定部と、
    前記2以上の撮影部の位置と前記2以上の撮影画像中の前記特徴位置とに基づいて、前記特徴部位の3次元位置を前記被検眼の3次元位置として算出する3次元位置算出部と
    を含む
    ことを特徴とする請求項2に記載の眼科装置。
  4. 光路の一部を前記検査用光学系と共有し、被検眼の前眼部を動画撮影する動画撮影光学系と、
    被検眼に対する前記検査用光学系の位置合わせを行うための指標を被検眼に投影する投影光学系と、
    操作部と
    を有し、
    前記制御部は、前記特徴位置特定部により前記特徴位置が特定されなかった場合に、
    前記投影光学系を制御して前記指標を被検眼に投影させ、
    前記指標が投影された状態の前眼部の動画像を前記動画撮影光学系に取得させ、
    取得された前記動画像を表示部に表示させ、
    前記操作部を用いた操作に応じて前記第1駆動部を制御して前記検査用光学系を移動させる
    ことを特徴とする請求項3に記載の眼科装置。
  5. 前記操作部を用いて前記検査用光学系が移動された後に、前記特徴位置特定部は、前記特徴部位に相当する前記動画像中の画像位置を特定し、
    前記制御部は、特定された前記画像位置を示す情報を前記動画像に重ねて表示させる
    ことを特徴とする請求項4に記載の眼科装置。
  6. 前記特徴部位は、前眼部の瞳孔中心または角膜頂点である
    ことを特徴とする請求項3に記載の眼科装置。
  7. 操作部を有し、
    前記制御部は、前記2以上の撮影画像のうちの少なくとも1つを表示部に表示させ、
    前記3次元位置算出部は、前記特徴位置特定部により前記特徴位置が特定されなかった場合に、前記2以上の撮影部の位置と、表示された撮影画像に対して前記操作部を用いて指定された画像位置とに基づいて、前記特徴部位の3次元位置の算出を行なう
    ことを特徴とする請求項3に記載の眼科装置。
  8. 前記3次元位置算出部は、前記2以上の撮影画像のうちの1つの撮影画像に対して画像位置が指定された場合、
    当該指定された画像位置に対応する他の撮影画像中の画像位置を特定し、
    前記2以上の撮影部の位置と、当該指定された画像位置および当該特定された画像位置とに基づいて、前記特徴部位の3次元位置の算出を行なう
    ことを特徴とする請求項7に記載の眼科装置。
  9. 前記制御部は、前記2以上の撮影画像のそれぞれを解析して当該撮影画像の画質を評価し、画質の評価結果に基づき1つの撮影画像を選択して前記表示部に表示させる
    ことを特徴とする請求項7に記載の眼科装置。
  10. 操作部を有し、
    前記特徴位置特定部は、前記2以上の撮影画像のそれぞれを解析することで、前記特徴位置の1以上の候補位置を特定し、
    前記制御部は、前記2以上の撮影画像のうちの少なくとも1つと、特定された候補位置を示す候補位置情報とを表示部に表示させ、
    前記3次元位置算出部は、前記2以上の撮影部の位置と、表示された1以上の候補位置情報のうち前記操作部を用いて指定された候補位置情報に対応する候補位置とに基づいて、前記特徴部位の3次元位置の算出を行なう
    ことを特徴とする請求項3に記載の眼科装置。
  11. 前記制御部は、
    前記検査用光学系の現在位置を取得する光学系位置取得部を含み、
    取得された前記現在位置と前記解析部により求められた前記被検眼の3次元位置とに基づいて、前記第1駆動部に前記検査用光学系を移動させる
    ことを特徴とする請求項2に記載の眼科装置。
  12. 前記2以上の撮影部は、被検眼の前眼部を異なる方向から並行して動画撮影し、
    前記解析部は、前記動画撮影において実質的に同時に得られた2以上のフレームを逐次に解析することで、被検眼の3次元位置を逐次に求め、
    前記制御部は、逐次に求められる前記3次元位置に基づき前記第1駆動部を逐次に制御することにより、前記検査用光学系の位置を被検眼の動きに追従させる
    ことを特徴とする請求項2に記載の眼科装置。
  13. 前記駆動部は、前記支持部を移動する第2駆動部を含み、
    前記制御部は、前記解析部による前記2以上の撮影画像の解析結果に基づいて前記第2駆動部を制御することにより前記支持部を移動させる
    ことを特徴とする請求項2に記載の眼科装置。
  14. 前記第2駆動部は、少なくとも上下方向に前記支持部を移動する
    ことを特徴とする請求項13に記載の眼科装置。
  15. 前記解析部は、前記2以上の撮影画像と前記2以上の撮影部の位置とに基づいて、前記支持部の移動目標位置を決定する移動目標位置決定部を含み、
    前記制御部は、前記支持部を前記移動目標位置に移動させるように前記第2駆動部を制御する
    ことを特徴とする請求項13に記載の眼科装置。
  16. 被検者の変更を示す情報の入力がなされたときに、前記制御部は、前記支持部を所定の初期位置に移動させるように前記第2駆動部を制御する
    ことを特徴とする請求項13に記載の眼科装置。
  17. 前記支持部に対する被検者の近接を検知する近接検知部を有し、
    前記近接が検知されたときに、前記制御部は、前記2以上の撮影部を制御して実質的に同時に撮影を行わせる
    ことを特徴とする請求項13に記載の眼科装置。
  18. 被検者の識別情報を入力するための入力部と、
    検査において適用された前記検査用光学系の位置および/または前記支持部の位置を示す位置情報を、当該被検者の識別情報と関連付けて記憶する第1記憶部と
    を有し、
    前記制御部は、前記入力部により識別情報が入力されたときに、
    当該識別情報に関連付けられた位置情報を前記第1記憶部から取得し、
    取得された位置情報が示す位置に前記検査用光学系および/または前記支持部を移動させるように前記第1駆動部および/または前記第2駆動部を制御する
    ことを特徴とする請求項13に記載の眼科装置。
  19. 前記支持部に対する被検者の顔の接触を検知する接触検知部を有し、
    前記接触が検知されているとき、前記制御部は、前記第1駆動部および前記第2駆動部のうち前記第1駆動部についてのみ制御を実行可能である
    ことを特徴とする請求項13に記載の眼科装置。
  20. 前記接触が検知されていないとき、前記制御部は、前記第1駆動部および前記第2駆動部の双方の制御を実行可能である
    ことを特徴とする請求項19に記載の眼科装置。
  21. 前記2以上の撮影部の少なくとも1つにより得られた撮影画像を解析することで、前眼部の画像が当該撮影画像中の所定領域に含まれているか否か判定する判定部を有し、
    前記制御部は、
    前眼部の画像が前記所定領域に含まれていると判定された場合には前記第1駆動部の制御を行い、
    前眼部の画像が前記所定領域に含まれていないと判定された場合には前記第2駆動部の制御を行う
    ことを特徴とする請求項13に記載の眼科装置。
  22. 前記2以上の撮影部のそれぞれは光学系を含み、
    前記2以上の撮影部のそれぞれについて、前記光学系により撮影画像に発生する歪曲収差に関する収差情報をあらかじめ記憶した第2記憶部を有し、
    前記解析部は、
    前記2以上の撮影画像のそれぞれの歪みを前記収差情報に基づいて補正する補正部を有し、
    補正された前記2以上の撮影画像に基づいて前記被検眼の3次元位置を求める
    ことを特徴とする請求項1に記載の眼科装置。
  23. 前記収差情報は、前記2以上の撮影部のそれぞれについて、所定の基準点に対する位置を違えて当該撮影部で前記基準点を撮影して得られた複数の撮影画像を解析することにより生成される
    ことを特徴とする請求項22に記載の眼科装置。
  24. 前記2以上の撮影部の少なくとも1つを移動する撮影移動部と、
    前記2以上の撮影部の少なくとも1つにより得られた撮影画像を解析することで、前眼部の画像が当該撮影画像中の所定領域に含まれているか否か判定する判定部と
    を有し、
    前記制御部は、前眼部の画像が前記所定領域に含まれていないと判定された場合に、前記撮影移動部を制御して前記2以上の撮影部の少なくとも1つを前記支持部から離れる方向および/または前記検査用光学系の光軸から離れる方向に移動させ、
    前記判定部は、前記2以上の撮影部の少なくとも1つが移動された後に、前記判定を再度行う
    ことを特徴とする請求項1に記載の眼科装置。
  25. 前記2以上の撮影部の少なくとも1つにより得られた撮影画像を解析することで、前眼部の画像が当該撮影画像中の所定領域に含まれているか否か判定する判定部を有し、
    前記制御部は、前眼部の画像が前記所定領域に含まれていないと判定された場合に、所定の警告情報を出力部に出力させる
    ことを特徴とする請求項1に記載の眼科装置。
  26. 前記2以上の撮影画像の合成画像を形成する画像合成部を有する
    ことを特徴とする請求項1に記載の眼科装置。
  27. 前記制御部は、前記合成画像を表示部に表示させる
    ことを特徴とする請求項26に記載の眼科装置。
  28. 前記制御部は、前記2以上の撮影画像のうちの少なくとも1つを表示部に表示させる
    ことを特徴とする請求項1に記載の眼科装置。
  29. 前記2以上の撮影部は、前記検査用光学系の光路外の異なる位置に設けられた2つのカメラからなる
    ことを特徴とする請求項1に記載の眼科装置。
  30. 前記2以上の撮影部は、前記検査用光学系の光軸よりも下方に設けられている
    ことを特徴とする請求項1に記載の眼科装置。
  31. 光路の一部を前記検査用光学系と共有し、被検眼の前眼部を動画撮影する動画撮影光学系と、
    被検眼に対する前記検査用光学系の位置合わせを行うための指標を被検眼に投影する投影光学系と、
    操作部と
    を有し、
    前記制御部は、
    前記投影光学系を制御して前記指標を被検眼に投影させ、
    前記指標が投影された状態の前眼部の動画像を前記動画撮影光学系に取得させ、
    取得された前記動画像を表示部に表示させ、
    前記解析部により取得された前記3次元位置に基づいて、被検眼と前記検査用光学系との相対位置を示す相対位置情報を取得し、
    取得された相対位置情報を前記表示部に表示させ、
    前記操作部を用いた操作に応じて前記第1駆動部を制御して前記検査用光学系を移動させる
    ことを特徴とする請求項に記載の眼科装置。
  32. 前記相対位置情報は、前記検査用光学系の光軸方向、並びに当該光軸方向に直交する水平方向および上下方向のそれぞれにおける前記相対位置を含む
    ことを特徴とする請求項31に記載の眼科装置。
  33. 前記制御部は、前記光軸方向における前記相対位置を表示色で示す
    ことを特徴とする請求項32に記載の眼科装置。
  34. あらかじめ取得された被検眼の特性の測定情報を記憶する記憶部を有し、
    前記制御部は、前記3次元位置と前記測定情報とに基づいて前記相対位置情報を取得する
    ことを特徴とする請求項31に記載の眼科装置。
  35. 前記2以上の撮影部のそれぞれと被検眼との間に、環境照明の波長以外の波長の光を遮断するフィルタが設けられている
    ことを特徴とする請求項1に記載の眼科装置。
  36. 被検眼を検査するための検査用光学系と、
    前記検査用光学系を3次元的に移動する駆動部と、
    被検眼の前眼部を異なる方向から実質的に同時に撮影する2以上の撮影部と、
    前記2以上の撮影部により実質的に同時に得られた2以上の撮影画像を解析することで、被検眼の3次元位置を求める解析部と、
    前記3次元位置に基づいて、前記検査用光学系の光軸を被検眼の軸に合わせるように、かつ、被検眼に対する前記検査用光学系の距離が所定の作動距離になるように前記駆動部を制御する制御部と
    を有する眼科装置。
JP2012261893A 2012-05-01 2012-11-30 眼科装置 Active JP5989523B2 (ja)

Priority Applications (7)

Application Number Priority Date Filing Date Title
JP2012261893A JP5989523B2 (ja) 2012-05-01 2012-11-30 眼科装置
PCT/JP2013/060993 WO2013164943A1 (ja) 2012-05-01 2013-04-11 眼科装置
US14/396,220 US9526416B2 (en) 2012-05-01 2013-04-11 Ophthalmologic apparatus
PL13784763T PL2845534T3 (pl) 2012-05-01 2013-04-11 Aparat okulistyczny
ES13784763.8T ES2629514T3 (es) 2012-05-01 2013-04-11 Aparato oftalmológico
EP13784763.8A EP2845534B1 (en) 2012-05-01 2013-04-11 Ophthalmic apparatus
US15/233,616 US9980643B2 (en) 2012-05-01 2016-08-10 Ophthalmologic apparatus

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2012104976 2012-05-01
JP2012104976 2012-05-01
JP2012261893A JP5989523B2 (ja) 2012-05-01 2012-11-30 眼科装置

Related Child Applications (2)

Application Number Title Priority Date Filing Date
JP2016156590A Division JP6220022B2 (ja) 2012-05-01 2016-08-09 眼科装置
JP2016156591A Division JP6215413B2 (ja) 2012-05-01 2016-08-09 眼科装置

Publications (2)

Publication Number Publication Date
JP2013248376A JP2013248376A (ja) 2013-12-12
JP5989523B2 true JP5989523B2 (ja) 2016-09-07

Family

ID=49514344

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012261893A Active JP5989523B2 (ja) 2012-05-01 2012-11-30 眼科装置

Country Status (6)

Country Link
US (2) US9526416B2 (ja)
EP (1) EP2845534B1 (ja)
JP (1) JP5989523B2 (ja)
ES (1) ES2629514T3 (ja)
PL (1) PL2845534T3 (ja)
WO (1) WO2013164943A1 (ja)

Families Citing this family (111)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110237999A1 (en) 2010-03-19 2011-09-29 Avedro Inc. Systems and methods for applying and monitoring eye therapy
WO2012167260A2 (en) 2011-06-02 2012-12-06 Avedro, Inc. Systems and methods for monitoring time based photo active agent delivery or photo active marker presence
US20150021228A1 (en) 2012-02-02 2015-01-22 Visunex Medical Systems Co., Ltd. Eye imaging apparatus and systems
US9655517B2 (en) 2012-02-02 2017-05-23 Visunex Medical Systems Co. Ltd. Portable eye imaging apparatus
US9351639B2 (en) 2012-03-17 2016-05-31 Visunex Medical Systems Co. Ltd. Eye imaging apparatus with a wide field of view and related methods
JP2014094182A (ja) * 2012-11-09 2014-05-22 Canon Inc 眼科装置およびアライメント判定方法
JP6112846B2 (ja) * 2012-12-11 2017-04-12 株式会社トプコン 眼科装置
JP6009935B2 (ja) 2012-12-26 2016-10-19 株式会社トプコン 眼科装置
CA2902760A1 (en) * 2013-02-27 2014-09-04 Optovue, Inc. Automatic alignment of an imager
US9380937B2 (en) * 2013-04-03 2016-07-05 Kabushiki Kaisha Topcon Ophthalmologic apparatus
US9498122B2 (en) * 2013-06-18 2016-11-22 Avedro, Inc. Systems and methods for determining biomechanical properties of the eye for applying treatment
US9538911B2 (en) * 2013-09-19 2017-01-10 Novartis Ag Integrated OCT-refractometer system for ocular biometry
US10010248B1 (en) 2013-10-09 2018-07-03 Bertec Corporation Instrument for measuring near point of convergence and/or near point of accommodation
US9468370B1 (en) * 2013-10-09 2016-10-18 Bertec Corporation Instrument for measuring near point of convergence and/or near point of accommodation
US9723978B2 (en) 2014-03-31 2017-08-08 Nidek Co., Ltd. Fundus photography device
JP2015201003A (ja) 2014-04-07 2015-11-12 株式会社トプコン 眼科情報システムおよび眼科情報処理サーバ
EP3139815B1 (en) * 2014-05-08 2018-10-17 Mimo AG Method for the acquisition of optical coherence tomography image data of retina tissue of an eye of a human subject
US9986908B2 (en) 2014-06-23 2018-06-05 Visunex Medical Systems Co. Ltd. Mechanical features of an eye imaging apparatus
JP6498398B2 (ja) 2014-08-27 2019-04-10 株式会社トプコン 眼科装置
JP6396125B2 (ja) * 2014-08-29 2018-09-26 株式会社トプコン 眼科装置
KR102545628B1 (ko) 2014-10-27 2023-06-20 아베드로 인코퍼레이티드 눈의 교차-결합 처리를 위한 시스템 및 방법
JP6518054B2 (ja) 2014-10-29 2019-05-22 株式会社トプコン 眼科装置
US10114205B2 (en) 2014-11-13 2018-10-30 Avedro, Inc. Multipass virtually imaged phased array etalon
JP6566541B2 (ja) * 2014-11-26 2019-08-28 株式会社トプコン 眼科装置
JP6388440B2 (ja) 2014-11-26 2018-09-12 株式会社トプコン 眼科装置
US9357918B1 (en) * 2014-12-18 2016-06-07 Karen Elise Cohen System and method for drug screening and monitoring pupil reactivity and voluntary and involuntary eye muscle function
CN107708524A (zh) 2015-01-26 2018-02-16 威盛纳斯医疗***公司 用于眼睛成像装置的一次性隔离套以及相关方法
EP3285704B1 (en) 2015-04-24 2020-11-18 Avedro Inc. Systems for photoactivating a photosensitizer applied to an eye
US10028657B2 (en) 2015-05-22 2018-07-24 Avedro, Inc. Systems and methods for monitoring cross-linking activity for corneal treatments
JP6446333B2 (ja) 2015-06-09 2018-12-26 株式会社トプコン 眼科検査システム及び管理装置
JP6490501B2 (ja) 2015-06-09 2019-03-27 株式会社トプコン 眼科検査システム
US11207410B2 (en) 2015-07-21 2021-12-28 Avedro, Inc. Systems and methods for treatments of an eye with a photosensitizer
US9763574B2 (en) * 2015-08-21 2017-09-19 Kelvin Nguyen Hood for an ophthalmic device
JP6567947B2 (ja) 2015-10-13 2019-08-28 株式会社トプコン 眼科装置
JP6912554B2 (ja) * 2016-02-15 2021-08-04 株式会社トプコン 眼科装置
JP6624641B2 (ja) 2016-03-18 2019-12-25 株式会社トプコン 眼科装置
JP6723843B2 (ja) * 2016-06-22 2020-07-15 株式会社トプコン 眼科装置
JP6892540B2 (ja) * 2016-06-22 2021-06-23 株式会社トプコン 眼科装置
JP6764728B2 (ja) 2016-08-26 2020-10-07 株式会社トプコン 眼科装置、及び眼科装置のアライメント方法
JP6880606B2 (ja) * 2016-08-30 2021-06-02 株式会社ニデック 眼科用手術顕微鏡
JP2018061621A (ja) * 2016-10-11 2018-04-19 オプトス ピーエルシー 眼底画像撮影装置、眼底画像撮影方法、及び眼底画像撮影プログラム
JP2018068732A (ja) * 2016-10-31 2018-05-10 株式会社トプコン 眼科装置
JP6901264B2 (ja) * 2017-01-11 2021-07-14 株式会社トプコン 眼科装置
JP6928453B2 (ja) * 2017-01-24 2021-09-01 株式会社トプコン 眼科装置
JP6809926B2 (ja) * 2017-02-07 2021-01-06 株式会社トプコン 眼科装置
JP6899661B2 (ja) * 2017-02-07 2021-07-07 株式会社トプコン 眼科装置
JP6930841B2 (ja) * 2017-03-21 2021-09-01 株式会社トプコン 眼科装置
JP6895780B2 (ja) * 2017-03-21 2021-06-30 株式会社トプコン 眼科装置及びその制御方法
JP6930842B2 (ja) * 2017-03-21 2021-09-01 株式会社トプコン 眼科装置
JP6979276B2 (ja) * 2017-03-21 2021-12-08 株式会社トプコン 眼科装置及びその制御方法
JP7002239B2 (ja) 2017-07-26 2022-01-20 株式会社トプコン 眼科システム
JP6923384B2 (ja) 2017-07-27 2021-08-18 株式会社トプコン 眼科システム及び眼科情報処理装置
JP6940349B2 (ja) 2017-09-21 2021-09-29 株式会社トプコン 眼科装置
JP2019055122A (ja) * 2017-09-22 2019-04-11 株式会社トプコン 眼科装置
JP2019062933A (ja) * 2017-09-28 2019-04-25 株式会社トプコン 眼科装置
JP6962765B2 (ja) * 2017-09-28 2021-11-05 株式会社トプコン 眼科装置
JP2022033895A (ja) * 2017-09-28 2022-03-02 株式会社トプコン 眼科システム
JP7221587B2 (ja) 2017-09-28 2023-02-14 株式会社トプコン 眼科装置
JP2022040228A (ja) * 2017-09-28 2022-03-10 株式会社トプコン 眼科装置及び瞳孔状態計測方法
JP7249097B2 (ja) * 2017-09-28 2023-03-30 株式会社トプコン 眼科装置及び検眼システム
JP7325169B2 (ja) 2017-12-28 2023-08-14 株式会社トプコン 眼科装置、及びその制御方法
JP2018051391A (ja) * 2018-01-12 2018-04-05 株式会社トプコン 眼科装置
JP2018051390A (ja) * 2018-01-12 2018-04-05 株式会社トプコン 眼科装置
US11911108B2 (en) 2018-01-31 2024-02-27 Topcon Corporation Blood flow measurement apparatus
US10645358B2 (en) 2018-02-20 2020-05-05 Gopro, Inc. Saturation management for luminance gains in image processing
JP7133950B2 (ja) 2018-03-14 2022-09-09 株式会社トプコン 眼科システム、眼科情報処理装置、プログラム、及び記録媒体
JP7182884B2 (ja) 2018-03-14 2022-12-05 株式会社トプコン スリットランプ顕微鏡及び眼科システム
JP7080076B2 (ja) 2018-03-16 2022-06-03 株式会社トプコン 眼科装置、及びその制御方法
JP7080075B2 (ja) 2018-03-16 2022-06-03 株式会社トプコン 眼科装置、及びその制御方法
WO2019189222A1 (ja) * 2018-03-30 2019-10-03 株式会社ニコン 眼科光学系、眼科用対物レンズ、及び眼科装置
US11071453B2 (en) 2018-06-06 2021-07-27 Alcon Inc. Systems and methods for reflection-based positioning relative to an eye
JP2019213739A (ja) 2018-06-13 2019-12-19 株式会社トプコン 眼科装置、その制御方法、プログラム、及び記録媒体
JP7321678B2 (ja) 2018-06-13 2023-08-07 株式会社トプコン スリットランプ顕微鏡及び眼科システム
JP7050588B2 (ja) 2018-06-13 2022-04-08 株式会社トプコン 眼科装置、その制御方法、プログラム、及び記録媒体
JP7100503B2 (ja) 2018-06-15 2022-07-13 株式会社トプコン 眼科装置
JP7124575B2 (ja) * 2018-09-05 2022-08-24 株式会社ニデック 眼科装置
JP2020044027A (ja) 2018-09-18 2020-03-26 株式会社トプコン 眼科装置、その制御方法、プログラム、及び記録媒体
US10743762B2 (en) 2018-09-28 2020-08-18 Topcon Corporation Ophthalmologic apparatus
US10905325B2 (en) 2018-11-27 2021-02-02 Topcon Corporation Ophthalmologic apparatus
US11013401B2 (en) 2018-11-27 2021-05-25 Topcon Corporation Ophthalmologic apparatus
US11439301B2 (en) 2019-01-16 2022-09-13 Topcon Corporation Ophthalmologic information processing apparatus, ophthalmologic apparatus and ophthalmologic information processing method
US11141060B2 (en) 2019-01-16 2021-10-12 Topcon Corporation Ophthalmologic apparatus and method of controlling the same
US11134836B2 (en) 2019-01-16 2021-10-05 Topcon Corporation Ophthalmologic information processing apparatus, ophthalmologic apparatus and ophthalmologic information processing method
US10470657B1 (en) 2019-02-28 2019-11-12 Thomas E. Lister Systems and methods for administering a gaze nystagmus test
US20220142467A1 (en) * 2019-03-01 2022-05-12 University Of Miami Numerical system control of ophthalmic visualization and image system
US11185220B2 (en) * 2019-04-24 2021-11-30 Topcon Corporation Ophthalmologic apparatus
JP7317582B2 (ja) * 2019-06-13 2023-07-31 株式会社トプコン 眼科装置及び眼科装置の制御方法
JP7343331B2 (ja) 2019-08-08 2023-09-12 株式会社トプコン 眼科装置、その制御方法、プログラム、及び、記録媒体
US20220248953A1 (en) 2019-08-29 2022-08-11 Topcon Corporation Slit lamp microscope, ophthalmic system, method of controlling slit lamp microscope, and recording medium
JP7358125B2 (ja) 2019-09-10 2023-10-10 株式会社トプコン スリットランプ顕微鏡、眼科情報処理装置、眼科システム、スリットランプ顕微鏡の制御方法、プログラム、及び記録媒体
CN114364304A (zh) 2019-09-11 2022-04-15 株式会社拓普康 眼科装置、其控制方法以及程序
WO2021049243A1 (ja) 2019-09-11 2021-03-18 株式会社トプコン 眼科装置
JP2021069415A (ja) 2019-10-29 2021-05-06 株式会社トプコン 眼科装置及びその制御方法
EP4094675A1 (en) 2020-01-23 2022-11-30 Topcon Corporation Ophthalmic device and method for controlling same
JP2021118769A (ja) 2020-01-30 2021-08-12 株式会社トプコン 眼科装置、その制御方法、プログラム、及び記録媒体
JP2021118770A (ja) 2020-01-30 2021-08-12 株式会社トプコン 眼科装置、その制御方法、プログラム、及び記録媒体
JP2021137322A (ja) 2020-03-05 2021-09-16 株式会社トプコン 眼科装置、その制御方法、プログラム、及び記録媒体
JP2021142173A (ja) 2020-03-13 2021-09-24 株式会社トプコン 眼科装置、その制御方法、及びプログラム
JP2021142172A (ja) 2020-03-13 2021-09-24 株式会社トプコン 眼科装置、その制御方法、及びプログラム
JP7469090B2 (ja) 2020-03-19 2024-04-16 株式会社トプコン 眼科装置、その制御方法、及びプログラム
EP4133993A4 (en) 2020-04-06 2024-05-08 Topcon Corp OPHTHALMOLOGICAL DEVICE
JP2021194339A (ja) 2020-06-17 2021-12-27 株式会社トプコン スリットランプ顕微鏡
JP2022028197A (ja) 2020-08-03 2022-02-16 株式会社トプコン スリットランプ顕微鏡
JP2022053081A (ja) 2020-09-24 2022-04-05 株式会社トプコン 眼底カメラ及びその制御方法
JP2022068488A (ja) 2020-10-22 2022-05-10 株式会社トプコン 眼科装置、その制御方法、プログラム、及び記録媒体
JP2022112569A (ja) * 2021-01-22 2022-08-03 株式会社トプコン 眼科装置及びカバー部材
JP2023017402A (ja) 2021-07-26 2023-02-07 株式会社トプコン 前眼部解析装置、前眼部解析方法、およびプログラム
JP2023060421A (ja) 2021-10-18 2023-04-28 株式会社トプコン 眼科装置
JP7377386B2 (ja) * 2021-12-03 2023-11-09 株式会社トプコン 眼科システム
JP2023102006A (ja) 2022-01-11 2023-07-24 株式会社トプコン 眼科装置
JP2023102032A (ja) 2022-01-11 2023-07-24 株式会社トプコン 眼科装置

Family Cites Families (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5897340A (ja) 1981-12-07 1983-06-09 キヤノン株式会社 眼科機器の位置合わせ装置
JP2739331B2 (ja) 1988-11-16 1998-04-15 株式会社エイ・ティ・アール通信システム研究所 非接触視線検出装置
JP3048614B2 (ja) 1990-09-26 2000-06-05 昭和アルミニウム株式会社 熱交換器
JP3199125B2 (ja) * 1991-08-31 2001-08-13 株式会社ニデック 立体眼底カメラ
JP3735132B2 (ja) 1993-08-31 2006-01-18 株式会社ニデック 眼科装置
US5596377A (en) * 1993-08-31 1997-01-21 Nidek Co., Ltd. Ophthalmic apparatus having three dimensional calculating means
GB2293659B (en) 1994-09-30 1998-06-24 Nidek Kk Ophthalmic apparatus provided with alignment mechanism
JPH08117188A (ja) 1994-10-21 1996-05-14 Canon Inc 眼科器械の位置合わせ装置
JP3461957B2 (ja) 1995-02-28 2003-10-27 株式会社ニデック 眼科装置
JPH08299267A (ja) 1995-05-01 1996-11-19 Konan:Kk 可動顎台
US5784148A (en) * 1996-04-09 1998-07-21 Heacock; Gregory Lee Wide field of view scanning laser ophthalmoscope
JP3533308B2 (ja) 1997-02-10 2004-05-31 株式会社ニデック 眼科装置
US6661571B1 (en) * 1999-09-21 2003-12-09 Olympus Optical Co., Ltd. Surgical microscopic system
US6322216B1 (en) 1999-10-07 2001-11-27 Visx, Inc Two camera off-axis eye tracker for laser eye surgery
US6685317B2 (en) * 2000-06-13 2004-02-03 Massie Research Laboratories, Inc. Digital eye camera
US6726325B2 (en) * 2002-02-26 2004-04-27 Carl Zeiss Meditec, Inc. Tracking assisted optical coherence tomography
EP1391176A1 (en) * 2002-08-16 2004-02-25 Universiteit Maastricht Method and arrangement for performing measurements of the topography of a corneal surface
JP3935834B2 (ja) 2002-11-29 2007-06-27 株式会社ニデック 眼科装置
DE602004001140D1 (de) 2003-02-03 2006-07-27 Canon Kk Ophthalmologisches Gerät
JP4136690B2 (ja) 2003-02-03 2008-08-20 キヤノン株式会社 眼科装置
JP4223314B2 (ja) 2003-03-31 2009-02-12 株式会社トプコン 眼科装置
JP4428987B2 (ja) * 2003-11-17 2010-03-10 キヤノン株式会社 眼科装置
JP4551107B2 (ja) * 2004-03-31 2010-09-22 株式会社トプコン 光学系の位置合わせ装置及び方法、並びにこれを用いた三次元観察状態測定装置及び方法
US20070051362A1 (en) * 2004-04-23 2007-03-08 Sullivan Timothy R Multiple unit dose drug delivery system
DE102004046617A1 (de) * 2004-09-22 2006-04-06 Eldith Gmbh Vorrichtung und Verfahren zur berührungslosen Bestimmung der Blickrichtung
JP4822730B2 (ja) 2005-03-31 2011-11-24 株式会社ニデック 眼科装置
DE502006002076D1 (de) * 2006-07-24 2008-12-24 Eyesense Ag Vorrichtung zur Messung eines Analyten in einer Augenflüssigkeit
US7625088B2 (en) * 2007-02-22 2009-12-01 Kowa Company Ltd. Image processing apparatus
US8494227B2 (en) * 2007-04-17 2013-07-23 Francine J. Prokoski System and method for using three dimensional infrared imaging to identify individuals
US8363783B2 (en) * 2007-06-04 2013-01-29 Oraya Therapeutics, Inc. Method and device for ocular alignment and coupling of ocular structures
JP5160826B2 (ja) * 2007-07-19 2013-03-13 株式会社トプコン 角膜観察装置
JP5042784B2 (ja) 2007-11-08 2012-10-03 株式会社ニデック 眼底カメラ
US7712899B2 (en) * 2007-12-21 2010-05-11 Sifi Diagnostic Spa Dual Scheimpflug system for three-dimensional analysis of an eye
ES2327704B1 (es) * 2008-04-30 2010-08-30 Universitat Politecnica De Catalunya Metodo y sistema para la medida objetiva de la acomodacion ocular.
JP5324839B2 (ja) * 2008-06-19 2013-10-23 株式会社トプコン 光画像計測装置
JP2010012109A (ja) * 2008-07-04 2010-01-21 Nidek Co Ltd 眼底撮影装置
JP5444069B2 (ja) 2010-03-24 2014-03-19 株式会社トプコン 眼科装置及び瞳孔間距離算出方法
JP5539089B2 (ja) * 2010-07-23 2014-07-02 キヤノン株式会社 眼科装置、眼科装置の制御方法及びプログラム

Also Published As

Publication number Publication date
US20150085252A1 (en) 2015-03-26
EP2845534A4 (en) 2016-02-10
EP2845534A1 (en) 2015-03-11
US9980643B2 (en) 2018-05-29
WO2013164943A1 (ja) 2013-11-07
PL2845534T3 (pl) 2017-10-31
EP2845534B1 (en) 2017-05-17
US9526416B2 (en) 2016-12-27
JP2013248376A (ja) 2013-12-12
ES2629514T3 (es) 2017-08-10
US20160345822A1 (en) 2016-12-01

Similar Documents

Publication Publication Date Title
JP5989523B2 (ja) 眼科装置
JP6865788B2 (ja) 眼科装置
JP6522827B2 (ja) 眼科装置
JP6112846B2 (ja) 眼科装置
JP6009935B2 (ja) 眼科装置
JP6367563B2 (ja) 眼科装置
JP6566541B2 (ja) 眼科装置
JP6498398B2 (ja) 眼科装置
JP2018198967A (ja) 眼科装置
JP2016097251A (ja) 眼科装置
JP2018051391A (ja) 眼科装置
JP6407631B2 (ja) 眼科装置
JP2018051340A (ja) 眼科装置
JP6310589B2 (ja) 眼科装置
JP2018051390A (ja) 眼科装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150828

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160726

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160810

R150 Certificate of patent or registration of utility model

Ref document number: 5989523

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250