JP6702024B2 - Ophthalmic image processing device, ophthalmic image processing program - Google Patents

Ophthalmic image processing device, ophthalmic image processing program Download PDF

Info

Publication number
JP6702024B2
JP6702024B2 JP2016126678A JP2016126678A JP6702024B2 JP 6702024 B2 JP6702024 B2 JP 6702024B2 JP 2016126678 A JP2016126678 A JP 2016126678A JP 2016126678 A JP2016126678 A JP 2016126678A JP 6702024 B2 JP6702024 B2 JP 6702024B2
Authority
JP
Japan
Prior art keywords
image
image data
registration
report
image processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016126678A
Other languages
Japanese (ja)
Other versions
JP2018000246A5 (en
JP2018000246A (en
Inventor
佳亮 松村
佳亮 松村
宏典 小池
宏典 小池
晃太 角川
晃太 角川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nidek Co Ltd
Original Assignee
Nidek Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nidek Co Ltd filed Critical Nidek Co Ltd
Priority to JP2016126678A priority Critical patent/JP6702024B2/en
Priority to EP17158927.8A priority patent/EP3213668B1/en
Priority to US15/447,372 priority patent/US10679343B2/en
Publication of JP2018000246A publication Critical patent/JP2018000246A/en
Publication of JP2018000246A5 publication Critical patent/JP2018000246A5/ja
Application granted granted Critical
Publication of JP6702024B2 publication Critical patent/JP6702024B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Eye Examination Apparatus (AREA)

Description

本開示は、眼科検査装置によって取得された画像データを処理する眼科画像処理装置、眼科画像処理プログラムに関する。   The present disclosure relates to an ophthalmic image processing device and an ophthalmic image processing program that process image data acquired by an ophthalmic examination device.

眼科検査装置によって取得された被検眼の画像データを処理して画像データを含むレポートを作成する技術が知られている(例えば、特許文献1参照)。   A technique of processing image data of an eye to be inspected acquired by an ophthalmologic examination apparatus to create a report including the image data is known (for example, refer to Patent Document 1).

特開2014−018251号公報JP, 2014-018251, A

しかしながら、上記背景技術において、レポート上の画像データにおいて、検者が注目したい画像領域を見づらい場合があった。解決手法の一つとして、レポート上において、画像データ全体を拡大する手法が考えられるが、画像データの表示サイズが大きくなるため、レポートの他の情報が見辛くなる可能性があった。     However, in the background art described above, in the image data on the report, it may be difficult for the examiner to see the image area to be noticed. As one of the solving methods, a method of enlarging the entire image data on the report can be considered, but the display size of the image data becomes large, so that other information in the report may be difficult to see.

本件発明は、所望のレポートを作成できる眼科画像処理装置、眼科画像処理プログラムを提供することを技術課題とする。   An object of the present invention is to provide an ophthalmic image processing device and an ophthalmic image processing program capable of creating a desired report.

上記課題を解決するために、本発明は以下のような構成を備えることを特徴とする。   In order to solve the above-mentioned subject, the present invention is characterized by having the following configurations.

(1) 眼科検査装置によって取得された被検眼の画像データを処理する眼科画像処理装置であって、画像種別を含んだテンプレートを設定する設定手段と、前記テンプレートに基づいて、前記眼科検査装置によって取得された前記被検眼の前記画像データを処理して、前記テンプレート上での前記画像種別に対応する画像データを含むレポートを作成する画像処理手段を備え、前記画像処理手段は、作成された前記レポート上の画像データの一部を拡大し表示させることを特徴とする。
(2) 被検眼の画像データを処理する眼科画像処理装置において用いられる眼科画像処理プログラムであって、前記眼科画像処理装置のプロセッサによって実行されることで、画像種別を含んだテンプレートを設定する設定ステップと、前記テンプレートに基づいて、眼科検査装置によって取得された前記被検眼の前記画像データを処理して、前記テンプレート上での前記画像種別に対応する画像データを含むレポートを作成する作成ステップと、作成された前記レポート上の画像データの一部を拡大する拡大ステップと、を前記眼科画像処理装置に実行させることを特徴とする。
(1) An ophthalmic image processing apparatus for processing image data of an eye to be inspected acquired by an ophthalmic examination apparatus , comprising: setting means for setting a template including an image type; and the ophthalmic examination apparatus based on the template . The image data of the obtained eye to be inspected is processed, and an image processing unit that creates a report including image data corresponding to the image type on the template is provided, and the image processing unit includes the created image data. and wherein the displaying an enlarged portion of the image data on the report.
(2) A setting for setting a template including an image type, which is an ophthalmic image processing program used in an ophthalmic image processing device that processes image data of an eye to be inspected, and is executed by a processor of the ophthalmic image processing device. A step of processing the image data of the eye to be inspected acquired by an ophthalmologic examination apparatus based on the template, and creating a report including image data corresponding to the image type on the template; A magnifying step of magnifying a part of the created image data on the report, and causing the ophthalmic image processing apparatus to execute the magnifying step.

本発明の実施形態を図面に基づいて説明する。図1〜図16は本実施形態の実施例に係る図である。なお、以下の<>にて分類された項目は、独立又は関連して利用されうる。   An embodiment of the present invention will be described with reference to the drawings. 1 to 16 are diagrams related to an example of the present embodiment. The items classified by <> below can be used independently or in association with each other.

<概要(図1参照)>
眼科画像処理装置は、眼科検査装置によって取得された画像を処理できる。画像の処理は、画像処理部(例えば、プロセッサ20)によって行われてもよい。プロセッサ20としては、例えば、パーソナルコンピュータのCPUの他、眼科検査装置に設けられたCPUであってもよい。
<Overview (see Figure 1)>
The ophthalmic image processing device can process the image acquired by the ophthalmic examination device. The image processing may be performed by an image processing unit (for example, the processor 20). The processor 20 may be, for example, a CPU of a personal computer or a CPU provided in an ophthalmic examination apparatus.

指示受付部(例えば、プロセッサ20)は、検者からの指示を受け付ける機能を有する。指示受付部は、例えば、タッチパネル、マウス、キーボードなどのユーザインターフェース(例えば、操作部4)からの操作信号を受け付けることができる。   The instruction receiving unit (for example, the processor 20) has a function of receiving an instruction from the examiner. The instruction receiving unit can receive an operation signal from a user interface (for example, the operation unit 4) such as a touch panel, a mouse, or a keyboard.

画像処理部(例えば、プロセッサ20)は、画像を出力する。出力先としては、例えば、表示部(例えば、表示部1)/プリンタ等の出力部(出力デバイス)、並びにハードディスク/USBメモリなどの記憶部(記憶デバイス)等がありうる。   The image processing unit (for example, the processor 20) outputs the image. The output destination may be, for example, a display unit (for example, the display unit 1)/an output unit (output device) such as a printer, and a storage unit (storage device) such as a hard disk/USB memory.

記憶部(例えば、記憶部30)としては、例えば、眼科検査装置の装置本体に設けられた記憶部、外部のサーバーに設けられた記憶部、パーソナルコンピュータに設けられた記憶部などであってもよい。眼科画像処理装置としては、パーソナルコンピュータが用いられてもよいし、専用の装置であってもよい。なお、眼科検査装置が、眼科画像処理装置を兼用してもよい。   The storage unit (for example, the storage unit 30) may be, for example, a storage unit provided in the device body of the ophthalmic examination apparatus, a storage unit provided in an external server, a storage unit provided in a personal computer, or the like. Good. A personal computer may be used as the ophthalmologic image processing device, or a dedicated device may be used. The ophthalmic examination apparatus may also serve as the ophthalmic image processing apparatus.

眼科画像処理装置と眼科検査装置とは、信号のやりとりが可能な状態で接続されており、例えば、第1の眼科検査装置(例えば、眼科用OCTデバイス10)で取得された画像、第2の眼科検査装置(例えば、視野検査装置15)で取得された画像は、記憶部に記憶される。   The ophthalmic image processing apparatus and the ophthalmic examination apparatus are connected in a state capable of exchanging signals, and, for example, an image acquired by the first ophthalmic examination apparatus (for example, the OCT device 10 for ophthalmology), a second The image acquired by the ophthalmic examination apparatus (for example, the visual field examination apparatus 15) is stored in the storage unit.

<プログラム>
本装置は、各種制御処理を司る制御部(例えば、プロセッサ20)と、眼科画像処理プログラムを記憶する記憶部とを、備えてもよい。プロセッサ20は、プログラムに従って、処理を実行できる。制御部は、画像処理部を兼用してもよい。
<Program>
The present apparatus may include a control unit (for example, the processor 20) that controls various control processes, and a storage unit that stores an ophthalmologic image processing program. The processor 20 can execute processing according to the program. The control unit may also serve as the image processing unit.

<レジストレーション処理(図2参照)>
眼科画像処理装置は、複数の画像データを重畳させる機能を備えてもよく、複数の画像データを重畳させた重畳画像であるレジストレーション画像を取得してもよい。以下説明では、複数の画像データを重畳させる機能を、複数の画像データを重ね合わせる機能、複数の画像データを重畳させた重畳画像であるレジストレーション画像を、複数の画像データを重ね合わせた画像であるレジストレーション画像として表現されうる。
<Registration process (see Figure 2)>
The ophthalmic image processing apparatus may have a function of superimposing a plurality of image data, and may acquire a registration image that is a superimposed image in which a plurality of image data are superimposed. In the following description, a function of superimposing a plurality of image data, a function of superimposing a plurality of image data, a registration image which is a superimposed image in which a plurality of image data are superposed is an image in which a plurality of image data are superposed. It can be represented as a registration image.

この場合、本装置は、複数の眼科検査装置で取得された画像を重ねて表示(重畳表示)する画像処理部(レジストレーション機能)を備えてもよい。画像処理部は、第1の画像データと、第2の画像データとを重ね合わせた画像であるレジストレーション画像を作成し、作成されたレジストレーション画像を出力してもよい。   In this case, the present apparatus may include an image processing unit (registration function) that displays (superimposes) the images acquired by the plurality of ophthalmic examination apparatuses in an overlapping manner. The image processing unit may create a registration image, which is an image in which the first image data and the second image data are superimposed, and output the created registration image.

第1の画像データは、第1の眼科検査装置によって取得された画像データであってもよい。第2の画像データは、第2の眼科検査装置によって取得された画像データであってもよい。第2の眼科検査装置は、第1の眼科検査装置とは異なる眼科検査装置であってもよい。   The first image data may be image data acquired by the first ophthalmologic examination apparatus. The second image data may be image data acquired by the second ophthalmologic examination apparatus. The second ophthalmic examination apparatus may be an ophthalmic examination apparatus different from the first ophthalmic examination apparatus.

眼科画像処理装置は、レジストレーション画像を構成する第1の画像データ及び第2の画像データにおける画像種別を設定する設定部を備えてもよい。画像処理部は、設定された画像種別に対応する第1の画像データ及び前記第2の画像データを重ね合わせたレジストレーション画像を作成し、出力してもよい。画像処理部は、設定部によって設定された各設定条件に基づいてレジストレーション画像を作成してもよい。   The ophthalmologic image processing device may include a setting unit that sets the image type in the first image data and the second image data forming the registration image. The image processing unit may create and output a registration image in which the first image data and the second image data corresponding to the set image type are superimposed. The image processing unit may create the registration image based on each setting condition set by the setting unit.

設定部は、検者からの指示を受け付ける指示受付部を備えてもよく、指示受付部からの指示信号に基づいて設定処理を行ってもよい。また、設定部は、予め設定された設定条件に応じて画像種別を設定してもよい。この場合、例えば、各レポートの仕様に応じて設定条件が設定されており、選択されたレポートの仕様に応じて画像種別が設定されてもよい。なお、レジストレーション画像を構成する画像データとして設定可能な画像種別としては、種々の画像種別があってもよく、画像種別の設定によれば、例えば、検者が所望するレジストレーション画像を得ることができると共に、多面的な確認が可能である。   The setting unit may include an instruction receiving unit that receives an instruction from the examiner, and may perform the setting process based on the instruction signal from the instruction receiving unit. Further, the setting unit may set the image type according to preset setting conditions. In this case, for example, the setting conditions may be set according to the specifications of each report, and the image type may be set according to the specifications of the selected report. The image types that can be set as the image data forming the registration image may include various image types. According to the image type settings, for example, a registration image desired by an examiner can be obtained. In addition to being able to do so, multi-faceted confirmation is possible.

<レジストレーション画像の設定変更(図3参照)>
レジストレーション画像が表示部に表示された状態において、レジストレーション画像の設定を変更するための操作部からの指示が受け付けられ、レジストレーション画像の設定が変更可能であってもよい。画像処理部は、設定変更に基づくレジストレーション画像を作成してもよい。
<Change registration image settings (see Figure 3)>
The registration image setting may be changeable by receiving an instruction from the operation unit to change the registration image setting while the registration image is displayed on the display unit. The image processing unit may create a registration image based on the setting change.

<レイヤー順の設定>
本装置において、第1の画像データと第2の画像データとを重ね合わせる順序が設定変更可能であってもよい。例えば、設定変更可能な順序としては、第1の画像データの上に第2の画像データが重ね合わせされる第1レジストレーション画像、第2の画像データの上に第1の画像データが重ね合わせされる第2レジストレーション画像のいずれかが設定変更可能であっても良い。これによれば、検者は、視認性又は診断目的等を考慮して、重ね合わせ順序を選択できる。
<Setting the layer order>
In the present apparatus, the order of superimposing the first image data and the second image data may be changeable. For example, as the order in which the setting can be changed, the first registration image in which the second image data is overlaid on the first image data, and the first image data in the second image data are overlaid. The setting of any of the registered second registration images may be changeable. According to this, the examiner can select the superposition order in consideration of the visibility, the purpose of diagnosis, and the like.

指示受付部は、レジストレーション画像を作成する際、第1の画像データと第2の画像データを重ね合わせるレイヤーの順番を設定するための操作部からの指示信号を受け付けてもよい。画像処理部は、選択されたレイヤーの順番に基づいてレジストレーション画像を作成してもよい。これによれば、検者は、視認性又は診断目的を考慮して、所望の重ね合わせ順序を選択できる。なお、第1の画像データと第2の画像データのいずれかが複数の画像データを含む場合、3つ以上の画像データの重ね合わせ順序を設定できるようにしてもよい。   The instruction receiving unit may receive an instruction signal from the operation unit for setting the order of layers for superimposing the first image data and the second image data when creating the registration image. The image processing unit may create the registration image based on the order of the selected layers. According to this, the examiner can select a desired stacking order in consideration of the visibility or the diagnostic purpose. When either the first image data or the second image data includes a plurality of image data, the superposition order of three or more image data may be set.

<透過率の設定>
本装置において、レジストレーション画像を作成する際、第1の画像データと第2の画像データの少なくともいずれかの透過率を設定変更可能であってもよい。透過率は、0〜100%で変更可能であってもよい。これによれば、レジストレーション画像において、他の画像データの裏に形成された画像を容易に確認できる。
<Transmission setting>
In this apparatus, when creating a registration image, the transmittance of at least one of the first image data and the second image data may be changeable. The transmittance may be changeable from 0 to 100%. According to this, in the registration image, the image formed behind the other image data can be easily confirmed.

指示受付部は、第1の画像データと第2の画像データの少なくともいずれかの透過率を設定するための操作部からの指示信号を受け付けてもよい。画像処理部は、選択された透過率に基づいてレジストレーション画像を作成してもよい。これによれば、検者が所望する透過率に設定されたレジストレーション画像が得られる。なお、指示受付部は、各画像データの透過率をそれぞれ選択するための選択指示を受け付けてもよい。   The instruction receiving unit may receive an instruction signal from the operation unit for setting the transmittance of at least one of the first image data and the second image data. The image processing unit may create a registration image based on the selected transmittance. According to this, a registration image in which the transmittance is set by the examiner is obtained. The instruction receiving unit may receive a selection instruction for selecting the transmittance of each image data.

<明度又はコントラストの設定>
本装置において、レジストレーション画像を作成する際、第1の画像データと第2の画像データの少なくともいずれかの明度又はコントラストを設定変更可能であってもよい。これによれば、レジストレーション画像の視認性を調整できる。
<Setting brightness or contrast>
In this apparatus, when creating a registration image, the brightness or contrast of at least one of the first image data and the second image data may be changeable. According to this, the visibility of the registration image can be adjusted.

指示受付部は、第1の画像データと第2の画像データの少なくともいずれかの明度又はコントラストを設定するための操作部からの指示信号を受け付けてもよい。画像処理部は、選択された明度又はコントラストに基づいてレジストレーション画像を作成してもよい。これによれば、検者にとって見やすいレジストレーション画像に設定できる。   The instruction receiving unit may receive an instruction signal from the operation unit for setting the brightness or the contrast of at least one of the first image data and the second image data. The image processing unit may create the registration image based on the selected brightness or contrast. According to this, it is possible to set a registration image that is easy for the examiner to see.

<画像データの取捨選択>
本装置において、レジストレーション画像が表示部に表示された状態において、レジストレーション画像を構成する画像データを取捨選択するための操作部からの指示が受け付けられ、レジストレーション画像を構成する画像データが取捨選択可能であってもよい。画像処理部は、取捨選択によって設定された設定条件に基づいてレジストレーション画像を作成してもよい。
<Selection of image data>
In this device, when the registration image is displayed on the display unit, an instruction from the operation unit for selecting the image data forming the registration image is accepted, and the image data forming the registration image is deleted. It may be selectable. The image processing unit may create the registration image based on the setting conditions set by the selection.

<重ね合わせる領域の設定(図14参照)>
本装置において、レジストレーション画像を作成する際、第1の画像データと第2の画像データとを重ね合わせる重合領域を設定可能であってもよい。これによれば、検者の注目領域に関する視認性が向上される等、検者が所望するレジストレーション画像を取得できる。
<Setting of overlapping area (see FIG. 14)>
In this apparatus, when creating a registration image, it may be possible to set a superposition region in which the first image data and the second image data are overlapped. According to this, the registration image desired by the examiner can be acquired such that the visibility of the attention area of the examiner is improved.

指示受付部は、第1の画像データと第2の画像データとを重ね合わせる重合領域を設定するための操作部からの指示信号を受け付けてもよい。画像処理部は、設定された重合領域に基づいてレジストレーション画像を作成してもよい。これによれば、検者が所望する重合領域に設定されたレジストレーション画像が得られる。   The instruction receiving unit may receive an instruction signal from the operation unit for setting the overlapping area where the first image data and the second image data are overlapped. The image processing unit may create a registration image based on the set overlapping region. According to this, the registration image set in the overlapping region desired by the examiner can be obtained.

より詳細には、レジストレーション画像上で、任意の領域を設定可能であり、設定された領域内で出力する画像種別は、レジストレーション画像を構成する各画像種別から任意に選択可能である。なお、設定された領域に関して出力される画像種別は、1つに限定されず、複数であってもよい。この場合、検者が領域を設定してもよいし、予め設定された設定条件に基づいて重合領域を自動的に設定してもよい。この場合、重合領域が設定変更可能であってもよい。   More specifically, an arbitrary area can be set on the registration image, and the image type to be output in the set area can be arbitrarily selected from the image types forming the registration image. Note that the image type output for the set area is not limited to one, and may be a plurality. In this case, the examiner may set the area, or the overlap area may be automatically set based on preset setting conditions. In this case, the setting of the overlapping area may be changeable.

上記手法において、図14に示されるように、画像データにおける欠落箇所の補完に用いられてもよいし、複数の画像によるコラージュが行われてもよい。図14のコラージュにおいては、第1の眼底正面像(例えば、自発蛍光画像)及び第2の眼底正面像(例えば、カラー眼底画像)の少なくともいずれかと、マップ画像(例えば、OCTのマップ画像)とを重ね合わせたレジストレーション画像が表示されると共に、レジストレーション画像とは異なる第1の表示領域に第1の眼底正面像が単体で表示され、レジストレーション画像とは異なる第2の表示領域に第2の眼底正面像が単体で表示されている。   In the above method, as shown in FIG. 14, it may be used to complement the missing portion in the image data, or a collage using a plurality of images may be performed. In the collage of FIG. 14, at least one of a first fundus front image (for example, a spontaneous fluorescence image) and a second fundus front image (for example, a color fundus image), and a map image (for example, an OCT map image). The registration image in which the images are superimposed is displayed, the first front image of the fundus of the eye is displayed alone in the first display area different from the registration image, and the first front area image is displayed in the second display area different from the registration image. The front view of the fundus of No. 2 is displayed alone.

<特徴画像の作成(図15参照)>
画像処理部は、第1の画像データと第2の画像データとを重ね合わせた状態で、第1の画像データと第2の画像データとの間での差分処理(例えば、輝度値の差分又は比を得る処理)を行ってもよい。画像処理部は、差分処理に基づく差分画像を作成し、差分画像を出力してもよい。これによれば、他の部分が差し引かれた特徴的画像が得られる。
<Creation of characteristic image (see FIG. 15)>
The image processing unit, in a state in which the first image data and the second image data are overlapped with each other, performs difference processing between the first image data and the second image data (for example, a difference in brightness value or A process of obtaining a ratio) may be performed. The image processing unit may create a difference image based on the difference processing and output the difference image. According to this, a characteristic image in which other portions are subtracted can be obtained.

例えば、画像処理部は、新生血管を含む第1の眼底正面画像(例えば、OCTモーションコントラストエンフェイス画像、造影剤を用いた蛍光造影画像等)と、第1の眼底正面画像よりも新生血管が画像化されていない第2の眼底正面画像(例えば、OCTエンフェイス画像、自発蛍光画像等)との間で画像差分を行うことによって、新生血管に対して他の眼底血管が差し引かれた特徴的画像を得ることができる。   For example, the image processing unit may generate a first front fundus image including new blood vessels (for example, an OCT motion contrast interface image, a fluorescence contrast image using a contrast agent, etc.) and a new front blood vessel from the first front fundus image. By performing image difference between the second non-imaged frontal fundus image (for example, OCT face image, autofluorescence image, etc.), the characteristic that the other fundus blood vessels are subtracted from the new blood vessels Images can be obtained.

さらに、画像処理部は、得られた差分画像と他の画像とを重ね合わせたレジストレーション画像を作成するようにしてもよい。これによって、検者が所望する新たなレジストレーション画像を得ることができる。例えば、画像処理部は、前述の新生血管に対して他の眼底血管が差し引かれた特徴的画像と、カラー眼底正面像とを重ね合わせたレジストレーション画像を作成するようにしてもよい。   Further, the image processing unit may create a registration image by superimposing the obtained difference image and another image. As a result, a new registration image desired by the examiner can be obtained. For example, the image processing unit may create a registration image by superimposing the color fundus front image and the characteristic image in which other fundus blood vessels are subtracted from the new blood vessel.

<レポート(図4参照)>
本装置において、レジストレーション画像を含むレポート(例えば、カスタムレポート)が作成可能であってもよい。レジストレーション画像を含むレポートは、一つ又は複数のレジストレーション画像のみによるレポートであってもよいし、一つ又は複数のレジストレーション画像に加え、眼科検査装置によって取得された他の画像を含むレポートであってもよい。レジストレーション画像と眼科検査装置によって取得された他の画像が統合的に表示されることで、統合的なレポートが作成され、検者は、レジストレーション画像を活用した効果的な診断を行うことが可能となる。この場合、他の画像の種別を設定可能であってもよい。
<Report (See Figure 4)>
The apparatus may be capable of creating a report including a registration image (for example, a custom report). The report including the registration image may be a report based on only one or a plurality of registration images, or a report including one or a plurality of registration images and other images acquired by the ophthalmologic examination apparatus. May be The registration image and other images acquired by the ophthalmologic examination apparatus are displayed in an integrated manner to create an integrated report, which enables the examiner to make effective diagnosis using the registration image. It will be possible. In this case, another image type may be settable.

<マップ画像の重ね合わせ(図5参照)>
画像処理部は、第1の画像データとして、第1の眼科検査装置によって取得された被検眼のマップ画像である第1のマップ画像データと、第1の眼科検査装置によって取得された被検眼の正面像である第1の正面画像データであって第1のマップ画像データと対応付けされた第1の正面画像データと、を記憶部から取得してもよい。
<Overlay of map images (see Figure 5)>
The image processing unit includes, as the first image data, first map image data that is a map image of the eye to be inspected acquired by the first ophthalmic examination apparatus and the eye to be inspected obtained by the first ophthalmic examination apparatus. The first front image data that is the front image and the first front image data that is associated with the first map image data may be acquired from the storage unit.

画像処理部は、第2の画像データとして、第2の眼科検査装置によって取得された被検眼のマップ画像である第2のマップ画像データと、第2の眼科検査装置によって取得された被検眼の正面画像である第2の正面画像データとを記憶部から取得してもよい。   The image processing unit includes, as the second image data, second map image data which is a map image of the eye to be inspected acquired by the second ophthalmic examination apparatus and the eye to be inspected obtained by the second ophthalmic examination apparatus. The second front image data, which is a front image, may be acquired from the storage unit.

画像処理部は、第1のマップ画像データと、第1の正面画像データと、第2のマップ画像データと、第2の正面画像データとを重ね合わせたレジストレーション画像を作成してもよい(図5参照)。   The image processing unit may create a registration image by superimposing the first map image data, the first front image data, the second map image data, and the second front image data ( (See FIG. 5).

この場合、第1のマップ画像データ及び第2のマップ画像データの少なくともいずれかにおける画像種別は、設定変更可能であってもよい。また、画像処理部は、第1の正面画像データと第2の正面画像データとの間で位置合わせ処理を行うことによって、第1のマップ画像データと第2のマップ画像データとの間の位置合わせ処理を行ってもよい。   In this case, the image type in at least one of the first map image data and the second map image data may be changeable. In addition, the image processing unit performs a position alignment process between the first front image data and the second front image data to thereby determine the position between the first map image data and the second map image data. You may perform a matching process.

<OCTのマップ画像(又はエンフェイス画像)と視野のマップ画像(図5、図10、図11参照)>
本実施形態に係るレジストレーションは、OCTを少なくとも備える第1の眼科検査装置によって得られた第1の画像データと、視野測定機能を少なくとも備える第2の眼科検査装置によって得られた第2の画像データとを重ね合わせる際に有利である。
<Map image of OCT (or interface image) and map image of field of view (see FIGS. 5, 10, and 11)>
In the registration according to the present embodiment, the first image data obtained by the first ophthalmic examination apparatus having at least OCT and the second image obtained by the second ophthalmic examination apparatus having at least a visual field measurement function. This is advantageous when overlaying data.

画像処理部は、第1の眼科検査装置によって取得されたOCT二次元画像(例えば、眼底を解析した解析マップ画像、OCTエンフェイス画像)と、第2の眼科検査装置によって取得された被検眼のマップ画像を重ね合わせたレジストレーション画像を作成してもよい。   The image processing unit includes an OCT two-dimensional image (for example, an analysis map image obtained by analyzing the fundus of the eye, an OCT interface image) acquired by the first ophthalmic examination apparatus, and an eye to be inspected acquired by the second ophthalmic examination apparatus. A registration image may be created by superimposing map images.

例えば、第1の眼科検査装置は、眼底断層像を撮像するためのOCT光学系と、眼底正面像を撮像するための第1の撮像光学系と、を備える眼科用OCTデバイスであってもよい。第1の撮像光学系としては、SLOであってもよいし、眼底カメラであってもよい。また、OCT光学系が、第1の撮像光学系を兼用する構成であってもよい。   For example, the first ophthalmologic examination apparatus may be an ophthalmic OCT device including an OCT optical system for capturing a fundus tomographic image and a first imaging optical system for capturing a front image of the fundus. .. The first imaging optical system may be an SLO or a fundus camera. In addition, the OCT optical system may be configured to also serve as the first imaging optical system.

第1の画像データは、OCT二次元画像(例えば、眼底を解析した解析マップ画像、OCTエンフェイス画像)と、第1の撮像光学系によって取得された第1の眼底正面像であってOCT二次元画像に対応付けされた正面像であってもよい。   The first image data is an OCT two-dimensional image (for example, an analysis map image obtained by analyzing the fundus of the eye, an OCT interface image), and a first fundus front image acquired by the first imaging optical system. The front image may be associated with the three-dimensional image.

例えば、第2の眼科検査装置は、視野を測定するための視野測定光学系と、眼底正面像を撮像するための第2の撮像光学系と、を備える眼科検査装置であってもよい。第2の画像データは、視野測定光学系によって得られた視野マップ画像と、第2の撮像光学系によって取得された第2の眼底正面像であってマップ画像に対応づけされた眼底正面像であってもよい。    For example, the second ophthalmic examination apparatus may be an ophthalmic examination apparatus including a visual field measurement optical system for measuring a visual field and a second imaging optical system for taking a front image of the fundus. The second image data is a visual field map image obtained by the visual field measurement optical system and a second fundus front image acquired by the second imaging optical system, which is a fundus front image associated with the map image. It may be.

この場合、第1の撮像光学系によって取得された第1の眼底正面像と、第2の撮像光学系によって取得された第2の眼底正面像とをマッチングさせることによって、OCT二次元画像と、視野マップ画像との間の位置合わせを行うようにしてもよい。この場合、第1の眼底正面像と第2の眼底正面像との間の倍率を調整することによって、OCT二次元画像と、視野マップ画像との間との間の倍率のずれを補正してもよい。   In this case, by matching the first fundus front image acquired by the first imaging optical system and the second fundus front image acquired by the second imaging optical system, an OCT two-dimensional image, You may make it align with the visual field map image. In this case, the magnification shift between the OCT two-dimensional image and the visual field map image is corrected by adjusting the magnification between the first fundus front image and the second fundus front image. Good.

また、撮像光学系の違い等に起因する画像間の不整合を、眼底正面像の少なくともいずれかを変形させることによって補正してもよい。この場合、画像処理部は、第2の眼底正面像に対して第1の眼底正面像を変形させると共に、視野マップ画像に対してOCT二次元画像を変形させてもよい。この場合、OCT二次元画像は連続的に形成されるので、画像を変形しても視認性が確保されるのに対し、視野マップ画像(例えば、視感度マップ)は、離散的に一定の間隔で表示されるのが一般的であり、変形によって見づらくなる可能性がある。そこで、視野マップ画像に対してOCT二次元画像を変形させることで、視野マップ画像の視認性が維持され、結果として、両マップ画像の視認性が確保される。   Further, the inconsistency between the images due to the difference in the imaging optical system or the like may be corrected by deforming at least one of the fundus front images. In this case, the image processing unit may deform the first front surface image of the fundus with respect to the second front surface image of the fundus, and may also deform the OCT two-dimensional image with respect to the visual field map image. In this case, since the OCT two-dimensional images are continuously formed, the visibility is ensured even if the images are deformed, while the view map image (for example, the visibility map) is discretely spaced at constant intervals. It is generally displayed with, and it may be difficult to see due to deformation. Therefore, the visibility of the view map image is maintained by deforming the OCT two-dimensional image with respect to the view map image, and as a result, the visibility of both map images is secured.

ここで、視野マップ画像に対して重ね合わせるOCT二次元画像(解析マップ画像、OCTエンフェイス画像等)が複数種別で切換可能であることによって、被検眼のOCT情報と視野情報との関係性を多面的に確認することが可能である。   Here, since the OCT two-dimensional images (analysis map image, OCT interface image, etc.) to be superimposed on the visual field map image can be switched in a plurality of types, the relationship between the OCT information of the eye to be examined and the visual field information can be shown. It is possible to confirm from multiple sides.

<眼底正面像と視野のマップ画像(図6参照)>
本実施形態に係るレジストレーションは、眼底正面像を撮像するための第1の撮像光学系を備える第1の眼科検査装置によって得られた第1の画像データと、視野測定機能を少なくとも備える第2の眼科検査装置によって得られた第2の画像データとを重ね合わせる際に有利である。
<Front fundus image and visual field map image (see FIG. 6)>
The registration according to the present embodiment includes the first image data obtained by the first ophthalmologic examination apparatus including the first imaging optical system for capturing the frontal image of the fundus, and the second image data including at least the visual field measurement function. This is advantageous when superimposing the second image data obtained by the ophthalmologic examination apparatus.

第1の画像データは、第1の撮像光学系によって取得された第1の眼底正面像であってもよい。第1の眼科検査装置は、複数用意されてもよく、異なる第1の眼科検査装置によって取得された眼底正面像が選択可能であってもよい。   The first image data may be a first fundus front image acquired by the first imaging optical system. A plurality of first ophthalmic examination apparatuses may be prepared, and a fundus front image acquired by a different first ophthalmic examination apparatus may be selectable.

例えば、第2の眼科検査装置は、視野を測定するための視野測定光学系と、眼底正面像を撮像するための第2の撮像光学系と、を備える眼科検査装置であってもよい。第2の画像データは、視野測定光学系によって得られた視野マップ画像と、第2の撮像光学系によって取得された第2の眼底正面像であってマップ画像に対応づけされた眼底正面像であってもよい。   For example, the second ophthalmic examination apparatus may be an ophthalmic examination apparatus including a visual field measurement optical system for measuring a visual field and a second imaging optical system for taking a front image of the fundus. The second image data is a visual field map image obtained by the visual field measurement optical system and a second fundus front image acquired by the second imaging optical system, which is a fundus front image associated with the map image. It may be.

この場合、眼底正面撮像光学系によって取得された第1の眼底正面像と、第2の撮像光学系によって取得された第2の眼底正面像とをマッチングさせることによって、眼底正面像間の位置合わせを行うようにしてもよい。この場合、第1の眼底正面像と第2の眼底正面像との間の倍率を調整してもよい。   In this case, alignment between the front fundus images is performed by matching the first front fundus image acquired by the front fundus imaging optical system with the second front fundus image acquired by the second imaging optical system. May be performed. In this case, the magnification between the first fundus front image and the second fundus front image may be adjusted.

ここで、視野マップ画像に対して重ね合わせる第1の眼底正面像(例えば、眼底カメラによって取得された眼底正面像、SLOによって取得された眼底正面像、OCTによって取得された眼底正面像)が複数種別で切換可能であることによって、被検眼の眼底正面像と視野情報との関係性を多面的に確認することが可能である。   Here, there are a plurality of first fundus front images (for example, a fundus front image acquired by a fundus camera, a fundus front image acquired by SLO, and a fundus front image acquired by OCT) to be superimposed on the visual field map image. By being switchable depending on the type, it is possible to check the relationship between the front image of the fundus of the eye to be inspected and the visual field information in multiple ways.

<第3の画像データとのレジストレーション画像(図6参照)>
画像処理部は、第1の眼科検査装置及び第2の眼科検査装置とは異なる第3の眼科検査装置(例えば、眼底撮影装置17)によって取得された被検眼の画像データである第3の画像データと、第1の眼科検査装置によって取得された被検眼の画像データである第1の画像データとを重ね合わせたレジストレーション画像を作成してもよい。
<Registration image with the third image data (see FIG. 6)>
The image processing unit is a third image which is image data of the eye to be inspected, which is acquired by a third ophthalmic examination apparatus (for example, the fundus imaging apparatus 17) different from the first ophthalmic examination apparatus and the second ophthalmic examination apparatus. A registration image may be created by superimposing the data and the first image data which is the image data of the eye to be inspected acquired by the first ophthalmologic examination apparatus.

この場合、第1の画像データに重ね合わせる画像の画像種別を、第2の画像データ及び第3の画像データとの間で設定変更可能であってもよい。なお、第1の眼科検査装置は、眼科用OCTデバイスであって、第2の眼科検査装置は、視野検査装置であって、第3の眼科検査装置は、眼底正面像を撮影するための眼底撮影装置であってもよい。第3の眼科検査装置は、眼底カメラ、SLOのいずれかであってもよい。   In this case, the image type of the image to be superimposed on the first image data may be changeable between the second image data and the third image data. The first ophthalmic examination apparatus is an OCT device for ophthalmology, the second ophthalmic examination apparatus is a visual field examination apparatus, and the third ophthalmic examination apparatus is a fundus for taking a front image of the fundus of the eye. It may be a photographing device. The third ophthalmologic examination apparatus may be either a fundus camera or SLO.

<検査日ベースでのデータ出力(図7、図13参照)>
画像処理部は、眼科検査装置によって取得された被検眼の画像データを処理して画像データを含むレポートを作成してもよい。なお、画像処理部は、複数の眼科検査装置によって取得された被検眼の画像データを処理して、複数の眼科検査装置による画像データを含むカスタムレポートを作成してもよい。
<Data output based on inspection date (see FIGS. 7 and 13)>
The image processing unit may process the image data of the subject's eye acquired by the ophthalmic examination apparatus and create a report including the image data. The image processing unit may process the image data of the eye to be inspected acquired by the plurality of ophthalmic examination apparatuses to create a custom report including the image data of the plurality of ophthalmic examination apparatuses.

眼科画像処理装置は、設定された検査日を基準として、画像データを出力する機能を有してもよい。当該機能によって、検者が見たい検査日に関する複数の画像データを容易に確認できる。   The ophthalmic image processing apparatus may have a function of outputting image data with reference to the set examination date. With this function, the examiner can easily confirm a plurality of image data regarding the examination date that he/she wants to see.

例えば、本装置は、レポートとして出力する画像データの検査日を設定する設定部を備えてもよい。設定部は、レポートとして出力する画像データの検査日を手動にて設定可能であってもよく、検査日を設定するための操作部からの指示信号を受け付ける指示受付部を備え、指示信号に基づいて設定を行うようにしてもよい。また、設定部は、予め設定された設定条件に応じて検査日を設定してもよい。検査日の設定手法としては、一定期間(例えば、週単位、月単位、年単位等)を設定する手法も含まれる。   For example, the apparatus may include a setting unit that sets the inspection date of the image data output as a report. The setting unit may be able to manually set the inspection date of the image data to be output as a report, and includes an instruction receiving unit that receives an instruction signal from the operation unit for setting the inspection date, and based on the instruction signal. You may make it set by setting. In addition, the setting unit may set the inspection date according to preset setting conditions. The method of setting the inspection date also includes a method of setting a fixed period (for example, weekly, monthly, yearly, etc.).

画像処理部は、設定された検査日又は検査日を基準とする一定期間内の画像データを記憶部から取得してもよい。この場合、検査日の設定手法として一定期間が設定される場合、画像処理部は、設定された一定期間に含まれる画像データを記憶部から取得してもよい。画像処理部は、取得された画像データに基づくレポートを作成してもよい。   The image processing unit may acquire the set inspection date or image data within a certain period based on the inspection date from the storage unit. In this case, when a certain period is set as the inspection date setting method, the image processing unit may acquire the image data included in the set certain period from the storage unit. The image processing unit may create a report based on the acquired image data.

レポートとして出力する画像データの検査日は、設定変更可能であってもよい。画像処理部は、設定変更された検査日又は検査日を基準とする一定期間内の画像データを記憶部から取得してもよい。   The inspection date of the image data output as a report may be configurable. The image processing unit may acquire, from the storage unit, the inspection date whose setting has been changed or the image data within a certain period based on the inspection date.

画像処理部は、設定部によって設定可能な検査日リストを、記憶部に記憶された被検眼の画像データに付帯された検査日データに基づいて作成してもよい。画像処理部は、作成された検査日データを、表示部上において選択可能に表示してもよい。これによって、検査日の設定をスムーズに行うことができる。   The image processing unit may create the examination date list that can be set by the setting unit based on the examination date data attached to the image data of the eye to be examined stored in the storage unit. The image processing unit may selectably display the created examination date data on the display unit. As a result, the inspection date can be set smoothly.

なお、レポートとして出力する画像データの画像種別を設定可能であってもよい。画像処理部は、設定された検査日及び画像種別に基づいて、設定された検査日又は検査日を基準とする一定期間内の画像データであって設定された画像種別に対応する画像データを記憶部から取得してもよい。画像処理部は、取得された画像データに基づくレポートを作成してもよい。   The image type of the image data output as a report may be settable. The image processing unit stores, based on the set inspection date and image type, the set inspection date or image data within a certain period based on the inspection date and corresponding to the set image type. It may be obtained from the department. The image processing unit may create a report based on the acquired image data.

<拡大表示>
画像処理部は、眼科検査装置によって取得された被検眼の画像データの一部を拡大してレポートに表示させてもよい。例えば、画像処理部は、画像データ全体ではなく、画像データの特定の領域を拡大してもよい。したがって、レポート出力画面を占める画像データの表示枠の大きさを変えずに、画像の一部の観察したい部分だけを拡大することができる。これによって、レポート上の他の画像と重なって見えなくなることを防げる。
<Enlarged display>
The image processing unit may magnify a part of the image data of the eye to be inspected acquired by the ophthalmic examination apparatus and display the enlarged image on the report. For example, the image processing unit may enlarge a specific area of the image data instead of enlarging the entire image data. Therefore, it is possible to enlarge only a part of the image to be observed without changing the size of the display frame of the image data that occupies the report output screen. This prevents it from being overlaid with other images on the report.

なお、画像データを拡大する部分は、1箇所であってもよいし複数箇所であってもよい。例えば、画像データの黄斑と視神経乳頭の2箇所を拡大表示してもよい。   Note that the image data may be enlarged at one location or at a plurality of locations. For example, two locations of the macula and the optic disc of the image data may be enlarged and displayed.

指示受付部は、画像データを拡大する際、倍率(拡大率または縮小率)および拡大領域を設定するための指示信号を受け付けてもよい。この場合、画像処理部は、指示受付部によって受け付けた指示信号に基づいて、画像データの一部を拡大してレポートに表示してもよい。なお、拡大領域は、例えば、画像データの一部の拡大される領域のことである。   When enlarging the image data, the instruction receiving unit may receive an instruction signal for setting a magnification (enlargement ratio or reduction ratio) and an enlargement area. In this case, the image processing unit may magnify a part of the image data and display it in the report based on the instruction signal received by the instruction receiving unit. The enlarged area is, for example, an area where a part of the image data is enlarged.

指示受付部は、レポート上に表示された少なくとも一つの画像データを検者が選択するための選択指示を受け付けてもよい。さらに、画像処理部は、選択指示に基づいて選択された少なくとも一つの画像データの一部を拡大するようにしてもよい。これによって、検者は、レポート上における所望の画像データの一部を容易に拡大でき、所望のレポートを簡易に作成できる。   The instruction receiving unit may receive a selection instruction for the examiner to select at least one image data displayed on the report. Further, the image processing unit may enlarge a part of at least one image data selected based on the selection instruction. Thereby, the examiner can easily enlarge a part of the desired image data on the report and can easily create the desired report.

この場合、検者の操作によって画像データの一部が拡大されてもよく、例えば、少なくとも一つの画像データがカーソルで指定されることで画像データが選択され、指示受付部からの指示信号(例えば、ホイール操作、クリック操作等)に基づいて、選択された画像データの拡大処理が行われてもよい。その他、例えば、少なくとも一つの画像データに対するタッチパネル操作(例えば、ピンチアウト操作、タップ操作)によって、画像データの選択及び画像データの拡大処理が行われてもよい。もちろん、これらに限定されず、画像処理部は、予め設定された倍率になるよう、選択された画像データを自動的に拡大させてもよい。   In this case, a part of the image data may be enlarged by an operator's operation. For example, the image data is selected by designating at least one image data with a cursor, and an instruction signal from the instruction receiving unit (for example, , Wheel operation, click operation, etc.), the enlargement process of the selected image data may be performed. In addition, the image data selection and the image data enlargement processing may be performed by, for example, a touch panel operation (for example, a pinch-out operation or a tap operation) on at least one image data. Of course, the present invention is not limited to these, and the image processing unit may automatically enlarge the selected image data so that the magnification is set in advance.

画像処理部は、レポートに表示させた画像データの倍率をレポート上で任意に変更してもよい。例えば、画像処理部は、画像の倍率を1.5倍、2倍、3倍、・・・、n倍に変更してもよい。例えば、画像処理部は、指示受付部によって受け付けた倍率を設定するための指示信号に基づいて、レポート上の画像データを拡大または縮小してもよい。   The image processing unit may arbitrarily change the magnification of the image data displayed on the report on the report. For example, the image processing unit may change the magnification of the image to 1.5 times, 2 times, 3 times,..., N times. For example, the image processing unit may enlarge or reduce the image data on the report based on the instruction signal for setting the magnification accepted by the instruction accepting unit.

画像処理部は、レポートに表示する画像データの一部を拡大する場合、指示受付部によって受け付けた拡大領域を設定するための指示信号に基づいて、レポートに表示させた画像データの拡大領域をレポート上で変更してもよい。例えば、画像処理部は、指示受付部によって受け付けた拡大領域を設定するための指示信号に基づいて、画像データの拡大領域を変更してもよい。   When enlarging a part of the image data displayed in the report, the image processing unit reports the enlarged area of the image data displayed in the report based on the instruction signal for setting the enlarged area received by the instruction receiving unit. You may change it above. For example, the image processing unit may change the enlarged region of the image data based on the instruction signal for setting the enlarged region received by the instruction receiving unit.

例えば、被検眼の黄斑と視神経乳頭の両方が写る画像の場合、黄斑および視神経乳頭の一方が写るように拡大領域を変更してもよい。もちろん、黄斑または視神経乳頭に限らず、病変部または他の部位等の特定の領域が写るように拡大領域を変更してもよい。画像処理部は、例えば、指示受付部から受け付けた検者からの指示に基づいて、拡大領域を変更する。   For example, in the case of an image showing both the macula and the optic disc of the eye to be examined, the enlargement area may be changed so that one of the macula and the optic disc is shown. Of course, the enlargement region may be changed so that a specific region such as a lesion or another site is not limited to the macula or the optic disc. The image processing unit changes the enlargement area based on, for example, an instruction from the examiner received from the instruction receiving unit.

なお、画像処理部は、レポート上の複数の画像データの倍率と拡大領域を個別に変更できてもよい。例えば、画像処理部は、指示受付部によって受け付けられた指示信号に基づいて選択された画像データの倍率と拡大領域を変更してもよい。   The image processing unit may be able to individually change the magnification and the enlargement area of the plurality of image data on the report. For example, the image processing unit may change the magnification and the enlargement region of the image data selected based on the instruction signal received by the instruction receiving unit.

なお、画像処理部は、少なくとも2つの画像データの倍率および/または拡大領域を同期させてもよい。例えば、画像処理部は、指示受付部によって受け付けた指示信号に基づいて、倍率および/または拡大領域を同期させる少なくとも2つの画像を選択し、選択された画像データの倍率および/または拡大領域を同期させてもよい。   The image processing unit may synchronize the magnification and/or enlargement area of at least two pieces of image data. For example, the image processing unit selects, based on the instruction signal received by the instruction receiving unit, at least two images whose magnification and/or enlargement area are to be synchronized, and synchronizes the magnification and/or enlargement area of the selected image data. You may let me.

画像処理部は、レポート上に表示される少なくとも2つの画像データのうち、撮影範囲の狭い画像データの倍率および/または拡大領域に合わせてもよい。この場合、例えば、撮影範囲の広い方の画像データの倍率および/または拡大領域は、撮影範囲の狭い方の画像データの倍率および/または拡大領域に、自動的に調整されてもよいし、検者の手動操作を介して調整されてもよい。   The image processing unit may match the magnification and/or enlargement area of the image data having a narrow imaging range among at least two pieces of image data displayed on the report. In this case, for example, the magnification and/or enlargement area of the image data having the wider shooting range may be automatically adjusted to the magnification and/or the enlargement area of the image data having the narrower shooting range. It may be adjusted via manual operation by the operator.

例えば、同一部位の複数のOCT信号に基づいて取得されるモーションコントラスト画像は、眼底カメラ等によって撮影された眼底画像に比べて撮影範囲が狭い場合が多い。種類のことなる画像データを同一のレポートに並べる場合、画像処理部は、拡大領域を自動で調整してもよい。例えば、画像処理部は、撮影範囲が狭い画像(例えば、モーションコントラスト画像)に合わせて撮影範囲が広い画像(例えば、眼底カメラ画像)の拡大領域を調整してもよい。これによって、例えば、検者は、眼底カメラ画像等をモーションコントラスト画像等と同じ倍率で観察することができる。
なお、画像処理部は、少なくとも2つの画像データの倍率および/または拡大領域を、予め設定された倍率および/または拡大領域に調整してもよい。予め設定された倍率および/または拡大領域に関して、例えば、検者が任意に変更できてもよいし、固定値であってもよい。もちろん、前述のように、撮影範囲の狭い画像データの倍率および/または拡大領域に設定されてもよい。この場合、少なくとも、撮影範囲の広い画像データが拡大さるように設定されることで、注目領域における視認性が向上される。
For example, a motion contrast image acquired based on a plurality of OCT signals of the same region often has a narrower imaging range than a fundus image captured by a fundus camera or the like. When arranging different types of image data in the same report, the image processing unit may automatically adjust the enlargement area. For example, the image processing unit may adjust the enlargement region of an image having a wide shooting range (for example, a fundus camera image) in accordance with an image having a narrow shooting range (for example, a motion contrast image). Thereby, for example, the examiner can observe the fundus camera image and the like at the same magnification as the motion contrast image and the like.
The image processing unit may adjust the magnification and/or enlargement area of at least two image data to a preset magnification and/or enlargement area. The examiner may arbitrarily change the preset magnification and/or enlargement area, or may have a fixed value. Of course, as described above, it may be set to the magnification and/or enlargement area of the image data having a narrow photographing range. In this case, at least image data having a wide shooting range is set to be enlarged, so that the visibility in the attention area is improved.

なお、レポート上で画像の倍率を変更する他、一部が拡大された状態で画像データを取得してもよい。詳細には、眼科検査装置によって取得された画像データをそのままのサイズで取得するのではなく、例えば、眼科検査装置において予め倍率と拡大領域が設定された画像データを取得してもよい。そして、予め設定された倍率と拡大領域の画像をレポートに表示させてもよい。   In addition to changing the magnification of the image on the report, the image data may be acquired in a partially enlarged state. In detail, the image data acquired by the ophthalmic examination apparatus may not be acquired as it is, but, for example, the image data in which the magnification and the enlargement area are set in advance may be acquired in the ophthalmic examination apparatus. Then, the image of the preset magnification and the enlarged area may be displayed in the report.

なお、レポート表示に関して、例えば、記憶部に記憶される形式にて表示部に表示されてもよい。その他、例えば、レポートは、外部に出力又は印刷される形式にて表示部に表示されてもよい。この場合、例えば、レポートのレイアウトとして、背景が白色にて表示され、白色の背景に対して画像データが表示されてもよい。   Regarding the report display, for example, it may be displayed on the display unit in a format stored in the storage unit. In addition, for example, the report may be displayed on the display unit in a format that is output or printed externally. In this case, for example, as the layout of the report, the background may be displayed in white and the image data may be displayed against the white background.

<実施例>
本実施例に係る眼科画像処理装置の記憶部30には、本装置に接続された複数の眼科検査装置(例えば、眼科用OCTデバイス10、視野検査装置15、眼底撮影装置17)によって取得された画像データが記憶されている。なお、画像データは、患者毎に分類されており、患者毎に識別可能に保存されている。記憶された画像データは、画像閲覧用のソフトウェアを用いて閲覧可能であり、さらに、記憶された画像データに対する解析結果等を含めたレポートが作成可能である。記憶部30に記憶された画像データとしては、眼科検査装置によって取得される撮影画像データ、眼科検査装置によって取得されるマップ画像データであってもよい。マップ画像データは、例えば、撮影画像、又は測定結果を解析することによって得られる。
<Example>
In the storage unit 30 of the ophthalmic image processing apparatus according to the present embodiment, a plurality of ophthalmic examination apparatuses (for example, the OCT device 10 for ophthalmology, the visual field examination apparatus 15, the fundus imaging apparatus 17) connected to the apparatus are obtained. Image data is stored. The image data is classified for each patient and is stored so as to be identifiable for each patient. The stored image data can be browsed using image browsing software, and a report including analysis results of the stored image data can be created. The image data stored in the storage unit 30 may be captured image data acquired by the ophthalmic examination apparatus or map image data acquired by the ophthalmic examination apparatus. The map image data is obtained, for example, by analyzing a captured image or a measurement result.

撮影画像と、撮影画像に基づいて得られるマップ画像は、対応付けて記憶部30に記憶されてもよい。この場合、プロセッサ20は、撮影画像とマップ画像とを分離して、2つの画像として記憶部30に記憶してもよい。これによって、撮影画像とマップ画像は、それぞれ独立した画像として用いることができ、レジストレーション画像を作成する際に有利である。例えば、撮影画像とマップ画像とを重ね合わせた状態で記憶した場合、これらは一体化しているので、独立して透過率を調整したり、一方の重ね合わせを一旦取り消したりするような処理が困難である。これに対し、分離して記憶しておくことで、独立した透過率の調整、レジストレーション画像を構成する一部の画像種別の一旦取消等において有利である。   The captured image and the map image obtained based on the captured image may be stored in the storage unit 30 in association with each other. In this case, the processor 20 may separate the captured image and the map image and store them in the storage unit 30 as two images. As a result, the photographed image and the map image can be used as independent images, which is advantageous when creating a registration image. For example, when a captured image and a map image are stored in a superposed state, they are integrated, so it is difficult to adjust the transmittance independently or to cancel the superimposition of one temporarily. Is. On the other hand, storing the data separately is advantageous in adjusting the transmittance independently, temporarily canceling some image types constituting the registration image, and the like.

<テンプレート作成画面>
レジストレーション画像の基礎となる画像(レジストレーション画像を構成する画像)の種別は、テンプレートとして予め設定されてもよい。テンプレートデータは、例えば、記憶部30に記憶される。テンプレートは、ソフトウェア上で検者によって作成されてもよいし、デフォルト設定として予め用意されてもよい。さらに、新たなテンプレートデータが、通信手段を介して登録されてもよい。
<Template creation screen>
The type of the image (the image forming the registration image) that is the basis of the registration image may be set in advance as a template. The template data is stored in the storage unit 30, for example. The template may be created by an examiner on the software, or may be prepared in advance as a default setting. Further, new template data may be registered via the communication means.

図8は、レポートのテンプレートをソフトウェア上で作成するための画面の一例を示す図である。プロセッサ20は、レジストレーション画像を含むレポートのテンプレートを作成できる。レジストレーション画像を含むレポートは、一つ又は複数のレジストレーション画像のみによるレポートであってもよいし、一つ又は複数のレジストレーション画像に加え、眼科検査装置によって取得された他の画像を含むレポート(図4参照)であってもよい。他の画像の例としては、眼科用OCTデバイスによって取得された二次元画像(例えば、マップ画像、OCTエンフェイス画像、解析チャート画像、正面像等)、視野検査装置によって取得された二次元画像(例えば、マップ画像、正面像)、眼撮影装置によって取得された正面像等が考えられる。   FIG. 8 is a diagram showing an example of a screen for creating a report template on software. The processor 20 can create a template for the report that includes the registration image. The report including the registration image may be a report including only one or a plurality of registration images, or a report including one or a plurality of registration images and other images acquired by the ophthalmologic examination apparatus. (See FIG. 4). Examples of other images include a two-dimensional image obtained by an OCT device for ophthalmology (for example, a map image, an OCT interface image, an analysis chart image, a front image, etc.), a two-dimensional image obtained by a visual field inspection device ( For example, a map image, a front image), a front image acquired by an eye photographing device, and the like are conceivable.

テンプレート作成画面において、プロセッサ20は、複数の画像種別を選択可能に表示部に表示すると共に、画像種別を選択するための操作部4からの選択指示を受け付けてもよい。複数の画像種別は、例えば、リスト100として表示されてもよい。   On the template creation screen, the processor 20 may display a plurality of image types on the display unit in a selectable manner, and may accept a selection instruction from the operation unit 4 for selecting the image types. The plurality of image types may be displayed as the list 100, for example.

選択可能な画像種別として、レジストレーション画像が選択可能であってもよい。レジストレーション画像の画像種別が複数設けられ、複数の種別から一つの種別が選択可能であってもよい。レジストレーション画像の画像種別のパターンとしては、種々のパターンが考えられる(詳しくは、後述する)。この場合、選択方式は、複数種のレジストレーション画像に関する画像種別の一つを選択する方式であってもよいし、レジストレーション画像の基礎となる各画像の種別を複数選択することでレジストレーション画像の画像種別を選択する方式であってもよい。   A registration image may be selectable as the selectable image type. A plurality of image types of registration images may be provided, and one type may be selectable from the plurality of types. Various patterns are conceivable as the pattern of the image type of the registration image (details will be described later). In this case, the selection method may be a method of selecting one of the image types related to a plurality of types of registration images, or by selecting a plurality of types of each image that is the basis of the registration image. Alternatively, the image type may be selected.

レジストレーション画像は、異なる眼科検査装置によって取得された画像同士が重ね合わせされた画像であってもよく、異なる眼科検査装置によって取得された画像としては、例えば、眼科用OCTデバイスと他の眼科検査装置によって取得された画像、視野検査装置と他の眼科検査装置によって取得された画像がありうる。なお、レジストレーションの基礎となる画像は、撮影画像、マップ画像等であってもよい。   The registration image may be an image obtained by superimposing images acquired by different ophthalmic examination apparatuses. Examples of the images acquired by different ophthalmic examination apparatuses include, for example, an OCT device for ophthalmology and another ophthalmic examination. There may be images acquired by the device, images acquired by the visual field inspection device and other ophthalmic examination devices. The image that is the basis of registration may be a captured image, a map image, or the like.

テンプレート作成画面において、プロセッサ20は、画像種別を選択するための指示信号を受け付け、選択された画像種別に対応する画像を、レポート表示領域200上に表示するようにしてもよい。この場合、レジストレーション画像及び他の画像の少なくともいずれかが、選択された画像種別に応じてレポート表示領域200に表示されてもよい。   On the template creation screen, the processor 20 may receive an instruction signal for selecting an image type and display an image corresponding to the selected image type on the report display area 200. In this case, at least one of the registration image and the other image may be displayed in the report display area 200 according to the selected image type.

プロセッサ20は、操作部4からの操作信号に基づいて、画像種別の追加又は削除を行ってもよい(例えば、クリック、ドラッグ操作等)。プロセッサ20は、画像種別の追加又は削除に応じて、レポート表示領域200に表示される画像を変更してもよい。プロセッサ20は、レポート表示領域200に表示される各画像のレイアウト(例えば、表示位置又は表示倍率等)を操作部4からの操作信号に基づいて変更してもよい。また、テンプレートが作成される場合、少なくとも一つの画像種別を予め含んだテンプレートに対して画像種別の追加又は削除が行われてもよいし、新規のテンプレートに対して画像種別の追加又は削除が行われてもよい。   The processor 20 may add or delete image types based on an operation signal from the operation unit 4 (for example, click, drag operation, etc.). The processor 20 may change the image displayed in the report display area 200 according to addition or deletion of the image type. The processor 20 may change the layout (for example, display position or display magnification) of each image displayed in the report display area 200 based on an operation signal from the operation unit 4. In addition, when a template is created, image types may be added or deleted from a template that includes at least one image type in advance, or image types may be added or deleted from a new template. You may break.

レジストレーション画像に対応する画像種別が選択された場合、プロセッサ20は、レジストレーション画像の種類を示す文字及びグラフィックの少なくともいずれかを含む画像210を、レポート表示領域200に表示するようにしてもよい。これによって、検者は、レジストレーション画像の種類を容易に確認できる。なお、レジストレーション画像の基礎となる各画像の種別を示す文字が表示されることによって、検者は、レジストレーション画像の種類を確実かつスムーズに確認できる。レジストレーション画像の種類を示すグラフィックが表示される場合、グラフィックは、実際の撮影画像であってもよいし、実際の画像を模したグラフィック画像であってもよい。   When the image type corresponding to the registration image is selected, the processor 20 may display the image 210 including at least one of characters and/or graphics indicating the type of the registration image in the report display area 200. .. This allows the examiner to easily confirm the type of registration image. By displaying the characters indicating the type of each image that is the basis of the registration image, the examiner can confirm the type of the registration image reliably and smoothly. When a graphic indicating the type of registration image is displayed, the graphic may be an actual captured image or a graphic image simulating the actual image.

レポート表示領域200に表示された画像種別をベースとしてレポートのテンプレートが作成されると、作成されたテンプレートが記憶部30に記憶される。作成されたテンプレートは、レポートとして出力可能となる。   When a report template is created based on the image type displayed in the report display area 200, the created template is stored in the storage unit 30. The created template can be output as a report.

<テンプレート選択画面>
テンプレート選択画面(図4参照)において、複数のテンプレートから一つのテンプレートを選択するための操作部4からの選択指示を受け付けてもよい。プロセッサ20は、複数のテンプレート220をグラフィックとして表示部1に表示する共に、操作部4からの選択指示を受け付けてもよい。この場合、複数のテンプレート220としては、デフォルトのテンプレートの他、新たに作成されたテンプレートが表示されてもよい。
<Template selection screen>
On the template selection screen (see FIG. 4), a selection instruction from the operation unit 4 for selecting one template from a plurality of templates may be accepted. The processor 20 may display the plurality of templates 220 as graphics on the display unit 1 and accept a selection instruction from the operation unit 4. In this case, as the plurality of templates 220, a newly created template may be displayed in addition to the default template.

この場合、プロセッサ20は、記憶部30に記憶された複数の被検者情報から一つの被検者を選択するための操作部4からの選択指示を受け付けてもよい。テンプレートが選択されると、プロセッサ20は、選択された被検者の画像であって選択されたテンプレート上での画像種別に対応する画像を記憶部30から取得し、取得された画像に基づいてレポートを作成してもよい。   In this case, the processor 20 may receive a selection instruction from the operation unit 4 for selecting one subject from the plurality of subject information stored in the storage unit 30. When the template is selected, the processor 20 acquires from the storage unit 30 an image of the selected subject corresponding to the image type on the selected template, and based on the acquired image. You may create a report.

<レジストレーション画面>
選択されたテンプレートにおいてレジストレーション画像が含まれる場合、プロセッサ20は、レジストレーションを実行するためのレジストレーション画面(図2参照)を表示部1に表示してもよい。なお、レジストレーション画像が含まれない場合、プロセッサ20は、レポートの作成に移行してもよい。
<Registration screen>
When the registration image is included in the selected template, the processor 20 may display the registration screen (see FIG. 2) for executing the registration on the display unit 1. It should be noted that if the registration image is not included, the processor 20 may move to the generation of the report.

レジストレーション画面において、プロセッサ20は、異なる眼科検査装置によって取得された画像同士の位置合わせ処理、又は重ね合わせ処理(重畳処理)を行うようにしてもよい。プロセッサ20は、第1の眼科検査装置によって取得される画像である第1の画像(例えば、撮影画像A)と、第2の眼科検査装置によって取得される画像である第2の画像(例えば、撮影画像B)とを位置合わせし、重ね合わせ処理を行ってもよい。ここで、第1の画像の画像種別である第1の画像種別と、第2の画像の画像種別である第2の画像種別は、テンプレート上のレジストレーション画像において設定された種別が適用される。   On the registration screen, the processor 20 may perform a registration process or an overlay process (superimpose process) between images acquired by different ophthalmic examination apparatuses. The processor 20 includes a first image (for example, a captured image A) that is an image acquired by the first ophthalmic examination device and a second image (for example, a captured image A) that is an image acquired by the second ophthalmic examination device (for example, It is also possible to align the photographed image B) and perform the superimposing process. Here, the type set in the registration image on the template is applied to the first image type that is the image type of the first image and the second image type that is the image type of the second image. ..

<位置合わせ処理>
位置合わせ処理において、第1の画像と第2の画像の少なくとも一方が、正面像ではない他の画像(例えば、OCT又は視野検査装置によって得られたマップ画像)である場合、プロセッサ20は、他の画像に対して予め設定された正面像を用いて位置合わせを行ってもよい。例えば、眼科検査装置によって得られたマップ画像の場合、予め対応づけされた正面像が用いられてもよい。眼科検査装置は、マップ画像と正面像とを対応づけて記憶部30に記憶する機能を備えてもよい。なお、レジストレーション画像を構成する画像として、他の画像と共に正面像が含まれる場合でも適用可能である。
<Alignment process>
In the alignment process, if at least one of the first image and the second image is another image that is not a frontal image (for example, OCT or a map image obtained by a visual field inspection device), the processor 20 The image may be aligned using a front image set in advance. For example, in the case of a map image obtained by an ophthalmologic examination apparatus, a front image associated in advance may be used. The ophthalmologic examination apparatus may have a function of storing the map image and the front image in the storage unit 30 in association with each other. The image forming the registration image can be applied even when a front image is included together with other images.

なお、第1の画像と第2の画像の両方が正面像の場合(例えば、眼底カメラによって取得されたカラー眼底正面像と、SLOによって取得された蛍光眼底正面像)、正面像同士で直接的に位置合わせを行ってもよい。   When both the first image and the second image are front images (for example, a color fundus front image acquired by the fundus camera and a fluorescent fundus front image acquired by SLO), the front images are directly connected to each other. May be aligned with.

位置合わせ処理において、プロセッサ20は、位置合わせに用いる正面像(撮影画像A、撮影画像B参照)をそれぞれ表示部1に表示してもよいし、さらに/又は、位置合わせに用いる正面像同士によるレジストレーション画像(図2の結果画像参照)を表示部1に表示してもよい。位置合わせに用いる正面像は、位置合わせ用画像の確認の他、位置合わせ用の特徴点の設定に用いられてもよい。レジストレーション画像は、位置合わせの確認として用いられてもよい。   In the alignment process, the processor 20 may display the front images (see the captured image A and the captured image B) used for the alignment on the display unit 1 and/or the front images used for the alignment. The registration image (see the result image in FIG. 2) may be displayed on the display unit 1. The front image used for the alignment may be used for setting the alignment feature point as well as for confirming the alignment image. The registration image may be used as a confirmation of alignment.

プロセッサ20は、正面像同士を画像処理によって位置合わせ(マッチング処理)を行ってもよい。画像処理による位置合わせの具体的手法としては、種々の画像処理手法(各種相関関数を用いる方法、フーリエ変換を利用する方法、特徴点のマッチングに基づく方法)を用いることが可能である。なお、位置合わせ処理においては、平行移動、回転移動、拡大・縮小の少なくともいずれかを行ってもよい。また、撮影光学系の違い等に起因する画像間の不整合を、正面像の少なくともいずれかを変形させることによって補正してもよい。   The processor 20 may align the front images with each other by image processing (matching processing). As a specific method of alignment by image processing, various image processing methods (methods using various correlation functions, methods using Fourier transform, methods based on feature point matching) can be used. In the alignment process, at least one of parallel movement, rotation movement, and enlargement/reduction may be performed. Further, the inconsistency between the images due to the difference in the photographing optical system or the like may be corrected by deforming at least one of the front images.

位置合わせは、自動的に実行されてもよいし、手動を含むセミオートにて実行されてもよいし、手動で行われてもよい。セミオートの場合、各正面像において共通する特徴点(例えば、血管分岐点、病変部等)が画面上で検者によって指定され、プロセッサ20は、指定された特徴点を用いて位置合わせ処理を行ってもよい。手動の場合、プロセッサ20は、検者の操作に応じて、正面像の一方に対して他の正面像を画面上で動作させて位置合わせを行うようにしてもよい。なお、位置合わせの結果を経て、セミオート又は手動によって位置合わせの再調整が行われてもよい。   The alignment may be performed automatically, semi-automatic including manual, or manually. In the case of semi-auto, a common feature point in each front image (for example, a blood vessel branch point, a lesion, etc.) is designated by the examiner on the screen, and the processor 20 performs alignment processing using the designated feature point. May be. In the case of manual operation, the processor 20 may align one of the front images by moving the other front image on the screen according to the operation of the examiner. The readjustment of the alignment may be performed semi-automatically or manually after the result of the alignment.

<重ね合わせる処理>
位置合わせ処理が完了されると、プロセッサ20は、位置合わせの結果を利用して第1の画像と第2の画像とを少なくとも重ね合わせたレジストレーション画像(図2の結果画像参照)を表示部1に表示してもよい。位置合わせ処理の完了は、自動又は手動にて実行されてもよい。
<Overlay processing>
When the alignment process is completed, the processor 20 uses the alignment result to display a registration image (see the result image in FIG. 2) in which the first image and the second image are at least superimposed. It may be displayed in 1. Completion of the alignment process may be performed automatically or manually.

正面像ではない他の画像に加え、レジストレーション画像を構成する画像として、位置合わせ用の正面像の少なくともいずれかが含まれる場合、プロセッサ20は、他の画像と、正面像とを重ね合わせたレジストレーション画像を表示してもよい。   When at least one of the front image for alignment is included as an image forming the registration image in addition to the other image that is not the front image, the processor 20 superimposes the front image on another image. A registration image may be displayed.

例えば、第1の画像種別は、第1の眼科検査装置(例えば、眼科OCTデバイス10)によって得られたマップ画像である第1のマップ画像300であり、第2の画像種別は、第2の眼科検査装置(例えば、視野検査装置15)によって得られたマップ画像である第2のマップ画像310の場合、プロセッサ20は、第1のマップ画像に対応付けられた正面像である第1の正面像320と、第2のマップ画像に対応付けられた正面像である第2の正面像330との間で位置合わせを行うと共に、第1のマップ画像300と第2のマップ画像310との重ね合わせ表示に加え、第1の正面像320及び第2の正面像330の少なくともいずれかを重ね合わせたレジストレーション画像を表示部1に表示してもよい(図5参照)。なお、プロセッサ20は、第1の正面像320及び第2の正面像330に位置合わせに用い、第1のマップ画像300と第2のマップ画像310のみを重ね合わせた画像を表示してもよい。   For example, the first image type is the first map image 300 that is the map image obtained by the first ophthalmologic examination apparatus (for example, the ophthalmic OCT device 10), and the second image type is the second image type. In the case of the second map image 310 that is the map image obtained by the ophthalmologic examination device (for example, the visual field examination device 15), the processor 20 has the first front face that is the front image associated with the first map image. The image 320 and the second front image 330, which is the front image associated with the second map image, are aligned, and the first map image 300 and the second map image 310 are overlapped. In addition to the matching display, a registration image obtained by superimposing at least one of the first front image 320 and the second front image 330 may be displayed on the display unit 1 (see FIG. 5). Note that the processor 20 may display an image in which only the first map image 300 and the second map image 310 are overlapped with each other by using the first front image 320 and the second front image 330 for alignment. ..

プロセッサ20は、位置合わせ用の各正面像を重ね合わせたレジストレーション画像を表示してもよい。この場合、位置合わせ用の重ね合わせ画像が、レジストレーション画像を兼用してもよい。   The processor 20 may display a registration image in which the front images for alignment are overlaid. In this case, the overlay image for alignment may also serve as the registration image.

なお、第1の画像種別は、第1の眼科検査装置(例えば、眼底カメラ)によって得られた正面像である第1の正面像であり、第2の画像種別は、第2の眼科検査装置(例えば、SLO)によって得られた正面像である第2の正面像の場合、プロセッサ20は、第1の正面像と第2の正面像との間で位置合わせを行うと共に、第1の正面像及び第2の正面像を重ね合わせたレジストレーション画像を表示部1に表示してもよい。   Note that the first image type is a first front image that is a front image obtained by a first ophthalmic examination apparatus (for example, a fundus camera), and the second image type is a second ophthalmic examination apparatus. In the case of the second front image, which is the front image obtained by (for example, SLO), the processor 20 performs the alignment between the first front image and the second front image, and the first front image. A registration image in which the image and the second front image are superimposed may be displayed on the display unit 1.

<重ね合わせる順序>
レジストレーション画面において、プロセッサ20は、予め設定された重ね合わせる順序に基づいてレジストレーション画像を作成し、作成されたレジストレーション画像を表示部1に表示するようにしてもよい。
<Order of stacking>
On the registration screen, the processor 20 may create a registration image based on a preset order of superposition, and display the created registration image on the display unit 1.

予め設定された重ね合わせ順序に関して、正面像よりも上に解析関連の画像(例えば、マップ画像)が重ね合わせることによって、解析結果が優先されたレジストレーション画像が得られる。これによって正面像上での解析結果の対応関係を容易に確認できる。   A registration image in which the analysis result is prioritized is obtained by superimposing an analysis-related image (for example, a map image) on the front image with respect to a preset superposition order. This makes it possible to easily confirm the correspondence of the analysis results on the front image.

例えば、第1の画像種別は、第1のマップ画像であり、第2の画像種別は、第2のマップ画像の場合、プロセッサ20は、第1の正面像及び第2の正面像よりも上に第1のマップ画像と第2のマップ画像を重ね合わせたレジストレーション画像を表示部1に表示してもよい。   For example, in the case where the first image type is the first map image and the second image type is the second map image, the processor 20 is above the first front image and the second front image. Alternatively, a registration image obtained by superimposing the first map image and the second map image may be displayed on the display unit 1.

さらに、第1の正面像及び第2の正面像を重ね合わせる順序については、撮影画角の大きい方の正面像よりも上に撮影画角の小さい方の正面像を重ね合わせることで、検者は、撮影画角の大きい方の正面像によって撮影部位を広範囲で確認できると共に、撮影部位全体での撮影画角の小さい方の正面像及びマップ画像との対応関係を容易に確認できる。   Further, regarding the order of superimposing the first front image and the second front image, the examiner is to superimpose the front image with the smaller shooting angle of view on top of the front image with the larger shooting angle of view. Allows the user to check the imaged region in a wide range by the frontal image with the larger imaged angle of view, and easily confirm the correspondence between the imaged part with the smaller imaged angle of view and the map image in the entire imaged region.

また、第1のマップ画像及び第2のマップ画像の重ね合わせる順序については、二次元的に網羅的に表示されたマップ画像(例えば、OCTのマップ画像)よりも上に、離散的に表示されたマップ画像(例えば、視野検査装置のマップ画像)を重ね合わせることで、検者は、網羅的マップ画像による解析結果を広範囲で確認できると共に、網羅的マップ画像及び正面像に対する離散的マップ画像による解析結果の対応関係を容易に確認できる。例えば、網羅的に表示されるOCTのマップ画像よりも上に、離散的に表示される視野検査装置のマップ画像が重ね合わせされることによって、検者は、OCTの解析結果を広範囲で確認できると共に、OCTの解析結果及び正面画像に対する視野検査装置の解析結果の対応関係を容易に確認できる。なぜなら、OCTのマップ画像は、矩形領域内において二次元的に色づけされたカラーマップであるのが一般的であるのに対し、視野検査装置のマップ画像は、視野測定点、固視点等に限定されていることが一般的であるからである。   In addition, the order of superimposing the first map image and the second map image is displayed discretely above the map image (for example, the OCT map image) comprehensively displayed two-dimensionally. By overlaying different map images (for example, the map image of the visual field inspection device), the examiner can confirm the analysis result by the comprehensive map image in a wide range, and by the discrete map image for the comprehensive map image and the front image. The correspondence of analysis results can be easily confirmed. For example, by overlaying the map image of the visual field inspection device displayed discretely on the map image of OCT displayed comprehensively, the examiner can confirm the OCT analysis result in a wide range. At the same time, the correspondence relationship between the OCT analysis result and the analysis result of the visual field inspection device for the front image can be easily confirmed. This is because the OCT map image is generally a two-dimensionally colored color map in a rectangular area, whereas the map image of the visual field inspection device is limited to visual field measurement points, fixation points, and the like. This is because it is common that

<レジストレーション画像の設定変更>
レジストレーション画面においては、プロセッサ20は、レジストレーション画像の設定を変更するための操作部4からの指示信号を受け付け、変更された設定に応じたレジストレーション画像を作成して表示部1に表示してもよい(図3参照)。
<Change registration image settings>
On the registration screen, the processor 20 receives an instruction signal from the operation unit 4 for changing the setting of the registration image, creates a registration image according to the changed setting, and displays it on the display unit 1. (See FIG. 3).

レジストレーション画像の設定に関して変更が行われた場合、プロセッサ20は、テンプレート上に設定されたレジストレーション画像の設定を変更し、記憶部30に記憶してもよい。レジストレーション画像の設定を変更できることで、検者は、所望するレジストレーション画像に変更できる。また、検者は、レジストレーション画像の設定を適宜変更することで、異なる設定のレジストレーション画像から複合的に各画像間の対応関係を確認できるので、診断においても有利である。   When the registration image settings are changed, the processor 20 may change the registration image settings set on the template and store the changes in the storage unit 30. By being able to change the setting of the registration image, the examiner can change the registration image to a desired one. In addition, the examiner can check the correspondence between the images in a complex manner from the registration images having different settings by appropriately changing the settings of the registration images, which is also advantageous in diagnosis.

設定変更に関して、例えば、プロセッサ20は、重ね合わせる順序を変更するための操作部4からの指示信号を受け付け、変更された順序に応じたレジストレーション画像を作成して表示部1に表示してもよい。検者は、レジストレーション画像を見ながら順序を変更できるので、検者が所望するレジストレーション画像に容易に変更可能である。例えば、第1の正面像及び第2の正面像の一方がカラー正面像であり、他方が蛍光正面像の場合、上に表示された正面像の方が、視認性が向上するので、カラー正面像と蛍光正面像との間で順序を切り換えることで、上側画像で病変等の確認を行った後、病変等に対する下側画像との対応関係を確認するような場合、双方の画像での確認を容易に行うことができる。   Regarding the setting change, for example, the processor 20 receives an instruction signal from the operation unit 4 for changing the overlapping order, creates a registration image according to the changed order, and displays the registration image on the display unit 1. Good. The examiner can change the order while looking at the registration images, so that the examiner can easily change the order. For example, when one of the first front image and the second front image is a color front image and the other is a fluorescence front image, the front image displayed above is more visible, and thus the color front image When the order of the image and the fluorescence front image is switched, if the upper image is used to confirm the lesion, etc., and then the correspondence between the lower image and the lesion, etc. is confirmed, the confirmation is performed on both images. Can be done easily.

設定変更に関して、例えば、プロセッサ20は、レジストレーション画像に適用される画像種別の有無を選択するための操作部4からの指示信号を受け付け、変更された画像種別に応じたレジストレーション画像を作成して表示部1に表示してもよい。   Regarding the setting change, for example, the processor 20 receives an instruction signal from the operation unit 4 for selecting the presence or absence of the image type applied to the registration image, and creates the registration image according to the changed image type. It may be displayed on the display unit 1.

この場合、例えば、レジストレーション画像に適用されている各画像種別が表示部1に表示され、プロセッサ20は、各画像種別に対する切換信号を操作部4から受け付け、表示部1上のレジストレーション画像に適用させる画像種別を切り換えてもよい(図3のチェックボックス参照)。レジストレーション画像に適用されている画像種別の一つに関して、適用無と設定された場合、プロセッサ20は、適用無と設定された画像種別に関する画像を表示部1上のレジストレーション画像から削除してもよい。一方、プロセッサ20は、適用有として設定された画像種別に基づくレジストレーション画像を表示部1に表示してもよい。   In this case, for example, each image type applied to the registration image is displayed on the display unit 1, and the processor 20 receives a switching signal for each image type from the operation unit 4, and the registration image on the display unit 1 is displayed. The image type to be applied may be switched (see the check box in FIG. 3). When one of the image types applied to the registration image is set to “not applied”, the processor 20 deletes the image related to the image type set to “not applied” from the registration image on the display unit 1. Good. On the other hand, the processor 20 may display the registration image based on the image type set as “applicable” on the display unit 1.

各画像種別に関してレジストレーション画像への適用を切り換えることができることによって、検者が所望するレジストレーション画像を得ることができると共に、画像間での対応関係をより確実に確認できる。例えば、第1の眼科検査装置におけるマップ画像が削除された場合、第2の眼科検査装置におけるマップ画像と正面像との対応関係をより直接的に確認できる。   By being able to switch the application to the registration image for each image type, it is possible to obtain the registration image desired by the examiner and more surely confirm the correspondence relationship between the images. For example, when the map image in the first ophthalmic examination apparatus is deleted, the correspondence between the map image and the front image in the second ophthalmic examination apparatus can be confirmed more directly.

設定変更に関して、例えば、プロセッサ20は、レジストレーション画像に適用されている画像の透過率を変更するための操作部4からの指示信号を受け付け、変更された透過率に応じたレジストレーション画像を作成して表示部1に表示してもよい。   Regarding the setting change, for example, the processor 20 receives an instruction signal from the operation unit 4 for changing the transmittance of the image applied to the registration image, and creates a registration image according to the changed transmittance. It may be displayed on the display unit 1.

この場合、例えば、レジストレーション画像に適用されている各画像種別の透過率が変更可能に表示部1に表示され、プロセッサ20は、透過率を変更するための信号を操作部4から受け付け、表示部1上のレジストレーション画像に適用されている画像の透過率を変更してもよい(図3のスライダ参照)。   In this case, for example, the transmittance of each image type applied to the registration image is changeably displayed on the display unit 1, and the processor 20 receives a signal for changing the transmittance from the operation unit 4 and displays the signal. The transmittance of the image applied to the registration image on the section 1 may be changed (see the slider in FIG. 3).

各画像種別に関してレジストレーション画像への透過率を変更できることによって、検者が所望するレジストレーション画像を得ることができると共に、画像間での対応関係をより確実に確認できる。例えば、ある画像の透過率が変更された場合、レジストレーション画像に適用されている画像間での表示状況が変更され、各画像間の関連性が変更される。検者は、透過率の変更によって、検者が所望する各画像間の関連性に設定された画像を取得できる。例えば、第2のマップ画像(例えば、OCTのマップ画像)の上に第1のマップ画像(例えば、視野検査装置のマップ画像)が表示され、マップ画像より下に正面画像が表示される場合、第2のマップ画像の透過率が大きくなることで、検者は、第1のマップ画像の正面像との対応関係を確認しやすくなる。   By changing the transmittance of the registration image for each image type, the registration image desired by the examiner can be obtained, and the correspondence between the images can be more surely confirmed. For example, when the transmittance of a certain image is changed, the display situation between the images applied to the registration image is changed, and the relevance between the images is changed. By changing the transmittance, the examiner can acquire the images set in the relation between the images desired by the examiner. For example, when the first map image (for example, the map image of the visual field inspection device) is displayed on the second map image (for example, the OCT map image) and the front image is displayed below the map image, The increase in the transmittance of the second map image makes it easier for the examiner to confirm the correspondence relationship between the first map image and the front image.

<レポート表示>
レジストレーション画面において、レジストレーション画像の設定が完了されると、プロセッサ20は、設定されたレジストレーション画像を含むレポートを作成してもよい。なお、テンプレートがレジストレーション画像を含まない場合には、プロセッサ20は、レジストレーション画面を省略してもよい。
<Report display>
In the registration screen, when the setting of the registration image is completed, the processor 20 may generate a report including the set registration image. If the template does not include the registration image, the processor 20 may omit the registration screen.

プロセッサ20は、作成されたレポートを、表示部1に表示してもよいし、記憶部30に記憶してもよいし、外部に出力してもよいし、又は印刷してもよい(図4参照)。ここで、レポートに含まれるレジストレーション画像は、複数種のレジストレーション画像から検者によって選択されたレジストレーション画像であるので、検者は、当該レジストレーション画像、他の画像を利用して、検者が所望する診断を行うことができる。   The processor 20 may display the created report on the display unit 1, store it in the storage unit 30, output it to the outside, or print it (FIG. 4). reference). Here, since the registration image included in the report is a registration image selected by the examiner from a plurality of types of registration images, the examiner uses the registration image and other images to perform the inspection. The person can make a desired diagnosis.

<検査日ベースでのレポート作成・出力>
レポートの作成・出力において、プロセッサ20は、検査日を選択するための指示を操作部4から受け付け、選択された検査日又は検査日を基準とする一定期間内での画像に基づいてレポートを作成してもよい(図7参照)。なお、一定期間の範囲については、検者によって設定可能であってもよい。また、検査日は、検査月として表現されるような表示形態を含むものとする。
<Report creation/output based on inspection date>
In creating/outputting a report, the processor 20 receives an instruction for selecting an inspection date from the operation unit 4, and creates a report based on the selected inspection date or an image within a fixed period based on the inspection date. Alternatively (see FIG. 7). The range of the fixed period may be settable by the examiner. In addition, the inspection date includes a display form represented as an inspection month.

ここで、検査日にて画像を管理することによって、検者が所望する検査日のデータを容易に表示することができる。また、検査日を変更することによって、経過観察を行うことも可能である。なお、複数の検査日が同時に指定された場合、プロセッサ20は、経過観察用レポートとして、検査日が異なる画像が経時的に出力されたレポートを出力するようにしてもよい。   Here, by managing the images according to the examination date, the examination date data desired by the examiner can be easily displayed. Further, it is possible to carry out follow-up observation by changing the examination date. When a plurality of examination days are designated at the same time, the processor 20 may output, as the follow-up observation report, a report in which images with different examination days are output over time.

また、レポート出力画面と同一画面上において、検査日を選択できることによって、検者が所望する検査日のレポートを容易に出力できると共に、レポート内容の確認が容易である。検査日の変更による経過観察をスムーズに行うことができる。この場合、プロセッサ20は、選択された検査日に応じてレポートの出力内容を更新してもよい。   In addition, by selecting the inspection date on the same screen as the report output screen, a report of the inspection date desired by the examiner can be easily output and the contents of the report can be easily confirmed. The follow-up can be smoothly performed by changing the inspection date. In this case, the processor 20 may update the output content of the report according to the selected inspection date.

なお、検査日の選択は、検者によって実施される他、検査日が自動で選択されてもよい。例えば、解析結果において異常が発見された検査日が自動的に選択され、レポートとして出力されてもよい。   The inspection date may be selected by the examiner, or the inspection date may be automatically selected. For example, the inspection date when an abnormality is found in the analysis result may be automatically selected and output as a report.

図7、図13は、検査日に応じたレポートを出力する際の具体例を示す図である。プロセッサ20は、複数表示されたレポートのテンプレートから一つのテンプレートを選択するための指示を受け付け、テンプレートを選択してもよい。なお、テンプレートは、検者によって予め作成されてもよい。例えば、特定の撮影部位を測定した際の走査パターン(例えば、「黄斑クロス」と「黄斑マップ」)で構成したテンプレートが作成されてもよい。作成されたテンプレートは、表示部1上の画像一覧画面に表示されてもよい。   FIG. 7 and FIG. 13 are diagrams showing a specific example of outputting a report according to the inspection date. The processor 20 may accept an instruction to select one template from a plurality of displayed report templates and select the template. The template may be created in advance by the examiner. For example, a template composed of scanning patterns (for example, “macular cross” and “macular map”) when measuring a specific imaging region may be created. The created template may be displayed on the image list screen on the display unit 1.

テンプレートが選択されると、プロセッサ20は、テンプレートとして設定された画像種別に対応する画像を、記憶部30に記憶された被検者の画像から取得してもよい。プロセッサ20は、取得された検査データから検査日一覧500を作成してもよい(図7参照)。作成された検査日一覧は、表示部1に表示される。より詳細には、テンプレートに含まれている走査パターンと、記憶部30に記憶されている走査パターンに対応する撮影画像から、テンプレートに適合する検査日の一覧が作成されてもよい。   When the template is selected, the processor 20 may obtain the image corresponding to the image type set as the template from the image of the subject stored in the storage unit 30. The processor 20 may create the inspection date list 500 from the acquired inspection data (see FIG. 7). The created inspection date list is displayed on the display unit 1. More specifically, a list of inspection dates that match the template may be created from the scan pattern included in the template and the captured image corresponding to the scan pattern stored in the storage unit 30.

検査日一覧から検査日が選択されると、プロセッサ20は、選択された検査日(例えば、日付、時間)に対応する画像を記憶部30から取得し、取得された画像を用いてレポート600を作成してもよい。レポート表示後、作成された検査日一覧から検査日が変更された場合、プロセッサ20は、変更された検査日に対応する画像を取得し、レポート内容を更新してもよい。
この場合、選択された検査日に応じた画像がレポートとして表示される。なお、初期起動時においては、最後に撮影した日付のデータ(直近のデータ)が表示されてもよい。これらの処理は、操作部4からの操作信号に基づいて、プロセッサ20によって行われる。
When an inspection date is selected from the inspection date list, the processor 20 acquires an image corresponding to the selected inspection date (for example, date, time) from the storage unit 30, and uses the acquired image to display the report 600. May be created. After the report is displayed, if the examination date is changed from the created examination date list, the processor 20 may acquire the image corresponding to the changed examination date and update the report content.
In this case, an image according to the selected examination date is displayed as a report. It should be noted that at the time of initial startup, the data (latest data) of the date when the image was last captured may be displayed. These processes are performed by the processor 20 based on the operation signal from the operation unit 4.

<レジストレーション画像の画像種別のパターン>
以下、レジストレーション画像における各種パターンについて具体例を説明する。以下の説明される各パターン例は、レジストレーション画像における複数の画像種別として選択可能であってもよい。以下の例は一例であり、もちろんこれらに限定されない。
<Image type pattern of registration image>
Specific examples of various patterns in the registration image will be described below. Each pattern example described below may be selectable as a plurality of image types in the registration image. The following examples are merely examples, and the present invention is not limited to these.

レジストレーション画像の第1の例としては、例えば、眼科用OCTデバイスによって取得されるOCT二次元画像(例えば、OCTのマップ画像、エンフェイスOCT画像等)と、視野検査装置によって取得されたマップ画像とを重ね合わせたレジストレーション画像であってもよい(図5参照)。   As a first example of the registration image, for example, an OCT two-dimensional image (for example, an OCT map image, an interface OCT image, etc.) acquired by an ophthalmic OCT device, and a map image acquired by a visual field inspection device It may be a registration image in which and are superimposed (see FIG. 5).

レジストレーション画像の第2の例としては、例えば、眼科用OCTデバイスによって取得された二次元画像(例えば、マップ画像、OCTエンフェイス画像等)と、視野検査装置とは異なる他の眼科検査装置によって取得された撮影画像又はマップ画像とを重ね合わせたレジストレーション画像であってもよい。   As a second example of the registration image, for example, a two-dimensional image (for example, a map image, an OCT interface image, etc.) acquired by an OCT device for ophthalmology, and another ophthalmic examination device different from the visual field examination device are used. It may be a registration image in which the acquired captured image or map image is superimposed.

レジストレーション画像の第3の例としては、例えば、視野検査装置によって取得されたマップ画像と、視野検査装置とは異なる他の眼科検査装置によって取得された撮影画像又はマップ画像とを重ね合わせたレジストレーション画像であってもよい(図6参照)。   As a third example of the registration image, for example, a resist obtained by superimposing a map image acquired by the visual field inspection device and a captured image or a map image acquired by another ophthalmic inspection device different from the visual field inspection device. It may be a rotation image (see FIG. 6).

なお、眼科用OCTデバイスは、眼底の二次元画像を取得可能な眼底OCTであってもよい。また、眼撮影装置は、眼底撮影装置であってもよい。これによって、眼底の画像に関するレジストレーション画像を取得可能である。また、眼底OCTによる眼底の二次元画像、又は眼底撮影装置による眼底画像を用いて、視野検査装置によって得られるマップ画像とのレジストレーション画像が作成されてもよい。なお、本実施形態は、眼底に限定されず、前眼部に関連する画像、又は前眼部及び眼底を含む眼球に関連する画像においても、適用可能である。   The ophthalmic OCT device may be a fundus OCT capable of acquiring a two-dimensional image of the fundus. Further, the eye photographing device may be a fundus photographing device. This makes it possible to acquire a registration image related to the fundus image. Further, a registration image with a map image obtained by the visual field inspection device may be created using a two-dimensional image of the fundus obtained by the fundus OCT or a fundus image obtained by the fundus imaging device. The present embodiment is not limited to the fundus, and can be applied to an image related to the anterior segment or an image related to the eyeball including the anterior segment and the fundus.

<OCTのマップ画像>
レジストレーション画像を構成するOCTのマップ画像は、いわゆる解析マップの画像データであってもよく、例えば、眼科用OCTデバイスに設けられたOCT光学系によって得られるOCTデータを解析することによって得られる画像データであり、解析マップ画像として表示部1に表示されてもよい。
<Map image of OCT>
The OCT map image forming the registration image may be image data of a so-called analysis map, for example, an image obtained by analyzing OCT data obtained by an OCT optical system provided in an ophthalmic OCT device. The data may be displayed on the display unit 1 as an analysis map image.

OCTのマップ画像は、例えば、被検眼(例えば、眼底)に関する計測結果の二次元分布を示す解析マップ画像であってもよい。この場合、例えば、計測値に応じて色分けされたカラーマップであってもよい。解析マップとしては、例えば、層厚を示す厚みマップ、被検眼の層厚と正常眼データベースに記憶された正常眼の層厚との比較結果を示す比較マップ(正常眼DBマップ)、被検眼の層厚と正常眼データベースに記憶された正常眼の層厚とのずれを標準偏差にて示すデビエーションマップであってもよい。なお、層厚を求める場合、例えば、OCTデータに対する画像処理(例えば、セグメンテーション処理)によってOCTデータが層毎に分割処理され、層境界の間隔に基づいて各層の厚みが計測される。   The OCT map image may be, for example, an analysis map image showing a two-dimensional distribution of measurement results regarding the eye to be inspected (for example, the fundus). In this case, for example, the color map may be color-coded according to the measured value. As the analysis map, for example, a thickness map showing the layer thickness, a comparison map showing the comparison result of the layer thickness of the eye to be examined and the layer thickness of the normal eye stored in the normal eye database (normal eye DB map), It may be a deviation map showing the deviation between the layer thickness and the layer thickness of the normal eye stored in the normal eye database as a standard deviation. When obtaining the layer thickness, for example, the OCT data is divided into layers by image processing (eg, segmentation processing) on the OCT data, and the thickness of each layer is measured based on the interval between the layer boundaries.

解析マップとしては、層厚に限定されず、例えば、曲率分布を示すマップであってよいし、血管密度分布を示すマップであってもよい。血管密度分布を示すマップは、例えば、OCTモーションコントラストデータを解析することによって取得されてもよい。また、解析マップは、偏光感受OCT(PS―OCT)によって得られた偏光特性分布を示すマップであってもよい。解析マップは、ドップラ―OCTによって得られた血流速度分布を示すマップであってもよい。   The analysis map is not limited to the layer thickness, and may be a map showing a curvature distribution or a map showing a blood vessel density distribution, for example. The map showing the blood vessel density distribution may be acquired, for example, by analyzing OCT motion contrast data. Further, the analysis map may be a map showing a polarization characteristic distribution obtained by polarization-sensitive OCT (PS-OCT). The analysis map may be a map showing the blood flow velocity distribution obtained by Doppler-OCT.

プロセッサ20は、レジストレーション画像を構成する画像種別として、OCTのマップ画像に関する複数の画像種別を選択可能に表示してもよい(図12参照)。例えば、プロセッサ20は、厚みマップ、正常眼DBマップ、デビエーションマップを選択可能に表示してもよい。この場合、各マップに関して、異なる層領域に関するマップを選択可能であってもよい。また、厚みマップ、正常眼DBマップ、デビエーションマップが記憶部30から取得され、マップ毎にレジストレーション画像が作成され、各レジストレーション画像が表示部1に表示されてもよい。これにより、各マップ画像に関する各レジストレーション画像を同時に確認できる。   The processor 20 may selectably display a plurality of image types related to the OCT map image as image types forming the registration image (see FIG. 12 ). For example, the processor 20 may selectably display a thickness map, a normal eye DB map, and a deviation map. In this case, for each map, a map for a different layer area may be selectable. Further, a thickness map, a normal eye DB map, and a deviation map may be acquired from the storage unit 30, a registration image may be created for each map, and each registration image may be displayed on the display unit 1. Thereby, each registration image related to each map image can be confirmed at the same time.

プロセッサ20は、例えば、特定の層領域に関するOCTのマップ画像と、視野検査装置によって取得されたマップ画像とを重ね合わせたレジストレーション画像を作成することによって、検者は、特定の網膜層の解析結果と視野との対応関係を確認できる。   For example, the processor 20 creates a registration image by superimposing an OCT map image relating to a specific layer region and a map image acquired by the visual field inspection apparatus, whereby the examiner analyzes the specific retinal layer. The correspondence between the result and the field of view can be confirmed.

<OCTエンフェイス画像>
レジストレーション画像の基礎となるOCTエンファイス画像は、OCT光学系によって得られるOCT信号から生成されるOCT信号正面像であってもよく、3次元OCTデータから生成される正面像であってもよいし、OCTデータの基礎となる干渉信号から生成された正面像であってもよい。なお、3次元OCTデータは、ラスタースキャンによって取得されてもよい。
<OCT Enface image>
The OCT-enhanced image which is the basis of the registration image may be a front image of an OCT signal generated from an OCT signal obtained by the OCT optical system, or a front image generated from three-dimensional OCT data. , A front image generated from an interference signal that is the basis of OCT data. The three-dimensional OCT data may be acquired by raster scan.

また、レジストレーション画像の基礎となるOCTエンファイス画像は、OCT光学系によって得られるOCTモーションコントラスト信号から生成されるOCTモーションコントラスト正面像(OCTモーションコントラストエンフェイス画像。以下、モーションコントラストをMCと省略する)であってもよく、3次元OCTMCデータから生成されるOCTMC正面像であってもよい。MCデータは、同一位置に関して時間的に異なる複数のOCTデータに基づいて取得される。MCデータを取得するためのOCTデータの演算方法としては、例えば、複素OCTデータの強度差もしくは振幅差を算出する方法、複素OCTデータの強度もしくは振幅の分散もしくは標準偏差を算出する方法(Speckle variance)、複素OCTデータの位相差もしくは分散を算出する方法、複素OCTデータのベクトル差分を算出する方法、複素OCT信号の位相差及びベクトル差分を掛け合わせる方法が挙げられる。なお、演算手法の一つとして、例えば、特開2015−131107号公報を参照されたい。3次元OCTMCデータは、異なる走査ラインでのモーションコントラストデータが並べられることによって取得されてもよい。なお、前述のように、モーションコントラストデータとしては、位相差に限らず、強度差、ベクトル差分等が取得されてもよい。   Further, the OCT-enhanced image, which is the basis of the registration image, is an OCT motion-contrast front image (OCT motion-contrast-enhanced image generated from the OCT motion-contrast signal obtained by the OCT optical system. Hereinafter, the motion contrast is abbreviated as MC. ), or an OCTMC front image generated from three-dimensional OCTMC data. The MC data is acquired based on a plurality of OCT data that are temporally different with respect to the same position. As a method of calculating OCT data for obtaining MC data, for example, a method of calculating an intensity difference or amplitude difference of complex OCT data, a method of calculating a variance or standard deviation of intensity or amplitude of complex OCT data (Speckle variance) ), a method of calculating the phase difference or dispersion of the complex OCT data, a method of calculating the vector difference of the complex OCT data, and a method of multiplying the phase difference and the vector difference of the complex OCT signal. In addition, as one of the calculation methods, refer to, for example, JP-A-2013-131107. The 3D OCTMC data may be acquired by arranging the motion contrast data in different scan lines. As described above, the motion contrast data is not limited to the phase difference, and the intensity difference, the vector difference, or the like may be acquired.

上記3次元OCTデータ(又は3次元OCTMCデータ)から生成される正面像は、例えば、深さ方向の少なくとも一部の領域に関して3次元OCTデータを画像化することによって取得されてもよい。より詳細には、OCTエンファイス画像は、深さ方向の全体領域に関して3次元OCTデータ(又は3次元OCTMCデータ)を演算することによって取得されてもよい。OCTエンファイス画像は、3次元OCTデータ(又は3次元OCTMCデータ)を深さ方向の一部の領域(例えば、特定の層領域、特定の深さ領域)に関して3次元OCTデータ(又は3次元OCTMCデータ)を演算することによって取得されてもよい。演算手法としては、積算処理であってもよいし、他の手法(例えば、ヒストグラム演算)であってもよい。   The front image generated from the three-dimensional OCT data (or the three-dimensional OCTMC data) may be acquired, for example, by imaging the three-dimensional OCT data with respect to at least a partial area in the depth direction. More specifically, the OCT-enhanced image may be acquired by calculating the three-dimensional OCT data (or the three-dimensional OCTMC data) with respect to the entire region in the depth direction. In the OCT-enhanced image, three-dimensional OCT data (or three-dimensional OCTMC data) is converted into three-dimensional OCT data (or three-dimensional OCTMC data) with respect to a partial region in the depth direction (for example, a specific layer region or a specific depth region). ) May be obtained. The calculation method may be integration processing or another method (for example, histogram calculation).

プロセッサ20は、レジストレーション画像を構成する画像種別として、OCTのエンフェイス画像に関する複数の画像種別を選択可能に表示してもよい。例えば、エンフェイス画像は、異なる深さ領域(例えば、深さ方向に関して異なる層領域)に応じて分類されてもよく、深さ領域に応じて分類されたエンフェイス画像を選択可能に表示してもよい。また、深さ領域が異なるエンフェイス画像が記憶部30から取得され、エンフェイス画像毎にレジストレーション画像が作成され、各レジストレーション画像が表示部1に表示されてもよい。これにより、深さ領域が異なるエンフェイス画像に関する各レジストレーションを同時に確認できる。また、OCT信号正面像、OCTモーションコントラスト正面像との間で選択可能であってもよい。   The processor 20 may selectably display a plurality of image types related to the OCT interface image as image types forming the registration image. For example, the face images may be classified according to different depth regions (for example, different layer regions in the depth direction), and the face images classified according to the depth regions may be displayed in a selectable manner. Good. Further, interface images having different depth regions may be acquired from the storage unit 30, a registration image may be created for each interface image, and each registration image may be displayed on the display unit 1. Accordingly, it is possible to simultaneously confirm each registration regarding the interface images having different depth regions. Further, it may be selectable between the OCT signal front image and the OCT motion contrast front image.

プロセッサ20は、例えば、特定の層領域に関するOCTエンフェイス画像と、視野検査装置によって取得されたマップ画像とを重ね合わせたレジストレーション画像を作成することによって、検者は、特定の網膜層構造と視野との対応関係を確認できる。この場合、特定の層領域におけるOCT正面像と視野検査装置のマップ画像とのレジストレーション画像に設定することで、特定の層における形態情報と視野との対応関係を確認できる。   The processor 20 creates, for example, a registration image by superimposing an OCT interface image relating to a specific layer region and a map image acquired by the visual field inspection device so that the examiner can identify a specific retinal layer structure. You can check the correspondence with the field of view. In this case, the correspondence between the morphological information and the visual field in the specific layer can be confirmed by setting the registration image between the OCT front image and the map image of the visual field inspection device in the specific layer region.

この場合、特定の層領域に関するOCTエンフェイス画像(図10では、OCT信号正面像)400と、視野検査装置によって取得されたマップ画像とを重ね合わせたレジストレーション画像(図10参照)を作成することによって、検者は、特定の網膜層構造と視野との対応関係を確認できる。例えば、検者は、RPE層に関する正面画像から欠損領域を確認すると共に、欠損領域と視野計測結果を照合させることによって、これらの関連性を容易に確認できる。   In this case, a registration image (see FIG. 10) is created by superimposing the OCT interface image (OCT signal front image in FIG. 10) 400 on the specific layer region and the map image acquired by the visual field inspection device. Thus, the examiner can confirm the correspondence between the specific retinal layer structure and the visual field. For example, the examiner can easily check the relationship between the defective area and the visual field measurement result by checking the defective area from the front image of the RPE layer.

また、OCTMC正面像410と、視野検査装置によって取得されたマップ画像とを重ね合わせたレジストレーション画像(図11参照)を作成することによって、検者は、血管情報と視野との対応関係を確認できる。例えば、検者は、FAZ領域に対する血管の走行状態と、FAZ領域での視野計測結果を対応付けて容易に確認できる。   The examiner confirms the correspondence between the blood vessel information and the visual field by creating a registration image (see FIG. 11) in which the OCTMC front image 410 and the map image acquired by the visual field inspection device are superimposed. it can. For example, the examiner can easily confirm the running state of the blood vessel in the FAZ area and the visual field measurement result in the FAZ area in association with each other.

<OCTの二次元画像の分類手法>
レジストレーション画像を構成するOCT二次元画像(例えば、OCTのマップ画像、OCTエンフェイス画像等)は、撮影部位に応じて分類されてもよく、撮影部位に応じて分類された複数のOCT二次元画像の一つが、レジストレーション画像を構成する画像種別として選択可能であってもよい。例えば、黄斑のOCT二次元画像、乳頭のOCT二次元画像が、画像種別として選択可能であってもよい。
<OCT two-dimensional image classification method>
The OCT two-dimensional image (eg, OCT map image, OCT interface image, etc.) that constitutes the registration image may be classified according to the imaged region, or a plurality of OCT two-dimensional images classified according to the imaged region. One of the images may be selectable as the image type forming the registration image. For example, the macular OCT two-dimensional image and the papilla OCT two-dimensional image may be selectable as the image type.

OCT二次元画像は、横軸をX軸、縦軸をY軸としたX−Y画像、横軸をY軸、縦軸をX軸とするY−X画像であってもよく、画像の縦横軸関係が選択可能であってもよい。ここで、X軸方向は、深さ方向に直交する横方向であって、Y軸方向は、深さ方向に直交する縦方向として規定される。   The OCT two-dimensional image may be an XY image having the horizontal axis as the X axis and the vertical axis as the Y axis, a YX image having the horizontal axis as the Y axis and the vertical axis as the X axis. The axial relationship may be selectable. Here, the X-axis direction is defined as a horizontal direction orthogonal to the depth direction, and the Y-axis direction is defined as a vertical direction orthogonal to the depth direction.

なお、OCT二次元画像がマップ画像の場合、マップ画像は、走査パターンに応じて分類されてもよく、走査パターンに応じて分類された複数のマップ画像の一つが選択可能であってもよい。例えば、マップ画像は、ラスタースキャンによって取得されたOCTデータ、ラジアルスキャンによって取得されたOCTデータに基づいて取得される。そこで、ラスタースキャンによるマップ画像、ラジアルスキャンによるマップ画像が、レジストレーション画像を構成する画像種別として選択可能であってもよい。   When the OCT two-dimensional image is a map image, the map image may be classified according to the scanning pattern, or one of the plurality of map images classified according to the scanning pattern may be selectable. For example, the map image is acquired based on the OCT data acquired by the raster scan and the OCT data acquired by the radial scan. Therefore, a raster scan map image and a radial scan map image may be selectable as the image type forming the registration image.

また、OCT二次元画像は、眼科用OCTデバイスの機種に応じて分類されてもよく、レジストレーション画像を構成する画像種別として、機種に応じて分類された複数のOCT二次元画像の一つが選択可能であってもよい。   In addition, the OCT two-dimensional image may be classified according to the model of the OCT device for ophthalmology, and one of the plurality of OCT two-dimensional images classified according to the model is selected as the image type forming the registration image. It may be possible.

例えば、眼科用OCTデバイスとしては、OCTとSLOとの複合機、OCTと眼底カメラの複合機、OCT単体機、が存在するので、これらの少なくとも2つのデバイスが画像種別として選択可能であってもよい(正面撮像系による分類)。また、例えば、眼科用OCTデバイスとしては、SD−OCT,SS−OCT、TD−OCTが存在するので、これらの少なくとも2つのデバイスが画像種別として選択可能であってもよい(OCT原理による分類)。なお、機種に応じた分類の場合、正面撮像系とOCT原理による分類がセットになってもよい。   For example, as OCT devices for ophthalmology, there are OCT and SLO compound machines, OCT and fundus camera compound machines, and OCT single machines, so even if at least two of these devices can be selected as image types. Good (classification by frontal imaging system). Further, for example, since there are SD-OCT, SS-OCT, and TD-OCT as Ophthalmic OCT devices, at least two of these devices may be selectable as the image type (classification based on the OCT principle). .. In addition, in the case of classification according to the model, the classification based on the front imaging system and the OCT principle may be a set.

なお、前述のように、OCT二次元画像が、撮影部位、縦横軸関係、走査パターン、撮影装置に応じて分類されることによって、検者が所望するレジストレーション画像を作成する際に便利である。   As described above, the OCT two-dimensional images are classified according to the region to be imaged, the relationship between the vertical and horizontal axes, the scanning pattern, and the imaging device, which is convenient when creating a registration image desired by the examiner. ..

なお、図8の例においては、レジストレーション画像を構成するOCTの二次元画像の種別が、少なくとも撮影部位単位で分類されており(リスト100参照)、撮影部位が選択されると、さらに、マップ画像の種類、又はOCTエンファイス画像を選択可能である(図12参照)。   Note that in the example of FIG. 8, the types of OCT two-dimensional images that form the registration image are classified at least in units of imaged regions (see list 100), and when an imaged region is selected, a map is further created. The type of image or OCT-enhanced image can be selected (see FIG. 12).

<OCT二次元画像に対応付けされた正面像>
OCT二次元画像に対応付けされた正面像は、眼科用OCTデバイスに設けられたOCT光学系又は眼科用OCTデバイスに設けられた別の正面撮像光学系、によって得られる画像であってもよく、他の眼科検査装置によって取得された正面像との間での位置合わせに用いられてもよい。また、OCT二次元画像に対応付けされた正面像は、OCT二次元画像と共に、レジストレーション画像を構成してもよい。
<Front view associated with OCT two-dimensional image>
The front image associated with the OCT two-dimensional image may be an image obtained by an OCT optical system provided in the ophthalmic OCT device or another front imaging optical system provided in the ophthalmic OCT device, It may be used for alignment with a front image acquired by another ophthalmologic examination apparatus. The front image associated with the OCT two-dimensional image may form a registration image together with the OCT two-dimensional image.

なお、OCT光学系によって得られた画像と、正面撮像光学系によって得られた画像との間において、対応付けされる正面像が選択可能であってもよい。OCT光学系によって得られた画像は、上記エンフェイス画像のいずれかであってもよい。つまり、OCT二次元画像がエンフェイス画像の場合、他の眼科検査装置によって取得された正面像との間での位置合わせに用いられてもよい。   Note that a front image to be associated may be selectable between the image obtained by the OCT optical system and the image obtained by the front imaging optical system. The image obtained by the OCT optical system may be any of the above-mentioned interface images. That is, when the OCT two-dimensional image is an enface image, the OCT two-dimensional image may be used for alignment with a front image acquired by another ophthalmologic examination apparatus.

正面撮像光学系としては、例えば、SLO光学系、又は眼底カメラ光学系であってもよい。正面撮像光学系によって得られる正面像としては、可視光によって撮影された可視正面像、赤外光によって撮影された赤外正面像、又は、蛍光撮影によって取得された蛍光正面像であってもよい。正面像は、撮影波長に応じて分類されてもよく、撮影波長に応じて分類された複数の正面像の一つが選択可能であってもよい。   The front imaging optical system may be, for example, an SLO optical system or a fundus camera optical system. The front image obtained by the front imaging optical system may be a visible front image captured by visible light, an infrared front image captured by infrared light, or a fluorescent front image acquired by fluorescence photography. .. The front image may be classified according to the photographing wavelength, or one of the plurality of front images classified according to the photographing wavelength may be selectable.

<視野検査装置のマップ画像>
レジストレーション画像を構成する視野検査装置のマップ画像(以下、視野のマップ画像)は、視野検査によって得られた解析結果を示す画像データであってもよく、視野解析マップ画像として表示部1に表示されてもよい。
<Map image of visual field inspection device>
The map image of the visual field inspection device that constitutes the registration image (hereinafter, visual field map image) may be image data showing the analysis result obtained by the visual field inspection, and is displayed on the display unit 1 as the visual field analysis map image. May be done.

視野のマップ画像は、被検眼に関する視野計測結果の二次元分布を示す視野解析マップ画像であってもよい。視野解析マップとしては、複数の視野測定点での計測値(例えば、視感度)が二次元的に表示された視感度マップであってもよいし、複数の視野測定点での計測値(例えば、視感度)に応じて色分けされたカラーマップであってもよい。この場合、カラーマップとしては、視標間を補完した視感度(感度スケールの色に対応)カラーマップであってもよい。その他、視野解析マップとしては、固視検査に関するマップであってもよく、例えば、中心窩での固視点分布から求められた固視安定度を示すマップ、固視点の位置を示すマップ、であってもよい。なお、視野検査装置は、マイクロペリメータであってもよいし、ハンフリー視野計であってもよい。   The field-of-view map image may be a field-of-view analysis map image showing a two-dimensional distribution of field-of-view measurement results for the eye to be examined. The visual field analysis map may be a visual sensitivity map in which measurement values at a plurality of visual field measurement points (for example, visual sensitivity) are displayed two-dimensionally, or measurement values at a plurality of visual field measurement points (for example, , Luminosity) may be used for the color map. In this case, the color map may be a visual sensitivity (corresponding to the color on the sensitivity scale) color map that complements the visual targets. In addition, the visual field analysis map may be a map related to a fixation test, such as a map showing the fixation stability obtained from the fixation distribution in the fovea and a map showing the position of the fixation point. May be. The visual field inspection device may be a microperimeter or a Humphrey perimeter.

プロセッサ20は、レジストレーション画像を構成する画像種別として、視野のマップ画像に関する複数の画像種別を選択可能に表示してもよい(図16参照)。例えば、プロセッサ20は、視感度マップ、カラーマップ、固視検査に関するマップ等を選択可能に表示してもよい。視野のマップ画像の種類が選択できることで、検者は、OCTの解析結果と視野の解析結果とを多面的に確認できる。   The processor 20 may selectably display a plurality of image types related to the map image of the visual field as the image types forming the registration image (see FIG. 16). For example, the processor 20 may selectably display a visibility map, a color map, a map regarding a fixation test, and the like. Since the type of map image of the visual field can be selected, the examiner can check the OCT analysis result and the visual field analysis result in multiple directions.

なお、視野のマップ画像に対応付けされた正面像は、視野検査装置に設けられた眼底正面撮像光学系によって得られる画像であってもよい。正面撮像光学系としては、例えば、眼底カメラ光学系、SLO光学系が考えられる。正面撮像光学系によって得られる正面像としては、可視光によって撮影された可視正面像、赤外光によって撮影された赤外正面像、又は、蛍光撮影によって取得された蛍光正面像であってもよい。正面像は、撮影波長に応じて分類されてもよく、撮影波長に応じて分類された複数の正面像の一つが選択可能であってもよい。   The front image associated with the map image of the visual field may be an image obtained by the fundus front imaging optical system provided in the visual field inspection device. As the front imaging optical system, for example, a fundus camera optical system and an SLO optical system can be considered. The front image obtained by the front imaging optical system may be a visible front image captured by visible light, an infrared front image captured by infrared light, or a fluorescent front image acquired by fluorescence photography. .. The front image may be classified according to the photographing wavelength, or one of the plurality of front images classified according to the photographing wavelength may be selectable.

なお、OCT二次元画像と視野検査装置のマップ画像とを重ね合わせたレジストレーション画像と、他の画像を含むレポートを作成する場合、プロセッサ20は、レジストレーション画像として出力された撮影部位に対応する他の画像を含むレポートを作成してもよい。この場合、このようなレポートが、デフォルトのテンプレートとして予め作成されてもよい。   In addition, when creating a report including a registration image in which the OCT two-dimensional image and the map image of the visual field inspection device are overlapped with each other, the processor 20 corresponds to the imaged region output as the registration image. You may create a report that includes other images. In this case, such a report may be created in advance as a default template.

他の画像としては、例えば、BスキャンOCT画像、3次元OCT画像、解析チャート、解析グラフの他、レジストレーションを構成するOCT二次元画像とは異なるマップ画像、エンフェイス画像であってもよい。プロセッサ20は、他の画像として、レジストレーション画像を構成するOCT二次元画像、OCT二次元画像に対応付けされた正面像の少なくともいずれかの元画像を含むレポートを作成してもよい。   The other image may be, for example, a B-scan OCT image, a three-dimensional OCT image, an analysis chart, an analysis graph, or a map image or an face image different from the OCT two-dimensional image forming the registration. The processor 20 may create a report including, as another image, an original image of at least one of an OCT two-dimensional image forming the registration image and a front image associated with the OCT two-dimensional image.

<眼科用OCTデバイス、視野検査装置とは異なる第3の眼科検査装置>
第3の眼科検査装置(他の眼科検査装置)としては、例えば、被検眼(例えば、眼底)を撮影するための眼科撮影装置(例えば、眼底撮影装置17)であってもよく、レジストレーション画像を構成する画像種別として、眼科撮影装置によって取得される撮影画像が選択可能であってもよい。眼底撮影装置としては、例えば、眼底カメラ、SLO等の正面像を撮影するための単体の眼底撮影装置であってもよい。眼科撮影装置は、据置型であってもよいし、手持ち型であってもよい。
<Ophthalmic OCT device, third ophthalmic examination device different from visual field examination device>
The third ophthalmic examination apparatus (other ophthalmic examination apparatus) may be, for example, an ophthalmologic imaging apparatus (for example, fundus imaging apparatus 17) for taking an image of an eye to be inspected (for example, fundus), and a registration image. A captured image acquired by the ophthalmologic image capturing apparatus may be selectable as the image type configuring the. The fundus photographing device may be, for example, a single fundus photographing device for photographing a front image such as a fundus camera or SLO. The ophthalmologic imaging apparatus may be a stationary type or a handheld type.

プロセッサ20は、眼底撮影装置17によって取得された第3の眼底正面像350と、視野検査装置15によって取得されたマップ画像310と、マップ画像310に対応付けられた第2の正面像330と、を重ね合わせたレジストレーション画像を作成してもよい(図6参照)。   The processor 20 includes a third fundus front image 350 acquired by the fundus imaging device 17, a map image 310 acquired by the visual field inspection device 15, and a second front image 330 associated with the map image 310. You may create the registration image which overlapped (refer FIG. 6).

眼撮影装置によって得られる正面像としては、可視光によって撮影された可視正面像、赤外光によって撮影された赤外正面像、又は、蛍光撮影によって取得された蛍光正面像であってもよい。正面像は、撮影波長に応じて分類されてもよく、撮影波長に応じて分類された複数の正面像の一つが選択可能であってもよい。   The front image obtained by the eye photographing device may be a visible front image photographed by visible light, an infrared front image photographed by infrared light, or a fluorescence front image obtained by fluorescence photographing. The front image may be classified according to the photographing wavelength, or one of the plurality of front images classified according to the photographing wavelength may be selectable.

他の眼科検査装置としては、例えば、被検眼の血流速度を計測するための眼科血流速度測定装置(例えば、眼底血流測定装置)であってもよく、レジストレーション画像を構成する画像種別として、眼科血流速度測定装置によって取得される血流マップ画像が選択可能であってもよい。血流マップ画像は、例えば、眼の血流速度に関する計測結果の二次元分布を示す血流マップ画像であってもよく、計測値に応じて色分けられたカラーマップであってもよい。なお、眼科血流速度測定装置としては、例えば、眼の血球から反射されたスペックル信号に基づき血流速度を測定するための血流速度測定装置(LSFG:レーザー・スペックル・フロー・グラフィー)であってもよい(例えば、特開2003−180641号公報)。   The other ophthalmologic examination device may be, for example, an ophthalmic blood flow velocity measurement device (for example, a fundus blood flow measurement device) for measuring the blood flow velocity of the eye to be inspected, and an image type forming a registration image. Alternatively, the blood flow map image acquired by the ophthalmic blood flow velocity measuring device may be selectable. The blood flow map image may be, for example, a blood flow map image showing a two-dimensional distribution of the measurement result regarding the blood flow velocity of the eye, or may be a color map color-coded according to the measurement value. As the ophthalmic blood flow velocity measuring device, for example, a blood flow velocity measuring device (LSFG: Laser Speckle Flowography) for measuring the blood flow velocity based on the speckle signal reflected from the blood cells of the eye. (For example, Japanese Patent Laid-Open No. 2003-180641).

この場合、血流マップ画像とOCT二次元画像とのレジストレーション画像を設定することで、検者は、OCTと血流速度との対応関係を確認できる。また、血流マップ画像と視野のマップ画像とのレジストレーション画像を設定することで、視野測定結果と血流速度との対応関係を確認できる。   In this case, by setting a registration image of the blood flow map image and the OCT two-dimensional image, the examiner can confirm the correspondence between OCT and blood flow velocity. Further, by setting a registration image between the blood flow map image and the map image of the visual field, the correspondence between the visual field measurement result and the blood flow velocity can be confirmed.

<変容例>
なお、上記説明においては、レポートのテンプレートにレジストレーション画像を設ける構成としたが、これに限定されず、互いに異なる複数の眼科検査装置によって得られた画像に基づいてレジストレーション画像を作成する場合において、本実施形態の適用は可能である。
<Transformation example>
In the above description, the registration image is provided in the report template, but the present invention is not limited to this. In the case of creating a registration image based on images obtained by a plurality of different ophthalmic examination apparatuses, The application of this embodiment is possible.

なお、上記説明においては、互いに異なる複数の眼科検査装置によって得られた画像に基づいてレジストレーション画像を作成する例を示したが、複数の機能を備える複合装置(例えば、OCTと視野検査装置の複合機)によって得られた画像間でレジストレーション画像を作成する場合において、本実施形態が適用されてもよい。   Note that, in the above description, an example in which a registration image is created based on images obtained by a plurality of different ophthalmic examination apparatuses has been shown, but a composite apparatus having a plurality of functions (for example, an OCT and a visual field examination apparatus). This embodiment may be applied to the case where a registration image is created between images obtained by a multi-function peripheral).

<レポートの画像拡大>
図17は、レポート600の一例である。レポート600には、前述のレジストレーション画像等が表示される。レポート600には、画像データが1つまたは複数表示される。図17に示すレポート600の6つの画像データは、眼科検査装置によって取得された画像データの全体が表示されている。レポート600に表示された画像データを拡大する場合、例えば、検者は拡大したい画像データを選択する。図18は、レポート600に表示される画像データの一例である。例えば、指示受付部としてマウスを用いる場合、検者は、画像データの拡大したい部分に画面に表示されたマウスカーソル608を合わせ、その状態でマウスホイールを回転させる。プロセッサ20は、マウスホイールの回転方向に応じ、マウスカーソル608の位置を中心として画像の一部の領域(拡大領域ともいう)の拡大または縮小を行う。図18に示すように、プロセッサ20は、画像データの全体が表示される状態(図18の左図)から、拡大領域605が拡大して表示される状態(図18の右図)に表示を切り替えることができる。
<Enlarge image of report>
FIG. 17 is an example of the report 600. The above-mentioned registration image and the like are displayed in the report 600. In the report 600, one or more image data are displayed. In the six image data of the report 600 shown in FIG. 17, the entire image data acquired by the ophthalmic examination apparatus is displayed. When enlarging the image data displayed in the report 600, for example, the examiner selects the image data to be enlarged. FIG. 18 is an example of image data displayed on the report 600. For example, when using a mouse as the instruction receiving unit, the examiner aligns the mouse cursor 608 displayed on the screen with the portion of the image data to be enlarged, and rotates the mouse wheel in this state. The processor 20 enlarges or reduces a partial region (also referred to as an enlarged region) of the image centering on the position of the mouse cursor 608 according to the rotation direction of the mouse wheel. As shown in FIG. 18, the processor 20 changes the display from the state in which the entire image data is displayed (the left diagram in FIG. 18) to the state in which the enlarged region 605 is enlarged and displayed (the right diagram in FIG. 18). You can switch.

マウスホイールが上方向に回転された場合、プロセッサ20は、例えば、マウスカーソル608を中心として1スクロール毎に徐々に拡大率を大きくする。例えば、プロセッサ20は、1スクロール毎に10%ずつ画像を拡大してもよい。逆に、プロセッサ20は、マウスホイールが下方向に回転された場合、拡大率を小さくしてもよい。もちろん、1スルロール毎の拡大率の変動幅は10%に限らない。1%でも100%でもよいし、任意の値に設定されてもよい。また、変動幅を変更できるようにしてもよい。例えば、1スルロール毎の拡大率の変動幅を10%から20%に変更できるようにしてもよい。例えば、キーボードのCtrlキーを押しながらスクロールする場合は、1スクロール毎に20%ずつ画像を拡大するようにしてもよい。   When the mouse wheel is rotated in the upward direction, the processor 20 gradually increases the enlargement ratio for each scroll with the mouse cursor 608 as the center, for example. For example, the processor 20 may magnify the image by 10% for each scroll. Conversely, processor 20 may reduce the magnification factor if the mouse wheel is rotated downwards. Of course, the fluctuation range of the expansion rate for each slurol is not limited to 10%. It may be 1% or 100%, or may be set to any value. Further, the fluctuation range may be changed. For example, the fluctuation range of the enlargement ratio for each slurol may be changed from 10% to 20%. For example, when scrolling while pressing the Ctrl key on the keyboard, the image may be enlarged by 20% for each scroll.

拡大領域605を変更したい場合、例えば、検者はマウスカーソル608を拡大したい位置に移動させ、マウスホイールを回転させる。この場合、プロセッサ20は、マウスカーソル608の移動に合わせて拡大領域の中心位置を変更する。また、プロセッサ20は、マウスカーソル608が画像に重ねられた状態でドラッグ操作された場合に、拡大領域を変更するようにしてもよい。また、プロセッサ20は、画像上のクリックされた位置を中心として拡大領域を設定してもよい。なお、指示受付部としてマウスを用いる例を説明したが、タッチパネル、キーボード等のその他のユーザインターフェースを用いてもよい。   When it is desired to change the enlargement area 605, for example, the examiner moves the mouse cursor 608 to a position to enlarge and rotates the mouse wheel. In this case, the processor 20 changes the center position of the enlargement area according to the movement of the mouse cursor 608. Further, the processor 20 may change the enlargement area when the mouse cursor 608 is dragged while being overlaid on the image. Further, the processor 20 may set the enlargement region centered on the clicked position on the image. Although the example in which the mouse is used as the instruction receiving unit has been described, other user interfaces such as a touch panel and a keyboard may be used.

上記のようにして画像データを一部拡大したときのレポート600の一例を図19に示す。図19のレポート600では、6つの画像データのうち、上の3つの画像データが一部拡大されている。   FIG. 19 shows an example of the report 600 when the image data is partially enlarged as described above. In the report 600 of FIG. 19, of the six image data, the above three image data are partially enlarged.

検者は、レポート600の画像データの拡大率および拡大領域605を1つずつ変更してもよいし、1つの画像データに合わせて他の画像データの拡大率および拡大領域605を変更してもよい。例えば、レポート600の画像データが複数選択されている場合には、拡大率と拡大領域605の移動を同期させてもよい。例えば、レジストレーション画像610とレジストレーション画像620とレジストレーション画像630の3つが選択されている場合、プロセッサ20は、レジストレーション画像610の拡大に合わせて、レジストレーション画像620とレジストレーション画像630を同じ拡大率および拡大領域で拡大してもよい。   The examiner may change the enlargement ratio and enlargement region 605 of the image data of the report 600 one by one, or may change the enlargement ratio and enlargement region 605 of other image data according to one image data. Good. For example, when a plurality of image data of the report 600 are selected, the enlargement ratio and the movement of the enlargement area 605 may be synchronized. For example, when three of the registration image 610, the registration image 620, and the registration image 630 are selected, the processor 20 sets the registration image 620 and the registration image 630 to be the same as the registration image 610 is enlarged. You may enlarge by an expansion rate and an expansion area.

また、プロセッサ20は、レポート600上の特定の画像データの倍率に合わせて他の画像データの拡大率および拡大領域605を変更してもよい。例えば、図18のモーションコントラスト画像650が黄斑を中心として眼底上の9mm×9mmの範囲において取得された画像データであった場合、眼底カメラ画像に基づくレジストレーション画像610に写る黄斑を中心として眼底上の9mm×9mmの範囲が表示されるように画像610の表示を変更してもよい。これによって、検者は、モーションコントラスト画像650と同じ拡大率でレジストレーション画像610を観察することができ、モーションコントラスト画像650と眼底カメラ画像に基づくレジストレーション画像610との関係を確認しやすい。   Further, the processor 20 may change the enlargement ratio and the enlargement area 605 of other image data according to the enlargement ratio of the specific image data on the report 600. For example, when the motion contrast image 650 in FIG. 18 is image data acquired within a range of 9 mm×9 mm on the fundus centering on the macula, the macula appearing in the registration image 610 based on the fundus camera image is centered on the fundus. The display of the image 610 may be changed so that the range of 9 mm×9 mm is displayed. Thereby, the examiner can observe the registration image 610 at the same magnification as the motion contrast image 650, and can easily confirm the relationship between the motion contrast image 650 and the registration image 610 based on the fundus camera image.

以上のように、レポート600上の画像データの一部を拡大できるようにすることによって、画像全体を拡大させた場合に比べ、他の画像を表示させるスペースが狭くならないため、レポート600の情報を損なうことなく、画像データの視認性を高めることができる。また、レジストレーション画像が拡大表示されることによって、検者は、レジストレーション画像の重ね合わせ部分をより詳細に確認することができる。   As described above, by making it possible to enlarge a part of the image data on the report 600, the space for displaying other images does not become narrower than the case of enlarging the entire image. The visibility of the image data can be improved without damaging it. Further, by enlarging and displaying the registration image, the examiner can check the overlapping portion of the registration images in more detail.

なお、プロセッサ20は、画像の表示枠のサイズを変更できてもよい。例えば、画像の端がドラッグされた場合、プロセッサ20は、表示枠のサイズを変更してもよい。この場合、プロセッサ20は、表示枠のサイズ変更に合わせて画像全体を拡大または縮小させてもよい。   The processor 20 may be able to change the size of the display frame of the image. For example, when the edge of the image is dragged, the processor 20 may change the size of the display frame. In this case, the processor 20 may enlarge or reduce the entire image according to the size change of the display frame.

なお、レポート出力画面において、レジストレーション画像の重ね合わせ部分がクリックされた場合、プロセッサ20は、重ね合わせ部分が画像の表示枠にちょうど収まるサイズに画像を拡大してもよい。   In addition, when the overlapping portion of the registration image is clicked on the report output screen, the processor 20 may enlarge the image so that the overlapping portion fits within the display frame of the image.

本実施例に係る眼科画像処理装置の一例を示すブロック図である。It is a block diagram which shows an example of the ophthalmologic image processing apparatus which concerns on a present Example. 本実施例に係るレジストレーション画面の一例を示す図である。It is a figure which shows an example of the registration screen which concerns on a present Example. 本実施例に係るレジストレーション画面における設定画面の一例を示す図である。It is a figure which shows an example of the setting screen in the registration screen which concerns on a present Example. 本実施例に係るレポートの一例を示す図である。It is a figure which shows an example of the report which concerns on a present Example. 本実施例に係るレジストレーション画像の一例を示す図である。It is a figure which shows an example of the registration image which concerns on a present Example. 本実施例に係るレジストレーション画像の一例を示す図である。It is a figure which shows an example of the registration image which concerns on a present Example. 本実施例に係る検査日ベースでのレポートを出力する画面の一例を示す図である。It is a figure which shows an example of the screen which outputs the report on the basis of an inspection day concerning a present Example. テンプレート作成画面の一例を示す図である。It is a figure which shows an example of a template creation screen. 本実施例においてレポートの一つを選択するための選択画面の一例を示す図である。It is a figure which shows an example of the selection screen for selecting one of the reports in a present Example. 本実施例に係るレジストレーション画像の一例を示す図である。It is a figure which shows an example of the registration image which concerns on a present Example. 本実施例に係るレジストレーション画像の一例を示す図である。It is a figure which shows an example of the registration image which concerns on a present Example. 本実施例に係るOCT二次元画像を選択する選択画面の一例を示す図である。It is a figure which shows an example of the selection screen which selects the OCT two-dimensional image which concerns on a present Example. 本実施例に係る検査日ベースでの画像データを出力する画面の一例を示す図である。It is a figure which shows an example of the screen which outputs the image data based on an inspection day concerning a present Example. 本実施例に係る重合領域を設定する場合の一例を示す図である。It is a figure which shows an example at the time of setting the superposition area|region which concerns on a present Example. 本実施例に係る特徴画像を作成する場合の一例を示す図である。It is a figure which shows an example at the time of creating the characteristic image which concerns on a present Example. 本実施例に係る視野計のマップ画像を選択する選択画面の一例を示す図である。It is a figure which shows an example of the selection screen which selects the map image of the perimeter which concerns on a present Example. レポート出力画面の一例である。It is an example of a report output screen. レポートに表示される画像の一例である。It is an example of the image displayed on the report. レポート出力画面の一例である。It is an example of a report output screen.

1 出力部(表示部)
4 操作部
10 眼科用OCTデバイス(第1の眼科検査装置)
15 視野検査装置(第2の眼科検査装置)
17 眼底撮影装置(第3の眼底検査装置)
20 CPU(プロセッサ20)
30 記憶部


1 Output section (display section)
4 Operation unit 10 OCT device for ophthalmology (first ophthalmic examination apparatus)
15 Visual field inspection device (second ophthalmic inspection device)
17 Fundus imaging device (third fundus inspection device)
20 CPU (processor 20)
30 storage


Claims (6)

眼科検査装置によって取得された被検眼の画像データを処理する眼科画像処理装置であって、
画像種別を含んだテンプレートを設定する設定手段と、
前記テンプレートに基づいて、前記眼科検査装置によって取得された前記被検眼の前記画像データを処理して、前記テンプレート上での前記画像種別に対応する画像データを含むレポートを作成する画像処理手段を備え、
前記画像処理手段は、作成された前記レポート上の画像データの一部を拡大し表示させることを特徴とする眼科画像処理装置。
An ophthalmic image processing device for processing image data of an eye to be inspected acquired by an ophthalmic examination device,
A setting means for setting a template including an image type,
An image processing unit that processes the image data of the eye to be inspected acquired by the ophthalmologic examination apparatus based on the template to create a report including image data corresponding to the image type on the template is provided. ,
Wherein the image processing means, ophthalmologic image processing apparatus, characterized in that to display an enlarged portion of the image data on the generated report.
検者の操作に応じて操作手段から出力された指示信号を受け付ける指示受付手段をさらに備え、
前記画像処理手段は、前記指示受付手段によって受け付けた前記指示信号に基づいて、前記レポート上の画像データの一部を拡大し表示させることを特徴とする請求項1の眼科画像処理装置。
Further comprising an instruction receiving means for receiving an instruction signal output from the operating means in response to the operation of the examiner,
Wherein the image processing means, the indication based on the instruction signal received by the receiving means, the ophthalmologic image processing apparatus according to claim 1, characterized in that to display an enlarged portion of the image data on the report.
前記画像処理手段は、前記レポート上の特定の領域に表示される画像データの表示枠の大きさを変えずに、前記表示枠に表示された画像データの倍率を変更できることを特徴とする請求項1または2の眼科画像処理装置。 The image processing unit can change the magnification of the image data displayed in the display frame without changing the size of the display frame of the image data displayed in a specific area on the report. 1 or 2 ophthalmic image processing device. 前記画像処理手段は、前記レポート上の前記画像データの拡大領域を変更できることを特徴とする請求項1〜3のいずれかの眼科画像処理装置。 The ophthalmic image processing apparatus according to any one of claims 1 to 3, wherein the image processing means is capable of changing an enlarged area of the image data on the report. 前記画像処理手段は、前記レポート上の複数の画像データの倍率および/または拡大領域を個別に変更可能であることを特徴とする請求項1〜4のいずれかの眼科画像処理装置。   The ophthalmic image processing apparatus according to any one of claims 1 to 4, wherein the image processing unit can individually change the magnification and/or the enlargement area of the plurality of image data on the report. 被検眼の画像データを処理する眼科画像処理装置において用いられる眼科画像処理プログラムであって、前記眼科画像処理装置のプロセッサによって実行されることで、
画像種別を含んだテンプレートを設定する設定ステップと、
前記テンプレートに基づいて、眼科検査装置によって取得された前記被検眼の前記画像データを処理して、前記テンプレート上での前記画像種別に対応する画像データを含むレポートを作成する作成ステップと、
作成された前記レポート上の画像データの一部を拡大する拡大ステップと、
を前記眼科画像処理装置に実行させることを特徴とする眼科画像処理プログラム。
An ophthalmic image processing program used in an ophthalmic image processing device that processes image data of an eye to be inspected, by being executed by a processor of the ophthalmic image processing device,
A setting step to set a template containing the image type,
Based on the template, processing the image data of the eye to be inspected acquired by an ophthalmic examination apparatus, a creating step of creating a report including image data corresponding to the image type on the template ,
An enlarging step of enlarging a part of the image data on the created report,
An ophthalmic image processing program, which causes the ophthalmic image processing device to execute.
JP2016126678A 2016-03-03 2016-06-27 Ophthalmic image processing device, ophthalmic image processing program Active JP6702024B2 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2016126678A JP6702024B2 (en) 2016-06-27 2016-06-27 Ophthalmic image processing device, ophthalmic image processing program
EP17158927.8A EP3213668B1 (en) 2016-03-03 2017-03-02 Ophthalmic image processing apparatus
US15/447,372 US10679343B2 (en) 2016-03-03 2017-03-02 Ophthalmic image processing apparatus and ophthalmic image processing program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016126678A JP6702024B2 (en) 2016-06-27 2016-06-27 Ophthalmic image processing device, ophthalmic image processing program

Publications (3)

Publication Number Publication Date
JP2018000246A JP2018000246A (en) 2018-01-11
JP2018000246A5 JP2018000246A5 (en) 2019-06-20
JP6702024B2 true JP6702024B2 (en) 2020-05-27

Family

ID=60944834

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016126678A Active JP6702024B2 (en) 2016-03-03 2016-06-27 Ophthalmic image processing device, ophthalmic image processing program

Country Status (1)

Country Link
JP (1) JP6702024B2 (en)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7005382B2 (en) * 2018-02-26 2022-01-21 キヤノン株式会社 Information processing equipment, information processing methods and programs
WO2019234575A1 (en) * 2018-06-08 2019-12-12 Alcon Inc. System and method for automatic torsion correction in diagnostic ophthalmic measurements
FI3669749T3 (en) 2018-12-20 2024-05-28 Optos Plc Optical coherence tomography scan control
JP7421063B2 (en) * 2019-09-04 2024-01-24 株式会社ニデック Ophthalmology image observation program
EP4069057A1 (en) 2019-12-05 2022-10-12 Alcon Inc. Surgical applications with integrated visualization camera and optical coherence tomography
JP7491446B1 (en) 2023-07-05 2024-05-28 株式会社ニデック Ophthalmic imaging equipment

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3345438B2 (en) * 1992-05-20 2002-11-18 株式会社東芝 Medical information system
JP2007289657A (en) * 2006-03-28 2007-11-08 Fujifilm Corp Image recording apparatus, image recording method, and image recording program
JP2012254164A (en) * 2011-06-08 2012-12-27 Canon Inc Ophthalmologic information processing system and method, and program
JP6214887B2 (en) * 2012-03-12 2017-10-18 東芝メディカルシステムズ株式会社 Report creation support device and report browsing device
JP2016101297A (en) * 2014-11-28 2016-06-02 株式会社トプコン Ophthalmologic information processing system and ophthalmologic information processing method

Also Published As

Publication number Publication date
JP2018000246A (en) 2018-01-11

Similar Documents

Publication Publication Date Title
JP6702024B2 (en) Ophthalmic image processing device, ophthalmic image processing program
JP6115007B2 (en) Ophthalmic image processing apparatus and program
JP5601609B2 (en) Ophthalmic observation program and ophthalmic observation apparatus
US8251510B2 (en) Ophthalmic observation apparatus and ophthalmic observation program
JP5242472B2 (en) Ophthalmic observation device
JP2020529226A (en) Systems and methods for improving ophthalmic imaging
JP6296683B2 (en) Ophthalmic apparatus and control method
JP2007029460A (en) Ophthalmic image processor and ophthalmic image processing program
JP2011019644A (en) Image processing apparatus, image processing method, and program
WO2016167001A1 (en) Ophthalmic image display device and ophthalmic imaging device
US10679343B2 (en) Ophthalmic image processing apparatus and ophthalmic image processing program
JP2014045905A (en) Image processor, and image processing method
JP5998493B2 (en) Ophthalmic image processing apparatus and program
CN111970957A (en) Image processing method, program, and image processing apparatus
JP5297541B2 (en) Ophthalmic apparatus, method for controlling ophthalmic apparatus, and program
JP6472495B2 (en) Ophthalmic apparatus and control method
JP6766378B2 (en) Ophthalmic image processing device, ophthalmic image processing program
JP2014147505A (en) Ophthalmologic apparatus and control method
JPH09313437A (en) Ophthalmological analysis device
JP6988058B2 (en) Ophthalmology image processing device, ophthalmology image processing program
JP2022033290A (en) Information processing device, information processing method, and program
JP5484425B2 (en) Ophthalmic apparatus, control method therefor, and computer program
JP6033478B2 (en) Ophthalmic apparatus, layer thickness comparison method and program
JP7421063B2 (en) Ophthalmology image observation program
EP4195157A1 (en) Image processing device and ophthalmic device provided with the same

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190510

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190510

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20191224

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200114

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200313

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200407

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200420

R150 Certificate of patent or registration of utility model

Ref document number: 6702024

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250