JP6632248B2 - 医用画像表示装置、医用画像表示システム、医用画像表示方法、およびプログラム - Google Patents

Description

本発明は、医用画像表示装置、医用画像表示システム、医用画像表示方法、およびプログラムに関する。

昨今、多様な医用画像が診断に活用されている。かかる診断では、医用画像表示装置により医用画像を表示部に表示させ、診療に好適な表示に変更したり、配置を変更したりといった操作が行われる。

特許文献１には、医用画像を表示する領域を模した配置先イメージボックスを生成し、配置先イメージボックス上での操作により、表示されているそれぞれの医用画像の配置を変更することが開示されている。

特開２０１０−２００９３６号公報

特許文献１に開示されている上述の処理では、ある配置で表示させている複数の医用画像を、異なる位置に表示させる場合には、それぞれの医用画像の表示を変更する操作を行う必要があった。

本発明の実施形態の一つに係る医用画像表示装置は、医用画像を画像表示領域に表示させ、前記医用画像と対応するサムネイル画像をサムネイル画像表示領域に表示させる表示制御手段と、前記サムネイル画像上への操作入力の位置情報に基づいて、前記画像表示領域を構成する複数の部分領域のうちの第一の部分領域と第二の部分領域を選択する選択手段と、前記表示制御手段は、前記選択手段により選択された第二の部分領域の表示を変更することにより、前記第二の部分領域に表示させることを特徴とする。

これにより、ある配置の複数の医用画像が含まれる領域と、それらの医用画像を表示させたい領域とを選択する操作入力により、当該配置に基づいて新たに表示させる領域での配置を決定して表示させることができ、操作の手間が少なくなる。

本発明の実施形態に係る医用画像表示装置を含むシステムにおける機能構成を例示する図である。 本発明の実施形態に係る医用画像表示装置の構成を例示する図である。 本発明の実施形態に係る医用画像表示装置の処理を例示するフローチャートである。 本発明の実施形態に係る医用画像表示装置による表示部の表示を例示する図である。 本発明の実施形態に係る医用画像表示装置による表示部の表示を例示する図である。 本発明の実施形態に係る医用画像表示装置による表示部の表示を例示する図である。 本発明の実施形態に係る医用画像表示装置による表示部の表示を例示する図である。 従来の医用画像表示装置による表示部の表示を例示する図である。

以下、図面を参照して本発明の実施形態について説明する。

図１は、本発明の実施形態に係る医用画像表示装置を含むシステムにおける機能構成を例示する図である。各ブロックに示される内容が、当該システムにおけるそれぞれの機能と対応する。当該システムは、本発明の実施形態に係る医用画像表示装置１００と、たとえばデータベース２００と医用画像撮影装置２１０と、表示部１１２とを有する。システムに含まれる各構成は、それぞれ通信可能に接続されている。

データベース２００は、医用画像撮影装置２１０により取得される医用画像のデータを格納する。装置２１０により取得された画像に対して、診療に好適な形態とするための画像処理を施して得られる画像も、医用画像に含む。装置２１０は、例えばコンピュータ断層撮影装置（ＣＴ：Ｃｏｍｐｕｔｅｄ Ｔｏｍｏｇｒａｐｈｙ）、核磁気共鳴映像装置（ＭＲＩ：Ｍａｇｎｅｔｉｃ Ｒｅｓｏｎａｎｃｅ Ｉｍａｇｉｎｇ）、２次元の放射線画像を撮影する放射線撮影装置（ＤＲ：Ｄｉｇｉｔａｌ Ｒａｄｉｏｇｒａｐｈｙ）である。装置２１０は、取得した医用画像のデータを、通信手段（不図示）を介してデータベース２００に出力する。これによりデータベース２００は医用画像のデータを格納する。データベース２００は、例えばＰＡＣＳ（Ｐｉｃｔｕｒｅ Ａｒｃｈｉｖｉｎｇ ａｎｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ Ｓｙｓｔｅｍ）サーバである。データベース２００は、例えばユーザの操作入力に応じて、格納している医用画像のデータを装置１００に通信手段（不図示）を介して出力する。

医用画像表示装置１００は、医用画像を画像表示領域に表示させ、ユーザの操作入力を受けて医用画像の表示を変更する処理を行う。装置１００は、医用画像取得部１０２と、サムネイル画像作成部１０４と、表示制御部１０６と、表示制御部１０６と、部分領域対応付け部１０８と、選択部１１０とを有する。装置１００に含まれる各機能構成は，各機能を実現するためのプログラムである。これらのプログラムは磁気ディスク１００３に格納され、ＣＰＵ１００１により実行される。別の例では、装置１００に含まれる各機能構成は、各機能を実現するためのプログラムを有するＦＰＧＡ（Ｆｉｅｌｄ−Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）である。以下、装置１００に含まれる各機能構成について説明する。

医用画像取得部１０２は、たとえばユーザからの操作入力に応じて、通信手段（不図示）を介して医用画像のデータをデータベース２００から取得する。取得部１０２は、医用画像撮影装置２１０から医用画像のデータを取得し、医用画像表示装置１００において適宜画像処理などを施してもよい。取得部１０２は、データベース２００または医用画像撮影装置２１０から取得した医用画像のデータを、サムネイル画像作成部１０４と、表示制御部１０６に出力する。

サムネイル画像作成部１０４は、医用画像取得部１０２から出力された医用画像のデータに基づいて、当該医用画像のサムネイル画像を作成する。ここで、サムネイル画像とは、多数の医用画像の情報を一覧表示する際に、各医用画像に対応した情報を示すための縮小画像である。作成部１０４における、サムネイル画像の具体的な作成方法は図３乃至図７に基づいて後述する。作成部１０４は、作成したサムネイル画像のデータを、表示制御部１０６に出力する。

表示制御部１０６は、医用画像取得部１０２とサムネイル画像作成部１０４とから取得した医用画像のデータとサムネイル画像のデータに基づいて、表示部１１２に表示する内容を制御する。さらに、制御部１０６は医用画像を表示する領域である医用画像表示領域を複数の部分領域により構成し、それぞれの部分領域の表示を制御する。制御部１０６は、それぞれの部分領域の態様と、表示の状態についての情報を部分領域対応付け部１０８に出力する。制御部１０６は、部分領域をさらに分割し、分割された領域に医用画像を表示するように制御することができる。

また、制御部１０６は、部分領域対応付け部１０８及び選択部１１０からの入力に基づいて、表示部１１２に表示する内容を制御する。制御部１０６は、選択部１１０により選択された第一の部分領域と第二の部分領域と、これらの部分領域の表示の状態に基づいて、表示部１１２に表示する内容を制御する。具体的な制御の内容については図３乃至図７に基づいて後述する。

選択部１１０は、部分領域対応付け部１０８を有する。対応付け部１０８は、表示制御部１０６により表示されているサムネイル画像と、医用画像表示領域を構成するそれぞれの部分領域とを対応付けた情報（以下、対応情報と称する）を取得する。対応付けの具体的な手法については、図３乃至図７に基づいて後述する。選択部１１０は、操作部１１４を介したユーザの操作入力と、対応付け部１０８が取得した対応情報とに基づいて、第一の部分領域と第二の部分領域を選択する。選択にかかる処理については、図３乃至図７に基づいて後述する。

表示部１１２は、表示制御部１０６から制御される画面を表示する。表示部１１２は、たとえばモニタである。

操作部１１４は、ユーザによる操作を医用画像表示装置１００に入力する。操作部１１４は、たとえばマウスである。別の例では、表示部１１２と操作部１１４は表示操作部１１６に統合される。表示操作部１１６は、たとえばタッチパネルモニタである。

図２は、本発明の実施形態に係る医用画像表示装置１００の構成を例示する図である。装置１００は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１００１、主メモリ１００２、磁気ディスク１００３、表示メモリ１００４、モニタ１００５、マウス１００６、キーボード１００７を有する。

ＣＰＵ１００１は、装置１００における処理を統合的に制御する。ＣＰＵ１００１は、図１に示した各機能構成を実現するプログラムを磁気ディスク１００３から主メモリ１００２に読みだして実行する。

主メモリ１００２は、ＣＰＵ１００１がアクセス可能な記憶装置である。主メモリ１００２は、例えばＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）や、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）である。主メモリ１００２は、ＣＰＵ１００１が実行するプログラムを格納し、ＣＰＵ１００１がプログラムを実行する際の作業領域を提供する。

磁気ディスク１００３は、オペレーティングシステム、周辺機器のデバイスドライブ、図１に示した各機能構成を実現するプログラムを含む各種アプリケーションソフトのプログラムを格納する。磁気ディスク１００３は、たとえばＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）や、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）である。

表示メモリ１００４は、表示部１１２に表示させるためのデータを一時的に格納する。表示制御部１０６により表示部１１２の表示の内容は制御され、表示部１１２の表示の内容は表示メモリ１００４を介して表示部１１２に出力される。

モニタ１００５は、表示メモリ１００４からの入力に基づいて画像やテキスト等を表示する。モニタ１００５は、表示部１１２の一例である。モニタ１００５は、例えばＣＲＴモニタや液晶モニタである。

マウス１００６及びキーボード１００７は、ユーザによる操作入力を受けて、その内容を医用画像表示装置１００の各部に出力する。マウス１００６及びキーボード１００７は、操作部１１４の一例である。

図２に示した各構成は、共通バス１００８により互いに通信可能に接続されている。

医用画像表示装置１００が、たとえばタッチパネルモニタを有する端末である場合には、マウス１００６及びキーボード１００７を含まなくてもよい。キーボードはタッチパネルモニタの表示部に表示され、ユーザは指やスタイラスペンにより、操作入力を行うことができる。

図８は従来の医用画像表示装置の例を示した図である。医用画像表示装置は、医用画像データに対応するサムネイル画像を表示するサムネイル画像表示領域と、医用画像データを表示する医用画像表示領域を有する。医用画像表示領域は医師の操作に応じて複数の部分領域に分割することが可能である。ユーザは、読影したい医用画像データに対応するサムネイル画像を所望の部分領域へとドラッグ＆ドロップをすることにより、所望の部分領域で読影したい医用画像データを表示することができる。さらにユーザは、公知の機能を用いて、ユーザの読影しやすい形に医用画像データの表示を変更し、読影を行う。

次に、図３に示すフローチャートに基づいて、本発明の実施形態に係る医用画像表示装置１００による処理を説明する。下記の処理において、特に断りがない場合、各処理を実現する主体は、ＣＰＵ１００１である。また、本発明の実施形態においては、医用画像を取得し、医用画像表示装置１００を用いて医用画像を表示し、処理を終了するまでの過程を読影と称する。

ステップＳ３０００において、サムネイル画像を作成する。まず、医用画像表示装置１００は患者情報や検査オーダ情報に基づいて、ユーザの操作入力により装置１００に表示させる医用画像をデータベース２００から取得する。患者情報や検査オーダ情報は病院情報システム（ＨＩＳ：Ｈｏｓｐｉｔａｌ Ｉｎｆｏｒｍａｔｉｏｎ Ｓｙｓｔｅｍ）（不図示）や、放射線科情報システム（ＲＩＳ：Ｒａｄｉｏｌｏｇｙ Ｉｎｆｏｒｍａｔｉｏｎ Ｓｙｓｔｅｍ）（不図示）により管理されている。装置１００はＨＩＳ（不図示）やＲＩＳ（不図示）から当該情報を取得し、表示制御部１０６を介して表示部１１２に表示させる。ユーザは表示部１１２に表示されている患者情報、当該患者の検査情報、当該検査における撮影のシリーズ情報等に基づいて、装置１００により表示部１１２に表示させる医用画像を選択することができる。選択された医用画像を、医用画像取得部１０２がデータベース２００から取得する。このとき医用画像取得部１０２は、医用画像と併せて、当該患者の所見や、検査により得られる医用画像以外の情報を取得して表示部１１２に表示させるようにしてもよい。サムネイル画像作成部１０４は、取得部１０２により取得された医用画像のサムネイル画像を作成する。サムネイル画像は、その元となる医用画像の概要を視認できる画像であればどのような画像であってもよい。医用画像が２次元画像である場合には、６４×６４ピクセルなど任意のサイズに縮小した２次元画像を当該医用画像のサムネイル画像とする。医用画像が複数の２次元画像から構成される３次元画像である場合には、複数の２次元画像のうちの１枚を選択し、任意のサイズに縮小した２次元画像をサムネイル画像とする。たとえば、頭尾方向の軸上の異なる位置における複数の横断面（ａｘｉａｌ）画像で構成される胸部Ｘ線ＣＴ画像は３次元画像である。当該ＣＴ画像において、最も頭部に近いａｘｉａｌ画像を縮小した２次元画像をサムネイル画像とする。ユーザの設定あるいは操作入力により、任意の軸上の任意の位置における断面画像を、当該ＣＴ画像のサムネイル画像とすることができる。本実施形態では、ユーザの操作入力により医用画像取得部１０２は胸部Ｘ線ＣＴ画像を取得したとする。サムネイル画像作成部１０４は、ユーザの操作入力により、ａｘｉａｌ画像、矢状面（ｓａｇｉｔｔａｌ）画像、冠状面（ｃｏｒｏｎａｌ）画像のそれぞれのサムネイル画像を作成したとする。

ステップＳ３０１０では、医用画像を表示する医用画像表示領域の初期状態を設定する。表示制御部１０６は、表示部１１２に表示させる医用画像表示領域を構成する部分領域の表示状態をユーザの指示により設定する。あるいは、表示制御部１０６は予め定められた表示状態を読み込んで設定してもよい。表示状態を示す情報は、医用画像表示領域を構成する部分領域の配置を示す情報（以下、部分領域情報と称する）を含む。また、表示状態を示す情報は、それぞれの部分領域に表示している医用画像の情報（以下、表示画像情報と称する）を含む。さらに、表示状態を示す情報は、部分領域が分割されている態様を示す情報（以下、分割情報と称する）を含む。設定された表示状態は、表示制御部１０６により表示部１１２における表示に反映され、主メモリ１００２に記憶される。本実施形態においては、初期状態として医用画像表示領域をＸ方向に２つ、Ｙ方向に２つの配置すなわち計４つの部分領域で構成し、それぞれの部分領域に表示されている医用画像はなく、それぞれの部分領域は分割されていない表示状態とする。これにより、図４（ａ）に示すような画面が表示部１１２に表示される。領域４３０は医用画像を表示する医用画像表示領域である。領域４３０は、部分領域４３０２、４３０４、４３０６、４３０８の４つの部分領域で構成される。

ステップＳ３０２０では、サムネイル画像と医用画像表示領域を構成する部分領域のそれぞれとを対応付ける。部分領域対応付け部１０８は、ステップＳ３０００で作成したそれぞれのサムネイル画像上の位置情報と、医用画像表示領域を構成する複数の部分領域の位置とを対応付けた情報である対応情報を取得する。対応情報は主メモリ１００２に記憶される。具体的には、それぞれのサムネイル画像上の座標を、医用画像表示領域を構成する部分領域の配置と同様の配置に割り当てたときに、同じ配置に属する座標と部分領域とを対応付ける。たとえば、ステップＳ３０１０で設定された初期状態に基づくと、サムネイル画像上の座標をＸ方向に２つ、Ｙ方向に２つ、計４つの領域の配置のそれぞれに割り当てる。右上の領域に含まれる座標は、医用画像表示領域を構成する部分領域のうち、右上の部分領域と対応付ける。図４（ｂ）はステップＳ３０００で作成したサムネイル画像の例である。医用画像表示領域４３０は、図４（ａ）に示すように４つの部分領域で構成されている。したがって、医用画像表示領域を構成する部分領域と同様の配置となるように、サムネイル画像４１２を領域４１２２、４１２４、４１２６、４１２８の４つの配置に割り当てる。領域４１２２に含まれる座標は部分領域４３０２と対応づけられる。領域４１２４に含まれる座標は部分領域４３０４と対応づけられる。領域４１２６に含まれる座標は部分領域４３０６と対応づけられる。領域４１２８に含まれる座標は部分領域４３０８と対応づけられる。その他のサムネイル画像も同様にして、医用画像表示領域を構成するそれぞれの部分領域と対応づけられ、対応情報が主メモリ１００２に記憶される。たとえば、サムネイル画像４１４は領域４１４２、４１４４、４１４６、４１４８の４つの領域に割り当てられ、領域４１４２に含まれる座標は部分領域４３０２と対応づけられる。

ステップＳ３０３０では、サムネイル画像と医用画像とを表示する。表示制御部１０６は、ステップＳ３０００で作成したサムネイル画像をサムネイル画像表示領域に表示させ、ユーザによる操作入力に基づいて医用画像を医用画像表示領域に表示させる。領域４１０は、サムネイル画像を表示するサムネイル画像表示領域である。サムネイル画像４１２、４１４、４１６、４１８はステップＳ３０００で作成したサムネイル画像である。

ステップＳ３０４０では、ユーザの操作入力に基づいて指示の種類を判定する。ユーザから読影終了の指示を受けた場合には、処理を終了する。読影終了の指示は、読影終了を指示するためのユーザインタフェースである、メニューやアイコンを予め設定して表示部１１２に表示させておき、ユーザがこれらのユーザインタフェースを介した操作入力を行ったことに基づいて読影終了の指示と判定する。医用画像表示装置１００の動作を終了させた場合や、医用画像表示装置１００の機能を実現するためのプログラムを終了させた場合にも、処理を終了する。

ステップＳ３０４０において、表示状態を変更する指示があった場合は、ステップＳ３０５０又はステップＳ３０６０に進む。表示状態の変更の指示は、表示制御部１０６により表示部１１２に表示されるユーザインタフェースを介した操作入力に基づいて判定する。

ステップＳ３０４０で部分領域の配置を変更する指示と判定された場合には、ステップＳ３０５０に進む。部分領域の配置の変更とは、たとえば、医用画像表示領域を構成する部分領域の数の変更や、それぞれの部分領域のサイズの変更である。すなわち、部分領域情報が変更される場合である。部分領域の変更は、たとえば、表示状態を設定するためのメニュー画面を表示させ、当該メニュー画面への操作入力により行われる。別の例では、表示部１１２に表示されている医用画像表示領域とそれぞれの部分領域、部分領域を分割した領域の境界を示す枠線を、操作部１１４により移動させる操作入力により行われる。部分領域の配置が変更されると、ステップＳ３０２０に進み、変更された部分領域の配置に基づいてサムネイル画像と部分領域の対応付けを行う。ステップＳ３０２０で取得される対応情報は、主メモリ１００２に記憶される。ステップＳ３０３０に進み、変更を反映した画面を表示部１１２に表示させる。

なお、部分領域のサイズ比率と、サムネイル上の対応する領域のサイズ比率は必ずしも同一である必要はない。例えば、部分領域４３０２、４３０４、４３０６、４３０８のサイズ比率が、１：１：１：１から１：３：３：９に変更された場合を考える。この場合、サムネイル上の対応する領域を変更に合わせて１：３：３：９にしてもよいし、医用画像表示領域の分割数を表しているだけととらえ、１：１：１：１の状態を保つようにしてもよい。ユーザにとって好適な操作性を実現するために、部分領域のサイズ比率を固定の比率に設定してもよい。

ステップＳ３０４０でそれぞれの部分領域内の表示を変更する指示と判定された場合には、ステップＳ３０６０に進む。それぞれの部分領域内の表示の変更とは、部分領域に表示されている画像の変更や、部分領域が分割されている態様の変更である。すなわち、表示画像情報が変更される場合と、分割情報が変更される場合である。部分領域内の表示が変更されると、ステップＳ３０３０に進み、表示制御部１０６は変更を反映した画面を表示部１１２に表示させる。

ここで、図５に基づいてステップＳ３０６０における処理を説明する。まず、部分領域に表示されている画像の変更について説明する。図４（ａ）に示す状態において、部分領域４３０２には医用画像が表示されていない。たとえば、操作部１１４の一例であるマウスによりサムネイル画像４１２を部分領域４３０２までドラッグ＆ドロップする操作入力を受けて、表示制御部１０６はサムネイル画像４１２に対応する医用画像を部分領域４３０２に表示させる。別の例では、サムネイル画像４１２上の領域４１２２をクリックする操作入力を受けて、表示制御部１０６はサムネイル画像４１２に対応する医用画像を部分領域４３０２に表示させる。サムネイル画像４１２の領域４１２２上の座標は、ステップＳ３０２０において、部分領域４３０２に対応付けられている。クリックの操作入力が行われた座標と対応情報とに基づいて、表示制御部１０６はサムネイル画像に対応する医用画像を部分領域４３０２に表示させる。次に、部分領域が分割されている態様の変更について説明する。たとえば、分割情報を設定するためのメニュー画面を表示させ、当該メニュー画面への操作入力により、部分領域が分割されている態様を変更することができる。

部分領域に表示されている画像の変更と、部分領域が分割されている態様の変更は、同時に行われる場合がある。たとえば、部分領域４３０２にサムネイル画像４１２に対応する医用画像について、互いに直行する３方向の断層像を表示（以下、ＭＰＲ表示と称する。）する場合である。たとえば上述した操作により部分領域４３０２にサムネイル画像４１２に対応する医用画像を表示させた後に、ＭＰＲ表示に変更するためのメニュー画面を表示させて、ＭＰＲ表示に変更することができる。ＭＰＲ表示に変更されると、医用画像取得部１０２はサムネイル画像４１２に対応する医用画像についての、互いに直行する３方向の断層像をデータベース２００から取得する。あるいは、医用画像が複数のＡｘｉａｌ断層像から構成される場合は、互いに直交する断面（Ｃｏｒｏｎａｌ断層像、Ｓａｇｉｔｔａｌ断層像）を医用画像装置１００で生成するようにしてもよい。もちろん、医用画像が複数のＣｏｒｏｎａｌ断層像や複数のＳａｇｉｔｔａｌ断層像から構成される場合も、同様に直交する断面を生成してもよい。医用画像取得部１０２はデータベース２００から取得した医用画像を表示制御部１０６に出力する。表示制御部１０６は、互いに直行する３方向の断層像を部分領域４３０２に表示させる。これにより、部分領域４３０２はさらに４分割され、部分領域に表示される画像が変更される。ＭＰＲ表示が可能な画像を医用画像表示領域に表示させる操作入力があった場合には、自動的に医用画像取得部１０２が対応する医用画像を取得し、表示制御部１０６が３つの画像を表示させるように予め設定しておくこともできる。この場合には、たとえば上述したようにサムネイル画像４１２の領域４１２２がクリックされた場合に、部分領域４３０２にサムネイル画像４１２に対応する医用画像を含むＭＰＲ表示が行われる。

同様にして、図５の部分領域４３０４と部分領域４３０８には、それぞれサムネイル画像４１４に対応する医用画像が表示されている。部分領域４３０８には、部分領域４３０４に表示されている医用画像のある領域を拡大して表示している。拡大の表示は表示制御部１０６により、部分領域４３０８に上述したような操作によりサムネイル画像４１４に対応する医用画像を表示させた後に、拡大の操作を行うためのメニュー画面を表示させて行うことができる。あるいは、操作部１１４の一例であるマウスのボタン操作と移動操作に応じて、医用画像上の任意の点を中心とした拡大や縮小の操作を行うようにしてもよい。また、部分領域４３０４にサムネイル画像４１４に対応する医用画像を表示させ、部分領域４３０４の表示は変更せずに、ユーザが指定した部分領域、たとえば部分領域４３０８に当該医用画像を拡大して表示させることができる。

サムネイル画像４１２とサムネイル画像４１４は、それぞれ対応する医用画像が医用画像表示領域に表示されている。表示制御部１０６は、対応情報に基づいて、サムネイル画像が対応する医用画像が表示されている部分領域に対応する領域を、その他の領域と区別して表示する。たとえば、図５（ｂ）に示すように、サムネイル画像４１２の領域４１２２は、領域４１２４、４１２６．４１２８とは異なる色で強調表示されている。同様に、サムネイル画像４１４と対応する医用画像が部分領域４３０４と部分領域４３０８に表示されているので、領域４１４４と４１４８が強調表示されている。サムネイル画像上のある領域と他の領域を区別して表示する方法は、これに限らない。たとえば、強調したい領域を表現する枠を表示してもよい。

ＭＰＲ表示や拡大表示といった表示形態の変更は、ユーザの操作入力により公知の医用画像表示装置の機能により行うことができる。たとえば、円や四角などの図形や文字列を画像に重畳表示させる、アノテーション付けを行うことができる。また、画像の縮小表示や、階調を変更して表示させることができる。医用画像が複数の２次元画像から構成される３次元画像である場合には、３次元画像データ中のスライス位置を変更することにより、部分領域に表示する２次元画像を変更することができる。

なお、本実施形態では、表示画像を変更した場合には、あらかじめ設定した表示条件により表示するものとする。たとえば、ドラッグ＆ドロップの操作入力により指定した部分領域に既に他の医用画像が表示されている場合がある。その場合、表示制御部１０６は操作入力の前に表示されていた画像の表示条件を引き継がず、操作入力により表示の指示があった医用画像について予め設定した表示条件に基づいて表示させる。操作入力の前後で同じ医用画像を表示していたとしても、予め設定した表示条件に基づいて表示させる。表示条件の設定は、ユーザが事前に設定しておく。あるいは、医用画像のデータがＤＩＣＯＭ（Ｄｉｇｉｔａｌ Ｉｍａｇｉｎｇ ａｎｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎｓ ｉｎ Ｍｅｄｉｃｉｎｅ）形式の場合には、ＤＩＣＯＭヘッダの情報から自動的に設定してもよい。また、複数の２次元画像から構成される３次元画像を表示させる場合には、表示制御部１０６は、そのうちの１つの２次元画像を医用画像表示領域に表示させることとする。たとえば、頭尾方向の位置が異なる複数のＡｘｉａｌ断層像で構成される胸部Ｘ線ＣＴ画像を表示させる場合には、表示制御部１０６は、最も頭側に位置するＡｘｉａｌ断層像を医用画像表示領域に表示させる。

上記のように、表示状態に変更があった場合には、記憶部（不図示）に変更後の表示状態を記憶し、ステップＳ３０３０に進む。

ステップＳ３０４０で、複数の部分領域に及ぶ変更の指示と判定された場合は、ステップＳ３０７０に進む。複数の部分領域に及ぶ変更の指示とは、複数の部分領域を選択する操作入力により行われる。複数の部分領域を選択する操作入力とは、たとえばサムネイル画像上で第一の部分領域と第二の部分領域を選択する操作入力である。選択部１１０は、操作入力に応じて第一の部分領域と第二の部分領域を選択する。選択部１１０は、たとえば一つのサムネイル画像上でのドラッグ＆ドロップの操作入力に応じて、第一の部分領域と第二の部分領域を選択する。選択部１１０は、ステップＳ３０２０で記憶部１１２（不図示）に保存した対応情報に基づいて、ユーザの操作入力が行われたサムネイル画像上の座標、すなわち位置情報に対応する第１の部分領域と第２の部分領域を選択する。選択部１１０は、サムネイル画像上でのドラッグ＆ドロップの開始点、すなわちマウスのボタンが押下された点に対応する部分領域を第１の部分領域とする。同様に、選択部１１０は、サムネイル画像上でのドラッグ＆ドロップの終了点、すなわちマウスのボタンが解放された点に対応する部分領域を第２の部分領域とする。

なお、第１の部分領域と第２の部分領域が同じ領域を示している場合にはステップＳ３０３０へ戻るものとする。あるいは、前述したようにサムネイル画像上への操作入力のあった位置情報に対応する部分領域に、当該サムネイル画像と対応する医用画像を表示させてもよい。つまり、ステップＳ３０６０の処理により、サムネイル画像上への操作入力のあった位置情報に対応する部分領域の表示画像の変更を行ってもよい。

ステップＳ３０８０において、表示制御部１０６は、ステップＳ３０７０で選択した第１の部分領域の表示状態に基づいて、第２の部分領域の表示状態を変更する。

本実施形態では、第２の部分領域の表示状態を変更する一つの例として、表示制御部１０６は第１の部分領域に含まれる医用画像を、第１の部分領域に表示されていた表示状態で、第２の部分領域に表示させる。このとき、第１の部分領域の表示状態は変更しないものとする。すなわち、第１の部分領域に含まれる医用画像を、第２の部分領域に複写する。具体的には記憶部（不図示）から第１の部分領域の表示状態を読み出し、第２の部分領域の表示状態として記憶部（不図示）に保存する。保存すると、ステップＳ３０３０へと進む。第１の部分領域に表示されている画像がない場合には、処理を行わずにステップＳ３０３０へと進む。

すなわち、表示制御手段である表示制御部１０６は、選択手段である選択部１１０により選択された第一の部分領域に含まれる医用画像を、第二の部分領域に表示させる。その際に、表示制御部１０６は、第一の部分領域に含まれる複数の医用画像の配置に基づいて、第二の部分領域における配置を決定して表示させる。また別の観点では、選択手段である選択部１１０は、サムネイル画像上への操作入力の位置情報に基づいて、第一の部分領域と第二の部分領域を選択する。そして、表示制御部１０６は、選択部１１０により選択された第一の部分領域に含まれる医用画像を、第二の部分領域に表示させるように、第二の部分領域の表示を変更する。

ここで、図６に基づいてステップＳ３０７０とステップＳ３０８０における処理について説明する。図５（ａ）に示す状態において、ステップＳ３０７０の処理により第１の部分領域と第２の部分領域を選択する。そして、ステップＳ３０８０の処理を行い、ステップＳ３０３０において表示された表示部１１２の状態を図６に示す。

図６（ａ）は、ステップＳ３０７０において、ユーザがサムネイル画像４１２上で領域４１２２から領域４１２６へドラッグ＆ドロップをする操作入力の模式図である。選択部１１０は、開始点である領域４１２２の位置情報に対応する部分領域４３０２を第１の部分領域として選択する。同様に選択部１１０は、終了点である領域４１２６の位置情報に対応する部分領域４３０６を第２の部分領域として選択する。この場合、選択した部分領域４３０２と部分領域４３０６は同一領域ではない。かつ、部分領域４３０２に表示画像が存在する。よって、ステップＳ３０８０の処理を行う。表示制御部１０６は、記憶部（不図示）から部分領域４３０２の表示状態を読み出し、部分領域４３０６の表示状態として保存する。図５（ａ）に示したように、部分領域４３０２の表示状態は、表示画像としてサムネイル画像４１２に対応する医用画像データのＭＰＲ表示を行っている。したがって、部分領域４３０６の表示状態を、表示画像としてサムネイル画像４１２に対応する医用画像データを、表示形態としてＭＰＲ表示を行っている状態に設定する。つまり、表示制御部１０６は、図６（ｂ）に示すように部分領域４３０２で表示していた内容を、同様の表示状態で、部分領域４３０６に表示させる。また、部分領域４３０２と部分領域４３０６に、サムネイル画像４１２に対応する医用画像が表示されることとなる。したがって、表示制御部１０６は、サムネイル画像４１２で部分領域４３０２と部分領域４３０６に対応する領域４１２２と領域４１２６を強調表示する。

本実施形態によれば、医用画像表示装置１００は、選択した第１の部分領域と第２の部分領域の表示状態に応じて、第２の部分領域の表示状態を第１の部分領域の表示状態とすることができる。これにより、医師は、ある部分領域での表示状態を保ったまま、所望の表示領域にその表示状態で表示することができる。医師の表示状態の設定に関する負担を軽減することができる。また、医用画像表示装置１００の表示部１１２は、たとえば複数のモニタにより構成される場合がある。その場合、複数のモニタ上の広い領域に医用画像表示領域が表示されることになる。医用画像表示領域に表示されている医用画像のそれぞれに対して選択したり、移動したりするためには、ユーザは広い領域にわたって操作入力を行うことになる。本実施形態では、サムネイル画像上の位置情報に基づいて、ある部分領域に表示されている医用画像を、別の部分領域に表示させることができる。したがって、広い領域にわたって医用画像が表示されている場合でも、小さい領域内で所望の操作入力を行うことができ、ユーザの負荷を低減することができる。

第１の部分領域と第２の部分領域を選択する操作の別の例では、第１の部分領域と第２の部分領域を選択する操作入力を、一つのサムネイル画像上で行わなくてもよい。例えば、サムネイル画像４１４を開始点とし、サムネイル画像４１２を終了点とするドラッグ＆ドロップの操作入力を行う。選択部１１０は、サムネイル画像４１４と対応する医用画像が表示されている部分領域４３０４を第１の部分領域として選択する。また、選択部１１０は、サムネイル画像４１２が表示されている部分領域４３０２を第２の部分領域として選択する。さらに、選択部１１０は、表示制御部１０６により強調表示されている領域上への操作入力により、操作入力のあった領域と対応する部分領域を選択してもよい。サムネイル画像４１４に対応する医用画像は、図６（ｂ）に示すように部分領域４３０４と部分領域４３０８に表示されている。このとき、図７（ａ）に示すように、操作入力の開始点が領域４１４８上にあるので、選択部１１０は部分領域４３０８を第１の部分領域として選択する。操作入力の終了点は領域４１２２上にあるので、選択部１１０は部分領域４３０２を第２の部分領域として選択する。

第１の部分領域と第２の部分領域を選択する操作の別の例では、部分領域の選択を必ずしもサムネイル画像上で行わなくてもよい。例えば、ある部分領域を指定してキーボードの「Ｃｔｒｌ」キーと「Ｃ」キーを同時に押下する操作入力に応じて、選択部１１０は当該操作入力のあった部分領域を第１の部分領域として選択する。さらに、別の部分領域を指定してキーボードの「Ｃｔｒｌ」キーと「Ｖ」キーを同時に押下する操作入力に応じて、選択部１１０は当該操作入力のあった部分領域を第２の部分領域として選択する。別の例では、選択部１１０は部分領域上への操作入力に応じて第１の部分領域と第２の部分領域を選択する。例えば図５（ａ）の状態において、部分領域４３０２上を開始点とし、部分領域４３０６上を終了点とするドラッグ＆ドロップの操作入力をユーザが行ったとする。選択部１１０は、第１の部分領域として部分領域４３０２を選択する。また、選択部１１０は、第２の部分領域として部分領域４３０６を選択する。これにより、部分領域４３０２に含まれる複数の医用画像は部分領域４３０６に複製して表示される。ユーザは、１回のドラッグ＆ドロップの操作により、複数の医用画像を別の部分領域に複製して表示させることができる。

第１の部分領域と第２の部分領域の表示状態を変更する別の例では、第１の部分領域の表示状態を第２の部分領域の表示状態としたあと、第１の部分領域に画像を表示させないようにする。すなわち、操作入力が行われるまで第一の部分領域に表示されていた医用画像の表示を中止する。つまり、表示制御部１０６は、第１の部分領域に含まれる医用画像を、第２の部分領域に移動して表示させる。

第１の部分領域と第２の部分領域の表示状態を変更するさらに別の例では、第１の部分領域の表示状態と第２の部分領域の表示状態を入れ換える。つまり、表示制御部１０６は第１の部分領域に含まれる医用画像と、第２の部分領域に含まれる医用画像とを交換してそれぞれ表示させる。図７に基づいて交換して表示させる例を説明する。なお、この処理を行う前の表示部１１２の状態は、図５（ａ）に示した状態とする。

図７（ａ）は、ユーザがサムネイル画像４１４上の領域４１４８から、サムネイル画像４１２上の領域４１２２へドラッグ＆ドロップをした場合の模式図を示す。この場合、選択部１１０は開始点である領域４１４８に対応する部分領域４３０８を第１の部分領域として選択する。同様に、選択部１１０は終了点である領域４１２２に対応する部分領域４３０２を第２の部分領域として選択する。そして、表示制御部１０６は、第１の部分領域の表示状態と第２の部分領域の表示状態を交換してそれぞれの部分領域に表示させる。操作入力が行われる前の部分領域４３０８の表示状態は、表示画像がサムネイル画像４１４に対応する医用画像であり、表示形態が拡大表示であり、かつアノテーション５００が付与された状態であった。ここで、アノテーションとは、画像上に重畳して表示する図形や文字列である。そして操作入力を受けて、第２の部分領域である部分領域４３０２に、部分領域４３０８の表示状態で、部分領域４３０８に含まれる医用画像を表示させる。同様にして、操作入力が行われる前の部分領域４３０２の表示状態は、表示画像がサムネイル画像４１２に対応する医用画像、表示形態がＭＰＲ表示であった。そして操作入力を受けて、第１の部分領域である部分領域４３０８に、部分領域４３０２の表示状態で、部分領域４３０２に含まれる医用画像を表示させる。それぞれのサムネイル画像と対応する医用画像が表示されている部分領域が変更されたので、表示制御部１０６は、サムネイル画像上の強調表示も併せて変更する。結果として、表示部１１２に表示される内容は、図７（ｂ）のようになる。

第１の部分領域と第２の部分領域を選択する操作の別の例では、必ずしもドラッグ＆ドロップにより行われなくてもよい。たとえば、選択部１１０は、ある一つのサムネイル画像上のある位置をクリックする操作入力を受けて、クリックされた位置情報に対応する部分領域を第１の部分領域を選択する。そして、同じサムネイル画像上の別の位置をクリックする操作入力を受けて、クリックされた位置情報に対応する部分領域を第２の部分領域として選択する。これにより、第１の部分領域に表示されていた医用画像を第２の部分領域に、たとえば移動して表示させることができる。

上述した、選択部１１０が第一の部分領域と第二の部分領域を選択する例においては、ユーザは操作を意図する医用画像と対応するサムネイル画像上で、表示されている部分領域の位置と対応する領域に対して操作入力を行う例を示した。実運用上は、必ずしもこのような適切な操作入力が行われない可能性がある。図５（ａ）を例に説明する。サムネイル画像４１２と対応する医用画像は、部分領域４３０２に表示されている。ユーザは部分領域４３０２に表示されている画像を部分領域４３０４に移動して表示させようと意図して操作入力を行うとする。本来は、部分領域４３０２と対応する領域４１２２上の位置を開始点として操作入力を行う。しかしながら、ユーザの操作ミスにより部分領域４３０６と対応する領域４１２６上の位置を開始点として操作入力を行う場合が考えられる。このように不適切な操作入力が行われた場合に、選択部１１０が第一の部分領域と第二の部分領域を選択する手法を、ユーザは予め設定しておくことができる。たとえば選択部１１０は、操作入力のあったサムネイル画像と対応する医用画像が表示されている部分領域を第一の部分領域として選択する。そして、操作入力により意図される移動が可能な部分領域を第二の部分領域として選択する。ユーザが領域４１２６を開始点とし、領域４１２８を終了点として操作入力を行ったとする。すなわち、右の部分領域に移動することが意図された操作入力である。サムネイル画像４１２と対応する医用画像は部分領域４３０２に表示されているので、右の部分領域４３０４に移動させることが可能である。ユーザが領域４１２６を開始点とし、領域４１２２を終了点として操作入力を行ったとする。すなわち、上の部分領域に移動することが意図された操作入力である。部分領域４３０２に表示されている医用画像を、上の部分領域に移動することはできないので、選択部１１０はいかなる部分領域も選択しない。よって、移動や複製といった、部分領域の表示を変更する処理は行われない。別の例として、不適切な操作入力に対しては、選択部１１０はいかなる部分領域も選択しないこととしてもよい。このような例外処理は、ユーザが予め設定しておくことができ、上述した例に限らない。

上述した実施形態にかかる医用画像表示装置は、たとえば表示操作部１１６としてタッチパネルモニタを有するタブレット端末において実現することができる。表示制御部１０６は、表示操作部１１６の画像表示領域に医用画像を表示させる。そして、表示操作部１０６は、たとえばスタイラスペンやユーザの指といったオブジェクトを介した操作入力による指示位置を取得する取得手段として機能する。表示操作部１１６は、たとえばタッチパネルモニタ上の、オブジェクトが接触している位置を指示位置として判定する。選択部１１０は、指示位置がたとえばサムネイル画像上のある位置を示し、一定時間動いていない場合に、当該指示位置に対応する部分領域を第一の部分領域として選択する。続いて、指示位置の移動が取得手段である表示操作部１０６により取得されたとする。表示操作部１１６オブジェクトがタッチパネルモニタと接触しなくなった時点で、ユーザの操作入力が終了したと判定する。選択部１１０は、ユーザの操作入力が終了する直前に取得された指示位置に基づいて第二の部分領域を選択する。なお、指示位置を判定する方法は、タッチパネルモニタとオブジェクトの接触に限らない。また、第一の部分領域の選択と第二の部分領域の選択は、上述したあらゆる実施形態により行われることとする。

上述した実施形態にかかる医用画像表示装置は、たとえばサーバ装置（不図示）において実現することができる。表示制御部１０６は、表示端末（不図示）の表示部で表示可能なデータを出力する表示出力手段として機能する。表示端末（不図示）は、サーバ装置（不図示）から配信されるデータを表示させるための機能を有していればよい。たとえば、サーバ装置（不図示）の表示制御部１０６は、ＨＴＭＬ（Ｈｙｐｅｒ Ｔｅｘｔ Ｍａｒｋｕｐ Ｌａｎｇｕａｇｅ）形式のデータとして出力する。表示端末（不図示）は、公知のブラウザシステムを備え、ＨＴＭＬ形式のデータを解釈して、表示部に表示させる。サーバ装置（不図示）の選択部１１０は、表示端末（不図示）を介した操作入力を受信して、第一の部分領域と第二の部分領域を選択する処理を行う。

上述した実施形態は、たとえば複数の装置から構成される医用画像表示システムとして実現することができる。図１に示した医用画像表示装置１００の各機能構成が、当該システムを構成する複数の装置のいずれかに含まれていればよい。たとえば、サーバ装置（不図示）と表示端末（不図示）により当該システムを構成する。表示端末（不図示）は、選択部１１０を有する。また、表示端末（不図示）はたとえばタブレット端末であり、表示操作部１１６を有する。サーバ装置（不図示）は、医用画像取得部１０２と、サムネイル画像作成部１０４と、表示制御部１０６と、部分領域対応付け部１０８と、を有する。上述したように表示操作部１１６を介した操作入力に基づいて、表示端末（不図示）の選択部１１０は、第一の部分領域と第二の部分領域を選択する。そして、表示端末（不図示）は選択された部分領域をサーバ装置（不図示）に出力する。サーバ装置（不図示）は、ユーザの表示端末（不図示）に対する操作入力に応じて、表示制御部１０６により処理された結果を、表示端末（不図示）に出力する。

本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

上述の各実施形態における医用レポート作成装置は、単体の装置として実現してもよいし、複数の情報処理装置を含む装置を互いに通信可能に組合せて上述の処理を実行する形態としてもよく、いずれも本発明の実施形態に含まれる。共通のサーバ装置あるいはサーバ群で、上述の処理を実行することとしてもよい。医用レポート作成装置および医用レポート作成支援システムを構成する複数の装置は所定の通信レートで通信可能であればよく、また同一の施設内あるいは同一の国に存在することを要しない。

本発明の実施形態には、前述した実施形態の機能を実現するソフトウェアのプログラムを、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータが該供給されたプログラムのコードを読みだして実行するという形態を含む。

したがって、実施形態に係る処理をコンピュータで実現するために、該コンピュータにインストールされるプログラムコード自体も本発明の実施形態の一つである。また、コンピュータが読みだしたプログラムに含まれる指示に基づき、コンピュータで稼働しているＯＳなどが、実際の処理の一部又は全部を行い、その処理によっても前述した実施形態の機能が実現され得る。

上述の実施形態を適宜組み合わせた形態も、本発明の実施形態に含まれる。

１００ 医用画像表示装置
１０６ 表示制御部（表示制御手段）
１１０ 選択部（選択手段）
１１２ 表示部
１１６ 表示操作部（取得手段）

Claims (12)

1. 医用画像を画像表示領域に表示させ、前記医用画像と対応するサムネイル画像をサムネイル画像表示領域に表示させる表示制御手段と、
   前記サムネイル画像上への操作入力の位置情報に基づいて、前記画像表示領域を構成する複数の部分領域のうちの第一の部分領域と第二の部分領域を選択する選択手段と、
   前記表示制御手段は、前記選択手段により選択された第二の部分領域の表示を変更することにより、前記第二の部分領域に表示させることを特徴とする医用画像表示装置。
2. 前記選択手段は、前記サムネイル画像上の位置情報と、前記複数の部分領域の配置を示す部分領域情報とを対応付け、前記サムネイル画像上への操作入力の位置情報に基づいて第一の部分領域と第二の部分領域を選択することを特徴とする請求項１に記載の医用画像表示装置。
3. 前記選択手段は、前記サムネイル画像上への操作入力の開始点の位置情報と対応する部分領域を第一の部分領域として選択し、前記サムネイル画像上への操作入力の終了点の位置情報と対応する部分領域を第二の部分領域として選択することを特徴とする請求項２に記載の医用画像表示装置。
4. 前記選択手段は、前記サムネイル画像と対応する医用画像が、前記サムネイル画像上への操作入力の開始点の位置情報と対応する部分領域に含まれている場合に、該部分領域を第一の部分領域として選択することを特徴とする請求項３に記載の医用画像表示装置。
5. 前記表示制御手段は、前記選択手段により選択された第二の部分領域の表示を変更する場合に、前記選択手段により選択された第一の部分領域の表示は変更しないことを特徴とする請求項１乃至請求項４のいずれか一項に記載の医用画像表示装置。
6. 前記表示制御手段は、前記選択手段により選択された第二の部分領域の表示を変更する場合に、前記選択手段により選択された第一の部分領域の表示を変更することにより、前記操作入力が行われるまで第一の部分領域に表示されていた医用画像の表示を中止することを特徴とする請求項１乃至請求項５のいずれか一項に記載の医用画像表示装置。
7. 前記表示制御手段は、前記選択手段により選択された第二の部分領域の表示を変更する場合に、前記選択手段により選択された第一の表示領域の表示を変更することにより、前記操作入力が行われるまで前記第二の部分領域に表示されていた医用画像を、前記第一の部分領域に表示させることを特徴とする請求項１乃至請求項６のいずれか一項に記載の医用画像表示装置。
8. 前記操作入力を行うマウスをさらに有し、
   前記選択手段は、前記マウスのボタンが押下された時に前記マウスによって指示される位置に基づいて第一の部分領域を選択し、前記マウスのボタンが解放された時に前記マウスによって指示される位置に基づいて第二の部分領域を選択することを特徴とする請求項１乃至請求項７いずれか一項に記載の医用画像表示装置。
9. 前記表示制御手段により表示される画像上での操作入力による指示位置を取得する取得手段をさらに有し、
   前記選択手段は、前記取得手段により取得された指示位置が一定時間動いていない場合、前記指示位置に基づいて第一の部分領域を選択し、前記操作入力が終了する直前に前記取得手段により取得された指示位置に基づいて第二の部分領域を選択することを特徴とする請求項１乃至請求項８のいずれか一項に記載の医用画像表示装置。
10. 医用画像を画像表示領域に表示させ、前記医用画像と対応するサムネイル画像をサムネイル画像表示領域に表示させる表示制御手段と、
    前記サムネイル画像上への操作入力の位置情報に基づいて、前記画像表示領域を構成する複数の部分領域のうちの第一の部分領域と第二の部分領域を選択する選択手段と、
    前記表示制御手段は、前記選択手段により選択された第二の部分領域の表示を変更することにより、前記選択手段により選択された第一の部分領域に含まれる医用画像を、前記第二の部分領域に表示させることを特徴とする医用画像表示システム。
11. 医用画像を画像表示領域に表示させ、前記医用画像と対応するサムネイル画像をサムネイル画像表示領域に表示させる表示制御ステップと、
    前記サムネイル画像上への操作入力の位置情報に基づいて、前記画像表示領域を構成する複数の部分領域のうちの第一の部分領域と第二の部分領域を選択する選択ステップと、前記選択ステップで選択された第二の部分領域の表示を変更することにより、前記選択ステップで選択された第一の部分領域に含まれる医用画像を、前記第二の部分領域に表示させる変更ステップと、を有することを特徴とする医用画像表示方法。
12. 請求項１乃至請求項９のいずれか一項に記載の医用画像表示装置の各手段をコンピュータに実行させるためのプログラム。

Images