JP7510495B2 - 表示制御装置、表示制御方法、及び表示制御プログラム - Google Patents

表示制御装置、表示制御方法、及び表示制御プログラム Download PDF

Info

Publication number
JP7510495B2
JP7510495B2 JP2022505744A JP2022505744A JP7510495B2 JP 7510495 B2 JP7510495 B2 JP 7510495B2 JP 2022505744 A JP2022505744 A JP 2022505744A JP 2022505744 A JP2022505744 A JP 2022505744A JP 7510495 B2 JP7510495 B2 JP 7510495B2
Authority
JP
Japan
Prior art keywords
information
computer
tomographic
display
assigned
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2022505744A
Other languages
English (en)
Other versions
JPWO2021181731A5 (ja
JPWO2021181731A1 (ja
Inventor
純一 石垣
栄一 今道
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Publication of JPWO2021181731A1 publication Critical patent/JPWO2021181731A1/ja
Publication of JPWO2021181731A5 publication Critical patent/JPWO2021181731A5/ja
Application granted granted Critical
Publication of JP7510495B2 publication Critical patent/JP7510495B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/20—Drawing from basic elements, e.g. lines or circles
    • G06T11/203—Drawing of straight lines or curves
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves 
    • A61B5/055—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves  involving electronic [EMR] or nuclear [NMR] magnetic resonance, e.g. magnetic resonance imaging
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/02—Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
    • A61B6/03—Computed tomography [CT]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning
    • G06F3/04855—Interaction with scrollbars
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/001—Texturing; Colouring; Generation of texture or colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00—Indexing scheme for image generation or computer graphics
    • G06T2210/41—Medical

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Medical Informatics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Surgery (AREA)
  • Molecular Biology (AREA)
  • Veterinary Medicine (AREA)
  • Pathology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Biophysics (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Optics & Photonics (AREA)
  • Magnetic Resonance Imaging Apparatus (AREA)
  • Apparatus For Radiation Diagnosis (AREA)

Description

本開示は、表示制御装置、表示制御方法、及び表示制御プログラムに関する。
近年、ＣＴ（Computed Tomography）装置及びＭＲＩ（Magnetic Resonance Imaging）装置等の撮影装置により撮影された医用の３次元画像を用いての画像診断が行われている。このような３次元画像には、異なる複数の断層位置での断層画像が含まれる。医師による３次元画像を用いた画像診断では、複数の断層画像を切り替えて表示することが行われる。
複数の断層画像を切り替えて表示する技術として、複数の断層画像それぞれに対応する断層位置を指定するためのスライダバーを表示する技術が提案されている（特開２００４－１７３９１０号公報参照）。この技術では、スライダバー上にスライダを表示し、ユーザはスライダを動かすことによって断層位置を指定し、指定された断層位置に対応する断層画像が表示される。また、この技術では、例えば、異常陰影候補等のコンピュータによって実行された画像診断の結果（以下、「コンピュータ診断結果」という）が含まれる断層画像に対応する断層位置に、コンピュータ診断結果が含まれることを表すマークがスライダバーの横に表示される。
また、スライダバーによって指定された断層位置に対応する断層画像に含まれる臓器の名称を示すラベルを表示する技術が提案されている（特許第６４１９４４１号公報参照）。
特開２００４－１７３９１０号公報に記載の技術では、スライダバーの横に単にマークを表示するだけでは、指定されている断層位置の断層画像にコンピュータ診断結果等の付与情報が付与されているか否かをユーザが把握しにくい場合があった。特に断層数が多数の場合、ユーザがスライダによって指定した断層位置の断層画像に付与情報が付与されているか、又は隣接する断層画像に付与情報が付与されているかが把握しにくい。というのも、断層数が多く、かつ、近接した断層位置の複数の断層画像のそれぞれに付与情報が付与されている場合、スライダバーの横において、各付与情報に対応する複数のマーク同士が密集する結果、複数のマークが重なり合ってしまうためである。ここで、特開２００４－１７３９１０号公報に記載のコンピュータ診断結果等の付与情報は、各断層画像に付与された付与情報と付与情報に対応するマークとが１対１で結び付けられているという意味で、各断層画像に固有な付与情報である。このように、特開２００４－１７３９１０号公報に記載の技術では、スライダバー上で指定された断層位置に対応する断層画像に対して、固有の付与情報が付与されているか否かをユーザが把握しにくい場合があった。
また、特許第６４１９４４１号公報に記載の技術は、指定された断層位置に対応する断層画像に含まれる臓器の名称のラベルを表示する技術にすぎない。そのため、特許第６４１９４４１号公報に記載の技術でも、特開２００４－１７３９１０号公報と同様に、スライダバー上で指定された断層位置に対応する断層画像に対して、固有の付与情報が付与されているか否かをユーザが把握しにくい場合があった。
なお、特許第６４１９４４１号公報に記載の断層画像に付与される付与情報は、臓器に対応して付与される付与情報であり、各断層画像に付与された付与情報とラベルとが１対１で結び付けられている、各断層画像に固有な付与情報ではない。例えば、スライダバー上において断層位置の指定を変更しても、変更前と変更後の断層位置のそれぞれの断層画像において同じ臓器が写っている限り、各断層画像に付与される付与情報は同じであるため、同じ臓器名のラベルが表示されることになる。これは、１つのラベルが、同じ臓器を含んだ複数の断層画像に付与されている複数の付与情報と結び付けられていることを意味する。そのため、上述のとおり、特許第６４１９４４１号公報に記載の技術でも、特開２００４－１７３９１０号公報と同様に、スライダバー上で指定された断層位置に対応する断層画像に対して、固有の付与情報が付与されているか否かをユーザが把握しにくい場合があった。
本開示は、以上の事情を鑑みてなされたものであり、指定オブジェクトで指定された断層位置に対応する断層画像に対して、固有の付与情報が付与されているか否かをユーザが把握しやすい表示制御装置、表示制御方法、及び表示制御プログラムを提供することを目的とする。
本開示の表示制御装置は、少なくとも一つのプロセッサを備える表示制御装置であって、プロセッサは、被検体を撮影して得られた医用の複数の断層画像それぞれに対応する断層位置を指定するための指定オブジェクトと、指定されている断層位置に対応する断層画像と、を表示する制御を行い、ユーザによって付与されたユーザ付与情報及びコンピュータによって付与されたコンピュータ付与情報の少なくとも一方を含み、複数の断層画像の各々に固有で、かつ断層画像毎に付与されるべく設定されている付与情報が付与されている断層画像については、付与情報を表すマークであって、１つのマークによって１枚の断層画像が特定可能なマークを、付与されている断層画像の断層位置に対応する指定オブジェクトの深さ方向の位置に表示する制御を行い、指定されている断層位置に対応する断層画像に付与情報が付与されている場合、付与情報を表すマークを強調表示する制御を行う表示制御装置である。深さ方向とは、複数の断層画像の深さ方向を意味する。
なお、本開示の表示制御装置は、指定オブジェクトが、スライダバーを含んでいてもよい。
また、本開示の表示制御装置は、指定オブジェクトが、シェーマを含んでいてもよい。
また、本開示の表示制御装置は、プロセッサが、スライダバーの一端から指定されている断層位置までと、他端から指定されている断層位置までとの色を異ならせてスライダバーを表示する制御を行ってもよい。
また、本開示の表示制御装置は、付与情報が、コンピュータ付与情報を含み、プロセッサが、未表示の断層画像に付与されたコンピュータ付与情報を表すマークと、表示済みの断層画像に付与されたコンピュータ付与情報を表すマークとを識別可能に表示する制御を行ってもよい。
また、本開示の表示制御装置は、付与情報が、コンピュータ付与情報を含み、プロセッサが、コンピュータ付与情報が正しいか否かを表す入力を受け付け、コンピュータ付与情報が正しくないことを表す入力を受け付けた場合、コンピュータ付与情報を表すマークの色を、現在の表示色から背景色に近い色に変更する制御を行ってもよい。
また、本開示の表示制御装置は、付与情報が、コンピュータ付与情報を含み、プロセッサが、コンピュータ付与情報の表示及び非表示を切り替える入力を受け付け、受け付けた入力に応じて、コンピュータ付与情報を表すマークの表示及び非表示を切り替える制御を行ってもよい。
また、本開示の表示制御装置は、プロセッサが、コンピュータ付与情報が付与されている断層画像については、断層画像上にコンピュータ付与情報を表示する制御を行い、受け付けた入力に応じて、コンピュータ付与情報を表すマークと断層画像上のコンピュータ付与情報との双方の表示及び非表示を切り替える制御を行ってもよい。
また、本開示の表示制御装置は、付与情報が、コンピュータ付与情報として断層画像における関心領域の輪郭を含み、プロセッサが、指定されている断層位置に対応する断層画像に関心領域の輪郭が付与されている場合、断層画像上に関心領域の輪郭を表示する制御を行い、更に、表示対象の関心領域と同じ関心領域が検出された他の断層画像の何れかに付与されている関心領域の輪郭を表示する制御を行ってもよい。
また、本開示の表示制御装置は、プロセッサが、他の断層画像に付与されている関心領域の輪郭のうち、最大の輪郭を表示する制御を行ってもよい。
また、本開示の表示制御装置は、コンピュータ付与情報は、コンピュータが、複数の断層画像の中から、同じ対象が写っている断層画像群を抽出し、抽出した断層画像群の中から代表となる断層画像を選択し、選択した断層画像に対して付与する情報を含んでいてもよい。
また、本開示の表示制御装置は、ユーザ付与情報が、複数の断層画像のうち、同じ対象が写っている断層画像群の代表となる断層画像に対してユーザによって付与された情報を含んでいてもよい。
また、本開示の表示制御方法は、被検体を撮影して得られた医用の複数の断層画像それぞれに対応する断層位置を指定するための指定オブジェクトと、指定されている断層位置に対応する断層画像と、を表示する制御を行い、ユーザによって付与されたユーザ付与情報及びコンピュータによって付与されたコンピュータ付与情報の少なくとも一方を含み、複数の断層画像の各々に固有で、かつ断層画像毎に付与されるべく設定されている付与情報が付与されている断層画像については、付与情報を表すマークであって、１つのマークによって１枚の断層画像が特定可能なマークを、付与されている断層画像の断層位置に対応する指定オブジェクトの深さ方向の位置に表示する制御を行い、指定されている断層位置に対応する断層画像に付与情報が付与されている場合、付与情報を表すマークを強調表示する制御を行う処理を表示制御装置が備えるプロセッサが実行するものである。
また、本開示の表示制御プログラムは、被検体を撮影して得られた医用の複数の断層画像それぞれに対応する断層位置を指定するための指定オブジェクトと、指定されている断層位置に対応する断層画像と、を表示する制御を行い、ユーザによって付与されたユーザ付与情報及びコンピュータによって付与されたコンピュータ付与情報の少なくとも一方を含み、複数の断層画像の各々に固有で、かつ断層画像毎に付与されるべく設定されている付与情報が付与されている断層画像については、付与情報を表すマークであって、１つのマークによって１枚の断層画像が特定可能なマークを、付与されている断層画像の断層位置に対応する指定オブジェクトの深さ方向の位置に表示する制御を行い、指定されている断層位置に対応する断層画像に付与情報が付与されている場合、付与情報を表すマークを強調表示する制御を行う処理を表示制御装置が備えるプロセッサに実行させるためのものである。
本開示によれば、指定オブジェクトで指定された断層位置に対応する断層画像に対して、固有の付与情報が付与されているか否かをユーザが把握しやすくすることができる。
診断支援システムの構成の一例を示すブロック図である。 表示制御装置のハードウェア構成の一例を示すブロック図である。 表示制御装置の機能的な構成の一例を示すブロック図である。 スライダバー及び断層画像の表示画面の一例を示す図である。 スライダバーを説明するための図である。 付与情報を表すマークが強調された状態の一例を示す図である。 表示済み及び未表示それぞれのコンピュータ付与情報を表すマークの一例を示す図である。 断層画像上に表示されたコンピュータ付与情報及びユーザ付与情報のひとつであるアノテーションの一例を示す図である。 正しくないと判断されたコンピュータ付与情報を表すマークの一例を示す図である。 コンピュータ付与情報を表すマークの表示及び非表示の切り替えを説明するための図である。 断層画像上のコンピュータ付与情報の表示及び非表示の切り替えを説明するための図である。 表示制御処理の一例を示すフローチャートである。 断層位置が指定された場合の処理ルーチンの一例を示すフローチャートである。 コンピュータ付与情報に対するユーザの判断が行われた場合の処理ルーチンの一例を示すフローチャートである。 コンピュータ付与情報の表示及び非表示を切り替える処理ルーチンの一例を示すフローチャートである。 変形例に係るスライダバーの一例を示す図である。 変形例に係るコンピュータ付与情報の表示状態の一例を示す図である。 変形例に係るコンピュータ付与情報の付与処理を説明するための図である。 変形例に係るシェーマ及び断層画像の表示画面の一例を示す図である。
以下、図面を参照して、本開示の技術を実施するための形態例を詳細に説明する。
まず、図１を参照して、本実施形態に係る診断支援システム１０の構成を説明する。図１に示すように、診断支援システム１０は、表示制御装置１２、撮影装置１４、及び画像保管装置１６を含む。表示制御装置１２、撮影装置１４、及び画像保管装置１６は、それぞれネットワークＮに接続され、ネットワークＮを介して互いに通信が可能とされる。
撮影装置１４は、被検体の診断対象となる部位を撮影することにより、その部位を表す３次元の医用画像を生成する装置である。撮影装置１４により撮影された３次元の医用画像は、複数の断層画像を含んで構成される。本実施形態では、撮影装置１４として、ＣＴ装置を適用した例を説明するが、これに限定されない。例えば、撮影装置１４として、ＭＲＩ装置又はＰＥＴ（Positron Emission Tomography）装置等のＣＴ装置以外の３次元の医用画像を生成する装置を適用してもよい。また、本実施形態では、３次元の医用画像を構成する断層画像として、アキシャル断面の断層画像を適用した例を説明するが、これに限定されない。３次元の医用画像を構成する断層画像として、サジタル断面及びコロナル断面等のアキシャル断面以外の断面の断層画像を適用してもよい。
画像保管装置１６は、医用画像の保存及び管理をするコンピュータであり、医用画像が記憶される記憶装置等を備える。画像保管装置１６は、ネットワークＮを介して、表示制御装置１２及び撮影装置１４との間で、撮影装置１４により生成された医用画像を送受信する。なお、医用画像の格納形式及びネットワークＮ経由での各装置間の通信は、ＤＩＣＯＭ（Digital Imaging and Communication in Medicine）等の予め定められたプロトコルに基づいている。
次に、図２を参照して、本実施形態に係る表示制御装置１２のハードウェア構成を説明する。表示制御装置１２の例としては、パーソナルコンピュータ又はサーバコンピュータ等が挙げられる。表示制御装置１２は、クラウドサーバであってもよい。
図２に示すように、表示制御装置１２は、ＣＰＵ（Central Processing Unit）２０、一時記憶領域としてのメモリ２１、及び不揮発性の記憶部２２を含む。また、表示制御装置１２は、液晶ディスプレイ等のディスプレイ２３、キーボードとマウス等の入力部２４、及びネットワークＮに接続されるネットワークＩ／Ｆ（InterFace）２５を含む。ＣＰＵ２０、メモリ２１、記憶部２２、ディスプレイ２３、入力部２４、及びネットワークＩ／Ｆ２５は、バス２６に接続される。
記憶部２２は、ＨＤＤ（Hard Disk Drive）、ＳＳＤ（Solid State Drive）、又はフラッシュメモリ等によって実現される。記憶媒体としての記憶部２２には、表示制御プログラム３０が記憶される。ＣＰＵ２０は、記憶部２２から表示制御プログラム３０を読み出してからメモリ２１に展開し、展開した表示制御プログラム３０を実行する。
次に、図３を参照して、本実施形態に係る表示制御装置１２の機能的な構成について説明する。図３に示すように、表示制御装置１２は、受付部４０及び表示制御部４２を含む。ＣＰＵ２０が表示制御プログラム３０を実行することで、受付部４０及び表示制御部４２として機能する。
受付部４０は、ユーザによって入力部２４を介して入力された各種指示を受け付ける。このユーザによる各種指示の詳細は後述する。
表示制御部４２は、図４に示すように、被検体を撮影して得られた医用の複数の断層画像それぞれに対応する断層位置を指定するためのスライダバーＳＢと、指定されている断層位置に対応する断層画像と、をディスプレイ２３に表示する制御を行う。この被検体を撮影して得られた医用の複数の断層画像とは、画像保管装置１６に保存されている３次元の医用画像のうち、表示対象として指定された３次元の医用画像を構成する断層画像群である。図４に示すように、ディスプレイ２３に表示される画面は、スライダバーＳＢを表示する表示領域Ａ１、及び断層画像を表示する表示領域Ａ２を含んで構成される。
本実施形態では、断層画像毎に、ユーザによって付与されたユーザ付与情報及びコンピュータによって付与されたコンピュータ付与情報が付与されるべく設定されている。以下では、ユーザ付与情報及びコンピュータ付与情報を区別することなく総称する場合は「付与情報」という。また、本実施形態において付与情報とは、各断層画像に付与された付与情報と付与情報に対応する後述するマークとが１対１で結び付けられている、断層画像毎に固有な付与情報をいう。ユーザ付与情報の例としては、ユーザが後から見たい断層画像の目印として付与したブックマーク、及び断層画像に含まれる関心領域（ＲＯＩ：Region of Interest）に関する情報等のアノテーションが挙げられる。また、コンピュータ付与情報の例としては、ＣＡＤ（Computer-Aided Diagnosis）によって検出された関心領域に関する情報、又はＡＩ（Artificial Intelligence）画像診断によって検出された関心領域に関する情報が挙げられる。ここでいう関心領域とは、腫瘤等の病変の領域等のユーザが注目する領域を意味する。また、関心領域に関する情報の例としては、関心領域の輪郭、位置、及び面積等が挙げられる。また、コンピュータ付与情報を付与するコンピュータは、１台でもよいし複数台でもよい。また、コンピュータ付与情報を付与するコンピュータは、表示制御装置１２でもよいし、撮影装置１４が備える制御装置でもよいし、画像保管装置１６でもよい。また、診断支援システム１０の外部の画像処理装置などのコンピュータでもよい。
図５には、図４に示した表示領域Ａ１及び表示領域Ａ２のうち、表示領域Ａ１のみが示されている。表示制御部４２は、指定されている断層位置に対応するスライダバーＳＢの長手方向に沿った位置に、スライダＳＤを表示する制御を行う。図５における矩形に囲まれた「Ｈ」は被検体の頭側を表し、矩形に囲まれた「Ｆ」は足側を表す。すなわち、スライダバーＳＢ上のスライダＳＤの位置は、３次元の医用画像を構成する断層画像それぞれの断層位置のうち、「Ｈ」に近づくほど頭側の断層位置を表し、「Ｆ」に近づくほど足側の断層位置を表している。図５では、３次元の医用画像を構成する断層画像それぞれの断層位置のうち、最も頭側の断層位置が指定された例を示している。スライダバーＳＢ及びスライダＳＤが複数の断層画像それぞれに対応する断層位置を指定するための指定オブジェクトの一例である。
また、表示制御部４２は、付与情報が付与されている断層画像については、付与情報を表すマークであって、１つのマークによって１枚の断層画像が特定可能なマークを、付与されている断層画像の断層位置に対応するスライダバーＳＢの位置に表示する制御を行う。
具体的には、表示制御部４２は、ブックマークが付与されている断層画像については、ブックマークを表すマークＢＭを、付与されている断層画像の断層位置に対応するスライダバーＳＢの位置に表示する制御を行う。また、表示制御部４２は、アノテーションが付与されている断層画像については、アノテーションを表すマークＡＮを、付与されている断層画像の断層位置に対応するスライダバーＳＢの位置に表示する制御を行う。また、表示制御部４２は、コンピュータ付与情報が付与されている断層画像については、コンピュータ付与情報を表すマークＣＤを、付与されている断層画像の断層位置に対応するスライダバーＳＢの位置に表示する制御を行う。
表示制御部４２は、各マークを、断層位置に対応するスライダバーＳＢの位置に、スライダバーＳＢの長手方向に直交する方向（すなわち、スライダＳＤの長手方向）に沿ってずらして表示する制御を行う。これにより、同じ断層位置に複数のマークがあっても、各マークが重ならない。
また、表示制御部４２は、ユーザによるコンピュータ付与情報の表示及び非表示を切り替える入力を受け付けるためのボタンＢＴを表示する制御を行う。
ユーザは、入力部２４を介して表示したい断層画像の断層位置を指定する。例えば、ユーザは、スライダバーＳＢ上の表示したい断層画像の断層位置にスライダＳＤをドラッグすることによって断層位置を指定する。また、例えば、ユーザは、マウスのホイールをスクロールすることによってスライダバーＳＢ上の表示したい断層画像の断層位置を指定する。
また、表示制御部４２は、指定されている断層位置に対応する断層画像に付与情報が付与されている場合、付与情報を表すマークを強調表示する制御を行う。例えば、図６に示すように、表示制御部４２は、指定されている断層位置に対応するマークの輪郭を、指定されていない断層位置に対応するマークよりも太く表示することによって強調表示する制御を行う。図６では、指定されている断層位置に対応する断層画像にブックマーク、アノテーション、及びコンピュータ付与情報が付与されている例を示している。
なお、例えば、表示制御部４２は、指定されている断層位置に対応するマークの輪郭の色を、指定されていない断層位置に対応するマークの輪郭の色と異ならせることによって強調表示する制御を行ってもよい。また、例えば、表示制御部４２は、指定されている断層位置に対応するマークのみを点滅表示させることによって強調表示する制御を行ってもよい。こうした強調表示の形態は例示であって、これら以外の形態でもよい。
また、図７に示すように、表示制御部４２は、未表示の断層画像に付与されたコンピュータ付与情報を表すマークＣＤ（図７の左側において「未表示」と示す）と、表示済みの断層画像に付与されたコンピュータ付与情報を表すマークＣＤ（図７の右側において「表示済」と示す）とを識別可能に表示する制御を行う。具体的には、例えば、背景色を黒色とした場合、表示制御部４２は、未表示の断層画像に付与されたコンピュータ付与情報を表すマークＣＤを比較的明るい色（例えば、オレンジ色）で塗り潰して表示する。一方、その断層画像に対応する断層位置が指定され、断層画像が表示されて表示済みとなった場合、表示済みの断層画像に付与されたマークＣＤの色を、背景色に近い色（例えば、明るめの灰色）に変更して表示する。これにより、ユーザは、コンピュータ付与情報を確認したか否か、すなわち、コンピュータにより検出された関心領域を確認したか否かを一目で把握することができる。
また、図８に示すように、表示制御部４２は、コンピュータ付与情報が付与されている断層画像については、断層画像上にコンピュータ付与情報を表示する制御を行う。具体的には、例えば、表示制御部４２は、コンピュータ付与情報が表す関心領域を、他の領域とは異なる色（例えば、オレンジ色）で塗りつぶした状態で表示する制御を行う。また、コンピュータ付与情報は、初期状態においては輪郭線が無い状態で表示される。
また、図８に示すように、表示制御部４２は、アノテーションが付与されている断層画像については、断層画像上にアノテーションを表示する制御を行う。具体的には、例えば、表示制御部４２は、アノテーションが表す関心領域の輪郭を、コンピュータ付与情報が表す関心領域とは異なる色（例えば、白色）で表示する制御を行う。従って、ユーザは、断層画像に表示された関心領域が、ユーザ操作によって検出されたものであるか、又はコンピュータによって検出されたものであるかを把握することができる。なお、図８では、分かり易くするために、アノテーションが表す関心領域の輪郭であって、白色の実線の輪郭を破線で表している。
また、図８に示すように、表示制御部４２は、断層画像上にコンピュータ付与情報を表示する場合、コンピュータ付与情報が正しい場合にユーザが指定するボタン（図８の例では「agree」ボタン）、及びコンピュータ付与情報が正しくない場合にユーザが指定するボタン（図８の例では「disagree」ボタン）を表示する制御を行う。ここで、コンピュータ付与情報が正しい又は正しくない場合とは、より正確にはユーザが正しい又は正しくないと判断した場合を意味する。ユーザは、コンピュータ付与情報が表す関心領域の輪郭が正しい場合は、入力部２４を介して「agree」ボタンを指定する。一方、ユーザは、コンピュータ付与情報が表す関心領域の輪郭が正しくない場合は、入力部２４を介して「disagree」ボタンを指定する。
受付部４０が、コンピュータ付与情報が正しくないことを表す入力を受け付けた場合、すなわち、「disagree」ボタンが指定された場合、表示制御部４２は以下の制御を行う。この場合、表示制御部４２は、図９に示すように、コンピュータ付与情報を表すマークＣＤの色を、現在の表示色から背景色に近い色に変更する制御を行う。具体的には、表示制御部４２は、マークＣＤの色を、表示済みであることを表す灰色から、背景色である黒色に近い濃い灰色に変更する制御を行う。これにより、コンピュータが付与した情報ではあるが、ユーザにとって不要な情報を目立たなくすることができる。
受付部４０が、コンピュータ付与情報が正しいことを表す入力を受け付けた場合、すなわち、「agree」ボタンが指定された場合、表示制御部４２は以下の制御を行う。この場合、表示制御部４２は、正しいと指定されたコンピュータ付与情報が付与されている断層画像に対して、アノテーションを追加する制御を行う。従って、正しいと指定されたコンピュータ付与情報が表す関心領域の輪郭が、アノテーションとして、例えば、白色で表示される。この場合、コンピュータ付与情報は付与されたままなので、ユーザは、コンピュータが検出せず、自身で指定した関心領域であるか、又はコンピュータが検出し、自身が正しいと判断した関心領域であるかを把握することができる。
コンピュータによる検出では、多数の関心領域を検出する場合もある。そこで、ユーザは、画像診断にあたり、コンピュータ付与情報を非表示としたい場合もある。ユーザは、コンピュータ付与情報の表示及び非表示を切り替えたい場合、ボタンＢＴを入力部２４を介して指定する。
受付部４０が、コンピュータ付与情報の表示及び非表示を切り替える入力を受け付けた場合、表示制御部４２は、図１０に示すように、受け付けた入力に応じて、コンピュータ付与情報を表すマークＣＤの表示及び非表示を切り替える制御を行う。更に、本実施形態では、表示制御部４２は、図１１に示すように、マークＣＤに加えて、断層画像上のコンピュータ付与情報の表示及び非表示を切り替える制御も行う。
次に、図１２を参照して、本実施形態に係る表示制御装置１２の作用を説明する。ＣＰＵ２０が表示制御プログラム３０を実行することによって、図１２に示す表示制御処理が実行される。表示制御処理は、例えば、ユーザによって入力部２４を介して実行指示及び表示対象の３次元医用画像を構成する断層画像群を特定可能な識別情報が入力された場合に実行される。
図１２のステップＳ１０で、表示制御部４２は、入力された識別情報に従って特定される断層画像群を画像保管装置１６から取得し、取得した断層画像群に基づいて初期画面をディスプレイ２３に表示する制御を行う。具体的には、表示制御部４２は、前述したように、取得した断層画像群それぞれに対応する断層位置を指定するためのスライダバーＳＢと、指定されている断層位置に対応する断層画像と、をディスプレイ２３に表示する制御を行う。また、表示制御部４２は、前述したように、指定されている断層位置に対応するスライダバーＳＢの長手方向に沿った位置に、スライダＳＤを表示する制御を行う。なお、初期画面では、指定されている断層位置として、最も頭側の断層位置を適用した例を説明するが、これに限定されない。初期画面では、指定されている断層位置として、最も足側の断層位置を適用してもよいし、中央の断層位置を適用してもよい。
また、表示制御部４２は、前述したように、断層画像群のそれぞれについて、付与情報が付与されている断層画像については、付与情報を表すマークを、付与されている断層画像の断層位置に対応するスライダバーＳＢの位置に表示する制御を行う。また、表示制御部４２は、ユーザによるコンピュータ付与情報の表示及び非表示を切り替える入力を受け付けるためのボタンＢＴを表示する制御を行う。ステップＳ１０の処理により、一例として図４に示す画面がディスプレイ２３に表示される。なお、表示制御部４２は、２回目以降にステップＳ１０が実行される場合は、直近の表示状態を引き継いだ状態とする。
ステップＳ１２で、受付部４０は、ユーザによって入力部２４を介して入力された指示を受け付けるまで待機する。ユーザによって入力部２４を介して指示が入力されると、ステップＳ１２の判定が肯定判定となり、処理はステップＳ１４に移行する。ステップＳ１４で、受付部４０は、ステップＳ１２で受け付けた指示が、表示終了の指示であるか否かを判定する。この判定が否定判定となった場合は、処理はステップＳ１６に移行する。ステップＳ１６で、表示制御部４２は、ステップＳ１２で受け付けられた指示に応じて表示を切り替える制御を行う。ステップＳ１６の処理が終了すると、処理はステップＳ１２に戻る。一方、ステップＳ１４の判定が否定判定となった場合、表示制御処理が終了する。この表示制御処理が終了する時点での表示領域Ａ１及び表示領域Ａ２に表示されている各表示オブジェクトの表示状態は、例えば、断層画像群に対応付けられて画像保管装置１６に保存され、２回目以降にステップＳ１０が実行される場合に表示状態が引き継がれる。
ステップＳ１２で受け付けられた指示が、スライダＳＤのドラッグ操作又はマウスホイールのスクロール操作等による断層位置を指定する指示の場合、ステップＳ１６において図１３に示す処理ルーチンが実行される。
図１３のステップＳ２０で、表示制御部４２は、ユーザ操作により指定された断層位置に対応するスライダバーＳＢの位置に、スライダＳＤを移動させる制御を行う。ステップＳ２２で、表示制御部４２は、表示領域Ａ２の断層画像を、指定された断層位置の断層画像に切り替える制御を行う。
ステップＳ２４で、表示制御部４２は、指定された断層位置の断層画像に付与情報が付与されているか否かを判定する。この判定が肯定判定となった場合は、処理はステップＳ２６に移行する。ステップＳ２６で、表示制御部４２は、指定された断層位置の断層画像にブックマークが付与されているか否かを判定する。この判定が肯定判定となった場合、処理はステップＳ２８に移行する。
ステップＳ２８で、表示制御部４２は、指定された断層位置の断層画像に付与されているブックマークを表すマークＢＭを強調表示する制御を行う。ステップＳ２６の判定が否定判定となった場合、ステップＳ２８の処理は実行されずに処理はステップＳ３０に移行する。
ステップＳ３０で、表示制御部４２は、指定された断層位置の断層画像にアノテーションが付与されているか否かを判定する。この判定が肯定判定となった場合、処理はステップＳ３２に移行する。ステップＳ３２で、表示制御部４２は、指定された断層位置の断層画像に付与されているアノテーションを表すマークＡＮを強調表示する制御を行う。ステップＳ３４で、表示制御部４２は、前述したように、断層画像上にアノテーションを表示する制御を行う。ステップＳ３０の判定が否定判定となった場合、ステップＳ３２からステップＳ３４までの処理は実行されずに処理はステップＳ３６に移行する。
ステップＳ３６で、表示制御部４２は、指定された断層位置の断層画像にコンピュータ付与情報が付与されているか否かを判定する。この判定が肯定判定となった場合、処理はステップＳ３８に移行する。ステップＳ３８で、表示制御部４２は、指定された断層位置の断層画像に付与されているコンピュータ付与情報を表すマークＣＤを強調表示する制御を行う。ステップＳ４０で、表示制御部４２は、前述したように、指定された断層位置の断層画像に付与されているコンピュータ付与情報を表すマークＣＤの色を、表示済みであることを表す色に変更する。なお、このマークＣＤの色が、既に表示済みであることを表す色又はコンピュータ付与情報が正しくないことを表す色の場合、表示制御部４２は、マークＣＤの色は変更しない。ステップＳ４２で、表示制御部４２は、前述したように、断層画像上にコンピュータ付与情報を表示する制御を行う。
ステップＳ４２の処理が終了すると、図１３に示す処理ルーチンが終了する。また、ステップＳ３６の判定が否定判定となった場合、ステップＳ３８からステップＳ４２までの処理は実行されずに図１３に示す処理ルーチンが終了する。また、ステップＳ２４の判定が否定判定となった場合、ステップＳ２６からステップＳ４２までの処理は実行されずに図１３に示す処理ルーチンが終了する。
ステップＳ１２で受け付けられた指示が、「agree」ボタン又は「disagree」ボタンの指定によるコンピュータ付与情報が正しいか又は正しくないかを表す指示の場合、ステップＳ１６において図１４に示す処理ルーチンが実行される。
図１４のステップＳ５０で、受付部４０は、受け付けた指示が、コンピュータ付与情報が正しいことを表す入力であるか否か、すなわち、「agree」ボタンが指定されたか否かを判定する。この判定が肯定判定となった場合、処理はステップＳ５２に移行する。受付部４０が受け付けた指示が、コンピュータ付与情報が正しくないことを表す入力である場合、すなわち、「disagree」ボタンが指定された場合は、ステップＳ５０の判定が否定判定となり、処理はステップＳ５４に移行する。
ステップＳ５２で、表示制御部４２は、前述したように、正しいと指定されたコンピュータ付与情報が付与されている断層画像に対して、アノテーションを追加する制御を行う。ステップＳ５２の処理が終了すると、図１４に示す処理ルーチンが終了する。ステップＳ５４で、表示制御部４２は、前述したように、コンピュータ付与情報を表すマークＣＤの色を、現在の表示色から背景色に近い色に変更する制御を行う。ステップＳ５４の処理が終了すると、図１４に示す処理ルーチンが終了する。
ステップＳ１２で受け付けられた指示が、ボタンＢＴの指定によるコンピュータ付与情報の表示及び非表示を切り替える指示の場合、ステップＳ１６において図１５に示す処理ルーチンが実行される。
図１５のステップＳ６０で、受付部４０は、受け付けた指示が、コンピュータ付与情報を表示する指示であるか否かを判定する。この判定が肯定判定となった場合、処理はステップＳ６２に移行する。受付部４０が受け付けた指示が、コンピュータ付与情報を非表示とする指示である場合は、ステップＳ６０の判定が否定判定となり、処理はステップＳ６４に移行する。
ステップＳ６２で、表示制御部４２は、前述したように、コンピュータ付与情報を表すマークＣＤを表示し、かつ断層画像上のコンピュータ付与情報を表示する制御を行う。ステップＳ６２の処理が終了すると、図１５に示す処理ルーチンが終了する。ステップＳ６４で、表示制御部４２は、前述したように、コンピュータ付与情報を表すマークＣＤを非表示とし、かつ断層画像上のコンピュータ付与情報を非表示とする制御を行う。ステップＳ６４の処理が終了すると、図１５に示す処理ルーチンが終了する。
以上説明したように、本実施形態によれば、断層画像毎に固有の付与情報が付与可能とされ、１つのマークによって１枚の断層画像が特定可能であり、指定されている断層位置に対応する断層画像に付与情報が付与されている場合、付与情報を表すマークを強調表示している。従って、スライダバーＳＢ上で指定された断層位置に対応する断層画像に対して、固有の付与情報が付与されているか否かをユーザが把握しやすい。
なお、上記実施形態において、図１６に示すように、表示制御部４２は、スライダＳＤを表示せずに、スライダバーＳＢの一端から指定されている断層位置までと、他端から指定されている断層位置までとの色を異ならせてスライダバーＳＢを表示する制御を行ってもよい。この場合、断層位置を指定するための専用のオブジェクトであるスライダＳＤを表示しなくてもよくなる。但し、この場合に、上記実施形態と同様にスライダＳＤも表示してもよい。
また、上記実施形態において、図１７に示すように、表示制御部４２は、コンピュータ付与情報が付与されている断層画像については、その断層画像に付与されているコンピュータ付与情報が表す関心領域の輪郭Ｏ１に加え、関心領域の輪郭Ｏ２を更に表示する制御を行ってもよい。この場合、例えば、表示制御部４２は、輪郭Ｏ２として、同じ関心領域が検出された他の断層画像の何れかに付与されているコンピュータ付与情報が表す関心領域の輪郭を表示する制御を行う。具体的には、表示制御部４２は、輪郭Ｏ２として、同じ関心領域が検出された他の断層画像の何れかに付与されているコンピュータ付与情報が表す関心領域の輪郭のうち、最大の輪郭を表示する制御を行う。ここでいう最大の輪郭の例としては、面積が最大の輪郭又は輪郭の長さが最長の輪郭等が挙げられる。
また、上記実施形態では、コンピュータが関心領域を検出した全ての断層画像に、コンピュータ付与情報を付与する場合について説明したが、これに限定されない。図１８に示すように、コンピュータが、３次元医用画像を構成する複数の断層画像の中から、同じ対象（例えば、関心領域）が写っている断層画像群を抽出し、抽出した断層画像群の中から代表となる断層画像を選択し、選択した断層画像に対してのみ、コンピュータ付与情報を付与してもよい。この場合、例えば、コンピュータは、連続する断層画像において、検出した関心領域の重心位置の差の絶対値が予め定められた第１閾値以下で、かつ面積の差の絶対値が予め定められた第２閾値以下の関心領域を、同じ関心領域と特定する。この場合の第１閾値及び第２閾値としては、連続する断層画像において同じ関心領域のそれぞれの差の上限値として予め設定された値を適用することができる。また、この場合、例えば、コンピュータは、抽出した断層画像群の中から、面積が最大であるか、又は輪郭の長さが最長の関心領域が検出された断層画像を、代表となる断層画像として抽出する。この場合におけるコンピュータは、表示制御装置１２でもよいし、撮影装置１４が備える制御装置でもよいし、画像保管装置１６でもよいし、診断支援システム１０の外部のコンピュータでもよい。
また、この場合におけるコンピュータが付与情報を付与する断層画像として選択した処理を、同じようにユーザが入力部２４を介して行ってもよい。この場合におけるユーザ付与情報は、複数の断層画像のうち、同じ対象が写っている断層画像群の代表となる断層画像に対してユーザによって付与された情報となる。
また、上記実施形態では、複数の断層画像それぞれに対応する断層位置を指定するための指定オブジェクトとして、スライダバーＳＢ及びスライダＳＤを適用した場合について説明したが、これに限定されない。例えば、図１９に示すように、複数の断層画像それぞれに対応する断層位置を指定するための指定オブジェクトとして、シェーマＳＭ及びスライダＳＤを適用する形態としてもよい。ここでいうシェーマＳＭとは、人体の一部を模式的に示した模式図を意味する。図１９では、複数の断層画像として、マンモグラフィ装置を用いたトモシンセシス撮影によって得られた医用の複数の断層画像を適用した例を示している。図１９の上段は、右側の***に対してＭＬＯ（Medio-Lateral Oblique）撮影を行うことによって得られた断層画像を示し、下段は右側の***に対してＣＣ（Cranio-Caudal）撮影を行うことによって得られた断層画像を示している。また、図１９では、断層画像の深さ方向、すなわち、スライダＳＤの移動方向を破線の両矢印で示している。この形態例でも、例えば、ユーザは、シェーマＳＭ上の表示したい断層画像の断層位置にスライダＳＤをドラッグすることによって断層位置を指定する。また、この場合、指定されている断層位置に対応する断層画像に付与情報が付与されている場合、付与情報を表すマークが強調表示される。また、この形態例において、マークＡＮ及びマークＣＤを、***を正面視したときの２次元的な配置が分かるように、シェーマＳＭ内に表示してもよい。
また、図４及び図５に示したスライダＳＤ及びスライダバーＳＢと、図１９に示したシェーマＳＭ及びスライダＳＤの双方を表示領域Ａ１に表示する形態としてもよい。また、この形態例において、これらの何れか一方に対して行った操作を他方に連動して反映させてもよい。
また、上記実施形態において、例えば、受付部４０及び表示制御部４２といった各種の処理を実行する処理部（processing unit）のハードウェア的な構造としては、次に示す各種のプロセッサ（processor）を用いることができる。上記各種のプロセッサには、前述したように、ソフトウェア（プログラム）を実行して各種の処理部として機能する汎用的なプロセッサであるＣＰＵに加えて、ＦＰＧＡ（Field Programmable Gate Array）等の製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Programmable Logic Device：PLD）、ＡＳＩＣ（Application Specific Integrated Circuit）等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が含まれる。
１つの処理部は、これらの各種のプロセッサのうちの１つで構成されてもよいし、同種又は異種の２つ以上のプロセッサの組み合わせ（例えば、複数のＦＰＧＡの組み合わせや、ＣＰＵとＦＰＧＡとの組み合わせ）で構成されてもよい。また、複数の処理部を１つのプロセッサで構成してもよい。
複数の処理部を１つのプロセッサで構成する例としては、第１に、クライアント及びサーバ等のコンピュータに代表されるように、１つ以上のＣＰＵとソフトウェアの組み合わせで１つのプロセッサを構成し、このプロセッサが複数の処理部として機能する形態がある。第２に、システムオンチップ（System On Chip：SoC）等に代表されるように、複数の処理部を含むシステム全体の機能を１つのＩＣ（Integrated Circuit）チップで実現するプロセッサを使用する形態がある。このように、各種の処理部は、ハードウェア的な構造として、上記各種のプロセッサの１つ以上を用いて構成される。
更に、これらの各種のプロセッサのハードウェア的な構造としては、より具体的には、半導体素子などの回路素子を組み合わせた電気回路（circuitry）を用いることができる。
また、上記実施形態では、表示制御プログラム３０が記憶部２２に予め記憶（インストール）されている態様を説明したが、これに限定されない。表示制御プログラム３０は、ＣＤ－ＲＯＭ（Compact Disc Read Only Memory）、ＤＶＤ－ＲＯＭ（Digital Versatile Disc Read Only Memory）、及びＵＳＢ（Universal Serial Bus）メモリ等の記録媒体に記録された形態で提供されてもよい。また、表示制御プログラム３０は、ネットワークを介して外部装置からダウンロードされる形態としてもよい。
２０２０年３月９日に出願された日本国特許出願２０２０－０４０３５９号の開示は、その全体が参照により本明細書に取り込まれる。また、本明細書に記載された全ての文献、特許出願、及び技術規格は、個々の文献、特許出願、及び技術規格が参照により取り込まれることが具体的かつ個々に記された場合と同程度に、本明細書中に参照により取り込まれる。

Claims (13)

  1. 少なくとも一つのプロセッサを備える表示制御装置であって、
    前記プロセッサは、
    被検体を撮影して得られた医用の複数の断層画像それぞれに対応する断層位置を指定するための指定オブジェクトと、指定されている断層位置に対応する断層画像と、を表示する制御を行い、
    ユーザによって付与されたユーザ付与情報及びコンピュータによって付与されたコンピュータ付与情報の少なくとも一方を含む付与情報が付与されている断層画像については、前記付与情報を表すマークを、付与されている断層画像の断層位置に対応する指定オブジェクトの深さ方向の位置に表示する制御を行い、
    指定されている断層位置に対応する断層画像に前記付与情報が付与されている場合、前記付与情報を表すマークを強調表示する制御を行い、
    前記付与情報は、前記コンピュータ付与情報として前記断層画像における関心領域の輪郭を含み、
    前記プロセッサは、指定されている断層位置に対応する断層画像に前記関心領域の輪郭が付与されている場合、前記断層画像上に前記関心領域の輪郭を表示する制御を行い、
    更に、表示対象の前記関心領域と同じ関心領域が検出された他の断層画像の何れかに付与されている前記関心領域の輪郭を表示する制御を行う
    表示制御装置。
  2. 前記指定オブジェクトは、スライダバーを含む
    請求項１に記載の表示制御装置。
  3. 前記指定オブジェクトは、シェーマを含む
    請求項１に記載の表示制御装置。
  4. 前記プロセッサは、前記スライダバーの一端から指定されている断層位置までと、他端から前記指定されている断層位置までとの色を異ならせて前記スライダバーを表示する制御を行う
    請求項２に記載の表示制御装置。
  5. 前記付与情報は、前記コンピュータ付与情報を含み、
    前記プロセッサは、未表示の断層画像に付与されたコンピュータ付与情報を表すマークと、表示済みの断層画像に付与されたコンピュータ付与情報を表すマークとを識別可能に表示する制御を行う
    請求項１から請求項４の何れか１項に記載の表示制御装置。
  6. 前記付与情報は、前記コンピュータ付与情報を含み、
    前記プロセッサは、前記コンピュータ付与情報が正しいか否かを表す入力を受け付け、
    前記コンピュータ付与情報が正しくないことを表す入力を受け付けた場合、前記コンピュータ付与情報を表すマークの色を、現在の表示色から背景色に近い色に変更する制御を行う
    請求項１から請求項５の何れか１項に記載の表示制御装置。
  7. 前記付与情報は、前記コンピュータ付与情報を含み、
    前記プロセッサは、前記コンピュータ付与情報の表示及び非表示を切り替える入力を受け付け、
    受け付けた入力に応じて、前記コンピュータ付与情報を表すマークの表示及び非表示を切り替える制御を行う
    請求項１から請求項６の何れか１項に記載の表示制御装置。
  8. 前記プロセッサは、前記コンピュータ付与情報が付与されている断層画像については、断層画像上に前記コンピュータ付与情報を表示する制御を行い、
    受け付けた入力に応じて、前記コンピュータ付与情報を表すマークと前記断層画像上の前記コンピュータ付与情報との双方の表示及び非表示を切り替える制御を行う
    請求項７に記載の表示制御装置。
  9. 前記プロセッサは、前記他の断層画像に付与されている前記関心領域の輪郭のうち、最大の輪郭を表示する制御を行う
    請求項１から請求項８の何れか１項に記載の表示制御装置。
  10. 前記コンピュータ付与情報は、
    前記コンピュータが、
    前記複数の断層画像の中から、同じ対象が写っている断層画像群を抽出し、
    抽出した断層画像群の中から代表となる断層画像を選択し、
    選択した断層画像に対して付与する情報を含む
    請求項１から請求項９の何れか１項に記載の表示制御装置。
  11. 前記ユーザ付与情報は、前記複数の断層画像のうち、同じ対象が写っている断層画像群の代表となる断層画像に対してユーザによって付与された情報を含む
    請求項１から請求項１０の何れか１項に記載の表示制御装置。
  12. 被検体を撮影して得られた医用の複数の断層画像それぞれに対応する断層位置を指定するための指定オブジェクトと、指定されている断層位置に対応する断層画像と、を表示する制御を行い、
    ユーザによって付与されたユーザ付与情報及びコンピュータによって付与されたコンピュータ付与情報の少なくとも一方を含む付与情報が付与されている断層画像については、
    前記付与情報を表すマークを、付与されている断層画像の断層位置に対応する指定オブジェクトの深さ方向の位置に表示する制御を行い、
    指定されている断層位置に対応する断層画像に前記付与情報が付与されている場合、前記付与情報を表すマークを強調表示する制御を行う
    処理を表示制御装置が備えるプロセッサが実行する表示制御方法であって、
    前記付与情報は、前記コンピュータ付与情報として前記断層画像における関心領域の輪郭を含み、
    前記プロセッサが、指定されている断層位置に対応する断層画像に前記関心領域の輪郭が付与されている場合、前記断層画像上に前記関心領域の輪郭を表示する制御を行い、
    更に、表示対象の前記関心領域と同じ関心領域が検出された他の断層画像の何れかに付与されている前記関心領域の輪郭を表示する制御を行う
    表示制御方法。
  13. 被検体を撮影して得られた医用の複数の断層画像それぞれに対応する断層位置を指定するための指定オブジェクトと、指定されている断層位置に対応する断層画像と、を表示する制御を行い、
    ユーザによって付与されたユーザ付与情報及びコンピュータによって付与されたコンピュータ付与情報の少なくとも一方を含む付与情報が付与されている断層画像については、前記付与情報を表すマークを、付与されている断層画像の断層位置に対応する指定オブジェクトの深さ方向の位置に表示する制御を行い、
    指定されている断層位置に対応する断層画像に前記付与情報が付与されている場合、前記付与情報を表すマークを強調表示する制御を行う
    処理を表示制御装置が備えるプロセッサに実行させるための表示制御プログラムであって、
    前記付与情報は、前記コンピュータ付与情報として前記断層画像における関心領域の輪郭を含み、
    指定されている断層位置に対応する断層画像に前記関心領域の輪郭が付与されている場合、前記断層画像上に前記関心領域の輪郭を表示する制御を行い、
    更に、表示対象の前記関心領域と同じ関心領域が検出された他の断層画像の何れかに付与されている前記関心領域の輪郭を表示する制御を行う処理を前記プロセッサに実行させるための表示制御プログラム。
JP2022505744A 2020-03-09 2020-09-28 表示制御装置、表示制御方法、及び表示制御プログラム Active JP7510495B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2020040359 2020-03-09
JP2020040359 2020-03-09
PCT/JP2020/036595 WO2021181731A1 (ja) 2020-03-09 2020-09-28 表示制御装置、表示制御方法、及び表示制御プログラム

Publications (3)

Publication Number Publication Date
JPWO2021181731A1 JPWO2021181731A1 (ja) 2021-09-16
JPWO2021181731A5 JPWO2021181731A5 (ja) 2022-10-17
JP7510495B2 true JP7510495B2 (ja) 2024-07-03

Family

ID=77671511

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022505744A Active JP7510495B2 (ja) 2020-03-09 2020-09-28 表示制御装置、表示制御方法、及び表示制御プログラム

Country Status (3)

Country Link
US (1) US11983801B2 (ja)
JP (1) JP7510495B2 (ja)
WO (1) WO2021181731A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2023048268A1 (ja) * 2021-09-27 2023-03-30

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008006187A (ja) 2006-06-30 2008-01-17 Fujifilm Corp 医用画像表示処理装置、及び、医用画像表示処理プログラム
US20100141654A1 (en) 2008-12-08 2010-06-10 Neemuchwala Huzefa F Device and Method for Displaying Feature Marks Related to Features in Three Dimensional Images on Review Stations
WO2014203940A1 (ja) 2013-06-18 2014-12-24 キヤノン株式会社 トモシンセシス撮影の制御装置、撮影装置、撮影システム、制御方法および当該制御方法をコンピュータに実行させるためのプログラム
JP2015198928A (ja) 2014-03-31 2015-11-12 株式会社東芝 医用画像処理装置、および医用画像処理システム

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004173910A (ja) 2002-11-27 2004-06-24 Fuji Photo Film Co Ltd 画像表示装置
WO2008001928A1 (fr) 2006-06-30 2008-01-03 Fujifilm Corporation Appareil d'affichage d'image médicale et programme d'affichage d'image médicale
JP6419441B2 (ja) 2014-03-11 2018-11-07 キヤノンメディカルシステムズ株式会社 医用画像処理装置、医用画像処理システム、および医用画像処理プログラム
US11344371B2 (en) * 2018-10-19 2022-05-31 Canon U.S.A., Inc. Visualization of three-dimensional image data on a two-dimensional image

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008006187A (ja) 2006-06-30 2008-01-17 Fujifilm Corp 医用画像表示処理装置、及び、医用画像表示処理プログラム
US20100141654A1 (en) 2008-12-08 2010-06-10 Neemuchwala Huzefa F Device and Method for Displaying Feature Marks Related to Features in Three Dimensional Images on Review Stations
WO2014203940A1 (ja) 2013-06-18 2014-12-24 キヤノン株式会社 トモシンセシス撮影の制御装置、撮影装置、撮影システム、制御方法および当該制御方法をコンピュータに実行させるためのプログラム
JP2015198928A (ja) 2014-03-31 2015-11-12 株式会社東芝 医用画像処理装置、および医用画像処理システム

Also Published As

Publication number Publication date
US20220392124A1 (en) 2022-12-08
WO2021181731A1 (ja) 2021-09-16
US11983801B2 (en) 2024-05-14
JPWO2021181731A1 (ja) 2021-09-16

Similar Documents

Publication Publication Date Title
US10222954B2 (en) Image display apparatus, display control apparatus and display control method using thumbnail images
US8160320B2 (en) Medical image display apparatus, method and program, and recording medium for the program
US8244010B2 (en) Image processing device and a control method and control program thereof
US10181187B2 (en) Information processing apparatus, method thereof, information processing system, and computer-readable storage medium that display a medical image with comment information
US20190279408A1 (en) Medical image processing apparatus, medical image processing method, and medical image processing program
US11348242B2 (en) Prediction apparatus, prediction method, prediction program
JP7510495B2 (ja) 表示制御装置、表示制御方法、及び表示制御プログラム
JP3989896B2 (ja) 医用画像処理装置、関心領域抽出方法、ならびに、プログラム
JP2024029172A (ja) 表示制御装置
US10324582B2 (en) Medical image display apparatus, method for controlling the same
JP7209047B2 (ja) 変換装置、変換方法、及びプログラム
JP7430249B2 (ja) 画像処理装置、画像表示システム、画像処理方法及びプログラム
US12014812B2 (en) Medical image display control device, method, and program for displaying medical images with selectable tabs
JP2024038203A (ja) 画像処理装置、画像表示システム、画像処理装置の作動方法及びプログラム
JP7431317B2 (ja) 文書作成支援装置、方法およびプログラム
JP7497422B2 (ja) 画像処理装置、画像表示システム、画像処理装置の作動方法及びプログラム
US20230281810A1 (en) Image display apparatus, method, and program
US20230225681A1 (en) Image display apparatus, method, and program
US20230095776A1 (en) Image processing apparatus, method for controlling image processing apparatus, and non-transitory computer-readable storage medium
US20230223124A1 (en) Information processing apparatus, information processing method, and information processing program
US20240112786A1 (en) Image processing apparatus, image processing method, and image processing program
US20210210196A1 (en) Medical image display device, method, and program
US20240029252A1 (en) Medical image apparatus, medical image method, and medical image program
WO2023048267A1 (ja) 情報処理装置、情報処理方法及び情報処理プログラム
US20240231593A1 (en) Information processing apparatus, information processing method, and information processing program

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220818

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220818

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230829

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231010

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240109

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240306

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240528

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240621

R150 Certificate of patent or registration of utility model

Ref document number: 7510495

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150