JP6060144B2 - 画像データに基づくレポートの生成 - Google Patents

画像データに基づくレポートの生成 Download PDF

Info

Publication number
JP6060144B2
JP6060144B2 JP2014500507A JP2014500507A JP6060144B2 JP 6060144 B2 JP6060144 B2 JP 6060144B2 JP 2014500507 A JP2014500507 A JP 2014500507A JP 2014500507 A JP2014500507 A JP 2014500507A JP 6060144 B2 JP6060144 B2 JP 6060144B2
Authority
JP
Japan
Prior art keywords
report
template
data
data field
view
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2014500507A
Other languages
English (en)
Other versions
JP2014509030A (ja
Inventor
ブールマン,ヨハネス
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV filed Critical Koninklijke Philips NV
Publication of JP2014509030A publication Critical patent/JP2014509030A/ja
Application granted granted Critical
Publication of JP6060144B2 publication Critical patent/JP6060144B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/20ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/166Editing, e.g. inserting or deleting
    • G06F40/174Form filling; Merging
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H15/00ICT specially adapted for medical reports, e.g. generation or transmission thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/166Editing, e.g. inserting or deleting
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H10/00ICT specially adapted for the handling or processing of patient-related medical or healthcare data
    • G16H10/60ICT specially adapted for the handling or processing of patient-related medical or healthcare data for patient-specific data, e.g. for electronic patient records

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Public Health (AREA)
  • Theoretical Computer Science (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Artificial Intelligence (AREA)
  • Medical Treatment And Welfare Office Work (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Document Processing Apparatus (AREA)

Description

本発明は画像データに基づくレポートの生成に関する。
現在の放射線医学では、画像は、要求に応じて、医療撮像装置の操作者によって生成される。この要求に応じて、画像が作成され、その後、レポートが生成される。要求は典型的にはモダリティおよび体内の領域を記述し、病状の記述や、確認または排除されるべき、可能性のある診断を含めて拡張することもできる。たいていの場合、画像は技師によって生成され、レポートはその後、放射線医によって閲覧室で作成される。場合によっては(たとえば超音波調査の場合)、放射線医は撮像を自分で実行することもある。
その後、レポートが生成される。これを行う一般的な方法は、口述によるものである。音声認識または文字起こしが書面のレポートを生成するために使われる。このレポートの内容は、ある程度、定式化されていてもよい。しかしながら、結果として得られるテキストは構造化されていない。
近年、構造化されたレポートに向けた潮流が現れてきている。ここでは、レポートは、他のアプリケーションがそこに含まれる情報を利用できるよう構造化される。RSNAによる最近のイニシアチブは、いくつかの異なるアプリケーションのための、レポートの構造についての一組のテンプレートを公開するというものである。
レポートの先進分野は乳癌診断である。ACRの胸部撮像レポートおよびデータ・システム(BI-RADS: Breast Imaging Reporting and Data System)は、マンモグラフィー(X線)、超音波およびMRIという三つのモダリティについて、レポートの表現および構造を記述する。BI-RADSの一部は、マンモグラフィーCAD SOPクラス(Mammography CAD SOP Class)定義のためのDICOM構造化レポート(DICOM Structured Reporting)に組み込まれている。DynaCAD(Invivo社)、CADStream(Merge社)およびB-CAD(Medipattern社)のような解析パッケージは、BI-RADS書式を埋めるために専用のユーザー・インターフェースを使い、報告された知見をキー画像にリンクする。フィリップス社のIntelliSpace Breastはこれをすべてのモダリティについてでき、内容をDICOM構造化レポートにおいてエンコードする。
超音波では、DICOM構造化レポートは、たとえば心臓病学において、生成されたレポートをカート(cart)上に記憶するために使われる。しかしながら、これらのユーザー・インターフェースはみな応用分野に固有である。
画像データに基づいてレポートを生成する改善されたシステムを有することが有利であろう。
この問題によりよく対処するため、本発明の第一の側面は、
複数のテンプレートからテンプレートを選択するテンプレート選択器であって、前記テンプレートは前記レポートの構造および前記レポートのために埋められるべきデータ・フィールドを定義し、前記テンプレートはさらにデータ・フィールドとビュー記述子との間の関連付けを定義し、ビュー記述子は、画像型および該画像型の呈示モードを定義する、テンプレート選択器と;
前記テンプレートの前記データ・フィールドの表現をユーザーに対して呈示するデータ・フィールド呈示器と;
前記データ・フィールドの少なくとも一つを選択するデータ・フィールド選択器と;
選択された前記少なくとも一つのデータ・フィールドに関連付けられたビュー記述子によって定義される画像型をもつ少なくとも一つの画像データセットを自動的に選択する画像データセット選択器と;
選択された前記少なくとも一つのデータ・フィールドに関連付けられたビュー記述子によって定義される呈示モードに基づいて前記少なくとも一つの選択された画像データセットのビューを自動的に生成するビュー生成器と;
生成されたビューの表示中に、選択された少なくとも一つのデータ・フィールドの内容について、ユーザーが入力を提供できるようにするユーザー入力ユニットと;
前記テンプレートおよびユーザーによって提供された前記データに基づいて前記レポートを生成するレポート生成器とを有する、
システムを提供する。
自動的に少なくとも一つの画像データセットを選択し、選択された少なくとも一つのデータ・フィールドに対応する呈示モードに基づいてビューを生成するためにテンプレートを使うことは、適切な画像を吟味し、所望されるレポートを生成するのを特に効率的にする。
テンプレートはさらに、データ・フィールドと測定記述子との間の関連付けを定義してもよく、ここで、測定記述子は、そのデータ・フィールドに関連付けられた画像型に対して実行されるべき測定を定義し;
当該システムはさらに、選択された少なくとも一つの画像データセットおよび測定記述子に基づいて測定を実行して測定データを得る測定ツールを有し;
前記レポート生成器は、前記少なくとも一つのデータ・フィールドを埋めるために前記測定データを使うよう構成される。
レポートに含められるべき関連情報の収集は、該レポートのために必要とされる情報を提供することのできる適切な測定ツールを自動的に立ち上げることによってさらに向上させられてもよい。測定ツールは、完全に自動的にまたは対話モードで機能してもよい。対話モードでは、測定ツールはユーザー入力ユニットに動作上接続されていてもよく、測定ツールはユーザー入力にも基づいて測定を実行するよう構成されていてもよい。
本システムは、前記少なくとも一つの画像データセットの被験者に関連付けられたデータ・レコードに前記レポートを記憶するレポート記憶ユニットを有していてもよい。このようにして、たとえば画像管理伝送システム(PACS: picture archiving and communication system)と病院情報システム(HIS: hospital information system)または放射線医学情報システム(RIS: radiology information system)との間の効率的なリンクが確立されうる。画像はPACSから取得されてもよく、一方、生成されたレポートはHISまたはRISに記憶されてもよい。
その目的に向け、本システムは、画像データベースを有する画像管理伝送システム(PACS)と通信する第一の通信モジュールと、放射線医学もしくは病院情報システム(RIS/RIS)を含む情報システムと通信する第二の通信モジュールとを有していてもよい。
レポート生成器は、前記少なくとも一つのデータ・フィールドのデータの表現を含む自然言語を生成するための自然言語生成器を有していてもよい。このようにして、結果として得られるレポートはより読みやすくなる。
レポート生成器は、ビュー生成器によって生成されるビューおよび/または選択された少なくとも一つのデータ・フィールドに関連付けられたビュー記述子によって定義される呈示モードに基づいて、前記少なくとも一つの選択された画像データセットの呈示を含めるよう構成されていてもよい。これは、レポートが自動的にイラストレーションされることを許容する。
ユーザー入力ユニットは、音声認識を使ってデータ・フィールドの少なくとも一つについての情報をユーザーが与えられるようにする音声認識モジュールを有していてもよい。これは、ユーザーが、前記レポートのための入力をより効率的に与えることを許容する。
もう一つの側面では、本発明は、前記システムを有するワークステーションを提供する。
もう一つの側面では、本発明は、レポートを生成する方法であって、
複数のテンプレートからテンプレートを選択する段階であって、前記テンプレートは前記レポートの構造および前記レポートのために埋められるべきデータ・フィールドを定義し、前記テンプレートはさらにデータ・フィールドとビュー記述子との間の関連付けを定義し、ビュー記述子は、画像型および該画像型の呈示モードを定義する、段階と;
前記テンプレートの前記データ・フィールドの表現をユーザーに対して呈示する段階と;
前記データ・フィールドの少なくとも一つを選択する段階と;
選択された前記少なくとも一つのデータ・フィールドに関連付けられたビュー記述子によって定義される画像型をもつ少なくとも一つの画像データセットを自動的に選択する段階と;
選択された前記少なくとも一つのデータ・フィールドに関連付けられたビュー記述子によって定義される呈示モードに基づいて前記少なくとも一つの選択された画像データセットのビューを自動的に生成する段階と;
生成されたビューの表示中に、選択された前記少なくとも一つのデータ・フィールドの内容について、ユーザーが入力を提供できるようにする段階と;
前記テンプレートおよびユーザーによって提供された前記データに基づいて前記レポートを生成する段階とを含む、
方法を提供する。
もう一つの側面では、本発明は、上記方法をプロセッサ・システムに実行させるための命令を含むコンピュータ・プログラム・プロダクトを提供する。
当業者は、本発明の上述した実施形態、実装および/または側面の二つ以上が、有用と見なされる任意の仕方で組み合わされてもよいことを認識するであろう。
前記システムの記述された修正および変形に対応する、前記画像取得装置、前記ワークステーション、前記システム、前記方法および/または前記コンピュータ・プログラム・プロダクトの修正および変形が、本稿に基づいて当業者によって実行されることができる。
本発明のこれらおよびその他の側面は、以下に記述される実施形態から明白となり、明快にされるであろう。
画像データに基づいてレポートを生成するシステムの図である。 画像データに基づいてレポートを生成する方法のフローチャートである。 スクリーンショットを示す図である。 レポートを示す図である。
図1は、画像データに基づいてレポートを生成するシステムのいくつかの側面を示すブロック図である。本システムをより明確に記述できるよう、本システムの最も有意な部分のみが図面において表現されており、それらの部分の間の相互関係の一部のみが描かれている。記述されるシステムの変形が可能であることを注意しておく。例示的な実装だけが図面に示されている。図示した要素のいくつかは任意的である。本システムは、たとえばソフトウェアを使ったコンピュータ・システム上で実装されてもよい。コンピュータ・システムは分散システムまたはワークステーションを含んでいてもよい。
本システムは、複数のテンプレートからテンプレートを選択するよう構成されたテンプレート選択器1を有していてもよい。テンプレートは、前記レポートおよび該レポートのために埋められるべきデータ・フィールドのための構造を定義してもよい。テンプレートはさらに、データ・フィールドとビュー記述子との間の関連付けを定義してもよい。ここで、ビュー記述子は、画像型および該画像型の呈示モードを定義する。テンプレート選択器1は、たとえば画像管理伝送システム(PACS)17に結合されていてもよい。ユーザーは、PACS 11から画像研究(image study)を選択し、それをテンプレート選択器1に入力として提供することができるようにされていてもよい。もう一つの例では、ユーザーはRISワークリストからテンプレートを選択し、前記ワークリストに基づいてPACSから画像データを取得することができるようにされていてもよい。テンプレート選択器は画像データを解析し、前記研究の型に基づいて、必要とされるレポートの種類、よってテンプレートを決定するよう構成されていてもよい。テンプレート選択器1は、別の情報システム16、たとえば放射線医学情報システム(RIS)または病院情報システム(HIS)にも結合されていてもよい。RIS/HIS 16は、特定の研究型を求める、照会する医師から受領される文書を含んでいてもよい。テンプレート選択器1は、そのような情報に基づいてテンプレートを選択するよう構成されていてもよい。テンプレート選択器1は、ユーザーがテンプレートを選択することができるようにするよう構成されていてもよい。また、たとえばタスク・リストから特定の患者または特定の事例の選択を許容するよう、ユーザー・インターフェースが設けられていてもよい。
本システムはさらに、データ・フィールド呈示器2を有していてもよい。データ・フィールド呈示器2は、前記テンプレートの前記データ・フィールドの表現をユーザーに対して呈示するよう構成されていてもよい。たとえば、データ・フィールドは、ユーザーが、テンプレートによって指定されたデータ・フィールドに対応する、ウィジェット、ドロップダウン・ボックスおよびテキスト入力フィールドといったユーザー・インターフェース要素を選択できる電子的なフォームとして呈示されてもよい。
本システムはさらに、前記データ・フィールドの少なくとも一つを選択するよう構成されたデータ・フィールド選択器3を有していてもよい。この選択は、たとえば、選択されるべきフィールドのマウス・クリックに基づいて行われてもよい。選択器3は、フィールドを、逐次的な順序で、自動的に選択するよう構成されていてもよい。順序は、テンプレートにおいて指定されていてもよく、ユーザーによって変更されてもよい。
本システムはさらに、選択された前記少なくとも一つのデータ・フィールドに関連付けられたビュー記述子によって定義される画像型をもつ少なくとも一つの画像データセットを自動的に選択するよう構成されていてもよい画像データセット選択器4を有していてもよい。たとえば、画像データセット選択器4は、検索型によってまたは検索型に基づいて指定される一組の検索基準を満たす画像データセットを検索するよう構成されていてもよい。ここで、画像データセット選択器4は、レポートが該当する特定の患者についての画像を検索するよう構成されていてもよい。また、画像データセット選択器4は、たとえば履歴画像または参照画像を選択するよう構成されていてもよい。そのような履歴または参照画像は、比較を容易にするために、現在の患者のデータと一緒に示されてもよい。
本システムは、前記少なくとも一つの選択された画像データセットのビューを自動的に生成するビュー生成器5を有していてもよい。このビューは、選択された前記少なくとも一つのデータ・フィールドに関連付けられたビュー記述子によって定義される呈示モードに基づいて生成される。たとえば、選択された画像データセットは、テンプレートに含まれるビュー記述子によって指定される、スライス・ビューまたは最大輝度投影(MIP)ビューのような特定のビューをレンダリングするために処理されてもよい。
本システムは、生成されたビューを表示するディスプレイ14を有していてもよい。さらに、ディスプレイ14は、データ・フィールド呈示器2によって与えられるデータ・フィールドの表現を表示するよう構成されていてもよい。
本システムは、生成されたビューを表示している間に、選択された前記少なくとも一つのデータ・フィールドの内容について、ユーザーが入力を提供できるようにするユーザー入力ユニット6を有していてもよい。ユーザー入力ユニット6は、キーボード、マウスまたはマイクロホンといったユーザー入力装置15から入力を受け取るよう構成されていてもよい。
本システムは、前記レポートを生成するレポート生成器7を有していてもよい。レポート生成器7は、前記テンプレートおよびユーザーによって提供された前記データを処理するよう構成される。この情報は、レポートをレンダリングするためにたとえばスタイル・シートと組み合わされてもよい。レポートは、構造化された形、たとえば表形式でまたはXML文書の形で作成されてもよい。レポートはまた、テキストの形で、たとえば自然言語を使ってレンダリングされてもよい。レポートはプリンタ(図示せず)で印刷されても、あるいは情報システム16に記憶されてもよい。構造化された形式およびテキスト形式の一方または両方が、レポート記憶ユニット9を介して記憶されてもよい。
テンプレートはさらに、データ・フィールドと測定記述子との間の関連付けを定義してもよい。そのような測定記述子は、そのデータ・フィールドに関連付けられた画像型に対して実行されるべき測定を定義する。画像データセット選択器4がその画像型をもつ画像データセットを選択したとき、そのような測定を自動的に実行する、あるいはその選択された画像データセットを使って測定を容易にするようソフトウェア・ツールを初期化することが可能になる。その目的に向け、本システムはさらに、選択された前記少なくとも一つの画像データセットおよび測定記述子に基づいて測定を実行して測定データを得る測定ツール8を有していてもよい。レポート生成器7は、前記少なくとも一つのデータ・フィールドを埋めるために前記測定データを使うよう構成されていてもよい。
測定ツール8は、ユーザー入力ユニット6に動作上接続されていてもよい。このようにして、測定ツール8はユーザーが、たとえば画像中の点を設定するまたは他の仕方で測定に影響するための入力を与えることを許容してもよい。たとえば、テンプレートは、ある特定の種類のX線画像において特定の骨についてなされるべき長さ測定を定義していてもよい。すると、画像選択器は、画像データベースからの患者のその種類のX線画像を選択し、ビュー生成器が測定されるべき骨を示すビューを生成し、測定ツールが立ち上げられる。たとえば、測定ツールは、ユーザーに、骨の両端をクリックするよう指示するメッセージを画面14上に示す。次いで測定ツールは二つの選択された点の間に線を引き、ディスプレイ14上でその線を示し、二つの選択された点の間の長さを計算し、二つの点の間の長さを、電子フォームによって表されている規定されたデータ・フィールド中に記入する。
本システムは前記少なくとも一つの画像データセットの被験者に関連付けられたデータ・レコードに前記レポートを記憶するレポート記憶ユニット9を有していてもよい。この目的に向け、レポート記憶ユニットは、RISまたはHISのような情報システム16と接続するためにデータ通信モジュール12を使ってもよい。情報システムは、PACSであってもよい。レポートがPACSに記憶されるよう構成されてもよいからである。
レポート生成器7は、前記少なくとも一つのデータ・フィールドのデータの表現を含む自然言語を生成するための自然言語生成器10を有していてもよい。自然言語生成器はそれ自身としては当技術分野において既知である。例として、テンプレートは、データ・フィールド中のエントリーによって埋められるべき空白をもつ自然言語テキストの断片を定義するスタイル・シートを有していてもよい。
レポート生成器7は、ビュー生成器5によって生成されるビューおよび/または選択された前記少なくとも一つのデータ・フィールドに関連付けられたビュー記述子によって定義される呈示モードに基づいて、前記少なくとも一つの選択された画像データセットの呈示を含めるよう構成されていてもよい。たとえば、測定ツール8の出力画像はレポートに含められてもよい。
本システムは、画像データベースを有する画像管理伝送システム(PACS)17と通信する第一の通信モジュール11と、放射線医学情報システム(RIS)もしくは病院情報システム(HIS)を含む情報システム16と通信する第二の通信モジュール12とを有していてもよい。テンプレートは、テンプレート選択器によって、たとえば情報システム16から取得されてもよい。画像は、PACS 17から取得されてもよい。レポートは、情報システム16および/またはPACS 17に記憶されてもよい。
ユーザー入力ユニット6は、音声認識を使ってデータ・フィールドの少なくとも一つについての情報をユーザーが与えられるようにする音声認識モジュール13を有していてもよい。音声認識はそれ自身としては当技術分野において既知である。
上記機能の一部または全部がワークステーションを通じて提供されてもよい。ワークステーションは、本稿に記載されるシステムの諸部分を表すソフトウェアをプログラムされてもよい。上記機能は、対話的ウェブ・アプリケーションのような遠隔データ接続を介して、あるいはクライアント・サーバー・アーキテクチャを使って提供されてもよい。
図2は、レポートを生成する方法のフローチャートを示している。本方法は、複数のテンプレートからテンプレートを選択する段階201であって、前記テンプレートは前記レポートの構造および前記レポートのために埋められるべきデータ・フィールドを定義し、前記テンプレートはさらにデータ・フィールドとビュー記述子との間の関連付けを定義し、ビュー記述子は、画像型および該画像型の呈示モードを定義する、段階と;前記テンプレートの前記データ・フィールドの表現をユーザーに対して呈示する段階202と;前記データ・フィールドの少なくとも一つを選択する段階203と;選択された前記少なくとも一つのデータ・フィールドに関連付けられたビュー記述子によって定義される画像型をもつ少なくとも一つの画像データセットを自動的に選択する段階204と;選択された前記少なくとも一つのデータ・フィールドに関連付けられたビュー記述子によって定義される呈示モードに基づいて前記少なくとも一つの選択された画像データセットのビューを自動的に生成する段階205と;生成されたビューの表示中に、選択された前記少なくとも一つのデータ・フィールドの内容について、ユーザーが入力を提供できるようにする段階206と;前記テンプレートおよびユーザーによって提供された前記データに基づいて前記レポートを生成する段階207とを含む。この方法は、コンピュータ・プログラム・プロダクトとして実装されてもよい。本方法は、本稿に開示される機能に基づいて拡張または修正されてもよい。
RSNAは構造化されたレポートのためのいくつかのテンプレートを公開している。それらは全部で約100のレポートの二つの表現からなる。一つのバージョンは、機械読み取り可能なXML形式である。他方のバージョンはそのようなレポートのテキスト例である。機械読み取り可能なバージョンは、本稿に記載されるテンプレートの一部として使われてもよい。RSNAテンプレートは単に例であることを注意しておく。本稿に開示されるシステムは異なるテンプレートとともに運用されることができる。たとえば、ユーザーは、自分独自のテンプレートを追加できるようにされてもよい。さらに、RSNAによって規定されるものだけよりも多くの、異なる情報をレポートに含めるテンプレートが使用されてもよい。たとえば、どんな種類の測定がある種の値につながるかを示すことをユーザーに許容するデータ・フィールドを含むテンプレートが使用されてもよい。
本稿に開示されるレポート・システムは、データ(たとえば画像属性)および/または要求から、どのレポート・テンプレートが適切であるかを導き出すテンプレート選択器を有していてもよい。次いで、レポート・ワークスペースが生成されてもよい。レポート・ワークスペースは、前記テンプレートの機械読み取り可能なバージョンを受け、それに基づいて:
・構造化されたレポートを表現するデータ構造を導出する。
・データ構造を埋めるための専用のユーザー・インターフェースを生成する。
・たとえば、ユーザー・インターフェース画面が諸「タスク」および諸「フォーム」に細分されてもよい。タスクは、タスク・フロー・ガイダンスのメインの諸画面、典型的には「手順」「診療情報」「比較」「知見」および「印象」を含む。「フォーム」は、レポートの諸部分が埋められるサブセクションを含む。「知見」タブは典型的には、たとえば拡張器(expander)またはハーモニカ・コントロール(harmonica control)を使って生成されることができる多くの細分をもつ。
・レポートを人間に読み取り可能な形でレンダリングするためのスタイル・シートを生成する。同様に、同じレポートの構造化されたバージョン(またはプレーンテキスト・バージョン)がレポート・システム(たとえばRIS)に送られることができ、画像バージョンがPACSに送られることができる。
記述されたシステムは、一貫した、完全な、正確なレポートを保証する助けとなりうる:テンプレートは完備性を強制するために使用されてもよく、測定は自動的にレポートに入力されてもよい。照会する医師にはよりよい情報が与えられる:キーとなる画像をもつ、完全な、構造化されたレポートである。管理報告が可能にされる:レポートは構造化された形をもつので、統計処理を実行することが可能であり、異なるレポートの値が比較され、解析されてもよい。品質保証が改善できる。またこの目的のために、本システムは、たとえば知見、結果……について、詳細な統計処理を行うことができる。また、生成されたレポートについて統計が簡単に計算できるため、臨床研究が簡単になる。たとえば、構造化されたレポート・フォーマットを使うとき、特定の診断Xをもつ何人の患者が知見Yを有していたかを自動的に決定できる。
図3は、MR前立腺に関係するプロトコルについてそのような応用のスクリーンショットを示している。左側のパネル301は、データを入力すべきデータ・フィールドのいくつかを示している。右側のパネル302は画像データの二つのビューを示しており、画像データセット選択器4によって諸画像データセットが自動的に選択されている。これら二つのスライスはビュー生成器5によって自動的に生成されており、自動的に表示される。左側のパネル301に示されるデータ・フィールドのいくつかは、画像のメタデータからすでに入手可能な情報(たとえば、MRの場の強度)に基づいて、または電子カルテにおいて入手可能な情報(たとえば、生年月日)から、自動的に埋められてもよい。システムは自動的に、「知見」セクションに測定の結果を含めることができる。値はレポートに自動的に入力されるので、ミスがなくなる。また、テンプレートおよび/またはビューに基づいて、キーとなる画像がレポートに追加されてもよい。このキーとなる画像は、測定値を示すまたは重要な領域をハイライトする注釈を含んでいてもよい。
図4は、本稿に開示されるシステムによってレンダリングされるレポートを示している。このレポートは、照会する医師のような人間にとって簡単に読み取れるテキスト部分401を含む。いくつかのキーとなる画像402が、ビュー生成器によって生成されたビューに基づいて含められている。キーとなる画像は、実行された測定の注釈をも含む。
本稿に開示されるシステムおよび方法は、一貫した、完全な、正確なレポートを保証し、照会する医師によりよい情報を提供し、管理報告を可能にし、品質保証を可能にし、臨床研究を可能にする助けとなりうる。従来技術のシステムでは、専用の解決策を構築するには長い時間がかかることがある。また、ユーザー独自の要求に合うユーザー・インターフェースを採用することは難しい。たとえば、別の測定を追加することは、困難または不可能である。
本発明が本発明を実施するよう適応されたコンピュータ・プログラム、特に担体上もしくは担体中のコンピュータ・プログラムにも適用されることは理解されるであろう。プログラムは、ソース・コード、オブジェクト・コード、部分的にコンパイルされた形のようなソース・コードとオブジェクト・コードの中間のコードの形であっても、あるいは本発明に基づく方法の実装において使うのに好適な他の任意の形であってもよい。そのようなプログラムが多くの異なるアーキテクチャ設計を有しうることも理解されるであろう。たとえば、本発明に基づく方法またはシステムの機能を実装するプログラム・コードは、一つまたは複数のサブルーチンに細分されていてもよい。機能をそれらのサブルーチンの間に分配する多くの異なる仕方は当業者には明白であろう。それらのサブルーチンは、自己完結したプログラムをなすよう、一つの実行可能なファイル中に一緒に格納されてもよい。そのような実行可能なファイルは、コンピュータ実行可能命令、たとえばプロセッサ命令および/またはインタープリタ命令(たとえばジャバ・インタープリタ命令)を含んでいてもよい。あるいはまた、サブルーチンの一つまたは複数または全部が少なくとも一つの外部ライブラリ・ファイル中に記憶されていて、たとえばランタイムに静的にまたは動的にメイン・プログラムとリンクされてもよい。メイン・プログラムは、サブルーチンの一つまたは複数への少なくとも一つの呼び出しを含む。サブルーチンも、互いへの呼び出しを含んでいてもよい。コンピュータ・プログラム・プロダクトに関係するある実施形態は、本稿に記載される方法のうち少なくとも一つの方法の各処理段階に対応するコンピュータ実行可能命令を含む。これらの命令は、サブルーチンに細分され、および/または静的または動的にリンクされうる一つまたは複数のファイルに格納されてもよい。コンピュータ・プログラム・プロダクトに関するもう一つの実施形態は、本稿に記載されるシステムおよび/またはプロダクトの少なくとも一つの各手段に対応するコンピュータ実行可能命令を含む。これらの命令は、サブルーチンに細分され、および/または静的または動的にリンクされうる一つまたは複数のファイルに格納されてもよい。
コンピュータ・プログラムの担体は、該プログラムを担持することのできる任意のエンティティまたはデバイスであってもよい。たとえば、担体は、ROM、たとえばCD-ROMまたは半導体ROMのようなROMまたは磁気記録媒体、たとえばフラッシュドライブまたはハードディスクのような記憶媒体を含んでいてもよい。さらに、担体は、電気または光ケーブルを介してまたは電波または他の手段によって伝達されうる、電気信号または光信号のような伝送可能担体であってもよい。プログラムがそのような信号に埋め込まれる場合には、そのようなケーブルまたは他のデバイスまたは手段が該担体をなしうる。代替的に、担体はプログラムが埋め込まれ、関連する方法を実行するようまたは関連する方法の実行において使われるよう適応された集積回路であってもよい。
上記の実施形態は本発明を限定ではなく例解するものであり、当業者は、付属の請求項の範囲から外れることなく多くの代替的な実施形態を考案できるであろうことを注意しておくべきである。請求項において、括弧に入れた参照符号があったとしても、その請求項を限定するものと解釈してはならない。動詞「有する/含む」およびその活用形の使用は請求項において述べられている以外の要素や段階の存在を排除するものではない。要素の単数形の表現はそのような要素の複数の存在を排除するものではない。本発明は、いくつかの相異なる要素を有するハードウェアによって、および好適にプログラムされたコンピュータによって実装されてもよい。いくつかの手段を列挙する装置請求項において、これらの手段のいくつかは同一のハードウェア項目によって具現されてもよい。ある種の施策が互いに異なる従属請求項に記載されているというだけの事実がそれらの施策の組み合わせが有利に使用できないことを示すものではない。

Claims (11)

  1. 画像データに基づいてレポートを生成するシステムであって:
    複数のテンプレートからテンプレートを選択するテンプレート選択器であって、前記テンプレートは前記レポートの構造および前記レポートのために埋められるべきデータ・フィールドを定義し、前記テンプレートはさらにビュー記述子および前記データ・フィールドと前記ビュー記述子との間の関連付けを定義し、ビュー記述子は、画像型および該画像型の呈示モードを定義する、テンプレート選択器と;
    前記テンプレートの前記データ・フィールドの表現をユーザーに対して呈示するデータ・フィールド呈示器と;
    前記データ・フィールドの少なくとも一つを選択するデータ・フィールド選択器と;
    選択された前記少なくとも一つのデータ・フィールドに関連付けられたビュー記述子によって定義される画像型をもつ少なくとも一つの画像データセットを自動的に選択する画像データセット選択器と;
    選択された前記少なくとも一つのデータ・フィールドに関連付けられたビュー記述子によって定義される呈示モードに基づいて前記少なくとも一つの選択された画像データセットのビューを自動的に生成するビュー生成器と;
    生成されたビューの表示中に、選択された前記少なくとも一つのデータ・フィールドの内容について、ユーザーが入力を提供できるようにするユーザー入力ユニットと;
    前記テンプレートおよびユーザーによって提供された前記データに基づいて前記レポートを生成するレポート生成器とを有する、
    システム。
  2. 前記テンプレートがさらに、データ・フィールドと測定記述子との間の関連付けを定義しており、測定記述子は、そのデータ・フィールドに関連付けられた画像型に対して実行されるべき測定を定義し;
    当該システムはさらに、選択された前記少なくとも一つの画像データセットおよび前記測定記述子に基づいて測定を実行して測定データを得る測定ツールを有し;
    前記レポート生成器は、前記少なくとも一つのデータ・フィールドを埋めるために前記測定データを使うよう構成される、
    請求項1記載のシステム。
  3. 前記測定ツールが前記ユーザー入力ユニットに動作上接続され、前記測定ツールがユーザー入力にも基づいて前記測定を実行する、請求項2記載のシステム。
  4. 前記少なくとも一つの画像データセットの被験者に関連付けられたデータ・レコードに前記レポートを記憶するレポート記憶ユニットを有さらに有する、請求項1記載のシステム。
  5. 前記レポート生成器が、前記少なくとも一つのデータ・フィールドのデータの表現を含む自然言語を生成するための自然言語生成器を有する、請求項1記載のシステム。
  6. 前記レポート生成器が、前記ビュー生成器によって生成されるビューおよび/または選択された前記少なくとも一つのデータ・フィールドに関連付けられたビュー記述子によって定義される呈示モードに基づいて、前記少なくとも一つの選択された画像データセットの呈示を含めるよう構成されている、請求項1記載のシステム。
  7. 画像データベースを有する画像管理伝送システム(PACS)と通信する第一の通信モジュールと、放射線医学もしく(RIS)を含む情報システムと通信する第二の通信モジュールとを有する、請求項1記載のシステム。
  8. 前記ユーザー入力ユニットが、音声認識を使ってデータ・フィールドの少なくとも一つについての情報をユーザーが与えられるようにする音声認識モジュールを有する、請求項1記載のシステム。
  9. 請求項1記載のシステムを有するワークステーション。
  10. レポート生成システムがレポートを生成する方法であって、
    テンプレート選択器が複数のテンプレートからテンプレートを選択する段階であって、前記テンプレートは前記レポートの構造および前記レポートのために埋められるべきデータ・フィールドを定義し、前記テンプレートはさらにビュー記述子および前記データ・フィールドと前記ビュー記述子との間の関連付けを定義し、ビュー記述子は、画像型および該画像型の呈示モードを定義する、段階と;
    データ・フィールド呈示器が前記テンプレートの前記データ・フィールドの表現をユーザーに対して呈示する段階と;
    データ・フィールド選択器が前記データ・フィールドの少なくとも一つを選択する段階と;
    画像データセット選択器が選択された前記少なくとも一つのデータ・フィールドに関連付けられたビュー記述子によって定義される画像型をもつ少なくとも一つの画像データセットを自動的に選択する段階と;
    ビュー生成器が選択された前記少なくとも一つのデータ・フィールドに関連付けられたビュー記述子によって定義される呈示モードに基づいて前記少なくとも一つの選択された画像データセットのビューを自動的に生成する段階と;
    ユーザー入力ユニットが生成されたビューの表示中に、選択された前記少なくとも一つのデータ・フィールドの内容について、ユーザーが入力を提供できるようにする段階と;
    レポート生成器が前記テンプレートおよびユーザーによって提供された前記データに基づいて前記レポートを生成する段階とを含む、
    方法。
  11. 請求項10記載の方法を前記レポート生成システムのプロセッサ・システムに実行させるための命令を含むコンピュータ・プログラム。
JP2014500507A 2011-03-25 2012-03-15 画像データに基づくレポートの生成 Expired - Fee Related JP6060144B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP11159820 2011-03-25
EP11159820.7 2011-03-25
PCT/IB2012/051232 WO2012131518A1 (en) 2011-03-25 2012-03-15 Generating a report based on image data

Publications (2)

Publication Number Publication Date
JP2014509030A JP2014509030A (ja) 2014-04-10
JP6060144B2 true JP6060144B2 (ja) 2017-01-11

Family

ID=45895445

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014500507A Expired - Fee Related JP6060144B2 (ja) 2011-03-25 2012-03-15 画像データに基づくレポートの生成

Country Status (6)

Country Link
US (1) US10372802B2 (ja)
EP (1) EP2689361A1 (ja)
JP (1) JP6060144B2 (ja)
CN (1) CN103460212B (ja)
RU (1) RU2620890C2 (ja)
WO (1) WO2012131518A1 (ja)

Families Citing this family (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140195266A1 (en) * 2013-01-09 2014-07-10 Nuance Communications, Inc. Techniques to improve accuracy of a medical report relating to medical imaging study
WO2014153156A1 (en) * 2013-03-14 2014-09-25 Craven Jason System and method for converting paper forms to an electronic format
US9292655B2 (en) * 2013-07-29 2016-03-22 Mckesson Financial Holdings Method and computing system for providing an interface between an imaging system and a reporting system
US10007652B1 (en) * 2013-08-15 2018-06-26 Allscripts Software, Llc Method for reusing and dynamically filtering content for structured document construction
CN103744926A (zh) * 2013-12-30 2014-04-23 邢英琦 生成图文结合的医用报告的方法及***
WO2016070445A1 (zh) * 2014-11-04 2016-05-12 深圳市前海安测信息技术有限公司 基于智能语音识别的医学影像解读方法和***
CN105740217B (zh) * 2014-12-08 2019-08-30 珠海金山办公软件有限公司 一种基于文档模板的文档生成方法及装置
JP6624784B2 (ja) * 2015-01-06 2019-12-25 キヤノン株式会社 放射線撮影システム及びその制御方法、情報処理装置及びその制御方法、コンピュータプログラム
US20180092696A1 (en) * 2015-02-05 2018-04-05 Koninklijke Philips N.V. Contextual creation of report content for radiology reporting
US10891573B2 (en) * 2015-04-19 2021-01-12 Schlumberger Technology Corporation Wellsite report system
US20170083665A1 (en) * 2015-09-23 2017-03-23 Siemens Healthcare Gmbh Method and System for Radiology Structured Report Creation Based on Patient-Specific Image-Derived Information
US10037407B2 (en) * 2015-11-23 2018-07-31 Koninklijke Philips N.V. Structured finding objects for integration of third party applications in the image interpretation workflow
CN106021207A (zh) * 2016-05-06 2016-10-12 长沙市麓智信息科技有限公司 专利撰写***及其方法
EP3293651A1 (en) * 2016-09-13 2018-03-14 Ebit srl Interventional radiology structured reporting workflow
EP3293652A1 (en) * 2016-09-13 2018-03-14 Ebit srl Interventional radiology structured reporting workflow utilizing anatomical atlas
US10628132B2 (en) * 2016-09-15 2020-04-21 Oracle International Corporation Inversion of control framework for multiple behaviors of a process
US11294644B2 (en) 2016-09-16 2022-04-05 Oracle International Corporation Inversion of control framework for multiple behaviors on top of a process
CN106446574A (zh) * 2016-10-10 2017-02-22 重庆市中迪医疗信息科技股份有限公司 影像报告***
US10551360B2 (en) * 2016-10-11 2020-02-04 Bruker Daltonik Gmbh Low dead-volume connector for fluid chromatography
US20180349556A1 (en) * 2017-06-02 2018-12-06 Nuance Communications, Inc. Medical documentation systems and methods
CN108614928A (zh) * 2018-04-16 2018-10-02 北京航空航天大学 数字飞行器仿真报告中图的人工智能生成方法和装置
CA3100091C (en) * 2018-05-15 2023-10-24 Intex Holdings Pty Ltd Expert report editor
CN109192261B (zh) * 2018-08-21 2023-03-24 上海商汤智能科技有限公司 信息处理方法及装置、电子设备及存储介质
CN109065112A (zh) * 2018-08-21 2018-12-21 上海商汤智能科技有限公司 信息处理方法及装置、电子设备及存储介质
CN109273066A (zh) * 2018-08-21 2019-01-25 上海商汤智能科技有限公司 医疗报告生成方法及装置、电子设备及存储介质
KR102322518B1 (ko) * 2019-04-05 2021-11-09 오스템임플란트 주식회사 사용자 맞춤형 템플릿 기반 수술 보고서 제공방법 및 그 장치
CN111603199B (zh) * 2020-04-24 2023-03-14 中国人民解放军总医院第二医学中心 一种基于体表定位测量仪的三维重建超声诊断***
KR102367197B1 (ko) * 2020-06-03 2022-02-24 오스템임플란트 주식회사 치과영상 화면 제공 방법 및 이를 위한 치과영상 처리장치
CN113808696B (zh) * 2020-06-15 2024-05-28 飞依诺科技股份有限公司 超声数据的处理方法、装置、计算机设备和存储介质
CN113850059B (zh) * 2021-12-01 2022-03-22 北京一起教育科技有限责任公司 一种生成测评报告的方法、装置及电子设备
US12014807B2 (en) 2021-12-10 2024-06-18 Merative Us L.P. Automated report generation using artificial intelligence algorithms

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4071710B2 (ja) 2001-06-21 2008-04-02 株式会社東芝 電子的レポート作成支援装置、方法及びプログラム
US6792071B2 (en) * 2002-03-27 2004-09-14 Agfa-Gevaert Method of performing geometric measurements on digital radiological images
US7624027B1 (en) 2002-10-29 2009-11-24 Practice Velocity, LLC Method and system for automated medical records processing
US7809174B2 (en) * 2005-03-21 2010-10-05 General Electric Company Method and system for segmentation of computed tomography image data
JP2007048003A (ja) * 2005-08-09 2007-02-22 Canon Inc 情報処理装置及びその制御方法、プログラム
US20070168223A1 (en) 2005-10-12 2007-07-19 Steven Lawrence Fors Configurable clinical information system and method of use
WO2008120146A1 (en) 2007-03-29 2008-10-09 Nuance Communications Austria Gmbh Method and system for generating a medical report and computer program product therefor
JP2009069977A (ja) * 2007-09-11 2009-04-02 Fujifilm Corp 医用レポート作成システム及び医用レポート作成装置並びに医用レポート作成方法
JP2009078050A (ja) * 2007-09-27 2009-04-16 Fujifilm Corp 医用レポート作成システム及び医用レポート作成方法
DE102007050184B4 (de) * 2007-10-19 2011-06-16 Siemens Ag Integrierte Lösung für diagnostische Lese- und Berichterstellung
JP5116557B2 (ja) * 2008-05-01 2013-01-09 富士フイルム株式会社 医用文書作成支援装置、医用文書作成支援方法、並びに医用文書作成支援プログラム
US7794686B2 (en) 2008-08-12 2010-09-14 Tdy Industries, Inc. Method for making ammonium metatungstate
US20100114597A1 (en) * 2008-09-25 2010-05-06 Algotec Systems Ltd. Method and system for medical imaging reporting
US8380533B2 (en) * 2008-11-19 2013-02-19 DR Systems Inc. System and method of providing dynamic and customizable medical examination forms
US8489431B2 (en) * 2009-03-20 2013-07-16 General Electric Company System and method of remote reporting of radiation dose usage in image acquisition
WO2010109351A1 (en) * 2009-03-26 2010-09-30 Koninklijke Philips Electronics N.V. A system that automatically retrieves report templates based on diagnostic information
US8805048B2 (en) * 2010-04-01 2014-08-12 Mark Batesole Method and system for orthodontic diagnosis
US9292655B2 (en) * 2013-07-29 2016-03-22 Mckesson Financial Holdings Method and computing system for providing an interface between an imaging system and a reporting system

Also Published As

Publication number Publication date
WO2012131518A1 (en) 2012-10-04
CN103460212A (zh) 2013-12-18
RU2620890C2 (ru) 2017-05-30
JP2014509030A (ja) 2014-04-10
US20140013199A1 (en) 2014-01-09
CN103460212B (zh) 2019-03-01
RU2013147625A (ru) 2015-04-27
US10372802B2 (en) 2019-08-06
EP2689361A1 (en) 2014-01-29

Similar Documents

Publication Publication Date Title
JP6060144B2 (ja) 画像データに基づくレポートの生成
JP6689919B2 (ja) 医療情報用の進化型コンテキスト臨床データエンジン
US10229497B2 (en) Integration of medical software and advanced image processing
US9465920B2 (en) Providing assistance with reporting
Reiner et al. Radiology reporting, past, present, and future: the radiologist’s perspective
JP5674457B2 (ja) 患者の統合健康情報をシームレスに視覚表示するシステム及び方法
RU2640642C2 (ru) Система и способ генерации отчета на основании входных данных от радиолога
US20110028825A1 (en) Systems and methods for efficient imaging
EP2169577A1 (en) Method and system for medical imaging reporting
US20080119717A1 (en) Interactive protocoling between a radiology information system and a diagnostic system/modality
US20060173858A1 (en) Graphical medical data acquisition system
US10642956B2 (en) Medical report generation apparatus, method for controlling medical report generation apparatus, medical image browsing apparatus, method for controlling medical image browsing apparatus, medical report generation system, and non-transitory computer readable medium
US8503741B2 (en) Workflow of a service provider based CFD business model for the risk assessment of aneurysm and respective clinical interface
US20140172457A1 (en) Medical information processing apparatus and recording medium
US20090287487A1 (en) Systems and Methods for a Visual Indicator to Track Medical Report Dictation Progress
US20190171714A1 (en) Artificial Intelligence Quality Measures Data Extractor
WO2015031296A1 (en) System and method for implementing clinical decision support for medical imaging analysis
JP2018055278A (ja) 医用情報処理装置、医用情報処理システム、医用情報処理方法およびプログラム
US20220172824A1 (en) Snip-triggered digital image report generation
US20240021318A1 (en) System and method for medical imaging using virtual reality
Serique et al. Using the semantic web and web apps to connect radiologists and oncologists

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130926

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150311

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160129

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160209

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160412

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160809

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20161021

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20161115

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20161212

R150 Certificate of patent or registration of utility model

Ref document number: 6060144

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees