JP2008220839A - 画像ファイリングシステムおよび画像表示システム - Google Patents

Abstract

【課題】実施行為中に撮像した画像を容易に特定する。
【解決手段】内視鏡システム１０において、第１手技スイッチ４６および第２手技スイッチ４８は、所定の手技イベントの実施期間を開始する指示がユーザにより入力される。画像形成装置６６は、手技イベントの実施期間中に撮像スイッチ４４がユーザに押されたとき、撮像した画像を示す画像データと、実施期間の開始が指示された手技イベントの手技ＩＤとを対応付けて画像ファイリング装置６８に送信する。画像ファイリング装置６８は、受信した画像データと手技ＩＤとを対応付けて記憶部１０６に格納する。
【選択図】図２

Description

本発明は、画像ファイリングシステムおよび画像表示システムに関し、特に、撮像手段により撮像され出力された画像データをファイリングする画像ファイリングシステムおよび画像表示システムに関する。

医療行為に使用される内視鏡には、ＣＣＤカメラなどの撮像装置が設けられている。内視鏡を用いて患者の組織のサンプルを採取する、または粘膜を剥離するなどの医療行為を実施する場合、内視鏡検査医は、通常この撮像装置を用いて医療行為の対象となる部位を動画または静止画で撮像する。このように、医療行為を実施しているときに撮像されて得られた画像データは、その医療行為の実施を記録するものとして極めて重要である。

このため、収集された画像が検査の流れの中で如何なる状況のときに撮影されたものであるのかを容易に把握すべく、映像情報、診断画像情報、および音声情報を、表示画面を分割した各表示領域に各々対応するように表示させる検査処置情報記録システムが提案されている（例えば、特許文献１参照）。また、手術中に行われた処置内容を忠実に再現すべく、補正された時間情報に基づき、内視鏡画像などを含む医療情報を再生する内視鏡システムが提案されている（例えば、特許文献２参照）。
特開２００４−４１６０５号公報 特開２００５−９５５６７号公報

しかし、上述の特許文献に記載される技術では、医療行為の実施中に撮像装置で撮像した時間などが特定されるに過ぎない。このため、例えば医師は、撮像した画像を撮像時刻を参考に、どの画像が例えば手技イベントの実施時に撮像されたもので、どの画像が手技イベントを実施していないときに撮像されたものかを思い出しながら、検査終了後のレポートを作成しなければならない。このため、医師は手技イベントの実施中にどのような画像を撮像し、手技イベントを実施していないときにどのような画像を撮像したかを覚えていなければならず、医師の負担は過大なものとなっている。

本発明はこうした課題に鑑みてなされたものであり、その目的は、実施行為中に撮像した画像を容易に特定することにある。

上記課題を解決するために、本発明のある態様の画像ファイリングシステムは、撮像した画像を示す画像データを出力する撮像手段と、出力された画像データを格納する記憶手段と、ユーザにより所定の実施行為の実施期間を開始する指示が入力される指示入力手段と、を備える。記憶手段は、開始が指示された実施期間中に撮像手段による撮像が行われた場合、その撮像により出力された画像データと、所定の実施行為を特定する実施行為データとを対応付けて格納する。

この態様によれば、撮像手段により撮像したときに、画像データと実施行為データとを対応付けることができる。このため、実施行為中に撮像した画像を容易に特定することが可能となる。

指示入力手段は、ユーザにより第１の実施行為の第１実施期間を開始する指示が入力される第１指示入力手段と、ユーザにより第２の実施行為の第２実施期間を開始する指示が入力される第２指示入力手段を含んでもよい。記憶手段は、第１実施期間中に撮像手段による撮像が行われた場合、その撮像により出力された画像データと、第１の実施行為を特定する第１実施行為データとを対応付けて格納し、第２実施期間中に撮像手段による撮像が行われた場合、その撮像により出力された画像データと、第２の実施行為を特定する第２実施行為データとを対応付けて格納してもよい。この態様によれば、複数の実施行為の各々において撮像が行われ、画像データが出力された場合に、どの画像データがどの実施行為において撮像されたものかを容易に特定することが可能となる。

開始が指示された実施期間中に、当該実施期間中であることをユーザに報知する報知手段をさらに備えてもよい。この態様によれば、ユーザは開始が指示された実施期間中であることを正確に把握することができる。このため、実施期間の開始が指示されていないにもかかわらず実施行為が実施されることを抑制することができる。

撮像手段は、実施期間の開始が指示された場合、当該実施期間中において所定時間毎に撮像してもよい。この態様によれば、ユーザは、実施期間中は撮像のために例えばシャッターやスイッチを押すなどの操作をしなくても撮像することが可能となり、実施期間中におけるユーザの負担を軽減することができる。

撮像手段は、内視鏡による医療行為の対象物を撮像できるよう当該内視鏡に設けられ、指示入力手段は、ユーザにより内視鏡による所定の医療行為の実施期間を開始する指示を入力するために用いられるものであり、記憶手段は、所定の医療行為の開始が指示された実施期間中に撮像手段による撮像が行われた場合、その撮像により出力された画像データと、所定の医療行為を特定する実施行為データとを対応付けて格納してもよい。

内視鏡検査では、内視鏡検査医が手技を実施しながら患部などを撮像する。この態様によれば、内視鏡検査において、医療行為の実施時に撮像して得られた画像データと、その医療行為を示す実施行為データとを容易に対応付けることができる。このため、例えば内視鏡検査レポートを作成するときに、内視鏡検査における医療行為に対応する画像データを容易に特定することができる。

所定の実施行為データに対応付けて格納された画像データに第１処理が実行された場合、当該所定の実行行為データにより特定される医療行為に付随して発生する第２処理を実行する処理実行手段をさらに備えてもよい。この態様によれば、例えばある医療行為を実施したときに必ず実行される処理がある場合に、確実にその処理を実施することが可能となる。

本発明の別の態様は、画像表示システムである。この画像表示システムは、撮像した画像を示す画像データを出力する撮像手段と、出力された画像データを格納する記憶手段と、ユーザにより所定の実施行為の実施期間を開始する指示が入力される指示入力手段と、格納された画像データを利用してディスプレイに画像を表示させる表示制御手段と、を備える。記憶手段は、開始が指示された実施期間中に撮像手段による撮像が行われた場合、その撮像により出力された画像データと、所定の実施行為を特定する実施行為データとを対応付けて格納し、表示制御手段は、実施行為データが対応付けられた画像データを利用してディスプレイに画像を表示させる場合、当該画像に対応付けて、当該画像データに対応付けられた実施行為データが特定する実施行為を示す情報をディスプレイに表示させる。

この態様によれば、撮像手段により撮像したときに、画像データと実施行為データとを対応付けることができ、このため実施行為と、その実施行為中に撮像された画像とを対応付けて表示することができる。このためユーザは、実施行為中に撮像された画像を容易に特定することが可能となる。

なお、以上の構成要素の任意の組合せや、本発明の構成要素や表現を方法、装置、コンピュータプログラム、コンピュータプログラムを格納した記録媒体などの間で相互に置換したものもまた、本発明の態様として有効である。

本発明の画像ファイリングシステムによれば、実施行為中に撮像した画像を容易に特定することができる。

以下、図面を参照して本発明の実施の形態（以下、「実施形態」という。）について詳細に説明する。

図１は、本実施形態に係る内視鏡システム１０の全体的な構成を模式的に示す図である。内視鏡システム１０は、内視鏡１２、送気送水装置６０、光源装置６２、画像プロセッサ６４、画像形成装置６６、画像ファイリング装置６８を有する。なお、本実施形態において画像プロセッサ６４、画像形成装置６６、および画像ファイリング装置６８を別体として構成しているが、これらすべて、またはこれらのうち２つが一体的に設けられてもよい。

内視鏡１２は、挿入部１４、操作部１６、ユニバーサルケーブル１８、およびコネクタ部２０を有する。挿入部１４は体腔内に挿入される部分であり、そのため細長く形成されている。挿入部１４は先端部である硬質部２２、操作部１６の一端に連結する可撓管部３０、および硬質部２２と可撓管部３０との間に介在する湾曲部２８とにより構成される。

硬質部２２は撮像ユニット２６を内蔵し、このため湾曲部２８などに比べ硬質に形成されている。撮像ユニット２６はＣＣＤセンサを内蔵し、撮像した映像データを出力する。なお、光を照射する照明レンズ（図示せず）が撮像ユニット２６と併設されている。また、硬質部２２の先端部には、体腔内の患部に送気送水を行うと共に、患部を処置する処置具を突出させる処置具挿通孔２４が形成されている。処置具挿通孔２４および湾曲部２８は後述する上下湾曲ノブ５０および左右湾曲ノブ５２をユーザが操作することにより湾曲する。可撓管部３０は硬質部２２および湾曲部２８に比べ長く、挿入される体腔形状にしたがって変形するよう可撓性を有する。

操作部１６は、双方の一端が互いに一体的に連結する把持部シーケンス３２および操作部シーケンス４０を有する。把持部シーケンス３２は内視鏡検査医などのユーザに把持される部分であり、その他端は可撓管部３０と連結する。把持部シーケンス３２には、処置具を挿入するための処置具挿入孔３４が形成されている。把持部シーケンス３２内部において、処置具挿入孔３４には第１チャンネル３６が取り付けられている。第１チャンネル３６は可撓性を有する管状部材であり、挿入部１４および把持部シーケンス３２を通って処置具挿入孔３４と処置具挿通孔２４とを連通させる。この処置具挿入孔３４から処置具を挿入することにより、第１チャンネル３６を通って処置具挿通孔２４からその処置具を突出させることが可能となっている。

操作部シーケンス４０には、上下湾曲ノブ５０および左右湾曲ノブ５２が設けられている。ユーザはこの上下湾曲ノブ５０および左右湾曲ノブ５２を回動操作することにより、湾曲部２８を湾曲させて硬質部２２を所望の方向に向かせることが可能となっている。

また、操作部シーケンス４０には、送気送水スイッチ４２、撮像スイッチ４４、第１手技スイッチ４６、および第２手技スイッチ４８が設けられている。送気送水スイッチ４２は送気送水装置６０に接続されている。また、撮像スイッチ４４、第１手技スイッチ４６、および第２手技スイッチ４８は画像プロセッサ６４に接続されている。

ユニバーサルケーブル１８は、一端部が操作部シーケンス４０に連結され、他端部がコネクタ部２０に連結されている。コネクタ部２０には送気送水口金５４が設けられている。コネクタ部２０内部において、送気送水口金５４には第２チャンネル３８が取り付けられている。第２チャンネル３８は可撓性を有する管状部材であり、ユニバーサルケーブル１８および操作部シーケンス４０を通って送気送水口金５４と第１チャンネル３６とを連通させる。送気送水口金５４は送気送水装置６０に接続される。これにより、送気送水装置６０は、第２チャンネル３８、第１チャンネル３６、および処置具挿通孔２４を通じて患部へ送気送水を行うことが可能となっている。

コネクタ５８にはライトガイドが接続されており、このライトガイドはユニバーサルケーブル１８、操作部１６、挿入部１４を通って硬質部２２の照明レンズに接続されている。光源装置６２は、コネクタ５８がコネクタ部２０に取り付けられることにより、このライトガイドを通じて照射レンズに光学的に接続され、患部に光を照射することが可能となる。画像プロセッサ６４はスコープケーブル５５を介してコネクタ５６に接続される。画像プロセッサ６４は、コネクタ５６がコネクタ部２０に取り付けられることにより、撮像ユニット２６、撮像スイッチ４４、第１手技スイッチ４６、および第２手技スイッチ４８に接続される。

画像プロセッサ６４にはキーボード７０、およびディスプレイ７２が接続されている。また画像プロセッサ６４には画像形成装置６６が接続され、画像形成装置６６は画像ファイリング装置６８に接続される。画像ファイリング装置６８はディスプレイ７４、キーボード７６、およびマウス７８が接続されている。なお、キーボード７０およびディスプレイ７２に代わって、またはディスプレイ７４、キーボード７６、およびマウス７８に代わって、入出力可能なタッチパネルが用いられても良い。

図２は、本実施形態に係る内視鏡システム１０の機能ブロック図である。画像プロセッサ６４、画像形成装置６６、および画像ファイリング装置６８の各々は、各種演算処理を実行するＣＰＵ、各種制御プログラムを格納するＲＯＭ、データ格納やプログラム実行のためのワークエリアとして利用されるＲＡＭを有する。図２において画像プロセッサ６４、画像形成装置６６、および画像ファイリング装置６８は、これらＣＰＵ、ＲＡＭ、およびＲＯＭなどのハードウェア、およびソフトウェアの連携によって実現される機能ブロックとして描かれている。したがって、これらの機能ブロックはハードウェアおよびソフトウェアの組合せによって様々な形で実現することができる。

送気送水装置６０は送気送水スイッチ信号取得部８０を有する。送気送水スイッチ信号取得部８０は、ユーザにより内視鏡１２の送気送水スイッチ４２が押されたときに送気送水スイッチ信号を取得する。

画像プロセッサ６４は、映像取得部８２、表示制御部８４、撮像スイッチ信号取得部８６、第１手技スイッチ信号取得部８８、および第２手技スイッチ信号取得部９０を有する。映像取得部８２は、撮像ユニット２６から出力された映像データを取得する。画像プロセッサ６４は、取得した映像データを画像形成装置６６に継続的に出力する。表示制御部８４は、取得した映像データなどを利用して画像をディスプレイ７２に表示する。

撮像スイッチ信号取得部８６は、ユーザにより撮像スイッチ４４が押されたときに撮像スイッチ信号を取得する。画像プロセッサ６４は、撮像スイッチ信号が取得されると画像形成装置６６にレリーズ信号を送信する。第１手技スイッチ信号取得部８８は、ユーザにより第１手技スイッチ４６が押されたときに第１手技スイッチ信号を取得する。画像プロセッサ６４は、第１手技スイッチ信号を取得すると、画像形成装置６６に第１手技ＩＤを送信する。第２手技スイッチ信号取得部９０は、ユーザにより第２手技スイッチ４８が押されたときに第２手技スイッチ信号を取得する。画像プロセッサ６４は、第２手技ＩＤを取得すると、画像形成装置６６に第２手技ＩＤを送信する。

画像形成装置６６は、画像取得部９２、レリーズ信号取得部９４、手技ＩＤ取得部９６、時刻計測部９８、および撮像情報生成部１００を有する。レリーズ信号取得部９４は、画像プロセッサ６４から送信されたレリーズ信号を取得する。画像取得部９２は、レリーズ信号が取得されたときに、画像プロセッサ６４から継続的に受信する映像データをキャプチャして静止画像の画像データを取得する。なお、画像取得部９２は、動画の画像データを取得してもよいことは勿論である。手技ＩＤ取得部９６は、画像プロセッサ６４から送信された第１手技ＩＤおよび第２手技ＩＤ（以下、必要に応じて第１手技ＩＤおよび第２手技ＩＤを「手技ＩＤ」と総称する。）を取得する。時刻計測部９８は現在時刻を計測し、現在の年月日、時間、分を示す時刻データを出力する。撮像情報生成部１００は、画像データ、時刻データ、および手技ＩＤを利用して撮像情報データを生成する。画像プロセッサ６４は、生成された撮像情報データを画像ファイリング装置６８に送信する。

画像ファイリング装置６８は、撮像情報取得部１０２、表示制御部１０４、および記憶部１０６を有する。撮像情報取得部１０２は、画像形成装置６６から受信した撮像情報データを取得する。表示制御部１０４は、取得した画像データなどを利用して画像をディスプレイ７４に表示する。記憶部１０６はハードディスクやフラッシュメモリなど、電力の供給を停止しても記憶内容を保持する記憶装置によって構成され、取得した撮像情報データに含まれる画像データ、撮像時刻データ、および手技ＩＤなどのデータを格納する。

図３は、本実施形態に係る内視鏡システム１０の内視鏡検査中における動作手順を示すフローチャートである。本フローチャートにおける処理は、内視鏡システム１０に含まれる各機器の電源がオンにされ、内視鏡検査医により内視鏡検査が開始されたときに開始する。

本実施形態に係る内視鏡システム１０では、ユーザは、まずキーボード７０を使って画像プロセッサ６４に患者を識別するための患者ＩＤを入力する。画像プロセッサ６４は、ＲＡＭなどの記憶部に入力された患者ＩＤを格納する。

本実施形態に係る内視鏡システム１０では、第１手技スイッチ４６および第２手技スイッチ４８（以下、これらを必要に応じて「手技スイッチ」と総称する。）に異なる手技イベントを対応付けることが可能となっている。ユーザは、内視鏡１２を用いてこれから行う手技イベントに対応付けられた手技スイッチを押すことにより、その手技イベントの実施期間を開始する指示入力を行うことができる。このように第１手技スイッチ４６および第２手技スイッチ４８は、ユーザにより手技イベントの実施期間を開始する指示が入力される指示入力手段として機能する。

具体的には、第１手技スイッチ４６および第２手技スイッチ４８に手技イベントを対応づける場合、ユーザは、キーボード７０などを用いて画像プロセッサ６４に所定の入力を行うことにより、第１手技スイッチ信号と第１の手技イベントを示す第１手技ＩＤを対応付けるように指定し、第２手技スイッチ信号と第２の手技イベントを示す第２手技ＩＤを対応付けるように指定する。指定された手技スイッチ信号と手技データとの対応関係は、画像プロセッサ６４のＲＡＭなどの記憶部に格納される。本フローチャートにおける例では、第１手技スイッチ４６は処置の一つである粘膜剥離に対応付けられており、第２手技スイッチ４８は生検のための組織採取に対応付けられているものとする。したがって第１手技スイッチ信号と粘膜剥離を示す第１手技ＩＤとが対応付けられており、また第２手技スイッチ信号と組織採取を示す第２手技ＩＤとが対応付けられ、それぞれの対応関係が記憶手段に格納されている。

内視鏡１２においてユーザにより手技スイッチが押されると（Ｓ１０）、押されたスイッチが第１手技スイッチ４６であれば第１手技スイッチ信号取得部８８が第１手技スイッチ信号を取得し、第２手技スイッチ４８であれば第２手技スイッチ信号取得部９０が第２手技スイッチ信号を取得する（Ｓ１２）。

画像プロセッサ６４は、第１手技スイッチ信号を取得した場合、第１手技フラグをオンに設定して粘膜剥離の実施期間を開始し、画像形成装置６６に第１手技ＩＤを送信する。また、画像プロセッサ６４は、第２手技スイッチ信号を取得した場合、第２手技フラグをオンに設定して組織採取の実施期間を開始し、画像形成装置６６に第２手技ＩＤを送信する（Ｓ１４）。画像形成装置６６は、ＲＡＭなどの記憶部に受信した手技ＩＤを格納する（Ｓ１８）。

Ｓ１２おいて、第１手技スイッチ信号を取得した後、再度取得すると、画像プロセッサ６４は、第１手技フラグをオフに設定して粘膜剥離の実施期間を終了し、画像形成装置６６に第１手技ＩＤを削除する要求情報を送信する。画像形成装置６６は、記憶部にすでに第１手技ＩＤが格納されているときにその要求情報を受信した場合、格納されていた第１手技ＩＤを記憶部から削除する。

また、同じくＳ１２において、第２手技スイッチ信号を取得した後、再度取得すると、画像プロセッサ６４は、第２手技フラグをオフに設定して組織採取の実施期間を終了し、画像形成装置６６に第２手技ＩＤを削除する要求情報を送信する。画像形成装置６６は、記憶部にすでに第２手技ＩＤが格納されているときにその要求情報を受信した場合、格納されていた第２手技ＩＤを記憶部から削除する。

このように第１手技スイッチ４６および第２手技スイッチ４８は、ユーザにより手技イベントの実施期間の終了の指示が入力される指示入力手段としても機能する。なお、ユーザにより手技イベントの実施期間を開始する指示が入力されるスイッチと、手技イベントの実施期間の終了の指示が入力されるスイッチとが別々に設けられてもよいことは勿論である。

粘膜剥離と組織採取は異なる手技イベントであるため、同時に実施されることはない。したがって画像プロセッサ６４は、第１手技スイッチ信号を取得した場合であっても、第２手技フラグがオンに設定されている場合は、すでに組織採取の実施期間が開始しているため、画像形成装置６６に第１手技ＩＤを送信しない。また、画像プロセッサ６４は、第２手技スイッチ信号を取得した場合であっても、第１手技フラグがオンに設定されている場合は、すでに粘膜剥離の実施期間が開始しているため、画像形成装置６６に第１手技ＩＤを送信しない。なお、同時に実施される可能性がある手技については、それぞれの発生時にそれぞれの手技ＩＤを画像形成装置６６に送信してもよい。

内視鏡システム１０の構成要素のそれぞれの電源がオンになっている場合、表示制御部８４は、ディスプレイ７２に撮像ユニット２６により撮像された映像を継続的に表示する。表示制御部８４は、第１手技フラグがオンに設定されている間、ディスプレイ７２に表示している映像に重ねて、または映像の横に、文字で「粘膜剥離」と表示することにより、粘膜剥離を実施中である旨をユーザに報知する（Ｓ１６）。表示制御部８４は、第１手技フラグがオフに設定されたとき、ディスプレイ７２に表示していた「粘膜剥離」の文字を消去する。

表示制御部８４は、第２手技フラグがオンに設定されている間、同様に文字して「組織採取」と表示することにより、組織採取を実施中である旨をユーザに報知する（Ｓ１６）。表示制御部８４は、第２手技フラグがオフに設定されたとき、ディスプレイ７２に表示していた「組織採取」の文字を消去する。このように表示制御部８４およびディスプレイ７２は、第１手技スイッチ４６または第２手技スイッチ４８を使って開始を指示した手技イベントの実施期間中であることをユーザに報知する報知手段として機能する。

なお、表示制御部８４は、第１手技スイッチ信号を取得した場合であっても、第２手技フラグがオンに設定されている場合、組織採取の実施期間中は、ディスプレイ７２に「粘膜剥離」と表示しない。また、表示制御部８４は、第２手技スイッチ信号を取得した場合であっても、第１手技フラグがオンに設定されている場合、粘膜剥離の実施期間中は、ディスプレイ７２に「組織採取」と表示しない。

また、表示制御部８４は、第１手技フラグがオンに設定されている間、粘膜剥離の文字ではなく粘膜剥離を示す図形を表示することにより、粘膜剥離を実施中である旨をユーザに報知してもよい。また、表示制御部８４は、第２手技フラグがオンに設定されている間、組織採取の文字ではなく組織採取を示す図形を表示することにより、組織採取を実施中である旨をユーザに報知してもよい。

さらに、画像プロセッサ６４には、スピーカと、ＲＯＭなどの記憶部に格納された音声データを取得しスピーカから音声を出力する音声制御部とが設けられていてもよい。音声制御部は、第１手技フラグがオンに設定されたとき、粘膜剥離の実施期間を開始した旨を音やメッセージでスピーカから出力してもよく、第１手技フラグがオフに設定されたとき、粘膜剥離の実施期間を終了したことを示す音やメッセージをスピーカから出力してもよい。また、音声制御部は、第２手技フラグがオンに設定されたとき、組織採取の実施期間が開始されたことを示す音やメッセージをスピーカから出力してもよく、第２手技フラグがオフに設定されたとき、粘膜剥離の実施期間を終了した旨を音やメッセージでスピーカから出力してもよい。

次に内視鏡１２においてユーザにより撮像スイッチ４４が押されると（Ｓ２０）、画像プロセッサ６４の撮像スイッチ信号取得部８６は、撮像スイッチ信号を取得する（Ｓ２２）。撮像スイッチ信号が取得されると、画像プロセッサ６４は画像形成装置６６にレリーズ信号を送信する（Ｓ２４）。

レリーズ信号を受信すると、画像取得部９２は、映像データをキャプチャして静止画像の画像データを取得する（Ｓ２６）。画像データが取得されると、撮像情報生成部１００は、記憶部に手技ＩＤが格納されているか否かを判定する（Ｓ２８）。手技ＩＤが格納されている場合（Ｓ２８のＹ）、撮像情報生成部１００は手技あり撮像情報データを生成し（Ｓ３０）、手技ＩＤが格納されていない場合（Ｓ２８のＮ）、撮像情報生成部１００は手技なし撮像情報データを生成する（Ｓ３２）。

ここで、手技なし撮像情報データのデータ構造を図４（ａ）に示し、手技あり撮像情報データのデータ構造を図４（ｂ）に示す。撮像情報生成部１００は、撮像時刻、すなわちレリーズ信号取得時の時刻を示す撮像時刻データ１１４を時刻計測部９８から取得し、また、記憶部に格納された患者ＩＤ１１３を取得する。記憶部に手技ＩＤが格納されていない場合、撮像情報生成部１００は、図４（ａ）に示すように、取得した画像データ１１２、患者ＩＤ１１３、撮像時刻データ１１４とを含む手技なし撮像情報データ１１０を生成する。記憶部に手技ＩＤが格納されている場合、撮像情報生成部１００は、図４（ｂ）に示すように、取得した画像データ１１２、患者ＩＤ１１３、撮像時刻データ１１４、および格納された手技ＩＤ１１６とを含む手技あり撮像情報データ１１８を生成する。以下、手技なし撮像情報データ１１０および手技あり撮像情報データ１１８を、必要に応じて「撮像情報データ」と総称する。

図３に戻る。撮像情報データが生成されると、画像形成装置６６は、生成された撮像情報データを画像ファイリング装置６８に送信する（Ｓ３４）。撮像情報取得部１０２は、受信した撮像情報データに含まれる画像データ、患者ＩＤ、撮像時刻データ、および手技ＩＤがある場合はそれを対応付けて格納する（Ｓ３６）。このように、第１手技スイッチ４６または第２手技スイッチ４８を使って手技イベントの開始が指示された実施期間中に撮像が行われた場合、記憶部１０６はその撮像により出力された画像データと、その手技イベントを示す手技ＩＤとを対応付けて格納する。

内視鏡検査中に撮像することにより得られた撮像情報データが記憶部１０６に格納された後、キーボード７６やマウス７８を用いてユーザにより所定の入力操作がなされることにより、格納された撮像情報データに含まれる画像データを利用してディスプレイ７４に内視鏡検査において撮像された画像を表示させる場合、表示制御部１０４は、その画像に対応付けて、その画像データに対応付けられた手技ＩＤが示す手技イベントをディスプレイ７４に表示する（Ｓ３８）。このように、内視鏡システム１０は、内視鏡検査中に撮像した画像を表示する画像表示システムとしても機能する。

ここで、図５および図６に、撮像された画像を表示する検査画像一覧画面の例を示す。ユーザにより所定の入力操作がされると、表示制御部１０４は、同一の患者ＩＤを含む撮像情報データを取得し、取得した撮像情報データを使って、その患者ＩＤの患者に実施した内視鏡検査において撮像された画像をサムネイル化して図５に示す検査画像一覧画面１２０に表示する。このとき表示制御部１０４は、一つの手技イベントの実施中に撮像された画像の外観を示すサムネイルを重ねるように１箇所にまとめ、その付近に、例えば「粘膜剥離」や「組織採取」などその手技イベントの名称を文字で表示する。また、表示制御部１０４は、撮像情報データに含まれる撮像時刻データを利用して撮像順を導出し、一つの手技イベントの実施中に撮像された画像のサムネイルを重ねて表示するとき、導出した撮像順に各サムネイルを重ねて配置する。図５では、一人の患者に対する内視鏡検査において合計８回撮像されており、撮像順が１および２の画像は手技イベントが実施されていないときに撮像され、撮像順が３から６の画像は粘膜剥離を実施しているときに撮像され、撮像順が７および８の画像は組織採取を実施しているときに撮像されたものであるときの表示態様が一例として示されている。

ユーザにより所定の入力操作がされると、表示制御部１０４は、図６に示す検査画像一覧画面１２２を表示する。同一の患者ＩＤを含む撮像情報データを取得し、その撮像情報データ含まれる画像データをサムネイル化して検査画像一覧画面１２２に撮像順に並べて表示する。このとき表示制御部１０４は、手技イベントなし、または手技イベントのいずれかに対応する画像データのサムネイルを検査画像一覧画面１２２に表示する。ユーザにより検査画像一覧画面１２２上方のタブがクリックされることにより、クリックされたタブに対応する手技イベントに対応する画像データのサムネイルを検査画像一覧画面１２２に表示する。図６では、撮像順が３から６の画像が粘膜剥離を実施しているときに撮像されたものであるときの表示態様が一例として示されている。

図７は、本実施形態に係る画像表示システム１５０の機能ブロック図である。画像表示システム１５０は、内視鏡システム１０およびクライアント端末１３０を含む。図７においてクライアント端末１３０は、ＣＰＵ、ＲＡＭ、およびＲＯＭなどのハードウェア、およびソフトウェアの連携によって実現される機能ブロックとして描かれている。したがって、これらの機能ブロックはハードウェアおよびソフトウェアの組合せによって様々な形で実現することができる。

クライアント端末１３０は、ディスプレイ１３２、マウス１３６、およびキーボード１３４に接続されており、また、ネットワーク１２８を介して画像ファイリング装置６８に接続されている。クライアント端末１３０は、撮像情報取得部１３８、表示制御部１４０、第１手技判定部１４２、第２手技判定部１４４、オーダ発行部１４６、および記憶部１４８を有する。撮像情報取得部１３８は、受信した撮像情報データを取得する。表示制御部１４０は、ディスプレイ１３２に表示する画像を制御する。

第１手技判定部１４２は、取得した撮像情報データを利用して、撮像情報データに含まれる画像データが撮像されたときに実施されていた手技イベントが生検を必要とするものか否かを判定する。第２手技判定部１４４は、取得した撮像情報データを利用して、撮像情報データに含まれる画像データが撮像されたときに実施されていた手技イベントが処置であったか否かを判定する。オーダ発行部１４６は、病理検査部門のクライアント端末（図示せず）にオーダ情報を送信することにより病理検査オーダを発行する。

図８は、本実施形態に係る画像表示システム１５０を使ってユーザが内視鏡検査レポートを作成するときの、クライアント端末１３０の動作手順を示すフローチャートである。本フローチャートにおける処理は、レポートの作成を開始するためのユーザによる所定の入力操作がされたときに開始する。

キーボード１３４やマウス１３６を使ってユーザにより所定の入力操作がされると、表示制御部１４０は、記憶部１０６に格納されているレポートの作成画面のフォームデータを利用して、内視鏡検査レポートの作成画面をディスプレイ１３２に表示する。内視鏡検査レポートには、内視鏡１２を使ってその検査中に撮像した画像を添付する必要がある。このため、ユーザは、記憶部１０６に格納された画像データのうち、レポートの作成対象である内視鏡検査において撮像された画像データを検索し、さらにキーボード１３４やマウス１３６を使って、該当する画像データを含む撮像情報データをレポートファイルに関連付ける指示を入力する。

具体的には、ユーザにより記憶部１０６に格納された画像データを閲覧する指示入力がされると、撮像情報取得部１３８は、記憶部１０６に格納された画像データを含む撮像情報データをクライアント端末１３０に転送する転送要求信号を画像ファイリング装置６８に送信する。画像ファイリング装置６８は、受信した転送要求信号に応じてクライアント端末１３０に撮像情報データを送信する。撮像情報取得部１３８は、受信した撮像情報データを取得する。表示制御部１４０は、取得した撮像情報データに含まれる画像データの一覧をディスプレイ１３２に表示する。

このとき、表示制御部１４０は、画像データの一覧を表示するとき、画像データに対応付けられた患者ＩＤが示す患者名を表示する。また、表示制御部１４０は、手技ＩＤに対応付けられている画像データがある場合には、その手技ＩＤが示す手技イベントに対応付けてその画像データを表示する。具体的には、表示制御部１４０は、図５に示す検査画像一覧画面１２０、または図６に示す検査画像一覧画面１２２を表示することにより、手技イベントと、その手技イベントの実施期間中に撮像された画像とを対応付けて表示する。

レポートを作成するユーザは、表示された検査画像一覧画面から、レポートを作成する内視鏡検査の対象の患者の画像データを示すサムネイルを探し、その全て、または一部のサムネイルを検査画像一覧画面からレポートの作成画面にマウス１３６を使ってドラッグアンドドロップすることなどにより、画像データをレポートに取り込む（Ｓ４０）。これによって、ドラッグアンドドロップされたサムネイルに対応する画像データを含む撮像情報データがそのレポートファイルに関連付けられる。

レポートに画像データを取り込む作業を終了することを示す所定の入力操作がユーザにされた場合、第１手技判定部１４２は、レポートファイルに関連付けられた撮像情報データに第２手技ＩＤが含まれるか否かを判定することにより、生検の必要があるか否かを判定する（Ｓ４２）。第２手技ＩＤが含まれている場合、第１手技判定部１４２は、組織採取が実施されたため生検が必要と判定し（Ｓ４２のＹ）、表示制御部１４０は、記憶部１４８に格納された病理検査オーダ記入フォームのフォームデータを利用して、病理検査オーダ記入フォームを開く（Ｓ４４）。ユーザは、この病理検査オーダ記入フォームに病理検査オーダを入力する（Ｓ４６）。病理検査オーダが入力され、例えばユーザによりオーダ発行ボタンがクリックされるなど所定の入力操作がされたときに、オーダ発行部１４６は、入力された病理検査オーダを発行する（Ｓ４８）。第２手技ＩＤが含まれてない場合（Ｓ４２のＮ）、第１手技判定部１４２は、組織採取が実施されていないため生検は不要と判定し、Ｓ４４〜Ｓ４８の処理をスキップする。このように画像データに対応付けられた手技ＩＤを利用して病理検査オーダ記入フォームを表示することによって、ユーザに病理検査オーダの発行を促すことができ、円滑なレポート作成を実現することができる。

なお、レポートの作成画面に組織採取を指定するボタンが表示されていてもよい。この場合、表示制御部１４０は、このボタンがユーザにクリックされたときに病理検査オーダ記入フォームを開く。

次に、第２手技判定部１４４は、レポートファイルに関連付けられた撮像情報データに第１手技ＩＤが含まれるか否かを判定することにより、処置実施はあるか否かを判定する（Ｓ５０）。第１手技ＩＤが含まれている場合、第２手技判定部１４４は、処置である粘膜剥離が実施されたと判定し（Ｓ５０のＹ）、表示制御部１４０は、記憶部１４８に格納された処置所見記入フォームのフォームデータを利用して、処置の所見を入力するための処置所見記入フォームを開く（Ｓ５２）。ユーザは、この処置所見記入フォームに処置の所見を入力する（Ｓ５４）。第１手技ＩＤが含まれていない場合、第２手技判定部１４４は、第２手技判定部１４４は粘膜剥離が実施されていないと判定し（Ｓ５０のＮ）、Ｓ５２およびＳ５４の処理をスキップする。このように画像データに対応付けられた手技ＩＤを利用して処置所見記入フォームを開くことにより、ユーザに処置の所見の入力を促すことができ、円滑なレポート作成を実現することができる。レポートの作成を終了するための所定の入力操作がユーザによりされた場合、記憶部１４８はそのレポートファイルを格納する。

なお、レポートの作成画面に粘膜剥離を指定するボタンが表示されていてもよい。この場合、表示制御部１４０は、このボタンがユーザにクリックされたときに処置所見記入フォームを開く。

本発明は上述の各実施形態に限定されるものではなく、各実施形態の各要素を適宜組み合わせたものも、本発明の実施形態として有効である。また、当業者の知識に基づいて各種の設計変更等の変形を各実施形態に対して加えることも可能であり、そのような変形が加えられた実施形態も本発明の範囲に含まれうる。以下、そうした例をあげる。

ある変形例では、第１手技スイッチ４６および第２手技スイッチ４８に代わって、キーボード７０の所定のキーを異なる手技イベントを対応付けることが可能となっている。この場合、ユーザは、第１の手技に対応付けられたキーを押すことにより、第１の手技イベントの実施期間を開始する指示入力を行うことができ、第２の手技に対応付けられたキーを押すことにより、第２の手技イベントの実施期間を開始する指示入力を行うことができる。このように、手技イベントに対応付けられた所定のキーも、ユーザにより手技イベントの実施期間を開始する指示が入力される指示入力手段として機能する。

ある別の変形例では、画像取得部９２は、第１手技スイッチ４６または第２手技スイッチ４８がユーザに押されることにより粘膜剥離または組織採取の実施期間の開始が指示された場合に、第１手技スイッチ４６または第２手技スイッチ４８が再度押されることにより実施期間の終了が指示されるまでの間、所定時間毎に映像データをキャプチャして静止画像の画像データを取得する。具体的には、図３のＳ１８において手技ＩＤを最初に受信してから再度同一の手技ＩＤを受信する間での間、レリーズ信号を受信しなくても、Ｓ２６以降の処理を所定時間毎に繰り返す。

このとき、画像取得部９２は、撮像スイッチ４４が押されたときに取得する画像データよりも低い解像度の画像データを取得してもよい。所定時間毎に撮像する場合、画像ファイリング装置６８に格納される画像データの数も多くなる可能性がある。このように所定時間毎に撮像する場合に画像データの解像度を落とすことにより、記憶部１０６の容量を抑制することができる。

粘膜剥離や組織採取などの手技イベントを実施しているとき、内視鏡検査医は手技イベントを実施しながら患部などを撮像する必要がある。このように手技イベントの実施期間中に所定時間毎に撮像することにより、内視鏡検査医は撮像スイッチ４４を操作することなく患部などを撮像することが可能となる。このため、手技イベント時の内視鏡検査医の負担を軽減することができる。

本実施形態に係る内視鏡システムの全体的な構成を模式的に示す図である。 本実施形態に係る内視鏡システムの機能ブロック図である。 本実施形態に係る内視鏡システムの内視鏡検査中における動作手順を示すフローチャートである。 （ａ）は、手技なし撮像情報データのデータ構造を示す図であり、（ｂ）は、手技あり撮像情報データのデータ構造を示す図である。 撮像された画像のある表示例を示す図である。 撮像された画像のある別の表示例を示す図である。 本実施形態に係る画像表示システムの機能ブロック図である。 本実施形態に係る画像表示システムを使ってユーザが内視鏡検査レポートを作成するときの、クライアント端末の動作手順を示すフローチャートである。

符号の説明

１０ 内視鏡システム、 １２ 内視鏡、 ２６ 撮像ユニット、 ４４ 撮像スイッチ、 ４６ 第１手技スイッチ、 ４８ 第２手技スイッチ、 ６４ 画像プロセッサ、 ６６ 画像形成装置、 ６８ 画像ファイリング装置、 ８２ 映像取得部、 ８４ 表示制御部、 ８６ 撮像スイッチ信号取得部、 ８８ 第１手技スイッチ信号取得部、 ９０ 第２手技スイッチ信号取得部、 ９２ 画像取得部、 ９４ レリーズ信号取得部、 ９６ 手技ＩＤ取得部、 ９８ 時刻計測部、 １００ 撮像情報生成部、 １０２ 撮像情報取得部、 １０４ 表示制御部、 １０６ 記憶部、 １３０ クライアント端末、 １３８ 撮像情報取得部、 １４０ 表示制御部。

Claims (7)

1. 撮像した画像を示す画像データを出力する撮像手段と、
   出力された画像データを格納する記憶手段と、
   ユーザにより所定の実施行為の実施期間を開始する指示が入力される指示入力手段と、
   を備え、
   前記記憶手段は、開始が指示された実施期間中に前記撮像手段による撮像が行われた場合、その撮像により出力された画像データと、前記所定の実施行為を特定する実施行為データとを対応付けて格納することを特徴とする画像ファイリングシステム。
2. 前記指示入力手段は、ユーザにより第１の実施行為の第１実施期間を開始する指示が入力される第１指示入力手段と、ユーザにより第２の実施行為の第２実施期間を開始する指示が入力される第２指示入力手段を含み、
   前記記憶手段は、第１実施期間中に前記撮像手段による撮像が行われた場合、その撮像により出力された画像データと、第１の実施行為を特定する第１実施行為データとを対応付けて格納し、第２実施期間中に前記撮像手段による撮像が行われた場合、その撮像により出力された画像データと、第２の実施行為を特定する第２実施行為データとを対応付けて格納することを特徴とする請求項１に記載の画像ファイリングシステム。
3. 開始が指示された実施期間中に、当該実施期間中であることをユーザに報知する報知手段をさらに備えることを特徴とする請求項１または２に記載の画像ファイリングシステム。
4. 前記撮像手段は、実施期間の開始が指示された場合、当該実施期間中において所定時間毎に撮像することを特徴とする請求項１から３のいずれかに記載の画像ファイリングシステム。
5. 前記撮像手段は、内視鏡による医療行為の対象物を撮像できるよう当該内視鏡に設けられ、
   前記指示入力手段は、ユーザにより内視鏡による所定の医療行為の実施期間を開始する指示を入力するために用いられるものであり、
   前記記憶手段は、前記所定の医療行為の開始が指示された実施期間中に前記撮像手段による撮像が行われた場合、その撮像により出力された画像データと、前記所定の医療行為を特定する実施行為データとを対応付けて格納することを特徴とする請求項１から４のいずれかに記載の画像ファイリングシステム。
6. 所定の実施行為データに対応付けて格納された画像データに第１処理が実行された場合、当該所定の実行行為データにより特定される医療行為に付随して発生する第２処理を実行する処理実行手段をさらに備えることを特徴とする請求項５に記載の画像ファイリングシステム。
7. 撮像した画像を示す画像データを出力する撮像手段と、
   出力された画像データを格納する記憶手段と、
   ユーザにより所定の実施行為の実施期間を開始する指示が入力される指示入力手段と、
   格納された画像データを利用してディスプレイに画像を表示させる表示制御手段と、
   を備え、
   前記記憶手段は、開始が指示された実施期間中に前記撮像手段による撮像が行われた場合、その撮像により出力された画像データと、前記所定の実施行為を特定する実施行為データとを対応付けて格納し、
   前記表示制御手段は、実施行為データが対応付けられた画像データを利用してディスプレイに画像を表示させる場合、当該画像に対応付けて、当該画像データに対応付けられた実施行為データが特定する実施行為を示す情報をディスプレイに表示させることを特徴とする画像表示システム。

Images