JP2007075157A - 画像表示装置 - Google Patents

Abstract

【課題】各撮像時点における画像領域ごとの撮像対象の状態等を容易に認識可能にできること。
【解決手段】画像表示装置４は、画像表示制御部１５ａおよび画像処理制御部１５ｂを有した制御部１５を備える。画像表示制御部１５ａは、一連の被検体内画像の撮像期間を示す時間スケールを表示するとともに、この時間スケール上の各時点の表示領域を分割画像領域に対応付けて分割し、分割した結果の各分割スケール領域に、この各分割スケール領域が対応付けられた分割画像領域の平均色を表示する制御を行う。画像処理制御部１５ｂは、携帯型記録媒体５または記憶部１４に記憶された画像データを取得して画像処理部１３に出力するとともに、この出力した画像に対する各種画像処理の制御を行う。
【選択図】 図２

Description

本発明は、複数の時点で撮像された一連の画像を表示する画像表示装置に関し、特に被検体内に導入されたカプセル型内視鏡を用いて撮像された一連の被検体内画像の表示に適用して好適な画像表示装置に関するものである。

近年、内視鏡の分野において、飲込み式のカプセル型内視鏡が開発されている。このカプセル型内視鏡は、撮像機能と無線通信機能とを備え、各種臓器内の観察のために被験者の口から飲み込まれたのち自然排出されるまでの間、例えば胃、小腸、大腸などの臓器の内部を、その蠕動運動にしたがって移動しながら順次撮像する。

臓器内を移動する間、カプセル型内視鏡によって被検体内で撮像された画像データは、順次無線信号を用いて被検体外に送信され、被検体外の受信機内に設けられたメモリに蓄積されるか、受信機に設けられたディスプレイに表示される。医師、看護師等は、メモリに蓄積された画像データをもとにディスプレイに表示させた画像、あるいは受信とともに受信機が備えるディスプレイに表示させた画像に基づいて診断を行うことができる。

通常、カプセル型内視鏡によって撮像される一連の画像数は膨大であり、医師、看護師等は、この膨大な画像を観察して診断を行うために多大な時間と労力を要する。これに対応して、画像の検索性を向上させるとともに、表示画像がどの臓器の画像であるかを容易に認識することが可能な画像表示装置が提案されている（例えば、特許文献１参照。）。

この画像表示装置では、一連の画像の撮像期間を示す時間スケールを表示するとともに、この時間スケール上に各画像の平均色を時系列に表示するようにしている。各画像の平均色は撮像した臓器に特有の色であるため、医師、看護師等は、この時間スケール上に表示された平均色を観察することによって、各撮像時刻の画像がどの臓器を撮像した画像であるかを容易に判別することができる。

特開２００４−３３７５９６号公報

ところが、上述した画像表示装置では、画像ごとに画像領域全体の平均色を求めるようにしているため、例えば出血部位等が画像領域の一部に撮像されている場合など、画像領域内の一部に注目すべき領域が存在する場合であっても、この注目すべき領域の存在を平均色から認識することは困難であるという問題があった。また、このため、平均色の観察によって画像の検索および判別等を行う場合に、注目すべき領域を含んだ画像を見逃す恐れがあるという問題があった。

本発明は、上記に鑑みてなされたものであって、複数の時点で撮像された一連の画像の特徴を複数の画像領域ごとに全撮像期間にわたって表示することができ、各撮像時点における画像領域ごとの撮像対象の状態等を容易に認識可能にすることができる画像表示装置を提供することを目的とする。

上述した課題を解決し、目的を達成するために、請求項１にかかる画像表示装置は、複数の時点で撮像された一連の画像とともに該一連の画像の撮像期間を示す時間スケールを表示する画像表示装置において、前記一連の画像内の各画像を所定の画像領域に分割した各分割画像領域の領域平均色を算出する平均色演算手段と、前記時間スケール上の各時点の表示領域を前記各分割画像領域に対応付けて分割した各分割スケール領域に、該各分割スケール領域が対応づけられた分割画像領域の前記領域平均色を表示する制御を行う表示制御手段と、を備えたことを特徴とする。

また、請求項２にかかる画像表示装置は、上記の発明において、前記領域平均色は、所定の部分撮像期間ごとに複数画像の前記領域平均色を前記分割画像領域ごとに平均化した期間領域平均色であることを特徴とする。

また、請求項３にかかる画像表示装置は、上記の発明において、前記各分割画像領域は、前記各画像を所定の分割方向に分割して形成され、前記表示制御手段は、前記時間スケール上の各時点の表示領域を表示画面上で前記分割方向と同じ方向に分割し、この分割順に前記各分割画像領域に対応付けた各分割スケール領域に、該各分割スケール領域が対応付けられた分割画像領域の前記領域平均色または前記期間領域平均色を表示する制御を行うことを特徴とする。

また、請求項４にかかる画像表示装置は、上記の発明において、前記各分割画像領域は、前記各画像を前記表示画面上で上下方向また左右方向に４分割して形成され、前記表示制御手段は、前記時間スケール上の各時点の表示領域を前記表示画面上で上下方向また左右方向に４分割し、この分割順に前記各分割画像領域に対応付けた各分割スケール領域に、該各分割スケール領域が対応付けられた分割画像領域の前記領域平均色または前記期間領域平均色を表示する制御を行うことを特徴とする。

また、請求項５にかかる画像表示装置は、上記の発明において、前記各画像の各分割画像領域の中から所定の特徴を有する特徴画像領域を検出する特徴領域検出手段を備え、前記平均色演算手段は、前記領域平均色として、前記特徴画像領域内の色情報と該特徴画像領域を除いた前記分割画像領域内の色情報とに異なる重み付けをして平均化した加重領域平均色を算出することを特徴とする。

また、請求項６にかかる画像表示装置は、上記の発明において、前記加重領域平均色は、所定の前記部分撮像期間ごとに複数画像の前記加重領域平均色を前記分割画像領域ごとに平均化した期間領域平均色であることを特徴とする。

また、請求項７にかかる画像表示装置は、上記の発明において、前記平均色演算手段は、前記期間領域平均色として、前記特徴画像領域を含む特徴画像の前記加重領域平均色と、該特徴画像を除いた前記部分撮像期間における複数画像の前記領域平均色とに異なる重み付けをして平均化した加重期間領域平均色を算出することを特徴とする。

また、請求項８にかかる画像表示装置は、上記の発明において、前記平均色演算手段は、前記部分撮像期間における所定サンプリング期間の一連の画像を用いて前記期間領域平均色を算出することを特徴とする。

また、請求項９にかかる画像表示装置は、上記の発明において、前記平均色演算手段は、前記分割画像領域における所定サンプリング間隔の各画素の色情報を用いて前記領域平均色を算出することを特徴とする。

また、請求項１０にかかる画像表示装置は、上記の発明において、前記一連の画像は、被検体内に導入されたカプセル型内視鏡を用いて撮像された被検体内画像であることを特徴とする。

本発明にかかる画像表示装置によれば、複数の時点で撮像された一連の画像の特徴を複数の画像領域ごとに全撮像期間にわたって表示することができ、各撮像時点における画像領域ごとの撮像対象の状態等を容易に認識可能にすることができる。

以下、添付図面を参照して、本発明にかかる画像表示装置の好適な実施の形態である無線形被検体内情報取得システムについて詳細に説明する。なお、この実施の形態によりこの発明が限定されるものではない。また、図面の記載において、同一部分には同一の符号を付している。

（実施の形態１）
まず、本実施の形態１にかかる画像表示装置を備えた無線型被検体内情報取得システムについて説明する。図１は、無線型被検体内情報取得システムの全体構成を示す模式図である。この無線型被検体内情報取得システムは、被検体内導入装置の一例としてカプセル型内視鏡を用いている。

図１に示すように、無線型被検体内情報取得システムは、被検体１の体内に導入され、撮像した被検体内画像の画像データを受信装置３に対して無線送信するカプセル型内視鏡２と、カプセル型内視鏡２から無線送信された画像データを受信する受信装置３と、受信装置３が受信した画像信号に基づいて被検体内画像を表示する画像表示装置４と、受信装置３と画像表示装置４との間で画像データ等の受け渡しを行う携帯型記録媒体５と、を備える。

受信装置３は、被検体１の体外表面に貼付等される複数のアンテナ６ａ〜６ｈを有した受信アンテナ６を備える。受信装置３は、カプセル型内視鏡２から無線送信された画像データ等を、受信アンテナ６を介して受信するとともに、受信した各画像データに、画像データを受信した際の各アンテナ６ａ〜６ｈの受信強度情報を対応付けて記録する。

アンテナ６ａ〜６ｈは、例えばループアンテナを用いて実現され、被検体１の体外表面上の所定位置、すなわちカプセル型内視鏡２の通過経路である被検体１内の各臓器に対応した位置に配置される。なお、アンテナ６ａ〜６ｈは、被検体１に着用させるジャケット等の所定位置に配設されるようにしてもよい。この場合、アンテナ６ａ〜６ｈは、このジャケット等を介して被検体１の体外表面上の所定位置に配設される。また、アンテナ６ａ〜６ｈの配置は、被検体１内の観察や診断等の目的に応じて任意に変更できる。なお、受信アンテナ６が備えるアンテナ数は、アンテナ６ａ〜６ｈとして示す８個に限定して解釈する必要はなく、８個より少なくても多くても構わない。

画像表示装置４は、例えばＣＲＴ、液晶ディスプレイ等を備えたワークステーションによって実現され、携帯型記録媒体５等を介して取得した画像データをもとに画像表示を行う。また、画像表示装置４は、プリンタ等の出力装置に画像データを出力して表示させることもできる。なお、画像表示装置４は、外部装置との通信機能を備え、有線または無線通信によって画像データを取得または出力するようにしてもよい。

携帯型記録媒体５は、コンパクトフラッシュ（登録商標）メモリ、ＣＤ、ＤＶＤ等によって実現され、受信装置３および画像表示装置４に対して着脱可能であり、これらに挿着された場合に画像データ等の各種情報の出力または記録を行うことができる。携帯型記録媒体５は、例えばカプセル型内視鏡２が被検体１内に導入されている間に受信装置３に挿着され、受信装置３がカプセル型内視鏡２から受信した画像データ等を記録する。また、カプセル型内視鏡２が被検体１から排出された後には、受信装置３から取り出されて画像表示装置４に挿着され、記録した画像データ等を画像表示装置４に出力する。このように受信装置３と画像表示装置４との間で携帯型記録媒体５によって画像データの受け渡しを行うようにすることで、被検体１は、カプセル型内視鏡２を導入中にも自由に行動することができる。なお、受信装置３と画像表示装置４との間のデータの受け渡しは、有線または無線通信によって行うようにしてもよい。

つぎに、本実施の形態１にかかる画像表示装置４の構成について説明する。図２は、画像表示装置４の構成を示すブロック図である。図２に示すように、画像表示装置４は、各種情報の入力を行う入力部１１と、各種情報を表示する表示部１２と、入力された画像を処理する画像処理部１３と、各種情報を記憶する記憶部１４と、画像表示装置４の各部の処理および動作を制御する制御部１５と、を備える。入力部１１、表示部１２、画像処理部１３および記憶部１４は、制御部１５に電気的に接続されている。また、画像表示装置４は、携帯型記録媒体５に対応するインターフェースを備え、携帯型記録媒体５を着脱可能に装備する。挿着時の携帯型記録媒体５は、制御部１５に電気的に接続される。

入力部１１は、各種スイッチ、入力キー、マウス、タッチパネル等を有し、表示画像の選択情報等、各種処理情報の入力を行う。画像表示装置４のオペレータとしての表示画像の観察者等は、この入力部１１を介して、表示画像の読み込み、選択、記録等の各種操作を行うことができる。なお、入力部１１は、ＵＳＢ、ＩＥＥＥ１３９４等、有線または無線の通信用インターフェースを備え、外部装置から画像の入力を行うようにしてもよい。

表示部１２は、液晶ディスプレイ等を備え、画像データ等の各種情報を表示する。表示部１２は、特に、携帯型記録媒体５または記憶部１４に記憶された画像データ等の各種データの表示と、画像表示装置４の観察者等に対して各種処理情報の入力依頼等を行うＧＵＩ（Graphical User Interface）画面の表示と、を行う。

記憶部１４は、各種処理プログラム等があらかじめ記憶されたＲＯＭと、各処理の処理パラメータ、処理データ等を記憶するＲＡＭとによって実現される。記憶部１４は、携帯型記録媒体５等を介して入力された画像データ、画像処理部１３によって処理された画像データ、画像表示制御部１５ａによって処理された表示制御データ等を記憶することができる。

画像処理部１３は、画像処理制御部１５ｂによる制御に基づいて、携帯型記録媒体５または記憶部１４から画像データを取得し、この取得した画像データに対して、濃度変換（ガンマ変換等）、平滑化（ノイズ除去等）、鮮鋭化（エッジ強調等）、画像認識（特徴画像領域の検出、平均色の演算等）等の各種画像処理を行う。

また、画像処理部１３は、特に、入力された一連の画像における平均色の演算を行う平均色演算部１３ａを備える。すなわち、平均色演算部１３ａは、一連の画像内の各画像を所定の複数の画像領域に分割し、分割した結果の各分割画像領域内の各画素が有する色情報を平均化した平均色としての領域平均色を算出する。また、平均色演算部１３ａは、所定の期間である部分撮像期間ごとに、一連の画像における複数画像の領域平均色を分割画像領域ごとに平均化した期間領域平均色を算出する。

制御部１５は、記憶部１４に記憶された各種処理プログラムを実行するＣＰＵ等によって実現される。制御部１５は、特に、画像表示制御部１５ａおよび画像処理制御部１５ｂを備える。画像表示制御部１５ａは、携帯型記録媒体５または記憶部１４に記憶された画像データとしての複数時点で撮像された一連の画像を表示部１２に表示させる制御を行う。本実施の形態１では特に、この一連の画像として、被検体１の各種臓器内を複数の時点で撮像した一連の被検体内画像が表示される。

また、画像表示制御部１５ａは、特に、一連の被検体内画像の撮像期間を示す時間スケールを表示するとともに、この時間スケール上の各時点の表示領域を分割画像領域に対応付けて分割し、分割した結果の各分割スケール領域に、この各分割スケール領域が対応付けられた分割画像領域の領域平均色、または期間領域平均色を表示する制御を行う。

より具体的には、平均色演算部１３ａが各画像を所定の分割方向に分割した場合、画像表示制御部１５ａは、時間スケール上の各時点の表示領域を、表示画面上で各画像の分割方向と同じ方向に分割し、分割した各分割スケール領域を、この分割順に各分割画像領域に対応付ける。そして、各分割スケール領域に、この各分割スケール領域が対応付けられた分割画像領域の領域平均色、または期間領域平均色表示する制御を行う。

この場合、画像表示制御部１５ａは、例えば平均色演算部１３ａが各画像を表示画面上で左右方向（または上下方向）に４分割した場合、時間スケール上の各時点の表示領域を、同様に表示画面上で左右方向（または上下方向）に４分割し、各分割スケール領域を分割順に各分割画像領域に対応付ける。すなわち、左端同士、右端同士等（または最上段同士、最下段同士等）の分割スケール領域と分割画像領域とを対応付ける。なお、時間スケールを左右方向（または上下方向）に分割する場合には、時間スケールの時間軸は上下方向（または左右方向）とすることが好ましい。また、分割画像領域および分割スケール領域の分割数は、４分割程度が好ましいが、４分割に限定して解釈する必要はない。

画像処理制御部１５ｂは、携帯型記録媒体５または記憶部１４に記憶された画像データを取得して画像処理部１３に出力するとともに、この出力した画像に対する各種画像処理の制御を行う。また、画像処理制御部１５ｂは、画像処理部１３における処理結果の画像データを記憶部１４または携帯型記録媒体５に出力して記憶させる。

つぎに、画像表示装置４が表示部１２に表示する表示画面（ＧＵＩ画面）について説明する。図３は、画像表示装置４が画像表示制御部１５ａによる制御に基づいて表示するＧＵＩ画面の一例を示す図である。図３に示すように、表示部１２には、ＧＵＩ画面としてのウインドウ２１（「診察・診断」ウインドウ）が表示される。ウインドウ２１内には、主表示画像等を表示する主表示領域２２と、アイコンとして示された各種画像操作ボタンを表示する画像操作領域２５と、一連の被検体内画像の撮像期間を示す時間スケールとしてのカラーバー２６およびタイムバー２７と、サムネイル画像等を表示する副表示領域２８とが、表示画面上でこの順に上方から下方へ並列表示される。

主表示領域２２内には、入力部３から入力された指示情報をもとに一連の被検体内画像の中から選択された画像である主表示画像２３と、被検体１上のアンテナ６ａ〜６ｈの配置を模式的に示すアンテナ配置図２４とが表示される。また、主表示領域２２内には、主表示画像２３として選択された被検体内画像に対応付けられている被検体１の名前、ＩＤ番号、性別、年齢、生年月日、撮像年月日、撮像時刻等が文字情報として表示される。なお、主表示領域２２には、所定操作に応じて２以上の所定数の主表示画像が表示可能である。

アンテナ配置図２４には、アンテナ６ａ〜６ｈの配置が被検体１の一部輪郭とともに模式的に表示される。また、アンテナ配置図２４には、アンテナ６ａ〜６ｈの近傍に、この各アンテナの識別番号としてのアンテナ番号が文字表示される。例えば図３では、アンテナ番号として「１」〜「８」が示されている。かかるアンテナ配置図２４では、主表示画像２３として表示された被検体内画像の撮像時に、アンテナ６ａ〜６ｈのうち最も受信強度が大きかった最大強度アンテナが、他のアンテナと識別可能に表示される。例えば図３では、最大強度アンテナとして、アンテナ番号「４」のアンテナが、他のアンテナと識別可能に表示された状態が示されている。なお、識別可能な表示として、画像表示制御部１５ａは、例えば最大強度アンテナの表示輝度、表示色相および表示彩度等のうち少なくとも１つを、他のアンテナと異ならせて表示させることができる。

カラーバー２６には、全体として、一連の被検体内画像に含まれる各画像の平均色が時系列に表示される。すなわち、カラーバー２６上の各時点の表示領域には、この時点に撮像された被検体内画像の平均色が表示される。一連の被検体内画像は、撮像した臓器に応じて特有の平均色を有するため、観察者等は、カラーバー２６上の時間軸（図３では横軸）に沿った平均色の推移から、各時点の被検体内画像に撮像された臓器を容易に判別することができる。

また、カラーバー２６は、特に、表示領域全体を表示画面上で上下方向に４分割して構成されており、分割された各段の分割カラーバー２６ａ〜２６ｄには、一連の被検体内画像の分割画像領域における対応する各段の領域平均色または期間領域平均色が時系列に表示される。すなわち、各被検体内画像の平均色は、上下方向に全画像領域を４分割した分割画像領域ごとに算出され、カラーバー２６には、各時点の表示領域を上下方向に４分割した分割スケール領域ごとに、この分割順に対応付けられた各分割画像領域の領域平均色または期間領域平均色が表示される。

かかるカラーバー２６によると、観察者等は、分割された各段の分割カラーバー２６ａ〜２６ｄの時間軸に沿った平均色の推移から、各時点の被検体内画像に撮像された臓器が推定できるだけでなく、撮像された臓器内部の状態を分割画像領域に応じて詳細に容易に認識することができる。これによって、観察者等は、例えばある期間の最上段の分割カラーバー２６ａに赤色系の平均色が視認された場合、この期間に撮像された臓器内部に出血部位が存在したこと、この期間の被検体内画像における最上段の分割画像領域に対応する撮像範囲に出血部位が存在したこと等が認識することができる。また、例えば管腔部を含む画像領域の黒色系の平均色と、他の画像領域の平均色とが異なる段の分割カラーバーに表示されることによって、管腔部を除いた撮像範囲の臓器内部の状態を認識することができる。

タイムバー２７には、このタイムバー２７上で時間軸方向に移動可能なスライダ２７ａが表示される。スライダ２７ａは、主表示画像２３として表示された被検体内画像の撮像時点をタイムバー２７上で指示するとともに、主表示画像２３の表示切替に連動してタイムバー２７上を移動する。例えば、画像操作領域２５内のいずれかの画像操作ボタンが図示しないマウス等によって操作された場合、主表示画像２３が切替表示されるとともに、スライダ２７ａは、この切替表示後に主表示画像２３として表示された被検体内画像の撮像時点を指示する位置に移動する。

また、これとは逆に、スライダ２７ａが図示しないマウス等によって移動操作された場合には、移動操作後にスライダ２７ａが指示する撮像時点に対応した被検体内画像が主表示画像２３として表示される。なお、スライダ２７ａが連続的に移動操作された場合、この移動操作に追随して、主表示画像２３は連続的に切替表示される。かかるスライダ２７ａによると、観察者等は、例えばカラーバー２６を参照して見出した所望の臓器の被検体内画像に対応する撮像時点にスライダ２７ａを移動操作することによって、この被検体内画像を即座に主表示画像２３として表示させることができる。

なお、時間スケールとしてのカラーバー２６およびタイムバー２７の左端は、一連の被検体内画像における時系列で先頭の画像の撮像時点を示し、同右端は、時系列で末尾の画像の撮像時点を示す。通常、この左端の撮像時点は、受信装置３による画像データの受信開始時点に相当し、右端の撮像時点は、画像データの受信終了時点に相当する。

副表示領域２８には、一連の被検体内画像の中から選択抽出された画像がサムネイル画像として表示される。具体的には、例えば、所定のボタン操作またはマウス操作等に応じて、この操作時点に主表示画像２３として表示されている被検体内画像がサムネイル画像として副表示領域２８に追加表示される。

また、副表示領域２８には、各サムネイル画像の近傍に撮像時点等の付加情報が文字情報として表示される。この文字情報として表示される付加情報は、所定操作に応じて切替可能であるとともに非表示可能である。さらに、副表示領域２８には、各サムネイル画像と、タイムバー２７上に示される各サムネイル画像の撮像時点と、を対応付ける線分が表示される。

なお、副表示領域２８には表示領域の大きさに制約があるため、所定数までのサムネイル画像が一括表示可能とされている。例えば図３には、最大５枚のサムネイル画像が一括表示可能な場合が示されている。抽出されたサムネイル画像が一括表示可能な所定数より多い場合、この所定数を超えたサムネイル画像は、副表示領域２８内に表示されるスクロールバーの操作に応じて切替表示される。また、副表示領域２８に表示されたサムネイル画像は、所定のボタン操作またはマウス操作等に応じて主表示画像２３として表示される。

ここで、本実施の形態１にかかる画像表示装置４におけるカラーバー２６の描画処理について説明する。図４は、カラーバー２６のＴｍ時点の分割スケール領域２６ａｍに期間領域平均色を描画する手順の概要を示す概念図である。

図４に示すように、カラーバー２６に期間領域平均色を描画するにあたって、まず、画像処理制御部１５ｂは、一連の被検体内画像の中から、時点Ｔｍに対応する所定の部分撮像期間内の所定数の被検体内画像Ｐ１〜Ｐｎを取得する。ここでは、被検体内画像Ｐ１〜Ｐｎとして、時系列で連続する画像、もしくは所定サンプリング期間で抽出される一連の画像が選択的に取得される。これらのいずれによって選択されるかは、所定操作に応じて任意に切替可能とされている。なお、ここで選択される画像は、１時点の画像であってもよい。

つづいて、画像処理制御部１５ｂは、画像処理部１３によって、各被検体内画像Ｐ１〜Ｐｎを複数の分割画像領域に分割する。例えば図４では、被検体内画像Ｐ１が上下方向に４つの分割画像領域Ｅ１１〜Ｅ１４に分割され、被検体内画像Ｐｎが分割領域Ｅｎ１〜Ｅｎ４に分割され、同様に、この間の各時点の被検体内画像が４つの分割画像領域に分割された状態を示している。

つぎに、画像処理制御部１５ｂは、平均色演算部１３ａによって、各被検体内画像Ｐ１〜Ｐｎの各分割画像領域の領域平均色を算出する。このとき、平均色演算部１３ａは、分割画像領域ごとに全ての画素、あるいは所定サンプリング間隔で抽出される複数画素の色情報を用いて領域平均色を算出する。これらのいずれによって演算を行うかは、所定操作に応じて任意に切替可能とされている。

つづいて、画像処理制御部１５ｂは、各被検体内画像Ｐ１〜Ｐｎの対応する分割画像領域の領域平均色を平均化して期間領域平均色を算出する。すなわち、４分割した各段の分割画像領域について領域平均色を平均化した期間領域平均色を算出する。具体的には、画像処理制御部１５ｂは、例えば図４において斜線で示す最上段の分割画像領域Ｅ１１，Ｅ２１，Ｅ３１〜Ｅ（ｎ−１）１，Ｅｎ１について、この各分割画像領域の領域平均色を平均化した期間領域平均色Ｅａｖｅ１を算出する。また、各段の分割画像領域群Ｅ１２〜Ｅｎ２，Ｅ１３〜Ｅｎ３，Ｅ１４〜Ｅｎ４についても同様に、各領域平均色を平均化した期間領域平均色Ｅａｖｅ２，Ｅａｖｅ３，Ｅａｖｅ４を算出する。

そして、画像処理制御部１５ｂは、これらの期間領域平均色Ｅａｖｅ１〜Ｅａｖｅ４を、被検体内画像Ｐ１〜Ｐｎにおける各段の分割画像領域と時点Ｔｍとに対応付け、カラーバー２６の時点Ｔｍにおける表示領域に対応する平均色群Ｐａｖｅｍとして記憶部１４に記録する。画像処理制御部１５ｂは、かかる一連の処理を、全撮像期間におけるすべての時点に対して繰り返す。

画像処理制御部１５ｂによって、カラーバー２６に描画する各時点のすべての平均色が算出された後、画像表示制御部１５ａは、記憶部１４から各時点の平均色群を取得して、各時点の分割スケール領域に、この各分割スケール領域に対応付けられた分割画像領域の期間領域平均色を描画する。具体的には、例えば図４では、最上段の分割カラーバー２６ａ内の時点Ｔｍにおける分割スケール領域２６ａｍに、最上段の分割画像領域を用いて時点Ｔｍについて算出された期間領域平均色Ｅａｖｅ１が描画されている。

同様にして、画像表示制御部１５ａは、カラーバー２６における各時点の各分割スケール領域に、それぞれ画像処理制御部１５ｂによって対応付けられた分割画像領域の期間領域平均色を描画する。なお、かかる描画処理において描画される期間領域平均色は、所定数の被検体内画像Ｐ１〜Ｐｎとして選択された画像が１時点の画像である場合には、この１時点の画像における領域平均色となる。

ここで、本実施の形態１にかかる画像表示装置４が行うカラーバー２６の描画処理の処理手順について説明する。図５は、カラーバー２６の描画処理手順を示すフローチャートである。図５に示すように、まず、画像処理制御部１５ｂは、携帯型記録媒体５あるいは記憶部１４に記憶された一連の被検体内画像の中から、時系列で先頭の時点に対応する所定の部分撮像期間内の所定数の被検体画像を読み込んで、画像処理制御部１３に出力する（ステップＳ１０１）。

つづいて、画像処理制御部１５ｂは、画像処理制御部１３によって、ステップＳ１０１で読み込んだ各被検体内画像を、所定の複数の分割画像領域に分割する（ステップＳ１０２）。このステップＳ１０２では、各被検体内画像は、例えば４つの分割画像領域に分割される。つぎに、画像処理制御部１５ｂは、平均色演算部１３ａによって、ステップＳ１０２で分割された各分割画像領域の領域平均色を演算するとともに、ステップＳ１０１で読み込んだすべての被検体内画像にわたって領域平均色を平均化して期間領域平均色を算出する平均色演算処理を行う（ステップＳ１０３）。

その後、画像処理制御部１５ｂは、ステップＳ１０３において算出された領域平均色および期間領域平均色を、処理対象の撮像時点と、被検体内画像における各段の分割画像とに対応付けて、記憶部１４に記録する（ステップＳ１０４）。そして、画像処理制御部１５ｂは、全撮像期間にわたって平均色演算処理を行ったか否かを判断する（ステップＳ１０５）。

全撮像期間で平均色を算出していない場合（ステップＳ１０５：Ｎｏ）、画像処理制御部１５ｂは、平均色を算出していない時点についてステップＳ１０１からの処理を繰り返す。一方、全撮像期間で平均色を算出している場合には（ステップＳ１０５：Ｙｅｓ）、画像処理制御部１５ｂは、各時点の分割した表示領域である分割スケール領域ごとにカラーバー２６を、この各分割スケール領域に対応付けられた期間領域平均色で描画して（ステップＳ１０６）、この一連のカラーバー描画処理を終了する。

つぎに、ステップＳ１０３の平均色演算手段について説明する。図６は、平均色演算処理の処理手順を示すフローチャートである。図６に示すように、平均色演算部１３ａは、まず、処理対象の各被検体内画像に対してデガンマ処理を行う（ステップＳ１１１）。つぎに、各被検体内画像の各分割画像領域の領域平均色を算出し（ステップＳ１１２）、処理対象のすべての被検体内画像にわたって領域平均色を平均化した期間領域平均色を算出する（ステップＳ１１３）。その後、処理対象の各被検体内画像に対してガンマ処理を行い（ステップＳ１１４）、ステップＳ１０３にリターンする。

なお、ステップＳ１０１で画像処理制御部１５ｂが読み込んだ画像が１時点の被検体内画像である場合には、ステップＳ１１３は省略される。また、この場合、ステップＳ１０６で画像表示制御部１５ａが描画する平均色は、期間領域平均色の代わりに領域平均色となる。

以上説明したように、本実施の形態１にかかる画像表示装置４では、画像表示制御部１５ａが、時間スケールとしてのカラーバー２６を表示するとともに、カラーバー２６上の各時点の表示領域を分割画像領域に対応付けて分割し、分割した結果の各分割スケール領域に、この各分割スケール領域が対応付けられた分割画像領域の期間領域平均色もしくは領域平均色を表示する制御を行うようにしているため、複数の時点で撮像された一連の被検体内画像の特徴を、カラーバー２６上で各分割画像領域に対応させた分割スケール領域ごとに全撮像期間にわたって表示することができ、観察者等に対して、各撮像時点における分割画像領域ごとの撮像対象の状態等を容易に認識可能にすることができる。

（実施の形態２）
つぎに、本発明の実施の形態２について説明する。上述した実施の形態１では、被検体内画像を一律に処理して平均色を算出するようにしていたが、本実施の形態２では、被検体内画像に含まれる出血部位等の特徴領域に重み付けを行って平均色を算出するようにしている。

図７は、本実施の形態２にかかる画像表示装置１０４の構成を示すブロック図である。図７に示すように、画像表示装置１０４は、画像表示装置４をもとに、画像処理部１３と制御部１５とのそれぞれに替えて、画像処理部１１３と制御部１１５とを備える。また、画像処理部１１３は、平均色演算部１１３ａと特徴領域検出部１１３ｂとを備え、制御部１１５は、制御部１５をもとに画像処理演算部１５ｂに替えて画像処理演算部１１５ｂを備える。その他の構成は実施の形態１と同じであり、同一構成部には同一符号を付している。

特徴領域検出部１１３ｂは、入力された各被検体内画像の各分割画像領域の中から所定の特徴を有する特徴画像領域としての特徴領域を検出する。すなわち、特徴領域検出部１１３ｂは、例えば被検体内画像を構成する各画素の色情報をもとに、出血部位等の所定の特徴を識別して特徴領域を検出する。なお、特徴領域検出部１１３ｂは、出血部位に限らず、たとえば、臓器内部の褪色部位、形状異常部位等、病変の疑いのある種々の部位を特徴領域として検出するようにしてもよい。また、特徴領域検出部１１３ｂは、色情報に限らず、輪郭形状、テクスチャ、濃度勾配等の各種特徴量をもとに特徴領域を検出するようにしてもよい。

平均色演算部１１３ａは、平均色演算部１３ａと同様に、入力された一連の画像における平均色の演算を行う。ただし、平均色演算部１１３ａは、領域平均色として、特徴領域検出部１１３ｂによって検出された特徴領域内の色情報と、特徴領域を除いた分割画像領域内の色情報とに異なる重み付けをして平均化した加重領域平均色を算出する。また、この加重領域平均色を用いて期間領域平均色を算出する。さらに、平均色演算部１１３ａは、期間領域平均色として、特徴領域を含む特徴画像の領域平均色および加重領域平均色と、特徴画像を除いた部分撮像期間における複数画像の領域平均色とに異なる重み付けをして平均化した加重期間領域平均色を算出することもできる。

ここで、画像表示装置１０４が行うカラーバー２６の描画処理の処理手順について説明する。図８は、カラーバー２６の描画処理手順を示すフローチャートである。図８に示すように、まず、画像処理制御部１１５ｂは、携帯型記録媒体５あるいは記憶部１４に記憶された一連の被検体内画像の中から、時系列で先頭の時点に対応する所定の部分撮像期間内の所定数の被検体画像を読み込みんで、画像処理制御部１１３に出力する（ステップＳ２０１）。

つづいて、画像処理制御部１１５ｂは、画像処理制御部１１３によって、ステップＳ２０１で読み込んだ各被検体内画像を、所定の複数の分割画像領域に分割する（ステップＳ２０２）。このステップＳ２０２では、各被検体内画像は、例えば４つの分割画像領域に分割される。つぎに、画像処理制御部１１５ｂは、特徴領域検出部１１３ｂによって、ステップＳ２０２で分割された各分割画像領域から出血部位等の所定の特徴を有した特徴領域を検出する（ステップＳ２０３）。つづいて、画像処理制御部１１５ｂは、平均色演算部１１３ａによって、平均色を算出する平均色演算処理を行う（ステップＳ２０４）。

その後、画像処理制御部１１５ｂは、ステップＳ２０４において算出された平均色を、処理対象の撮像時点と、被検体内画像における各段の分割画像とに対応付けて、記憶部１４に記録する（ステップＳ２０５）。そして、画像処理制御部１１５ｂは、全撮像期間にわたって平均色演算処理を行ったか否かを判断する（ステップＳ２０６）。

全撮像期間で平均色を算出していない場合（ステップＳ２０６：Ｎｏ）、画像処理制御部１１５ｂは、平均色を算出していない時点についてステップＳ２０１からの処理を繰り返す。一方、全撮像期間で平均色を算出している場合には（ステップＳ２０６：Ｙｅｓ）、画像処理制御部１１５ｂは、各時点の分割した表示領域である分割スケール領域ごとにカラーバー２６を、この各分割スケール領域に対応付けられた平均色で描画して（ステップＳ２０７）、この一連のカラーバー描画処理を終了する。

つぎに、ステップＳ２０４の平均色演算手段について説明する。図９は、平均色演算処理の処理手順を示すフローチャートである。図９に示す平均色演算処理は、ステップＳ２０３によって特量領域として出血部位が検出された場合の処理手順を例示している。

図９に示すように、平均色演算部１１３ａは、処理対象の各被検体内画像に対してデガンマ処理を行い（ステップＳ２１１）、ステップＳ２０３における特徴領域の検出結果に基づいて、各被検体内画像の各分割画像領域の中に出血部位があるか否かを判断する（ステップＳ２１２）。出血部位がない場合（ステップＳ２１２：Ｎｏ）、平均色演算部１１３ａは、図６に示したステップＳ１１２と同様に、各被検体内画像の各分割画像領域の領域平均色を算出する（ステップＳ２１３）。

一方、出血部位がある場合（ステップＳ２１４：Ｙｅｓ）、平均色演算部１１３ａは、各出血部位を示す特徴領域内の色情報に、特徴領域以外の分割画像領域の色情報に比べて大きな重み付けをして、分割画像領域ごとに色情報を平均化した加重領域平均色を算出する（ステップＳ２１４）。なお、このステップＳ２１４では、特徴領域以外の分割画像領域の色情報にかける重みをゼロとし、特徴領域内の色情報のみを用いて加重領域平均色を算出することもできる。

ステップ２１３またはステップＳ２１４の後、平均色演算部１１３ａは、処理対象の所定数の被検体内画像の中に、出血部位を含んだ出血画像があるか否かを判断し（ステップＳ２１５）、出血画像がない場合（ステップＳ２１５：Ｎｏ）、図６に示したステップＳ１１３と同様に、処理対象のすべての被検体内画像にわたって領域平均色を平均化した期間領域平均色を算出する（ステップＳ２１６）。

一方、出血画像がある場合（ステップＳ２１５：Ｙｅｓ）、平均色演算部１１３ａは、各出血画像の領域平均色および加重領域平均色に、出血画像以外の被検体内画像の領域平均色に比べて大きな重み付けをして平均化した加重期間領域平均色を算出する（ステップＳ２１７）。なお、このステップＳ２１７では、出血画像以外の被検体内画像にかける重みをゼロとして、出血画像の領域平均色および加重領域平均色のみを用いて加重期間領域平均色を算出することもできる。

ステップ２１６またはステップＳ２１７の後、平均色演算部１１３ａは、処理対象の各被検体内画像に対してガンマ処理を行い（ステップＳ２１８）、ステップＳ２０４にリターンする。

なお、ステップＳ２０１で画像処理制御部１１５ｂが読み込んだ画像が１時点の被検体内画像である場合には、ステップＳ２１５〜Ｓ２１７は省略される。また、この場合、ステップＳ２０７で画像表示制御部１１５ａが描画する平均色は、領域平均色もしくは加重領域平均色となる。

以上説明したように、本実施の形態２にかかる画像表示装置１０４では、特徴領域検出部１１３ｂが、各被検体内画像の各分割画像領域の中から出血部位等の所定の特徴を有する特徴領域を検出し、平均色演算部１１３ａが、特徴領域と、この特徴領域を含む特徴画像と、の少なくとも一方に重み付けをし、領域平均色としての加重領域平均色と、期間領域平均色としての加重期間領域平均色と、を算出するようにしているため、画像表示制御部１５ａは、カラーバー２６上の各分割スケール領域に、特徴領域の存在を強く反映した平均色を表示させ、各撮像時点における分割画像領域ごとに特徴領域の存在を強調した表示をさせることができ、観察者等に対して、撮像対象の特徴的な状態等を一層容易に認識可能にすることができる。また、これによって、観察者等は、出血部位等の特徴領域、すなわち注目すべき領域を含む被検体画像の見逃しを一層削減することができる。

なお、上述した実施の形態１および２では、本発明にかかる画像表示装置４，１０４が表示する一連の画像を、被検体１内に導入されたカプセル型内視鏡２を用いて撮像された一連の被検体内画像として説明したが、かかる被検体内画像に限定して解釈する必要はなく、複数の時点に撮像された一連の画像であれば任意の画像でよく、撮像装置や撮像対象も任意でよい。

本発明の実施の形態１にかかる無線型被検体内情報取得システムの構成を示す模式図である。 本発明の実施の形態１にかかる画像表示装置の構成を示すブロック図である。 図１に示した画像表示装置が表示する表示画面を示す図である。 図３に示したカラーバーの描画処理を説明する図である。 図１に示した画像表示装置が行うカラーバー描画処理手順を示すフローチャートである。 図５に示した平均色演算処理手順を示すフローチャートである。 本発明の実施の形態２にかかる画像表示装置の構成を示すブロック図である。 図７に示した画像表示装置が行うカラーバー描画処理手順を示すフローチャートである。 図８に示した平均色演算処理手順を示すフローチャートである。

符号の説明

１ 被検体
２ カプセル型内視鏡
３ 受信装置
４ 画像表示装置
５ 携帯型記録媒体
６ 受信アンテナ
６ａ〜６ｈ アンテナ
１１ 入力部
１２ 表示部
１３ 画像処理部
１３ａ 平均色演算部
１４ 記憶部
１５ 制御部
１５ａ 画像表示制御部
１５ｂ 画像処理制御部
２１ ウインドウ
２２ 主表示領域
２３ 主表示画像
２４ アンテナ配置図
２５ 画像操作領域
２６ カラーバー
２６ａ〜２６ｄ 分割カラーバー
２７ タイムバー
２７ａ スライダ
２８ 副表示領域

Claims (10)

1. 複数の時点で撮像された一連の画像とともに該一連の画像の撮像期間を示す時間スケールを表示する画像表示装置において、
   前記一連の画像内の各画像を所定の画像領域に分割した各分割画像領域の領域平均色を算出する平均色演算手段と、
   前記時間スケール上の各時点の表示領域を前記各分割画像領域に対応付けて分割した各分割スケール領域に、該各分割スケール領域が対応づけられた分割画像領域の前記領域平均色を表示する制御を行う表示制御手段と、
   を備えたことを特徴とする画像表示装置。
2. 前記領域平均色は、所定の部分撮像期間ごとに複数画像の前記領域平均色を前記分割画像領域ごとに平均化した期間領域平均色であることを特徴とする請求項１に記載の画像表示装置。
3. 前記各分割画像領域は、前記各画像を所定の分割方向に分割して形成され、
   前記表示制御手段は、前記時間スケール上の各時点の表示領域を表示画面上で前記分割方向と同じ方向に分割し、この分割順に前記各分割画像領域に対応付けた各分割スケール領域に、該各分割スケール領域が対応付けられた分割画像領域の前記領域平均色または前記期間領域平均色を表示する制御を行うことを特徴とする請求項１または２に記載の画像表示装置。
4. 前記各分割画像領域は、前記各画像を前記表示画面上で上下方向また左右方向に４分割して形成され、
   前記表示制御手段は、前記時間スケール上の各時点の表示領域を前記表示画面上で上下方向また左右方向に４分割し、この分割順に前記各分割画像領域に対応付けた各分割スケール領域に、該各分割スケール領域が対応付けられた分割画像領域の前記領域平均色または前記期間領域平均色を表示する制御を行うことを特徴とする請求項３に記載の画像表示装置。
5. 前記各画像の各分割画像領域の中から所定の特徴を有する特徴画像領域を検出する特徴領域検出手段を備え、
   前記平均色演算手段は、前記領域平均色として、前記特徴画像領域内の色情報と該特徴画像領域を除いた前記分割画像領域内の色情報とに異なる重み付けをして平均化した加重領域平均色を算出することを特徴とする請求項１〜４のいずれか一つに記載の画像表示装置。
6. 前記加重領域平均色は、所定の前記部分撮像期間ごとに複数画像の前記加重領域平均色を前記分割画像領域ごとに平均化した期間領域平均色であることを特徴とする請求項５に記載の画像表示装置。
7. 前記平均色演算手段は、前記期間領域平均色として、前記特徴画像領域を含む特徴画像の前記加重領域平均色と、該特徴画像を除いた前記部分撮像期間における複数画像の前記領域平均色とに異なる重み付けをして平均化した加重期間領域平均色を算出することを特徴とする請求項６に記載の画像表示装置。
8. 前記平均色演算手段は、前記部分撮像期間における所定サンプリング期間の一連の画像を用いて前記期間領域平均色を算出することを特徴とする請求項１〜７のいずれか一つに記載の画像表示装置。
9. 前記平均色演算手段は、前記分割画像領域における所定サンプリング間隔の各画素の色情報を用いて前記領域平均色を算出することを特徴とする請求項１〜８のいずれか一つに記載の画像表示装置。
10. 前記一連の画像は、被検体内に導入されたカプセル型内視鏡を用いて撮像された被検体内画像であることを特徴とする請求項１〜９のいずれか一つに記載の画像表示装置。

Images