JP5379442B2 - 画像表示装置 - Google Patents

画像表示装置 Download PDF

Info

Publication number
JP5379442B2
JP5379442B2 JP2008265699A JP2008265699A JP5379442B2 JP 5379442 B2 JP5379442 B2 JP 5379442B2 JP 2008265699 A JP2008265699 A JP 2008265699A JP 2008265699 A JP2008265699 A JP 2008265699A JP 5379442 B2 JP5379442 B2 JP 5379442B2
Authority
JP
Japan
Prior art keywords
image
display
representative
images
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2008265699A
Other languages
English (en)
Other versions
JP2010094185A (ja
Inventor
武志 西山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Medical Systems Corp
Original Assignee
Olympus Medical Systems Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Medical Systems Corp filed Critical Olympus Medical Systems Corp
Priority to JP2008265699A priority Critical patent/JP5379442B2/ja
Priority to EP10015493.9A priority patent/EP2316327B1/en
Priority to CN2009101778762A priority patent/CN101721199B/zh
Priority to EP09012976A priority patent/EP2177149A1/en
Priority to US12/578,878 priority patent/US20100097392A1/en
Publication of JP2010094185A publication Critical patent/JP2010094185A/ja
Application granted granted Critical
Publication of JP5379442B2 publication Critical patent/JP5379442B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Endoscopes (AREA)
  • Closed-Circuit Television Systems (AREA)

Description

本発明は、被検体の臓器内部に導入される体内撮像装置によって撮像された画像群を表示する画像表示装置に関するものである。
従来から、内視鏡分野においては、患者等の被検体の臓器内部の画像(以下、体内画像という場合がある)を撮像するために被検体内部に導入される体内撮像装置として、カプセル型筐体の内部に撮像機能および無線通信機能を備えた飲み込み型の内視鏡であるカプセル型内視鏡が登場している。カプセル型内視鏡は、起動後に被検体の口から飲み込まれ、その後、蠕動運動等によって臓器内部を移動し、最終的に被検体の外部に排出される。かかるカプセル型内視鏡は、被検体内部に導入されてから被検体外部に排出されるまでの期間、この被検体の体内画像を時系列に沿って順次撮像し、得られた体内画像を外部の受信装置に順次無線送信する。
外部の受信装置は、かかる被検体内部のカプセル型内視鏡によって無線送信された体内画像を順次受信する。なお、この受信装置には可搬型の記録媒体が予め挿着されており、カプセル型内視鏡から受信した体内画像群は、この記録媒体内に記録される。この記録媒体は、カプセル型内視鏡によって撮像された体内画像群を記録し終えた後、受信装置から取り外されて画像表示装置に挿着される。画像表示装置は、この挿着された記録媒体内の体内画像群のデータを取り込み、取得した体内画像群をディスプレイに順次表示する。医師または看護師等のユーザは、かかる画像表示装置に表示させた体内画像群を順次観察し、これによって被検体の臓器内部を検査することができる。
なお、かかる被検体の体内画像群を表示する画像表示装置として、例えば、カプセル型内視鏡によって撮像された画像群を擬似動画像として撮像順に順次表示するとともに、これら画像群の中から選択された画像の縮小画像を表示する画像表示装置がある(特許文献1参照)。また、カプセル型内視鏡によって撮像された画像群の中から体内画像群を抽出し、この抽出した体内画像群のうち実質的に同一なデータ以外の体内画像群を表示する画像表示装置もある(特許文献2参照)。
特開2006−55522号公報 特開2005−124965号公報
ところで、上述したカプセル型内視鏡は、一般に、被検体に経口摂取されてから被検体外部に排出されるまでの8時間以上に及ぶ期間、例えば0.5秒間隔で体内画像を順次撮像する。このため、かかるカプセル型内視鏡によって撮像される体内画像群の枚数は、6万枚に及ぶ膨大なものになる。
しかしながら、上述した特許文献1に開示された従来の画像表示装置では、被検体の体内画像群の観察を通して被検体の臓器内部を観察する場合、膨大な枚数の画像データ群を動画再生等によって1フレームずつ順次表示する必要があるので、被検体の臓器内部の観察に多大な時間が掛かるという問題点があった。また、上述した特許文献2に開示された従来の画像表示装置では、被検体の体内画像群のうち実質的に同一なデータ以外の体内画像群を表示するので、表示対象として抽出されなかった体内画像群の中に病変等の特徴的部位を撮像した体内画像が含まれる場合、かかる特徴的部位の画像を見落とす可能性があった。
本発明は、上記事情に鑑みてなされたものであって、被検体内部における特徴的部位の画像の見落としを抑制するとともに短時間に被検体の体内画像群を観察することができる画像表示装置を提供することを目的とする。
本願発明者等は、一覧表示した画像群の中から指定した画像に代表される潜在的な画像を更に一覧表示することにより、上記課題を解決できることを見出した。すなわち、本願発明は、時系列に沿って撮像された画像群を取得する画像取得手段と、前記画像取得手段が取得した画像群を表示する表示手段と、前記画像群の中から代表画像群を抽出して前記代表画像群を一覧表示するように前記表示手段を制御し、この一覧表示した前記代表画像群内の代表画像に代表される1つ以上の潜在画像を前記画像群の中から選択し、この選択した前記1つ以上の潜在画像を一覧表示するように前記表示手段を制御する制御手段と、を備えたことを特徴とする画像表示装置により、上記課題を解決する。
本発明によれば、被検体内部における特徴的部位の画像の見落としを抑制するとともに短時間に被検体の体内画像群を観察することが可能な画像表示装置を実現できるという効果を奏する。
以下、図面を参照して、本発明にかかる画像表示装置の好適な実施の形態を詳細に説明する。なお、以下では、本発明にかかる画像表示装置の一例として、被検体の臓器内部に導入される体内撮像装置の一例であるカプセル型内視鏡によって撮像された画像群を表示する画像表示装置を例示するが、この実施の形態によって本発明が限定されるものではない。
(実施の形態1)
図1は、本発明の実施の形態1にかかる画像表示装置の一構成例を模式的に示すブロック図である。図1に示すように、この実施の形態1にかかる画像表示装置1は、画像データの入出力を行うデータ入出力部2と、画像データおよびGUI(Graphical User Interface)等を表示する表示部3と、各種情報を入力する入力部4と、データ入出力部2によって入力された画像データ等を記憶する記憶部5と、かかる画像表示装置1の各構成部を制御する制御部6とを備える。
データ入出力部2は、時系列に沿って撮像された画像群を取得する画像取得手段として機能する。具体的には、データ入出力部2は、カード型メモリ等の可搬型の記録媒体を着脱可能な構造を有するドライブ等を用いて実現される。データ入出力部2は、制御部6の制御に基づいて、挿着された記録媒体内の保存データを読み取り、取得した保存データを制御部6に入力する。また、データ入出力部2は、挿着された記録媒体に対し、制御部6によって書き込み指示されたデータを書き込む。なお、かかるデータ入出力部2が記録媒体から取得するデータとして、例えば、カプセル型内視鏡が時系列に沿って順次撮像した体内画像等の画像群、この画像群内の各画像の撮像時刻を示す時間データ、このカプセル型内視鏡を臓器内部に導入した被検体を特定する患者名および患者ID等の患者データ等が挙げられる。また、かかるデータ入出力部2が記録媒体内に書き込むデータとして、例えば、被検体を特定する患者名や患者ID等の患者情報等が挙げられる。
表示部3は、データ入出力部2が取得した画像群を表示する表示手段として機能する。具体的には、表示部3は、CRTディスプレイまたは液晶ディスプレイ等の表示デバイスを用いて実現され、制御部6によって表示指示された画像等の各種情報およびGUIを表示する。図2は、この実施の形態1における表示部の表示態様の一具体例を示す模式図である。図2に示すように、表示部3には、一覧表示エリア11および詳細表示エリア12が形成される。表示部3は、制御部6によって表示指示された代表画像群DPを一覧表示エリア11内に静止画状態で表示し、制御部6によって表示指示された潜在画像群SPを詳細表示エリア12内に静止画状態で表示する。この場合、表示部3は、図2の矢印に示されるように時系列順に各画像を配列した態様で代表画像群DPを一覧表示し、かかる代表画像群DPと同じ配列態様で潜在画像群SPを一覧表示する。
なお、かかる代表画像群DP内の代表画像は、データ入出力部2によって取得した画像群の中から所定の抽出条件に基づいて抽出された画像である。また、かかる潜在画像群SP内の潜在画像は、この画像群のうちの代表画像を除く残りの画像であって、この一覧表示された代表画像群DP内の代表画像間に潜在する画像である。
また、表示部3は、代表画像群DPの一覧表示を指示する指示情報を入力するためのGUIである一覧表示アイコン13と、潜在画像群SPの一覧表示を指示する指示情報を入力するためのGUIである詳細表示アイコン14と、現在表示している代表画像群DPおよび潜在画像群SPの中から選択された画像の時間位置を示すためのGUIであるグラフィックバー15およびインジケータ16と、入力部4の操作に対応して移動可能なマウスカーソル17とを表示する。
グラフィックバー15は、図2に示すように時間スケールを付され、カプセル型内視鏡によって撮像された一連の画像の全体的な時間位置を示す。さらに、グラフィックバー15は、カプセル型内視鏡によって撮像された一連の画像の色情報をもとに作成したものであり、その色によって、体内と体外画像との区別、臓器の区別、残渣の有無などを示すことができる。かかるグラフィックバー15の時間スケールは、例えばカプセル型内視鏡が撮像した1フレーム目の画像の撮像時刻からの経過時間を示す。インジケータ16は、かかるグラフィックバー15に沿って移動して、現在表示している代表画像群DPおよび潜在画像群SPのうちのいずれかの画像の時間位置を示す。
なお、表示部3は、図2に示す代表画像群DPのうちのマウスカーソル17を合わせた代表画像のように、かかる代表画像群DPおよび潜在画像群SPの中から選択された画像を強調表示する。また、表示部3は、グラフィックバー15上のインジケータ16によって指し示されている時間位置に対応する画像、すなわち一覧表示エリア11内の代表画像または詳細表示エリア12内の潜在画像を強調表示する。一方、表示部3は、特に図2には図示しないが、カプセル型内視鏡を臓器内部に導入した被検体、すなわち代表画像群DPおよび潜在画像群SPに対応する被検体の患者データ等の被検体の体内画像群の観察に有用な各種情報を表示する。
入力部4は、キーボードおよびマウス等の入力デバイスを用いて実現され、ユーザによる入力操作に対応して制御部6に各種情報を入力する。具体的には、入力部4は、現に表示部3に表示されている各画像のうちのいずれかを指定する画像指定情報、制御部6に対して指示する各種指示情報等を制御部6に入力する。なお、かかる入力部4によって入力される画像指定情報として、例えば、一覧表示エリア11内の代表画像群DPに含まれる代表画像を指定する代表画像指定情報と、詳細表示エリア12内の潜在画像群SPに含まれる潜在画像を指定する潜在画像指定情報とが挙げられる。また、かかる入力部4によって入力される指示情報として、例えば、代表画像群DPの一覧表示を指示する表示指示情報、潜在画像群SPの一覧表示を指示する表示指示情報、一覧表示エリア11内に一覧表示する代表画像群DPのフレーム数を指示する表示数指示情報等が挙げられる。
なお、入力部4は、一覧表示エリア11内の代表画像群DPのうちの指定する代表画像にマウスカーソル17を合わせてクリック操作することによって、この代表画像を指定する代表画像指定情報を入力し、詳細表示エリア12内の潜在画像群SPのうちの指定する潜在画像にマウスカーソル17を合わせてクリック操作することによって、この潜在画像を指定する潜在画像指定情報を入力する。また、入力部4は、一覧表示アイコン13にマウスカーソル17を合わせてクリック操作することによって、代表画像群DPの一覧表示を指示する表示指示情報を入力し、詳細表示アイコン14にマウスカーソル17を合わせてクリック操作することによって、潜在画像群SPの一覧表示を指示する表示指示情報を入力する。
記憶部5は、RAM、EEPROM、またはハードディスク等の大容量の記録媒体を用いて実現され、制御部6によって書き込み指示された各種データ等を保存し、制御部6によって読み出し指示された保存データを制御部6に送信する。具体的には、記憶部5は、上述したデータ入出力部2によって取り込まれた画像群を格納する記憶エリアである全画像フォルダ5aと、上述した表示部3の一覧表示エリア11内に一覧表示する代表画像群DPを格納する記憶エリアである代表画像フォルダ5bとを有する。かかる記憶部5は、カプセル型内視鏡が時系列に沿って撮像した画像群、すなわち被検体の体内画像を含む一連の画像を全画像フォルダ5a内に格納し、この画像群の中から抽出された代表画像群DPを代表画像フォルダ5b内に格納する。また、記憶部5は、かかる画像データの他に、カプセル型内視鏡によって撮像された画像群内の各画像の時間データ、この画像群内の隣接画像間における各画像の類似度、被検体の患者データ等を記憶する。この場合、記憶部5内に保存される各画像データには、かかる画像毎の時間データおよび類似度が各々対応付けられる。
制御部6は、画像表示装置1の各構成部を制御するためのものであり、処理プログラムを実行するCPUと、処理プログラム等が予め記録されたROMと、各処理の演算パラメータ等を一時的に記憶するRAMとを用いて実現される。具体的には、制御部6は、上述したデータ入出力部2、表示部3、入力部4および記憶部5の各動作を制御し、且つ、かかる各構成部間における信号の入出力を制御する。より具体的には、制御部6は、入力部4によって入力された指示情報に基づいてデータ入出力部2を制御し、これによって、このデータ入出力部2内の記録媒体の保存データを取得する。制御部6は、この取得した保存データ、すなわちカプセル型内視鏡による画像群および各画像の時間データ等を記憶するように記憶部5を制御する。また、制御部6は、入力部4によって入力された代表画像指定情報に指定される代表画像を強調表示するとともに、この代表画像に対応するグラフィックバー15上の時間位置にインジケータ16を移動するように表示部3を制御する。同様に、制御部6は、入力部4によって入力された潜在画像指定情報に指定される潜在画像を強調表示するとともに、この潜在画像に対応するグラフィックバー15上の時間位置にインジケータ16を移動するように表示部3を制御する。
また、制御部6は、表示部3の一覧表示エリア11に一覧表示する代表画像を抽出する画像抽出部6aと、表示部3の詳細表示エリア12に一覧表示する潜在画像を選択する画像選択部6bとを有する。画像抽出部6aは、記憶部5の全画像フォルダ5a内に保存された一連の画像の中から複数の代表画像を抽出する。具体的には、制御部6は、入力部4によって入力された表示数指示情報をもとに代表画像の抽出数、すなわち表示部3の一覧表示エリア11に一覧表示する代表画像の表示数を設定する。画像抽出部6aは、データ入出力部2によって取得された画像群内の各画像の色情報または隣接画像間の動きベクトル等をもとに、この画像群内における隣接画像間の類似度を画像毎に算出する。かかる画像抽出部6aは、全画像フォルダ5a内に保存された画像群の中から、各画像の類似度をもとに、この設定表示数と同じフレーム数分の代表画像を抽出する。この場合、画像抽出部6aは、かかる各画像の類似度の昇順または降順に設定表示数分の代表画像を抽出する。制御部6は、かかる画像抽出部6aによって抽出された複数の代表画像のデータを代表画像フォルダ5b内に保存するように記憶部5を制御する。また、制御部6は、一覧表示アイコン13に対応する表示指示情報に基づいて、かかる複数の代表画像を一覧表示エリア11に一覧表示するように表示部3を制御する。なお、かかる画像抽出部6aによって抽出された複数の代表画像は、例えば図2に示した代表画像群DPとして表示部3の一覧表示エリア11内に一覧表示される。
画像選択部6bは、全画像フォルダ5a内に保存された画像群の中から、表示部3の一覧表示エリア11に一覧表示された代表画像群DP内の代表画像間に潜在する画像、すなわち潜在画像を1フレーム以上選択する。具体的には、画像選択部6bは、上述した代表画像指定情報によって指定される1フレーム以上の代表画像に代表される1フレーム以上の潜在画像、すなわち、この代表画像指定情報によって指定される代表画像とこの代表画像の前および後の少なくとも一方に隣接する他の代表画像との間に潜在する1フレーム以上の潜在画像を、全画像フォルダ5a内に保存された画像群の中から選択する。制御部6は、詳細表示アイコン14に対応する表示指示情報に基づいて、かかる画像選択部6bによって選択された1フレーム以上の潜在画像を詳細表示エリア12に一覧表示するように表示部3を制御する。なお、かかる画像選択部6bによって抽出された1フレーム以上の潜在画像は、例えば図2に示した潜在画像群SPとして表示部3の詳細表示エリア12内に一覧表示される。
つぎに、表示部3の一覧表示エリア11に代表画像群DPを一覧表示し、この代表画像群DP内の代表画像間に潜在する潜在画像を表示部3の詳細表示エリア12に一覧表示する場合を例示して、この実施の形態1にかかる画像表示装置1の動作を説明する。図3は、代表画像間に潜在する潜在画像を一覧表示するまでの画像表示装置の制御部の処理手順を例示するフローチャートである。画像表示装置1は、一覧表示エリア11に一覧表示された代表画像群DPの中から指定された代表画像に代表される潜在画像群SPを詳細表示エリア12に一覧表示する。
すなわち、図3に示すように、この画像表示装置1の制御部6は、表示部3の一覧表示エリア11内の代表画像群DPに含まれるいずれかの代表画像の指定の有無を判断する(ステップS101)。このステップS101において、制御部6は、入力部4によって代表画像指定情報を入力された場合、この代表画像指定情報に対応する代表画像の指定ありと判断し(ステップS101,Yes)、この入力された代表画像指定情報によって指定される代表画像を代表画像群DPの中から特定する(ステップS102)。
つぎに、制御部6は、このステップS102において特定した代表画像に代表される潜在画像の一覧表示指示の有無を判断する(ステップS103)。このステップS103において、制御部6は、入力部4によって詳細表示アイコン14に対応する表示指示情報を入力された場合、潜在画像の一覧表示指示ありと判断し(ステップS103,Yes)、ステップS102において特定した代表画像を含む代表画像間の潜在画像を選択する(ステップS104)。
このステップS104において、画像選択部6bは、記憶部5の代表画像フォルダ5b内に保存された各代表画像の中から、かかる各代表画像に対応付けられた時間情報をもとに、ステップS102における特定の代表画像と時系列的に隣接する他の代表画像を探し出す。そして、画像選択部6bは、記憶部5の全画像フォルダ5a内に保存された画像群の中から、この特定の代表画像に隣接する他の代表画像とこの特定の代表画像との間に潜在する1フレーム以上の潜在画像を選択する。
続いて、制御部6は、ステップS104において選択した1フレーム以上の潜在画像を詳細表示エリア12に一覧表示するように表示部3を制御し(ステップS105)、その後、上述したステップS101に戻り、このステップS101以降の処理手順を繰り返す。このステップS105において、表示部3は、かかる制御部6の制御に基づいて、例えば図2に示したように詳細表示エリア12内に潜在画像群SPを一覧表示する。
なお、制御部6は、上述したステップS101において代表画像指定情報を入力されていない場合、代表画像の指定なしと判断し(ステップS101,No)、このステップS101を繰り返す。一方、制御部6は、上述したステップS103において詳細表示アイコン14に対応する表示指示情報を入力されていない場合、潜在画像の一覧表示指示なしと判断し(ステップS103,No)、このステップS103を繰り返す。
つぎに、制御部6が入力部4の入力情報に基づいて代表画像の表示数を12フレームに設定した場合を例示して、表示部3の一覧表示エリア11に一覧表示した12フレームの代表画像群DP内の代表画像間に潜在する潜在画像を表示部3の詳細表示エリア12に一覧表示する際の画像表示装置1の動作を具体的に説明する。図4は、本発明の実施の形態1にかかる画像表示装置の動作を具体的に説明するための模式図である。以下、上述した図1,2および図4を参照しつつ、画像表示装置1の動作を具体的に説明する。
この実施の形態1にかかる画像表示装置1の制御部6は、カプセル型内視鏡によって時系列順に撮像された画像群APおよび各画像の時間データ等をデータ入出力部2から取得する。制御部6は、この取得した画像群AP内における隣接画像間の類似度を画像毎に算出し、得られた各隣接画像間の類似度および各時間データと画像群AP内の各画像とを各々対応付ける。制御部6は、かかる類似度および時間データを画像毎に対応付けた画像群APを記憶部5の全画像フォルダ5a内に保存する。また、制御部6は、入力部4によって入力された表示数指示情報をもとに、表示部3の一覧表示エリア11内に一覧表示する代表画像のフレーム数を例えば12フレームに設定する。
かかる制御部6は、図2に示した一覧表示アイコン13に対応する表示指示情報を入力された場合、この画像群APのうちの12フレームの代表画像群DPを一覧表示エリア11に表示するように表示部3を制御する。この場合、画像抽出部6aは、図4に示すように、この画像群APの中から、類似度の昇順に設定表示数と同数である12フレームの代表画像Pa,Pb,Pc,Pd,Pe,Pf,Pg,Ph,Pi,Pj,Pk,Pmを抽出する。制御部6は、このように抽出した12フレームの代表画像Pa,Pb,Pc,Pd,Pe,Pf,Pg,Ph,Pi,Pj,Pk,Pmを各類似度および各時間データと対応付けて記憶部5の代表画像フォルダ5b内に保存し、且つ、かかる12フレームの代表画像Pa,Pb,Pc,Pd,Pe,Pf,Pg,Ph,Pi,Pj,Pk,Pmを代表画像群DPとして一覧表示エリア11内に表示するように表示部3を制御する。
なお、このように類似度の昇順に抽出された代表画像Pa,Pb,Pc,Pd,Pe,Pf,Pg,Ph,Pi,Pj,Pk,Pmは、画像群APのうちの類似度の低い方から上位12フレームの画像である。具体的には、代表画像Pa,Pbは、被検体内部に導入される前のカプセル型内視鏡が撮像した画像すなわち体外画像であり、残りの代表画像Pc,Pd,Pe,Pf,Pg,Ph,Pi,Pj,Pk,Pmは、被検体内部に導入されたカプセル型内視鏡が撮像した臓器内部の画像すなわち体内画像である。
ここで、図4に示すように、代表画像群DPのうちの代表画像Phにマウスカーソル17を合わせて行われるクリック操作によって、代表画像Phを指定する代表画像指定情報が入力部4から制御部6に入力された場合、制御部6は、この入力された代表画像指定情報によって指定される代表画像Phを強調表示するように表示部3を制御する。その後、制御部6は、図2に示した詳細表示アイコン14に対応する表示指示情報を入力部4によって入力された場合、この代表画像Phを含む代表画像間に潜在する潜在画像群SPを詳細表示エリア12に表示するように表示部3を制御する。
具体的には、画像選択部6bは、代表画像フォルダ5b内の代表画像Pa,Pb,Pc,Pd,Pe,Pf,Pg,Ph,Pi,Pj,Pk,Pmの中から、この代表画像指定情報によって指定される代表画像Phと、この代表画像Phに時系列的に隣接する代表画像Pg,Piとを特定する。そして、画像選択部6bは、全画像フォルダ5a内の画像群APの中から、かかる代表画像Pgと代表画像Phとの間に潜在する全ての潜在画像Pg1〜Pg4と、代表画像Phと代表画像Piとの間に潜在する全ての潜在画像Ph1〜Ph5とを選択する。制御部6は、かかる画像選択部6bによって選択された潜在画像Pg1〜Pg4,Ph1〜Ph5を潜在画像群SPとして詳細表示エリア12内に表示するように表示部3を制御する。この場合、制御部6は、図4に示すように、かかる画像選択部6bによって選択された潜在画像Pg1〜Pg4,Ph1〜Ph5に、これらを代表する代表画像Pg,Ph,Piを含めた画像群を潜在画像群SPとして表示してもよい。
なお、かかる潜在画像Pg1〜Pg4は、代表画像Pgに代表される体内画像であり、代表画像Pgと代表画像Phとの間に時系列順に存在する。また、かかる潜在画像Ph1〜Ph5は、代表画像Phに代表される体内画像であり、代表画像Phと代表画像Piとの間に時系列順に存在する。
このような制御部6は、代表画像Ph以外の代表画像を指定する代表画像指定情報および詳細表示アイコン14に対応する表示指示情報を入力された場合も、上述した代表画像Phの場合と同様に、この入力された代表画像指定情報によって指定される代表画像を含む代表画像間に潜在する潜在画像群を詳細表示エリア12に表示するように表示部3を制御する。
以上、説明したように、本発明の実施の形態1では、時系列に沿って撮像された画像群の中から複数の代表画像を抽出し、この抽出した複数の代表画像を表示部に一覧表示するようにし、また、この一覧表示した複数の代表画像の中から指定された代表画像を含む代表画像間に潜在する1つ以上の潜在画像をこの画像群の中から選択し、この選択した1つ以上の潜在画像を表示部に一覧表示するように構成した。このため、時系列に沿って撮像された画像群の中から比較的類似度の低い複数の代表画像を一覧表示できるとともに、この一覧表示した複数の代表画像における所望の代表画像間に潜在する潜在画像を、例えば静止画の状態で容易に一覧表示することができる。これによって、一覧表示された複数の代表画像以外の残りの画像、すなわち潜在画像の中に被検体内部の病変部または出血部等の観察すべき特徴的部位の画像が含まれる場合であっても、かかる潜在画像の一覧表示によって特徴的部位の画像が画面表示される可能性が高まり、この結果、被検体内部における特徴的部位の画像の見落としを抑制するとともに短時間に被検体の体内画像群を観察することが可能な画像表示装置を実現することができる。
(実施の形態2)
つぎに、本発明の実施の形態2について説明する。上述した実施の形態1では、時系列に沿って撮像された画像群の中から抽出された代表画像群と、この代表画像群における代表画像間に潜在する1フレーム以上の潜在画像とを表示部3の各表示領域に一覧表示していたが、この実施の形態2では、表示部3に一覧表示した代表画像群の中から指定した代表画像と、この代表画像に代表される潜在画像とを非表示に設定できるようにしている。
図5は、本発明の実施の形態2にかかる画像表示装置の一構成例を模式的に示すブロック図である。図6は、本発明の実施の形態2における表示部の表示態様の一具体例を示す模式図である。図5に示すように、この実施の形態2にかかる画像表示装置21は、上述した実施の形態1にかかる画像表示装置1の制御部6に代えて制御部26を備える。また、この画像表示装置21において、表示部3は、図6に示すように、画像の非表示設定を指示するためのGUIである削除アイコン18を表示し、非表示設定の画像の時間位置を示すマークMをグラフィックバー15上に表示する。その他の構成は実施の形態1と同じであり、同一構成部分には同一符号を付している。
制御部26は、上述した実施の形態1における制御部6の画像抽出部6aに代えて画像抽出部26aを有し、画像選択部6bに代えて画像選択部26bを有する。さらに、制御部26は、画像のグループ化処理を行うグループ化処理部26cと、画像の非表示設定処理を行う非表示設定部26dとを有する。また、制御部26は、記憶部5の全画像フォルダ5a内に保存した画像群のうちの非表示設定部26dによって表示対象外に設定された画像に対応するグラフィックバー15上の時間位置に、図6に示すようなマークMを表示するように表示部3を制御する。なお、制御部26は、かかる画像抽出部26a、画像選択部26b、グループ化処理部26cまたは非表示設定部26dに関する各機能およびマークMの表示制御機能以外、上述した実施の形態1における制御部6と同様の機能を有する。
画像抽出部26aは、図6に示すように表示部3の一覧表示エリア11に一覧表示された代表画像群DPのうちの表示対象から削除された代表画像、すなわち非表示設定された代表画像と同数の代表画像を全画像フォルダ5a内の画像群の中から再抽出する。この場合、画像抽出部26aは、この全画像フォルダ5a内の画像群のうちの非表示設定されていない潜在画像の中から、既に抽出済みの代表画像に後続する順位の類似度を有する潜在画像をこの非表示設定された代表画像と同数分、新規の代表画像として抽出する。制御部26は、かかる画像抽出部26aによって再抽出された新規の代表画像を既に表示済みの代表画像に加えて一覧表示エリア11内に一覧表示するように表示部3を制御する。この場合、制御部26は、かかる新規の代表画像を含む代表画像群DPを時系列順に配列して一覧表示するように表示部3を制御する。なお、画像抽出部26aは、かかる代表画像の再抽出機能以外、上述した実施の形態1における制御部6の画像抽出部6aと同様の機能を有する。
画像選択部26bは、表示部3の一覧表示エリア11に一覧表示された代表画像群DP内の代表画像間に潜在する潜在画像のうち、非表示設定部26dによって非表示設定されていない潜在画像を選択する。この場合、画像選択部26bは、上述した代表画像指定情報によって指定される代表画像とこの代表画像の前および後の少なくとも一方に隣接する他の代表画像との間に潜在する全ての潜在画像のうちの非表示設定されていない潜在画像を、この全画像フォルダ5a内の画像群の中から選択する。かかる画像選択部26bによって選択された潜在画像は、制御部26の制御に基づいて、例えば図6に示す潜在画像群SPに例示されるように表示部3の詳細表示エリア12内に一覧表示される。
グループ化処理部26cは、画像の非表示設定を指示する非表示指示情報が入力部4によって入力された場合、上述した代表画像指定情報によって指定される代表画像と、この指定された代表画像の前後に隣接する2つの代表画像の間に潜在する1フレーム以上の潜在画像とをグループ化する。かかるグループ化処理部26cは、例えば、図6に示すように一覧表示エリア11内に一覧表示された代表画像群DPの中から指定された代表画像とこの代表画像に代表される全ての潜在画像とを含む時系列順の各画像を、一連の画像グループとしてグループ化処理する。なお、かかる非表示指示情報は、例えば図6に示す削除アイコン18にマウスカーソル17を合わせた状態で入力部4のクリック操作が行われた場合に、入力部4から制御部26に入力される。
非表示設定部26dは、全画像フォルダ5a内の画像群のうち、表示部3の表示対象から削除したい画像を非表示の画像に設定する。具体的には、非表示設定部26dは、入力部4によって非表示指示情報を入力された場合、上述した代表画像指定情報によって指定される代表画像または上述したグループ化処理部26cによってグループ化された一連の画像グーループ内の各画像に、表示部3の表示対象外の画像である旨を示す非表示フラグを付加する。これによって、非表示設定部26dは、かかる指定の代表画像または一連の画像グループ内の各画像を非表示画像に設定する。かかる非表示設定部26dは、上述した非表示指示情報が入力される都度、かかる画像の非表示設定処理を繰り返す。なお、制御部26は、かかる非表示フラグが付加された代表画像および潜在画像を表示しないように表示部3を制御する。
つぎに、表示部3の一覧表示エリア11に12フレームの代表画像群DPを一覧表示する場合を例示して、本発明の実施の形態2にかかる画像表示装置21の動作を具体的に説明する。図7は、本発明の実施の形態2にかかる画像表示装置の動作を具体的に説明するための模式図である。なお、この実施の形態2にかかる画像表示装置21の動作は、画像を非表示設定する際の動作と、非表示設定した代表画像と同数の新たな代表画像を一覧表示に追加する際の動作とを除き、上述した実施の形態1にかかる画像表示装置1と同様である。以下、図5〜7を参照しつつ、画像を非表示設定する際の画像表示装置21の動作と、非表示設定した代表画像と同数の新たな代表画像を一覧表示に追加する際の画像表示装置21の動作とを具体的に説明する。
この実施の形態2にかかる画像表示装置21の制御部26は、表示部3の一覧表示エリア11内に表示した12フレームの代表画像群DPのうちの代表画像Pa,Pb,Peを各々指定する代表画像指定情報が入力部4によって順次入力された場合、かかる各代表画像指定情報によって指定された各代表画像Pa,Pb,Peを強調表示するように表示部3を制御する。なお、かかる各代表画像Pa,Pb,Peの代表画像指定情報は、指定したい代表画像にマウスカーソル17を合わせてクリックするという入力部4の操作を順次繰り返すことによって入力される。
このような状態において、制御部26は、入力部4によって非表示指示情報を入力された場合、上述したように指定された少なくとも代表画像Pa,Pb,Peを表示部3の表示対象から削除する。この場合、非表示設定部26dは、画像抽出部26aによって画像群APから抽出された代表画像Pa,Pb,Pc,Pd,Pe,Pf,Pg,Ph,Pi,Pj,Pk,Pmのうち、代表画像指定情報によって指定された代表画像Pa,Pbに非表示フラグFを付加する。これによって、非表示設定部26dは、かかる代表画像Pa,Pbを非表示の画像に設定する。
また、グループ化処理部26cは、代表画像指定情報によって指定された代表画像Peと代表画像Peに代表される全ての潜在画像とを含む時系列順の各画像を一連の画像グループPeGとしてグループ化処理する。なお、この画像グループPeGに含まれる全潜在画像は、例えば、代表画像Peの後に隣接する代表画像Pfと代表画像Peとの間に潜在する潜在画像である。非表示設定部26dは、かかるグループ化処理部26cによってグループ化された画像グループPeG内の各画像、すなわち代表画像Peと代表画像Peに代表される全ての潜在画像とに非表示フラグFを付加する。これによって、非表示設定部26dは、かかる画像グループPeG内の各画像を非表示の画像に設定する。
このように代表画像Pa,Pbおよび画像グループPeG内の各画像に非表示フラグFが付加された場合、制御部26は、記憶部5の全画像フォルダ5a内の画像群APのうちの非表示フラグFが付加された各画像を表示部3の表示対象外とし、且つ、記憶部5の代表画像フォルダ5b内の代表画像群DPのうちの非表示フラグFが付加された代表画像Pa,Pb,Peを表示部3の表示対象外とする。
続いて、画像抽出部26aは、かかる非表示フラグFが付加された代表画像Pa,Pb,Peと同数、すなわち3フレーム分の代表画像を画像群APの中から新規に再抽出する。この場合、画像抽出部26aは、画像群APのうちの非表示フラグFが付加されていない画像の中から、既に抽出済みの代表画像Pc,Pd,Pf,Pg,Ph,Pi,Pj,Pk,Pmに後続する順位の類似度を有する潜在画像を新規の代表画像Px,Py,Pzとして抽出する。制御部26は、かかる画像抽出部26aによって再抽出された新規の代表画像Px,Py,Pzの各データを、上述した時間データおよび類似度と対応付けて代表画像フォルダ5b内に保存するように記憶部5を制御する。
その後、制御部26は、既に一覧表示エリア11内に一覧表示されている代表画像群DPの中から、かかる非表示フラグFを付加した代表画像Pa,Pb,Peを非表示にするとともに、これら非表示の代表画像Pa,Pb,Peと同数分の代表画像Px,Py,Pzを一覧表示エリア11内の一覧表示に追加するように表示部3を制御する。この場合、制御部26は、既存の代表画像Pc,Pd,Pf,Pg,Ph,Pi,Pj,Pk,Pmに新規の代表画像Px,Py,Pzを追加した態様の代表画像群DPを時系列順に配列して一覧表示するように表示部3を制御する。
かかる制御部26の制御に基づいて、表示部3は、図7に示す削除前の状態から削除・更新後の状態への表示態様変化のように、表示対象外の代表画像Pa,Pb,Peを削除するとともに、新規の代表画像Px,Py,Pzを一覧表示エリア11内に追加表示する。この場合、表示部3は、時系列的に代表画像Ph後であり且つ代表画像Piの前である代表画像Pxを代表画像Ph,Pi間に追加表示し、時系列的に代表画像Pi後であり且つ代表画像Pjの前である代表画像Pyを代表画像Pi,Pj間に追加表示し、時系列的に代表画像Pj後であり且つ代表画像Pkの前である代表画像Pzを代表画像Pj,Pk間に追加表示する。
なお、制御部26は、上述した非表示フラグFを付加した画像グループPeG内の各潜在画像を表示部3の詳細表示エリア12への表示対象から除外する。すなわち、制御部26は、代表画像Pdまたは代表画像Pfを指定する代表画像指定情報と詳細表示アイコン14に対応する表示指示情報とを入力された場合であっても、かかる非表示フラグFを付加した画像グループPeG内の各潜在画像を詳細表示エリア12に表示しないように表示部3を制御する。
ここで、上述した非表示フラグFを付加した非表示の代表画像Pa,Pb,Peは、被検体の臓器内部の観察に不要な画像である。具体的には、代表画像Pa,Pbは、被検体外部の画像であり、代表画像Peは、便等の残渣が多くて臓器内壁部の描画が少ない体内画像である。また、かかる代表画像Peに代表される画像グループPeG内の潜在画像は、この代表画像Peと同様に残渣の多い体内画像、すなわち被検体の臓器内部の観察に不要な画像である。上述したような構成を有する画像表示装置21は、かかる観察に不要な画像である代表画像Pa,Pb,Peを指定することによって、一覧表示エリア11内の一覧表示から代表画像Pa,Pb,Peを容易に削除するとともに、この削除した画像数分、被検体内部の病変部または出血部等の特徴的な部位が撮像された体内画像の可能性がある新規の代表画像Px,Py,Pzを追加表示する。この結果、画像表示装置21は、一覧表示の中から観察に不要な画像を低減するとともに、観察に有用な画像を表示する可能性を高めることができる。
なお、被検体の臓器内部の観察に不要な画像としては、上述した被検体外部の画像および残渣の多い体内画像の他に、病変部または出血部等の特徴的な部位が撮像されていない正常な体内画像、被検体内部のカプセル型内視鏡が停滞した状態で連続的に撮像した同じ被写体の画像等が挙げられる。
以上、説明したように、本発明の実施の形態2では、表示部に一覧表示した複数の代表画像の中から指定された1フレーム以上の代表画像を非表示にするとともに、この非表示に設定した代表画像と同数分の代表画像を新規に抽出し、この新規に抽出した同数分の代表画像を既存の代表画像の一覧表示内に追加するようにし、その他を実施の形態1と同様に構成した。このため、上述した実施の形態1と同様の作用効果を享受するとともに、表示部に一覧表示した代表画像の中から被検体の臓器内部の観察に不要な画像を容易に削除でき、且つ、この削除した代表画像の代わりに、観察に有用な画像の可能性がある代表画像を表示部に新規に一覧表示することができ、この結果、代表画像の一覧表示の中から観察に不要な代表画像を低減できるとともに、観察に有用な代表画像を表示する可能性を高めることができ、被検体内部の特徴的部位の見落としを一層抑制することができる。
また、この実施の形態2では、非表示に設定した代表画像に代表される1フレーム以上の潜在画像を非表示の画像に設定するので、表示部における潜在画像の一覧表示内に占める観察に不要な画像の表示数を低減することができ、これによって、観察に不要な代表画像を表示する確率を低減できるとともに、観察に有用な体内画像を表示する可能性を一層高めることができ、この結果、より短時間に被検体の体内画像群を観察することができる。
(実施の形態3)
つぎに、本発明の実施の形態3について説明する。上述した実施の形態2では、表示部3の一覧表示エリア11内に一覧表示された複数の代表画像の中から、非表示に設定する代表画像を指定していたが、この実施の形態3では、表示部3のグラフィックバー15によって示される画像の時間位置の中から非表示に設定する画像の時間位置を範囲指定し、この範囲指定されたグラフィックバー15上の時間位置に対応する画像を非表示に設定できるようにしている。
図8は、本発明の実施の形態3にかかる画像表示装置の一構成例を模式的に示すブロック図である。図9は、本発明の実施の形態3における表示部の表示態様の一具体例を示す模式図である。図10は、画像を非表示に設定するための設定メニューの一具体例を示す模式図である。図8に示すように、この実施の形態3にかかる画像表示装置31は、上述した実施の形態2にかかる画像表示装置21の制御部26に代えて制御部36を備える。また、この画像表示装置31において、表示部3は、入力部4の操作に応じて、図9に示すように画像の指定範囲Rをグラフィックバー15上に表示し、図10に示すように、画像を非表示に設定するための設定メニュー19を必要に応じて表示する。その他の構成は実施の形態2と同じであり、同一構成部分には同一符号を付している。
制御部36は、上述した実施の形態2における制御部26の非表示設定部26dに代えて非表示設定部36dを有する。非表示設定部36dは、上述した実施の形態2における非表示設定部26dと同様の機能を有し、さらに、入力部4によって入力された範囲指定情報と非表示指示情報とに基づいて指定範囲内の画像を非表示の画像に設定する機能を有する。
具体的には、制御部36は、表示部3のグラフィックバー15によって示される画像の時間位置の中から指定される時間位置の範囲を示す範囲指定情報と非表示指示情報とを入力部4によって入力される。非表示設定部36dは、記憶部5内に保存した代表画像および潜在画像等の画像群のうち、かかる範囲指定情報によって指定される時間位置の範囲に対応する全画像に非表示フラグFを付加し、これによって、かかる指定範囲内の全画像を非表示の画像に設定する。制御部36は、かかる非表示設定部36dによって非表示に設定された画像の時間位置に対応するグラフィックバー15上の位置に上述したマークMを表示するように表示部3を制御するとともに、かかる非表示に設定された画像を表示しないように表示部3を制御する。なお、制御部36は、かかる非表示設定部36dに関する機能以外、上述した実施の形態2にかかる画像表示装置21の制御部26と同様の機能を有する。
なお、この実施の形態3にかかる画像表示装置31において、表示部3は、制御部36の制御に基づいて、図9に示すように画像の指定範囲Rをグラフィックバー15上に表示する。かかる指定範囲Rは、グラフィックバー15によって示される全画像の時間位置の中から指定する時間位置の範囲を示すものであり、例えばマウスのドラッグ操作等の入力部4の操作に対応して表示部3に表示される。入力部4は、かかる指定範囲Rをグラフィックバー15上に形成する入力操作によって、この指定範囲Rに囲まれるグラフィックバー15上の時間位置の範囲を示す範囲指定情報を制御部36に入力する。
一方、図10に示す設定メニュー19は、マウスの右クリック操作等の入力部4の操作に対応して表示部3に表示される。入力部4は、かかる設定メニュー19の中から「表示対象外に設定する」旨の画像の非表示設定項目をクリック操作等によって選択した場合に、上述した範囲指定情報に対応する時間位置の範囲内の全画像を非表示に設定指示する非表示指示情報を制御部36に入力する。
つぎに、時系列に沿って撮像された画像群AP内に含まれる一部の連続画像群を非表示に設定する場合を例示して、本発明の実施の形態3にかかる画像表示装置31の動作を具体的に説明する。図11は、本発明の実施の形態3にかかる画像表示装置による画像の非表示設定動作を具体的に説明するための模式図である。なお、この実施の形態3にかかる画像表示装置31の動作は、グラフィックバー15上に指定される時間位置の指定範囲内の全画像を非表示設定する際の動作以外、上述した実施の形態2にかかる画像表示装置21と同様である。以下、図8,11を参照しつつ、グラフィックバー15上に指定された時間位置の指定範囲内の画像を非表示に設定する際の画像表示装置31の動作を具体的に説明する。
この実施の形態3にかかる画像表示装置31の制御部36は、グラフィックバー15上に指定範囲Rが形成された場合、この指定範囲Rに囲まれるグラフィックバー15上の時間位置範囲15aを示す範囲指定情報を入力部4によって入力される。このような状態において、制御部36は、入力部4によって非表示指示情報を入力された場合、記憶部5の全画像フォルダ5a内の画像群APのうち、この範囲指定情報によって示される時間位置範囲15aに対応する連続画像群PG1を表示部の表示対象外から除外する。
具体的には図11に示すように、非表示設定部36dは、この画像群APのうち、かかる時間位置範囲15aに対応する連続画像群PG1内の各画像に非表示フラグFを付加し、これによって、この連続画像群PG1内の全画像を非表示の画像に設定する。制御部36は、かかる非表示フラグFを付加した連続画像群PG1を表示しないように表示部3を制御する。
ここで、図11に示すように非表示設定された連続画像群PG1内に代表画像Phが含まれる場合、画像抽出部26aは、この画像群APのうちの非表示フラグFが付加されていない画像の中から、既に抽出済みの代表画像Pa,Pb,Pc,Pd,Pe,Pf,Pg,Pi,Pj,Pk,Pmに後続する順位の類似度を有する潜在画像を、この非表示の代表画像Phの代わりの代表画像として新規に抽出する。なお、かかる新規の代表画像は、上述した実施の形態2の場合と同様に、既存の代表画像Pa,Pb,Pc,Pd,Pe,Pf,Pg,Pi,Pj,Pk,Pmに加えて表示部3の一覧表示エリア11に一覧表示される。
以上、説明したように、本発明の実施の形態3では、時系列に沿って撮像された画像群内の各画像の時間位置を示すグラフィックバーの中から指定画像の時間位置範囲を指定し、非表示指示情報に基づいて、この時間位置範囲内の全画像を非表示の画像に設定するようにし、その他を実施の形態2と同様に構成した。このため、上述した実施の形態2と同様の作用効果を享受するとともに、このグラフィックバーによって示される各画像の時間位置の全範囲の中から、非表示に設定したい画像の時間位置の範囲を視認しつつ容易に指定でき、この指定した時間位置の範囲に対応する連続画像群を容易に非表示に設定することができる。この結果、時系列順の画像群の中から、同じ被写体の画像が複数連続する連続画像群等に例示されるような、被検体の臓器内部の観察に不要な連続画像群を容易に表示対象から除外することができ、これによって、より一層短時間に被検体の体内画像群を観察することができる。
(実施の形態4)
つぎに、本発明の実施の形態4について説明する。上述した実施の形態3では、表示部3のグラフィックバー15によって示される各画像の時間位置の中から指定される時間位置範囲内の全画像を非表示に設定していたが、この実施の形態4では、グラフィックバー15によって示される各画像の時間位置の中から表示対象の画像の時間位置を範囲指定し、この範囲指定されたグラフィックバー15上の時間位置に対応する各画像を選択的に表示できるようにしている。
図12は、本発明の実施の形態4にかかる画像表示装置の一構成例を模式的に示すブロック図である。図13は、画像を表示対象に設定するための設定メニューの一具体例を示す模式図である。図12に示すように、この実施の形態4にかかる画像表示装置41は、上述した実施の形態3にかかる画像表示装置31の制御部36に代えて制御部46を備える。また、この画像表示装置41において、表示部3は、図13に示すように、入力部4の操作に応じて、画像を表示対象または表示対象外に設定するための設定メニュー19を表示する。その他の構成は実施の形態3と同じであり、同一構成部分には同一符号を付している。
制御部46は、上述した実施の形態3における制御部36の画像抽出部26aに代えて画像抽出部46aを有し、画像選択部26bに代えて画像選択部46bを有する。かかる制御部46は、画像抽出部46aに関する機能および画像選択部46bに関する機能以外、上述した実施の形態3にかかる画像表示装置31の制御部36と同様の機能を有する。
画像抽出部46aは、上述した画像抽出部26aと同様の画像抽出機能を有し、さらに、入力部4によって入力された範囲指定情報と表示指示情報とに基づいて指定範囲内の代表画像を抽出する機能を有する。具体的には、上述した図9に例示した指定範囲Rに対応する範囲指定情報と設定メニュー19の表示設定項目に対応する表示指示情報とが入力部4によって制御部46に入力された場合、画像抽出部46aは、記憶部5の全画像フォルダ5a内の画像群の中から、この範囲指定情報によって指定される時間位置の範囲内に存在する代表画像を抽出する。この場合、画像抽出部46aは、かかる範囲指定情報によって指定される時間位置の範囲内の各画像の中から、上述した表示数指示情報に基づく設定表示数分の代表画像を抽出する。制御部46は、かかる画像抽出部46aによって抽出された設定表示数分の代表画像のデータを代表画像フォルダ5b内に上書きするように記憶部5を制御するとともに、かかる設定表示数分の代表画像を一覧表示エリア11に一覧表示するように表示部3を制御する。
なお、図13に示す設定メニュー19は、マウスの右クリック操作等の入力部4の操作に対応して表示部3に表示される。入力部4は、かかる設定メニュー19の中から「表示対象に設定する」旨の画像の表示設定項目をクリック操作等によって選択した場合に、上述した範囲指定情報に対応する時間位置の範囲内の全画像を表示対象に設定指示する表示指示情報を制御部46に入力する。
画像選択部46bは、記憶部5の全画像フォルダ5a内の画像群のうちの上述した範囲指定情報によって指定される時間位置の範囲内に存在する各画像の中から、表示部3の詳細表示エリア12に一覧表示する1フレーム以上の潜在画像を選択する。なお、画像選択部46bは、かかる範囲指定情報によって指定される時間位置の範囲内に存在する各画像の中から潜在画像を選択すること以外、上述した画像選択部26bと同様の機能を有する。
つぎに、時系列に沿って撮像された画像群AP内に含まれる一部の連続画像群を表示対象に設定する場合を例示して、本発明の実施の形態4にかかる画像表示装置41の動作を具体的に説明する。図14は、本発明の実施の形態4にかかる画像表示装置の動作を具体的に説明するための模式図である。なお、この実施の形態4にかかる画像表示装置41の動作は、グラフィックバー15上に指定される時間位置の指定範囲内の全画像を表示対象にする際の動作以外、上述した実施の形態3にかかる画像表示装置31と同様である。以下、図12,14を参照しつつ、グラフィックバー15上に指定された時間位置の指定範囲内の全画像を表示対象にする際の画像表示装置41の動作を具体的に説明する。
この実施の形態4にかかる画像表示装置41の制御部46は、グラフィックバー15上に指定範囲Rが形成された場合、この指定範囲Rに囲まれるグラフィックバー15上の時間位置範囲15bを示す範囲指定情報を入力部4によって入力される。このような状態において、表示対象に設定指示する表示指示情報が入力部4によって入力された場合、制御部46は、記憶部5の全画像フォルダ5a内の画像群APのうち、この範囲指定情報によって示される時間位置範囲15bに対応する連続画像群PG2を表示部の表示対象に設定する。
具体的には図14に示すように、画像抽出部46aは、この画像群APのうちの時間位置範囲15bに対応する連続画像群PG2内の各画像の中から、上述した設定表示数分の代表画像群DGを抽出する。制御部46は、かかる連続画像群PG2内から抽出した代表画像群DGの各画像データを代表画像フォルダ5b内に上書きするように記憶部5を制御するとともに、かかる代表画像群DGを上述した一覧表示エリア11に一覧表示するように表示部3を制御する。
なお、画像選択部46bは、上述した詳細表示アイコン14に対応する表示指示情報を入力された場合、かかる連続画像群PG2の中から、この表示指示情報によって表示指示される1フレーム以上の潜在画像を選択する。
以上、説明したように、本発明の実施の形態4では、時系列に沿って撮像された画像群内の各画像の時間位置を示すグラフィックバーの中から指定された時間位置範囲内の全画像を表示対象の画像とし、この指定した時間位置範囲内の全画像の中から設定表示数分の代表画像を抽出し、この抽出した設定表示数分の代表画像を表示部に一覧表示し、また、表示部に一覧表示する潜在画像をこの時間位置範囲内の全潜在画像の中から選択するようにし、その他を実施の形態3と同様に構成した。このため、上述した実施の形態3と同様の作用効果を享受するとともに、このグラフィックバーによって示される各画像の時間位置の全範囲の中から、表示対象に設定したい画像の時間位置の範囲を視認しつつ容易に指定でき、この指定した時間位置の範囲に対応する連続画像群を選択的に表示部に表示することができる。これによって、時系列順の画像群の中から、被検体の胃、小腸または大腸等の観察すべき消化管部位の連続画像群を選択的に表示対象にすることができ、この結果、観察したい被検体内部の連続画像群を選択的に一覧表示して、より一層短時間に被検体の体内画像群を観察することができる。
(実施の形態5)
つぎに、本発明の実施の形態5について説明する。上述した実施の形態1〜4では、代表画像間に潜在する潜在画像を静止画の状態で詳細表示エリア12に一覧表示していたが、この実施の形態5では、非表示フラグを付加した非表示設定の画像を除く表示対象の全画像を詳細表示エリア12に動画表示できるようにしている。
図15は、本発明の実施の形態5にかかる画像表示装置の一構成例を模式的に示すブロック図である。図16は、本発明の実施の形態5における表示部の表示態様の一具体例を示す模式図である。図15に示すように、この実施の形態5にかかる画像表示装置51は、上述した実施の形態4にかかる画像表示装置41の制御部46に代えて制御部56を備える。また、この画像表示装置51において、表示部3は、図16に示すように、動画モードを設定指示するためのGUIである動画モードアイコン100を表示し、動画モードに設定された場合、詳細表示エリア12内に画像を動画表示する際の表示操作を行うためのGUIである表示操作アイコン群101を表示する。その他の構成は実施の形態4と同じであり、同一構成部分には同一符号を付している。
制御部56は、動画モードを設定指示するモード設定指示情報を入力部4によって入力された場合、画像の表示動作モードを静止画モードから動画モードに切り替える。動画モードにおいて、制御部56は、上述した詳細表示エリア12を動画表示の表示エリアに設定するとともに、動画表示を操作するための表示操作アイコン群101を表示するように表示部3を制御する。制御部56は、かかる表示操作アイコン群101内の表示操作アイコンに対応する動画表示指示情報に基づいて、全画像フォルダ5a内の画像群に含まれる各画像を時系列順または時系列の逆順に順次動画再生する。この場合、制御部56は、全画像フォルダ5a内の画像群のうち、上述した非表示フラグFを付加した非表示設定の画像を除く残りの画像を詳細表示エリア12内に動画表示するように表示部3を制御する。かかる制御部56の制御に基づいて表示部3に動画表示される画像は、非表示フラグが付加されていない画像であれば、代表画像のみであってもよいし、潜在画像のみであってもよいし、代表画像および潜在画像の双方であってもよい。なお、制御部56は、かかる動画表示に関する機能以外、上述した実施の形態4にかかる画像表示装置41の制御部46と同様の機能を有する。
なお、この実施の形態5にかかる画像表示装置51において、入力部4は、動画モードアイコン100にマウスカーソル17を合わせてクリック操作することによって、動画モードを設定指示するモード設定指示情報を制御部56に入力する。また、入力部4は、表示操作アイコン群101内のいずれかの表示操作アイコンにマウスカーソル17を合わせてクリック操作することによって、このマウスカーソル17を合わせた表示操作アイコンに対応する動画表示指示情報を制御部56に入力する。
以上、説明したように、本発明の実施の形態5では、時系列に沿って撮像された画像群内の各画像のうちの非表示に設定した画像を除く残りの画像を動画表示するようにし、その他を実施の形態4と同様に構成した。このため、上述した実施の形態4と同様の作用効果を享受するとともに、被検体の臓器内部の観察に不要な画像以外の残りの各画像を動画表示することができる。これによって、表示部に動画表示する画像の表示数を必要最小限に低減できるとともに、被検体内部における病変部または出血部等の特徴的部位の画像が動画表示される可能性を高めることができ、この結果、動画再生による被検体の体内画像群の観察時間を短時間化することができる。
なお、上述した実施の形態1〜5では、時系列に沿って撮像された画像群内の各画像の時間位置をグラフィックバー15およびインジケータ16によって示していたが、これに限らず、カプセル型内視鏡の移動経路である被検体内部の消化管を模した消化管模式画像を用いて、かかる画像群内の各画像の撮像位置を示してもよい。
図17は、消化管模式画像を用いて各画像の時間位置を示す場合の表示部の表示態様を例示する模式図である。図17に示すように、表示部3は、上述したグラフィックバー15に代えて消化管模式画像15cを表示し、この消化管模式画像15cによって示される消化管内部にインジケータ16aを表示する。消化管模式画像15cは、被検体の体内画像を時系列に沿って順次撮像するカプセル型内視鏡の移動経路である消化管を模式的に示す。インジケータ16aは、かかる消化管模式画像15cによって示される消化管に沿って移動し、これによって被検体内部における各画像の撮像位置を示す。この場合、かかる消化管模式画像15c内の所望の消化管位置に指定範囲Rを形成することによって、この指定範囲R内の消化管位置において撮像された各画像を表示対象外または表示対象に設定することができる。例えば図17に示すように、消化管模式画像15c内の胃を囲むように指定範囲Rを形成した場合、設定メニュー19の「表示対象外に設定する」旨の非表示設定項目を選択すれば、胃内部を撮像した各画像を表示対象から除外することができ、設定メニュー19の「表示対象に設定する」旨の表示設定項目を選択すれば、胃内部を撮像した各画像を選択的に表示対象に設定することができる。なお、かかる消化管模式画像15cのうちの非表示設定の画像に対応する撮像位置には、上述したマークMを表示してもよい。
また、上述した実施の形態1〜5では、表示部3の一覧表示エリア11内に複数の代表画像を一覧表示し、この一覧表示エリア11とは別の表示エリアである詳細表示エリア12内に、代表画像間に潜在する1フレーム以上の潜在画像を一覧表示していたが、本発明はこれに限定されるものではない。図18は、代表画像間に潜在する潜在画像を一覧表示する詳細表示エリアの一変形例を示す模式図である。図19は、潜在画像の一覧表示例の別態様を示す模式図である。
本発明にかかる画像表示装置は、図18に示すように、一覧表示エリア11内に一覧表示した複数の代表画像における代表画像間に潜在する1フレーム以上の潜在画像を、この1フレーム以上の潜在画像が潜在する代表画像間の位置を指し示す態様の吹き出し状の詳細表示エリア12内に一覧表示してもよい。例えば図18においては、潜在画像群SPを一覧表示する吹き出し状の詳細表示エリア12は、この潜在画像群SPが潜在していた代表画像Pg,Ph間と代表画像Ph,Pi間とを指し示している。一方、本発明にかかる画像表示装置は、図19に示すように、代表画像を一覧表示する一覧表示エリア11内に潜在画像を一覧表示してもよい。この場合、画像表示装置は、一覧表示エリア11内における代表画像Pg,Ph間に、潜在画像群SPのうちの代表画像Pg,Ph間に潜在する各潜在画像を一覧表示し、代表画像Ph,Pi間に、この潜在画像群SPのうちの代表画像Ph,Pi間に潜在する各潜在画像を一覧表示する。
また、特に図示しないが、本発明にかかる画像表示装置は、代表画像の上段または下段に配列した態様で、この代表画像に代表される潜在画像を一覧表示してもよいし、代表画像の右側または左側に配列した態様で、この代表画像に代表される潜在画像を一覧表示してもよい。
一方、上述した実施の形態1〜5では、代表画像間に潜在する潜在画像を一覧表示する際に、一覧表示されている複数の代表画像のうちのいずれか一つを指定していたが、これに限らず、複数の代表画像を指定し、指定した複数の代表画像に各々代表される潜在画像を一覧表示してもよいし、一覧表示されている複数の代表画像のうちの2つの代表画像を指定し、この指定された2つの代表画像の間に潜在する潜在画像を一覧表示してもよい。この場合、かかる指定される2つの代表画像は、時系列的に隣接する代表画像同士であってもよいし、1フレーム以上の代表画像を間に挟んだ代表画像同士であってもよい。
また、上述した実施の形態2では、一覧表示されている複数の代表画像から指定した代表画像と、この代表画像に代表される各潜在画像とを表示対象外に設定していたが、これに限らず、指定された代表画像のみを表示対象外に設定してもよい。
さらに、上述した実施の形態3,4では、グラフィックバー15上に形成した指定範囲Rに対応する全画像を選択的に表示対象または表示対象外にしていたが、これに限らず、かかる指定範囲Rによって指定される全画像のうち、代表画像のみを選択的に表示対象または表示対象外にしてもよいし、潜在画像のみを選択的に表示対象または表示対象外にしてもよい。
また、上述した実施の形態1〜5では、指定された代表画像間に潜在する全ての潜在画像を一覧表示していたが、これに限らず、指定された代表画像間に潜在する全潜在画像のうちの1フレーム以上の潜在画像を一覧表示すればよく、例えば、1フレームずつ飛ばした態様で潜在画像を一覧表示してもよいし、複数フレームずつ飛ばした態様で潜在画像を一覧表示してもよい。
さらに、上述した実施の形態1〜5では、時系列に沿って撮像された画像群における隣接画像間での画像の類似度をもとに代表画像を抽出していたが、これに限らず、隣接画像間での画像の類似度以外の条件に基づいて代表画像を抽出してもよい。例えば、かかる画像群内の各画像のフレーム番号をもとに代表画像を抽出してもよいし、各画像の撮像時刻または撮像開始からの経過時間などの時間データをもとに代表画像を抽出してもよいし、各画像の撮像位置をもとに代表画像を抽出してもよいし、各画像をカプセル型内視鏡等の体内撮像装置の移動距離をもとに代表画像を抽出してもよいし、画像の動きの大きさをもとに代表画像を抽出してもよい。
また、上述した実施の形態1〜5では、被検体内部に導入されるカプセル型内視鏡によって撮像された時系列順の画像群を表示していたが、かかる画像群を撮像する体内撮像装置はカプセル型内視鏡に限らず、他の体内撮像装置であってもよく、例えば、本発明にかかる画像表示装置に表示する画像群は、被検体の消化管内部に挿入する挿入部の先端に撮像部等を内蔵した内視鏡によって撮像された画像群であってもよい。
さらに、上述した実施の形態1〜5では、データ入出力部2に挿着された記録媒体内に表示済みの画像群を保存できるようにしていたが、これに限らず、表示済みの画像群のうちの表示対象外に設定された画像をデータ入出力部2内の記録媒体に出力しないようにし、このデータ入出力部2内の記録媒体に、表示対象外の画像を除く残りの画像を記録するようにしてもよい。
また、上述した実施の形態1〜5では、各画像を一覧表示する際、表示画面に向かって左から右に向けて時系列順に各画像を配列し、且つ上から下に向けて時系列順に各画像を配列していたが、これに限らず、一覧表示する各画像は、時系列順に配列されていれば所望の配列態様であってもよく、例えば、表示画面に向かって右から左に向けて時系列順に各画像を配列してもよいし、表示画面に向かって下から上に向けて時系列順に各画像を配列してもよい。なお、いずれの配列態様であっても、代表画像の一覧表示エリア11と潜在画像の詳細表示エリア12との各配列態様は互いに同様であることが望ましい。
本発明の実施の形態1にかかる画像表示装置の一構成例を模式的に示すブロック図である。 この実施の形態1における表示部の表示態様の一具体例を示す模式図である。 代表画像間に潜在する潜在画像を一覧表示するまでの画像表示装置の制御部の処理手順を例示するフローチャートである。 本発明の実施の形態1にかかる画像表示装置の動作を具体的に説明するための模式図である。 本発明の実施の形態2にかかる画像表示装置の一構成例を模式的に示すブロック図である。 本発明の実施の形態2における表示部の表示態様の一具体例を示す模式図である。 本発明の実施の形態2にかかる画像表示装置の動作を具体的に説明するための模式図である。 本発明の実施の形態3にかかる画像表示装置の一構成例を模式的に示すブロック図である。 本発明の実施の形態3における表示部の表示態様の一具体例を示す模式図である。 画像を非表示に設定するための設定メニューの一具体例を示す模式図である。 本発明の実施の形態3にかかる画像表示装置による画像の非表示設定動作を具体的に説明するための模式図である。 本発明の実施の形態4にかかる画像表示装置の一構成例を模式的に示すブロック図である。 画像を表示対象に設定するための設定メニューの一具体例を示す模式図である。 本発明の実施の形態4にかかる画像表示装置の動作を具体的に説明するための模式図である。 本発明の実施の形態5にかかる画像表示装置の一構成例を模式的に示すブロック図である。 本発明の実施の形態5における表示部の表示態様の一具体例を示す模式図である。 消化管模式画像を用いて各画像の時間位置を示す場合の表示部の表示態様を例示する模式図である。 代表画像間に潜在する潜在画像を一覧表示する詳細表示エリアの一変形例を示す模式図である。 潜在画像の一覧表示例の別態様を示す模式図である。
符号の説明
1,21,31,41,51 画像表示装置
2 データ入出力部
3 表示部
4 入力部
5 記憶部
5a 全画像フォルダ
5b 代表画像フォルダ
6,26,36,46,56 制御部
6a,26a,46a 画像抽出部
6b,26b,46b 画像選択部
11 一覧表示エリア
12 詳細表示エリア
13 一覧表示アイコン
14 詳細表示アイコン
15 グラフィックバー
15a,15b 時間位置範囲
15c 消化管模式画像
16,16a インジケータ
17 マウスカーソル
18 削除アイコン
19 設定メニュー
26c グループ化処理部
26d,36d 非表示設定部
100 動画モードアイコン
101 表示操作アイコン群
AP 画像群
DP 代表画像群
F 非表示フラグ
M マーク
Pa〜Pm,Px〜Pz 代表画像
PeG 画像グループ
PG1,PG2 連続画像群
Pg1〜Pg4,Ph1〜Ph5 潜在画像
R 指定範囲
SP 潜在画像群

Claims (10)

  1. 時系列に沿って撮像された画像群を取得する画像取得手段と、
    前記画像取得手段が取得した画像群を表示する表示手段と、
    前記画像群の中から代表画像群を抽出して前記代表画像群を一覧表示するように前記表示手段を制御し、この一覧表示した前記代表画像群内の代表画像に代表される1つ以上の潜在画像を前記画像群の中から選択し、この選択した前記1つ以上の潜在画像を一覧表示するように前記表示手段を制御する制御手段と、
    前記代表画像群の中から1つ以上の代表画像を指定する代表画像指定情報と、画像の非表示を指示する非表示指示情報と、を入力する入力手段と、を備え
    前記制御手段は、前記代表画像群のうちの前記代表画像指定情報によって指定される1つ以上の代表画像に代表される前記1つ以上の潜在画像を前記画像群の中から選択し、この選択した前記1つ以上の潜在画像を一覧表示するように前記表示手段を制御し、前記入力手段によって前記非表示指示情報が入力された場合、前記代表画像指定情報によって指定される1つ以上の代表画像を非表示にするように前記表示手段を制御するとともに、前記画像群のうちの前記代表画像群を除く潜在画像群の中から、前記非表示にした代表画像と同じフレーム数の代表画像を抽出し、この抽出した前記フレーム数の代表画像を含む前記代表画像群を一覧表示するように前記表示手段を制御することを特徴とする画像表示装置。
  2. 前記制御手段は、前記代表画像指定情報によって指定される代表画像と該代表画像に時系列的に隣接する他の代表画像との間に潜在する前記1つ以上の潜在画像を前記画像群の中から選択し、この選択した前記1つ以上の潜在画像を一覧表示するように前記表示手段を制御することを特徴とする請求項に記載の画像表示装置。
  3. 前記制御手段は、前記入力手段によって前記非表示指示情報入力された場合、前記代表画像指定情報によって指定される1つ以上の代表画像と該1つ以上の代表画像に代表される1つ以上の潜在画像とを非表示にするように前記表示手段を制御することを特徴とする請求項に記載の画像表示装置。
  4. 前記制御手段は、前記入力手段によって前記非表示指示情報入力された場合、前記代表画像指定情報によって指定される代表画像と該代表画像の前後に隣接する2つの代表画像の間に潜在する1つ以上の潜在画像とをグループ化し、このグループ化した代表画像および潜在画像を非表示にするように前記表示手段を制御することを特徴とする請求項に記載の画像表示装置。
  5. 前記入力手段は、前記画像群の中から所望の連続画像群を指定する画像群指定情報入力し、
    前記制御手段は、前記入力手段によって前記非表示指示情報を入力された場合、前記画像群指定情報によって指定される連続画像群内の代表画像および潜在画像を非表示にするように前記表示手段を制御することを特徴とする請求項1〜4のいずれか一つに記載の画像表示装置。
  6. 前記制御手段は、予め設定したフレーム数の前記代表画像群を一覧表示するように前記表示手段を制御することを特徴とする請求項1〜5のいずれか一つに記載の画像表示装置。
  7. 前記入力手段は、画像の一覧表示を指示する表示指示情報を入力し、
    前記制御手段は、前記入力手段によって前記表示指示情報を入力された場合、前記画像群の中から前記代表画像指定情報によって指定される1つ以上の代表画像を抽出して該1つ以上の代表画像を一覧表示にするように前記表示手段を制御することを特徴とする請求項1〜6のいずれか一つに記載の画像表示装置。
  8. 前記入力手段は、前記画像群の中から所望の連続画像群を指定する画像群指定情報を入力し、
    前記制御手段は、前記入力手段によって前記表示指示情報を入力された場合、前記画像群指定情報によって指定される連続画像群内の代表画像および潜在画像を一覧表示するように前記表示手段を制御することを特徴とする請求項に記載の画像表示装置。
  9. 前記制御手段は、時系列順に配列した態様で前記代表画像群を一覧表示するように前記表示手段を制御することを特徴とする請求項1〜のいずれか一つに記載の画像表示装置。
  10. 前記制御手段は、前記代表画像群と同じ配列態様で前記1つ以上の潜在画像を一覧表示するように前記表示手段を制御することを特徴とする請求項に記載の画像表示装置。
JP2008265699A 2008-10-14 2008-10-14 画像表示装置 Expired - Fee Related JP5379442B2 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2008265699A JP5379442B2 (ja) 2008-10-14 2008-10-14 画像表示装置
EP10015493.9A EP2316327B1 (en) 2008-10-14 2009-10-14 Image display device, image display method, and image display program
CN2009101778762A CN101721199B (zh) 2008-10-14 2009-10-14 图像显示装置以及图像显示方法
EP09012976A EP2177149A1 (en) 2008-10-14 2009-10-14 Image display device, image display method, and image display program
US12/578,878 US20100097392A1 (en) 2008-10-14 2009-10-14 Image display device, image display method, and recording medium storing image display program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008265699A JP5379442B2 (ja) 2008-10-14 2008-10-14 画像表示装置

Publications (2)

Publication Number Publication Date
JP2010094185A JP2010094185A (ja) 2010-04-30
JP5379442B2 true JP5379442B2 (ja) 2013-12-25

Family

ID=42256310

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008265699A Expired - Fee Related JP5379442B2 (ja) 2008-10-14 2008-10-14 画像表示装置

Country Status (1)

Country Link
JP (1) JP5379442B2 (ja)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5725745B2 (ja) * 2010-07-05 2015-05-27 株式会社東芝 X線診断装置及び医用画像診断装置
CN104350742B (zh) * 2012-06-29 2018-07-06 基文影像公司 用于显示图像流的***和方法
JP5948200B2 (ja) * 2012-09-27 2016-07-06 オリンパス株式会社 画像処理装置、プログラム及び画像処理方法
JP6242072B2 (ja) 2012-09-27 2017-12-06 オリンパス株式会社 画像処理装置、プログラム及び画像処理装置の作動方法
JP6006112B2 (ja) * 2012-12-28 2016-10-12 オリンパス株式会社 画像処理装置、画像処理方法及びプログラム
WO2015033634A1 (ja) * 2013-09-09 2015-03-12 オリンパスメディカルシステムズ株式会社 画像表示装置、画像表示方法、及び画像表示プログラム
WO2017006618A1 (ja) * 2015-07-09 2017-01-12 オリンパス株式会社 サーバ、内視鏡システム、送信方法およびプログラム
WO2017158901A1 (ja) * 2016-03-18 2017-09-21 オリンパス株式会社 画像処理装置、画像処理装置の作動方法、及び画像処理プログラム
JP2020127440A (ja) * 2017-04-28 2020-08-27 オリンパス株式会社 内視鏡画像観察支援システム
WO2019039259A1 (ja) 2017-08-25 2019-02-28 富士フイルム株式会社 診断支援システム、内視鏡システム、プロセッサ、及び診断支援方法
KR20230071409A (ko) * 2021-11-16 2023-05-23 주식회사 아이도트 캡슐 내시경 영상 판독 시스템

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4854957B2 (ja) * 2004-12-15 2012-01-18 富士フイルム株式会社 代表画像選択装置および方法並びにプログラム
JP2006288612A (ja) * 2005-04-08 2006-10-26 Olympus Corp 画像表示装置
JP4716025B2 (ja) * 2006-05-22 2011-07-06 富士フイルム株式会社 画像表示装置、表示制御プログラム及び撮影装置
JP4914680B2 (ja) * 2006-09-05 2012-04-11 オリンパスメディカルシステムズ株式会社 画像表示装置
JP4666657B2 (ja) * 2007-03-28 2011-04-06 オリンパスイメージング株式会社 画像再生装置、撮像装置、画像表示プログラム、記録媒体、画像表示方法

Also Published As

Publication number Publication date
JP2010094185A (ja) 2010-04-30

Similar Documents

Publication Publication Date Title
JP5379442B2 (ja) 画像表示装置
EP2316327B1 (en) Image display device, image display method, and image display program
US8918740B2 (en) Image management apparatus, method, and computer-readable recording medium and capsule endoscope system
US8216129B2 (en) Image display apparatus, endoscope system using the same, and image display method
JP4594835B2 (ja) 画像表示装置
US8194096B2 (en) Image display apparatus
US20090051691A1 (en) Image display apparatus
JP4441464B2 (ja) 画像表示装置
US9411932B2 (en) Image management apparatus
JP2008295490A (ja) カプセル内視鏡画像表示装置
JP2006149684A (ja) 画像表示装置
JP4891646B2 (ja) 画像表示装置
JP2009050321A (ja) 画像処理装置
WO2007023771A1 (ja) 画像表示装置
JP2008119146A (ja) 画像表示装置
US20080232702A1 (en) Image display apparatus
JP4472602B2 (ja) 画像表示装置
JP5231160B2 (ja) 画像表示装置、画像表示方法、および画像表示プログラム
JP2007058334A (ja) ファイリング装置およびファイリングシステム
JP5684300B2 (ja) 画像表示装置、画像表示方法、および画像表示プログラム
JP2006345929A (ja) 画像表示装置
JP4590444B2 (ja) 画像表示装置、画像表示方法および画像表示プログラム
JP4663698B2 (ja) 画像表示装置、画像表示方法および画像表示プログラム
JP2006061626A (ja) 画像表示装置、画像表示方法および画像表示プログラム
JP4354353B2 (ja) 挿入支援システム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110323

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20121214

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130305

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130417

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130903

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130927

R151 Written notification of patent or utility model registration

Ref document number: 5379442

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees