JP5379442B2 - Image display device - Google Patents
Image display device Download PDFInfo
- Publication number
- JP5379442B2 JP5379442B2 JP2008265699A JP2008265699A JP5379442B2 JP 5379442 B2 JP5379442 B2 JP 5379442B2 JP 2008265699 A JP2008265699 A JP 2008265699A JP 2008265699 A JP2008265699 A JP 2008265699A JP 5379442 B2 JP5379442 B2 JP 5379442B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- display
- representative
- images
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 239000000284 extract Substances 0.000 claims description 14
- 238000001727 in vivo Methods 0.000 description 38
- 238000010586 diagram Methods 0.000 description 35
- 238000000605 extraction Methods 0.000 description 30
- 239000002775 capsule Substances 0.000 description 28
- 230000006870 function Effects 0.000 description 20
- 210000001035 gastrointestinal tract Anatomy 0.000 description 19
- 210000000056 organ Anatomy 0.000 description 17
- 238000003384 imaging method Methods 0.000 description 14
- 238000012545 processing Methods 0.000 description 13
- 238000011503 in vivo imaging Methods 0.000 description 6
- 238000000034 method Methods 0.000 description 5
- 230000000740 bleeding effect Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 230000004044 response Effects 0.000 description 4
- 210000002784 stomach Anatomy 0.000 description 4
- 230000001174 ascending effect Effects 0.000 description 3
- 230000003902 lesion Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 238000012217 deletion Methods 0.000 description 2
- 230000037430 deletion Effects 0.000 description 2
- 230000004913 activation Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 210000002429 large intestine Anatomy 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000002572 peristaltic effect Effects 0.000 description 1
- 210000000813 small intestine Anatomy 0.000 description 1
- 210000001835 viscera Anatomy 0.000 description 1
Images
Landscapes
- Endoscopes (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
Description
本発明は、被検体の臓器内部に導入される体内撮像装置によって撮像された画像群を表示する画像表示装置に関するものである。 The present invention relates to an image display device that displays a group of images captured by an in-vivo imaging device introduced into an organ of a subject.
従来から、内視鏡分野においては、患者等の被検体の臓器内部の画像(以下、体内画像という場合がある)を撮像するために被検体内部に導入される体内撮像装置として、カプセル型筐体の内部に撮像機能および無線通信機能を備えた飲み込み型の内視鏡であるカプセル型内視鏡が登場している。カプセル型内視鏡は、起動後に被検体の口から飲み込まれ、その後、蠕動運動等によって臓器内部を移動し、最終的に被検体の外部に排出される。かかるカプセル型内視鏡は、被検体内部に導入されてから被検体外部に排出されるまでの期間、この被検体の体内画像を時系列に沿って順次撮像し、得られた体内画像を外部の受信装置に順次無線送信する。 2. Description of the Related Art Conventionally, in the endoscope field, a capsule-type housing has been used as an in-vivo imaging device that is introduced into a subject in order to take an image inside an organ of the subject such as a patient (hereinafter, sometimes referred to as an in-vivo image). A capsule endoscope, which is a swallowable endoscope having an imaging function and a wireless communication function, has appeared in the body. The capsule endoscope is swallowed from the mouth of the subject after activation, and then moves inside the organ by a peristaltic motion or the like, and is finally discharged to the outside of the subject. Such a capsule endoscope captures in-vivo images of the subject sequentially in time series from the time it is introduced into the subject until it is discharged to the outside of the subject. Are sequentially transmitted to the receiving device.
外部の受信装置は、かかる被検体内部のカプセル型内視鏡によって無線送信された体内画像を順次受信する。なお、この受信装置には可搬型の記録媒体が予め挿着されており、カプセル型内視鏡から受信した体内画像群は、この記録媒体内に記録される。この記録媒体は、カプセル型内視鏡によって撮像された体内画像群を記録し終えた後、受信装置から取り外されて画像表示装置に挿着される。画像表示装置は、この挿着された記録媒体内の体内画像群のデータを取り込み、取得した体内画像群をディスプレイに順次表示する。医師または看護師等のユーザは、かかる画像表示装置に表示させた体内画像群を順次観察し、これによって被検体の臓器内部を検査することができる。 The external receiving device sequentially receives in-vivo images wirelessly transmitted by the capsule endoscope inside the subject. Note that a portable recording medium is inserted in the receiving apparatus in advance, and the in-vivo image group received from the capsule endoscope is recorded in the recording medium. This recording medium is removed from the receiving apparatus and inserted into the image display apparatus after recording the in-vivo image group captured by the capsule endoscope. The image display apparatus takes in the data of the in-vivo image group in the inserted recording medium, and sequentially displays the acquired in-vivo image group on the display. A user such as a doctor or a nurse can sequentially observe the in-vivo image groups displayed on the image display device, thereby examining the inside of the organ of the subject.
なお、かかる被検体の体内画像群を表示する画像表示装置として、例えば、カプセル型内視鏡によって撮像された画像群を擬似動画像として撮像順に順次表示するとともに、これら画像群の中から選択された画像の縮小画像を表示する画像表示装置がある(特許文献1参照)。また、カプセル型内視鏡によって撮像された画像群の中から体内画像群を抽出し、この抽出した体内画像群のうち実質的に同一なデータ以外の体内画像群を表示する画像表示装置もある(特許文献2参照)。 Note that, as an image display device that displays the in-vivo image group of the subject, for example, the image group captured by the capsule endoscope is sequentially displayed as a pseudo moving image in the order of imaging, and is selected from these image groups. There is an image display device that displays a reduced image of the displayed image (see Patent Document 1). There is also an image display device that extracts an in-vivo image group from an image group captured by a capsule endoscope and displays an in-vivo image group other than substantially the same data from the extracted in-vivo image group. (See Patent Document 2).
ところで、上述したカプセル型内視鏡は、一般に、被検体に経口摂取されてから被検体外部に排出されるまでの8時間以上に及ぶ期間、例えば0.5秒間隔で体内画像を順次撮像する。このため、かかるカプセル型内視鏡によって撮像される体内画像群の枚数は、6万枚に及ぶ膨大なものになる。 By the way, the capsule endoscope described above generally sequentially captures in-vivo images at intervals of 8 hours or more, for example, at intervals of 0.5 seconds, after being ingested by the subject and discharged to the outside of the subject. . For this reason, the number of in-vivo images captured by such a capsule endoscope is enormous, reaching 60,000.
しかしながら、上述した特許文献1に開示された従来の画像表示装置では、被検体の体内画像群の観察を通して被検体の臓器内部を観察する場合、膨大な枚数の画像データ群を動画再生等によって1フレームずつ順次表示する必要があるので、被検体の臓器内部の観察に多大な時間が掛かるという問題点があった。また、上述した特許文献2に開示された従来の画像表示装置では、被検体の体内画像群のうち実質的に同一なデータ以外の体内画像群を表示するので、表示対象として抽出されなかった体内画像群の中に病変等の特徴的部位を撮像した体内画像が含まれる場合、かかる特徴的部位の画像を見落とす可能性があった。
However, in the conventional image display device disclosed in Patent Document 1 described above, when the inside of the organ of the subject is observed through observation of the in-vivo image group of the subject, an enormous number of image data groups 1 are reproduced by moving image reproduction or the like. Since it is necessary to display each frame sequentially, there is a problem that it takes a long time to observe the inside of the organ of the subject. Further, in the conventional image display device disclosed in
本発明は、上記事情に鑑みてなされたものであって、被検体内部における特徴的部位の画像の見落としを抑制するとともに短時間に被検体の体内画像群を観察することができる画像表示装置を提供することを目的とする。 The present invention has been made in view of the above circumstances, and an image display device that can suppress oversight of an image of a characteristic part inside a subject and can observe an in-vivo image group of the subject in a short time. The purpose is to provide.
本願発明者等は、一覧表示した画像群の中から指定した画像に代表される潜在的な画像を更に一覧表示することにより、上記課題を解決できることを見出した。すなわち、本願発明は、時系列に沿って撮像された画像群を取得する画像取得手段と、前記画像取得手段が取得した画像群を表示する表示手段と、前記画像群の中から代表画像群を抽出して前記代表画像群を一覧表示するように前記表示手段を制御し、この一覧表示した前記代表画像群内の代表画像に代表される1つ以上の潜在画像を前記画像群の中から選択し、この選択した前記1つ以上の潜在画像を一覧表示するように前記表示手段を制御する制御手段と、を備えたことを特徴とする画像表示装置により、上記課題を解決する。 The inventors of the present application have found that the above problem can be solved by further displaying a list of potential images typified by an image designated from a list of displayed images. That is, the present invention provides an image acquisition means for acquiring an image group captured in time series, a display means for displaying the image group acquired by the image acquisition means, and a representative image group from the image group. The display means is controlled to extract and display the representative image group as a list, and one or more latent images represented by the representative images in the representative image group displayed in the list are selected from the image group Then, the above-mentioned problem is solved by an image display device comprising: control means for controlling the display means so as to display the selected one or more latent images as a list.
本発明によれば、被検体内部における特徴的部位の画像の見落としを抑制するとともに短時間に被検体の体内画像群を観察することが可能な画像表示装置を実現できるという効果を奏する。 According to the present invention, it is possible to realize an image display apparatus that can suppress oversight of an image of a characteristic part inside a subject and can observe an in-vivo image group of the subject in a short time.
以下、図面を参照して、本発明にかかる画像表示装置の好適な実施の形態を詳細に説明する。なお、以下では、本発明にかかる画像表示装置の一例として、被検体の臓器内部に導入される体内撮像装置の一例であるカプセル型内視鏡によって撮像された画像群を表示する画像表示装置を例示するが、この実施の形態によって本発明が限定されるものではない。 DESCRIPTION OF EXEMPLARY EMBODIMENTS Hereinafter, exemplary embodiments of an image display device according to the invention will be described in detail with reference to the drawings. Hereinafter, as an example of the image display device according to the present invention, an image display device that displays an image group captured by a capsule endoscope, which is an example of an in-vivo imaging device introduced into the organ of a subject. Although illustrated, this invention is not limited by this embodiment.
(実施の形態1)
図1は、本発明の実施の形態1にかかる画像表示装置の一構成例を模式的に示すブロック図である。図1に示すように、この実施の形態1にかかる画像表示装置1は、画像データの入出力を行うデータ入出力部2と、画像データおよびGUI(Graphical User Interface)等を表示する表示部3と、各種情報を入力する入力部4と、データ入出力部2によって入力された画像データ等を記憶する記憶部5と、かかる画像表示装置1の各構成部を制御する制御部6とを備える。
(Embodiment 1)
FIG. 1 is a block diagram schematically illustrating a configuration example of an image display apparatus according to the first embodiment of the present invention. As shown in FIG. 1, an image display apparatus 1 according to the first embodiment includes a data input /
データ入出力部2は、時系列に沿って撮像された画像群を取得する画像取得手段として機能する。具体的には、データ入出力部2は、カード型メモリ等の可搬型の記録媒体を着脱可能な構造を有するドライブ等を用いて実現される。データ入出力部2は、制御部6の制御に基づいて、挿着された記録媒体内の保存データを読み取り、取得した保存データを制御部6に入力する。また、データ入出力部2は、挿着された記録媒体に対し、制御部6によって書き込み指示されたデータを書き込む。なお、かかるデータ入出力部2が記録媒体から取得するデータとして、例えば、カプセル型内視鏡が時系列に沿って順次撮像した体内画像等の画像群、この画像群内の各画像の撮像時刻を示す時間データ、このカプセル型内視鏡を臓器内部に導入した被検体を特定する患者名および患者ID等の患者データ等が挙げられる。また、かかるデータ入出力部2が記録媒体内に書き込むデータとして、例えば、被検体を特定する患者名や患者ID等の患者情報等が挙げられる。
The data input /
表示部3は、データ入出力部2が取得した画像群を表示する表示手段として機能する。具体的には、表示部3は、CRTディスプレイまたは液晶ディスプレイ等の表示デバイスを用いて実現され、制御部6によって表示指示された画像等の各種情報およびGUIを表示する。図2は、この実施の形態1における表示部の表示態様の一具体例を示す模式図である。図2に示すように、表示部3には、一覧表示エリア11および詳細表示エリア12が形成される。表示部3は、制御部6によって表示指示された代表画像群DPを一覧表示エリア11内に静止画状態で表示し、制御部6によって表示指示された潜在画像群SPを詳細表示エリア12内に静止画状態で表示する。この場合、表示部3は、図2の矢印に示されるように時系列順に各画像を配列した態様で代表画像群DPを一覧表示し、かかる代表画像群DPと同じ配列態様で潜在画像群SPを一覧表示する。
The
なお、かかる代表画像群DP内の代表画像は、データ入出力部2によって取得した画像群の中から所定の抽出条件に基づいて抽出された画像である。また、かかる潜在画像群SP内の潜在画像は、この画像群のうちの代表画像を除く残りの画像であって、この一覧表示された代表画像群DP内の代表画像間に潜在する画像である。
The representative image in the representative image group DP is an image extracted based on a predetermined extraction condition from the image group acquired by the data input /
また、表示部3は、代表画像群DPの一覧表示を指示する指示情報を入力するためのGUIである一覧表示アイコン13と、潜在画像群SPの一覧表示を指示する指示情報を入力するためのGUIである詳細表示アイコン14と、現在表示している代表画像群DPおよび潜在画像群SPの中から選択された画像の時間位置を示すためのGUIであるグラフィックバー15およびインジケータ16と、入力部4の操作に対応して移動可能なマウスカーソル17とを表示する。
The
グラフィックバー15は、図2に示すように時間スケールを付され、カプセル型内視鏡によって撮像された一連の画像の全体的な時間位置を示す。さらに、グラフィックバー15は、カプセル型内視鏡によって撮像された一連の画像の色情報をもとに作成したものであり、その色によって、体内と体外画像との区別、臓器の区別、残渣の有無などを示すことができる。かかるグラフィックバー15の時間スケールは、例えばカプセル型内視鏡が撮像した1フレーム目の画像の撮像時刻からの経過時間を示す。インジケータ16は、かかるグラフィックバー15に沿って移動して、現在表示している代表画像群DPおよび潜在画像群SPのうちのいずれかの画像の時間位置を示す。
The
なお、表示部3は、図2に示す代表画像群DPのうちのマウスカーソル17を合わせた代表画像のように、かかる代表画像群DPおよび潜在画像群SPの中から選択された画像を強調表示する。また、表示部3は、グラフィックバー15上のインジケータ16によって指し示されている時間位置に対応する画像、すなわち一覧表示エリア11内の代表画像または詳細表示エリア12内の潜在画像を強調表示する。一方、表示部3は、特に図2には図示しないが、カプセル型内視鏡を臓器内部に導入した被検体、すなわち代表画像群DPおよび潜在画像群SPに対応する被検体の患者データ等の被検体の体内画像群の観察に有用な各種情報を表示する。
Note that the
入力部4は、キーボードおよびマウス等の入力デバイスを用いて実現され、ユーザによる入力操作に対応して制御部6に各種情報を入力する。具体的には、入力部4は、現に表示部3に表示されている各画像のうちのいずれかを指定する画像指定情報、制御部6に対して指示する各種指示情報等を制御部6に入力する。なお、かかる入力部4によって入力される画像指定情報として、例えば、一覧表示エリア11内の代表画像群DPに含まれる代表画像を指定する代表画像指定情報と、詳細表示エリア12内の潜在画像群SPに含まれる潜在画像を指定する潜在画像指定情報とが挙げられる。また、かかる入力部4によって入力される指示情報として、例えば、代表画像群DPの一覧表示を指示する表示指示情報、潜在画像群SPの一覧表示を指示する表示指示情報、一覧表示エリア11内に一覧表示する代表画像群DPのフレーム数を指示する表示数指示情報等が挙げられる。
The
なお、入力部4は、一覧表示エリア11内の代表画像群DPのうちの指定する代表画像にマウスカーソル17を合わせてクリック操作することによって、この代表画像を指定する代表画像指定情報を入力し、詳細表示エリア12内の潜在画像群SPのうちの指定する潜在画像にマウスカーソル17を合わせてクリック操作することによって、この潜在画像を指定する潜在画像指定情報を入力する。また、入力部4は、一覧表示アイコン13にマウスカーソル17を合わせてクリック操作することによって、代表画像群DPの一覧表示を指示する表示指示情報を入力し、詳細表示アイコン14にマウスカーソル17を合わせてクリック操作することによって、潜在画像群SPの一覧表示を指示する表示指示情報を入力する。
The
記憶部5は、RAM、EEPROM、またはハードディスク等の大容量の記録媒体を用いて実現され、制御部6によって書き込み指示された各種データ等を保存し、制御部6によって読み出し指示された保存データを制御部6に送信する。具体的には、記憶部5は、上述したデータ入出力部2によって取り込まれた画像群を格納する記憶エリアである全画像フォルダ5aと、上述した表示部3の一覧表示エリア11内に一覧表示する代表画像群DPを格納する記憶エリアである代表画像フォルダ5bとを有する。かかる記憶部5は、カプセル型内視鏡が時系列に沿って撮像した画像群、すなわち被検体の体内画像を含む一連の画像を全画像フォルダ5a内に格納し、この画像群の中から抽出された代表画像群DPを代表画像フォルダ5b内に格納する。また、記憶部5は、かかる画像データの他に、カプセル型内視鏡によって撮像された画像群内の各画像の時間データ、この画像群内の隣接画像間における各画像の類似度、被検体の患者データ等を記憶する。この場合、記憶部5内に保存される各画像データには、かかる画像毎の時間データおよび類似度が各々対応付けられる。
The
制御部6は、画像表示装置1の各構成部を制御するためのものであり、処理プログラムを実行するCPUと、処理プログラム等が予め記録されたROMと、各処理の演算パラメータ等を一時的に記憶するRAMとを用いて実現される。具体的には、制御部6は、上述したデータ入出力部2、表示部3、入力部4および記憶部5の各動作を制御し、且つ、かかる各構成部間における信号の入出力を制御する。より具体的には、制御部6は、入力部4によって入力された指示情報に基づいてデータ入出力部2を制御し、これによって、このデータ入出力部2内の記録媒体の保存データを取得する。制御部6は、この取得した保存データ、すなわちカプセル型内視鏡による画像群および各画像の時間データ等を記憶するように記憶部5を制御する。また、制御部6は、入力部4によって入力された代表画像指定情報に指定される代表画像を強調表示するとともに、この代表画像に対応するグラフィックバー15上の時間位置にインジケータ16を移動するように表示部3を制御する。同様に、制御部6は、入力部4によって入力された潜在画像指定情報に指定される潜在画像を強調表示するとともに、この潜在画像に対応するグラフィックバー15上の時間位置にインジケータ16を移動するように表示部3を制御する。
The control unit 6 is for controlling each component of the image display device 1, and temporarily stores a CPU for executing a processing program, a ROM in which the processing program and the like are recorded in advance, and calculation parameters for each processing. It implement | achieves using RAM memorize | stored in. Specifically, the control unit 6 controls the operations of the data input /
また、制御部6は、表示部3の一覧表示エリア11に一覧表示する代表画像を抽出する画像抽出部6aと、表示部3の詳細表示エリア12に一覧表示する潜在画像を選択する画像選択部6bとを有する。画像抽出部6aは、記憶部5の全画像フォルダ5a内に保存された一連の画像の中から複数の代表画像を抽出する。具体的には、制御部6は、入力部4によって入力された表示数指示情報をもとに代表画像の抽出数、すなわち表示部3の一覧表示エリア11に一覧表示する代表画像の表示数を設定する。画像抽出部6aは、データ入出力部2によって取得された画像群内の各画像の色情報または隣接画像間の動きベクトル等をもとに、この画像群内における隣接画像間の類似度を画像毎に算出する。かかる画像抽出部6aは、全画像フォルダ5a内に保存された画像群の中から、各画像の類似度をもとに、この設定表示数と同じフレーム数分の代表画像を抽出する。この場合、画像抽出部6aは、かかる各画像の類似度の昇順または降順に設定表示数分の代表画像を抽出する。制御部6は、かかる画像抽出部6aによって抽出された複数の代表画像のデータを代表画像フォルダ5b内に保存するように記憶部5を制御する。また、制御部6は、一覧表示アイコン13に対応する表示指示情報に基づいて、かかる複数の代表画像を一覧表示エリア11に一覧表示するように表示部3を制御する。なお、かかる画像抽出部6aによって抽出された複数の代表画像は、例えば図2に示した代表画像群DPとして表示部3の一覧表示エリア11内に一覧表示される。
The control unit 6 also extracts an
画像選択部6bは、全画像フォルダ5a内に保存された画像群の中から、表示部3の一覧表示エリア11に一覧表示された代表画像群DP内の代表画像間に潜在する画像、すなわち潜在画像を1フレーム以上選択する。具体的には、画像選択部6bは、上述した代表画像指定情報によって指定される1フレーム以上の代表画像に代表される1フレーム以上の潜在画像、すなわち、この代表画像指定情報によって指定される代表画像とこの代表画像の前および後の少なくとも一方に隣接する他の代表画像との間に潜在する1フレーム以上の潜在画像を、全画像フォルダ5a内に保存された画像群の中から選択する。制御部6は、詳細表示アイコン14に対応する表示指示情報に基づいて、かかる画像選択部6bによって選択された1フレーム以上の潜在画像を詳細表示エリア12に一覧表示するように表示部3を制御する。なお、かかる画像選択部6bによって抽出された1フレーム以上の潜在画像は、例えば図2に示した潜在画像群SPとして表示部3の詳細表示エリア12内に一覧表示される。
The image selection unit 6b selects images that exist between representative images in the representative image group DP displayed in the
つぎに、表示部3の一覧表示エリア11に代表画像群DPを一覧表示し、この代表画像群DP内の代表画像間に潜在する潜在画像を表示部3の詳細表示エリア12に一覧表示する場合を例示して、この実施の形態1にかかる画像表示装置1の動作を説明する。図3は、代表画像間に潜在する潜在画像を一覧表示するまでの画像表示装置の制御部の処理手順を例示するフローチャートである。画像表示装置1は、一覧表示エリア11に一覧表示された代表画像群DPの中から指定された代表画像に代表される潜在画像群SPを詳細表示エリア12に一覧表示する。
Next, when the representative image group DP is displayed as a list in the
すなわち、図3に示すように、この画像表示装置1の制御部6は、表示部3の一覧表示エリア11内の代表画像群DPに含まれるいずれかの代表画像の指定の有無を判断する(ステップS101)。このステップS101において、制御部6は、入力部4によって代表画像指定情報を入力された場合、この代表画像指定情報に対応する代表画像の指定ありと判断し(ステップS101,Yes)、この入力された代表画像指定情報によって指定される代表画像を代表画像群DPの中から特定する(ステップS102)。
That is, as shown in FIG. 3, the control unit 6 of the image display device 1 determines whether or not any representative image included in the representative image group DP in the
つぎに、制御部6は、このステップS102において特定した代表画像に代表される潜在画像の一覧表示指示の有無を判断する(ステップS103)。このステップS103において、制御部6は、入力部4によって詳細表示アイコン14に対応する表示指示情報を入力された場合、潜在画像の一覧表示指示ありと判断し(ステップS103,Yes)、ステップS102において特定した代表画像を含む代表画像間の潜在画像を選択する(ステップS104)。
Next, the control unit 6 determines whether or not there is an instruction to display a list of latent images represented by the representative image specified in step S102 (step S103). In step S103, when the display instruction information corresponding to the
このステップS104において、画像選択部6bは、記憶部5の代表画像フォルダ5b内に保存された各代表画像の中から、かかる各代表画像に対応付けられた時間情報をもとに、ステップS102における特定の代表画像と時系列的に隣接する他の代表画像を探し出す。そして、画像選択部6bは、記憶部5の全画像フォルダ5a内に保存された画像群の中から、この特定の代表画像に隣接する他の代表画像とこの特定の代表画像との間に潜在する1フレーム以上の潜在画像を選択する。
In step S104, the image selection unit 6b selects the representative image stored in the
続いて、制御部6は、ステップS104において選択した1フレーム以上の潜在画像を詳細表示エリア12に一覧表示するように表示部3を制御し(ステップS105)、その後、上述したステップS101に戻り、このステップS101以降の処理手順を繰り返す。このステップS105において、表示部3は、かかる制御部6の制御に基づいて、例えば図2に示したように詳細表示エリア12内に潜在画像群SPを一覧表示する。
Subsequently, the control unit 6 controls the
なお、制御部6は、上述したステップS101において代表画像指定情報を入力されていない場合、代表画像の指定なしと判断し(ステップS101,No)、このステップS101を繰り返す。一方、制御部6は、上述したステップS103において詳細表示アイコン14に対応する表示指示情報を入力されていない場合、潜在画像の一覧表示指示なしと判断し(ステップS103,No)、このステップS103を繰り返す。
If the representative image designation information has not been input in step S101 described above, the control unit 6 determines that no representative image is designated (step S101, No), and repeats step S101. On the other hand, when the display instruction information corresponding to the
つぎに、制御部6が入力部4の入力情報に基づいて代表画像の表示数を12フレームに設定した場合を例示して、表示部3の一覧表示エリア11に一覧表示した12フレームの代表画像群DP内の代表画像間に潜在する潜在画像を表示部3の詳細表示エリア12に一覧表示する際の画像表示装置1の動作を具体的に説明する。図4は、本発明の実施の形態1にかかる画像表示装置の動作を具体的に説明するための模式図である。以下、上述した図1,2および図4を参照しつつ、画像表示装置1の動作を具体的に説明する。
Next, a case where the control unit 6 sets the display number of representative images to 12 frames based on the input information of the
この実施の形態1にかかる画像表示装置1の制御部6は、カプセル型内視鏡によって時系列順に撮像された画像群APおよび各画像の時間データ等をデータ入出力部2から取得する。制御部6は、この取得した画像群AP内における隣接画像間の類似度を画像毎に算出し、得られた各隣接画像間の類似度および各時間データと画像群AP内の各画像とを各々対応付ける。制御部6は、かかる類似度および時間データを画像毎に対応付けた画像群APを記憶部5の全画像フォルダ5a内に保存する。また、制御部6は、入力部4によって入力された表示数指示情報をもとに、表示部3の一覧表示エリア11内に一覧表示する代表画像のフレーム数を例えば12フレームに設定する。
The control unit 6 of the image display device 1 according to the first embodiment acquires the image group AP captured in time-series order by the capsule endoscope and the time data of each image from the data input /
かかる制御部6は、図2に示した一覧表示アイコン13に対応する表示指示情報を入力された場合、この画像群APのうちの12フレームの代表画像群DPを一覧表示エリア11に表示するように表示部3を制御する。この場合、画像抽出部6aは、図4に示すように、この画像群APの中から、類似度の昇順に設定表示数と同数である12フレームの代表画像Pa,Pb,Pc,Pd,Pe,Pf,Pg,Ph,Pi,Pj,Pk,Pmを抽出する。制御部6は、このように抽出した12フレームの代表画像Pa,Pb,Pc,Pd,Pe,Pf,Pg,Ph,Pi,Pj,Pk,Pmを各類似度および各時間データと対応付けて記憶部5の代表画像フォルダ5b内に保存し、且つ、かかる12フレームの代表画像Pa,Pb,Pc,Pd,Pe,Pf,Pg,Ph,Pi,Pj,Pk,Pmを代表画像群DPとして一覧表示エリア11内に表示するように表示部3を制御する。
When the display instruction information corresponding to the
なお、このように類似度の昇順に抽出された代表画像Pa,Pb,Pc,Pd,Pe,Pf,Pg,Ph,Pi,Pj,Pk,Pmは、画像群APのうちの類似度の低い方から上位12フレームの画像である。具体的には、代表画像Pa,Pbは、被検体内部に導入される前のカプセル型内視鏡が撮像した画像すなわち体外画像であり、残りの代表画像Pc,Pd,Pe,Pf,Pg,Ph,Pi,Pj,Pk,Pmは、被検体内部に導入されたカプセル型内視鏡が撮像した臓器内部の画像すなわち体内画像である。 Note that the representative images Pa, Pb, Pc, Pd, Pe, Pf, Pg, Ph, Pi, Pj, Pk, and Pm extracted in ascending order of similarity are low in similarity among the image groups AP. It is an image of the upper 12 frames from the side. Specifically, the representative images Pa and Pb are images captured by the capsule endoscope before being introduced into the subject, that is, external images, and the remaining representative images Pc, Pd, Pe, Pf, Pg, Ph, Pi, Pj, Pk, and Pm are internal organ images captured by the capsule endoscope introduced into the subject, that is, in-vivo images.
ここで、図4に示すように、代表画像群DPのうちの代表画像Phにマウスカーソル17を合わせて行われるクリック操作によって、代表画像Phを指定する代表画像指定情報が入力部4から制御部6に入力された場合、制御部6は、この入力された代表画像指定情報によって指定される代表画像Phを強調表示するように表示部3を制御する。その後、制御部6は、図2に示した詳細表示アイコン14に対応する表示指示情報を入力部4によって入力された場合、この代表画像Phを含む代表画像間に潜在する潜在画像群SPを詳細表示エリア12に表示するように表示部3を制御する。
Here, as shown in FIG. 4, representative image designation information for designating the representative image Ph is input from the
具体的には、画像選択部6bは、代表画像フォルダ5b内の代表画像Pa,Pb,Pc,Pd,Pe,Pf,Pg,Ph,Pi,Pj,Pk,Pmの中から、この代表画像指定情報によって指定される代表画像Phと、この代表画像Phに時系列的に隣接する代表画像Pg,Piとを特定する。そして、画像選択部6bは、全画像フォルダ5a内の画像群APの中から、かかる代表画像Pgと代表画像Phとの間に潜在する全ての潜在画像Pg1〜Pg4と、代表画像Phと代表画像Piとの間に潜在する全ての潜在画像Ph1〜Ph5とを選択する。制御部6は、かかる画像選択部6bによって選択された潜在画像Pg1〜Pg4,Ph1〜Ph5を潜在画像群SPとして詳細表示エリア12内に表示するように表示部3を制御する。この場合、制御部6は、図4に示すように、かかる画像選択部6bによって選択された潜在画像Pg1〜Pg4,Ph1〜Ph5に、これらを代表する代表画像Pg,Ph,Piを含めた画像群を潜在画像群SPとして表示してもよい。
Specifically, the image selection unit 6b designates the representative image from the representative images Pa, Pb, Pc, Pd, Pe, Pf, Pg, Ph, Pi, Pj, Pk, and Pm in the
なお、かかる潜在画像Pg1〜Pg4は、代表画像Pgに代表される体内画像であり、代表画像Pgと代表画像Phとの間に時系列順に存在する。また、かかる潜在画像Ph1〜Ph5は、代表画像Phに代表される体内画像であり、代表画像Phと代表画像Piとの間に時系列順に存在する。 The latent images Pg1 to Pg4 are in-vivo images typified by the representative image Pg, and exist in chronological order between the representative image Pg and the representative image Ph. The latent images Ph1 to Ph5 are in-vivo images represented by the representative image Ph, and exist between the representative image Ph and the representative image Pi in chronological order.
このような制御部6は、代表画像Ph以外の代表画像を指定する代表画像指定情報および詳細表示アイコン14に対応する表示指示情報を入力された場合も、上述した代表画像Phの場合と同様に、この入力された代表画像指定情報によって指定される代表画像を含む代表画像間に潜在する潜在画像群を詳細表示エリア12に表示するように表示部3を制御する。
Such a control unit 6 also receives the representative image designation information for designating a representative image other than the representative image Ph and the display instruction information corresponding to the
以上、説明したように、本発明の実施の形態1では、時系列に沿って撮像された画像群の中から複数の代表画像を抽出し、この抽出した複数の代表画像を表示部に一覧表示するようにし、また、この一覧表示した複数の代表画像の中から指定された代表画像を含む代表画像間に潜在する1つ以上の潜在画像をこの画像群の中から選択し、この選択した1つ以上の潜在画像を表示部に一覧表示するように構成した。このため、時系列に沿って撮像された画像群の中から比較的類似度の低い複数の代表画像を一覧表示できるとともに、この一覧表示した複数の代表画像における所望の代表画像間に潜在する潜在画像を、例えば静止画の状態で容易に一覧表示することができる。これによって、一覧表示された複数の代表画像以外の残りの画像、すなわち潜在画像の中に被検体内部の病変部または出血部等の観察すべき特徴的部位の画像が含まれる場合であっても、かかる潜在画像の一覧表示によって特徴的部位の画像が画面表示される可能性が高まり、この結果、被検体内部における特徴的部位の画像の見落としを抑制するとともに短時間に被検体の体内画像群を観察することが可能な画像表示装置を実現することができる。 As described above, in the first embodiment of the present invention, a plurality of representative images are extracted from a group of images taken in time series, and the extracted plurality of representative images are displayed as a list on the display unit. In addition, one or more latent images that exist between representative images including a designated representative image are selected from the group of representative images displayed in the list, and the selected 1 Two or more latent images are displayed in a list on the display unit. For this reason, it is possible to display a list of a plurality of representative images having a relatively low degree of similarity from among a group of images taken along a time series, and the latent potential between desired representative images in the plurality of displayed representative images. Images can be easily displayed as a list, for example, in a still image state. Thus, even if the remaining images other than the plurality of representative images displayed in a list, that is, the latent images include images of characteristic parts to be observed such as lesions or bleeding parts inside the subject, The display of the list of the latent images increases the possibility that the images of the characteristic portions are displayed on the screen. As a result, the in-vivo image group of the subject is suppressed in a short time while suppressing the oversight of the images of the characteristic portions inside the subject. Can be realized.
(実施の形態2)
つぎに、本発明の実施の形態2について説明する。上述した実施の形態1では、時系列に沿って撮像された画像群の中から抽出された代表画像群と、この代表画像群における代表画像間に潜在する1フレーム以上の潜在画像とを表示部3の各表示領域に一覧表示していたが、この実施の形態2では、表示部3に一覧表示した代表画像群の中から指定した代表画像と、この代表画像に代表される潜在画像とを非表示に設定できるようにしている。
(Embodiment 2)
Next, a second embodiment of the present invention will be described. In the first embodiment described above, a display unit displays a representative image group extracted from an image group captured in time series and one or more latent images latent between representative images in the representative image group. In the second embodiment, a representative image designated from the representative image group displayed as a list on the
図5は、本発明の実施の形態2にかかる画像表示装置の一構成例を模式的に示すブロック図である。図6は、本発明の実施の形態2における表示部の表示態様の一具体例を示す模式図である。図5に示すように、この実施の形態2にかかる画像表示装置21は、上述した実施の形態1にかかる画像表示装置1の制御部6に代えて制御部26を備える。また、この画像表示装置21において、表示部3は、図6に示すように、画像の非表示設定を指示するためのGUIである削除アイコン18を表示し、非表示設定の画像の時間位置を示すマークMをグラフィックバー15上に表示する。その他の構成は実施の形態1と同じであり、同一構成部分には同一符号を付している。
FIG. 5 is a block diagram schematically illustrating a configuration example of the image display apparatus according to the second embodiment of the present invention. FIG. 6 is a schematic diagram showing a specific example of the display mode of the display unit in the second embodiment of the present invention. As shown in FIG. 5, the
制御部26は、上述した実施の形態1における制御部6の画像抽出部6aに代えて画像抽出部26aを有し、画像選択部6bに代えて画像選択部26bを有する。さらに、制御部26は、画像のグループ化処理を行うグループ化処理部26cと、画像の非表示設定処理を行う非表示設定部26dとを有する。また、制御部26は、記憶部5の全画像フォルダ5a内に保存した画像群のうちの非表示設定部26dによって表示対象外に設定された画像に対応するグラフィックバー15上の時間位置に、図6に示すようなマークMを表示するように表示部3を制御する。なお、制御部26は、かかる画像抽出部26a、画像選択部26b、グループ化処理部26cまたは非表示設定部26dに関する各機能およびマークMの表示制御機能以外、上述した実施の形態1における制御部6と同様の機能を有する。
The control unit 26 includes an
画像抽出部26aは、図6に示すように表示部3の一覧表示エリア11に一覧表示された代表画像群DPのうちの表示対象から削除された代表画像、すなわち非表示設定された代表画像と同数の代表画像を全画像フォルダ5a内の画像群の中から再抽出する。この場合、画像抽出部26aは、この全画像フォルダ5a内の画像群のうちの非表示設定されていない潜在画像の中から、既に抽出済みの代表画像に後続する順位の類似度を有する潜在画像をこの非表示設定された代表画像と同数分、新規の代表画像として抽出する。制御部26は、かかる画像抽出部26aによって再抽出された新規の代表画像を既に表示済みの代表画像に加えて一覧表示エリア11内に一覧表示するように表示部3を制御する。この場合、制御部26は、かかる新規の代表画像を含む代表画像群DPを時系列順に配列して一覧表示するように表示部3を制御する。なお、画像抽出部26aは、かかる代表画像の再抽出機能以外、上述した実施の形態1における制御部6の画像抽出部6aと同様の機能を有する。
As shown in FIG. 6, the
画像選択部26bは、表示部3の一覧表示エリア11に一覧表示された代表画像群DP内の代表画像間に潜在する潜在画像のうち、非表示設定部26dによって非表示設定されていない潜在画像を選択する。この場合、画像選択部26bは、上述した代表画像指定情報によって指定される代表画像とこの代表画像の前および後の少なくとも一方に隣接する他の代表画像との間に潜在する全ての潜在画像のうちの非表示設定されていない潜在画像を、この全画像フォルダ5a内の画像群の中から選択する。かかる画像選択部26bによって選択された潜在画像は、制御部26の制御に基づいて、例えば図6に示す潜在画像群SPに例示されるように表示部3の詳細表示エリア12内に一覧表示される。
The
グループ化処理部26cは、画像の非表示設定を指示する非表示指示情報が入力部4によって入力された場合、上述した代表画像指定情報によって指定される代表画像と、この指定された代表画像の前後に隣接する2つの代表画像の間に潜在する1フレーム以上の潜在画像とをグループ化する。かかるグループ化処理部26cは、例えば、図6に示すように一覧表示エリア11内に一覧表示された代表画像群DPの中から指定された代表画像とこの代表画像に代表される全ての潜在画像とを含む時系列順の各画像を、一連の画像グループとしてグループ化処理する。なお、かかる非表示指示情報は、例えば図6に示す削除アイコン18にマウスカーソル17を合わせた状態で入力部4のクリック操作が行われた場合に、入力部4から制御部26に入力される。
When the non-display instruction information for instructing the non-display setting of the image is input by the
非表示設定部26dは、全画像フォルダ5a内の画像群のうち、表示部3の表示対象から削除したい画像を非表示の画像に設定する。具体的には、非表示設定部26dは、入力部4によって非表示指示情報を入力された場合、上述した代表画像指定情報によって指定される代表画像または上述したグループ化処理部26cによってグループ化された一連の画像グーループ内の各画像に、表示部3の表示対象外の画像である旨を示す非表示フラグを付加する。これによって、非表示設定部26dは、かかる指定の代表画像または一連の画像グループ内の各画像を非表示画像に設定する。かかる非表示設定部26dは、上述した非表示指示情報が入力される都度、かかる画像の非表示設定処理を繰り返す。なお、制御部26は、かかる非表示フラグが付加された代表画像および潜在画像を表示しないように表示部3を制御する。
The
つぎに、表示部3の一覧表示エリア11に12フレームの代表画像群DPを一覧表示する場合を例示して、本発明の実施の形態2にかかる画像表示装置21の動作を具体的に説明する。図7は、本発明の実施の形態2にかかる画像表示装置の動作を具体的に説明するための模式図である。なお、この実施の形態2にかかる画像表示装置21の動作は、画像を非表示設定する際の動作と、非表示設定した代表画像と同数の新たな代表画像を一覧表示に追加する際の動作とを除き、上述した実施の形態1にかかる画像表示装置1と同様である。以下、図5〜7を参照しつつ、画像を非表示設定する際の画像表示装置21の動作と、非表示設定した代表画像と同数の新たな代表画像を一覧表示に追加する際の画像表示装置21の動作とを具体的に説明する。
Next, the operation of the
この実施の形態2にかかる画像表示装置21の制御部26は、表示部3の一覧表示エリア11内に表示した12フレームの代表画像群DPのうちの代表画像Pa,Pb,Peを各々指定する代表画像指定情報が入力部4によって順次入力された場合、かかる各代表画像指定情報によって指定された各代表画像Pa,Pb,Peを強調表示するように表示部3を制御する。なお、かかる各代表画像Pa,Pb,Peの代表画像指定情報は、指定したい代表画像にマウスカーソル17を合わせてクリックするという入力部4の操作を順次繰り返すことによって入力される。
The control unit 26 of the
このような状態において、制御部26は、入力部4によって非表示指示情報を入力された場合、上述したように指定された少なくとも代表画像Pa,Pb,Peを表示部3の表示対象から削除する。この場合、非表示設定部26dは、画像抽出部26aによって画像群APから抽出された代表画像Pa,Pb,Pc,Pd,Pe,Pf,Pg,Ph,Pi,Pj,Pk,Pmのうち、代表画像指定情報によって指定された代表画像Pa,Pbに非表示フラグFを付加する。これによって、非表示設定部26dは、かかる代表画像Pa,Pbを非表示の画像に設定する。
In such a state, when the non-display instruction information is input by the
また、グループ化処理部26cは、代表画像指定情報によって指定された代表画像Peと代表画像Peに代表される全ての潜在画像とを含む時系列順の各画像を一連の画像グループPeGとしてグループ化処理する。なお、この画像グループPeGに含まれる全潜在画像は、例えば、代表画像Peの後に隣接する代表画像Pfと代表画像Peとの間に潜在する潜在画像である。非表示設定部26dは、かかるグループ化処理部26cによってグループ化された画像グループPeG内の各画像、すなわち代表画像Peと代表画像Peに代表される全ての潜在画像とに非表示フラグFを付加する。これによって、非表示設定部26dは、かかる画像グループPeG内の各画像を非表示の画像に設定する。
The
このように代表画像Pa,Pbおよび画像グループPeG内の各画像に非表示フラグFが付加された場合、制御部26は、記憶部5の全画像フォルダ5a内の画像群APのうちの非表示フラグFが付加された各画像を表示部3の表示対象外とし、且つ、記憶部5の代表画像フォルダ5b内の代表画像群DPのうちの非表示フラグFが付加された代表画像Pa,Pb,Peを表示部3の表示対象外とする。
When the non-display flag F is added to each image in the representative images Pa and Pb and the image group PeG as described above, the control unit 26 does not display the image group AP in the
続いて、画像抽出部26aは、かかる非表示フラグFが付加された代表画像Pa,Pb,Peと同数、すなわち3フレーム分の代表画像を画像群APの中から新規に再抽出する。この場合、画像抽出部26aは、画像群APのうちの非表示フラグFが付加されていない画像の中から、既に抽出済みの代表画像Pc,Pd,Pf,Pg,Ph,Pi,Pj,Pk,Pmに後続する順位の類似度を有する潜在画像を新規の代表画像Px,Py,Pzとして抽出する。制御部26は、かかる画像抽出部26aによって再抽出された新規の代表画像Px,Py,Pzの各データを、上述した時間データおよび類似度と対応付けて代表画像フォルダ5b内に保存するように記憶部5を制御する。
Subsequently, the
その後、制御部26は、既に一覧表示エリア11内に一覧表示されている代表画像群DPの中から、かかる非表示フラグFを付加した代表画像Pa,Pb,Peを非表示にするとともに、これら非表示の代表画像Pa,Pb,Peと同数分の代表画像Px,Py,Pzを一覧表示エリア11内の一覧表示に追加するように表示部3を制御する。この場合、制御部26は、既存の代表画像Pc,Pd,Pf,Pg,Ph,Pi,Pj,Pk,Pmに新規の代表画像Px,Py,Pzを追加した態様の代表画像群DPを時系列順に配列して一覧表示するように表示部3を制御する。
Thereafter, the control unit 26 hides the representative images Pa, Pb, and Pe to which the non-display flag F is added from the representative image group DP already displayed in the
かかる制御部26の制御に基づいて、表示部3は、図7に示す削除前の状態から削除・更新後の状態への表示態様変化のように、表示対象外の代表画像Pa,Pb,Peを削除するとともに、新規の代表画像Px,Py,Pzを一覧表示エリア11内に追加表示する。この場合、表示部3は、時系列的に代表画像Ph後であり且つ代表画像Piの前である代表画像Pxを代表画像Ph,Pi間に追加表示し、時系列的に代表画像Pi後であり且つ代表画像Pjの前である代表画像Pyを代表画像Pi,Pj間に追加表示し、時系列的に代表画像Pj後であり且つ代表画像Pkの前である代表画像Pzを代表画像Pj,Pk間に追加表示する。
Based on the control of the control unit 26, the
なお、制御部26は、上述した非表示フラグFを付加した画像グループPeG内の各潜在画像を表示部3の詳細表示エリア12への表示対象から除外する。すなわち、制御部26は、代表画像Pdまたは代表画像Pfを指定する代表画像指定情報と詳細表示アイコン14に対応する表示指示情報とを入力された場合であっても、かかる非表示フラグFを付加した画像グループPeG内の各潜在画像を詳細表示エリア12に表示しないように表示部3を制御する。
The control unit 26 excludes each latent image in the image group PeG to which the above-described non-display flag F is added from the display target in the
ここで、上述した非表示フラグFを付加した非表示の代表画像Pa,Pb,Peは、被検体の臓器内部の観察に不要な画像である。具体的には、代表画像Pa,Pbは、被検体外部の画像であり、代表画像Peは、便等の残渣が多くて臓器内壁部の描画が少ない体内画像である。また、かかる代表画像Peに代表される画像グループPeG内の潜在画像は、この代表画像Peと同様に残渣の多い体内画像、すなわち被検体の臓器内部の観察に不要な画像である。上述したような構成を有する画像表示装置21は、かかる観察に不要な画像である代表画像Pa,Pb,Peを指定することによって、一覧表示エリア11内の一覧表示から代表画像Pa,Pb,Peを容易に削除するとともに、この削除した画像数分、被検体内部の病変部または出血部等の特徴的な部位が撮像された体内画像の可能性がある新規の代表画像Px,Py,Pzを追加表示する。この結果、画像表示装置21は、一覧表示の中から観察に不要な画像を低減するとともに、観察に有用な画像を表示する可能性を高めることができる。
Here, the non-displayed representative images Pa, Pb, and Pe to which the above-described non-display flag F is added are images that are unnecessary for observation inside the organ of the subject. Specifically, the representative images Pa and Pb are images outside the subject, and the representative image Pe is an in-vivo image with a lot of residues such as stool and a little drawing of the inner wall of the organ. In addition, the latent image in the image group PeG represented by the representative image Pe is an in-vivo image with a lot of residue, that is, an image unnecessary for observation inside the organ of the subject, like the representative image Pe. The
なお、被検体の臓器内部の観察に不要な画像としては、上述した被検体外部の画像および残渣の多い体内画像の他に、病変部または出血部等の特徴的な部位が撮像されていない正常な体内画像、被検体内部のカプセル型内視鏡が停滞した状態で連続的に撮像した同じ被写体の画像等が挙げられる。 In addition, as an image unnecessary for observation inside the organ of the subject, in addition to the above-described image outside the subject and in-vivo image with much residue, a normal part in which a characteristic part such as a lesioned part or a bleeding part is not imaged is normal. In-vivo images, images of the same subject continuously captured with the capsule endoscope inside the subject stagnating, and the like.
以上、説明したように、本発明の実施の形態2では、表示部に一覧表示した複数の代表画像の中から指定された1フレーム以上の代表画像を非表示にするとともに、この非表示に設定した代表画像と同数分の代表画像を新規に抽出し、この新規に抽出した同数分の代表画像を既存の代表画像の一覧表示内に追加するようにし、その他を実施の形態1と同様に構成した。このため、上述した実施の形態1と同様の作用効果を享受するとともに、表示部に一覧表示した代表画像の中から被検体の臓器内部の観察に不要な画像を容易に削除でき、且つ、この削除した代表画像の代わりに、観察に有用な画像の可能性がある代表画像を表示部に新規に一覧表示することができ、この結果、代表画像の一覧表示の中から観察に不要な代表画像を低減できるとともに、観察に有用な代表画像を表示する可能性を高めることができ、被検体内部の特徴的部位の見落としを一層抑制することができる。 As described above, in the second embodiment of the present invention, the representative image of one or more frames specified from the plurality of representative images displayed in a list on the display unit is hidden and set to be hidden. The same number of representative images as the representative images are newly extracted, and the newly extracted representative images of the same number are added to the list display of the existing representative images, and the others are configured in the same manner as in the first embodiment. did. For this reason, while enjoying the same effects as the first embodiment described above, it is possible to easily delete images unnecessary for observation inside the organ of the subject from the representative images displayed in a list on the display unit, and Instead of the deleted representative image, it is possible to display a new list of representative images that may be useful images for observation on the display unit. As a result, representative images that are unnecessary for observation from the list display of representative images can be displayed. In addition, the possibility of displaying a representative image useful for observation can be increased, and oversight of a characteristic part inside the subject can be further suppressed.
また、この実施の形態2では、非表示に設定した代表画像に代表される1フレーム以上の潜在画像を非表示の画像に設定するので、表示部における潜在画像の一覧表示内に占める観察に不要な画像の表示数を低減することができ、これによって、観察に不要な代表画像を表示する確率を低減できるとともに、観察に有用な体内画像を表示する可能性を一層高めることができ、この結果、より短時間に被検体の体内画像群を観察することができる。 In the second embodiment, the latent image of one frame or more typified by the representative image set to non-display is set as a non-display image, so that it is not necessary for observation in the list display of the latent image in the display unit. As a result, the probability of displaying a representative image unnecessary for observation can be reduced and the possibility of displaying in-vivo images useful for observation can be further increased. The in-vivo image group of the subject can be observed in a shorter time.
(実施の形態3)
つぎに、本発明の実施の形態3について説明する。上述した実施の形態2では、表示部3の一覧表示エリア11内に一覧表示された複数の代表画像の中から、非表示に設定する代表画像を指定していたが、この実施の形態3では、表示部3のグラフィックバー15によって示される画像の時間位置の中から非表示に設定する画像の時間位置を範囲指定し、この範囲指定されたグラフィックバー15上の時間位置に対応する画像を非表示に設定できるようにしている。
(Embodiment 3)
Next, a third embodiment of the present invention will be described. In the above-described second embodiment, the representative image to be set to non-display is designated from the plurality of representative images displayed in the
図8は、本発明の実施の形態3にかかる画像表示装置の一構成例を模式的に示すブロック図である。図9は、本発明の実施の形態3における表示部の表示態様の一具体例を示す模式図である。図10は、画像を非表示に設定するための設定メニューの一具体例を示す模式図である。図8に示すように、この実施の形態3にかかる画像表示装置31は、上述した実施の形態2にかかる画像表示装置21の制御部26に代えて制御部36を備える。また、この画像表示装置31において、表示部3は、入力部4の操作に応じて、図9に示すように画像の指定範囲Rをグラフィックバー15上に表示し、図10に示すように、画像を非表示に設定するための設定メニュー19を必要に応じて表示する。その他の構成は実施の形態2と同じであり、同一構成部分には同一符号を付している。
FIG. 8 is a block diagram schematically illustrating a configuration example of an image display apparatus according to the third embodiment of the present invention. FIG. 9 is a schematic diagram showing a specific example of the display mode of the display unit according to
制御部36は、上述した実施の形態2における制御部26の非表示設定部26dに代えて非表示設定部36dを有する。非表示設定部36dは、上述した実施の形態2における非表示設定部26dと同様の機能を有し、さらに、入力部4によって入力された範囲指定情報と非表示指示情報とに基づいて指定範囲内の画像を非表示の画像に設定する機能を有する。
The control unit 36 has a
具体的には、制御部36は、表示部3のグラフィックバー15によって示される画像の時間位置の中から指定される時間位置の範囲を示す範囲指定情報と非表示指示情報とを入力部4によって入力される。非表示設定部36dは、記憶部5内に保存した代表画像および潜在画像等の画像群のうち、かかる範囲指定情報によって指定される時間位置の範囲に対応する全画像に非表示フラグFを付加し、これによって、かかる指定範囲内の全画像を非表示の画像に設定する。制御部36は、かかる非表示設定部36dによって非表示に設定された画像の時間位置に対応するグラフィックバー15上の位置に上述したマークMを表示するように表示部3を制御するとともに、かかる非表示に設定された画像を表示しないように表示部3を制御する。なお、制御部36は、かかる非表示設定部36dに関する機能以外、上述した実施の形態2にかかる画像表示装置21の制御部26と同様の機能を有する。
Specifically, the control unit 36 uses the
なお、この実施の形態3にかかる画像表示装置31において、表示部3は、制御部36の制御に基づいて、図9に示すように画像の指定範囲Rをグラフィックバー15上に表示する。かかる指定範囲Rは、グラフィックバー15によって示される全画像の時間位置の中から指定する時間位置の範囲を示すものであり、例えばマウスのドラッグ操作等の入力部4の操作に対応して表示部3に表示される。入力部4は、かかる指定範囲Rをグラフィックバー15上に形成する入力操作によって、この指定範囲Rに囲まれるグラフィックバー15上の時間位置の範囲を示す範囲指定情報を制御部36に入力する。
In the
一方、図10に示す設定メニュー19は、マウスの右クリック操作等の入力部4の操作に対応して表示部3に表示される。入力部4は、かかる設定メニュー19の中から「表示対象外に設定する」旨の画像の非表示設定項目をクリック操作等によって選択した場合に、上述した範囲指定情報に対応する時間位置の範囲内の全画像を非表示に設定指示する非表示指示情報を制御部36に入力する。
On the other hand, the setting
つぎに、時系列に沿って撮像された画像群AP内に含まれる一部の連続画像群を非表示に設定する場合を例示して、本発明の実施の形態3にかかる画像表示装置31の動作を具体的に説明する。図11は、本発明の実施の形態3にかかる画像表示装置による画像の非表示設定動作を具体的に説明するための模式図である。なお、この実施の形態3にかかる画像表示装置31の動作は、グラフィックバー15上に指定される時間位置の指定範囲内の全画像を非表示設定する際の動作以外、上述した実施の形態2にかかる画像表示装置21と同様である。以下、図8,11を参照しつつ、グラフィックバー15上に指定された時間位置の指定範囲内の画像を非表示に設定する際の画像表示装置31の動作を具体的に説明する。
Next, the case where a part of continuous image groups included in the image group AP imaged along the time series is set to non-display is exemplified, and the
この実施の形態3にかかる画像表示装置31の制御部36は、グラフィックバー15上に指定範囲Rが形成された場合、この指定範囲Rに囲まれるグラフィックバー15上の時間位置範囲15aを示す範囲指定情報を入力部4によって入力される。このような状態において、制御部36は、入力部4によって非表示指示情報を入力された場合、記憶部5の全画像フォルダ5a内の画像群APのうち、この範囲指定情報によって示される時間位置範囲15aに対応する連続画像群PG1を表示部の表示対象外から除外する。
When the designated range R is formed on the
具体的には図11に示すように、非表示設定部36dは、この画像群APのうち、かかる時間位置範囲15aに対応する連続画像群PG1内の各画像に非表示フラグFを付加し、これによって、この連続画像群PG1内の全画像を非表示の画像に設定する。制御部36は、かかる非表示フラグFを付加した連続画像群PG1を表示しないように表示部3を制御する。
Specifically, as shown in FIG. 11, the
ここで、図11に示すように非表示設定された連続画像群PG1内に代表画像Phが含まれる場合、画像抽出部26aは、この画像群APのうちの非表示フラグFが付加されていない画像の中から、既に抽出済みの代表画像Pa,Pb,Pc,Pd,Pe,Pf,Pg,Pi,Pj,Pk,Pmに後続する順位の類似度を有する潜在画像を、この非表示の代表画像Phの代わりの代表画像として新規に抽出する。なお、かかる新規の代表画像は、上述した実施の形態2の場合と同様に、既存の代表画像Pa,Pb,Pc,Pd,Pe,Pf,Pg,Pi,Pj,Pk,Pmに加えて表示部3の一覧表示エリア11に一覧表示される。
Here, as shown in FIG. 11, when the representative image Ph is included in the continuous image group PG1 set to be non-displayed, the
以上、説明したように、本発明の実施の形態3では、時系列に沿って撮像された画像群内の各画像の時間位置を示すグラフィックバーの中から指定画像の時間位置範囲を指定し、非表示指示情報に基づいて、この時間位置範囲内の全画像を非表示の画像に設定するようにし、その他を実施の形態2と同様に構成した。このため、上述した実施の形態2と同様の作用効果を享受するとともに、このグラフィックバーによって示される各画像の時間位置の全範囲の中から、非表示に設定したい画像の時間位置の範囲を視認しつつ容易に指定でき、この指定した時間位置の範囲に対応する連続画像群を容易に非表示に設定することができる。この結果、時系列順の画像群の中から、同じ被写体の画像が複数連続する連続画像群等に例示されるような、被検体の臓器内部の観察に不要な連続画像群を容易に表示対象から除外することができ、これによって、より一層短時間に被検体の体内画像群を観察することができる。 As described above, in the third embodiment of the present invention, the time position range of the designated image is designated from the graphic bar indicating the time position of each image in the image group captured along the time series, Based on the non-display instruction information, all the images within this time position range are set as non-display images, and the others are configured in the same manner as in the second embodiment. For this reason, while enjoying the same effect as the second embodiment described above, the range of the time position of the image to be set to be hidden is visually recognized from the entire range of the time position of each image indicated by the graphic bar. However, it is possible to easily specify, and a continuous image group corresponding to the specified time position range can be easily set to non-display. As a result, a continuous image group that is unnecessary for observation inside the organ of the subject, such as a continuous image group in which a plurality of images of the same subject are continuously displayed, is easily displayed from among a group of images in chronological order. Thus, the in-vivo image group of the subject can be observed in a shorter time.
(実施の形態4)
つぎに、本発明の実施の形態4について説明する。上述した実施の形態3では、表示部3のグラフィックバー15によって示される各画像の時間位置の中から指定される時間位置範囲内の全画像を非表示に設定していたが、この実施の形態4では、グラフィックバー15によって示される各画像の時間位置の中から表示対象の画像の時間位置を範囲指定し、この範囲指定されたグラフィックバー15上の時間位置に対応する各画像を選択的に表示できるようにしている。
(Embodiment 4)
Next, a fourth embodiment of the present invention will be described. In the third embodiment described above, all images within the time position range specified from the time positions of the images indicated by the
図12は、本発明の実施の形態4にかかる画像表示装置の一構成例を模式的に示すブロック図である。図13は、画像を表示対象に設定するための設定メニューの一具体例を示す模式図である。図12に示すように、この実施の形態4にかかる画像表示装置41は、上述した実施の形態3にかかる画像表示装置31の制御部36に代えて制御部46を備える。また、この画像表示装置41において、表示部3は、図13に示すように、入力部4の操作に応じて、画像を表示対象または表示対象外に設定するための設定メニュー19を表示する。その他の構成は実施の形態3と同じであり、同一構成部分には同一符号を付している。
FIG. 12 is a block diagram schematically illustrating a configuration example of an image display apparatus according to the fourth embodiment of the present invention. FIG. 13 is a schematic diagram illustrating a specific example of a setting menu for setting an image as a display target. As shown in FIG. 12, the
制御部46は、上述した実施の形態3における制御部36の画像抽出部26aに代えて画像抽出部46aを有し、画像選択部26bに代えて画像選択部46bを有する。かかる制御部46は、画像抽出部46aに関する機能および画像選択部46bに関する機能以外、上述した実施の形態3にかかる画像表示装置31の制御部36と同様の機能を有する。
The
画像抽出部46aは、上述した画像抽出部26aと同様の画像抽出機能を有し、さらに、入力部4によって入力された範囲指定情報と表示指示情報とに基づいて指定範囲内の代表画像を抽出する機能を有する。具体的には、上述した図9に例示した指定範囲Rに対応する範囲指定情報と設定メニュー19の表示設定項目に対応する表示指示情報とが入力部4によって制御部46に入力された場合、画像抽出部46aは、記憶部5の全画像フォルダ5a内の画像群の中から、この範囲指定情報によって指定される時間位置の範囲内に存在する代表画像を抽出する。この場合、画像抽出部46aは、かかる範囲指定情報によって指定される時間位置の範囲内の各画像の中から、上述した表示数指示情報に基づく設定表示数分の代表画像を抽出する。制御部46は、かかる画像抽出部46aによって抽出された設定表示数分の代表画像のデータを代表画像フォルダ5b内に上書きするように記憶部5を制御するとともに、かかる設定表示数分の代表画像を一覧表示エリア11に一覧表示するように表示部3を制御する。
The
なお、図13に示す設定メニュー19は、マウスの右クリック操作等の入力部4の操作に対応して表示部3に表示される。入力部4は、かかる設定メニュー19の中から「表示対象に設定する」旨の画像の表示設定項目をクリック操作等によって選択した場合に、上述した範囲指定情報に対応する時間位置の範囲内の全画像を表示対象に設定指示する表示指示情報を制御部46に入力する。
A setting
画像選択部46bは、記憶部5の全画像フォルダ5a内の画像群のうちの上述した範囲指定情報によって指定される時間位置の範囲内に存在する各画像の中から、表示部3の詳細表示エリア12に一覧表示する1フレーム以上の潜在画像を選択する。なお、画像選択部46bは、かかる範囲指定情報によって指定される時間位置の範囲内に存在する各画像の中から潜在画像を選択すること以外、上述した画像選択部26bと同様の機能を有する。
The
つぎに、時系列に沿って撮像された画像群AP内に含まれる一部の連続画像群を表示対象に設定する場合を例示して、本発明の実施の形態4にかかる画像表示装置41の動作を具体的に説明する。図14は、本発明の実施の形態4にかかる画像表示装置の動作を具体的に説明するための模式図である。なお、この実施の形態4にかかる画像表示装置41の動作は、グラフィックバー15上に指定される時間位置の指定範囲内の全画像を表示対象にする際の動作以外、上述した実施の形態3にかかる画像表示装置31と同様である。以下、図12,14を参照しつつ、グラフィックバー15上に指定された時間位置の指定範囲内の全画像を表示対象にする際の画像表示装置41の動作を具体的に説明する。
Next, an example of setting a partial continuous image group included in the image group AP captured in time series as a display target will be described, and the
この実施の形態4にかかる画像表示装置41の制御部46は、グラフィックバー15上に指定範囲Rが形成された場合、この指定範囲Rに囲まれるグラフィックバー15上の時間位置範囲15bを示す範囲指定情報を入力部4によって入力される。このような状態において、表示対象に設定指示する表示指示情報が入力部4によって入力された場合、制御部46は、記憶部5の全画像フォルダ5a内の画像群APのうち、この範囲指定情報によって示される時間位置範囲15bに対応する連続画像群PG2を表示部の表示対象に設定する。
When the designated range R is formed on the
具体的には図14に示すように、画像抽出部46aは、この画像群APのうちの時間位置範囲15bに対応する連続画像群PG2内の各画像の中から、上述した設定表示数分の代表画像群DGを抽出する。制御部46は、かかる連続画像群PG2内から抽出した代表画像群DGの各画像データを代表画像フォルダ5b内に上書きするように記憶部5を制御するとともに、かかる代表画像群DGを上述した一覧表示エリア11に一覧表示するように表示部3を制御する。
Specifically, as illustrated in FIG. 14, the
なお、画像選択部46bは、上述した詳細表示アイコン14に対応する表示指示情報を入力された場合、かかる連続画像群PG2の中から、この表示指示情報によって表示指示される1フレーム以上の潜在画像を選択する。
When the display instruction information corresponding to the
以上、説明したように、本発明の実施の形態4では、時系列に沿って撮像された画像群内の各画像の時間位置を示すグラフィックバーの中から指定された時間位置範囲内の全画像を表示対象の画像とし、この指定した時間位置範囲内の全画像の中から設定表示数分の代表画像を抽出し、この抽出した設定表示数分の代表画像を表示部に一覧表示し、また、表示部に一覧表示する潜在画像をこの時間位置範囲内の全潜在画像の中から選択するようにし、その他を実施の形態3と同様に構成した。このため、上述した実施の形態3と同様の作用効果を享受するとともに、このグラフィックバーによって示される各画像の時間位置の全範囲の中から、表示対象に設定したい画像の時間位置の範囲を視認しつつ容易に指定でき、この指定した時間位置の範囲に対応する連続画像群を選択的に表示部に表示することができる。これによって、時系列順の画像群の中から、被検体の胃、小腸または大腸等の観察すべき消化管部位の連続画像群を選択的に表示対象にすることができ、この結果、観察したい被検体内部の連続画像群を選択的に一覧表示して、より一層短時間に被検体の体内画像群を観察することができる。
As described above, in the fourth embodiment of the present invention, all images within the time position range designated from the graphic bar indicating the time position of each image in the image group captured in time series. , The representative image for the set display number is extracted from all the images within the specified time position range, and the extracted representative images for the set display number are displayed in a list on the display unit, and The latent images to be displayed as a list on the display unit are selected from all the latent images within the time position range, and the others are configured in the same manner as in the third embodiment. For this reason, while enjoying the effect similar to
(実施の形態5)
つぎに、本発明の実施の形態5について説明する。上述した実施の形態1〜4では、代表画像間に潜在する潜在画像を静止画の状態で詳細表示エリア12に一覧表示していたが、この実施の形態5では、非表示フラグを付加した非表示設定の画像を除く表示対象の全画像を詳細表示エリア12に動画表示できるようにしている。
(Embodiment 5)
Next, a fifth embodiment of the present invention will be described. In Embodiments 1 to 4 described above, latent images that exist between representative images are displayed in a list in the
図15は、本発明の実施の形態5にかかる画像表示装置の一構成例を模式的に示すブロック図である。図16は、本発明の実施の形態5における表示部の表示態様の一具体例を示す模式図である。図15に示すように、この実施の形態5にかかる画像表示装置51は、上述した実施の形態4にかかる画像表示装置41の制御部46に代えて制御部56を備える。また、この画像表示装置51において、表示部3は、図16に示すように、動画モードを設定指示するためのGUIである動画モードアイコン100を表示し、動画モードに設定された場合、詳細表示エリア12内に画像を動画表示する際の表示操作を行うためのGUIである表示操作アイコン群101を表示する。その他の構成は実施の形態4と同じであり、同一構成部分には同一符号を付している。
FIG. 15 is a block diagram schematically illustrating a configuration example of an image display apparatus according to the fifth embodiment of the present invention. FIG. 16 is a schematic diagram showing a specific example of the display mode of the display unit in the fifth embodiment of the present invention. As illustrated in FIG. 15, the
制御部56は、動画モードを設定指示するモード設定指示情報を入力部4によって入力された場合、画像の表示動作モードを静止画モードから動画モードに切り替える。動画モードにおいて、制御部56は、上述した詳細表示エリア12を動画表示の表示エリアに設定するとともに、動画表示を操作するための表示操作アイコン群101を表示するように表示部3を制御する。制御部56は、かかる表示操作アイコン群101内の表示操作アイコンに対応する動画表示指示情報に基づいて、全画像フォルダ5a内の画像群に含まれる各画像を時系列順または時系列の逆順に順次動画再生する。この場合、制御部56は、全画像フォルダ5a内の画像群のうち、上述した非表示フラグFを付加した非表示設定の画像を除く残りの画像を詳細表示エリア12内に動画表示するように表示部3を制御する。かかる制御部56の制御に基づいて表示部3に動画表示される画像は、非表示フラグが付加されていない画像であれば、代表画像のみであってもよいし、潜在画像のみであってもよいし、代表画像および潜在画像の双方であってもよい。なお、制御部56は、かかる動画表示に関する機能以外、上述した実施の形態4にかかる画像表示装置41の制御部46と同様の機能を有する。
The
なお、この実施の形態5にかかる画像表示装置51において、入力部4は、動画モードアイコン100にマウスカーソル17を合わせてクリック操作することによって、動画モードを設定指示するモード設定指示情報を制御部56に入力する。また、入力部4は、表示操作アイコン群101内のいずれかの表示操作アイコンにマウスカーソル17を合わせてクリック操作することによって、このマウスカーソル17を合わせた表示操作アイコンに対応する動画表示指示情報を制御部56に入力する。
Note that in the
以上、説明したように、本発明の実施の形態5では、時系列に沿って撮像された画像群内の各画像のうちの非表示に設定した画像を除く残りの画像を動画表示するようにし、その他を実施の形態4と同様に構成した。このため、上述した実施の形態4と同様の作用効果を享受するとともに、被検体の臓器内部の観察に不要な画像以外の残りの各画像を動画表示することができる。これによって、表示部に動画表示する画像の表示数を必要最小限に低減できるとともに、被検体内部における病変部または出血部等の特徴的部位の画像が動画表示される可能性を高めることができ、この結果、動画再生による被検体の体内画像群の観察時間を短時間化することができる。
As described above, in the fifth embodiment of the present invention, the remaining images other than the image set to non-display among the images in the image group taken in time series are displayed as a moving image. Other configurations are the same as those in the fourth embodiment. For this reason, while enjoying the same effect as
なお、上述した実施の形態1〜5では、時系列に沿って撮像された画像群内の各画像の時間位置をグラフィックバー15およびインジケータ16によって示していたが、これに限らず、カプセル型内視鏡の移動経路である被検体内部の消化管を模した消化管模式画像を用いて、かかる画像群内の各画像の撮像位置を示してもよい。
In the first to fifth embodiments described above, the time position of each image in the image group captured in time series is indicated by the
図17は、消化管模式画像を用いて各画像の時間位置を示す場合の表示部の表示態様を例示する模式図である。図17に示すように、表示部3は、上述したグラフィックバー15に代えて消化管模式画像15cを表示し、この消化管模式画像15cによって示される消化管内部にインジケータ16aを表示する。消化管模式画像15cは、被検体の体内画像を時系列に沿って順次撮像するカプセル型内視鏡の移動経路である消化管を模式的に示す。インジケータ16aは、かかる消化管模式画像15cによって示される消化管に沿って移動し、これによって被検体内部における各画像の撮像位置を示す。この場合、かかる消化管模式画像15c内の所望の消化管位置に指定範囲Rを形成することによって、この指定範囲R内の消化管位置において撮像された各画像を表示対象外または表示対象に設定することができる。例えば図17に示すように、消化管模式画像15c内の胃を囲むように指定範囲Rを形成した場合、設定メニュー19の「表示対象外に設定する」旨の非表示設定項目を選択すれば、胃内部を撮像した各画像を表示対象から除外することができ、設定メニュー19の「表示対象に設定する」旨の表示設定項目を選択すれば、胃内部を撮像した各画像を選択的に表示対象に設定することができる。なお、かかる消化管模式画像15cのうちの非表示設定の画像に対応する撮像位置には、上述したマークMを表示してもよい。
FIG. 17 is a schematic view illustrating the display mode of the display unit when the time position of each image is indicated using a digestive tract schematic image. As shown in FIG. 17, the
また、上述した実施の形態1〜5では、表示部3の一覧表示エリア11内に複数の代表画像を一覧表示し、この一覧表示エリア11とは別の表示エリアである詳細表示エリア12内に、代表画像間に潜在する1フレーム以上の潜在画像を一覧表示していたが、本発明はこれに限定されるものではない。図18は、代表画像間に潜在する潜在画像を一覧表示する詳細表示エリアの一変形例を示す模式図である。図19は、潜在画像の一覧表示例の別態様を示す模式図である。
In the first to fifth embodiments described above, a plurality of representative images are displayed in a list in the
本発明にかかる画像表示装置は、図18に示すように、一覧表示エリア11内に一覧表示した複数の代表画像における代表画像間に潜在する1フレーム以上の潜在画像を、この1フレーム以上の潜在画像が潜在する代表画像間の位置を指し示す態様の吹き出し状の詳細表示エリア12内に一覧表示してもよい。例えば図18においては、潜在画像群SPを一覧表示する吹き出し状の詳細表示エリア12は、この潜在画像群SPが潜在していた代表画像Pg,Ph間と代表画像Ph,Pi間とを指し示している。一方、本発明にかかる画像表示装置は、図19に示すように、代表画像を一覧表示する一覧表示エリア11内に潜在画像を一覧表示してもよい。この場合、画像表示装置は、一覧表示エリア11内における代表画像Pg,Ph間に、潜在画像群SPのうちの代表画像Pg,Ph間に潜在する各潜在画像を一覧表示し、代表画像Ph,Pi間に、この潜在画像群SPのうちの代表画像Ph,Pi間に潜在する各潜在画像を一覧表示する。
As shown in FIG. 18, the image display apparatus according to the present invention displays one or more latent images that exist between representative images in a plurality of representative images displayed in a list in the
また、特に図示しないが、本発明にかかる画像表示装置は、代表画像の上段または下段に配列した態様で、この代表画像に代表される潜在画像を一覧表示してもよいし、代表画像の右側または左側に配列した態様で、この代表画像に代表される潜在画像を一覧表示してもよい。 Although not particularly illustrated, the image display apparatus according to the present invention may display a list of latent images represented by the representative image in a form arranged in the upper or lower stage of the representative image, or may be displayed on the right side of the representative image. Alternatively, latent images typified by this representative image may be displayed in a list in a manner arranged on the left side.
一方、上述した実施の形態1〜5では、代表画像間に潜在する潜在画像を一覧表示する際に、一覧表示されている複数の代表画像のうちのいずれか一つを指定していたが、これに限らず、複数の代表画像を指定し、指定した複数の代表画像に各々代表される潜在画像を一覧表示してもよいし、一覧表示されている複数の代表画像のうちの2つの代表画像を指定し、この指定された2つの代表画像の間に潜在する潜在画像を一覧表示してもよい。この場合、かかる指定される2つの代表画像は、時系列的に隣接する代表画像同士であってもよいし、1フレーム以上の代表画像を間に挟んだ代表画像同士であってもよい。 On the other hand, in Embodiments 1 to 5 described above, when displaying a list of latent images that exist between representative images, one of a plurality of representative images displayed in a list is specified. Not limited to this, a plurality of representative images may be designated, and latent images represented by the designated representative images may be displayed in a list, or two representatives of the plurality of representative images displayed in a list may be displayed. An image may be designated, and latent images that exist between the two designated representative images may be displayed as a list. In this case, the two designated representative images may be representative images that are adjacent in time series or may be representative images that sandwich one or more representative images.
また、上述した実施の形態2では、一覧表示されている複数の代表画像から指定した代表画像と、この代表画像に代表される各潜在画像とを表示対象外に設定していたが、これに限らず、指定された代表画像のみを表示対象外に設定してもよい。 In the above-described second embodiment, the representative image designated from the plurality of representative images displayed in a list and the latent images represented by the representative image are set out of the display target. Not limited to this, only the designated representative image may be set out of the display target.
さらに、上述した実施の形態3,4では、グラフィックバー15上に形成した指定範囲Rに対応する全画像を選択的に表示対象または表示対象外にしていたが、これに限らず、かかる指定範囲Rによって指定される全画像のうち、代表画像のみを選択的に表示対象または表示対象外にしてもよいし、潜在画像のみを選択的に表示対象または表示対象外にしてもよい。
Furthermore, in the above-described third and fourth embodiments, all images corresponding to the designated range R formed on the
また、上述した実施の形態1〜5では、指定された代表画像間に潜在する全ての潜在画像を一覧表示していたが、これに限らず、指定された代表画像間に潜在する全潜在画像のうちの1フレーム以上の潜在画像を一覧表示すればよく、例えば、1フレームずつ飛ばした態様で潜在画像を一覧表示してもよいし、複数フレームずつ飛ばした態様で潜在画像を一覧表示してもよい。 Moreover, in Embodiment 1-5 mentioned above, although all the latent images latent between the designated representative images were displayed as a list, it is not restricted to this, All the latent images latent between the designated representative images It is only necessary to display a list of latent images of one frame or more, for example, a list of latent images may be displayed in a mode in which one frame is skipped, or a list of latent images is displayed in a mode in which multiple frames are skipped. Also good.
さらに、上述した実施の形態1〜5では、時系列に沿って撮像された画像群における隣接画像間での画像の類似度をもとに代表画像を抽出していたが、これに限らず、隣接画像間での画像の類似度以外の条件に基づいて代表画像を抽出してもよい。例えば、かかる画像群内の各画像のフレーム番号をもとに代表画像を抽出してもよいし、各画像の撮像時刻または撮像開始からの経過時間などの時間データをもとに代表画像を抽出してもよいし、各画像の撮像位置をもとに代表画像を抽出してもよいし、各画像をカプセル型内視鏡等の体内撮像装置の移動距離をもとに代表画像を抽出してもよいし、画像の動きの大きさをもとに代表画像を抽出してもよい。 Furthermore, in Embodiment 1-5 mentioned above, although the representative image was extracted based on the similarity of the image between the adjacent images in the image group imaged along the time series, it is not restricted to this, The representative image may be extracted based on conditions other than the similarity of images between adjacent images. For example, a representative image may be extracted based on the frame number of each image in the image group, or a representative image may be extracted based on time data such as an imaging time of each image or an elapsed time from the start of imaging. Alternatively, a representative image may be extracted based on the imaging position of each image, or a representative image may be extracted based on the moving distance of an in-vivo imaging device such as a capsule endoscope. Alternatively, the representative image may be extracted based on the magnitude of the movement of the image.
また、上述した実施の形態1〜5では、被検体内部に導入されるカプセル型内視鏡によって撮像された時系列順の画像群を表示していたが、かかる画像群を撮像する体内撮像装置はカプセル型内視鏡に限らず、他の体内撮像装置であってもよく、例えば、本発明にかかる画像表示装置に表示する画像群は、被検体の消化管内部に挿入する挿入部の先端に撮像部等を内蔵した内視鏡によって撮像された画像群であってもよい。 In the first to fifth embodiments described above, the time-series image groups captured by the capsule endoscope introduced into the subject are displayed. The in-vivo imaging device that captures the image groups. Is not limited to a capsule endoscope, and may be another in-vivo imaging device. For example, an image group displayed on the image display device according to the present invention is a distal end of an insertion portion that is inserted into the digestive tract of a subject. It may be a group of images captured by an endoscope with a built-in imaging unit.
さらに、上述した実施の形態1〜5では、データ入出力部2に挿着された記録媒体内に表示済みの画像群を保存できるようにしていたが、これに限らず、表示済みの画像群のうちの表示対象外に設定された画像をデータ入出力部2内の記録媒体に出力しないようにし、このデータ入出力部2内の記録媒体に、表示対象外の画像を除く残りの画像を記録するようにしてもよい。
Furthermore, in Embodiments 1 to 5 described above, the displayed image group can be stored in the recording medium inserted in the data input /
また、上述した実施の形態1〜5では、各画像を一覧表示する際、表示画面に向かって左から右に向けて時系列順に各画像を配列し、且つ上から下に向けて時系列順に各画像を配列していたが、これに限らず、一覧表示する各画像は、時系列順に配列されていれば所望の配列態様であってもよく、例えば、表示画面に向かって右から左に向けて時系列順に各画像を配列してもよいし、表示画面に向かって下から上に向けて時系列順に各画像を配列してもよい。なお、いずれの配列態様であっても、代表画像の一覧表示エリア11と潜在画像の詳細表示エリア12との各配列態様は互いに同様であることが望ましい。
In the first to fifth embodiments described above, when displaying each image as a list, the images are arranged in chronological order from left to right toward the display screen, and in chronological order from top to bottom. Although each image was arranged, the present invention is not limited to this, and each image to be displayed in a list may be in a desired arrangement form as long as it is arranged in chronological order, for example, from right to left toward the display screen. The images may be arranged in time series order, or the images may be arranged in time series from bottom to top toward the display screen. In any arrangement mode, it is desirable that the arrangement modes of the representative image
1,21,31,41,51 画像表示装置
2 データ入出力部
3 表示部
4 入力部
5 記憶部
5a 全画像フォルダ
5b 代表画像フォルダ
6,26,36,46,56 制御部
6a,26a,46a 画像抽出部
6b,26b,46b 画像選択部
11 一覧表示エリア
12 詳細表示エリア
13 一覧表示アイコン
14 詳細表示アイコン
15 グラフィックバー
15a,15b 時間位置範囲
15c 消化管模式画像
16,16a インジケータ
17 マウスカーソル
18 削除アイコン
19 設定メニュー
26c グループ化処理部
26d,36d 非表示設定部
100 動画モードアイコン
101 表示操作アイコン群
AP 画像群
DP 代表画像群
F 非表示フラグ
M マーク
Pa〜Pm,Px〜Pz 代表画像
PeG 画像グループ
PG1,PG2 連続画像群
Pg1〜Pg4,Ph1〜Ph5 潜在画像
R 指定範囲
SP 潜在画像群
1, 2, 31, 41, 51
Claims (10)
前記画像取得手段が取得した画像群を表示する表示手段と、
前記画像群の中から代表画像群を抽出して前記代表画像群を一覧表示するように前記表示手段を制御し、この一覧表示した前記代表画像群内の代表画像に代表される1つ以上の潜在画像を前記画像群の中から選択し、この選択した前記1つ以上の潜在画像を一覧表示するように前記表示手段を制御する制御手段と、
前記代表画像群の中から1つ以上の代表画像を指定する代表画像指定情報と、画像の非表示を指示する非表示指示情報と、を入力する入力手段と、を備え、
前記制御手段は、前記代表画像群のうちの前記代表画像指定情報によって指定される1つ以上の代表画像に代表される前記1つ以上の潜在画像を前記画像群の中から選択し、この選択した前記1つ以上の潜在画像を一覧表示するように前記表示手段を制御し、前記入力手段によって前記非表示指示情報が入力された場合、前記代表画像指定情報によって指定される1つ以上の代表画像を非表示にするように前記表示手段を制御するとともに、前記画像群のうちの前記代表画像群を除く潜在画像群の中から、前記非表示にした代表画像と同じフレーム数の代表画像を抽出し、この抽出した前記フレーム数の代表画像を含む前記代表画像群を一覧表示するように前記表示手段を制御することを特徴とする画像表示装置。 Image acquisition means for acquiring a group of images captured in time series;
Display means for displaying the image group acquired by the image acquisition means;
The display means is controlled to extract a representative image group from the image group and display the representative image group as a list, and at least one representative image in the representative image group displayed in the list is displayed. Control means for selecting a latent image from the image group and controlling the display means to display a list of the selected one or more latent images;
Input means for inputting representative image designation information for designating one or more representative images from the representative image group, and non-display instruction information for instructing non-display of images ,
The control means selects the one or more latent images represented by one or more representative images designated by the representative image designation information in the representative image group from the image group, and selects the selected image One or more representatives designated by the representative image designation information when the display means is controlled to display a list of the one or more latent images and the non-display instruction information is inputted by the input means. The display means is controlled to hide the image, and a representative image having the same number of frames as the hidden representative image is selected from the latent image group excluding the representative image group of the image group. An image display apparatus that extracts and controls the display means to display a list of the representative image group including the extracted representative images of the number of frames .
前記制御手段は、前記入力手段によって前記非表示指示情報を入力された場合、前記画像群指定情報によって指定される連続画像群内の代表画像および潜在画像を非表示にするように前記表示手段を制御することを特徴とする請求項1〜4のいずれか一つに記載の画像表示装置。 It said input means, image group designation information for designating a desired continuous image group from among the image group input by
When the non-display instruction information is input by the input unit, the control unit controls the display unit to hide the representative image and the latent image in the continuous image group designated by the image group designation information. The image display device according to claim 1, wherein the image display device is controlled.
前記制御手段は、前記入力手段によって前記表示指示情報を入力された場合、前記画像群の中から前記代表画像指定情報によって指定される1つ以上の代表画像を抽出して該1つ以上の代表画像を一覧表示にするように前記表示手段を制御することを特徴とする請求項1〜6のいずれか一つに記載の画像表示装置。 The input means inputs display instruction information for instructing a list display of images,
When the display instruction information is input by the input unit, the control unit extracts one or more representative images designated by the representative image designation information from the image group, and extracts the one or more representatives. the image display apparatus according to any one of claims 1 to 6, wherein the controller controls the display unit to the list display images.
前記制御手段は、前記入力手段によって前記表示指示情報を入力された場合、前記画像群指定情報によって指定される連続画像群内の代表画像および潜在画像を一覧表示するように前記表示手段を制御することを特徴とする請求項7に記載の画像表示装置。 The input means inputs image group designation information for designating a desired continuous image group from the image group,
The control means controls the display means to display a list of representative images and latent images in a continuous image group designated by the image group designation information when the display instruction information is inputted by the input means. The image display device according to claim 7 .
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008265699A JP5379442B2 (en) | 2008-10-14 | 2008-10-14 | Image display device |
US12/578,878 US20100097392A1 (en) | 2008-10-14 | 2009-10-14 | Image display device, image display method, and recording medium storing image display program |
CN2009101778762A CN101721199B (en) | 2008-10-14 | 2009-10-14 | Image display device and image display method |
EP10015493.9A EP2316327B1 (en) | 2008-10-14 | 2009-10-14 | Image display device, image display method, and image display program |
EP09012976A EP2177149A1 (en) | 2008-10-14 | 2009-10-14 | Image display device, image display method, and image display program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008265699A JP5379442B2 (en) | 2008-10-14 | 2008-10-14 | Image display device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2010094185A JP2010094185A (en) | 2010-04-30 |
JP5379442B2 true JP5379442B2 (en) | 2013-12-25 |
Family
ID=42256310
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008265699A Expired - Fee Related JP5379442B2 (en) | 2008-10-14 | 2008-10-14 | Image display device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5379442B2 (en) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5725745B2 (en) * | 2010-07-05 | 2015-05-27 | 株式会社東芝 | X-ray diagnostic apparatus and medical image diagnostic apparatus |
WO2014002096A2 (en) | 2012-06-29 | 2014-01-03 | Given Imaging Ltd. | System and method for displaying an image stream |
JP5948200B2 (en) | 2012-09-27 | 2016-07-06 | オリンパス株式会社 | Image processing apparatus, program, and image processing method |
JP6242072B2 (en) | 2012-09-27 | 2017-12-06 | オリンパス株式会社 | Image processing apparatus, program, and method of operating image processing apparatus |
JP6006112B2 (en) | 2012-12-28 | 2016-10-12 | オリンパス株式会社 | Image processing apparatus, image processing method, and program |
EP3045100A1 (en) * | 2013-09-09 | 2016-07-20 | Olympus Corporation | Image display device, image display method, and image display program |
JPWO2017006618A1 (en) * | 2015-07-09 | 2017-11-16 | オリンパス株式会社 | Server, endoscope system, transmission method and program |
WO2017158901A1 (en) * | 2016-03-18 | 2017-09-21 | オリンパス株式会社 | Image processing device, image processing device operation method, and image processing program |
JP2020127440A (en) * | 2017-04-28 | 2020-08-27 | オリンパス株式会社 | Endoscopic image observation support system |
JP6907324B2 (en) | 2017-08-25 | 2021-07-21 | 富士フイルム株式会社 | Diagnostic support system, endoscopic system and diagnostic support method |
KR20230071409A (en) * | 2021-11-16 | 2023-05-23 | 주식회사 아이도트 | Capsule endoscopy image analysis system |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4854957B2 (en) * | 2004-12-15 | 2012-01-18 | 富士フイルム株式会社 | Representative image selection apparatus and method, and program |
JP2006288612A (en) * | 2005-04-08 | 2006-10-26 | Olympus Corp | Picture display device |
JP4716025B2 (en) * | 2006-05-22 | 2011-07-06 | 富士フイルム株式会社 | Image display device, display control program, and photographing device |
JP4914680B2 (en) * | 2006-09-05 | 2012-04-11 | オリンパスメディカルシステムズ株式会社 | Image display device |
JP4666657B2 (en) * | 2007-03-28 | 2011-04-06 | オリンパスイメージング株式会社 | Image reproduction apparatus, imaging apparatus, image display program, recording medium, and image display method |
-
2008
- 2008-10-14 JP JP2008265699A patent/JP5379442B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2010094185A (en) | 2010-04-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5379442B2 (en) | Image display device | |
EP2316327B1 (en) | Image display device, image display method, and image display program | |
US8918740B2 (en) | Image management apparatus, method, and computer-readable recording medium and capsule endoscope system | |
US8216129B2 (en) | Image display apparatus, endoscope system using the same, and image display method | |
JP4594835B2 (en) | Image display device | |
US8194096B2 (en) | Image display apparatus | |
US20090051691A1 (en) | Image display apparatus | |
JP4441464B2 (en) | Image display device | |
US9411932B2 (en) | Image management apparatus | |
JP2008295490A (en) | Capsule endoscope image display device | |
JP2006149684A (en) | Image display device | |
JP4891646B2 (en) | Image display device | |
JP2009050321A (en) | Image processor | |
WO2007023771A1 (en) | Image display device | |
JP2008119146A (en) | Image display device | |
US20080232702A1 (en) | Image display apparatus | |
JP4472602B2 (en) | Image display device | |
JP5231160B2 (en) | Image display device, image display method, and image display program | |
JP2007058334A (en) | Filing device and filling system | |
JP5684300B2 (en) | Image display device, image display method, and image display program | |
JP2006345929A (en) | Image display device | |
JP4590444B2 (en) | Image display device, image display method, and image display program | |
JP4663698B2 (en) | Image display device, image display method, and image display program | |
JP2006061626A (en) | Image display device, image display method and image display program | |
JP4354353B2 (en) | Insertion support system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20110323 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20121214 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130305 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130417 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130903 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130927 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5379442 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |