JP6799301B2 - 情報処理装置、制御方法、及びプログラム - Google Patents
情報処理装置、制御方法、及びプログラム Download PDFInfo
- Publication number
- JP6799301B2 JP6799301B2 JP2019520217A JP2019520217A JP6799301B2 JP 6799301 B2 JP6799301 B2 JP 6799301B2 JP 2019520217 A JP2019520217 A JP 2019520217A JP 2019520217 A JP2019520217 A JP 2019520217A JP 6799301 B2 JP6799301 B2 JP 6799301B2
- Authority
- JP
- Japan
- Prior art keywords
- moving image
- abnormal
- image frame
- detected
- area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 105
- 238000000034 method Methods 0.000 title claims description 72
- 230000002159 abnormal effect Effects 0.000 claims description 411
- 238000001514 detection method Methods 0.000 claims description 85
- 230000009471 action Effects 0.000 claims description 51
- 230000005856 abnormality Effects 0.000 claims description 27
- 239000003814 drug Substances 0.000 claims description 5
- 229940079593 drug Drugs 0.000 claims description 5
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 claims description 5
- 238000005507 spraying Methods 0.000 claims description 3
- 238000010186 staining Methods 0.000 claims 1
- 238000010586 diagram Methods 0.000 description 23
- 230000008569 process Effects 0.000 description 9
- 238000003384 imaging method Methods 0.000 description 8
- 230000007246 mechanism Effects 0.000 description 7
- 230000006870 function Effects 0.000 description 6
- 230000003902 lesion Effects 0.000 description 6
- 206010028980 Neoplasm Diseases 0.000 description 5
- 238000010191 image analysis Methods 0.000 description 5
- 238000007689 inspection Methods 0.000 description 5
- 238000004043 dyeing Methods 0.000 description 4
- 239000000126 substance Substances 0.000 description 4
- 230000002547 anomalous effect Effects 0.000 description 3
- 241001465754 Metazoa Species 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 239000000975 dye Substances 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000008719 thickening Effects 0.000 description 2
- 210000000436 anus Anatomy 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 201000010099 disease Diseases 0.000 description 1
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000001839 endoscopy Methods 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 239000007788 liquid Substances 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 239000007921 spray Substances 0.000 description 1
- 239000012192 staining solution Substances 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00043—Operational features of endoscopes provided with output arrangements
- A61B1/00045—Display arrangement
- A61B1/0005—Display arrangement combining images e.g. side-by-side, superimposed or tiled
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00043—Operational features of endoscopes provided with output arrangements
- A61B1/00055—Operational features of endoscopes provided with output arrangements for alerting the user
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/045—Control thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10068—Endoscopic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30096—Tumor; Lesion
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Surgery (AREA)
- Physics & Mathematics (AREA)
- Radiology & Medical Imaging (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Heart & Thoracic Surgery (AREA)
- Veterinary Medicine (AREA)
- Biomedical Technology (AREA)
- Optics & Photonics (AREA)
- Biophysics (AREA)
- Molecular Biology (AREA)
- Animal Behavior & Ethology (AREA)
- Pathology (AREA)
- Public Health (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Signal Processing (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Endoscopes (AREA)
- Closed-Circuit Television Systems (AREA)
- Image Analysis (AREA)
Description
前記表示制御手段は、前記検出された異常領域又はその周辺に対するユーザの所定行為が検出された場合、その異常領域を含んでおりなおかつ前記第1領域に表示される前記動画フレーム又はその周辺に所定の表示を表示させる。
本発明の第2の情報処理装置は、1)体内が撮影された動画から前記体内の異常領域を検出する検出手段と、2)前記動画を構成する動画フレームのうち、前記異常領域が検出された前記動画フレームをディスプレイ装置の第1領域に表示させ、なおかつその動画フレームよりも後に生成された前記動画フレームが含まれる前記動画を前記ディスプレイ装置の第2領域に表示させる表示制御手段と、3)前記検出された異常領域又はその周辺に対するユーザの所定行為を検出する第2検出手段と、を有し、
前記表示制御手段は、前記検出された異常領域又はその周辺に対するユーザの所定行為が検出された場合、その異常領域を含む前記動画フレームを前記第1領域に表示しない。
本発明の第1の制御方法は、1)体内が撮影された動画から前記体内の異常領域を検出する検出ステップと、2)前記動画を構成する動画フレームのうち、前記異常領域が検出された前記動画フレームをディスプレイ装置の第1領域に表示させ、なおかつその動画フレームよりも後に生成された前記動画フレームが含まれる前記動画を前記ディスプレイ装置の第2領域に表示させる表示制御ステップと、3)前記検出された異常領域又はその周辺に対するユーザの所定行為を検出する第2検出ステップと、を有し、
前記表示制御ステップにおいて、前記検出された異常領域又はその周辺に対するユーザの所定行為が検出された場合、その異常領域を含んでおりなおかつ前記第1領域に表示される前記動画フレーム又はその周辺に所定の表示を表示させる。
本発明の第2の制御方法は、1)体内が撮影された動画から前記体内の異常領域を検出する検出ステップと、2)前記動画を構成する動画フレームのうち、前記異常領域が検出された前記動画フレームをディスプレイ装置の第1領域に表示させ、なおかつその動画フレームよりも後に生成された前記動画フレームが含まれる前記動画を前記ディスプレイ装置の第2領域に表示させる表示制御ステップと、3)前記検出された異常領域又はその周辺に対するユーザの所定行為を検出する第2検出ステップと、を有し、
前記表示制御ステップにおいて、前記検出された異常領域又はその周辺に対するユーザの所定行為が検出された場合、その異常領域を含む前記動画フレームを前記第1領域に表示しない。
図1は、実施形態1の情報処理装置2000の動作を概念的に例示する図である。なお、図1は、情報処理装置2000の理解を容易にするためにその動作の一例を示しているにすぎず、情報処理装置2000の機能を何ら限定するものではない。
図2は、情報処理装置2000の機能構成を例示するブロック図である。情報処理装置2000は、検出部2020及び表示制御部2040を有する。検出部2020は、動画データ12から異常領域30を検出する。表示制御部2040は、異常領域30が検出された動画フレーム14を、ディスプレイ装置20の第1領域22に表示させる。さらに表示制御部2040は、第1領域に表示された動画フレーム14よりも後に生成された動画フレーム14を含む動画データ12を、ディスプレイ装置20の第2領域24に表示させる。
情報処理装置2000の各機能構成部は、各機能構成部を実現するハードウエア(例:ハードワイヤードされた電子回路など)で実現されてもよいし、ハードウエアとソフトウエアとの組み合わせ(例:電子回路とそれを制御するプログラムの組み合わせなど)で実現されてもよい。以下、情報処理装置2000の各機能構成部がハードウエアとソフトウエアとの組み合わせで実現される場合について、さらに説明する。
ディスプレイ装置20は、1つの画面を有していてもよいし、複数の画面を有していてもよい。前者の場合、第1領域22と第2領域24は、1つの画面上のそれぞれ異なる領域である。後者の場合、第1領域22と第2領域24は、1つの画面上のそれぞれ異なる領域であってもよいし、それぞれ異なる画面上の領域であってもよい。
図5は、情報処理装置2000の利用環境の具体例を示す図である。例えば情報処理装置2000は、スコープ40及び内視鏡システム50と共に利用される。スコープ40は内視鏡システム50と接続されている。また、スコープ40にはカメラ10が設けられている。このケースでは、動画データ12は、スコープ40に設けられたカメラ10によって生成される複数の動画フレーム14で構成される。内視鏡システム50は、動画データ12を情報処理装置2000へ出力する。例えば動画データ12は、内視鏡システム50に設けられている映像出力用のインタフェース(例えば HDMI(High-Definition Multimedia Interface)(登録商標)インタフェース)から、情報処理装置2000が有する映像入力用のインタフェースへ出力される。そして情報処理装置2000は、内視鏡システム50から取得した動画データ12を処理して、ディスプレイ装置20の表示を制御する(図1参照)。
図6は、実施形態1の情報処理装置2000によって実行される処理の流れを例示するフローチャートである。S102からS112は、カメラ10から取得する各動画フレーム14について実行されるループ処理である。S102において、情報処理装置2000は、まだループ処理Aの対象としていない動画フレーム14のうち、最も生成時点が早い動画フレーム14を選択する。ここで選択される動画フレーム14を、動画フレームiと表記する。なお、既に全ての動画フレーム14についてループ処理Aが実行されている場合、例えば情報処理装置2000は、新たな動画フレーム14が生成されるまで待機する。または、図6の処理を終了させてもよい。
検出部2020が動画データ12を取得する方法は任意である。例えば検出部2020は、動画データ12が記憶されている記憶装置にアクセスすることで、動画データ12を取得する。動画データ12が記憶されている記憶装置は、カメラ10の内部に設けられていてもよいし、カメラ10の外部に設けられていてもよい。また例えば、検出部2020は、カメラ10から送信される動画データ12を受信することで、動画データ12を取得してもよい。さらに検出部2020は、カメラ10に接続されている他の装置(例えば前述した内視鏡システム50)から動画データ12を取得してもよい。
検出部2020は、動画データ12を構成する各動画フレーム14から異常領域30を検出する。ここで、体内が撮像されている画像を解析して異常な部位を検出する技術には、既存の技術を利用することができる。例えば、特徴量マッチングやテンプレートマッチングなどの手法が利用できる。例えば特徴量マッチングで腫瘍を検出する場合、腫瘍の外観(色、模様、又は形状など)の特徴を表す値(特徴量)を予め1つ以上定義しておく。検出部2020は、動画フレーム14の画像領域の中から、予め定めておいた腫瘍の特徴量との類似度が高い画像領域を、動画フレーム14から検出する。そして、検出部2020は、検出された画像領域を、異常領域30を表す画像領域として扱う。傷や異物を検出するケースについても同様の方法を採用できる。
前述したように、第1領域22には、異常領域30が含まれる動画フレーム14が表示される。また、第2領域24には動画データ12が表示される。第1領域22と第2領域24は、互いに異なる任意の領域とすることができる。ディスプレイ装置20における第1領域22と第2領域24の位置や大きさは、固定であってもよいし、固定でなくてもよい。後者の場合、例えば表示制御部2040は、第1領域22や第2領域24の位置や大きさを変更するユーザ操作を受け付ける。そして、表示制御部2040は、受け付けたユーザ操作に応じて、第1領域22や第2領域24の位置や大きさを変更する。
表示制御部2040は、異常領域30が検出された動画フレーム14をディスプレイ装置20の第1領域22に表示させる。ここで、ディスプレイ装置20上の領域に画像を表示させる技術には、既存の技術を利用することができる。
表示制御部2040は、動画データ12をディスプレイ装置20の第2領域24に表示させる。動画データをディスプレイ装置に表示させる技術には、既存の技術を利用することができる。
表示制御部2040は、第1領域22に表示する動画フレーム14について、その動画フレーム14に含まれる異常領域30を表す表示を行ってもよい。こうすることで、ユーザが動画フレーム14に含まれる異常領域30を容易に把握することができるようになる。以下、この表示を第1表示と呼ぶ。
検出部2020は、異常領域30が検出された動画フレーム14を記憶装置に記憶させてもよい。以下、動画フレーム14を記憶させる記憶装置を画像記憶部80と呼ぶ。図9は、画像記憶部80と接続されている情報処理装置2000を例示する図である。なお、画像記憶部80は、情報処理装置2000の内部に設けられていてもよい。
図10は、実施形態2の情報処理装置2000を例示するブロック図である。以下で説明する事項を除き、実施形態2の情報処理装置2000は、実施形態1の情報処理装置2000と同様である。
判定部2060は、各動画フレーム14から検出された異常領域30を比較することで、動画フレーム14から検出された異常領域30が同一であるか否かを判定する。例えば判定部2060は、或る動画フレーム14に含まれる異常領域30を表す画像領域と他の動画フレーム14に含まれる異常領域30を表す画像領域との類似度を算出する。そして、その類似度が所定値以上である場合に、判定部2060は上記2つの動画フレーム14に含まれる異常領域30が互いに同一であると判定する。一方、その類似度が所定値以上である場合に、判定部2060は上記2つの動画フレーム14に含まれる異常領域30が互いに異なると判定する。ここで、画像領域同士を比較して類似度を算出する技術には、既存の技術を利用することができる。
例えば表示制御部2040は、互いに同一であると判定された異常領域30を含む複数の動画フレーム14のうち、ユーザにとって異常領域30が最も把握しやすい1つの動画フレーム14を特定し、特定した動画フレーム14をディスプレイ装置20に表示させる。上記の特定には、様々な方法を採用することができる。以下、上記特定の方法について、具体例を説明する。
表示制御部2040は、互いに同一であると判定された異常領域30を含む複数の動画フレーム14のうち、異常領域30を表す画像領域が体内の異常を表す確度を特定する。例えば特徴量マッチングやテンプレートマッチングで動画フレーム14から異常領域30を検出する場合、異常領域30を表す画像領域が体内の異常を表す確度は、その画像領域と、予め定義しておいた特徴量やテンプレートとの類似度の高さで表される。表示制御部2040は、この確度が最も高い動画フレーム14を、ディスプレイ装置20に表示させる動画フレーム14として特定する。
そこで表示制御部2040は、互いに同一であると判定された異常領域30を含む複数の動画フレーム14の中から、異常領域30の位置が動画フレーム14の中心位置に最も近いものを特定し、特定された動画フレーム14を、ディスプレイ装置20に表示させる動画フレーム14とする。具体的には、表示制御部2040は、各動画フレーム14について、動画フレーム14に含まれる異常領域30と動画フレーム14の中心座標との距離を算出する。そして、表示制御部2040は、その距離が最も小さい動画フレーム14を、ディスプレイ装置20に表示させる動画フレーム14として特定する。
表示制御部2040は、互いに同一であると判定された異常領域30を含む複数の動画フレーム14のうち、動画フレーム14全体のコントラストが最も大きいものを、ディスプレイ装置20に表示させる動画フレーム14として特定する。具体的には、表示制御部2040は、各動画フレーム14について、動画フレーム14全体のコントラストを表す指標値を算出する。そして表示制御部2040は、算出した指標値を比較することにより、コントラストが最も大きい動画フレーム14を特定し、特定された動画フレーム14を、ディスプレイ装置20に表示させる動画フレーム14とする。なお、コントラストを表す指標値には、例えば Michelson コントラストなどを利用することができる。
表示制御部2040は、動画フレーム14全体のコントラストではなく、異常領域30を表す画像領域のコントラストを利用してもよい。つまり、表示制御部2040は、互いに同一であると判定された異常領域30を含む複数の動画フレーム14それぞれについて、異常領域30を表す画像領域のコントラストの指標値を算出する。そして、表示制御部2040は、算出された指標値を比較することにより、異常領域30を表す画像領域のコントラストが最も大きい動画フレーム14を特定し、この特定した動画フレーム14をディスプレイ装置20に表示させる。
前述したように、異常領域30が検出された動画フレーム14をディスプレイ装置20に表示させるタイミングは任意である。例えば表示制御部2040は、動画フレーム14から異常領域30が検出されたタイミングで、その動画フレーム14をディスプレイ装置20に表示させる。この場合、例えば表示制御部2040は、既にディスプレイ装置20に表示されている動画フレーム14と、その動画フレーム14に含まれる異常領域30と同一の異常領域30が検出された新たな動画フレーム14とを比較して、どちらをディスプレイ装置20に表示させるかを決定する。新たな動画フレーム14をディスプレイ装置20に表示させると決定した場合、ディスプレイ装置20に表示を更新する。一方、既に動画フレーム14に表示されている動画フレーム14をディスプレイ装置20に表示させると決定した場合、表示制御部2040は、新たな動画フレーム14をディスプレイ装置20に表示させない。
実施形態2の検出部2020は、同一の異常領域30が検出された動画フレーム14のうち、一部の動画フレーム14のみを画像記憶部80に記憶させてもよい。例えば検出部2020は、同一の異常領域30が検出された動画フレーム14のうち、検出部2020が第1領域22に表示させる動画フレーム14(前述の各方法で特定された動画フレーム14)のみを画像記憶部80に記憶させる。こうすることで、異常領域30をよく表す動画フレーム14を保存しつつ、画像記憶部80の記憶領域を節約することができる。
前述したように、表示制御部2040は、異常領域30を表す第1表示をディスプレイ装置20に表示させてもよい。この場合、互いに同一の異常領域30に対しては互いに同一の第1表示を利用し、互いに異なる異常領域30に対しては互いに異なる異常領域30を利用することが好ましい。こうすることで、ディスプレイ装置20に表示されている複数の動画フレーム14それぞれに含まれる異常領域30が同一であるか否かを容易に判別することができる。よって、情報処理装置2000を利用した検査をよりスムーズに行うことができるようになる。
情報処理装置2000のユーザは、被検者の体内でカメラ10を動かしながら検査を行う。そのため、一度カメラ10の撮像範囲から外れた異常領域30が、再度カメラ10の撮像範囲に入ることがある。例えば医師が、第1領域22に表示された動画フレーム14を見て、その動画フレーム14に含まれる異常領域30を見逃してしまった(その異常領域30が動画として第2領域24に表示されていたときに、その異常領域30を見ていなかった)ことを把握したとする。この場合、医師は、その異常領域30を動画で見てその詳細を把握するために、再度その異常領域30がカメラ10の撮像範囲に入るようにカメラ10を操作する(例えばスコープ40を操作する)ことが考えられる。その結果として、第1領域22と第2領域24に同一の異常領域30が表示されるようになる。言い換えれば、過去の様子を表す動画フレームと、リアルタイムの様子を表す動画に、同じ異常領域30が表示されるようになる。
実施形態2の情報処理装置2000を実現する計算機のハードウエア構成は、実施形態1と同様に、例えば図3によって表される。ただし、本実施形態の情報処理装置2000を実現する計算機1000のストレージデバイス1080には、本実施形態の情報処理装置2000の機能を実現するプログラムモジュールがさらに記憶される。
図16は、実施形態3の情報処理装置2000を例示するブロック図である。以下で説明する事項を除き、実施形態3の情報処理装置2000は、実施形態1又は実施形態2の情報処理装置2000と同様である。
指定保存フレームと自動保存フレームを識別可能に画像記憶部80に記憶させる方法は任意である。例えば、情報処理装置2000は、動画フレーム14と対応づけて、その動画フレーム14が指定保存フレームと自動保存フレームのどちらであるかを表すフラグを画像記憶部80に記憶させる。図17は、画像記憶部80に記憶される情報のフォーマットをテーブル形式で例示する図である。図17に示されるテーブルをテーブル200と表記する。テーブル200は、動画フレーム202及び種別フラグ204という2つの列を有する。動画フレーム202は、動画フレーム14自体を表す。種別フラグ204は、動画フレーム202に示される動画フレーム14が指定保存フレームと自動保存フレームのどちらであるかを表す。
表示制御部2040は、第1領域22に表示される動画フレーム14の中に、指定保存フレームに含まれる異常領域30と同じ異常領域30を含む動画フレーム14がある場合、その動画フレーム14を他の動画フレーム14と識別可能にする。例えば表示制御部2040は、指定保存フレームに含まれる異常領域30と同じ異常領域30を含む動画フレーム14又はその周辺に対して所定の表示を行う。この所定の表示を第2表示と表記する。例えば第2表示は、指定保存フレームに含まれる異常領域30と同じ異常領域30を含む動画フレーム14を強調する表示である。なお、特定の動画フレーム14を強調する方法には、実施形態2で説明した方法を利用することができる。
実施形態3の情報処理装置2000を実現する計算機のハードウエア構成は、実施形態1と同様に、例えば図3によって表される。ただし、本実施形態の情報処理装置2000を実現する計算機1000のストレージデバイス1080には、本実施形態の情報処理装置2000の機能を実現するプログラムモジュールがさらに記憶される。
図18は、実施形態4の情報処理装置2000を例示するブロック図である。以下で説明する事項を除き、実施形態4の情報処理装置2000は、実施形態1、実施形態2、又は実施形態3の情報処理装置2000と同様である。
前述した各種のユーザの所定行為は、ユーザが内視鏡システムなどに対して所定の入力操作を行うことによって行われる。例えば一般の内視鏡システムでは、カメラが設けられているスコープに、光を照射する機構(光源など)、色素や染色液を噴射する機構、水や薬を投与する機構、及び組織を採取するための機構などが設けられている。そして、これらの機構はユーザが内視鏡視システムに対して行う所定の入力操作に応じて動作する。言い換えれば、前述した各種の所定行為が行われる際には、その所定行為を実現する機構を動作させるための入力操作が行われる。
実施形態4の情報処理装置2000を実現する計算機のハードウエア構成は、実施形態1と同様に、例えば図3によって表される。ただし、本実施形態の情報処理装置2000を実現する計算機1000のストレージデバイス1080には、本実施形態の情報処理装置2000の機能を実現するプログラムモジュールがさらに記憶される。
1. 体内が撮影された動画から前記体内の異常領域を検出する検出手段と、
前記動画を構成する動画フレームのうち、前記異常領域が検出された前記動画フレームをディスプレイ装置の第1領域に表示させ、なおかつその動画フレームよりも後に生成された前記動画フレームが含まれる前記動画を前記ディスプレイ装置の第2領域に表示させる表示制御手段と、を有する情報処理装置。
2. 前記表示制御手段は、前記ディスプレイ装置に表示される前記異常領域が検出された前記動画フレームにおいて、その異常領域の位置を示す第1表示を表示させる、1.に記載の情報処理装置。
3. 前記表示制御手段は、前記異常領域が検出された複数の前記動画フレームを共に前記第1領域に表示させる、2.に記載の情報処理装置。
4. 複数の動画フレームそれぞれから検出された異常領域が互いに同一の異常を表しているか否かを判定する判定手段を有し、
前記表示制御手段は、
複数の動画フレームそれぞれから検出された異常領域が互いに同一であると判定された場合、これらの異常領域に対して同一の前記第1表示を表示させ、
複数の動画フレームそれぞれから検出された異常領域が互いに異なると判定された場合、これらの異常領域に対して互いに異なる前記第1表示を表示させる、3.に記載の情報処理装置。
5. 複数の動画フレームそれぞれから検出された異常領域が互いに同一であるか否かを判定する判定手段を有し、
前記検出手段は、複数の前記動画フレームから検出された前記異常領域が互いに同一であると判定された場合、それら複数の前記動画フレームのうちの一部の動画フレームを前記第1領域に表示させる、1.乃至4.いずれか一つに記載の情報処理装置。
6. 前記検出手段は、互いに同一の前記異常領域が検出された複数の前記動画フレームのうち、前記異常領域が異常を表す確度が最も高い前記動画フレーム、前記異常領域と動画フレームの中心位置との距離が最も短い動画フレーム、画像領域全体のコントラストが最も大きい前記動画フレーム、又は前記異常領域のコントラストが最も大きい前記動画フレームを前記第1領域に表示させる、5.に記載の情報処理装置。
7. 前記検出手段は、前記異常領域が検出された前記動画フレームを記憶手段に記憶させる、1.乃至6.いずれか一つに記載の情報処理装置。
8. 前記動画を構成する複数の動画フレームのうちの1つを指定する入力を受け付け、その指定された動画フレームを前記記憶手段に記憶させる指定受付手段を有し、
前記検出手段は、前記異常領域が検出された前記動画フレームを、前記指定受付手段によって前記記憶手段に記憶された前記動画フレームと識別可能な態様で前記記憶手段に記憶させる、7.に記載の情報処理装置。
9. 複数の動画フレームそれぞれから検出された異常領域が互いに同一であるか否かを判定する判定手段を有し、
前記表示制御手段は、第1の前記動画フレームから検出された前記異常領域と同一の前記異常領域を含むと判定された第2の前記動画フレームが、前記指定受付手段に対する入力で指定された場合に、前記第1領域に表示される第1の前記動画フレーム又はその周辺に所定の表示を表示させる、8.に記載の情報処理装置。
10. 複数の動画フレームそれぞれから検出された前記異常領域が互いに同一であるか否かを判定する判定手段を有し、
前記表示制御手段は、第1の前記動画フレームから検出された前記異常領域と同一の前記異常領域を含むと判定された第2の前記動画フレームが、前記指定受付手段に対する入力で指定された場合、第1の前記動画フレームを前記第1領域に表示しない、8.に記載の情報処理装置。
11. 前記検出された異常領域又はその周辺に対するユーザの所定行為を検出する第2検出手段を有し、
前記表示制御手段は、前記検出された異常領域又はその周辺に対するユーザの所定行為が検出された場合、その異常領域を含んでおりなおかつ前記第1領域に表示される前記動画フレーム又はその周辺に所定の表示を表示させる、1.乃至10.いずれか一つに記載の情報処理装置。
12. 前記検出された異常領域又はその周辺に対するユーザの所定行為を検出する第2検出手段を有し、
前記表示制御手段は、前記検出された異常領域又はその周辺に対するユーザの所定行為が検出された場合、その異常領域を含む前記動画フレームを前記第1領域に表示しない、1.乃至10.いずれか一つに記載の情報処理装置。
13. 前記ユーザの所定行為は、前記検出された異常領域若しくはその周辺対して照射される光の色若しくは強度を変更する行為、前記検出された異常領域若しくはその周辺へ色素散布若しくは染色をする行為、前記検出された異常領域若しくはその周辺に対して水若しくは薬を投与する行為、又は前記検出された異常領域若しくはその周辺の組織を採取する行為である、11.又は12.に記載の情報処理装置。
14. コンピュータによって実行される制御方法であって、
体内が撮影された動画から前記体内の異常領域を検出する検出ステップと、
前記動画を構成する動画フレームのうち、前記異常領域が検出された前記動画フレームをディスプレイ装置の第1領域に表示させ、なおかつその動画フレームよりも後に生成された前記動画フレームが含まれる前記動画を前記ディスプレイ装置の第2領域に表示させる表示制御ステップと、を有する制御方法。
15. 前記表示制御ステップにおいて、前記ディスプレイ装置に表示される前記異常領域が検出された前記動画フレームにおいて、その異常領域の位置を示す第1表示を表示させる、14.に記載の制御方法。
16. 前記表示制御ステップにおいて、前記異常領域が検出された複数の前記動画フレームを共に前記第1領域に表示させる、15.に記載の制御方法。
17. 複数の動画フレームそれぞれから検出された異常領域が互いに同一の異常を表しているか否かを判定する判定ステップを有し、
前記表示制御ステップにおいて、
複数の動画フレームそれぞれから検出された異常領域が互いに同一であると判定された場合、これらの異常領域に対して同一の前記第1表示を表示させ、
複数の動画フレームそれぞれから検出された異常領域が互いに異なると判定された場合、これらの異常領域に対して互いに異なる前記第1表示を表示させる、16.に記載の制御方法。
18. 複数の動画フレームそれぞれから検出された異常領域が互いに同一であるか否かを判定する判定ステップを有し、
前記検出ステップにおいて、複数の前記動画フレームから検出された前記異常領域が互いに同一であると判定された場合、それら複数の前記動画フレームのうちの一部の動画フレームを前記第1領域に表示させる、14.乃至17.いずれか一つに記載の制御方法。
19. 前記検出ステップにおいて、互いに同一の前記異常領域が検出された複数の前記動画フレームのうち、前記異常領域が異常を表す確度が最も高い前記動画フレーム、前記異常領域と動画フレームの中心位置との距離が最も短い動画フレーム、画像領域全体のコントラストが最も大きい前記動画フレーム、又は前記異常領域のコントラストが最も大きい前記動画フレームを前記第1領域に表示させる、18.に記載の制御方法。
20. 前記検出ステップは、前記異常領域が検出された前記動画フレームを記憶手段に記憶させる、14.乃至19.いずれか一つに記載の制御方法。
21. 前記動画を構成する複数の動画フレームのうちの1つを指定する入力を受け付け、その指定された動画フレームを前記記憶手段に記憶させる指定受付ステップを有し、
前記検出ステップにおいて、前記異常領域が検出された前記動画フレームを、前記指定受付ステップによって前記記憶手段に記憶された前記動画フレームと識別可能な態様で前記記憶手段に記憶させる、20.に記載の制御方法。
22. 複数の動画フレームそれぞれから検出された異常領域が互いに同一であるか否かを判定する判定ステップを有し、
前記表示制御ステップにおいて、第1の前記動画フレームから検出された前記異常領域と同一の前記異常領域を含むと判定された第2の前記動画フレームが、前記指定受付ステップに対する入力で指定された場合に、前記第1領域に表示される第1の前記動画フレーム又はその周辺に所定の表示を表示させる、21.に記載の制御方法。
23. 複数の動画フレームそれぞれから検出された前記異常領域が互いに同一であるか否かを判定する判定ステップを有し、
前記表示制御ステップにおいて、第1の前記動画フレームから検出された前記異常領域と同一の前記異常領域を含むと判定された第2の前記動画フレームが、前記指定受付ステップに対する入力で指定された場合、第1の前記動画フレームを前記第1領域に表示しない、21.に記載の制御方法。
24. 前記検出された異常領域又はその周辺に対するユーザの所定行為を検出する第2検出ステップを有し、
前記表示制御ステップにおいて、前記検出された異常領域又はその周辺に対するユーザの所定行為が検出された場合、その異常領域を含んでおりなおかつ前記第1領域に表示される前記動画フレーム又はその周辺に所定の表示を表示させる、14.乃至23.いずれか一つに記載の制御方法。
25. 前記検出された異常領域又はその周辺に対するユーザの所定行為を検出する第2検出ステップを有し、
前記表示制御ステップにおいて、前記検出された異常領域又はその周辺に対するユーザの所定行為が検出された場合、その異常領域を含む前記動画フレームを前記第1領域に表示しない、14.乃至23.いずれか一つに記載の制御方法。
26. 前記ユーザの所定行為は、前記検出された異常領域若しくはその周辺対して照射される光の色若しくは強度を変更する行為、前記検出された異常領域若しくはその周辺に色素散布若しくは染色をする行為、前記検出された異常領域若しくはその周辺に対して水若しくは薬を投与する行為、又は前記検出された異常領域若しくはその周辺の組織を採取する行為である、24.又は25.に記載の制御方法。
27. 14.乃至26.いずれか一つに記載の制御方法の各ステップをコンピュータに実行させるプログラム。
Claims (15)
- 体内が撮影された動画から前記体内の異常領域を検出する検出手段と、
前記動画を構成する動画フレームのうち、前記異常領域が検出された前記動画フレームをディスプレイ装置の第1領域に表示させ、なおかつその動画フレームよりも後に生成された前記動画フレームが含まれる前記動画を前記ディスプレイ装置の第2領域に表示させる表示制御手段と、
前記検出された異常領域又はその周辺に対するユーザの所定行為を検出する第2検出手段と、を有し、
前記表示制御手段は、前記検出された異常領域又はその周辺に対するユーザの所定行為が検出された場合、その異常領域を含んでおりなおかつ前記第1領域に表示される前記動画フレーム又はその周辺に所定の表示を表示させる、情報処理装置。 - 体内が撮影された動画から前記体内の異常領域を検出する検出手段と、
前記動画を構成する動画フレームのうち、前記異常領域が検出された前記動画フレームをディスプレイ装置の第1領域に表示させ、なおかつその動画フレームよりも後に生成された前記動画フレームが含まれる前記動画を前記ディスプレイ装置の第2領域に表示させる表示制御手段と、
前記検出された異常領域又はその周辺に対するユーザの所定行為を検出する第2検出手段と、を有し、
前記表示制御手段は、前記検出された異常領域又はその周辺に対するユーザの所定行為が検出された場合、その異常領域を含む前記動画フレームを前記第1領域に表示しない、情報処理装置。 - 前記表示制御手段は、前記ディスプレイ装置に表示される前記異常領域が検出された前記動画フレームにおいて、その異常領域の位置を示す第1表示を表示させる、請求項1または2に記載の情報処理装置。
- 前記表示制御手段は、前記異常領域が検出された複数の前記動画フレームを共に前記第1領域に表示させる、請求項3に記載の情報処理装置。
- 複数の動画フレームそれぞれから検出された異常領域が互いに同一の異常を表しているか否かを判定する判定手段を有し、
前記表示制御手段は、
複数の動画フレームそれぞれから検出された異常領域が互いに同一であると判定された場合、これらの異常領域に対して同一の前記第1表示を表示させ、
複数の動画フレームそれぞれから検出された異常領域が互いに異なると判定された場合、これらの異常領域に対して互いに異なる前記第1表示を表示させる、請求項4に記載の情報処理装置。 - 複数の動画フレームそれぞれから検出された異常領域が互いに同一であるか否かを判定する判定手段を有し、
前記検出手段は、複数の前記動画フレームから検出された前記異常領域が互いに同一であると判定された場合、それら複数の前記動画フレームのうちの一部の動画フレームを前記第1領域に表示させる、請求項1乃至5いずれか一項に記載の情報処理装置。 - 前記検出手段は、互いに同一の前記異常領域が検出された複数の前記動画フレームのうち、前記異常領域が異常を表す確度が最も高い前記動画フレーム、前記異常領域と動画フレームの中心位置との距離が最も短い動画フレーム、画像領域全体のコントラストが最も大きい前記動画フレーム、又は前記異常領域のコントラストが最も大きい前記動画フレームを前記第1領域に表示させる、請求項6に記載の情報処理装置。
- 前記検出手段は、前記異常領域が検出された前記動画フレームを記憶手段に記憶させる、請求項1乃至7いずれか一項に記載の情報処理装置。
- 前記動画を構成する複数の動画フレームのうちの1つを指定する入力を受け付け、その指定された動画フレームを前記記憶手段に記憶させる指定受付手段を有し、
前記検出手段は、前記異常領域が検出された前記動画フレームを、前記指定受付手段によって前記記憶手段に記憶された前記動画フレームと識別可能な態様で前記記憶手段に記憶させる、請求項8に記載の情報処理装置。 - 複数の動画フレームそれぞれから検出された異常領域が互いに同一であるか否かを判定する判定手段を有し、
前記表示制御手段は、第1の前記動画フレームから検出された前記異常領域と同一の前記異常領域を含むと判定された第2の前記動画フレームが、前記指定受付手段に対する入力で指定された場合に、前記第1領域に表示される第1の前記動画フレーム又はその周辺に所定の表示を表示させる、請求項9に記載の情報処理装置。 - 複数の動画フレームそれぞれから検出された前記異常領域が互いに同一であるか否かを判定する判定手段を有し、
前記表示制御手段は、第1の前記動画フレームから検出された前記異常領域と同一の前記異常領域を含むと判定された第2の前記動画フレームが、前記指定受付手段に対する入力で指定された場合、第1の前記動画フレームを前記第1領域に表示しない、請求項9に記載の情報処理装置。 - 前記ユーザの所定行為は、前記検出された異常領域若しくはその周辺に対して照射される光の色若しくは強度を変更する行為、前記検出された異常領域若しくはその周辺へ色素散布若しくは染色をする行為、前記検出された異常領域若しくはその周辺に対して水若しくは薬を投与する行為、又は前記検出された異常領域若しくはその周辺の組織を採取する行為である、請求項1から11のいずれか一項に記載の情報処理装置。
- コンピュータによって実行される制御方法であって、
体内が撮影された動画から前記体内の異常領域を検出する検出ステップと、
前記動画を構成する動画フレームのうち、前記異常領域が検出された前記動画フレームをディスプレイ装置の第1領域に表示させ、なおかつその動画フレームよりも後に生成された前記動画フレームが含まれる前記動画を前記ディスプレイ装置の第2領域に表示させる表示制御ステップと、
前記検出された異常領域又はその周辺に対するユーザの所定行為を検出する第2検出ステップと、を有し、
前記表示制御ステップにおいて、前記検出された異常領域又はその周辺に対するユーザの所定行為が検出された場合、その異常領域を含んでおりなおかつ前記第1領域に表示される前記動画フレーム又はその周辺に所定の表示を表示させる、制御方法。 - コンピュータによって実行される制御方法であって、
体内が撮影された動画から前記体内の異常領域を検出する検出ステップと、
前記動画を構成する動画フレームのうち、前記異常領域が検出された前記動画フレームをディスプレイ装置の第1領域に表示させ、なおかつその動画フレームよりも後に生成された前記動画フレームが含まれる前記動画を前記ディスプレイ装置の第2領域に表示させる表示制御ステップと、
前記検出された異常領域又はその周辺に対するユーザの所定行為を検出する第2検出ステップと、を有し、
前記表示制御ステップにおいて、前記検出された異常領域又はその周辺に対するユーザの所定行為が検出された場合、その異常領域を含む前記動画フレームを前記第1領域に表示しない、制御方法。 - 請求項13または14に記載の制御方法の各ステップをコンピュータに実行させるプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017103348 | 2017-05-25 | ||
JP2017103348 | 2017-05-25 | ||
PCT/JP2018/019309 WO2018216617A1 (ja) | 2017-05-25 | 2018-05-18 | 情報処理装置、制御方法、及びプログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020187459A Division JP2021040324A (ja) | 2017-05-25 | 2020-11-10 | 情報処理装置、制御方法、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2018216617A1 JPWO2018216617A1 (ja) | 2020-04-09 |
JP6799301B2 true JP6799301B2 (ja) | 2020-12-16 |
Family
ID=64396438
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019520217A Active JP6799301B2 (ja) | 2017-05-25 | 2018-05-18 | 情報処理装置、制御方法、及びプログラム |
JP2020187459A Pending JP2021040324A (ja) | 2017-05-25 | 2020-11-10 | 情報処理装置、制御方法、及びプログラム |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020187459A Pending JP2021040324A (ja) | 2017-05-25 | 2020-11-10 | 情報処理装置、制御方法、及びプログラム |
Country Status (5)
Country | Link |
---|---|
US (1) | US20200129042A1 (ja) |
EP (1) | EP3636134A4 (ja) |
JP (2) | JP6799301B2 (ja) |
CN (1) | CN110662477B (ja) |
WO (1) | WO2018216617A1 (ja) |
Families Citing this family (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6716853B2 (ja) * | 2017-05-25 | 2020-07-01 | 日本電気株式会社 | 情報処理装置、制御方法、及びプログラム |
WO2019078237A1 (ja) * | 2017-10-18 | 2019-04-25 | 富士フイルム株式会社 | 医療画像処理装置、内視鏡システム、診断支援装置、並びに医療業務支援装置 |
EP4339900A3 (en) * | 2018-07-27 | 2024-06-19 | FUJI-FILM Corporation | Medical image processing apparatus, endoscope system, and method of operating medical image processing apparatus |
JP7253152B2 (ja) * | 2018-10-04 | 2023-04-06 | 日本電気株式会社 | 情報処理装置、情報処理方法、及びプログラム |
JP7215504B2 (ja) * | 2019-02-13 | 2023-01-31 | 日本電気株式会社 | 施術支援装置、施術支援方法、及びプログラム |
JPWO2020170809A1 (ja) * | 2019-02-19 | 2021-12-02 | 富士フイルム株式会社 | 医療画像処理装置、内視鏡システム、及び医療画像処理方法 |
WO2021044910A1 (ja) * | 2019-09-03 | 2021-03-11 | 富士フイルム株式会社 | 医療画像処理装置、内視鏡システム、医療画像処理方法及びプログラム |
JP7179707B2 (ja) * | 2019-10-03 | 2022-11-29 | 富士フイルム株式会社 | 診療支援装置、診療支援方法、及び診療支援プログラム |
EP4129150A4 (en) * | 2020-03-30 | 2023-05-24 | NEC Corporation | INFORMATION PROCESSING DEVICE, DISPLAY METHOD AND NON-VOLATILE COMPUTER READABLE MEDIA WITH A PROGRAM STORED ON IT |
JP7402314B2 (ja) * | 2020-04-02 | 2023-12-20 | 富士フイルム株式会社 | 医用画像処理システム、医用画像処理システムの作動方法 |
WO2022014077A1 (ja) * | 2020-07-15 | 2022-01-20 | 富士フイルム株式会社 | 内視鏡システム及びその作動方法 |
WO2023153069A1 (ja) * | 2022-02-09 | 2023-08-17 | 富士フイルム株式会社 | 医療画像装置、内視鏡システム、及び、診断書作成システム |
WO2023238609A1 (ja) * | 2022-06-09 | 2023-12-14 | 富士フイルム株式会社 | 情報処理装置、内視鏡装置、情報処理方法、及びプログラム |
Family Cites Families (42)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6708054B2 (en) * | 2001-04-12 | 2004-03-16 | Koninklijke Philips Electronics, N.V. | MR-based real-time radiation therapy oncology simulator |
EP1262882A3 (en) * | 2001-05-29 | 2006-01-11 | MeVis BreastCare GmbH & Co. KG | A method and computer system for prefetching of images |
US6616634B2 (en) * | 2001-09-21 | 2003-09-09 | Semler Technologies, Inc. | Ergonomic syringe |
JP4370121B2 (ja) * | 2003-06-02 | 2009-11-25 | オリンパス株式会社 | 内視鏡装置 |
US6997910B2 (en) * | 2004-05-03 | 2006-02-14 | Infusive Technologies, Llc | Multi-chamber, sequential dose dispensing syringe |
JP2006198106A (ja) * | 2005-01-19 | 2006-08-03 | Olympus Corp | 電子内視鏡装置 |
US10080481B2 (en) * | 2005-02-10 | 2018-09-25 | G.I. View Ltd. | Advancement techniques for gastrointestinal tool with guiding element |
JP4823614B2 (ja) * | 2005-09-02 | 2011-11-24 | オリンパス株式会社 | 可搬型簡易画像表示装置及び受信システム |
US8036615B2 (en) * | 2005-09-02 | 2011-10-11 | Olympus Corporation | Portable simplified image display apparatus and receiving system |
JP2007159934A (ja) | 2005-12-15 | 2007-06-28 | Hitachi Medical Corp | 比較読影支援装置 |
JP4891636B2 (ja) * | 2006-03-14 | 2012-03-07 | オリンパスメディカルシステムズ株式会社 | 画像解析装置 |
JP5005981B2 (ja) * | 2006-08-03 | 2012-08-22 | オリンパスメディカルシステムズ株式会社 | 画像表示装置 |
JP2008301968A (ja) * | 2007-06-06 | 2008-12-18 | Olympus Medical Systems Corp | 内視鏡画像処理装置 |
JP5186929B2 (ja) * | 2008-01-21 | 2013-04-24 | 日本電気株式会社 | 認証用撮像装置 |
US9007475B2 (en) * | 2009-12-17 | 2015-04-14 | Lenovo Innovations Limited (Hong Kong) | Communication apparatus and electronic mail creation method |
JPWO2011132468A1 (ja) | 2010-04-21 | 2013-07-18 | コニカミノルタ株式会社 | 医用画像表示装置及びプログラム |
JP5537261B2 (ja) * | 2010-05-25 | 2014-07-02 | 株式会社東芝 | 医用画像診断装置、画像情報処理装置及び治療支援データ表示用制御プログラム |
US20130236891A1 (en) * | 2010-08-20 | 2013-09-12 | 3-D Matrix, Ltd. | Method and composition for the treatment, prevention, and diagnosis of cancer containing or derived from cancer stem cells |
CN103153155B (zh) * | 2011-03-15 | 2014-09-10 | 奥林巴斯医疗株式会社 | 医疗装置 |
JP5329593B2 (ja) * | 2011-04-01 | 2013-10-30 | 富士フイルム株式会社 | 生体情報取得システムおよび生体情報取得システムの作動方法 |
JP2012223363A (ja) * | 2011-04-20 | 2012-11-15 | Tokyo Institute Of Technology | 手術用撮像システム及び手術用ロボット |
JP2012248070A (ja) * | 2011-05-30 | 2012-12-13 | Sony Corp | 情報処理装置、メタデータ設定方法、及びプログラム |
US20130044927A1 (en) * | 2011-08-15 | 2013-02-21 | Ian Poole | Image processing method and system |
WO2013039395A1 (en) * | 2011-09-14 | 2013-03-21 | Ec Solution Group B.V. | Active matrix display smart card |
EP2573403B1 (en) * | 2011-09-20 | 2017-12-06 | Grundfos Holding A/S | Pump |
JP5713959B2 (ja) * | 2012-05-23 | 2015-05-07 | 株式会社東芝 | 電子機器、方法、およびプログラム |
KR101323646B1 (ko) * | 2012-08-17 | 2013-11-05 | 한국전기연구원 | 형광 내시경을 위한 텔레비전 카메라의 필터 교환 장치 |
CN202843579U (zh) * | 2012-09-28 | 2013-04-03 | 北京锐视觉科技有限公司 | 一种裂隙灯 |
JP6188477B2 (ja) * | 2013-08-02 | 2017-08-30 | オリンパス株式会社 | 画像処理装置、画像処理方法及びプログラム |
CN105142493A (zh) * | 2013-08-30 | 2015-12-09 | 奥林巴斯株式会社 | 图像管理装置 |
JP2015195845A (ja) * | 2014-03-31 | 2015-11-09 | 富士フイルム株式会社 | 内視鏡システム、内視鏡システムの作動方法、プロセッサ装置、プロセッサ装置の作動方法 |
CN106659368B (zh) * | 2014-07-21 | 2020-04-17 | 恩多巧爱思股份有限公司 | 多焦、多相机内窥镜*** |
CN104161493B (zh) * | 2014-07-22 | 2016-04-20 | 清华大学深圳研究生院 | 偏振成像内窥镜***及内窥成像方法 |
JP6503167B2 (ja) | 2014-08-27 | 2019-04-17 | 株式会社Nobori | 読影レポートシステム |
US10302780B2 (en) * | 2014-10-17 | 2019-05-28 | Silverside Detectors Inc. | Fissile neutron detector |
JP6536153B2 (ja) | 2015-04-27 | 2019-07-03 | コニカミノルタ株式会社 | 医用画像表示装置及びプログラム |
JP6422816B2 (ja) * | 2015-04-28 | 2018-11-14 | 富士フイルム株式会社 | 内視鏡システム |
WO2017073337A1 (ja) * | 2015-10-27 | 2017-05-04 | オリンパス株式会社 | 内視鏡装置 |
WO2017081976A1 (ja) * | 2015-11-10 | 2017-05-18 | オリンパス株式会社 | 内視鏡装置 |
CN105512473A (zh) * | 2015-11-30 | 2016-04-20 | 广州三瑞医疗器械有限公司 | 一种***镜图像的智能识别方法及装置 |
JP6597242B2 (ja) | 2015-12-02 | 2019-10-30 | 株式会社明電舎 | 静止誘導機器の制振構造 |
CN110325100B (zh) * | 2017-03-01 | 2021-09-24 | 富士胶片株式会社 | 内窥镜***及其操作方法 |
-
2018
- 2018-05-18 US US16/615,671 patent/US20200129042A1/en not_active Abandoned
- 2018-05-18 JP JP2019520217A patent/JP6799301B2/ja active Active
- 2018-05-18 EP EP18806742.5A patent/EP3636134A4/en active Pending
- 2018-05-18 CN CN201880034288.0A patent/CN110662477B/zh active Active
- 2018-05-18 WO PCT/JP2018/019309 patent/WO2018216617A1/ja active Application Filing
-
2020
- 2020-11-10 JP JP2020187459A patent/JP2021040324A/ja active Pending
Also Published As
Publication number | Publication date |
---|---|
US20200129042A1 (en) | 2020-04-30 |
WO2018216617A1 (ja) | 2018-11-29 |
EP3636134A4 (en) | 2021-03-10 |
EP3636134A1 (en) | 2020-04-15 |
CN110662477B (zh) | 2022-06-28 |
JPWO2018216617A1 (ja) | 2020-04-09 |
JP2021040324A (ja) | 2021-03-11 |
CN110662477A (zh) | 2020-01-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6799301B2 (ja) | 情報処理装置、制御方法、及びプログラム | |
JP6716853B2 (ja) | 情報処理装置、制御方法、及びプログラム | |
US9805469B2 (en) | Marking and tracking an area of interest during endoscopy | |
US9959618B2 (en) | Image processing apparatus, image processing method, and computer-readable recording medium | |
US8442280B2 (en) | Method and system for intelligent qualitative and quantitative analysis of digital radiography softcopy reading | |
CN113015476A (zh) | 用于生成和显示体内图像流的研究的***和方法 | |
CN110619318B (zh) | 基于人工智能的图像处理方法、显微镜、***和介质 | |
US20150080652A1 (en) | Lesion detection and image stabilization using portion of field of view | |
JPWO2019087790A1 (ja) | 検査支援装置、内視鏡装置、検査支援方法、及び検査支援プログラム | |
US20240206700A1 (en) | Information processing apparatus, control method, and program | |
US20140233788A1 (en) | System, method, and software for optical device recognition association | |
JP2023546698A (ja) | 医療用画像及び映像の撮像、表示、操作のためのシステムおよび方法 | |
JP7253152B2 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
JP2020081280A5 (ja) | 画像表示制御システム、画像表示システム、画像解析装置、画像表示制御プログラム及び画像表示制御方法 | |
CN116912247A (zh) | 医疗图像处理方法、装置、存储介质及电子设备 | |
KR20160115269A (ko) | 건강검진 정보 제공 애플리케이션 및 시스템 | |
JP2022185838A5 (ja) | ||
KR20160112494A (ko) | 파노라마에서의 효율적인 구강 병변 발병여부 예측감지 방법 및 시스템 | |
JP2007330419A (ja) | 画像表示装置および方法並びにプログラム | |
CN116849593A (zh) | 具有器官识别功能的可视喉镜***以及器官识别方法 | |
CN116580400A (zh) | 基于深度学习的icu病人生理指标数据识别监测方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191120 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191120 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191128 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200428 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200624 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20201013 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201111 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6799301 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |