JP6356623B2 - 画像処理装置、方法、及びプログラム - Google Patents
画像処理装置、方法、及びプログラム Download PDFInfo
- Publication number
- JP6356623B2 JP6356623B2 JP2015054179A JP2015054179A JP6356623B2 JP 6356623 B2 JP6356623 B2 JP 6356623B2 JP 2015054179 A JP2015054179 A JP 2015054179A JP 2015054179 A JP2015054179 A JP 2015054179A JP 6356623 B2 JP6356623 B2 JP 6356623B2
- Authority
- JP
- Japan
- Prior art keywords
- endoscope
- rotation
- rotation operation
- angle
- image processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 38
- 238000005452 bending Methods 0.000 claims description 28
- 230000001186 cumulative effect Effects 0.000 claims description 6
- 238000003672 processing method Methods 0.000 claims description 5
- 210000000056 organ Anatomy 0.000 claims description 4
- 210000000621 bronchi Anatomy 0.000 description 21
- 238000001514 detection method Methods 0.000 description 6
- 239000013598 vector Substances 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 238000003384 imaging method Methods 0.000 description 4
- 238000003780 insertion Methods 0.000 description 4
- 230000037431 insertion Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- 210000000707 wrist Anatomy 0.000 description 3
- 238000002591 computed tomography Methods 0.000 description 2
- 238000010191 image analysis Methods 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 238000003705 background correction Methods 0.000 description 1
- 210000000746 body region Anatomy 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 210000002429 large intestine Anatomy 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000004904 shortening Methods 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
- A61B1/000094—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00043—Operational features of endoscopes provided with output arrangements
- A61B1/00045—Display arrangement
- A61B1/0005—Display arrangement combining images e.g. side-by-side, superimposed or tiled
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/05—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by the image sensor, e.g. camera, being in the distal end portion
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/267—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor for the respiratory tract, e.g. laryngoscopes, bronchoscopes
- A61B1/2676—Bronchoscopes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/31—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor for the rectum, e.g. proctoscopes, sigmoidoscopes, colonoscopes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/06—Devices, other than using radiation, for detecting or locating foreign bodies ; determining position of probes within or on the body of the patient
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10072—Tomographic images
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Surgery (AREA)
- Engineering & Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Medical Informatics (AREA)
- Animal Behavior & Ethology (AREA)
- Pathology (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Molecular Biology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Biophysics (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Radiology & Medical Imaging (AREA)
- Optics & Photonics (AREA)
- Pulmonology (AREA)
- Signal Processing (AREA)
- Otolaryngology (AREA)
- Physiology (AREA)
- Human Computer Interaction (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Endoscopes (AREA)
- Apparatus For Radiation Diagnosis (AREA)
Description
2 3次元画像撮影装置
3 画像保管サーバ
4 画像処理装置
5 装置本体
5a CPU
5b メモリ
5c HDD
6 入力部
7 表示部
11 内視鏡
12 プロセッサ装置
13 位置検出装置
51 画像取得部
52 パラメータ算出部
53 画像生成部
54 位置情報取得部
55 表示制御部
Claims (11)
- 管腔構造を表す3次元画像から、内視鏡を前記管腔構造内で予め定められた経路に沿って進めるための内視鏡操作に関するパラメータ値を算出するパラメータ算出部を備えた画像処理装置であって、
前記内視鏡が、軸線方向への進退操作、軸線周りの回転操作、および先端部に対する該先端部の軸線を含む1つの平面内のみにおける曲げ操作が可能なものであり、
前記パラメータ算出部が、前記軸線回りの時計回り及び反時計回りのいずれか一方を正とし、他方を負として、前記経路上の任意の位置における前記回転操作による前記内視鏡の回転角度を前記回転操作に関するパラメータ値として算出するものであって、前記先端部が前記管腔構造内に挿入されてから前記位置に至るまでに行われた回転操作による前記内視鏡の回転角度の累計と、当該位置における回転操作による前記内視鏡の回転角度との合計が予め定められた角度範囲内に収まるように、当該位置における回転操作による前記内視鏡の回転角度を求めるものである
ことを特徴とする画像処理装置。 - 前記角度範囲が、−90゜〜+90゜である請求項1記載の画像処理装置。
- 前記管腔構造が、人体の管腔臓器であり、
前記角度範囲が、90を超える正の値であるTaおよびTbにより表される−Ta゜〜+Tb゜であり、
前記パラメータ算出部が、前記経路上の任意の位置における前記回転操作による前記内視鏡の回転角度を前記回転操作に関するパラメータ値として算出する際に、前記合計が前記角度範囲内に収まるような前記位置における回転操作による前記内視鏡の回転角度が2つ存在する場合に、前記人体の背側から腹側に向かう方向が、前記回転操作の後に前記内視鏡により撮影される画像の上方向により近いものとなる方の回転角度を、前記回転操作に関するパラメータ値として算出するものである請求項1記載の画像処理装置。 - 前記管腔構造が、人体の管腔臓器であり、
前記角度範囲が、90を超える正の値であるTaおよびTbにより表される−Ta゜〜+Tb゜であり、
前記パラメータ算出部が、前記経路上の任意の位置における前記回転操作による前記内視鏡の回転角度を前記回転操作に関するパラメータ値として算出する際に、前記合計が前記角度範囲内に収まるような前記位置における回転操作による前記内視鏡の回転角度が2つ存在する場合に、前記人体の内側から外側へ向かう方向が、前記回転操作の後に前記内視鏡により撮影される画像の上方向により近いものとなる方の回転角度を、前記回転操作に関するパラメータ値として算出するものである請求項1記載の画像処理装置。 - 前記角度範囲が、90を超える正の値であるTaおよびTbにより表される−Ta゜〜+Tb゜であり、
前記パラメータ算出部が、前記経路上の任意の位置における前記回転操作による前記内視鏡の回転角度を前記回転操作に関するパラメータ値として算出する際に、前記合計が前記角度範囲内に収まるような前記位置における回転操作による前記内視鏡の回転角度が2つ存在する場合に、当該位置から1つ以上先の回転操作を行う位置までの各回転操作を行う位置における回転角度の絶対値の合計がより小さいものとなる方の回転角度を、前記回転操作に関するパラメータ値として算出するものである請求項1記載の画像処理装置。 - 前記パラメータ算出部により算出されたパラメータ値を適用して、前記3次元画像から仮想内視鏡画像を生成する画像生成部を備えた請求項1から5のいずれか一項記載の画像処理装置。
- 画像を表示する表示部と、
前記内視鏡を前記管腔構造内で前記経路に沿って進める際に、前記経路上における前記内視鏡の位置に応じて、前記パラメータ算出部により算出された前記内視鏡の位置に対応するパラメータ値を前記表示部に表示させる表示制御部と
を備えた請求項1から6のいずれか一項記載の画像処理装置。 - 画像処理装置が、管腔構造を表す3次元画像から、内視鏡を前記管腔構造内で予め定められた経路に沿って進めるための内視鏡操作に関するパラメータ値を算出する画像処理方法であって、
前記内視鏡が、軸線方向への進退操作、軸線周りの回転操作、および先端部に対する該先端部の軸線を含む1つの平面内のみにおける曲げ操作が可能なものであり、
前記パラメータ値を算出する処理が、前記軸線回りの時計回り及び反時計回りのいずれか一方を正とし、他方を負として、前記経路上の任意の位置における前記回転操作による前記内視鏡の回転角度を前記回転操作に関するパラメータ値として算出するものであって、前記先端部が前記管腔構造内に挿入されてから前記位置に至るまでに行われた回転操作による前記内視鏡の回転角度の累計と、当該位置における回転操作による前記内視鏡の回転角度との合計が予め定められた角度範囲内に収まるように、当該位置における回転操作による前記内視鏡の回転角度を求めるものであることを特徴とする画像処理方法。 - 前記角度範囲が、−90゜〜+90゜である請求項8記載の画像処理方法。
- コンピュータに、管腔構造を表す3次元画像から、内視鏡を前記管腔構造内で予め定められた経路に沿って進めるための内視鏡操作に関するパラメータ値を算出する処理を実行させるための画像処理プログラムであって、
前記内視鏡が、軸線方向への進退操作、軸線周りの回転操作、および先端部に対する該先端部の軸線を含む1つの平面内のみにおける曲げ操作が可能なものであり、
前記パラメータ値を算出する処理が、前記軸線回りの時計回り及び反時計回りのいずれか一方を正とし、他方を負として、前記経路上の任意の位置における前記回転操作による前記内視鏡の回転角度を前記回転操作に関するパラメータ値として算出するものであって、前記先端部が前記管腔構造内に挿入されてから前記位置に至るまでに行われた回転操作による前記内視鏡の回転角度の累計と、当該位置における回転操作による前記内視鏡の回転角度との合計が予め定められた角度範囲内に収まるように、当該位置における回転操作による前記内視鏡の回転角度を求めるものである
ことを特徴とする画像処理プログラム。 - 前記角度範囲が、−90゜〜+90゜である請求項10記載の画像処理プログラム。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015054179A JP6356623B2 (ja) | 2015-03-18 | 2015-03-18 | 画像処理装置、方法、及びプログラム |
PCT/JP2016/054387 WO2016147778A1 (ja) | 2015-03-18 | 2016-02-16 | 画像処理装置、方法、及びプログラム |
DE112016001224.1T DE112016001224T5 (de) | 2015-03-18 | 2016-02-16 | Bildverarbeitungsvorrichtung, Verfahren und Programm |
US15/695,588 US10799100B2 (en) | 2015-03-18 | 2017-09-05 | Image processing device, method, and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015054179A JP6356623B2 (ja) | 2015-03-18 | 2015-03-18 | 画像処理装置、方法、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016171946A JP2016171946A (ja) | 2016-09-29 |
JP6356623B2 true JP6356623B2 (ja) | 2018-07-11 |
Family
ID=56918823
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015054179A Active JP6356623B2 (ja) | 2015-03-18 | 2015-03-18 | 画像処理装置、方法、及びプログラム |
Country Status (4)
Country | Link |
---|---|
US (1) | US10799100B2 (ja) |
JP (1) | JP6356623B2 (ja) |
DE (1) | DE112016001224T5 (ja) |
WO (1) | WO2016147778A1 (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10524866B2 (en) * | 2018-03-28 | 2020-01-07 | Auris Health, Inc. | Systems and methods for registration of location sensors |
JP2021164490A (ja) | 2018-04-10 | 2021-10-14 | オリンパス株式会社 | 医療システム |
WO2020012576A1 (ja) * | 2018-07-11 | 2020-01-16 | オリンパス株式会社 | 内視鏡システム、内視鏡のキャリブレーション方法および内視鏡の制御装置 |
CN117100197B (zh) * | 2023-10-23 | 2024-02-20 | 杭州堃博生物科技有限公司 | 鞘管调弯方法、装置、非易失性存储介质及电子设备 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1499235B1 (en) | 2002-04-17 | 2016-08-17 | Covidien LP | Endoscope structures and techniques for navigating to a target in branched structure |
JP4436638B2 (ja) * | 2002-08-30 | 2010-03-24 | オリンパス株式会社 | 内視鏡装置及び内視鏡挿入動作プログラム |
JP4546064B2 (ja) * | 2003-10-31 | 2010-09-15 | オリンパス株式会社 | 挿入シミュレーション装置 |
EP1937178B1 (en) | 2005-10-11 | 2011-12-14 | Koninklijke Philips Electronics N.V. | 3d tool path planning, simulation and control system |
EP2484268B1 (en) * | 2009-09-30 | 2018-04-25 | Olympus Corporation | Endoscope apparatus |
CN102740755B (zh) * | 2010-02-22 | 2015-04-22 | 奥林巴斯医疗株式会社 | 医疗设备 |
EP2670291A4 (en) * | 2011-02-04 | 2015-02-25 | Penn State Res Found | METHOD AND DEVICE FOR DETERMINING THE LOCATION OF AN ENDOSCOPE |
JP6221166B2 (ja) * | 2012-10-22 | 2017-11-01 | ジーイー・メディカル・システムズ・グローバル・テクノロジー・カンパニー・エルエルシー | 表示装置、医用装置、およびプログラム |
WO2014141968A1 (ja) * | 2013-03-12 | 2014-09-18 | オリンパスメディカルシステムズ株式会社 | 内視鏡システム |
JP6177488B2 (ja) * | 2015-07-23 | 2017-08-09 | オリンパス株式会社 | マニピュレータ及び医療システム |
-
2015
- 2015-03-18 JP JP2015054179A patent/JP6356623B2/ja active Active
-
2016
- 2016-02-16 DE DE112016001224.1T patent/DE112016001224T5/de active Pending
- 2016-02-16 WO PCT/JP2016/054387 patent/WO2016147778A1/ja active Application Filing
-
2017
- 2017-09-05 US US15/695,588 patent/US10799100B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US20170360285A1 (en) | 2017-12-21 |
WO2016147778A1 (ja) | 2016-09-22 |
US10799100B2 (en) | 2020-10-13 |
JP2016171946A (ja) | 2016-09-29 |
DE112016001224T5 (de) | 2017-11-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10154823B2 (en) | Guiding system for positioning a patient for medical imaging | |
CN104574329B (zh) | 超声融合成像方法、超声融合成像导航*** | |
JP5837261B2 (ja) | マルチカメラ装置追跡 | |
US10799100B2 (en) | Image processing device, method, and program | |
JP2016511049A5 (ja) | ||
US10402990B2 (en) | Medical viewing system with a viewing plane determination | |
JP2012115635A (ja) | 画像処理方法、画像処理装置、画像システム及びプログラムコード | |
JP5961504B2 (ja) | 仮想内視鏡画像生成装置およびその作動方法並びにプログラム | |
US11712301B2 (en) | Intravascular catheter for modeling blood vessels | |
US20150305703A1 (en) | Method and device for controlling rotation angle of c-arm of medical imaging apparatus | |
JP2012165838A (ja) | 内視鏡挿入支援装置 | |
US11026583B2 (en) | Intravascular catheter including markers | |
US10242452B2 (en) | Method, apparatus, and recording medium for evaluating reference points, and method, apparatus, and recording medium for positional alignment | |
JP4921253B2 (ja) | 画像処理装置および画像処理プログラム | |
JP2009165718A (ja) | 医用画像表示装置 | |
US11992284B2 (en) | Image based motion control correction | |
JP6299739B2 (ja) | 医用画像処理装置、その制御方法、及びプログラム | |
JP2014212904A (ja) | 医用投影システム | |
WO2016131955A1 (en) | Automatic 3d model based tracking of deformable medical devices with variable appearance | |
US10049480B2 (en) | Image alignment device, method, and program | |
EP4128145B1 (en) | Combining angiographic information with fluoroscopic images | |
JP2010250458A (ja) | 画像処理装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170308 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20170522 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20170908 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20170908 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180220 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180326 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180522 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180614 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6356623 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |