JP2013137466A - Apparatus and program for endoscope image processing - Google Patents
Apparatus and program for endoscope image processing Download PDFInfo
- Publication number
- JP2013137466A JP2013137466A JP2011289241A JP2011289241A JP2013137466A JP 2013137466 A JP2013137466 A JP 2013137466A JP 2011289241 A JP2011289241 A JP 2011289241A JP 2011289241 A JP2011289241 A JP 2011289241A JP 2013137466 A JP2013137466 A JP 2013137466A
- Authority
- JP
- Japan
- Prior art keywords
- pointer
- input auxiliary
- auxiliary line
- auxiliary
- endoscopic image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00039—Operational features of endoscopes provided with input arrangements for the user
- A61B1/00042—Operational features of endoscopes provided with input arrangements for the user for mechanical operation
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00043—Operational features of endoscopes provided with output arrangements
- A61B1/00045—Display arrangement
- A61B1/0005—Display arrangement combining images e.g. side-by-side, superimposed or tiled
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B23/00—Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
- G02B23/24—Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
- G02B23/2476—Non-optical details, e.g. housings, mountings, supports
- G02B23/2484—Arrangements in relation to a camera or imaging device
Landscapes
- Life Sciences & Earth Sciences (AREA)
- Health & Medical Sciences (AREA)
- Surgery (AREA)
- Engineering & Computer Science (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Optics & Photonics (AREA)
- Pathology (AREA)
- Radiology & Medical Imaging (AREA)
- Physics & Mathematics (AREA)
- Biomedical Technology (AREA)
- Veterinary Medicine (AREA)
- Biophysics (AREA)
- Molecular Biology (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Mechanical Engineering (AREA)
- Instruments For Viewing The Inside Of Hollow Bodies (AREA)
- Endoscopes (AREA)
- Position Input By Displaying (AREA)
- User Interface Of Digital Computer (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
Description
本発明は、内視鏡画像処理装置及び内視鏡画像処理用プログラムに関し、特に、計測点等の指定点の指定が容易にできる内視鏡画像処理装置及び内視鏡画像処理用プログラムに関する。 The present invention relates to an endoscopic image processing apparatus and an endoscopic image processing program, and more particularly, to an endoscopic image processing apparatus and an endoscopic image processing program that can easily designate designated points such as measurement points.
従来より、内視鏡装置が工業分野及び医療分野において広く利用されている。内視鏡装置は、観察対象内に内視鏡挿入部を挿入して、挿入部の先端に設けられた撮像部により観察対象内の画像を撮像し、モニタに表示することによって、ユーザがその画像を見て、観察対象内を検査することができる。 Conventionally, endoscope apparatuses have been widely used in the industrial field and the medical field. An endoscope apparatus inserts an endoscope insertion section into an observation target, captures an image within the observation target with an imaging section provided at the distal end of the insertion section, and displays the image on a monitor. The inside of the observation object can be inspected by looking at the image.
また、内視鏡装置には、例えば機械部品の傷や欠損等の大きさ等を計測することができる計測機能を有する内視鏡装置もある。このような内視鏡装置においては、ユーザが内視鏡画像上で計測点を指定すると、その指定された１点あるいは２点に関する計測値、例えば内視鏡挿入部の先端からその１点までの距離、２点間の距離等が演算して求められる。このような内視鏡装置において、正確な計測結果を得るためには正確な計測点の入力がされなければならない。 In addition, there is an endoscope apparatus having a measurement function capable of measuring, for example, the size of a scratch or a defect of a machine part. In such an endoscope apparatus, when a user designates a measurement point on an endoscopic image, measurement values relating to the designated one or two points, for example, from the distal end of the endoscope insertion portion to the one point. The distance between the two points, the distance between the points, and the like are obtained by calculation. In such an endoscope apparatus, in order to obtain an accurate measurement result, an accurate measurement point must be input.
ところで、近年、直感的に素早く操作できることから、入力及び表示装置としてタッチパネルを使用した内視鏡装置が実用化されている。
しかし、一般的に、タッチパネルにおける入力には、ポインタが指などで隠れてしまうこと、さらに画素サイズが指などに比べて小さいことから、タッチパネル上において、簡単かつ正確に、所望の点を指定するのが容易ではない。
By the way, in recent years, an endoscope apparatus using a touch panel as an input and display device has been put into practical use because it can be operated intuitively and quickly.
However, generally, for input on the touch panel, the pointer is hidden by a finger or the like, and the pixel size is smaller than that of the finger or the like, so that a desired point is specified on the touch panel easily and accurately. It's not easy.
また、タッチパネルの画像上で細かいエリアを指定できるようにするために、指の接触位置から所定の距離だけ離れた位置にポインタを表示することにより、ユーザの指に隠れてしまうことなく画像上の任意の位置を指定することを可能にする方法が提案されている（例えば、特許文献１参照）。 In addition, in order to be able to specify a fine area on the image of the touch panel, a pointer is displayed at a position away from the finger contact position by a predetermined distance, so that it is not hidden by the user's finger. A method has been proposed that allows an arbitrary position to be specified (see, for example, Patent Document 1).
しかし、上記の提案に係る方法においても、指の接触する位置によって計測点を指定しなければならないため、例えば所望の計測点の指定を行おうとする場合には、ユーザは指をタッチパネルの画面上で細かくかつ正確に動かさなければならず、ユーザにとって正確な計測点の指定は容易ではない。 However, even in the method according to the above proposal, since the measurement point must be specified depending on the position where the finger contacts, for example, when the user wants to specify a desired measurement point, the user places the finger on the screen of the touch panel. Therefore, it is difficult for the user to specify an accurate measurement point.
そこで、本発明は、このような問題に鑑みてなされたものであり、タッチパネル上で正確な計測点等の指定点の指定が容易な内視鏡画像処理装置および内視鏡画像処理用プログラムを提供することを目的とする。 Therefore, the present invention has been made in view of such a problem, and an endoscope image processing apparatus and an endoscope image processing program for easily specifying a specified point such as an accurate measurement point on a touch panel are provided. The purpose is to provide.
本発明の一態様によれば、指定点によって指定された内視鏡画像上の位置を基に所定の処理を行う内視鏡画像処理装置において、表示画面を有し、かつ前記表示画面上の位置を検出するタッチパネルと、前記表示画面に前記内視鏡画像を表示する内視鏡画像表示部と、前記表示画面上において前記指定点の位置決定を補助するための第１の補助図形を表示する第１補助図形表示部と、前記表示画面の前記補助図形上に、前記指定点の前記内視鏡画像上の前記位置を指定するためのポインタを表示させるポインタ表示部と、前記補助図形上で前記ポインタを移動させるポインタ移動部と、前記ポインタにより指示された前記内視鏡画像上の位置を、前記指定点として決定する指定点決定部と、を備える内視鏡画像処理装置を提供することができる。 According to an aspect of the present invention, an endoscopic image processing apparatus that performs a predetermined process based on a position on an endoscopic image designated by a designated point has a display screen, and on the display screen A touch panel for detecting a position, an endoscopic image display unit for displaying the endoscopic image on the display screen, and a first auxiliary graphic for assisting the position determination of the designated point on the display screen are displayed. A pointer display unit for displaying a pointer for designating the position of the designated point on the endoscopic image on the auxiliary graphic of the display screen; and on the auxiliary graphic An endoscope image processing apparatus comprising: a pointer moving unit that moves the pointer at a step; and a designated point determining unit that determines a position on the endoscopic image designated by the pointer as the designated point. It is possible .
本発明の一態様によれば、指定点によって指定された内視鏡画像上の位置を基に所定の処理を行う内視鏡画像処理用プログラムであって、タッチパネルの表示画面に前記内視鏡画像を表示する内視鏡画像表示機能と、前記表示画面上において前記指定点の位置決定を補助するための第１の補助図形を表示する第１補助図形表示機能と、前記表示画面の前記補助図形上に、前記指定点の前記内視鏡画像上の前記位置を指定するためのポインタを表示させるポインタ表示機能と、前記補助図形上で前記ポインタを移動させるポインタ移動機能と、前記ポインタにより指示された前記内視鏡画像上の位置を、前記指定点として決定する指定点決定機能と、を、コンピュータに実現させるための内視鏡画像処理用プログラムを提供することができる。 According to one aspect of the present invention, there is provided an endoscope image processing program for performing a predetermined process based on a position on an endoscope image designated by a designated point, and the endoscope is displayed on a display screen of a touch panel. An endoscope image display function for displaying an image, a first auxiliary graphic display function for displaying a first auxiliary graphic for assisting the position determination of the designated point on the display screen, and the auxiliary of the display screen A pointer display function for displaying a pointer for designating the position of the designated point on the endoscopic image on a figure, a pointer movement function for moving the pointer on the auxiliary figure, and an instruction by the pointer It is possible to provide an endoscopic image processing program for causing a computer to realize a designated point determining function for determining a position on the endoscopic image as the designated point.
本発明によれば、タッチパネル上で正確な計測点等の指定点の指定が容易な内視鏡画像処理装置および内視鏡画像処理用プログラムを提供することができる。 According to the present invention, it is possible to provide an endoscopic image processing apparatus and an endoscopic image processing program that can easily designate a designated point such as an accurate measurement point on a touch panel.
以下、図面を参照して本発明の実施の形態を説明する。
（第１の実施の形態）
（構成）
図１は、本実施の形態に係わる内視鏡装置の全体構成を示す外観図である。
Embodiments of the present invention will be described below with reference to the drawings.
(First embodiment)
(Constitution)
FIG. 1 is an external view showing the overall configuration of the endoscope apparatus according to the present embodiment.
内視鏡装置１は、内視鏡２と装置本体３とを有して構成されている。内視鏡２は、細長で可撓性を有する挿入部１１と、挿入部１１の基端部に連設された操作部１２と、操作部１２から延出する可撓性を有するユニバーサルケーブル１３とを有している。ユニバーサルケーブル１３は、装置本体３に接続されている。
The
挿入部１１は、図１に示すように、先端側から順に連設された、硬質な先端部１４、上下左右に湾曲可能な湾曲部１５、及び可撓性を有する可撓管部１６を有して構成されている。挿入部１１の先端部１４内には、先端硬質部（図示せず）が設けられており、先端硬質部内には、対物光学系及び撮像素子２１（図２）が配設されている。先端部１４には、観察視野を２つ有するステレオ光学アダプタ、観察視野が１つの通常観察光学アダプタ等、各種光学アダプタが着脱自在になっている。
As shown in FIG. 1, the
操作部１２には、内視鏡装置１の各種動作制御を実行する際に必要な操作を行うための各種操作部材、例えばレリーズボタン、湾曲操作用ジョイスティックなど、が設けられている。ユーザは、レリーズボタンを押下することにより被写体像を撮影することができる。またユーザは、湾曲操作用ジョイスティックを傾倒させることにより湾曲部１５を湾曲させて、先端部１４を所望の方向に向かせることができる。
The
装置本体３は、後述する制御ユニット２４（図２）を内部に有しており、各種機能を実行することができる。各種機能の中には、計測処理機能が含まれている。
また、装置本体３には、タッチパネル１７が設けられている。タッチパネル１７は、タッチパネル１７の画面１７ａ上への指などの物体の接近または接触を検出してその位置情報が入力可能で、かつ内視鏡２により撮像された被写体の画像、処理メニュー等による操作制御内容を表示する入力／表示装置である。すなわち、タッチパネル１７は、表示画面を有し、かつ物体が接触等した表示画面上の位置を検出するタッチパネル付き表示装置である。ユーザは、タッチパネル１７の画面１７ａ上に被写体像を表示させたり、各種機能のためのメニューを表示させて複数の機能の中から所望の機能を実行させたりすることができる。
The apparatus
The
なお、タッチパネル１７は、装置本体３に対して、ヒンジ（図示せず）等の機構により、回動自在に保持されている。図１に示すように、ユーザは、装置本体３の外装筐体から起き上がらせて、ユーザにとって画面１７ａが見易い姿勢にタッチパネル１７の角度を調整することができる。
The
図２は、内視鏡装置１の内部構成を示すブロック図である。内視鏡２の挿入部１１の先端部には、撮像素子２１が設けられている。装置本体３内は、内視鏡ユニット２２と、カメラコントロールユニット（以下、ＣＣＵと略す）２３と、制御ユニット２４とを有している。挿入部１１の先端部１４に内蔵された撮像素子２１からの撮像信号は、内視鏡ユニット２２に供給される。
FIG. 2 is a block diagram showing an internal configuration of the
内視鏡ユニット２２は、挿入部１１の先端部１４へ照明光をライトガイドを介して供給する光源装置（図示せず）と、挿入部１１を構成する湾曲部１５を湾曲させる湾曲装置（図示せず）とを備えて構成されている。なお、ライトガイドを用いず、光源装置として例えばＬＥＤを先端部１４に備える構成であってもよい。
The
撮像素子２１は、先端部１４に装着された光学アダプタを介して結像された被写体像を光電変換し、撮像信号を生成する。内視鏡ユニット２２を介して、ＣＣＵ２３に、撮像素子２１から出力された撮像信号が入力される。この撮像信号は、ＣＣＵ２３内で例えばＮＴＳＣ信号等の映像信号に変換されて、制御ユニット２４へ供給される。
The
制御ユニット２４内には、画像データである映像信号が入力される映像信号処理回路３１、ＲＯＭ３２、ＲＡＭ３３、カードインターフェイス（以下、カードＩ／Ｆという）３４、ＵＳＢインターフェイス（以下、ＵＳＢＩ／Ｆという）３５、ＲＳ−２３２Ｃインターフェイス（以下、ＲＳ−２３２ＣＩ／Ｆ１７という）３６、及びこれら各種回路の機能を各種プログラムに基づいて実行し動作制御を行う中央処理装置（以下、ＣＰＵという）３７とが設けられている。映像信号処理回路３１，ＲＯＭ３２，ＲＡＭ３３，カードＩ／Ｆ３４，ＵＳＢＩ／Ｆ３５，ＲＳ−２３２ＣＩ／Ｆ３６、及びＣＰＵ３７は、バス３８を介して互いに接続されている。
In the
ＲＳ−２３２ＣＩ／Ｆ３６には、内視鏡ユニット２２およびＣＣＵ２３が接続されると共に、これら内視鏡ユニット２２やＣＣＵ２３等の制御および動作指示を行う操作部１２が接続されている。ユーザが操作部１２を操作すると、その操作内容に応じて、内視鏡ユニット２２およびＣＣＵ２３の動作を制御する際に必要な通信が、ＲＳ−２３２ＣＩ／Ｆ３６と内視鏡ユニット２２間およびＲＳ−２３２ＣＩ／Ｆ３６とＣＣＵ２３間で行われる。
The RS-232CI /
ＵＳＢＩ／Ｆ３５は、制御ユニット２４とパーソナルコンピュータ（以下、ＰＣと略す）４１とを電気的に接続するためのインターフェイスである。このＵＳＢＩ／Ｆ３５を介して制御ユニット２４にＰＣ４１を接続することによって、ユーザは、ＰＣ４１側で内視鏡画像の表示指示や、計測時における画像処理等の各種の指示を行うことができる。制御ユニット２４とＰＣ４１との間では、各種処理に必要な制御情報や画像情報等のデータ等の入出力も行われる。
The USB I /
カードＩ／Ｆ３４には、メモリカード４２を着脱自在に装着することができる。メモリカード４２をカードＩ／Ｆ３４に装着することにより、ＣＰＵ３７は、このメモリカード４２に記憶されている制御情報や画像情報等のデータの制御ユニット２４への取り込み、あるいは制御情報や画像情報等のデータのメモリカード４２への記録を行うことが可能になる。
A
映像信号処理回路３１は、ＣＣＵ２３から供給された内視鏡画像と、グラフィックによる操作メニューとを合成した合成画像を表示するため、ＣＰＵ３７の制御の下で生成された、操作メニューに基づくグラフィック画像信号とＣＣＵ２３からの映像信号とを合成する。そして映像信号処理回路３１は、合成画像の表示信号にタッチパネル１７の画面１７ａ上に表示するための処理を行い、タッチパネル１７に供給する。なお、この映像信号処理回路３１は、内視鏡画像のみを表示し、あるいは操作メニュー等の画像のみを単独で表示するための処理を行うことも可能である。したがって、タッチパネル１７の画面１７ａ上には、内視鏡画像、操作メニュー画像、内視鏡画像と操作メニュー画像との合成画像等が表示可能である。
The video
ＣＰＵ３７は、ＲＯＭ３２に格納されているプログラムを実行することによって、ユーザにより指定された処理を行うように各種回路等を制御して、内視鏡装置１の動作制御、計測処理等を行う。ＲＡＭ３３は、ＣＰＵ３７によって、データの一時格納用の作業領域として使用される。
The
ここで、内視鏡装置１で実行される計測処理における計測の原理の例を説明する。観察光学系に左右２つの視野を形成するステレオ光学アダプタを使用し、被写体像を左右の光学系で捉えたときの左右の対応点の座標に基づいて、三角測量の原理を使用して被写体の３次元空間座標を求めることで、ステレオ計測による各種計測が可能となる。
Here, an example of the principle of measurement in the measurement process executed by the
図３は、ステレオ計測による計測点の３次元座標の求め方の例を説明するための図である。左側および右側の光学系で撮像された画像に対して、三角測量の方法により、点５０の３次元座標（Ｘ，Ｙ，Ｚ）が以下の（１）式〜（３）式で計算される。撮像素子２１により、その撮像面上に投影された被写体像から得られた２つの画像のそれぞれの光学中心を、それぞれＯＬ，ＯＲとする２つの画像が得られる。但し、歪み補正が施された左右の画像上の点５１，５２の座標をそれぞれ（ＸＬ，ＹＬ）、（ＸＲ，ＹＲ）とし、座標空間内の左側と右側の光学中心５３，５４間の距離をＤとし、焦点距離をＦとし、ｔ＝Ｄ／（ＸＬ−ＸＲ）とすると、点５０の３次元座標（Ｘ，Ｙ，Ｚ）の各座標は、次の式（１）〜（３）で表すことができる。
FIG. 3 is a diagram for explaining an example of how to obtain the three-dimensional coordinates of measurement points by stereo measurement. The three-dimensional coordinates (X, Y, Z) of the
Ｘ＝ｔ×ＸＲ＋Ｄ／２ ・・・（１）
Ｙ＝ｔ×ＹＲ ・・・（２）
Ｚ＝ｔ×Ｆ ・・・（３）
従って、得られた２つの画像上の点５１，５２の座標が決定されると、パラメータＤおよびＦを用いて点５０の３次元座標が求まる。いくつかの点の３次元座標を求めることによって、２点間の距離、２点を結ぶ線と１点との距離、面積、深さ、表面形状等の様々な計測が可能である。
X = t × X R + D / 2 (1)
Y = t × Y R (2)
Z = t × F (3)
Accordingly, when the coordinates of the
また、左側の光学中心５３または右側の光学中心５４から被写体までの距離（物体距離）を求めることも可能となる。上記のステレオ計測を行うためには、内視鏡２の先端部１４とステレオ光学アダプタを含む光学系の特性を示す光学データが必要である。なお、光学データの詳細は、例えば特開２００４−４９６３８号公報に記載されているので、その説明を参照されたし。
It is also possible to obtain the distance (object distance) from the left
なお、上述した方法に限らず、アクティブステレオ計測方式、ＴＯＦ（タイム・オブ・フライト）方式、共焦点方式、等の他の方法により、計測点までの距離、計測点の位置等を求めるようにしてもよい。
（作用）
次に、計測時における内視鏡装置１の動作を説明する。図４は、内視鏡画像の例を示す図である。図５は、内視鏡装置１の制御ユニット２４のＣＰＵ３７により実行される計測点の指定処理の流れの例を示すフローチャートである。
Note that the distance to the measurement point, the position of the measurement point, and the like are determined by other methods such as the active stereo measurement method, the TOF (Time of Flight) method, the confocal method, and the like. May be.
(Function)
Next, the operation of the
内視鏡装置１は、複数のモードを有しており、ユーザにより設定されたモードに応じた動作を実行する。内視鏡装置１は、計測モードに設定されると、ユーザにより指定された指定点についての計測処理を行う。すなわち、内視鏡装置１は、指定点によって指定された内視鏡画像上の位置を基に、所定の処理の一つである計測処理を行う内視鏡画像処理装置ということができる。計測処理は、ここでは、決定された指定点に対応する、内視鏡画像ＥＩに映し出された被写体の対応点の３次元位置座標に基づいて行われる。
The
ここでは、図４に示す内視鏡画像ＥＩ上で、ユーザが計測点の指定を行う場合を例として、図５のフローチャートに沿って、計測処理のための計測点の指定処理について説明する。図４は、被写体の画像として、タービンブレード６１の一部が欠けた部分を示す内視鏡画像ＥＩを示している。ここでは、ユーザは、欠けた部分の２つの点Ｐ１，Ｐ２の距離を計測するために、２つの点Ｐ１，Ｐ２を計測点として指定する場合を想定する。
Here, the measurement point designation process for the measurement process will be described with reference to the flowchart of FIG. 5 as an example of the case where the user designates the measurement point on the endoscopic image EI shown in FIG. FIG. 4 shows an endoscopic image EI showing a part of the
計測モードが設定された後に、ユーザが、例えばタッチパネル１７の画面１７ａ上を指で触ると、図５の処理が開始される。図５の計測点指定処理プログラムがＲＯＭ３２に記憶されており、ＣＰＵ３７は、ＲＯＭ３２から計測点指定処理プログラムを読み出して実行する。図５の処理が開始されると、例えば、図４に示したような画像を、計測モード画像として、画面１７ａ上に表示する（Ｓ１）。Ｓ１の処理が、表示画面である画面１７ａに内視鏡画像ＥＩを表示する内視鏡画像表示部を構成する。なお、Ｓ１の処理では、撮像素子２１により撮像して得られた内視鏡画像ＥＩは、所定の操作により、画面１７ａ上で、拡大表示若しくは縮小表示することも可能となっている。
After the measurement mode is set, for example, when the user touches the
この計測モード画像が表示された状態で、例えば、ユーザが指で画面１７ａ上を１回タップすると、第１の入力補助線の表示処理が実行される（Ｓ２）。図６は、第１の入力補助線Ｌ１が表示された計測点指定画像７１の例を示す図である。入力補助線Ｌ１は、指定点である計測点の位置決定を補助するための補助図形である。
When the measurement mode image is displayed, for example, when the user taps the
第１の入力補助線の表示処理（Ｓ２）により、図６に示すように、計測点指定画像７１は、内視鏡画像ＥＩ上に１本の直線である入力補助線Ｌ１が重畳表示されると共に、２つのボタン７２，７３も重畳表示された画像である。ボタン７２は、入力補助線Ｌ１についてのボタンであり、後述するように入力補助線を回転させるためのボタンである。ボタン７３は、後述するように、第２の入力補助線Ｌ２を表示させるためのボタンである。
By the first input auxiliary line display process (S2), as shown in FIG. 6, in the measurement
入力補助線Ｌ１は、矩形の計測点指定画像７１に水平な線であり、計測点指定画像７１上の予め決められた位置に表示される。入力補助線Ｌ１は、図６では点線で示しているが、点線に代えて、特定の色の線で表示されるようにしてもよい。さらに、入力補助線Ｌ１の表示色は、設定変更可能であってもよい。これは、被写体には様々な色のものがあるので、その色とは異なる色で表示して被写体と区別できるようにするためである。
The input auxiliary line L1 is a line that is horizontal to the rectangular measurement
なお、ここでは、入力補助線Ｌ１は、ユーザが指で画面１７ａ上をタップすると、計測点指定画像７１に水平な線として表示される。あるいは、ユーザが指で画面１７ａ上の任意の２点をタップし、そのタップされた２点を結ぶ線を入力補助線Ｌ１として計測点指定画像７１上に表示するようにしてもよい。あるいは、ユーザが指で画面１７ａ上を触りながらなぞり、その開始点と終了点を結ぶ線を入力補助線Ｌ１として計測点指定画像７１上に表示するようにしてもよい。
以上のように、Ｓ２の処理は、表示画面上において、指定点の位置決定を補助するための第１の補助図形を表示する補助図形表示部を構成する。
Here, the input auxiliary line L1 is displayed as a horizontal line on the measurement
As described above, the process of S2 constitutes an auxiliary graphic display unit that displays the first auxiliary graphic for assisting the determination of the position of the designated point on the display screen.
Ｓ２の後、入力補助線Ｌ１が表示された状態で、入力補助線Ｌ１を移動させることができる第１の入力補助線Ｌ１の移動処理が実行される（Ｓ３）。
第１の入力補助線Ｌ１の移動方法には複数の方法があり、ユーザは所望の方法を利用して、入力補助線Ｌ１を移動することができる。複数の移動方法には、例えば、次のような方法がある。
After S2, in the state where the input auxiliary line L1 is displayed, the moving process of the first input auxiliary line L1 that can move the input auxiliary line L1 is executed (S3).
There are a plurality of methods for moving the first input auxiliary line L1, and the user can move the input auxiliary line L1 using a desired method. Examples of the plurality of movement methods include the following methods.
（第１の移動方法）
ユーザが指で、画面１７ａ上で入力補助線Ｌ１を触れて選択し、その状態で所望の方向へドラッグすることによって、入力補助線Ｌ１が計測点指定画像７１上で平行移動する。この第１の移動は、指の動き量、すなわち画面１７ａ上で触れられた位置の移動量、に応じたものであるので、計測点指定画像７１上での入力補助線Ｌ１の移動量は、比較的大まかなものである。
(First movement method)
When the user touches and selects the input auxiliary line L1 on the
（第２の移動方法）
ユーザが指で、画面１７ａ上で入力補助線Ｌ１外を触れると、触れられた位置の方向へ向かって、１ピクセル単位で、入力補助線Ｌ１が計測点指定画像７１上で平行移動する。この第２の移動は、ピクセル単位の移動なので、計測点指定画像７１上での入力補助線Ｌ１の細かな移動を可能にするものである。
(Second movement method)
When the user touches the outside of the input auxiliary line L1 on the
（第３の移動方法）
ユーザが指で、画面１７ａ上で入力補助線Ｌ１外を触れながらスライドする、あるいは軽く撫でると、そのスライドした量あるいは撫でた量に比例した量だけ、そのスライドした方向に向かって、入力補助線Ｌ１が計測点指定画像７１上で平行移動する。この第３の移動は、指の動きに応じたものであるので、計測点指定画像７１上での入力補助線Ｌ１の移動量は、比較的大まかなものである。
(Third moving method)
If the user slides while touching the outside of the input auxiliary line L1 on the
（第４の移動方法）
ユーザが指で、画面１７ａ上を触りながらなぞると、そのなぞった方向に、入力補助線Ｌ１を一点速度で移動し続けるように表示し、再度ユーザが指で画面１７ａに触れると移動が止まるようにして、所望の位置まで入力補助線Ｌ１が移動する。
(4th movement method)
If the user traces while touching the
図７は、入力補助線Ｌ１の平行移動を説明するための図である。図７に示すように、上記の第１から第４の移動方法により、ユーザは、入力補助線Ｌ１を、矢印Ａ１で示す方向に一点鎖線Ｌ１１で示すように移動させて、最終的には、入力補助線Ｌ１を点Ｐ１を通る位置に位置させることができる。
以上説明した４つの移動方法は、入力補助線Ｌ１を平行移動させる方法であるが、ボタン７２を用いて入力補助線Ｌ１を回転させる移動方法もある。
（第５の移動方法）
ユーザが指で、画面１７ａ上でボタン７２に対応する位置に触れながらドラッグすると、ドラッグの移動量だけ、入力補助線Ｌ１の所定の位置、例えば入力補助線Ｌ１の中点、を中心として、ドラッグした方向に入力補助線Ｌ１が回転する。
この第５の移動は、指の動きに応じたものであるので、計測点指定画像７１上での入力補助線Ｌ１の回転量は、比較的大まかなものである。
FIG. 7 is a diagram for explaining the parallel movement of the input auxiliary line L1. As shown in FIG. 7, the user moves the input auxiliary line L1 in the direction indicated by the arrow A1 by the first to fourth moving methods described above, and finally, The input auxiliary line L1 can be positioned at a position passing through the point P1.
The four moving methods described above are methods of moving the input auxiliary line L1 in parallel, but there is also a moving method of rotating the input auxiliary line L1 using the
(Fifth moving method)
When the user drags with the finger while touching the position corresponding to the
Since the fifth movement is in accordance with the movement of the finger, the rotation amount of the input auxiliary line L1 on the measurement
（第６の移動方法）
ユーザが指で、画面１７ａ上でボタン７２に触れた後、入力補助線Ｌ１以外の位置に触れると、入力補助線Ｌ１の所定の位置、例えば入力補助線Ｌ１の中点、を中心として、触れた位置の方向に向かって、所定量だけ、入力補助線Ｌ１が計測点指定画面７１上で回転する。回転の所定量は、例えば、入力補助線Ｌ１の中央の位置を中心とする仮想の所定の円上の１画素分、入力補助線Ｌ１の中央の位置を中心として１度分、等である。
この第６の移動は、仮想の所定の円上の１画素分、等の所定量の移動なので、計測点指定画像７１上での第１の入力補助線Ｌ１の細かな回転量を可能にするものである。
(Sixth moving method)
When the user touches the
Since the sixth movement is a predetermined amount of movement such as one pixel on a virtual predetermined circle, it is possible to finely rotate the first input auxiliary line L1 on the measurement
図８は、入力補助線Ｌ１の回転を説明するための図である。図８に示すように、上記の第５及び第６の回転方法により、ユーザは、入力補助線Ｌ１を、点Ｐ１のある、矢印Ａ２で示す方向に、一点鎖線Ｌ１２で示すように回転させて、最終的には、入力補助線Ｌ１を点Ｐ１を通る位置に位置させることができる。
以上のように、Ｓ３の処理は、補助図形である第１の入力補助線Ｌ１を、平行移動あるいは回転させて移動する補助図形移動部を構成する。そして、Ｓ３では、タッチパネル１７の画面１７ａ上の触れられた位置及び移動量に応じて、第１の入力補助線Ｌ１を移動可能である。あるいはＳ３では、タッチパネル１７の画面１７ａ上へのタップ回数又は接触時間に応じて、画面１７ａに表示された内視鏡画像ＥＩの表示画素単位で、第１の入力補助線Ｌ１を移動可能である。
FIG. 8 is a diagram for explaining the rotation of the input auxiliary line L1. As shown in FIG. 8, by the fifth and sixth rotation methods described above, the user rotates the input auxiliary line L1 in the direction indicated by the arrow A2 with the point P1 as indicated by the alternate long and short dash line L12. Finally, the input auxiliary line L1 can be positioned at a position passing through the point P1.
As described above, the process of S3 constitutes an auxiliary figure moving unit that moves the first input auxiliary line L1, which is an auxiliary figure, by translation or rotation. In S3, the first input auxiliary line L1 can be moved according to the touched position on the
ユーザは、以上の方法を利用して、入力補助線Ｌ１を移動させて、点Ｐ１を通る位置に位置させることができる。図９は、入力補助線Ｌ１が点Ｐ１を通る位置に位置された状態を示す図である。図９は、上記の第１から第４の移動方法により、ユーザが、入力補助線Ｌ１を、点Ｐ１を通る位置に移動させた状態を示す。 Using the above method, the user can move the input auxiliary line L1 to a position passing through the point P1. FIG. 9 is a diagram illustrating a state where the input auxiliary line L1 is located at a position passing through the point P1. FIG. 9 shows a state in which the user moves the input auxiliary line L1 to a position passing through the point P1 by the first to fourth moving methods.
以上のようにして、第１の入力補助線Ｌ１の移動処理（Ｓ３）の後に、ユーザが、第１の入力補助線Ｌ１の確定指示をしたか否かが判断される（Ｓ４）。その確定指示の有無は、ここでは、ユーザは、ボタン７３に触れたか否かによって、行われる。なお、その確定指示は、ボタン７３に触れる方法以外の方法で行うようにしてもよい。
As described above, after the moving process (S3) of the first input auxiliary line L1, it is determined whether or not the user has instructed to confirm the first input auxiliary line L1 (S4). Here, the presence / absence of the confirmation instruction is performed depending on whether or not the user has touched the
なお、第１の入力補助線Ｌ１は、画面１７ａ上の２画素分、３画素分などの複数の画素幅を有する線として表示されるので、Ｓ４において、入力補助線Ｌ１の位置は、その複数の画素幅の中心の値を用いて決定される。
Since the first input auxiliary line L1 is displayed as a line having a plurality of pixel widths such as two pixels and three pixels on the
入力補助線Ｌ１を移動させて点Ｐ１を通る位置に位置させた後、ユーザがボタン７３の位置を触れなければ（Ｓ４：ＮＯ）、処理は、Ｓ３に戻る。ユーザがボタン７３の画面１７ａ上の位置に触れると（Ｓ４：ＹＥＳ）、第１の入力補助線Ｌ１の位置を決定する第１の入力補助線の位置決定処理が実行される（Ｓ５）。その後、第２の入力補助線Ｌ２の表示処理が実行され（Ｓ６）、続いて、ポインタ表示処理が実行される（Ｓ７）。図１０は、第２の入力補助線Ｌ２が表示された計測点指定画像７１の例を示す図である。
If the user does not touch the position of the
第２の入力補助線Ｌ２の表示処理（Ｓ６）により、図１０に示すように、内視鏡画像ＥＩ上に１本の入力補助線Ｌ２が重畳表示される。点線で示した入力補助線Ｌ２は、矩形の計測点指定画像７１に垂直な線であり、計測点指定画像７１上の予め決められた位置に表示される。Ｓ６の処理が、画面１７ａ上において、指定点の位置決定を補助するための第２の補助図形を表示する補助図形表示部を構成する。
By the display process (S6) of the second input auxiliary line L2, as shown in FIG. 10, one input auxiliary line L2 is superimposed on the endoscopic image EI. The input auxiliary line L <b> 2 indicated by a dotted line is a line perpendicular to the rectangular measurement
なお、第２の入力補助線Ｌ２も、第１の入力補助線Ｌ１と同様に、特定の色の線で表示されてもよいし、入力補助線Ｌ２の表示色を設定変更可能としてもよい。 Similarly to the first input auxiliary line L1, the second input auxiliary line L2 may be displayed with a specific color line, or the display color of the input auxiliary line L2 may be changeable.
さらになお、ここでは、入力補助線Ｌ２も、上述した第１の入力補助線Ｌ１と同様に、ユーザが指で、画面１７ａ上の任意の２点をタップし、そのタップされた２点を結ぶ線を入力補助線Ｌ２として計測点指定画像７１上に表示するようにしてもよい。あるいはユーザが指で、画面１７ａ上を触りながらなぞり、その開始点と終了点を結ぶ線を入力補助線Ｌ２として計測点指定画像７１上に表示するようにしてもよい。
Furthermore, here, the input auxiliary line L2 is also connected to the two tapped points by the user tapping any two points on the
そして、ポインタ表示処理（Ｓ７）により、図１０に示すように、第１の入力補助線Ｌ１と第２の入力補助線Ｌ２との交点に、所定のマークとしてポインタＣＭ１が併せて表示される。ポインタＣＭ１は、ここでは、十字マークであり、例えば第１と第２の入力補助線Ｌ１、Ｌ２の色とは異なる色で表示される。この所定のマークの色も、ユーザが設定変更可能であってもよい。Ｓ７の処理が、画面１７ａの第１の入力補助線Ｌ１上に、指定点の内視鏡画像ＥＩ上の位置を指定するためのポインタＣＭ１を表示させるポインタ表示部を構成する。Ｓ７では、第１の補助図形である入力補助線Ｌ１と第２の補助図形である入力補助線Ｌ２に基づいて決定された交点の位置に、ポインタＣＭ１が表示される。
Then, by the pointer display process (S7), as shown in FIG. 10, the pointer CM1 is also displayed as a predetermined mark at the intersection of the first input auxiliary line L1 and the second input auxiliary line L2. The pointer CM1 is a cross mark here, and is displayed in a color different from the colors of the first and second input auxiliary lines L1 and L2, for example. The color of the predetermined mark may be changeable by the user. The process of S7 constitutes a pointer display unit that displays a pointer CM1 for designating the position of the designated point on the endoscopic image EI on the first input auxiliary line L1 of the
なお、ポインタＣＭ１は、ＰＣのカーソルと同様な矢印マークでもよいし、丸マークで中心に十字を有するもの、等であってもよい。 Note that the pointer CM1 may be an arrow mark similar to a PC cursor, a circle mark having a cross in the center, or the like.
また、このとき、図１０に示すように、入力補助線Ｌ２についてのボタン７２Ａも重畳表示される。ボタン７２Ａは、入力補助線Ｌ２についてのボタンであり、上述したボタン７２と同様の機能を有し、入力補助線Ｌ２を回転させるためのボタンである。
At this time, as shown in FIG. 10, the button 72A for the input auxiliary line L2 is also displayed in a superimposed manner. The button 72A is a button for the input auxiliary line L2, has the same function as the
Ｓ７の後、第２の入力補助線Ｌ２についても、第１の入力補助線Ｌ１と同様の移動が可能であり、ユーザは、上述した第１から第６の移動方法を用いて、第２の入力補助線Ｌ２を、所望の位置まで正確に移動することができる（Ｓ８）。 After S7, the second input auxiliary line L2 can also be moved in the same manner as the first input auxiliary line L1, and the user can use the first to sixth moving methods described above to perform the second movement. The input auxiliary line L2 can be accurately moved to a desired position (S8).
例えば、第１、第３又は第４の移動方法により、矢印Ａ３で示す方向に一点鎖線Ｌ２１で示すように、入力補助線Ｌ２を大まかに平行移動させた後、第２の移動方法により、入力補助線Ｌ２を細かく平行移動させて、入力補助線Ｌ２が点Ｐ１を通る位置まで移動させる。
あるいは、ボタン７２Ａを用いて、上述した第５及び第６の移動方法により、入力補助線Ｌ２を回転させて、入力補助線Ｌ２が点Ｐ１を通る位置まで回転するようにしてもよい。
For example, after the input auxiliary line L2 is roughly translated in the direction indicated by the arrow A3 by the first, third, or fourth movement method, as shown by the alternate long and short dash line L21, the input is performed by the second movement method. The auxiliary line L2 is finely translated and moved to a position where the input auxiliary line L2 passes through the point P1.
Alternatively, the input auxiliary line L2 may be rotated to the position where the input auxiliary line L2 passes through the point P1 using the button 72A by the fifth and sixth moving methods described above.
以上のように、Ｓ８の処理は、補助図形である第２の入力補助線Ｌ２を、平行移動あるいは回転させて移動する補助図形移動部を構成する。そして、Ｓ８では、タッチパネル１７の画面１７ａ上の触れられた位置及び移動量に応じて、第２の入力補助線Ｌ２を移動可能である。あるいはＳ８では、タッチパネル１７の画面１７ａ上へのタップ回数又は接触時間に応じて、画面１７ａに表示された内視鏡画像ＥＩの表示画素単位で、第２の入力補助線Ｌ２を移動可能である。
As described above, the process of S8 constitutes an auxiliary figure moving unit that moves the second input auxiliary line L2, which is an auxiliary figure, by translation or rotation. In S8, the second input auxiliary line L2 can be moved according to the touched position and the moving amount on the
Ｓ８において、第２の入力補助線Ｌ２が移動されると、ポインタＣＭ１は常に第１と第２の入力補助線Ｌ１，Ｌ２の交点に存在するので、第１の入力補助線Ｌ１又は第２の入力補助線Ｌ２の移動に応じて、ポインタＣＭ１も同時に移動する（Ｓ９）。すなわち、Ｓ９の処理は、補助図形である第１の入力補助線Ｌ１上でポインタＣＭ１を移動させるポインタ移動部を構成する。 In S8, when the second input auxiliary line L2 is moved, the pointer CM1 always exists at the intersection of the first and second input auxiliary lines L1 and L2, so the first input auxiliary line L1 or the second input auxiliary line L2 In accordance with the movement of the input auxiliary line L2, the pointer CM1 is also moved simultaneously (S9). That is, the process of S9 constitutes a pointer moving unit that moves the pointer CM1 on the first input auxiliary line L1 that is an auxiliary figure.
第１及び第２の入力補助線Ｌ１，Ｌ２が目的とする点Ｐ１をそれぞれが通る位置に移動されたとして、Ｓ９の処理の後、ユーザが第２の入力補助線Ｌ２の確定指示をしたか否かが判断される（Ｓ１０）。その確定指示は、例えば、ユーザが指で画面１７ａ上のポインタＣＭ１の位置をダブルタップする等により行うことができる。
Assuming that the first and second input auxiliary lines L1 and L2 have been moved to the respective positions passing through the target point P1, whether the user has instructed to confirm the second input auxiliary line L2 after the process of S9 It is determined whether or not (S10). The confirmation instruction can be given, for example, when the user double taps the position of the pointer CM1 on the
なお、第２の入力補助線Ｌ２の確定指示がされないときは（Ｓ１０：ＮＯ）、第１の入力補助線Ｌ１の選択がされたか否かが判定される（Ｓ１１）。ここでは、第２の入力補助線Ｌ２の移動を行った後に、第１の入力補助線Ｌ１の位置を変更したい場合には、ユーザが指で第１の入力補助線Ｌ１を触れると、第１の入力補助線Ｌ１の選択がされたと判定される。 Note that, when the confirmation instruction of the second input auxiliary line L2 is not given (S10: NO), it is determined whether or not the first input auxiliary line L1 has been selected (S11). Here, when the user wants to change the position of the first input auxiliary line L1 after moving the second input auxiliary line L2, when the user touches the first input auxiliary line L1 with a finger, It is determined that the input auxiliary line L1 has been selected.
第１の入力補助線Ｌ１の選択がされたときは（Ｓ１１：ＹＥＳ）、処理は、Ｓ３へ移行して、第１の入力補助線Ｌ１の移動が可能となる。この場合、第１と第２の入力補助線Ｌ１，Ｌ２は表示されている状態であるので、第１の入力補助線Ｌ１の移動があると、第１の入力補助線Ｌ１の移動に伴って、ポインタＣＭ１も同時に移動する。
第１の入力補助線Ｌ１の選択がされないと（Ｓ１１：ＮＯ）、処理は、Ｓ８へ移行する。
When the first input auxiliary line L1 is selected (S11: YES), the process proceeds to S3, and the first input auxiliary line L1 can be moved. In this case, since the first and second input auxiliary lines L1 and L2 are in a displayed state, if the first input auxiliary line L1 moves, the first input auxiliary line L1 moves along with the movement. The pointer CM1 also moves at the same time.
If the first input auxiliary line L1 is not selected (S11: NO), the process proceeds to S8.
以上のようにして、第１と第２の入力補助線Ｌ１，Ｌ２の位置をそれぞれ独立して移動可能であり、ユーザは、第１と第２の入力補助線Ｌ１，Ｌ２の交点にあるポインタＣＭ１の中心を、点Ｐ１に合わせることができる。 As described above, the positions of the first and second input auxiliary lines L1 and L2 can be moved independently, and the user can move the pointer at the intersection of the first and second input auxiliary lines L1 and L2. The center of CM1 can be aligned with point P1.
図１１は、入力補助線Ｌ２が点Ｐ１を通る位置まで移動された状態を示す図である。図１１に示す状態で、ポインタＣＭ１の中心が点Ｐ１に合致またはほぼ合致した状態で、ユーザが確定指示をすると（Ｓ１０：ＹＥＳ）、第２の入力補助線Ｌ２の位置を決定する第２の入力補助線の決定処理を実行し（Ｓ１２），第１と第２の入力補助線Ｌ１，Ｌ２の交点であるポインタＣＭ１の位置を決定するポインタ位置決定処理を実行する（Ｓ１３）。 FIG. 11 is a diagram illustrating a state where the input auxiliary line L2 has been moved to a position passing through the point P1. In the state shown in FIG. 11, when the user issues a confirmation instruction in the state where the center of the pointer CM1 coincides with or substantially coincides with the point P1 (S10: YES), the second input auxiliary line L2 is determined. An input auxiliary line determination process is executed (S12), and a pointer position determination process for determining the position of the pointer CM1, which is the intersection of the first and second input auxiliary lines L1 and L2, is executed (S13).
ポインタ位置決定処理により、ポインタＣＭ１の位置に対応する位置にある点Ｐ１が、第１の計測点として決定される。ポインタ位置決定処理（Ｓ１３）が実行されると、画面１７ａにおいては、２つの入力補助線Ｌ１，Ｌ２の表示は消えて、ポインタＣＭのみが表示されるようになる。よって、Ｓ１３の処理が、ポインタＣＭ１により指示された内視鏡画像ＥＩ上の位置を、指定点として決定する指定点決定部を構成する。
By the pointer position determination process, a point P1 at a position corresponding to the position of the pointer CM1 is determined as the first measurement point. When the pointer position determination process (S13) is executed, the display of the two input auxiliary lines L1 and L2 disappears and only the pointer CM is displayed on the
以上のように、第１の計測点としての点Ｐ１は、独立して移動可能な２つの入力補助線Ｌ１，Ｌ２により指定される。このとき、ポインタＣＭ１は、常に２つの入力補助線Ｌ１，Ｌ２の交点に存在し、ポインタＣＭ１も、２つの入力補助線Ｌ１，Ｌ２の移動に伴って同時に移動する。従って、このように２つの入力補助線Ｌ１，Ｌ２の移動に応じて、ポインタＣＭ１が移動するので、ポインタＣＭ１がユーザの指で隠れてしまうということはない。さらに、各入力補助線は、第２又は第５の移動方法により、細かく移動させることができるため、ポインタＣＭ１による、計測点の正確な指定も可能となる。 As described above, the point P1 as the first measurement point is designated by the two input auxiliary lines L1 and L2 that can move independently. At this time, the pointer CM1 always exists at the intersection of the two input auxiliary lines L1 and L2, and the pointer CM1 also moves simultaneously with the movement of the two input auxiliary lines L1 and L2. Therefore, since the pointer CM1 moves in accordance with the movement of the two input auxiliary lines L1 and L2, the pointer CM1 is not hidden by the user's finger. Furthermore, since each input auxiliary line can be moved finely by the second or fifth moving method, the measurement point can be accurately specified by the pointer CM1.
次に、点Ｐ２についての計測点の指定は、ユーザが指で画面１７ａ上を、再度１回タップすることにより行うことができる。すなわち、ユーザが指で画面１７ａ上を、再度１回タップすると、再び第１の入力補助線Ｌ１の表示処理が実行され（Ｓ２）、その後、上述したＳ３からＳ１１の処理が実行されて、点Ｐ１と同様に、点Ｐ２についての計測点の指定をすることができる。
Next, the measurement point for the point P2 can be specified by tapping once again on the
図１２は、２つの計測点Ｐ１，Ｐ２が指定された状態を示す図である。図１２に示すように、ユーザにより位置が決定された２つのポインタＣＭ１，ＣＭ２が、それぞれ２つの計測点Ｐ１，Ｐ２に対応している。 FIG. 12 is a diagram showing a state where two measurement points P1 and P2 are designated. As shown in FIG. 12, the two pointers CM1 and CM2 whose positions are determined by the user correspond to the two measurement points P1 and P2, respectively.
図５の処理の後、ユーザは、指定した２点Ｐ１，Ｐ２間の距離を算出する計測処理プログラムを実行させることができる。ここでは、計測処理は、決定された２つの指定点に対応する、内視鏡画像ＥＩに映し出された被写体の対応点の３次元位置座標に基づく計測処理、例えば２点間距離測定など、である。 After the process of FIG. 5, the user can execute a measurement processing program that calculates the distance between the two specified points P1 and P2. Here, the measurement process is a measurement process based on the three-dimensional position coordinates of the corresponding points of the subject displayed on the endoscopic image EI corresponding to the two specified points determined, for example, a distance measurement between two points. is there.
なお、以上は、ユーザが２つの計測点を指定する場合を説明したが、先端部１４から計測点までの距離を計測する場合のように、１つの計測点のみを指定する場合は、上述した点Ｐ１についての計測点の指定だけとなる。
In the above, the case where the user designates two measurement points has been described. However, the case where only one measurement point is designated as in the case where the distance from the
また、上述した例では、ユーザが入力補助線Ｌ１，Ｌ２を移動させるときは、それぞれ別々に移動可能で、一方の移動をしているときは、他方の移動はできないが、２つの入力補助線Ｌ１，Ｌ２を同時に触れている状態で、入力補助線Ｌ１と入力補助線Ｌ２を同時に別々に動かすことができるようにしてもよい。 In the above-described example, when the user moves the input auxiliary lines L1 and L2, the input auxiliary lines L1 and L2 can be moved separately. When the user moves one of the input auxiliary lines L1 and L2, the other input cannot be moved. The input auxiliary line L1 and the input auxiliary line L2 may be moved separately at the same time while touching L1 and L2.
さらにまた、ポインタＣＭ１あるいはＣＭ２に触れている状態でドラッグすると、その触れているポインタの移動に伴って、そのポインタを通る２つの入力補助線Ｌ１，Ｌ２が同時にドラッグされるようにしてもよい。 Furthermore, when dragging while the pointer CM1 or CM2 is being touched, the two auxiliary input lines L1 and L2 passing through the pointer may be dragged simultaneously with the movement of the touched pointer.
なお、上述した例では、第１の入力補助線Ｌ１の位置を決定した後に、第２の入力補助線Ｌ２を表示しているが、最初から２本の入力補助線Ｌ１，Ｌ２を同時に表示するようにしてもよい。その場合、ユーザが移動したい入力補助線を選択できるようにして、移動可能な入力補助線は、移動不可能な入力補助線とは、色を変えて表示するようにして、ユーザが移動できる入力補助線を認識できるようにする。例えば、画面１７ａ上の所定のボタンを触れることによって、一方の入力補助線のみを、他方の入力補助線の色（例えば黒色）とは異なる色（例えば赤色）で表示する。そして再度所定のボタンを触れると、他方の入力補助線を一方の入力補助線の色（例えば黒色）とは異なる色（例えば赤色）で表示するように、表示を変更等することにより、ユーザは、移動可能な入力補助線を識別できる。この場合、移動可能な入力補助線の色と、移動不可能な入力補助線の色は、それぞれユーザによって設定変更可能とされる。
In the above-described example, the second input auxiliary line L2 is displayed after the position of the first input auxiliary line L1 is determined. However, the two input auxiliary lines L1 and L2 are simultaneously displayed from the beginning. You may do it. In that case, the input auxiliary line that the user wants to move can be selected, the movable input auxiliary line is displayed in a different color from the non-movable input auxiliary line, and the user can move the input. Make auxiliary lines visible. For example, by touching a predetermined button on the
さらになお、上述した第１と第２の入力補助線は、直線であるが、線分、曲線、あるいは閉曲線でもよい。 Furthermore, the first and second input auxiliary lines described above are straight lines, but may be line segments, curved lines, or closed curves.
以上のように、上述した実施の形態の内視鏡装置によれば、２本の入力補助線を用いてそれぞれを個別に移動させてポインタを表示させているので、ポインタの位置が指で隠れてしまうこともなく、タッチパネル上で正確な計測点の指定を容易に行うことができる。
（第２の実施の形態）
第１の実施の形態の内視鏡装置では、直線である２本の入力補助線によって、計測点の指定が行われているが、本実施の形態の内視鏡装置では、円と直線の２つの入力補助線によって、計測点の指定が行われる。
As described above, according to the endoscope device of the above-described embodiment, the pointer is displayed by moving each of the two auxiliary input lines individually, so that the position of the pointer is hidden by the finger. Therefore, accurate measurement points can be easily specified on the touch panel.
(Second Embodiment)
In the endoscope apparatus of the first embodiment, measurement points are designated by two input auxiliary lines that are straight lines. However, in the endoscope apparatus of the present embodiment, a circle and a straight line are specified. A measurement point is designated by two input auxiliary lines.
本実施の形態の内視鏡装置の構成は、第１の内視鏡装置の構成と同じであり、その構成と計測点の指定処理は、図１、図２及び図５と同様であるので、以下、第１の実施の形態と同じ構成については同じ符号を用いて説明は省略し、第１の実施の形態と異なる動作について図４の内視鏡画像の例を用いて説明する。 The configuration of the endoscope apparatus according to the present embodiment is the same as that of the first endoscope apparatus, and the configuration and measurement point designation processing are the same as those in FIGS. 1, 2, and 5. Hereinafter, the same components as those in the first embodiment are denoted by the same reference numerals, and description thereof will be omitted. Operations different from those in the first embodiment will be described using the example of the endoscopic image in FIG.
本実施の形態の内視鏡装置も、計測モードが設定された後に、ユーザがタッチパネル１７の画面１７ａ上を指で触れると、図５の処理が開始される。そして、図４の内視鏡画像ＥＩが計測モード画像として表示（Ｓ１）された状態で、ユーザが指で、画面１７ａ上を１回タップすると、第１の入力補助線Ｌ３の表示処理が実行される（Ｓ２）。
In the endoscope apparatus of the present embodiment as well, when the user touches the
図１３は、第１の入力補助線L３が表示された計測点指定画像７１Ａの例を示す図である。第１の入力補助線Ｌ３の表示処理（Ｓ２）により、図１３に示すように、計測点指定画像７１Ａには、内視鏡画像ＥＩ上に１つの円の第１の入力補助線Ｌ３が重畳表示されると共に、ボタン７３も重畳表示される。
FIG. 13 is a diagram illustrating an example of a measurement
円の入力補助線Ｌ３は、計測点指定画像７１Ａ上の予め決められた位置に表示される。入力補助線Ｌ３は、図１３では点線で示しているが、特定の色の線で表示されてもよい。入力補助線Ｌ３の表示色も、第１の実施の形態と同様に、ユーザが、設定変更可能であってもよい。
The circular input auxiliary line L3 is displayed at a predetermined position on the measurement
ユーザが指で画面１７ａ上の任意の２点をタップすると、そのタップされた２点の一方を円の中心とし、他方を円の円周上の点とする円形の線が入力補助線Ｌ３として計測点指定画像７１Ａ上に表示される。あるいは、ユーザが指で画面１７ａ上を触りながら円形になぞると、そのなぞった線に沿って近似した円形の線が入力補助線Ｌ３として計測点指定画像７１Ａ上に表示される。
Ｓ２の後、第１の入力補助線Ｌ３が表示された状態で、第１の入力補助線Ｌ３を移動、拡大及び縮小させることができる第１の入力補助線Ｌ３の拡大縮小処理を含む移動処理が実行される（Ｓ３）。
第１の入力補助線Ｌ３の拡大縮小方法には、複数の方法があり、ユーザは、所望の方法を利用して、第１の入力補助線Ｌ３を移動することができる。複数の拡大縮小方法には、例えば、次のような方法がある。
When the user taps any two points on the
After S2, the moving process including the enlargement / reduction process of the first input auxiliary line L3 which can move, enlarge and reduce the first input auxiliary line L3 in a state where the first input auxiliary line L3 is displayed. Is executed (S3).
There are a plurality of methods for enlarging and reducing the first input auxiliary line L3, and the user can move the first input auxiliary line L3 using a desired method. Examples of the plurality of enlargement / reduction methods include the following methods.
（第１の拡大縮小方法）
ユーザが指で、画面１７ａ上で第１の入力補助線Ｌ３である円の線上を触れて選択する。その状態で円の外周方向あるいは中心方向へドラッグすることによって、もしくは第１の入力補助線Ｌ３の円をピンチして動かすことによって、第１の入力補助線Ｌ１である円は、計測点指定画像７１上で拡大あるいは縮小する。
この第１の拡大縮小方法は、指の動きに応じたものであるので、計測点指定画像７１Ａ上での第１の入力補助線Ｌ３の移動量は、比較的大まかなものである。
(First enlargement / reduction method)
The user touches and selects the first input auxiliary line L3 on the circle with the finger on the
Since the first enlargement / reduction method is in accordance with the movement of the finger, the movement amount of the first input auxiliary line L3 on the measurement
（第２の拡大縮小方法）
ユーザが指で、画面１７ａ上で第１の入力補助線Ｌ３の外側若しくは内側をタップする。タップされた位置の方向へ向かって、１ピクセル単位で、第１の入力補助線Ｌ３の円は、計測点指定画像７１Ａ上で拡大もしくは縮小する。円の外側がタップされると、タップの回数に応じて、１ピクセル単位で、第１の入力補助線Ｌ３は拡大する。一方、円の内側がタップされると、タップの回数に応じて、１ピクセル単位で、第１の入力補助線Ｌ３は縮小する。
この第２の拡大縮小は、ピクセル単位の拡大若しくは縮小なので、計測点指定画像７１Ａ上での第１の入力補助線Ｌ３の細かな拡大もしくは縮小を可能にするものである。なお、タップの接触時間に応じたピクセル量で、円を、拡大若しくは縮小するようにしてもよい。
(Second enlargement / reduction method)
The user taps the outside or the inside of the first input auxiliary line L3 with the finger on the
Since the second enlargement / reduction is an enlargement / reduction in units of pixels, the first input auxiliary line L3 can be finely enlarged or reduced on the measurement
なお、第３の拡大縮小方法として、拡大と縮小の指示のための２つのアイコン、２つのボタンなどを表示させて、そのどちらかのアイコン又はボタンをタップ等することによって、タップの回数若しくは接触時間に応じて、ピクセル単位の拡大若しくは縮小ができるようにしてもよい。 As a third enlargement / reduction method, two icons for enlargement / reduction instructions, two buttons, etc. are displayed, and the number of taps or contact is made by tapping one of the icons or buttons. Depending on the time, the pixel unit may be enlarged or reduced.
また、第１の入力補助線Ｌ３の移動も可能である。
（第１の移動方法）
ユーザが指で、画面１７ａ上で第１の入力補助線Ｌ３の中心を触れて選択して選択状態にする。その状態で所望の方向へドラッグすることによって、第１の入力補助線Ｌ３を計測点指定画像７１Ａ上で平行移動する。
Further, the first input auxiliary line L3 can be moved.
(First movement method)
The user touches the center of the first input auxiliary line L3 on the
（第２の移動方法）
ユーザが指で、画面１７ａ上で入力補助線Ｌ３の円の外を触れると、触れられた位置の方向へ向かって、１ピクセル単位で、入力補助線Ｌ３を計測点指定画像７１上で平行移動する。
この第２の移動は、ピクセル単位の移動なので、計測点指定画像７１上での入力補助線Ｌ３の細かな移動を可能にするものである。
(Second movement method)
When the user touches the outside of the circle of the input auxiliary line L3 on the
Since this second movement is a movement in units of pixels, the input auxiliary line L3 can be finely moved on the measurement
（第３の移動方法）
ユーザが指で、画面１７ａ上で第１の入力補助線Ｌ３の中心を触れて選択する。その状態で画面１７ａ上を触りながらなぞると、そのなぞった方向に、入力補助線Ｌ１を一点速度で移動し続けるように表示する。そしてユーザが指で再度画面１７ａに触れると移動が止まるようにして、所望の位置まで入力補助線Ｌ３を移動する。
(Third moving method)
The user touches the center of the first input auxiliary line L3 on the
図１３は、入力補助線Ｌ３の拡大縮小及び平行移動を説明するための図である。図１３に示すように、上記の第１から第３の拡大縮小及び上記第１から第３の移動方法により、ユーザは、入力補助線Ｌ３の円の拡大（図１３のＢ１方向）、円の縮小（図１３のＢ２方向）、及び円の移動（例えば矢印Ｂ３で示す方向への移動）、を行うことができる。 FIG. 13 is a diagram for explaining the enlargement / reduction and translation of the input auxiliary line L3. As shown in FIG. 13, by the above first to third enlargement / reduction and the first to third movement methods, the user enlarges the circle of the input auxiliary line L3 (direction B1 in FIG. 13). Reduction (direction B2 in FIG. 13) and movement of a circle (for example, movement in the direction indicated by arrow B3) can be performed.
以上の方法により、ユーザは、円形の図形である入力補助線Ｌ３を、所望の位置、例えば、点Ｐ１を通る位置に、拡大、縮小若しくは移動させることができる。 With the above method, the user can enlarge, reduce, or move the input auxiliary line L3, which is a circular figure, to a desired position, for example, a position passing through the point P1.
円周の線である第１の入力補助線Ｌ３が指定したい点Ｐ１の位置に一致したら、ユーザは、ボタン７３を押すことにより（Ｓ４：ＹＥＳ）、第１の入力補助線Ｌ３の位置が決定される（Ｓ５）。そして、図１４のような画像が表示される（Ｓ６）。図１４は、第１の入力補助線Ｌ３の円の中心Ｃ１から円周方向に伸びる１本の第２の入力補助線Ｌ４が重畳表示されると共に、ボタン７２も重畳表示された画像を示す図である。そして、第１の入力補助線Ｌ３と第２の入力補助線Ｌ４の交点に、ポインタＣＭ３が表示される（Ｓ７）。第２の入力補助線Ｌ４は、次の４つの方法により、回転あるいは移動することができる（Ｓ８）。
When the first input auxiliary line L3, which is a circumferential line, matches the position of the point P1 to be designated, the user presses the button 73 (S4: YES) to determine the position of the first input auxiliary line L3. (S5). Then, an image as shown in FIG. 14 is displayed (S6). FIG. 14 is a view showing an image in which one second input auxiliary line L4 extending in the circumferential direction from the center C1 of the circle of the first input auxiliary line L3 is superimposed and the
（第１の回転方法）
ユーザが指で、画面１７ａ上で、ボタン７２に対応する位置に触れながらドラッグすると、ドラッグの移動量だけ、矢印Ｂ４あるいはＢ５で示すドラッグした方向に入力補助線Ｌ４が回転する。
この第４の移動は、指の動きに応じたものであるので、計測点指定画像７１Ａ上での第２の入力補助線Ｌ４の回転量は、比較的大まかなものである。
(First rotation method)
When the user drags with a finger while touching the position corresponding to the
Since the fourth movement is in accordance with the movement of the finger, the rotation amount of the second input auxiliary line L4 on the measurement
（第２の回転方法）
ユーザが指で、画面１７ａ上でボタン７２を触れると、入力補助線Ｌ４に対して触れた位置に応じて、入力補助線Ｌ４の所定の位置、例えば入力補助線Ｌ４の中央の位置、を中心として、触れられた位置の方向に向かって、所定量だけ、入力補助線Ｌ４を計測点指定画面７１Ａ上で回転する。回転の所定量は、入力補助線Ｌ４の中央の位置を中心とする仮想の所定の円上の１画素分、入力補助線Ｌ４の中央の位置を中心として１度分、等である。
この第２の回転は、仮想の所定の円上の１画素分、等の所定量の回転なので、計測点指定画像７１Ａ上での入力補助線Ｌ４の細かな回転量を可能にするものである。
(Second rotation method)
When the user touches the
Since the second rotation is a predetermined amount of rotation such as one pixel on a virtual predetermined circle, it enables a fine amount of rotation of the input auxiliary line L4 on the measurement
（第３の回転方法）
ユーザが指で、画面１７ａ上を触りながらなぞると、そのなぞった方向に、入力補助線Ｌ４を一点速度で回転し続けるように表示する。そして再度ユーザが指で画面１７ａに触れると回転が止まるようにようにして、所望の位置まで入力補助線Ｌ４を回転する。
(Third rotation method)
When the user traces with the finger while touching the
また、入力補助線Ｌ３及びＬ４を同時に移動することもできる。第１の入力補助線Ｌ３の円の中心に触れながら、例えば矢印Ｂ６で示す方向にドラッグすると、第１の入力補助線Ｌ３と第２の入力補助線Ｌ４の相対的な位置関係を保持したまま、平行移動させることができる。 Further, the input auxiliary lines L3 and L4 can be moved simultaneously. While touching the center of the circle of the first input auxiliary line L3, for example, when dragging in the direction indicated by the arrow B6, the relative positional relationship between the first input auxiliary line L3 and the second input auxiliary line L4 is maintained. , Can be translated.
以上のようにして、円の第１の入力補助線Ｌ３と直線の第２の入力補助線Ｌ４は独立して回転若しくは移動可能である。第１と第２の入力補助線Ｌ３、Ｌ４のいずれかを回転若しくは移動しているとき、ポインタＣＭ３は常に第１と第２の入力補助線Ｌ３、Ｌ４の交点に存在するように同時に移動する（Ｓ９）。第１と第２の入力補助線Ｌ３、Ｌ４のどちらを回転若しくは移動させるかは、第１と第２の入力補助線Ｌ３、Ｌ４のいずれかに触れることで切り換えることが可能である。なお、選択された方の入力補助線の色が変わる等により、選択状態がユーザに識別できるようにしてもよい。
図１５は、第２の入力補助線Ｌ４が点Ｐ１を通る位置まで移動された状態を示す図である。図１５に示す状態で、ポインタＣＭ３の中心が点Ｐ１に合致またはほぼ合致した状態で、例えばポインタＣＭ３をダブルタップすることなどにより、ユーザが確定指示をすると（Ｓ１０：ＹＥＳ）、第２の入力補助線Ｌ４の位置を決定する第２の入力補助線Ｌ４の決定処理を実行し（Ｓ１２），第１と第２の入力補助線Ｌ３，Ｌ４の交点であるポインタＣＭ３の位置を決定するポインタ位置決定処理を実行する（Ｓ１３）。
As described above, the circular first input auxiliary line L3 and the straight second input auxiliary line L4 can be rotated or moved independently. When one of the first and second input auxiliary lines L3 and L4 is rotated or moved, the pointer CM3 always moves at the same time so as to always exist at the intersection of the first and second input auxiliary lines L3 and L4. (S9). Which one of the first and second input auxiliary lines L3 and L4 is rotated or moved can be switched by touching either the first or second input auxiliary line L3 or L4. The selected state may be identified to the user by changing the color of the selected input auxiliary line.
FIG. 15 is a diagram illustrating a state where the second input auxiliary line L4 has been moved to a position passing through the point P1. In the state shown in FIG. 15, when the user gives a confirmation instruction (S10: YES), for example, by double-tapping the pointer CM3 in a state where the center of the pointer CM3 coincides with or almost coincides with the point P1, the second input The second input auxiliary line L4 determining process for determining the position of the auxiliary line L4 is executed (S12), and the pointer position for determining the position of the pointer CM3 that is the intersection of the first and second input auxiliary lines L3, L4 A determination process is executed (S13).
図１６は、計測点Ｐ１が指定された状態を示す図である。図１６に示すように、ユーザにより位置が決定されたポインタＣＭ３が、計測点Ｐ１の指定点に対応している。
そして、計測点Ｐ２についても、上述した第１の計測点Ｐ１と同様に、ユーザが指で画面１７ａ上を、再度１回タップすることにより、処理は、再び第１の入力補助線Ｌ１の表示処理（Ｓ２）に戻り、同様の処理により、新たなポインタを表示させて指定点として指定することができる。
FIG. 16 is a diagram illustrating a state in which the measurement point P1 is designated. As shown in FIG. 16, the pointer CM3 whose position is determined by the user corresponds to the designated point of the measurement point P1.
And about the measurement point P2, similarly to the 1st measurement point P1 mentioned above, when a user taps on the
なお、上記の例では、第１の入力補助線Ｌ３として円形の図形を表示し、次に第２の入力補助線Ｌ４として直線の図形を表示させているが、最初に、第１の入力補助線Ｌ３として直線の図形を表示し、次に第２の入力補助線Ｌ４として円形の図形を表示させるようにして、計測点の指定を行うようにしてもよい。 In the above example, a circular figure is displayed as the first input auxiliary line L3, and then a straight line figure is displayed as the second input auxiliary line L4. First, the first input auxiliary line L3 is displayed. A measurement point may be designated by displaying a straight line graphic as the line L3 and then displaying a circular graphic as the second input auxiliary line L4.
以上のように、上述した実施の形態の内視鏡装置によれば、円形の入力補助線と直線の入力補助線とを用いてそれぞれを個別に、拡大、縮小、移動等をさせてポインタを表示させているので、ポインタの位置が指で隠れてしまうこともなく、タッチパネル上で正確な計測点の指定を容易に行うことができる。 As described above, according to the endoscope apparatus of the above-described embodiment, each of the pointers can be individually enlarged, reduced, moved, etc. using the circular input auxiliary line and the linear input auxiliary line. Since it is displayed, the position of the pointer is not hidden by the finger, and an accurate measurement point can be easily specified on the touch panel.
さらになお、上述した第２の入力補助線Ｌ４は、直線であるが、線分、曲線、あるいは閉曲線でもよい。
（第３の実施の形態）
第１及び第２の実施の形態の内視鏡装置では、直線である２つの入力補助線又は円と直線の２つの入力補助線とによって、計測点の指定が行われているが、本実施の形態の内視鏡装置では、直線の１つの入力補助線のみによって、計測点の指定が行われる。
Furthermore, although the second input auxiliary line L4 described above is a straight line, it may be a line segment, a curve, or a closed curve.
(Third embodiment)
In the endoscope apparatuses of the first and second embodiments, the measurement points are specified by two input auxiliary lines that are straight lines or two input auxiliary lines that are straight lines and circles. In the endoscope apparatus of the form, the measurement point is designated by only one straight input auxiliary line.
本実施の形態の内視鏡装置の構成は、第１の内視鏡装置の構成と同じであり、その構成と計測点の指定処理は、図１、図２及び図５と同様あるいは類似するので、以下、第１の実施の形態と同じ構成については同じ符号を用いて説明は省略し、第１の実施の形態と異なる動作について図４の内視鏡画像の例を用いて説明する。図５に代わって図１７により、本実施の形態の内視鏡装置１の動作を説明する。図１７は、内視鏡装置１の制御ユニット２４のＣＰＵ３７により実行される計測点の指定処理の流れの例を示すフローチャートである。
The configuration of the endoscope apparatus of the present embodiment is the same as the configuration of the first endoscope apparatus, and the configuration and measurement point designation processing are the same as or similar to those in FIGS. Therefore, the description of the same configuration as that of the first embodiment will be omitted by using the same reference numerals, and the operation different from that of the first embodiment will be described using the example of the endoscopic image of FIG. The operation of the
本実施の形態の内視鏡装置も、計測モードが設定された後に、ユーザがタッチパネル１７の画面１７ａ上を指で触れると、図１７の処理が開始される。そして、図４の内視鏡画像ＥＩが計測モード画像として表示（Ｓ１）された状態で、ユーザが指で、画面１７ａ上を１回タップすると、第１の入力補助線Ｌ５の表示処理が実行される（Ｓ２）。
Also in the endoscope apparatus of the present embodiment, when the user touches the
図１８は、第１の入力補助線Ｌ５が表示された計測点指定画像７１Ｂの例を示す図である。第１の入力補助線Ｌ５の表示処理（Ｓ２）により、図１８に示すように、計測点指定画像７１Ｂには、内視鏡画像ＥＩ上に１本の直線の第１の入力補助線Ｌ５が重畳表示されると共に、エッジ検出ボタン７３Ｂも重畳表示される。
FIG. 18 is a diagram illustrating an example of the measurement
入力補助線Ｌ５は、計測点指定画像７１Ｂ上の予め決められた位置に表示される。入力補助線Ｌ５は、図１８では点線で示しているが、特定の色の線で表示されてもよい。入力補助線Ｌ５の表示色は、第１の実施の形態と同様に、ユーザが、設定変更可能であってもよい。
The input auxiliary line L5 is displayed at a predetermined position on the measurement
なお、ここでは、入力補助線Ｌ５は、ユーザが指で画面１７ａ上をタップすると、計測点指定画像７１Ｂに水平な線として表示される。ユーザが指で、画面１７ａ上の任意の２点をタップすると、そのタップされた２点を結ぶ線を入力補助線Ｌ５として計測点指定画像７１Ｂ上に表示するようにしてもよい。あるいは、ユーザが指で、画面１７ａ上を触りながら円形になぞると、そのなぞった線に沿った直線を入力補助線Ｌ５として計測点指定画像７１Ｂ上に表示するようにしてもよい。
さらになお、入力補助線Ｌ５は、線分Ｌ５１でもよい。図１９は、線分である入力補助線Ｌ５１の例を示す図である。
Here, the input auxiliary line L5 is displayed as a horizontal line on the measurement
Furthermore, the input auxiliary line L5 may be a line segment L51. FIG. 19 is a diagram illustrating an example of the input auxiliary line L51 which is a line segment.
Ｓ２の後、入力補助線Ｌ５が表示された状態で、入力補助線Ｌ５を移動することができる入力補助線Ｌ５の移動処理が実行される（Ｓ３）。
入力補助線Ｌ５の移動方法は、第１の実施の形態で説明した第１から第６の移動方法と同様で、複数の方法があり、ユーザは、所望の方法を利用して、入力補助線Ｌ５を移動することができる。図１８に示すように、上記の第１から第４の移動方法により、ユーザは、入力補助線Ｌ５の移動（矢印Ｃ１，Ｃ２方向への移動）を行うことができる。さらに、第１の実施の形態で説明した第５と第６の移動方法により、ユーザは、入力補助線Ｌ５の回転を行うことができる。
After S2, in the state where the input auxiliary line L5 is displayed, the moving process of the input auxiliary line L5 that can move the input auxiliary line L5 is executed (S3).
The moving method of the input auxiliary line L5 is the same as the first to sixth moving methods described in the first embodiment, and there are a plurality of methods. The user can use the desired method to input the input auxiliary line. L5 can be moved. As shown in FIG. 18, the user can move the input auxiliary line L5 (moving in the directions of arrows C1 and C2) by the first to fourth moving methods. Furthermore, the user can rotate the input auxiliary line L5 by the fifth and sixth moving methods described in the first embodiment.
以上の方法により、ユーザは、直線の入力補助線Ｌ５を、所望の位置、例えば、点Ｐ１を通る位置に、移動させることができる。図２０は、入力補助線Ｌ５が点Ｐ１を通る位置に移動した場合を示す図である。 With the above method, the user can move the straight input auxiliary line L5 to a desired position, for example, a position passing through the point P1. FIG. 20 is a diagram illustrating a case where the input auxiliary line L5 has moved to a position passing through the point P1.
次に、Ｓ３の処理の後、エッジ検出の指示があったか否か、すなわちエッジ検出ボタン７３Ｂが押されたか否かが判定される（Ｓ２１）。入力補助線Ｌ５が指定したい点Ｐ１を通る位置に一致したら、ユーザは、エッジ検出ボタン７３Ｂを押すことで（Ｓ２１：ＹＥＳ）、第１の入力補助線Ｌ５の位置が決定され（Ｓ５）、さらに、エッジ検出処理が実行される（Ｓ２２）。
Next, after the process of S3, it is determined whether or not there is an instruction for edge detection, that is, whether or not the
エッジ処理では、内視鏡画像ＥＩの輝度情報に基づいて、入力補助線Ｌ５上のエッジ部を検出し、検出されたエッジ部の位置に、ポインタＣＭ４が表示される（Ｓ２３）。Ｓ２３の処理が、画面１７ａの入力補助線Ｌ５上に、指定点の内視鏡画像ＥＩ上の位置を指定するためのポインタＣＭ４を表示させるポインタ表示部を構成する。Ｓ２３では、第１の補助図形である入力補助線Ｌ５上のエッジ部の位置に、ポインタＣＭ４が表示される。ユーザは、エッジ検出指示をするだけで、点Ｐ１にポインタＣＭ４を表示させることができ、操作が容易である。
In the edge processing, the edge portion on the input auxiliary line L5 is detected based on the luminance information of the endoscopic image EI, and the pointer CM4 is displayed at the position of the detected edge portion (S23). The process of S23 constitutes a pointer display unit that displays a pointer CM4 for designating the position of the designated point on the endoscopic image EI on the input auxiliary line L5 of the
なお、エッジ検出処理により、複数のエッジ部が検出された場合は、複数のポインタ候補が複数のエッジ部の位置に出現するが、所望のポインタをタップすることにより、指定点として確定させるようにしてもよい。すなわち、Ｓ２３において、第１の入力補助線Ｌ５上に複数のポインタ候補を表示し、Ｓ２４において、所定の操作、例えば入力補助線Ｌ５をタップすることにより、その表示された複数のポインタ候補間で、ポインタＣＭ４を移動させるようにして、所望のポインタ候補の位置にポインタＣＭ４が有るときに、そのポインタＣＭ４をタップして、指定点の確定をするようにしてもよい。
なお、消したいポインタを長押しする（すなわち長く触れる）ことにより、そのポインタを消去できるようになっている。
When a plurality of edge portions are detected by the edge detection process, a plurality of pointer candidates appear at the positions of the plurality of edge portions. However, by tapping a desired pointer, it is determined as a designated point. May be. That is, in S23, a plurality of pointer candidates are displayed on the first input auxiliary line L5, and in S24, by tapping a predetermined operation, for example, the input auxiliary line L5, between the displayed pointer candidates. The pointer CM4 may be moved so that when the pointer CM4 is at the position of the desired pointer candidate, the pointer CM4 may be tapped to determine the designated point.
The pointer can be erased by long-pressing the pointer to be erased (that is, touching it for a long time).
さらに、複数のポインタが表示され、複数のポインタが密集していて見づらい場合には画面７１Ｂ上をピンチするとピンチした場所を中心に拡大処理が行われるようにしてもよい。
Furthermore, when a plurality of pointers are displayed and the plurality of pointers are dense and difficult to see, pinching on the
また、エッジ検出において、余計なエッジ部の検出がされないようにするために、あるいはより多くのエッジ部が検出されるように、図１９のように線分５１の長さを変えたり、検出されたエッジ部により形成される線の曲率半径が所定の範囲のものに限定したりする等の処理を行って、エッジ検出の検出範囲を変更するようにしてもよい。
Further, in the edge detection, the length of the
そして、ユーザは、ポインタＣＭ４を、移動させることができる（Ｓ２４）。そのポインタＣＭ４の移動方法も、第１の実施の形態で説明した第１から第６の移動方法と同様で、複数の方法があるが、エッジ検出処理により決定されたポインタＣＭ４の位置を微修正するためのであるので、主に、細かな移動方法を利用して、ユーザは、入力補助線Ｌ５を移動する。 Then, the user can move the pointer CM4 (S24). The moving method of the pointer CM4 is the same as the first to sixth moving methods described in the first embodiment, and there are a plurality of methods, but the position of the pointer CM4 determined by the edge detection process is finely corrected. Therefore, the user moves the input auxiliary line L5 mainly using a fine movement method.
なお、ポインタの移動は別の方法で行うようにしてもよい。例えば、ポインタＣＭ４をダブルタップすると、そのポインタＣＭ４を通るもう一つの直線が表示される。そして、上述した第１から第６の移動方法を利用して直線を移動させると、その直線と入力補助線Ｌ５との交点にあるポインタが、直線の移動に伴って移動するので、ポインタＣＭ４を移動することができる。 The pointer may be moved by another method. For example, when the pointer CM4 is double-tapped, another straight line passing through the pointer CM4 is displayed. When the straight line is moved using the first to sixth moving methods described above, the pointer at the intersection of the straight line and the input auxiliary line L5 moves with the movement of the straight line. Can move.
以上のようにして、第１の入力補助線Ｌ５は移動可能であり、エッジ検出処理によりポインタＣＭ４を表示させ、かつポインタＣＭ４も入力補助線Ｌ５とは独立して移動可能である。 As described above, the first input auxiliary line L5 is movable, the pointer CM4 is displayed by the edge detection process, and the pointer CM4 is also movable independently of the input auxiliary line L5.
Ｓ２４の後、再度、入力補助線Ｌ５を移動させることもできる（Ｓ１１，Ｓ３）。入力補助線Ｌ５とポインタＣＭ４のどちらを移動させるかは、入力補助線Ｌ５とポインタＣＭ４のいずれかに触れることで切り換えることが可能である。選択された方の入力補助線Ｌ５又はポインタＣＭ４の色が変わる等により、選択状態がユーザに識別できるようにしてもよい。 After S24, the input auxiliary line L5 can be moved again (S11, S3). Which of the input auxiliary line L5 and the pointer CM4 is moved can be switched by touching either the input auxiliary line L5 or the pointer CM4. The user may be able to identify the selected state by changing the color of the selected input auxiliary line L5 or pointer CM4.
図２１は、ポインタＣＭ４が所望の位置まで移動された状態を示す図である。図２１に示す状態で、例えばポインタＣＭ４をダブルタップすることなどにより、ユーザが確定指示をすると（Ｓ１０：ＹＥＳ）、ポインタＣＭ４の位置を決定するポインタ位置決定処理を実行する（Ｓ１３）。Ｓ１３の処理の結果、画面１７ａは、図１６に示す画面になる。
FIG. 21 is a diagram illustrating a state in which the pointer CM4 has been moved to a desired position. In the state shown in FIG. 21, for example, when the user gives a confirmation instruction by double-tapping the pointer CM4 (S10: YES), a pointer position determination process for determining the position of the pointer CM4 is executed (S13). As a result of the processing in S13, the
さらになお、上述した第１の入力補助線Ｌ５は、直線あるいは線分であるが、曲線又は閉曲線でもよい。 Furthermore, the first input auxiliary line L5 described above is a straight line or a line segment, but may be a curved line or a closed curve.
そして、計測点Ｐ２についても、上述した第１の計測点Ｐ１と同様に、ユーザが指で画面１７ａ上を、再度１回タップすることにより、処理は、再び第１の入力補助線Ｌ１の表示処理（Ｓ２）に戻り、同様の処理により、ポインタを表示させて指定点として指定することができる。
And about the measurement point P2, similarly to the 1st measurement point P1 mentioned above, when a user taps on the
また、本実施の形態では、第１の入力補助線Ｌ５の位置を決定した後に、エッジ検出処理により、エッジ部にポインタＣＭ４が表示されるが、その表示されたポインタＣＭ４の位置を移動させることなく、決定すなわち確定させるようにすれば、エッジ検出処理により決定されたポインタＣＭ４の位置を、自動的に計測点として決定することができる。 Further, in the present embodiment, after the position of the first input auxiliary line L5 is determined, the pointer CM4 is displayed at the edge portion by the edge detection process, but the position of the displayed pointer CM4 is moved. However, if it is determined, that is, confirmed, the position of the pointer CM4 determined by the edge detection process can be automatically determined as a measurement point.
以上のように、上述した実施の形態の内視鏡装置によれば、入力補助線Ｌ５についてのエッジ検出処理により、ポインタを表示させているので、ポインタの位置が指で隠れてしまうこともなく、かつ、その表示されたポインタも移動できるので、タッチパネル上で正確な計測点の指定を容易に行うことができる。 As described above, according to the endoscope apparatus of the above-described embodiment, the pointer is displayed by the edge detection process for the input auxiliary line L5, so that the position of the pointer is not hidden by the finger. In addition, since the displayed pointer can be moved, it is possible to easily specify an accurate measurement point on the touch panel.
以上のように、上述した各実施の形態に係る内視鏡装置によれば、タッチパネル上で正確な計測点等の指定点の指定が容易な内視鏡装置を実現することができる。
なお、上述した各実施の形態は、内視鏡装置における指定点が計測点である例であるが、指定点は、画面１７ａ上に表示されたメニュー画面上の機能ボタン等を押すための指示点等でもよい。
As described above, according to the endoscope apparatuses according to the above-described embodiments, it is possible to realize an endoscope apparatus that allows easy designation of designated points such as measurement points on the touch panel.
In addition, although each embodiment mentioned above is an example in which the designated point in the endoscope apparatus is a measurement point, the designated point is an instruction for pressing a function button or the like on the menu screen displayed on the
また、以上説明した動作を実行する内視鏡画像処理用プログラムは、コンピュータプログラム製品として、フレキシブルディスク、ＣＤ−ＲＯＭ等の可搬媒体や、ハードディスク等の記憶媒体に、その全体あるいは一部が記録され、あるいは記憶されている。そのプログラムがコンピュータにより読み取られて、動作の全部あるいは一部が実行される。あるいは、そのプログラムの全体あるいは一部を通信ネットワークを介して流通または提供することができる。利用者は、通信ネットワークを介してそのプログラムをダウンロードしてコンピュータにインストールしたり、あるいは記録媒体からコンピュータにインストールしたりすることで、容易に本実施の形態の内視鏡装置を実現することができる。 The endoscope image processing program for executing the operations described above is recorded as a computer program product in its entirety or in part on a portable medium such as a flexible disk or CD-ROM or a storage medium such as a hard disk. Or remembered. The program is read by a computer, and all or part of the operation is executed. Alternatively, all or part of the program can be distributed or provided via a communication network. The user can easily realize the endoscope apparatus according to the present embodiment by downloading the program via a communication network and installing the program on the computer or installing the program from the recording medium on the computer. it can.
本発明は、上述した実施の形態に限定されるものではなく、本発明の要旨を変えない範囲において、種々の変更、改変等が可能である。 The present invention is not limited to the above-described embodiments, and various changes and modifications can be made without departing from the scope of the present invention.
１ 内視鏡装置、２ 内視鏡、３ 装置本体、１１ 挿入部、１２ 操作部、１３ ユニバーサルケーブル、１４ 先端部、１５ 湾曲部、１６ 可撓管部、１７ タッチパネル、１７ａ 画面、２１ 撮像素子、２２ 内視鏡ユニット、２３ カメラコントロールユニット、２４ 制御ユニット、３１ 映像信号処理回路、３２ ＲＯＭ、３３ ＲＡＭ、３４ カードＩ／Ｆ、３５ ＵＳＢＩ／Ｆ、３６ ＲＳ−２３２ＣＩ／Ｆ、３７ ＣＰＵ、３８ バス、４１ ＰＣ、４２ メモリカード、６１ タービンブレード、７１，７１Ａ，７１Ｂ 計測点指定画像、
DESCRIPTION OF
Claims (13)
表示画面を有し、かつ前記表示画面上の位置を検出するタッチパネルと、
前記表示画面に前記内視鏡画像を表示する内視鏡画像表示部と、
前記表示画面上において前記指定点の位置決定を補助するための第１の補助図形を表示する第１補助図形表示部と、
前記表示画面の前記補助図形上に、前記指定点の前記内視鏡画像上の前記位置を指定するためのポインタを表示させるポインタ表示部と、
前記補助図形上で前記ポインタを移動させるポインタ移動部と、
前記ポインタにより指示された前記内視鏡画像上の位置を、前記指定点として決定する指定点決定部と、
を備えることを特徴とする内視鏡画像処理装置。 In an endoscopic image processing apparatus that performs predetermined processing based on a position on an endoscopic image designated by a designated point,
A touch panel having a display screen and detecting a position on the display screen;
An endoscope image display unit for displaying the endoscope image on the display screen;
A first auxiliary graphic display unit for displaying a first auxiliary graphic for assisting in determining the position of the designated point on the display screen;
A pointer display unit for displaying a pointer for designating the position of the designated point on the endoscopic image on the auxiliary graphic of the display screen;
A pointer moving unit for moving the pointer on the auxiliary figure;
A designated point determining unit that determines the position on the endoscopic image instructed by the pointer as the designated point;
An endoscopic image processing apparatus comprising:
前記ポインタ表示部は、前記第１の補助図形と前記第２の補助図形に基づいて決定された位置に、前記ポインタを表示することを特徴とする請求項１に記載の内視鏡画像処理装置。 A second auxiliary graphic display unit for displaying a second auxiliary graphic for assisting the position determination of the designated point on the display screen;
The endoscope image processing apparatus according to claim 1, wherein the pointer display unit displays the pointer at a position determined based on the first auxiliary graphic and the second auxiliary graphic. .
前記ポインタ移動部は、前記第１補助図形移動部による前記第１の補助図形の移動に応じて前記ポインタを移動することを特徴とする請求項1、２又は３に記載の内視鏡画像処理装置。 A first auxiliary figure moving unit that moves the first auxiliary figure by at least one of translation, rotation, enlargement, and reduction;
The endoscope image processing according to claim 1, 2 or 3, wherein the pointer moving unit moves the pointer in accordance with movement of the first auxiliary graphic by the first auxiliary graphic moving unit. apparatus.
前記１の補助図形と前記第２の補助図形は、互いに独立して移動可能であることを特徴とする請求項４、５又は６に記載の内視鏡画像処理装置。 A second auxiliary figure moving unit that moves the second auxiliary figure by at least one of parallel movement, rotation, enlargement, and reduction;
The endoscope image processing apparatus according to claim 4, 5 or 6, wherein the first auxiliary graphic and the second auxiliary graphic are movable independently of each other.
前記ポインタ移動部は、その表示された前記複数のポインタ候補間で、前記ポインタを移動させることを特徴とする請求項１に記載の内視鏡画像処理装置。 The pointer display unit displays a plurality of pointer candidates on the first auxiliary graphic;
The endoscope image processing apparatus according to claim 1, wherein the pointer moving unit moves the pointer between the displayed pointer candidates.
タッチパネルの表示画面に前記内視鏡画像を表示する内視鏡画像表示機能と、
前記表示画面上において前記指定点の位置決定を補助するための第１の補助図形を表示する第１補助図形表示機能と、
前記表示画面の前記補助図形上に、前記指定点の前記内視鏡画像上の前記位置を指定するためのポインタを表示させるポインタ表示機能と、
前記補助図形上で前記ポインタを移動させるポインタ移動機能と、
前記ポインタにより指示された前記内視鏡画像上の位置を、前記指定点として決定する指定点決定機能と、
を、コンピュータに実現させるための内視鏡画像処理用プログラム。 An endoscopic image processing program for performing predetermined processing based on a position on an endoscopic image specified by a specified point,
An endoscope image display function for displaying the endoscope image on a display screen of a touch panel;
A first auxiliary graphic display function for displaying a first auxiliary graphic for assisting position determination of the designated point on the display screen;
A pointer display function for displaying a pointer for designating the position of the designated point on the endoscopic image on the auxiliary graphic of the display screen;
A pointer movement function for moving the pointer on the auxiliary figure;
A designated point determination function for determining the position on the endoscopic image indicated by the pointer as the designated point;
An endoscope image processing program for causing a computer to realize the above.
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011289241A JP2013137466A (en) | 2011-12-28 | 2011-12-28 | Apparatus and program for endoscope image processing |
| PCT/JP2012/059687 WO2013099305A1 (en) | 2011-12-28 | 2012-04-09 | Endoscopic image processing device, method for setting position on endoscopic image, and recording medium |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011289241A JP2013137466A (en) | 2011-12-28 | 2011-12-28 | Apparatus and program for endoscope image processing |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2013137466A true JP2013137466A (en) | 2013-07-11 |
Family
ID=48696831
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2011289241A Pending JP2013137466A (en) | 2011-12-28 | 2011-12-28 | Apparatus and program for endoscope image processing |
Country Status (2)
| Country | Link |
|---|---|
| JP (1) | JP2013137466A (en) |
| WO (1) | WO2013099305A1 (en) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2015211824A (en) * | 2014-04-17 | 2015-11-26 | オリンパス株式会社 | Endoscopic image display apparatus, endoscopic image display method, and endoscopic image display program |
| JP2020022563A (en) * | 2018-08-06 | 2020-02-13 | ソニー・オリンパスメディカルソリューションズ株式会社 | Medical observation apparatus |
| US10666854B2 (en) | 2016-01-08 | 2020-05-26 | Olympus Corporation | Bending operation control for endoscope |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005137747A (en) * | 2003-11-10 | 2005-06-02 | Toshiba Corp | Ultrasonic diagnostic system |
| JP4855673B2 (en) * | 2004-12-13 | 2012-01-18 | オリンパス株式会社 | Medical image processing device |
| JP2008076119A (en) * | 2006-09-19 | 2008-04-03 | Sunx Ltd | Displacement sensor |
| JP5251081B2 (en) * | 2007-11-21 | 2013-07-31 | パナソニック株式会社 | Switching device and information device using the same |
| JP5361592B2 (en) * | 2009-07-24 | 2013-12-04 | オリンパス株式会社 | Endoscope apparatus, measurement method, and program |
| JP2011034455A (en) * | 2009-08-04 | 2011-02-17 | Canon Inc | Data input apparatus and data input method |
-
2011
- 2011-12-28 JP JP2011289241A patent/JP2013137466A/en active Pending
-
2012
- 2012-04-09 WO PCT/JP2012/059687 patent/WO2013099305A1/en active Application Filing
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2015211824A (en) * | 2014-04-17 | 2015-11-26 | オリンパス株式会社 | Endoscopic image display apparatus, endoscopic image display method, and endoscopic image display program |
| WO2016147697A1 (en) * | 2015-03-13 | 2016-09-22 | オリンパス株式会社 | Endoscope image displaying device, endoscope image displaying method, and endoscope image displaying program |
| US10419705B2 (en) | 2015-03-13 | 2019-09-17 | Olympus Corporation | Endoscope image display apparatus, endoscope image display method and endoscope image display program |
| US10666854B2 (en) | 2016-01-08 | 2020-05-26 | Olympus Corporation | Bending operation control for endoscope |
| JP2020022563A (en) * | 2018-08-06 | 2020-02-13 | ソニー・オリンパスメディカルソリューションズ株式会社 | Medical observation apparatus |
| US11638000B2 (en) | 2018-08-06 | 2023-04-25 | Sony Olympus Medical Solutions Inc. | Medical observation apparatus |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2013099305A1 (en) | 2013-07-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6150532B2 (en) | Measuring device and program | |
| JP5921835B2 (en) | Input device | |
| JP6037683B2 (en) | Measuring device, method of operating measuring device, and program | |
| WO2009110211A1 (en) | Ultrasonograph | |
| CN105988710B (en) | Method, apparatus and device for assisting user input with touch display | |
| JP5883147B2 (en) | Image display device and medical image pickup device | |
| JP2014512530A (en) | Coordinate positioning device | |
| JP6124570B2 (en) | XYZ orthogonal measuring device | |
| JP5437087B2 (en) | Endoscope apparatus and program | |
| JP2011182977A (en) | Endoscope apparatus and program | |
| US11232568B2 (en) | Three-dimensional image display method, three-dimensional image display device, and recording medium | |
| US20230309954A1 (en) | System for visualization and control of surgical devices utilizing a graphical user interface | |
| JPWO2017119351A1 (en) | Endoscope apparatus, operation control method for endoscope apparatus, operation control program for endoscope apparatus, and storage medium storing operation control program for endoscope apparatus | |
| WO2013099305A1 (en) | Endoscopic image processing device, method for setting position on endoscopic image, and recording medium | |
| US20100317920A1 (en) | Endoscope apparatus and program | |
| US10419705B2 (en) | Endoscope image display apparatus, endoscope image display method and endoscope image display program | |
| JP2010272036A (en) | Image processing apparatus | |
| JP4674093B2 (en) | Endoscope apparatus and program | |
| JP2019170853A (en) | Touch panel device, curving control program, recording medium with the curving control program recorded, and curving control method for endoscope | |
| JP5199634B2 (en) | Measuring endoscope system | |
| US20220020208A1 (en) | Measurement method, measurement device, and recording medium | |
| JP2013178742A (en) | Image processing device, image processing system, image processing method and program | |
| US20220357157A1 (en) | Image-processing method, image-processing device, and recording medium | |
| US20210256719A1 (en) | Method and system for providing surgical site measurement | |
| US20220136820A1 (en) | Image display method, display control device, and recording medium |