JP6670854B2 - フォーカス制御装置、内視鏡装置及びフォーカス制御装置の作動方法 - Google Patents
フォーカス制御装置、内視鏡装置及びフォーカス制御装置の作動方法 Download PDFInfo
- Publication number
- JP6670854B2 JP6670854B2 JP2017561487A JP2017561487A JP6670854B2 JP 6670854 B2 JP6670854 B2 JP 6670854B2 JP 2017561487 A JP2017561487 A JP 2017561487A JP 2017561487 A JP2017561487 A JP 2017561487A JP 6670854 B2 JP6670854 B2 JP 6670854B2
- Authority
- JP
- Japan
- Prior art keywords
- focus
- focus control
- unit
- evaluation value
- invalid
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 88
- 238000011156 evaluation Methods 0.000 claims description 201
- 230000008859 change Effects 0.000 claims description 73
- 239000013598 vector Substances 0.000 claims description 49
- 230000008569 process Effects 0.000 claims description 44
- 238000003384 imaging method Methods 0.000 claims description 41
- 230000002123 temporal effect Effects 0.000 claims description 7
- 238000012545 processing Methods 0.000 description 63
- 239000003595 mist Substances 0.000 description 29
- 238000001514 detection method Methods 0.000 description 16
- 230000001629 suppression Effects 0.000 description 13
- 230000004048 modification Effects 0.000 description 9
- 238000012986 modification Methods 0.000 description 9
- 238000007781 pre-processing Methods 0.000 description 8
- 238000006243 chemical reaction Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 230000009471 action Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 2
- 238000007796 conventional method Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000003902 lesion Effects 0.000 description 2
- 210000000056 organ Anatomy 0.000 description 2
- 229910052709 silver Inorganic materials 0.000 description 2
- 239000004332 silver Substances 0.000 description 2
- 210000000683 abdominal cavity Anatomy 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 230000002411 adverse Effects 0.000 description 1
- 230000000052 comparative effect Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 238000002357 laparoscopic surgery Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007257 malfunction Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 231100000989 no adverse effect Toxicity 0.000 description 1
- 238000011017 operating method Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000002271 resection Methods 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000008685 targeting Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00163—Optical arrangements
- A61B1/00188—Optical arrangements with focusing or zooming features
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/042—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by a proximal camera, e.g. a CCD camera
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/555—Constructional details for picking-up images in sites, inaccessible due to their dimensions or hazardous conditions, e.g. endoscopes or borescopes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
- H04N23/673—Focus control based on electronic image sensor signals based on contrast or high frequency components of image signals, e.g. hill climbing method
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
- H04N23/675—Focus control based on electronic image sensor signals comprising setting of focusing regions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/681—Motion detection
- H04N23/6811—Motion detection based on the image signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/682—Vibration or motion blur correction
- H04N23/685—Vibration or motion blur correction performed by mechanical compensation
- H04N23/687—Vibration or motion blur correction performed by mechanical compensation by shifting the lens or sensor position
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Surgery (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Biomedical Technology (AREA)
- Molecular Biology (AREA)
- Optics & Photonics (AREA)
- Pathology (AREA)
- Radiology & Medical Imaging (AREA)
- Biophysics (AREA)
- Physics & Mathematics (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Automatic Focus Adjustment (AREA)
- Endoscopes (AREA)
- Instruments For Viewing The Inside Of Hollow Bodies (AREA)
- Studio Devices (AREA)
- Focusing (AREA)
Description
1.1 低コントラスト状態判定の概要
まず本実施形態の手法について説明する。内視鏡装置(内視鏡システム)のように、動画像を観察する装置においては、ウォブリング方式によるAFが望ましい。フォーカスレンズを広い範囲でスキャンする方式、例えばフォーカスレンズを近点側の端点から遠点側の端点まで移動させ、AF評価値のピークを求めるような方式では、スキャンをしている間は画像の合焦の度合い(ボケの度合い)が大きく変化し続けてしまい、観察に適さないためである。
以上では、注目被写体以外の被写体による低コントラスト状態の判定への影響について説明した。しかし、注目被写体以外の被写体は合焦動作自体、具体的にはウォブリングにおける合焦方向の判定結果にも影響を与える。例えば、コントラストAFであればコントラストが高い領域に合焦するため、生体に注目しているのに、処置具に合焦するおそれがある。
M×SN>SF ・・・・・(1)
SN/(SN+SF)>Th ・・・・・(2)
本実施形態に係るフォーカス制御装置を含む内視鏡装置について、図3を用いて説明する。本実施形態における内視鏡装置は、体内への挿入部である硬性鏡100と、硬性鏡100に接続される撮像部200と、処理部300と、表示部400と、外部I/F部500と、光源部600を備えている。
本実施形態においてAF制御部340で行われるAF制御の概要について、図5を用いて説明する。なお、AFが実行されている間、AF制御部340は図5の処理をフレーム毎に実行する。
ユーザがAF開始/終了ボタン210を操作しAFが開始されると、AF制御の動作モードは合焦動作に設定される。よって、AF制御が開始されると、まず動作モードの判定を行う(S101)が、AF開始/終了ボタン210を操作時には合焦動作と判定される。合焦動作が開始されると、A/D変換部310から順次出力される画像の取得タイミングに同期するように、フォーカスレンズのウォブリング動作を開始し、ウォブリング動作で取得された画像に基づいて、合焦動作(狭義の合焦動作)を実施する(S102)。合焦動作の詳細については、図6等を用いて後述する。
また、動作モードが待機動作に設定されている場合、S101の判定に基づいて待機動作が実行される。待機動作が開始されると、AF制御部340はシーン変化の検出処理を行う(S115)。例えば、AF制御部340は、前処理部320から順次出力される画像を用いて、画像の色や輝度、AF評価値の変化や、画像の動き等を監視することでシーン変化の検出処理を行う。
S105で動作モードがリセット動作に変更された場合、次フレームのS101の判定により、リセット動作が実行される。リセット動作が開始されると、まずリセット動作カウンタをインクリメントする(S118)。
これにより、短時間に繰り返しリセット動作が実行されることが抑止されるため、フォーカスレンズ位置の頻繁な変動が生じにくく、ユーザへのストレスを軽減することが可能になる。具体的には、リセット動作の頻度は最大でも上記「一定期間」に1回となり、それ以上の頻度でのリセット動作は行われない。
また、フォーカス制御部2000(プロセッサ)は、リセット動作を実行した回数であるリセット回数のカウント処理を行い、リセット回数が所与の閾値以上となった場合に、合焦物***置の制御を待機する。具体的には、リセット動作カウンタをリセット動作の処理開始時にインクリメントすることでリセット回数をカウントする(S118)。そして、閾値以上の場合(S119でYes)には、動作モードを“待機動作”に設定する(S124)。
次に、AF制御部340における合焦動作(S101)の詳細について、図6のフローチャートを用いて説明する。
この処理が開始されると、まず領域設定部(AF領域設定部)2010により、画像上に複数のブロックからなるAF領域を設定する(S201)。AF領域の設定の例を図7に示す。図7において外周の矩形は画像全体を表し、Aと記載されている矩形は後述のAF評価値や特徴量等の算出対象の領域である、評価ブロックを表している。また、図7において、評価ブロック全体を囲む範囲をAF領域とする。図7では画像データの中央部に、横方向に5個、縦方向に4個の合計20個の評価ブロックを設定している。
AF評価値算出部2030は、前処理部320から出力される画像データの画素値に基づいて、各評価ブロックのAF評価値であるブロックAF評価値を算出する(S202)。ブロックAF評価値はブロック内の被写体に対する合焦度合いに応じて大きくなる値である。ブロックAF評価値は、例えば各評価ブロック内の画像の各画素に対してバンドパスフィルタを適用し、その出力値をブロック内で累積して算出する。
方向判別部2040は、各評価ブロックのブロックAF評価値から、各評価ブロックの目標合焦方向を判別する(S203)。判別手法の例を図8(A)を用いて説明する。AF評価値算出部2030から出力される最新(現在フレーム)のブロックAF評価値をAfVal[N]、1フレーム前、2フレーム前に出力されたブロックAF評価値をそれぞれAfVal[N-1]、AfVal[N-2]とする。方向判別部2040は、ブロックAF評価値変化量αを下式(3)を用いて算出する。
α = {(AfVal[N] + AfVal[N-2])/2)} - AfVal[N-1] …(3)
β=α / Ave(AfVal[N], AfVal[N-1], AfVal[N-2]) …(4)
β=-1 * α / Ave(AfVal[N], AfVal[N-1], AfVal[N-2]) …(5)
また、ブロック特徴量算出部2020は、前処理部320から出力される画像データに基づいて各評価ブロックの特徴量(色情報、輝度情報、輝点のサイズ等)を算出する(S204)。特徴量の算出については、広く知られた手法であるため、詳細な説明は省略する。
無効ブロック設定部2050は、S203で求められたブロックAF評価値変化率βや、S204で求められたブロック特徴量に基づいて、無効ブロックを設定する(S205)。
次に、ブロック状態決定部2060は、S203で求められたブロック方向判別結果と、S205で求められた無効ブロック設定結果に基づいてブロック状態を決定する(S206)。
次に、無効フレーム設定部2070は、無効フレームの設定を行う(S207)。無効フレームでは、当該フレームの画像自体が合焦方向の決定に適しておらず、方向判別結果の信頼性も低いため、方向判別結果に基づく合焦物***置の移動を行わない。これは具体的には、ウォブリング動作の中心位置を移動させずに(シフト量に相当する量のフォーカスレンズの移動を行わずに)、ウォブリング量に相当する量のフォーカスレンズの移動、すなわちウォブリング動作のみを行う。無効フレームとは具体的にはミストが検出された場合、又は無効被写体が検出された場合に設定される。
低コントラスト状態判定部2075は、AF評価値算出部2030から出力される各評価ブロックのブロックAF評価値、および無効ブロック設定部2050から出力される無効ブロック設定結果に基づいて、低コントラスト状態か否かの判定を行う(S208)。
α’ = {(AreaAfVal[N] + AreaAfVal[N-2] ) / 2} - AreaAfVal[N-1]…(6)
β’ = |α'| / Ave(AreaAfVal[N], AreaAfVal[N-1], AreaAfVal[N-2])…(7)
合焦方向決定部2080は、S206においてブロック状態決定部2060から出力される各評価ブロックのブロック状態に基づいて、最終的な合焦方向を決定する(S211)。
合焦判断部2090は、合焦方向決定部2080から出力される合焦方向(NEAR/FAR)と、合焦方向が反転した位置に基づいて、フォーカスレンズが合焦位置に到達したか否かを判断する(S212)。
フォーカスレンズ位置決定部2095は、低コントラスト状態判定部2075の判断結果、無効フレーム設定部2070の設定結果、合焦方向決定部2080で決定された合焦方向、合焦判断部2090の判断結果を用いて、次のフォーカスレンズ位置を決定する(S213)。
また、本実施形態の手法は上述したものに限定されず、種々の変形実施が可能である。以下、AF制御部340の各部の処理の変形例を説明する。
AF評価値算出部2030は、1ブロック当たり1つのブロックAF評価値を算出するものには限定せず、周波数帯域の異なる複数のバンドパスフィルタを用いて複数のブロックAF評価値を算出してもよい。そして、方向判別部2040は、複数のブロックAF評価値から、それぞれブロックAF評価値変化率βを求め、当該ブロックAF評価値変化率βに基づいて、ブロック方向判別を行ってもよい。これにより、様々な周波数帯域をもつ被写体に対しても、精度よく、ブロック方向判別を実施することができる。例えば、方向判別部2040は、複数のブロックAF評価値変化率βからそれぞれ方向判別結果を求め、異なる結果が得られた場合は、ユーザが注目すると考えられる周波数帯域から得られた結果を優先すればよい。
合焦位置付近ではブロックAF評価値変化率βの値(絶対値)が非常に小さくなるため、大部分のブロックのブロック状態が無効となり、合焦動作ができなくなる場合がある。これを抑止するため、ブロックAF評価値変化率βが閾値以下の場合(低コントラスト)のみ、他の無効ブロックと分けて判断し、異なる処理を行ってもよい。
無効フレーム設定部2070では、画像に基づいて動きベクトルを求める例を説明したが、これには限定されず、モーションセンサーからのセンサー情報を用いてもよい。ここでのモーションセンサーは、加速度センサーやジャイロセンサー等、撮像部200の動きを検出するセンサーである。
低コントラスト状態判定部2075では、現在フレームでの有効ブロック(低コントラスト判定有効ブロック)を対象としてAF評価値の平均値AreaAfValを算出し、低コントラスト状態を判定した。しかしこれには限定されず、現在フレームと過去2フレームのブロックAF評価値、低コントラスト判定無効ブロックをメモリ等に保存しておき、現在フレームと過去2フレームのすべてで有効ブロックであったブロックを、最終的な有効ブロックとして設定してもよい。
合焦方向決定部2080では、現フレームでのブロック状態に基づいて合焦方向を決定したが、これには限定されない。合焦方向決定部2080では、同じ合焦方向が複数回連続した場合に、合焦方向を更新するような処理を行ってもよい。このような処理により、頻繁に合焦方向が変化することを防ぎ、安定した合焦動作を実現することができる。
合焦判断部2090は、FARからNEARに反転した位置、NEARからFARに反転した位置のそれぞれの位置の変動(差)が小さいことを合焦の条件としたが、他の条件を追加してもよい。例えば、合焦位置を基準とした往復運動の幅の変動は、大きくないことがわかっている。逆に言えば、1回前(直前)に反転した位置と、最新の反転した位置との差が大きすぎても小さすぎても、信頼できない。よって、FARからNEARに反転した位置と、NEARからFARに反転した位置との間隔(差、差の絶対値)が、所定の範囲内でない場合は、合焦状態でないと判断してもよい。
合焦方向にウォブリング中心位置を移動させる際のシフト量は、所定の固定値であってもよいが、同じ方向判別結果が連続する場合は徐々に増加させてもよい。このような処理を行うことで、フォーカスレンズが合焦位置に到達するまでの時間を短縮する(合焦動作を高速化する)ことができる。
200 撮像部、210 AF開始/終了ボタン、220 フォーカスレンズ、
230 フォーカスレンズ駆動部、240 対物レンズ系、
250 撮像素子、300 処理部、310 A/D変換部、
320 前処理部、330 画像処理部、340 制御部、
350 AF制御部、400 表示部、500 外部I/F部、
600 光源部、610 白色光源、620 ライトガイドケーブル、
2000 フォーカス制御部、2010 領域設定部、
2020 ブロック特徴量算出部、2030 AF評価値算出部、
2040 方向判別部、2050 無効ブロック設定部、
2060 ブロック状態決定部、2070 無効フレーム設定部、
2075 低コントラスト状態判定部、2080 合焦方向決定部、
2090 合焦判断部、2095 フォーカスレンズ位置決定部
Claims (13)
- 撮像部で撮像された画像に対して、各領域が複数の画素からなる複数の領域を設定する領域設定部と、
設定された複数の領域のAF(AutoFocus)評価値を算出するAF評価値算出部と、
前記複数の領域のうち、注目被写体以外の被写体が撮像されていると判定される領域である無効領域を設定する無効領域設定部と、
前記複数の領域のうち、前記無効領域以外の領域の前記AF評価値に基づいて、低コントラスト状態を判定する低コントラスト状態判定部と、
前記AF評価値に基づいて、合焦物***置を制御するフォーカス制御部と、
を含み、
前記フォーカス制御部は、
前記低コントラスト状態判定部の判定結果に基づいて、異なるフォーカス制御を行い、
前記フォーカス制御部は、
前記低コントラスト状態判定部で前記低コントラスト状態と判定された場合に、フォーカスレンズを所定の位置に移動するリセット動作を実行し、前記リセット動作の実行後に、前記合焦物***置の制御を実行することを特徴とするフォーカス制御装置。 - 請求項1において、
前記低コントラスト状態判定部は、
前記複数の領域のうち、前記無効領域以外の領域の前記AF評価値の変動が、所定の閾値よりも小さい場合に、前記低コントラスト状態であると判定することを特徴とするフォーカス制御装置。 - 請求項2において、
前記複数の領域の一部または全部の領域において、基準位置に対して前記合焦物***置の目標である目標合焦位置がNEARにあるかFARにあるかを判別し、各領域に対して方向判別結果を求める方向判別処理を行う方向判別部を含み、
前記フォーカス制御部は、
前記方向判別結果に基づいて合焦方向を決定し、前記合焦方向に基づいて、前記合焦物***置を制御し、
前記低コントラスト状態判定部は、
前記合焦物***置を移動させた場合の前記AF評価値の変動が、前記所定の閾値よりも小さい場合に、前記低コントラスト状態であると判定することを特徴とするフォーカス制御装置。 - 請求項1において、
前記フォーカス制御部は、
前記リセット動作の実行後、一定期間リセット動作の実行を抑制することを特徴とするフォーカス制御装置。 - 請求項1において、
前記フォーカス制御部は、
前記リセット動作を実行した回数であるリセット回数のカウント処理を行い、前記リセット回数が所与の閾値以上となった場合に、前記合焦物***置の制御を待機することを特徴とするフォーカス制御装置。 - 請求項3において、
前記フォーカス制御部は、
前記複数の領域の各領域の前記方向判別結果、及び各領域に含まれる前記複数の画素の特徴量の少なくとも一方に基づいて、無効フレームを設定する無効フレーム設定部をさらに備え、
前記フォーカス制御部は、
前記無効フレームと判定されたフレームでは、前記方向判別結果に基づく前記合焦物***置の移動を行わないことを特徴とするフォーカス制御装置。 - 請求項6において、
前記無効フレーム設定部は、
前記方向判別結果の空間的な変動情報、前記方向判別結果の時間的な変動情報、及び前記特徴量である動きベクトルの変動情報のうちの少なくとも1つに基づいて、前記無効フレームを設定することを特徴とするフォーカス制御装置。 - 撮像部で撮像された画像に対して、各領域が複数の画素からなる複数の領域を設定する領域設定部と、
設定された複数の領域のAF(AutoFocus)評価値を算出するAF評価値算出部と、
前記複数の領域のうち、注目被写体以外の被写体が撮像されていると判定される領域である無効領域を設定する無効領域設定部と、
前記複数の領域のうち、前記無効領域以外の領域の前記AF評価値に基づいて、低コントラスト状態を判定する低コントラスト状態判定部と、
前記AF評価値に基づいて、合焦物***置を制御するフォーカス制御部と、
前記複数の領域の一部または全部の領域において、基準位置に対して前記合焦物***置の目標である目標合焦位置がNEARにあるかFARにあるかを判別し、各領域に対して方向判別結果を求める方向判別処理を行う方向判別部と、
を含み、
前記フォーカス制御部は、
前記方向判別結果に基づいて合焦方向を決定し、前記合焦方向に基づいて、前記合焦物***置を制御し、
前記低コントラスト状態判定部は、
前記合焦物***置を移動させた場合の前記AF評価値の変動が、所定の閾値よりも小さい場合に、前記低コントラスト状態であると判定し、
前記フォーカス制御部は、
前記低コントラスト状態判定部の判定結果に基づいて、異なるフォーカス制御を行い、
前記フォーカス制御部は、
前記合焦物***置の移動が前記NEARから前記FAR、又は前記FARから前記NEARへと切り替わる切替回数のカウントが所定の切替閾値を超えたことを条件に、合焦動作を停止し、前記NEARから前記FARへと切り替わる前記合焦物***置の変動、又は前記FARから前記NEARへと切り替わる前記合焦物***置の変動が所定の変動閾値より大きい場合は、前記切替回数のカウントをリセットすることを特徴とするフォーカス制御装置。 - 撮像部で撮像された画像に対して、各領域が複数の画素からなる複数の領域を設定する領域設定部と、
設定された複数の領域のAF(AutoFocus)評価値を算出するAF評価値算出部と、
前記複数の領域のうち、注目被写体以外の被写体が撮像されていると判定される領域である無効領域を設定する無効領域設定部と、
前記複数の領域のうち、前記無効領域以外の領域の前記AF評価値に基づいて、低コントラスト状態を判定する低コントラスト状態判定部と、
前記AF評価値に基づいて、合焦物***置を制御するフォーカス制御部と、
を含み、
前記フォーカス制御部は、
前記低コントラスト状態判定部の判定結果に基づいて、異なるフォーカス制御を行い、
前記フォーカス制御部は、
前記低コントラスト状態判定部で前記低コントラスト状態と判定された場合に、
フォーカスレンズのウォブリング中心位置を維持する制御を実行することを特徴とするフォーカス制御装置。 - 請求項1乃至9のいずれかに記載のフォーカス制御装置を含むことを特徴とする内視鏡装置。
- 領域設定部と、AF評価値算出部と、無効領域設定部と、低コントラスト状態判定部と、フォーカス制御部と、を含むフォーカス制御装置の作動方法であって、
前記領域設定部が、撮像部で撮像された画像に対して、各領域が複数の画素からなる複数の領域を設定し、
前記AF評価値算出部が、設定された複数の領域のAF(AutoFocus)評価値を算出し、
前記無効領域設定部が、前記複数の領域のうち、注目被写体以外の被写体が撮像されていると判定される領域である無効領域を設定し、
前記低コントラスト状態判定部が、前記複数の領域のうち、前記無効領域以外の領域の前記AF評価値に基づいて、低コントラスト状態を判定し、
前記フォーカス制御部が、前記低コントラスト状態の判定結果及び前記AF評価値に基づいて、合焦物***置を制御し、
前記フォーカス制御部が、前記低コントラスト状態判定部で前記低コントラスト状態と判定された場合に、フォーカスレンズを所定の位置に移動するリセット動作を実行し、前記リセット動作の実行後に、前記合焦物***置の制御を実行する、
ことを特徴とするフォーカス制御装置の作動方法。 - 領域設定部と、AF評価値算出部と、無効領域設定部と、低コントラスト状態判定部と、フォーカス制御部と、方向判別部と、を含むフォーカス制御装置の作動方法であって、
前記領域設定部が、撮像部で撮像された画像に対して、各領域が複数の画素からなる複数の領域を設定し、
前記AF評価値算出部が、設定された複数の領域のAF(AutoFocus)評価値を算出し、
前記無効領域設定部が、前記複数の領域のうち、注目被写体以外の被写体が撮像されていると判定される領域である無効領域を設定し、
前記低コントラスト状態判定部が、前記複数の領域のうち、前記無効領域以外の領域の前記AF評価値に基づいて、低コントラスト状態を判定し、
前記フォーカス制御部が、前記低コントラスト状態の判定結果及び前記AF評価値に基づいて、合焦物***置を制御し、
前記方向判別部が、前記複数の領域の一部または全部の領域において、基準位置に対して前記合焦物***置の目標である目標合焦位置がNEARにあるかFARにあるかを判別し、各領域に対して方向判別結果を求める方向判別処理を行い、
前記フォーカス制御部が、前記方向判別結果に基づいて合焦方向を決定し、前記合焦方向に基づいて、前記合焦物***置を制御し、
前記低コントラスト状態判定部が、前記合焦物***置を移動させた場合の前記AF評価値の変動が、所定の閾値よりも小さい場合に、前記低コントラスト状態であると判定し、
前記フォーカス制御部が、前記合焦物***置の移動が前記NEARから前記FAR、又は前記FARから前記NEARへと切り替わる切替回数のカウントが所定の切替閾値を超えたことを条件に、合焦動作を停止し、前記NEARから前記FARへと切り替わる前記合焦物***置の変動、又は前記FARから前記NEARへと切り替わる前記合焦物***置の変動が所定の変動閾値より大きい場合は、前記切替回数のカウントをリセットする、
ことを特徴とするフォーカス制御装置の作動方法。 - 領域設定部と、AF評価値算出部と、無効領域設定部と、低コントラスト状態判定部と、フォーカス制御部と、を含むフォーカス制御装置の作動方法であって、
前記領域設定部が、撮像部で撮像された画像に対して、各領域が複数の画素からなる複数の領域を設定し、
前記AF評価値算出部が、設定された複数の領域のAF(AutoFocus)評価値を算出し、
前記無効領域設定部が、前記複数の領域のうち、注目被写体以外の被写体が撮像されていると判定される領域である無効領域を設定し、
前記低コントラスト状態判定部が、前記複数の領域のうち、前記無効領域以外の領域の前記AF評価値に基づいて、低コントラスト状態を判定し、
前記フォーカス制御部が、前記低コントラスト状態の判定結果及び前記AF評価値に基づいて、合焦物***置を制御し、
前記フォーカス制御部が、前記低コントラスト状態判定部で前記低コントラスト状態と判定された場合に、フォーカスレンズのウォブリング中心位置を維持する制御を実行する、
ことを特徴とするフォーカス制御装置の作動方法。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2016/051139 WO2017122349A1 (ja) | 2016-01-15 | 2016-01-15 | フォーカス制御装置、内視鏡装置及びフォーカス制御装置の作動方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2017122349A1 JPWO2017122349A1 (ja) | 2018-11-22 |
JP6670854B2 true JP6670854B2 (ja) | 2020-03-25 |
Family
ID=59311117
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017561487A Active JP6670854B2 (ja) | 2016-01-15 | 2016-01-15 | フォーカス制御装置、内視鏡装置及びフォーカス制御装置の作動方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US10771676B2 (ja) |
JP (1) | JP6670854B2 (ja) |
WO (1) | WO2017122349A1 (ja) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017122348A1 (ja) | 2016-01-15 | 2017-07-20 | オリンパス株式会社 | フォーカス制御装置、内視鏡装置及びフォーカス制御装置の作動方法 |
WO2018168261A1 (ja) * | 2017-03-16 | 2018-09-20 | ソニー株式会社 | 制御装置、制御方法、及びプログラム |
JP7159577B2 (ja) * | 2018-03-20 | 2022-10-25 | ソニーグループ株式会社 | 内視鏡システム、制御方法、情報処理装置、およびプログラム |
JP7116925B2 (ja) | 2019-03-22 | 2022-08-12 | 株式会社エビデント | 観察装置の作動方法、観察装置、およびプログラム |
JP7281977B2 (ja) * | 2019-06-25 | 2023-05-26 | オリンパス株式会社 | 焦点調節装置および焦点調節方法 |
US11736819B2 (en) * | 2019-09-05 | 2023-08-22 | Panasonic Intellectual Property Management Co., Ltd. | Imaging apparatus and image scaling timing in relation to thinned-out frame |
CN112740649A (zh) * | 2019-12-12 | 2021-04-30 | 深圳市大疆创新科技有限公司 | 拍摄方法、拍摄设备及计算机可读存储介质 |
DE102022109398A1 (de) | 2022-04-19 | 2023-10-19 | Schölly Fiberoptic GmbH | Autofokus-Verfahren und zugehöriges optisches Abbildungssystem |
DE102022109399A1 (de) | 2022-04-19 | 2023-10-19 | Schölly Fiberoptic GmbH | Assistiertes Autofokus-Verfahren und zugehöriges optisches Abbildungssystem |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0961705A (ja) | 1995-06-14 | 1997-03-07 | Sony Corp | オートフォーカス装置 |
KR970705289A (ko) | 1995-06-14 | 1997-09-06 | 이데이 노부유키 | 포커스 제어방법 및 비디오 카메라 장치(Focus control method and video camera apparatus) |
JPH09200508A (ja) | 1996-01-16 | 1997-07-31 | Olympus Optical Co Ltd | 画像処理装置 |
JP2004264827A (ja) | 2003-02-10 | 2004-09-24 | Chinon Ind Inc | 焦点距離検出方法及び合焦装置 |
JP4661269B2 (ja) | 2005-03-01 | 2011-03-30 | カシオ計算機株式会社 | 撮影装置及びプログラム |
JP5219951B2 (ja) | 2009-07-16 | 2013-06-26 | キヤノン株式会社 | 撮像装置及びその制御方法 |
JP4846004B2 (ja) | 2009-08-10 | 2011-12-28 | キヤノン株式会社 | 撮影システムおよびレンズ装置 |
JP5385163B2 (ja) * | 2010-01-06 | 2014-01-08 | オリンパスメディカルシステムズ株式会社 | 内視鏡システム |
JP5576739B2 (ja) * | 2010-08-04 | 2014-08-20 | オリンパス株式会社 | 画像処理装置、画像処理方法、撮像装置及びプログラム |
JP2012103394A (ja) * | 2010-11-09 | 2012-05-31 | Canon Inc | 光学機器およびその制御方法 |
JP5973708B2 (ja) * | 2011-10-21 | 2016-08-23 | オリンパス株式会社 | 撮像装置及び内視鏡装置 |
JP5953049B2 (ja) * | 2012-01-24 | 2016-07-13 | オリンパス株式会社 | 内視鏡システム |
JP5996218B2 (ja) * | 2012-03-07 | 2016-09-21 | オリンパス株式会社 | 内視鏡装置及び内視鏡装置の作動方法 |
JP6103849B2 (ja) | 2012-08-02 | 2017-03-29 | オリンパス株式会社 | 内視鏡装置及び内視鏡装置の作動方法 |
JP6137847B2 (ja) | 2013-01-28 | 2017-05-31 | オリンパス株式会社 | 撮像装置及び撮像装置の制御方法 |
CN105378534B (zh) | 2013-10-04 | 2018-01-02 | 奥林巴斯株式会社 | 摄像装置、摄像装置的工作方法 |
JP6249769B2 (ja) | 2013-12-27 | 2017-12-20 | オリンパス株式会社 | 内視鏡装置、内視鏡装置の作動方法及びプログラム |
WO2017122348A1 (ja) | 2016-01-15 | 2017-07-20 | オリンパス株式会社 | フォーカス制御装置、内視鏡装置及びフォーカス制御装置の作動方法 |
-
2016
- 2016-01-15 JP JP2017561487A patent/JP6670854B2/ja active Active
- 2016-01-15 WO PCT/JP2016/051139 patent/WO2017122349A1/ja active Application Filing
-
2018
- 2018-07-09 US US16/030,165 patent/US10771676B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US10771676B2 (en) | 2020-09-08 |
WO2017122349A1 (ja) | 2017-07-20 |
JPWO2017122349A1 (ja) | 2018-11-22 |
US20180316870A1 (en) | 2018-11-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6670854B2 (ja) | フォーカス制御装置、内視鏡装置及びフォーカス制御装置の作動方法 | |
JP6670853B2 (ja) | フォーカス制御装置、内視鏡装置及びフォーカス制御装置の作動方法 | |
JP5953187B2 (ja) | 合焦制御装置、内視鏡システム及び合焦制御方法 | |
US10517467B2 (en) | Focus control device, endoscope apparatus, and method for controlling focus control device | |
JP6249769B2 (ja) | 内視鏡装置、内視鏡装置の作動方法及びプログラム | |
US10213093B2 (en) | Focus control device, endoscope apparatus, and method for controlling focus control device | |
US20120120305A1 (en) | Imaging apparatus, program, and focus control method | |
US9154745B2 (en) | Endscope apparatus and program | |
EP3015893A1 (en) | Imaging device and method for operating imaging device | |
US10820787B2 (en) | Endoscope device and focus control method for endoscope device | |
US20140307072A1 (en) | Image processing device, image processing method, and information storage device | |
US10617282B2 (en) | Endoscope apparatus and method for focusing based on motion information | |
US11141050B2 (en) | Autofocus control device, endoscope apparatus, and operation method of autofocus control device | |
US10799085B2 (en) | Endoscope apparatus and focus control method | |
WO2013061939A1 (ja) | 内視鏡装置及びフォーカス制御方法 | |
WO2017072860A1 (ja) | 撮像装置、内視鏡装置及び撮像装置の作動方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20181220 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20191029 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191224 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200225 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200302 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6670854 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |