JP4711073B2 - オートフォーカスシステム - Google Patents

オートフォーカスシステム Download PDF

Info

Publication number
JP4711073B2
JP4711073B2 JP2006069864A JP2006069864A JP4711073B2 JP 4711073 B2 JP4711073 B2 JP 4711073B2 JP 2006069864 A JP2006069864 A JP 2006069864A JP 2006069864 A JP2006069864 A JP 2006069864A JP 4711073 B2 JP4711073 B2 JP 4711073B2
Authority
JP
Japan
Prior art keywords
area
camera
range
focus
area information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2006069864A
Other languages
English (en)
Other versions
JP2007248649A (ja
Inventor
正 佐々木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2006069864A priority Critical patent/JP4711073B2/ja
Priority to EP07003931A priority patent/EP1835731A1/en
Priority to US11/713,041 priority patent/US7796879B2/en
Publication of JP2007248649A publication Critical patent/JP2007248649A/ja
Application granted granted Critical
Publication of JP4711073B2 publication Critical patent/JP4711073B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • H04N23/675Focus control based on electronic image sensor signals comprising setting of focusing regions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635Region indicators; Field of view indicators
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • H04N23/673Focus control based on electronic image sensor signals based on contrast or high frequency components of image signals, e.g. hill climbing method
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/28Systems for automatic generation of focusing signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Automatic Focus Adjustment (AREA)
  • Studio Devices (AREA)
  • Focusing (AREA)
  • Viewfinders (AREA)
  • Indication In Cameras, And Counting Of Exposures (AREA)

Description

本発明はオートフォーカスシステムに係り、特にカメラの撮像範囲のうちオートフォーカス(AF)におけるピント合わせの対象範囲とするAFエリアをカメラのビューファインダー等に表示するオートフォーカスシステムに関する。
テレビカメラのように撮影素子(CCD等)により被写体の画像を電気信号(画像信号)に変換する撮像システムでは、オートフォーカス(以下、AFという)の方式のとして一般的にコントラスト方式が採用されている。コントラスト方式は、撮像素子により取り込まれた被写体画像の画像信号(映像信号)から被写体画像のコントラストを検出し、そのコントラストが最も高くなるように撮影レンズのフォーカス(フォーカスレンズ)を制御することによって最良ピント状態に自動でピント合わせを行う方式である。
コントラスト方式のAFでは、カメラの撮像範囲全体をAFにおけるピント合わせの対象範囲とするのではなく、撮像範囲のうちの一部の範囲にある被写体のみを対象とすることが多い。例えば、撮像素子によって有効に撮像された被写体画像の画像信号のうち、AFの対象とする所定範囲の画像信号を抽出し、その抽出した範囲の画像信号に基づいてその画像のコントラストが最も高くなるようにフォーカスを制御している。これによってAFの対象が一部の範囲にある被写体に限定される。尚、本明細書ではAFの対象範囲をAFエリアといい、そのAFエリアの範囲を示す枠(AFエリアの輪郭)をAF枠というものとする。
また、例えば特許文献1のようにAFエリアの位置等を操作者の操作に従って変更可能にすると共に、ビューファインダーの画面上にそのAFエリアの範囲をAF枠等によって表示するものも提案されている。
特開2002−365519号公報
ところで、放送用のテレビカメラシステムは、一般に、撮像素子や所要の信号処理回路を備えたカメラ(カメラヘッド)と、カメラに交換可能に装着されるレンズ装置(交換レンズ)と、カメラから出力される撮影映像等の映像信号を表示するビューファインダー等から構成されている。このようなテレビカメラシステムにおいて、AFによるピント合わせを可能にするためにレンズ装置にAF機能が搭載されたものが知られている。また、それに対応してAFエリアの範囲(位置や大きさ等)を示すAFエリア情報をカメラがレンズ装置から取得し、そのAFエリア情報に基づいて例えばAF枠の画像を撮影映像に合成してビューファインダーに表示させるAFエリア表示機能を備えたものが知られている。
しかしながら、カメラにはAFエリア表示機能を備えていないものがあり、AFエリア表示機能を備えていないカメラを使用する場合には、AFエリアの範囲を変更してしまうとAFエリアが現在撮像範囲のどの位置や大きさに設定されているかをカメラマンが認識することができない。そのため、レンズ装置においてAFエリアの範囲を変更する機能を備えている場合であってもカメラがAFエリア表示機能を備えていない場合には、AFエリアを例えば画面中央の所定の大きさに固定することなどによってAFエリアの範囲の変更を禁止し、現在設定されているAFエリアの範囲が認識不能になる不具合を防止する必要があった。
本発明はこのような事情に鑑みてなされたもので、AFエリア表示機能を備えていないカメラを使用する場合であってもAFエリアの範囲を操作者が認識可能に表示できるようにするオートフォーカスシステムを提供することを目的とする。
前記目的を達成するために、請求項1に記載のオートフォーカスシステムは、カメラに交換可能に装着されるレンズ装置であって、前記カメラの撮像範囲のうち所定のAFエリアの範囲の被写体に合焦するようにフォーカスを制御するオートフォーカス手段を備えたレンズ装置と、該レンズ装置に付属装置として接続され、前記オートフォーカス手段に対して前記AFエリアの範囲を指示するためのAFエリア情報を与えるコントローラと、前記オートフォーカス手段に与えられるAFエリア情報を前記コントローラから取得するAFエリア情報取得手段と、前記AFエリア情報取得手段により取得されたAFエリア情報に基づいて、前記カメラの撮影映像における前記AFエリアの範囲を視認可能に表示するAFエリア表示手段と、を備えたオートフォーカスシステムであって、前記レンズ装置が装着されたカメラが撮影映像におけるAFエリアの範囲を表示するAFエリア表示機能を備えていない場合に、AFエリアの範囲を撮像範囲の中央に固定するAFエリア固定手段を備えたオートフォーカスシステムにおいて、前記レンズ装置が装着されたカメラが前記AFエリア表示機能を備えていない場合であっても、前記AFエリア情報取得手段が前記コントローラに接続されたことを検出すると、前記AFエリア固定手段によるAFエリアの固定を解除する解除手段を備えたことを特徴としている。
請求項2に記載のオートフォーカスシステムは、カメラに交換可能に装着されるレンズ装置であって、前記カメラの撮像範囲のうち所定のAFエリアの範囲の被写体に合焦するようにフォーカスを制御するオートフォーカス手段を備えたレンズ装置と、該レンズ装置に付属装置として接続され、前記オートフォーカス手段に対して前記AFエリアの範囲を指示するためのAFエリア情報を与えるコントローラと、前記オートフォーカス手段に与えられるAFエリア情報を前記コントローラから取得するAFエリア情報取得手段と、前記AFエリア情報取得手段により取得されたAFエリア情報に基づいて、前記カメラの撮影映像における前記AFエリアの範囲を視認可能に表示するAFエリア表示手段と、を備えたオートフォーカスシステムであって、前記レンズ装置が装着されたカメラが撮影映像におけるAFエリアの範囲を表示するAFエリア表示機能を備えていない場合に、AFエリアの位置、大きさ、形状を所定の状態に固定するAFエリア固定手段を備えたオートフォーカスシステムにおいて、前記レンズ装置が装着されたカメラが前記AFエリア表示機能を備えていない場合であっても、前記AFエリア情報取得手段が前記コントローラに接続されたことを検出すると、前記AFエリア固定手段によるAFエリアの固定を解除する解除手段を備えたことを特徴としている。
請求項1、2に係る発明によれば、カメラがAFエリア表示機能を備えていない場合であってもカメラの撮影映像におけるAFエリアの範囲が視認可能に表示されるため、カメラマンは現在設定されているAFエリアの範囲を認識しながらAFエリアの範囲の変更等を行うことができる。また、現在設定されているAFエリアの範囲をコントローラから出力されるAFエリア情報を取得して認識するため、例えば、レンズ装置やカメラからAFエリア情報を取得することができない場合であっても本発明に係るシステムによってAFエリアの範囲を視認可能に表示することができる。
また、請求項1に係る発明は、カメラがAFエリア表示機能を備えていない場合にAFエリアの範囲を撮像範囲の中央に固定する機能を備えている場合であっても、AFエリアの範囲の表示が可能となる場合には、そのAFエリアの固定を自動で解除するようにしている。
また、請求項2に係る発明は、請求項1に係る発明と比べてAFエリア固定機能がAFエリアを撮像範囲の中央に固定する機能と異なり、AFエリアの位置、大きさ、形状を所定の状態に固定する態様を示している。
請求項に記載のオートフォーカスシステムは、請求項1又は2に記載の発明において、前記コントローラは、前記レンズ装置に接続されるコネクタと、前記AFエリア情報取得手段に対してAFエリア情報を与えるためのコネクタとが別々に設けられていることを特徴としている。本発明は、コントローラからAFエリア情報を取得するためのコントローラの構成の一態様を示している。
請求項に記載のオートフォーカスシステムは、請求項1、又は3に記載の発明において、前記AFエリア表示手段は、前記カメラの撮影映像を示す映像信号を前記カメラから取得する映像信号取得手段と、前記AFエリア情報取得手段により取得されたAFエリア情報に基づいて、前記映像信号取得手段により取得された映像信号に対して前記AFエリアの範囲を示すAF枠の画像信号を合成することよって、前記カメラの撮影画像における前記AFエリアの範囲を示す前記AF枠の画像を該撮影画像に合成した合成画像を生成する合成手段と、前記合成手段により生成された合成画像を示す映像信号をモニタに出力する出力手段と、を備えたことを特徴としている。
本発明は、カメラの撮影映像にAFエリアの範囲を視認可能に表示するための一態様を示しており、これによれば、カメラの撮影映像上にAFエリアの範囲を示すAF枠の画像が重畳された合成画像が生成され、その合成画像がモニタに表示される。
請求項に記載のオートフォーカスシステムは、請求項に記載の発明において、前記出力手段が映像信号を出力する前記モニタは、前記カメラの撮影画像を表示するためのビューファインダーであることを特徴としている
請求項に記載のオートフォーカスシステムは、請求項又はに記載の発明において、前記AFエリア情報取得手段、前記映像信号取得手段、前記合成手段及び前記出力手段は、前記レンズ装置、前記カメラ、前記コントローラ及び前記モニタとは別体の1つの装置において備えられ、該装置は、前記カメラから撮影映像の映像信号を取得するために前記カメラに接続されるコネクタと、前記コントローラからAFエリア情報を取得するために前記コントローラに接続されるコネクタと、前記モニタに前記合成画像の映像信号を与えるために前記モニタに接続されるコネクタを備えたことを特徴としている。
本発明によれば、1つの装置において、コントローラからのAFエリア情報の取得、カメラからの撮影映像の映像信号の取得、撮影映像に対してAF枠の画像を合成する処理、合成した画像のモニタへの出力等が行われ、その装置を、コントローラ、カメラ、及び、モニタに接続するだけで容易に本発明に係るシステムを構築することができる。
本発明に係るオートフォーカスシステムによれば、AFエリア表示機能を備えていないカメラを使用する場合であっても、また、カメラやレンズ装置からAFエリア情報を取得することができない場合であってもAFエリアの範囲が認識可能に表示されるようになる。
以下、添付図面に従って本発明に係るオートフォーカスシステムの好ましい実施の形態について詳説する。
図1は、本発明に係るオートフォーカスシステムが組み込まれたテレビカメラシステムの一実施の形態を外観構成図である。同図において、レンズ装置10は、フォーカスレンズ群やズームレンズ群、絞りなどの光学部品を備えた光学系と、光学系を制御する制御系とを備えており、その光学系の光学部品を保持するレンズ鏡胴は、レンズ交換可能なテレビ放送用のカメラ(カメラヘッド)12の光学系に連結されている。
カメラ12にはCCD等の撮像素子や所要の信号処理回路が搭載されている。カメラ12の撮像素子の撮像面にはレンズ装置10の光学系によって被写体像が結像され、その被写体像が撮像素子によって順次光電変換される。そして、信号処理回路によって撮像素子から出力された信号に所要の信号処理が施される。これによって被写体の画像(映像)が撮影されると共にその撮影映像の映像信号が生成される。
カメラ12にはカメラマンが撮影映像の構図確認等に使用するビューファインダー14が取り付けられており、そのビューファインダー14には、例えば、カメラ12で現在撮影されているに撮影映像の映像信号が後述のAF枠スーパーインポーズアダプタ20を介して与えられ、ビューファインダー14の画面にその撮影映像が表示されるようになっている。
レンズ装置10には、レンズアクセサリ接続用のコネクタ10Aとコネクタ10Bが設けられており、コネクタ10Aにはフォーカス&AFエリアデマンド16のコネクタ16Aがケーブルを介して接続され、コネクタ10Bにはズームデマンド18がケーブルを介して接続されている。フォーカス&AFエリアデマンド16では、フォーカスに関する操作やオートフォーカス(AF)機能においてAFの対象範囲とするAFエリアに関する操作が行われ、ズームデマンド18ではズームに関する操作が行われるようになっており、各デマンド16、18からレンズ装置10に各種操作に対応した指令信号等が送信されるようになっている。
また、レンズ装置10とカメラ12の接続部分には、レンズ装置10側にコネクタ10Cが設けられ、カメラ12側にコネクタ12Bが設けられている。これらのコネクタ10C、12Bは、それぞれレンズ装置10の後面とカメラ12の前面の接続部分に配置されており、レンズ装置10のレンズ鏡胴(光学系)がカメラ12側の光学系に連結された状態となるようにレンズ装置10をカメラ12に接続した場合に、これらのコネクタ10C、12Bがケーブル等を経由せずに直結されるようになっている。そして、レンズ装置10とカメラ12との間での必要な情報のやり取りは、これらのコネクタ10C、12Bを通じて行われるようになっている。例えばレンズ装置10は、カメラ12で生成される撮影映像の映像信号に基づいてコントラスト方式のオートフォーカス(AF)により自動でピント合わせを行うAF機能を備えており、そのAF機能において使用される映像信号がカメラ12からレンズ装置10にコネクタ10C、12Bを介して取り込まれるようになっている。また、レンズ装置10における絞りの制御信号等もこれらのコネクタ10C、12Bを通じてカメラ12からレンズ装置10に与えられる。
カメラ12には、ビューファインダー14に現在撮影中の撮影映像を表示させるための映像信号を出力するコネクタ12Aが設けられており、そのコネクタ12Aには、AF枠スーパーインポーズアダプタ20のコネクタ20Aがケーブルを介して接続されている。そして、AF枠スーパーインポーズアダプタ20のコネクタ20Bには、フォーカス&AFエリアデマンド16のコネクタ16Bがケーブルを介して接続され、AF枠スーパーインポーズアダプタ20のコネクタ20Cには、ビューファインダー14がケーブルを介して接続されている。
ここで、本実施の形態のカメラ12は、AFエリアの範囲(例えば、撮像範囲におけるAFエリアの位置、大きさ、形状によって決まる範囲)を示すAFエリア情報を取得してもAFエリアの範囲をビューファインダー14の画面上(撮影映像上)に表示する機能(AFエリア表示機能)を備えていないタイプである。もし、カメラ12が例えばレンズ装置10から得られるAFエリア情報に基づいてビューファインダー14にAFエリアの範囲を表示するAFエリア表示機能を備えている場合には、カメラ12のコネクタ12Aにビューファインダー14を直接ケーブル等で接続してもビューファインダー14にはAFエリアの範囲が表示される。また、ビューファインダー14にAFエリアの範囲を表示させる必要がない場合にもカメラ12のコネクタ12Aにビューファインダー14が直接ケーブルで接続される。
フォーカス&AFエリアデマンド16のコネクタ16Bからはレンズ装置10に対して指示するAFエリアの範囲と同じ範囲を示すAFエリア情報が、レンズ装置10におけるAFの制御において現在設定されているAFエリアの範囲を示す情報として出力されるようになっており、AF枠スーパーインポーズアダプタ20にはそのAFエリア情報が与えられるようになっている。詳細は後述するが、AFスーパーインポーズアダプタ20は、そのAFエリア情報と、カメラ12のコネクタ12Aから取り込んだ映像信号とから、AFエリアの範囲(輪郭)を示すAF枠(AF枠の画像)を撮影映像に重畳(合成)した映像信号を生成する。AFスーパーインポーズアダプタ20のコネクタ20CからはそのAF枠を合成した撮影映像の映像信号が出力されるようになっており、コネクタ20Cに接続されたビューファインダー14にその映像信号が与えられる。これによって、ビューファインダー14にはカメラ12で撮影されている撮影映像と共に撮影映像に重畳して現在設定されているAFエリアの範囲を示すAF枠が表示される。
図2は、上記テレビカメラシステムにおいて主にAF機能に関連する処理ブロックの構成を示したブロック図である。同図において、レンズ装置10の光学系に配置されたフォーカスレンズ群FL、ズームレンズ群ZLにはそれぞれモータFM、ZMやポテンショメータFP、ZPが連結されており、フォーカスレンズ群FL、ズームレンズ群ZLは各モータFM、ZMによって駆動されると共に、各々の設定位置に応じた電圧の位置信号が各ポテンショメータFP、ZPから出力されるようになっている。
レンズ装置10には装置全体を統括的に制御するCPU30が搭載されている。CPU30には、各モータFM、ZMに接続された各アンプFA、ZAがD/A変換器32を介して接続されており、CPU30は、各アンプFA、ZAに与える駆動信号の値によって各モータFM、ZMの回転速度を制御すると共に、各ポテンショメータFP、ZPから出力された位置信号をA/D変換器34を介して取得することによってフォーカスレンズ群FL、ズームレンズ群ZLを所望の位置や動作速度となるように制御することができるようになっている。
レンズ装置10のコネクタ10Aにケーブル及びコネクタ16Aを介して接続されたフォーカス&AFエリアデマンド16は、レンズ装置10のCPU30とシリアルコミュニケーションインターフェース(SCI)36を通じて各種信号のやり取りが行えるようになっている。詳細は後述するが、フォーカスレンズ群FLの制御(フォーカス制御)は、オートフォーカス(AF)とマニュアルフォーカス(MF)とで切り替えられるようになっており、MF時には、フォーカス&AFエリアデマンド16から与えられるフォーカス指令信号に従ってフォーカス制御が行なわれる。即ち、MF時においてCPU30はフォーカス&AFエリアデマンド16から与えられるフォーカス指令信号の値を読み取り、そのフォーカス指令信号の値を例えば目標位置を示す値としてその値に対応する位置にフォーカスレンズ群FLを移動させる。
レンズ装置10のコネクタ10Bにケーブルを介して接続されたズームデマンド18からはズーム指令信号が出力され、そのズーム指令信号は、A/D変換器34を介してCPU30に読み取られるようになっている。 ズームレンズ群ZLの制御(ズーム制御)は、そのズームデマンド18から与えられるズーム指令信号に従って行なわれ、CPU30は、ズームデマンド18から与えられるズーム指令信号の値を例えば目標速度を示す値としてその値に対応する速度でズームレンズ群ZLを移動させる。
尚、レンズ装置10の光学系には図示しない絞りIが配置されており、その絞りの制御は、カメラ12から与えられるアイリス信号に基づいて図示しないモータをCPU30が制御することにより行なわれるようになっている。アイリス信号はカメラ12のコネクタ12Bから出力され、レンズ装置10のコネクタ10Aから入力されるそのアイリス信号をCPU30が読み取るようになっている。
以下においてフォーカス制御に関連する構成、処理について詳説する。上記フォーカス&AFエリアデマンド16は、図3のように構成されている。同図に示すようにフォーカス&AFエリアデマンド16は、各種回路が内蔵された円筒上の本体部60を備え、その本体部60には、フォーカスノブ62が回動可能に設けられている。尚、本体部60のコネクタ16Aは図1のようにレンズ装置10のコネクタ10Aとケーブルで接続されるコネクタであり、コネクタ16Aの横のコネクタ16Bは、AF枠スーパーインポーズアダプタ20のコネクタ20Bとケーブルで接続されるコネクタである。
一方、図2に示すようにフォーカス&AFエリアデマンド16にはCPU70が搭載されており、フォーカスノブ62の回転位置は、図示しないポテンショメータを介してそのCPU70によって読み取られるようになっている。CPU70は、レンズ装置10のCPU30とSCI72及びSCI36を通じて各種信号のやり取りを行うことができるようになっており、フォーカスノブ62の回転位置に対応した値のフォーカス指令信号がCPU70からレンズ装置10のCPU30に送信されるようになっている。上述のようにMF時には、そのフォーカス指令信号に従ってフォーカスレンズ群FLが制御される。
図3においてフォーカス&AFエリアデマンド16の本体部60の周面には、AFスタートスイッチ64が配置されている。AFスタートスイッチ64は、AFの制御を開始させるためのスイッチであり、そのAFスタートスイッチ64のオン/オフ状態が図2に示したフォーカス&エリアデマンド16のCPU70によって読み取られるようになっている。MF時においてAFスタートスイッチ64がオンされると、オンされたことを示す信号がCPU70からレンズ装置10のCPU30に送信され、CPU30によってAFの制御が開始される。一方、AF時において、フォーカスノブ62が回動操作されて、CPU70からレンズ装置10のCPU30に与えられるフォーカス指令信号の値が変化すると、MFの制御に切り替わるようになっている。尚、AFとMFの切り替えは本実施の形態の方法に限らず、例えば、AFモードとMFモードを選択するスイッチによって行えるようにしてもよい。
また、図3においてフォーカス&AFエリアデマンド16の本体部60の周面には、AFエリアに関する操作部材としてジョイスティック66が設けられているが、これについては後述する。
AFの制御時では、図2において、レンズ装置10に搭載された焦点評価値検出部40によって検出されるピント情報(焦点評価値)がCPU30に読み取られ、そのピント情報に基づいてフォーカスレンズ群FLが制御されるようになっている。図1でも示したようにカメラ12のコネクタ12Bからはカメラ12で現在撮影されている映像の映像信号が出力され、その映像信号がレンズ装置10のコネクタ10Cから入力されている。レンズ装置10のコネクタ10Cから入力した映像信号は焦点評価値検出部40に取り込まれる。
焦点評価値検出部40は、A/D変換器42、ハイパスフィルタ(HPF)44、ゲート回路46、加算回路48等から構成されており、焦点評価値検出部40に取り込まれた映像信号は、まず、A/D変換器42によりデジタル信号に変換される。続いて、ハイパスフィルタ(HPF)44によって映像信号から高域周波数成分のみが抽出され後、ゲート回路46に入力される。そして、撮像範囲内に設定されたAFエリアの範囲の信号のみがゲート回路46により抽出される。尚、ゲート回路46における信号抽出範囲(AFエリアの範囲)はCPU30からの指示信号によって設定される。
ゲート回路46により抽出されたAFエリア内の高域周波数成分の信号は、1フィールド分ずつ加算回路48により積算され、その積算値が焦点評価値としてCPU30に与えられる。
このようにして得られる焦点評価値は、カメラ12で撮影されているAFエリア内の映像(被写体画像)のコントラストの高さを評価する値であり、CPU30は、焦点評価値検出部40から得られる焦点評価値が最大(極大)となるようにフォーカスレンズ群FLを制御する。例えば、ワブリングと呼ばれるフォーカスレンズ群FLの微小振動によって焦点評価値が増加する方向を検出してその方向にフォーカスレンズ群FLを移動させ、焦点評価値の増加が検出されなくなる位置でフォーカスレンズ群FLを停止させる。これによって、AFエリア内の被写体画像のコントラストが最大となる位置にフォーカスレンズ群FLが設定され、AFエリア内の被写体に合焦する。
続いて、AFエリアに関して説明する。カメラ12の撮像素子によって有効に撮像される被写体又は被写体画像の範囲を撮像範囲というものとすると、図4に示すように、その撮像範囲(枠80の範囲)に対してAFの対象範囲であるAFエリア82が例えば四角形状のAF枠84の範囲内として設定される。尚、撮像範囲は、カメラ12の撮像素子によって撮像された被写体画像(映像)をビューファインダー14等の画面上に再生表示した場合のその映像の画面範囲に相当する。
撮像範囲におけるAFエリア82の範囲は、例えば、AFエリア82の位置(中心位置)、大きさ、形状を考慮してCPU30によって設定されるが、本実施の形態では、AFエリア82の形状は縦横一定比率の四角形状に固定され、AFエリア82の大きさも一定の大きさに固定されているものとする。一方、AFエリア82の位置は、図3に示したフォーカス&AFエリアデマンド16のジョイスティック66の操作によって操作者が所望の位置に変更できるようになっている。
ジョイスティック66の前後(上下)左右の傾斜角度は図2に示したフォーカス&AFエリアデマンド16のCPU70によって図示しないポテンショメータを介して検出されており、CPU70はそのジョイスティック66の傾斜角度に基づいてジョイスティック66の前後左右への操作方向を検出する。そして、その操作方向に合わせて撮像範囲におけるAFエリア82の位置を現在設定されている位置から変更する。例えば、対向した位置から見てジョイスティック66が左方向に操作された場合、図4の撮像範囲80においてAFエリア82(AF枠84)の位置を左方向に所定量移動させる。同様にジョイスティック66が右方向、前方向、後方向の各方向に操作された場合にはAFエリア82の位置を操作方向と同じく右方向、上方向、下方向の各方向に所定量移動させる。また、例えば、ジョイスティック66がある方向に操作されている時間が一定時間経過するごとに、AFエリア82の位置をその操作方向と同じ方向に所定量ずつ移動させることによってAFエリア82の位置を連続的に変移させるようにしてもよい。また、ジョイスティック66の操作量(傾斜角度)の大きさに応じてAFエリア82の移動速度が大きくなるようにしてもよい。
CPU70はジョイスティック66の操作に従ってAFエリア82の位置を変更した場合には、変更した新たなAFエリア82の位置及び予め決められたAFエリア82の大きさ及び形状を示すAFエリア情報、即ち、AFエリアの範囲を示すAFエリア情報をSCI72を通じてレンズ装置10のSCI36に送信し、レンズ装置10のCPU30にそのAFエリア情報を与える。尚、予め決められたAFエリア82の大きさや形状を示すデータは、レンズ装置10のCPU30が認識しておき、フォーカス&AFエリアデマンド16は、AFエリア82の位置を示すデータのみAFエリア情報としてレンズ装置10に送信するようにしてもよい。
レンズ装置10のCPU30は、AFエリア情報により示されたAFエリアの位置、大きさ、形状に基づいてAFエリアの範囲を設定し、その設定したAFエリアの範囲を信号抽出範囲として指示する指示信号を焦点評価値検出部40のゲート回路46に与える。これによってそのAFエリアの範囲の映像信号がゲート回路46によって抽出され、AFエリアの範囲の被写体画像に対する焦点評価値が焦点評価値検出部40からCPU30に与えられる。
尚、AFエリアの位置以外にAFエリアの大きさや形状を各々に対応した所定の操作部材の操作により変更可能にする場合には、フォーカス&AFエリアデマンド16においてそれらの操作部材の操作に基づいてAFエリアや大きさや形状を変更し、その変更したAFエリアの大きさや形状を示すデータをAFエリア情報としてフォーカス&AFエリアデマンド16からレンズ装置10のCPU30に与えるようにすればよい。
また、フォーカス&AFエリアデマンド16には、レンズ装置10に送信したAFエリア情報と同じAFエリアの範囲を示すAFエリア情報を外部機器に送信するためのコネクタ16Bが設けられている。そして、図1に示したようにこのコネクタ16Bには、AF枠スーパーインポーズアダプタ20のコネクタ20Bがケーブルで接続されている。
上記のようにレンズ装置10において現在設定されているAFエリアの範囲は、このAF枠スーパーインポーズアダプタ20を介してビューファインダー14に表示されるようになっている。AFエリアスーパーインポーズアダプタ20について説明すると、図1でも示したようにAF枠スーパーインポーズアダプタ20のコネクタ20A、20Bはそれぞれ、カメラ12のコネクタ12Aとフォーカス&AFエリアデマンド16のコネクタ16Bにケーブルを介して接続されると共に、AF枠スーパーインポーズアダプタ20のコネクタ20Cはビューファインダー14にケーブルを介して接続されている。
図2に示すようにAF枠スーパーインポーズアダプタ20には、CPU100、SCI102、同期分離回路104、スーパーインポーズ回路106等が搭載されている。CPU100は、SCI102を通じてフォーカス&AFエリアデマンド16のCPU70と各種信号のやり取りを行えるようになっており、これにより、CPU100は、フォーカス&AFエリアデマンド16のCPU70から、レンズ装置10に送信されたAFエリア情報と同一のAFエリアの範囲を示すAFエリア情報を取得する。
一方、カメラ12のコネクタ12Aからは撮影映像の映像信号が出力されており、その映像信号がスーパーインポーズ回路106に入力されると共に、同期分離回路104に入力される。同期分離回路104では、入力した映像信号から垂直同期信号及び水平同期信号が分離され、それらの同期信号がCPU100に取り込まれるようになっている。
CPU100は、フォーカス&AFエリアデマンド16から取得したAFエリア情報に基づいて、そのAFエリア情報が示すAFエリアの範囲に適合する大きさ及び形状のAF枠(AFエリアの輪郭を示す枠)の画像信号を生成する。そして、その画像信号をスーパーインポーズ回路106に出力する。また、CPU100は、同期分離回路104から取得した同期信号に基づいて、スーパーインポーズ回路106に入力した撮影映像の映像信号に対してAFエリア情報によって示されたAFエリアの位置に対応する映像信号上の位置にAF枠の画像信号が重畳(合成)するように、AF枠の画像信号をスーパーインポーズ回路106に出力するタイミングを図る。そして、撮影映像の映像信号のうちAF枠の画像信号によって置換するタイミングにおいて撮影映像の映像信号をAF枠の画像信号で置換することを示す切替信号をスーパーインポーズ回路106に出力する。これにより、スーパーインポーズ回路106において、撮影映像内のAFエリア情報により示されたAFエリアの位置に、AFエリア情報により示されたAFエリアの大きさ及び形状に対応したAF枠の画像が重畳(合成)された撮影映像の映像信号が生成される。尚、本実施の形態ではAFエリアの大きさと形状とは一定の大きさの四角形状としているため、AF枠の画像は一定の大きさの四角形状の枠の画像となる。
このようにしてスーパーインポーズ回路106により生成された映像信号は、ビューファインダー14に出力される。これにより図5に示すようにビューファインダー14の画面上において、現在撮影されている撮影映像110と、現在設定されているAFエリアの範囲を示すAF枠112の画像が重畳して表示される。
以上のようにカメラ12がAFエリア表示機能を備えていない場合であっても、AF枠スーパーインポーズアダプタ20を使用することによって撮影映像にAF枠を重畳させた映像をビューファインダー14に表示させることができる。従って、カメラマンは、その表示を見て現在設定されているAFエリアの範囲を認識することができ、AFエリアを所望の範囲(位置等)に変更することが容易となる。
また、カメラ12がAFエリア表示機能を備えている場合の為に、レンズ装置10のコネクタ10Cとカメラ12のコネクタ12Bによって接続されるラインを通じてAFエリア情報をレンズ装置10からカメラ12に送信できるようにすることが考えられるが、上記実施の形態のようにレンズ装置10のコネクタ10Cとカメラ12のコネクタ12Bが直結されるような場合において、カメラ12にAFエリア表示機能がない場合が考えられる。この場合、レンズ装置10のコネクタ10Cから出力されるAFエリア情報をAF枠スーパーインポーズアダプタ20に取り出すことができない。しかしながら、上記実施の形態のようにAFエリア情報をフォーカス&AFエリアデマンド16から直接取得するようにすると、レンズ装置10のコネクタ10Cとカメラ12のコネクタ12Bが直結されるような場合でもビューファインダー14に撮影映像と共にAFエリアの範囲を表示させることができるという利点がある。
ここで、レンズ装置10又はフォーカス&AFエリアデマンド16において、カメラ12がAFエリア表示機能を備えていないことを検出すると、AFエリアの位置、大きさ、形状を予め決められた状態に固定する機能(AFエリア固定機能)を備えているものがある。例えば、AFエリアの位置が画面中央に所定の大きさ、形状で固定され(又は、AFエリアの位置のみが画面中央に固定され)、AFエリアデマンド16においてAFエリアの位置等を変更する操作を行ってもその操作が無効となる。
レンズ装置10がAFエリア固定機能を備えている場合には、カメラ12がAFエリア表示機能を備えているか否が、例えば、カメラ12との間の情報のやり取りによって自動で検出され、又は、マニュアル操作される所定のスイッチの状態によって検出され、カメラ12がAFエリア表示機能を備えていない場合には、レンズ装置10のCPU30において、フォーカス&AFエリアデマンド16からのAFエリア情報にかかわらずAFエリアの位置等の変更が禁止されAFエリアが所定の状態に固定される。
フォーカス&AFエリアデマンド16がAFエリア固定機能を備えている場合には、カメラ12がAFエリア表示機能を備えているか否かが、例えば、レンズ装置10を介したカメラ12との間の情報のやり取りによって自動で検出され、又は、マニュアル操作される所定のスイッチの状態によって検出され、フォーカス&AFエリアデマンド16のCPU70において、AFエリア操作用の操作部材(ジョイスティック66)の操作にかかわらず一定のAFエリアの位置等を示すAFエリア情報がレンズ装置10に送信され、AFエリアの位置等が固定される。
このような場合において、フォーカス&AFエリアデマンド16のコネクタ16BにAF枠スーパーインポーズアダプタ20が接続されたか否か(コネクタ16BにAFエリア情報を取得する手段が接続されたか否か)を、フォーカス&AFエリアデマンド16を介してレンズ装置10のCPU30が検出し、又は、フォーカス&AFエリアデマンド16のCPU70が検出し、AF枠スーパーインポーズアダプタ20が接続されたことを検出したときには、レンズ装置10又はフォーカス&AFエリアデマンド16におけるAFエリア固定機能を自動で解除するようにしてもよい。
以上、上記実施の形態では、フォーカス&AFエリアデマンド16によってAFエリアの位置のみを変更することができる態様について説明したが、位置以外にAFエリアの範囲を決める要素としてAFエリアの大きさや形状もフォーカス&AFエリアデマンド16での操作によって変更できるようにしてもよい。また、フォーカスに関する操作とAFエリアに関する操作は同一のコントローラ(レンズアクセサリ)ではなく、別体のコントローラによって行えるようにしてもよいし、ズームデマンド18等の他の種類のコントローラに組み込んでもよい。
また、上記実施の形態では、AFエリアの範囲をAF枠によって表示するようにしたが、枠以外の方法によってAFエリアの範囲を表示する態様であってもよい。
また、上記実施の形態では、ビューファインダー14の画面に表示される撮影映像にAF枠を重畳させて表示させるようにしたが、ビューファインダー14の画面の前面に透明の液晶ディスプレイを設置し、その液晶ディスプレイにAF枠を表示させることによって撮影映像にAF枠を重畳させるようにしてもよい。
また、上記実施の形態のAF枠スーパーインポーズアダプタ20は、フォーカス&AFエリアデマンド16のレンズ装置10に接続されるコネクタ16Aと異なるコネクタ16BからAFエリア情報を取得するようにしたが、これに限らない。例えば、レンズ装置10のコネクタ10Aに接続されるフォーカス&AFエリアデマンド16のコネクタ16Aに、信号線を分岐する装置を接続する。そして、その装置によって分岐した一方の信号線をレンズ装置10のコネクタ10Aに接続し、他方をAF枠スーパーインポーズアダプタ20のコネクタ20Bに接続することによって、フォーカス&AFエリアデマンド16Aから出力されたAFエリア情報をAF枠スーパーインポーズアダプタ20で取得できるようにしてもよい。
また、本発明は上記実施の形態のようなコントラスト方式以外の方式のAFであっても適用できる。
図1は、本発明に係るオートフォーカスシステムが組み込まれたテレビカメラシステムの一実施の形態を示した外観構成図である。 図2は、図1のテレビカメラシステムにおいて主にAF機能に関連する処理ブロックの構成を示したブロック図である。 図3は、フォーカス&AFエリアデマンドの外観構成図である。 図4は、AFエリアの説明に使用した説明図である。 図5は、ビューファインダーに表示されるAF枠の画像を示した図である。
符号の説明
10…レンズ装置、12…カメラ、14…ビューファインダー、16…フォーカス&AFエリアデマンド、20…AF枠スーパーインポーズアダプタ、30、70、100…CPU、34…I/Oポート、36、72、74、102…SCI、40…焦点評価値検出部、66…ジョイスティック、82…AFエリア、84、112…AF枠、104…同期分離回路、106…スーパーインポーズ回路、FL…フォーカスレンズ群

Claims (6)

  1. カメラに交換可能に装着されるレンズ装置であって、前記カメラの撮像範囲のうち所定のAFエリアの範囲の被写体に合焦するようにフォーカスを制御するオートフォーカス手段を備えたレンズ装置と、該レンズ装置に付属装置として接続され、前記オートフォーカス手段に対して前記AFエリアの範囲を指示するためのAFエリア情報を与えるコントローラと、前記オートフォーカス手段に与えられるAFエリア情報を前記コントローラから取得するAFエリア情報取得手段と、前記AFエリア情報取得手段により取得されたAFエリア情報に基づいて、前記カメラの撮影映像における前記AFエリアの範囲を視認可能に表示するAFエリア表示手段と、を備えたオートフォーカスシステムであって、前記レンズ装置が装着されたカメラが撮影映像におけるAFエリアの範囲を表示するAFエリア表示機能を備えていない場合に、AFエリアの範囲を撮像範囲の中央に固定するAFエリア固定手段を備えたオートフォーカスシステムにおいて、
    前記レンズ装置が装着されたカメラが前記AFエリア表示機能を備えていない場合であっても、前記AFエリア情報取得手段が前記コントローラに接続されたことを検出すると、前記AFエリア固定手段によるAFエリアの固定を解除する解除手段を備えたことを特徴とするオートフォーカスシステム。
  2. カメラに交換可能に装着されるレンズ装置であって、前記カメラの撮像範囲のうち所定のAFエリアの範囲の被写体に合焦するようにフォーカスを制御するオートフォーカス手段を備えたレンズ装置と、該レンズ装置に付属装置として接続され、前記オートフォーカス手段に対して前記AFエリアの範囲を指示するためのAFエリア情報を与えるコントローラと、前記オートフォーカス手段に与えられるAFエリア情報を前記コントローラから取得するAFエリア情報取得手段と、前記AFエリア情報取得手段により取得されたAFエリア情報に基づいて、前記カメラの撮影映像における前記AFエリアの範囲を視認可能に表示するAFエリア表示手段と、を備えたオートフォーカスシステムであって、前記レンズ装置が装着されたカメラが撮影映像におけるAFエリアの範囲を表示するAFエリア表示機能を備えていない場合に、AFエリアの位置、大きさ、形状を所定の状態に固定するAFエリア固定手段を備えたオートフォーカスシステムにおいて、
    前記レンズ装置が装着されたカメラが前記AFエリア表示機能を備えていない場合であっても、前記AFエリア情報取得手段が前記コントローラに接続されたことを検出すると、前記AFエリア固定手段によるAFエリアの固定を解除する解除手段を備えたことを特徴とするオートフォーカスシステム。
  3. 前記コントローラは、前記レンズ装置に接続されるコネクタと、前記AFエリア情報取得手段に対してAFエリア情報を与えるためのコネクタとが別々に設けられていることを特徴とする請求項1又は2のオートフォーカスシステム。
  4. 前記AFエリア表示手段は、
    前記カメラの撮影映像を示す映像信号を前記カメラから取得する映像信号取得手段と、
    前記AFエリア情報取得手段により取得されたAFエリア情報に基づいて、前記映像信号取得手段により取得された映像信号に対して前記AFエリアの範囲を示すAF枠の画像信号を合成することよって、前記カメラの撮影画像における前記AFエリアの範囲を示す前記AF枠の画像を該撮影画像に合成した合成画像を生成する合成手段と、
    前記合成手段により生成された合成画像を示す映像信号をモニタに出力する出力手段と、
    を備えたことを特徴とする請求項1、又は3のオートフォーカスシステム。
  5. 前記出力手段が映像信号を出力する前記モニタは、前記カメラの撮影画像を表示するためのビューファインダーであることを特徴とする請求項のオートフォーカスシステム。
  6. 前記AFエリア情報取得手段、前記映像信号取得手段、前記合成手段及び前記出力手段は、前記レンズ装置、前記カメラ、前記コントローラ及び前記モニタとは別体の1つの装置において備えられ、該装置は、前記カメラから撮影映像の映像信号を取得するために前記カメラに接続されるコネクタと、前記コントローラからAFエリア情報を取得するために前記コントローラに接続されるコネクタと、前記モニタに前記合成画像の映像信号を与えるために前記モニタに接続されるコネクタを備えたことを特徴とする請求項又はのオートフォーカスシステム。
JP2006069864A 2006-03-14 2006-03-14 オートフォーカスシステム Expired - Fee Related JP4711073B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2006069864A JP4711073B2 (ja) 2006-03-14 2006-03-14 オートフォーカスシステム
EP07003931A EP1835731A1 (en) 2006-03-14 2007-02-26 Autofocus system
US11/713,041 US7796879B2 (en) 2006-03-14 2007-03-02 Autofocus system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006069864A JP4711073B2 (ja) 2006-03-14 2006-03-14 オートフォーカスシステム

Publications (2)

Publication Number Publication Date
JP2007248649A JP2007248649A (ja) 2007-09-27
JP4711073B2 true JP4711073B2 (ja) 2011-06-29

Family

ID=38171356

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006069864A Expired - Fee Related JP4711073B2 (ja) 2006-03-14 2006-03-14 オートフォーカスシステム

Country Status (3)

Country Link
US (1) US7796879B2 (ja)
EP (1) EP1835731A1 (ja)
JP (1) JP4711073B2 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4746110B2 (ja) 2007-02-15 2011-08-10 パナソニック株式会社 撮像装置およびカメラ本体
JP2010101951A (ja) * 2008-10-21 2010-05-06 Ricoh Co Ltd 撮像装置
JP5705883B2 (ja) * 2011-02-07 2015-04-22 富士フイルム株式会社 レンズ装置
US9404871B2 (en) * 2012-01-09 2016-08-02 General Electric Company Method and system for steering an insertion tube of a video inspection device

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09116886A (ja) * 1995-10-20 1997-05-02 Ricoh Co Ltd 画像情報通信装置
JP2005181469A (ja) * 2003-12-17 2005-07-07 Fujinon Corp オートフォーカスシステム
JP2005321621A (ja) * 2004-05-10 2005-11-17 Fujinon Corp オートフォーカスシステム
JP2006049952A (ja) * 2004-07-30 2006-02-16 Fujinon Corp オートフォーカスシステム

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4812912A (en) * 1986-05-26 1989-03-14 Minolta Camera Kabushiki Kaisha Focus detection condition display device for camera
US6812968B1 (en) * 1998-12-31 2004-11-02 Lucent Technologies Inc. Camera with configurable focus area
JP2002365519A (ja) 2001-06-04 2002-12-18 Fuji Photo Optical Co Ltd ピント状態検出装置
US7003223B2 (en) * 2003-02-24 2006-02-21 Fujinon Corporation Lens control system and focus information display apparatus
JP4525089B2 (ja) 2004-01-27 2010-08-18 フジノン株式会社 オートフォーカスシステム
EP1659783A3 (en) * 2004-11-19 2006-05-31 Fujinon Corporation Af-area display apparatus and af-area operation apparatus

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09116886A (ja) * 1995-10-20 1997-05-02 Ricoh Co Ltd 画像情報通信装置
JP2005181469A (ja) * 2003-12-17 2005-07-07 Fujinon Corp オートフォーカスシステム
JP2005321621A (ja) * 2004-05-10 2005-11-17 Fujinon Corp オートフォーカスシステム
JP2006049952A (ja) * 2004-07-30 2006-02-16 Fujinon Corp オートフォーカスシステム

Also Published As

Publication number Publication date
US7796879B2 (en) 2010-09-14
US20070217777A1 (en) 2007-09-20
EP1835731A1 (en) 2007-09-19
JP2007248649A (ja) 2007-09-27

Similar Documents

Publication Publication Date Title
JP5705883B2 (ja) レンズ装置
US20100123782A1 (en) Autofocus system
JP2011133821A (ja) オートフォーカスシステム
US7782385B2 (en) AF-area display apparatus and AF-area operation apparatus
JP5455361B2 (ja) オートフォーカスシステム
JP2008205569A (ja) 撮像装置及び方法
EP2237552B1 (en) Autofocus system
JP4711073B2 (ja) オートフォーカスシステム
JP2005345605A (ja) オートフォーカスシステム
JP2005140943A (ja) フォーカスアシスト装置、ドライブユニット、撮影レンズおよび撮影システム
JP5081133B2 (ja) オートフォーカスシステム
JP5328616B2 (ja) Af枠自動追尾システム
EP2187625B1 (en) Autofocus system
JP2011022499A (ja) オートフォーカスシステム
JP2006195342A (ja) Afエリア操作装置
WO2010131724A1 (ja) デジタルカメラ
JP2006145872A (ja) Afエリア表示装置
JP4834009B2 (ja) テレビカメラシステム
JP2010224499A (ja) オートフォーカスシステム
JP2006084999A (ja) Afエリア操作システム
JP2010164637A (ja) Af枠自動追尾システム
JP2011027846A (ja) Af枠自動追尾システム
JP5457008B2 (ja) Af枠自動追尾機能を備えたオートフォーカスシステム
JP2010122366A (ja) オートフォーカスシステム
JP2010118996A (ja) オートフォーカスシステム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20081125

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20100617

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20101202

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20101206

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110203

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110223

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110308

LAPS Cancellation because of no payment of annual fees