JPH06233164A - Automatic calibration device for camera - Google Patents

Abstract

PURPOSE:To easily and quickly execute the automatic calibration on the lens center by deriving the center of the lens of a video camera from correlation between two reproducing images based on a first and a succeeding photographing output signals. CONSTITUTION:A first and a second zooming photographing output signals of a video camera 11 provided with a zooming function are made DVA signals by a data forming part 17, and thereafter, stored in memory parts 21, 22, respectively. By a control unit 15, the DVAs corresponding to a section area set in the vicinity of the center set by subdividing a screen are read out of the memories 21, 22, and in a data comparing part 25, the section area which has the maximum correlation between both of them is selected, its center position is used as the center of a camera lens and a center instructing signal SC is formed. Subsequently, based on the signal SC, a calibration of the center of the lens is executed, and a prescribed image processing is executed by an image processing part 28 and outputted. In such a way, arrangement of a plane pattern and measurement of a distance become unnecessary, and the calibration of the lens center can be executed easily, quickly and automatically.

Description

【発明の詳細な説明】Detailed Description of the Invention

【０００１】[0001]

【産業上の利用分野】本発明は、ズーミング機能を具え
て車両等に設置され、撮像対象に応じた撮像出力信号を
送出するビデオカメラにおけるレンズ中心についてのキ
ャリブレーションを行う、カメラの自動キャリブレーシ
ョン装置に関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to automatic calibration of a camera equipped with a zooming function, which is installed in a vehicle or the like and calibrates the center of a lens in a video camera which outputs an image pickup output signal according to an image pickup object. Regarding the device.

【０００２】[0002]

【従来の技術】車両に、ビデオカメラを搭載して、それ
による車両の周囲に対しての撮像動作が行われるように
なし、その撮像動作に応じて得られるビデオ信号があら
わす画像についての画像処理を行うことによって、車両
の走行環境を機械的に認識し、その認識結果を走行中の
車両に対する制御等に供することが提案されている。例
えば、特開昭64-44512号公報には、ビデオカメラとビデ
オカメラからの出力信号の処理を行う画像コンピュータ
システムとを含む構成とされて車両に搭載され、画像コ
ンピュータシステムにより車両の走行環境が認識されて
得られるデータに基づいて、車両の駆動系及び操舵系等
に対する制御を行うようにされた走行車両制御装置が記
載されている。また、特開平1-273112号公報には、ビデ
オカメラ（画像入力手段，イメージセンサ）とそのビデ
オカメラからの出力信号の処理を行う画像信号処理手段
とに加えて、音波あるいは超音波を用いる計測機器等と
その計測機器等からの出力信号の処理を行う計測信号処
理手段とを備えて車両に搭載され、ビデオカメラを通じ
ての車両の外界認識（走行環境の認識）が適正に行えな
い虞がある場合には、音波あるいは超音波を用いる計測
機器等を通じての車両の外界認識を行うようにされた装
置が記載されている。2. Description of the Related Art A vehicle is equipped with a video camera so that an image pickup operation is performed on the surroundings of the vehicle, and image processing is performed on an image represented by a video signal obtained according to the image pickup operation. It is proposed to mechanically recognize the traveling environment of the vehicle by performing the above, and use the recognition result for control of the traveling vehicle. For example, Japanese Patent Laid-Open No. 64-44512 discloses a vehicle including a video camera and an image computer system that processes an output signal from the video camera, and is installed in a vehicle. A traveling vehicle control device is described which is configured to control a drive system, a steering system, and the like of a vehicle based on data obtained by recognition. Further, in Japanese Patent Laid-Open No. 1-273112, in addition to a video camera (image input means, image sensor) and an image signal processing means for processing an output signal from the video camera, measurement using sound waves or ultrasonic waves A device equipped with a measurement signal processing means for processing an output signal from the measurement device and the like is mounted on a vehicle, and there is a possibility that the external environment of the vehicle (recognition of the running environment) cannot be properly performed through the video camera. In the case, there is described a device adapted to recognize the external environment of the vehicle through a measuring device or the like that uses sound waves or ultrasonic waves.

【０００３】このようにして、ビデオカメラが用いら
れ、それによる車両の周囲に対しての撮像動作に応じて
得られるビデオ信号があらわす画像に基づいて、車両の
走行環境の認識が行われる場合、ビデオカメラは、必要
に応じて撮像画像の倍率を連続的に変化させることがで
きるものとなるように、その光学系が、適正なフォーカ
ス状態が維持されるもとで、レンズの焦点距離を連続的
に変化させることができるズーミング機能を具えたもの
とされることが多い。また、ビデオカメラの車両に対す
る設置は、その光学系が、例えば、車両の前方に向けら
れて光軸方向が固定されるものとされる。In this way, when the video camera is used and the traveling environment of the vehicle is recognized based on the image represented by the video signal obtained in accordance with the imaging operation of the surroundings of the vehicle by the video camera, A video camera continuously changes the focal length of the lens so that the optical system maintains an appropriate focus state so that the magnification of a captured image can be continuously changed as needed. Often referred to as having a zooming function that can be changed. The video camera is installed in the vehicle such that its optical system is directed toward the front of the vehicle and the optical axis direction is fixed.

【０００４】斯かるビデオカメラは、車両に設置される
ものとされる都合上小型で軽量であることが望まれ、そ
れゆえ、小型軽量化が容易に図られる固体撮像装置を備
えたものとされることが多い。固体撮像装置は、多数の
光電変換素子部が配列配置されて成る受光面形成部を備
え、その受光面形成部に、レンズを含んだ光学系を通じ
て撮像対象からの光が入射せしめられるもの、即ち、光
学系により撮像対象の像が受光面形成部に投影されるも
のとなされる。そして、固体撮像装置による撮像動作が
行われる際には、受光面形成部に配置された多数の光電
変換素子部の夫々において、受光面形成部に入射せしめ
られる撮像対象からの光に応じた電荷の蓄積が行われた
後、各光電変換素子部に蓄積された電荷が所定の方法に
従って取り出されて撮像出力信号が導出され、固体撮像
装置から導出された撮像出力信号は、ビデオカメラに備
えられた撮像出力処理部において、それに基づくビデオ
信号が形成されるものとされる。Such a video camera is desired to be small and light in weight because it is installed in a vehicle, and therefore, is equipped with a solid-state image pickup device which can be easily made small and light. Often. The solid-state imaging device includes a light-receiving surface forming section in which a large number of photoelectric conversion element sections are arranged, and the light-receiving surface forming section receives light from an imaging target through an optical system including a lens, that is, The optical system projects the image of the imaging target onto the light-receiving surface forming unit. When an imaging operation is performed by the solid-state imaging device, in each of the plurality of photoelectric conversion element units arranged in the light-receiving surface forming unit, the charge corresponding to the light from the imaging target incident on the light-receiving surface forming unit is charged. After the charge accumulation is performed, the charge accumulated in each photoelectric conversion element unit is extracted according to a predetermined method to derive the image pickup output signal, and the image pickup output signal derived from the solid-state image pickup device is provided to the video camera. In the image pickup output processing section, a video signal based on it is formed.

【０００５】固体撮像装置を備えたビデオカメラが利用
されて、例えば、車両前方の路面状況の認識が行われる
に際しては、ビデオカメラによる撮像対象として車両前
方の路面を含む車両前方視界が選定される。そして、固
体撮像装置から得られる撮像出力信号に基づいて、車両
前方視界の像をあらわすビデオ信号が形成され、そのビ
デオ信号がビデオカメラからそれに接続された画像処理
部に供給される。画像処理部においては、ビデオカメラ
からのビデオ信号があらわす車両前方視界の像中の路面
に関する画像処理が行われ、それにより得られる出力に
基づいて車両前方の路面状況の認識がなされる。このよ
うな画像処理にあたっては、ビデオカメラから得られる
ビデオ信号に基づいて得られる再生画面画像上における
ビデオカメラのレンズ中心が特定されていることが要求
され、例えば、再生画面画像の中央位置に、ビデオカメ
ラのレンズ中心が位置するように設定される。When a video camera equipped with a solid-state image pickup device is used, for example, when the road surface condition in front of the vehicle is recognized, the front view of the vehicle including the road surface in front of the vehicle is selected as an object to be imaged by the video camera. . Then, based on the image pickup output signal obtained from the solid-state image pickup device, a video signal representing an image of the front view of the vehicle is formed, and the video signal is supplied from the video camera to the image processing section connected thereto. In the image processing unit, image processing is performed on the road surface in the image of the front view of the vehicle represented by the video signal from the video camera, and the road condition in front of the vehicle is recognized based on the output obtained thereby. In such image processing, it is required that the lens center of the video camera on the playback screen image obtained based on the video signal obtained from the video camera is specified, for example, at the center position of the playback screen image, It is set so that the center of the lens of the video camera is located.

【０００６】このようにして、再生画面画像の中央位置
にビデオカメラのレンズ中心が位置せしめられる設定が
なされたもとにあっても、車両に設置されたビデオカメ
ラには、車両の振動が伝達されるので、再生画面画像上
における実際のビデオカメラのレンズ中心が、再生画面
画像の中央位置からの“ずれ”を生じたものとなり、そ
れゆえ、ビデオカメラからのビデオ信号があらわす画像
に関する画像処理が精度良く行われなくなってしまうと
いう不都合が発生する。そこで、適当な時期に、ビデオ
カメラからのビデオ信号に基づいて得られる再生画面画
像上における実際のビデオカメラのレンズ中心を求め
て、ビデオカメラのレンズ中心についてのキャリブレー
ションを行うことが必要とされることになる。In this way, even when the center of the lens of the video camera is set to the center position of the reproduced screen image, the vibration of the vehicle is transmitted to the video camera installed in the vehicle. Therefore, the lens center of the actual video camera on the playback screen image is displaced from the center position of the playback screen image, and therefore the image processing related to the image represented by the video signal from the video camera is accurate. The inconvenience of not being performed well occurs. Therefore, it is necessary to obtain the actual lens center of the video camera on the playback screen image obtained based on the video signal from the video camera and calibrate the lens center of the video camera at an appropriate time. Will be.

【０００７】[0007]

【発明が解決しようとする課題】ビデオカメラからのビ
デオ信号に基づいて得られる再生画面画像上における実
際のビデオカメラのレンズ中心を求めるにあたっては、
従来、例えば、特開昭63-61903号公報にも示されている
如く、ビデオカメラの正面にレンズ中心についてのキャ
リブレーション用の特殊な平面パターンが配されるとと
もに、その特殊な平面パターン上の複数の点が選択さ
れ、それらの選択された複数の点の夫々の特殊な平面パ
ターン上における座標系での座標と、ビデオカメラから
特殊な平面パターンまでの距離とから求められている。
しかしながら、斯かる従来よりの手法に従って、再生画
面画像上における実際のビデオカメラのレンズ中心が求
められる場合には、先ず、ビデオカメラの正面に特殊な
平面パターンがビデオカメラの光学系の光軸に対して所
定の角度をなす状態をもって設置されなければならず、
また、ビデオカメラから特殊な平面パターンまでの距離
が正確に測定されなくてはならない。そのため、従来よ
りの手法に従うのであっては、再生画面画像上における
実際のビデオカメラのレンズ中心を、容易且つ迅速に求
めることは困難とされる。In determining the actual lens center of the video camera on the reproduced screen image obtained based on the video signal from the video camera,
Conventionally, for example, as disclosed in Japanese Patent Laid-Open No. 63-61903, a special plane pattern for calibration about the lens center is arranged in front of the video camera, and A plurality of points are selected, and they are obtained from the coordinates of the selected plurality of points in the coordinate system on the special plane pattern and the distance from the video camera to the special plane pattern.
However, according to such a conventional method, when the actual lens center of the video camera on the playback screen image is required, first, a special plane pattern is formed on the optical axis of the optical system of the video camera in front of the video camera. Must be installed with a certain angle to it,
In addition, the distance from the video camera to the special plane pattern must be measured accurately. Therefore, it is difficult to easily and quickly find the actual lens center of the video camera on the reproduced screen image by following the conventional method.

【０００８】斯かる点に鑑み、本発明は、ビデオカメラ
から撮像対象に応じて得られる撮像出力信号に基づくビ
デオ信号を利用して、ビデオカメラからのビデオ信号に
基づいて得られる再生画面画像上における実際のビデオ
カメラのレンズ中心が、ビデオカメラの正面における特
殊な平面パターンの配置，ビデオカメラから特殊な平面
パターンまでの距離の計測等を要することなく、容易か
つ迅速に求められ、ビデオカメラのレンズ中心について
のキャリブレーションが自動的に行われることになるカ
メラの自動キャリブレーション装置を提供することを目
的とする。In view of the above point, the present invention uses a video signal based on an image pickup output signal obtained from a video camera according to an image pickup target, and displays on a playback screen image obtained based on the video signal from the video camera. The lens center of the actual video camera at is easily and quickly obtained without the need for a special plane pattern arrangement in front of the video camera and the measurement of the distance from the video camera to the special plane pattern. An object of the present invention is to provide an automatic calibration device for a camera in which the center of a lens is automatically calibrated.

【０００９】[0009]

【課題を解決するための手段】上述の目的を達成すべ
く、本発明に係るカメラの自動キャリブレーション装置
は、ズーミング機能を具えたビデオカメラにより、それ
が有する光学系の光軸方向が変化せしめられることな
く、第１のズーミング状態及び第２のズーミング状態の
夫々のもとでの撮像動作が行われて得られる、第１のズ
ーミング状態のもとでの第１の撮像出力信号と第２のズ
ーミング状態のもとでの第２の撮像出力信号とが供給さ
れ、第１の撮像出力信号に基づくビデオ信号をあらわす
第１のビデオ信号データ及び第２の撮像出力信号に基づ
くビデオ信号をあらわす第２のビデオ信号データを得る
ビデオ信号データ形成部と、ビデオ信号データ形成部か
ら得られる第１及び第２のビデオ信号データが夫々個別
に格納される第１及び第２のメモリ部と、第１の撮像出
力信号に基づくビデオ信号があらわす画面画像の中央付
近における第１の区分画像領域が設定されたもとで、第
１のメモリ部から第１のビデオ信号データのうちの区分
画像領域に対応する第１の区分ビデオ信号データが読み
出されるとともに、第２の撮像出力信号に基づくビデオ
信号があらわす画面画像の中央付近における第２の区分
画像領域が設定されたもとで、第２のメモリ部から第２
のビデオ信号データのうちの第２の区分画像領域に対応
する第２の区分ビデオ信号データが読み出される状態を
とるメモリ制御部と、第１の区分ビデオ信号データと第
２の区分ビデオ信号データとにおける相互対応部分間の
相関を算出してその相関が最大となる相互対応部分を求
め、相関が最大となる相互対応部分を、第１及び第２の
撮像出力信号の夫々に基づくビデオ信号があらわす画面
画像におけるビデオカメラのレンズ中心としてあらわす
レンズ中心指示信号を、ビデオカメラのレンズ中心につ
いてのキャリブレーションを行うべく送出するレンズ中
心検出部と、を備えて構成される。In order to achieve the above object, an automatic calibration apparatus for a camera according to the present invention uses a video camera having a zooming function to change the optical axis direction of an optical system of the video camera. The first imaging output signal and the second imaging output signal under the first zooming state obtained by performing the imaging operation under each of the first zooming state and the second zooming state The second image pickup output signal under the zooming state of the first image pickup signal and the first video signal data representing the video signal based on the first image pickup output signal and the video signal based on the second image pickup output signal. A video signal data forming section for obtaining second video signal data, and first and second video signal data forming sections for separately storing the first and second video signal data obtained from the video signal data forming section, respectively. The second memory section and the first segmented image area near the center of the screen image represented by the video signal based on the first image pickup output signal are set. While the first segmented video signal data corresponding to the segmented image region of No. 1 is read out, and the second segmented image region near the center of the screen image represented by the video signal based on the second imaging output signal is set, 2 from the memory section of 2
Of the first segment video signal data and the second segment video signal data, in which the second segment video signal data corresponding to the second segment image area of the second video signal data is read out, , The correlation between the mutually corresponding portions is calculated to obtain the mutually corresponding portion having the maximum correlation, and the mutually corresponding portion having the maximum correlation is represented by the video signal based on each of the first and second imaging output signals. And a lens center detection unit that sends out a lens center instruction signal, which represents the lens center of the video camera in the screen image, in order to calibrate the lens center of the video camera.

【００１０】[0010]

【作用】このように構成される本発明に係るカメラの自
動キャリブレーション装置にあっては、ズーミング機能
を具えたビデオカメラにより、それが有する光学系の光
軸方向が変化せしめられることなく得られる、第１のズ
ーミング状態のもとでの第１の撮像出力信号、及び、第
２のズーミング状態のもとでの第２の撮像出力信号に基
づいて、夫々、第１のビデオ信号データ及び第２のビデ
オ信号データが形成され、第１のメモリ部及び第２のメ
モリ部に夫々別個に格納される。その後、第１の撮像出
力信号に基づくビデオ信号があらわす画面画像の中央付
近における第１の区分画像領域が設定されたもとで、第
１のメモリ部から第１のビデオ信号データのうちの区分
画像領域に対応する第１の区分ビデオ信号データが読み
出され、また、第２の撮像出力信号に基づくビデオ信号
があらわす画面画像の中央付近における第２の区分画像
領域が設定されたもとで、第２のメモリ部から第２のビ
デオ信号データのうちの第２の区分画像領域に対応する
第２の区分ビデオ信号データが読み出される。そして、
第１の区分ビデオ信号データと第２の区分ビデオ信号デ
ータとにおける相互対応部分間の相関を算出してその相
関が最大となる相互対応部分が求められ、それを第１及
び第２の撮像出力信号の夫々に基づくビデオ信号があら
わす画面画像におけるビデオカメラのレンズ中心として
あらわすレンズ中心指示信号が、ビデオカメラのレンズ
中心についてのキャリブレーションを行うべく送出され
る。In the camera automatic calibration device according to the present invention having such a structure, the video camera having the zooming function can be obtained without changing the optical axis direction of the optical system of the video camera. , The first imaging output signal under the first zooming state and the second imaging output signal under the second zooming state, the first video signal data and the first video signal data respectively. Two video signal data are formed and separately stored in the first memory section and the second memory section. After that, under the setting of the first segmented image area near the center of the screen image represented by the video signal based on the first image pickup output signal, the segmented image area of the first video signal data from the first memory unit is set. The first segmented video signal data corresponding to the second segmented image signal data is read out, and the second segmented image region near the center of the screen image represented by the video signal based on the second image pickup output signal is set. The second section video signal data corresponding to the second section image area of the second video signal data is read from the memory section. And
The correlation between the mutually corresponding portions of the first segmented video signal data and the second segmented video signal data is calculated, and the mutually corresponding portion having the maximum correlation is obtained, which is then output to the first and second imaging outputs. A lens center designating signal, which is represented as a lens center of the video camera in a screen image represented by a video signal based on each of the signals, is sent to perform calibration about the lens center of the video camera.

【００１１】このようにされることにより、ビデオカメ
ラからのビデオ信号に基づいて得られる再生画面画像上
における実際のビデオカメラのレンズ中心が、ビデオカ
メラの正面における特殊な平面パターンの配置，ビデオ
カメラから特殊な平面パターンまでの距離の計測等を要
することなく、容易かつ迅速に求められ、ビデオカメラ
のレンズ中心についてのキャリブレーションが自動的に
行われることになる。By doing so, the lens center of the actual video camera on the reproduced screen image obtained based on the video signal from the video camera is arranged in a special plane pattern in front of the video camera. Is required easily and quickly without the need to measure the distance from to the special plane pattern, and the calibration of the center of the lens of the video camera is automatically performed.

【００１２】[0012]

【実施例】図１は、本発明に係るカメラの自動キャリブ
レーション装置の一例を、それが適用されたビデオカメ
ラと共に示し、この例及びビデオカメラは車両に搭載さ
れるものとされている。FIG. 1 shows an example of an automatic camera calibration apparatus according to the present invention together with a video camera to which it is applied. This example and the video camera are supposed to be mounted on a vehicle.

【００１３】図１において、ビデオカメラ１１は、受光
・光電変換面形成部を有し、チャージ・カップルド・デ
ィバイス（ＣＣＤ）による電荷転送が行われるものとさ
れた固体撮像部１２と、その前方に配された、ズーミン
グ機構を有したレンズ・システム，絞り機構，フォーカ
ス調整機構等を含んだ光学系１３とを備えており、従っ
て、ズーミング機能を備えたものとされている。そし
て、このビデオカメラ１１は、車両に、車両前方の路面
を含む車両前方視界を撮像対象とする状態をもって、設
置されたものとされる。光学系１３には、ズーミング機
構を駆動するレンズ駆動部１４が付設されており、ズー
ミング機構がレンズ駆動部１４によって駆動される際に
は、フォーカス調整機構も連動して駆動される。In FIG. 1, a video camera 11 has a light-receiving / photoelectric conversion surface forming portion, and a solid-state image pickup portion 12 which is supposed to perform charge transfer by a charge coupled device (CCD), and the front thereof. And an optical system 13 including a lens system having a zooming mechanism, a diaphragm mechanism, a focus adjusting mechanism, and the like, and is therefore provided with a zooming function. The video camera 11 is assumed to be installed in the vehicle in a state in which the front view of the vehicle including the road surface in front of the vehicle is captured. The optical system 13 is additionally provided with a lens driving unit 14 that drives the zooming mechanism. When the zooming mechanism is driven by the lens driving unit 14, the focus adjustment mechanism is also driven.

【００１４】斯かるビデオカメラ１１にあっては、撮像
対象からの光が光学系１３を通じて固体撮像部１２にお
ける受光・光電変換面形成部に入射せしめられ、受光・
光電変換面形成部上に、撮像対象の像が、光学系１３に
備えられたズーミング機構により設定される像倍率をも
って投影される。固体撮像部１２における受光・光電変
換面形成部においては、光学系１３を通じた入射光に応
答した光電変換が行われて信号電荷が所定の時間だけ蓄
積され、蓄積された信号電荷が、所定の態様をもって行
われるＣＣＤによる電荷転送動作によって、固体撮像部
１２の出力部へと順次転送される。それにより、固体撮
像部１２の出力部に、そこに順次転送されて来る信号電
荷に基づいて、受光・光電変換面形成部上に投影された
撮像対象の像に応じた撮像出力信号が得られるが、本発
明に係るカメラの自動キャリブレーション装置の一例が
作動状態とされる際には、光学系１３に備えられたズー
ミング機構が、レンズ駆動部１４による駆動のもとで、
共通の撮像対象に対して、所定の像倍率を呈する第１の
ズーミング状態とそれとは異なる像倍率を呈する第２の
ズーミング状態とを、光学系１３の光軸方向を変化させ
ることなく順次とるものとされ、それにより、固体撮像
部１２の出力部から、第１のズーミング状態のもとでの
撮像出力信号ＱＡと第２のズーミング状態のもとでの撮
像出力信号ＱＢとが順次送出される。In such a video camera 11, the light from the object to be imaged is incident on the light receiving / photoelectric conversion surface forming section of the solid-state image pickup section 12 through the optical system 13 to receive the light.
An image of an imaging target is projected on the photoelectric conversion surface forming unit with an image magnification set by a zooming mechanism provided in the optical system 13. In the light receiving / photoelectric conversion surface forming unit of the solid-state imaging unit 12, photoelectric conversion is performed in response to the incident light through the optical system 13, signal charges are accumulated for a predetermined time, and the accumulated signal charges are accumulated in a predetermined amount. By the charge transfer operation by the CCD performed in a mode, the charges are sequentially transferred to the output unit of the solid-state imaging unit 12. Thereby, an image pickup output signal corresponding to the image of the image pickup target projected on the light receiving / photoelectric conversion surface forming unit is obtained at the output unit of the solid-state image pickup unit 12 based on the signal charges sequentially transferred thereto. However, when an example of the automatic calibration device for a camera according to the present invention is activated, the zooming mechanism provided in the optical system 13 is driven by the lens driving unit 14,
For a common imaging target, a first zooming state exhibiting a predetermined image magnification and a second zooming state exhibiting an image magnification different from that are sequentially taken without changing the optical axis direction of the optical system 13. Accordingly, the output unit of the solid-state imaging unit 12 sequentially outputs the imaging output signal QA under the first zooming state and the imaging output signal QB under the second zooming state. .

【００１５】光学系１３におけるズーミング機構のレン
ズ駆動部１４による駆動は、本発明に係るカメラの自動
キャリブレーション装置の一例が備える制御ユニット１
５から送出されるズーミング制御信号ＳＺに基づいて行
われ、制御ユニット１５からのズーミング制御信号ＳＺ
が駆動信号形成部１６に供給されて、駆動信号形成部１
６からズーミング制御信号ＳＺに応じた駆動信号ＳＤＬ
が得られ、その駆動信号ＳＤＬがレンズ駆動部１４に供
給されることによって、レンズ駆動部１４がズーミング
機構を駆動する。その際、制御ユニット１５からのズー
ミング制御信号ＳＺが、順次、第１のズーミング状態を
指示するもの及び第２のズーミング状態を指示するもの
とされ、それに応じて、ズーミング機構が、光学系１３
におけるレンズ・システムの焦点距離を順次第１のズー
ミング状態に対応する焦点距離ｆａ及び第２のズーミン
グ状態に対応する焦点距離ｆｂとなすようにされる。The driving of the zooming mechanism of the optical system 13 by the lens driving unit 14 is carried out by the control unit 1 provided in an example of the automatic camera calibration apparatus according to the present invention.
The zooming control signal SZ from the control unit 15 is performed based on the zooming control signal SZ sent from the control unit 15.
Is supplied to the drive signal forming unit 16 to drive the drive signal forming unit 1
6 to drive signal SDL corresponding to zooming control signal SZ
Is obtained, and the drive signal SDL is supplied to the lens drive unit 14, so that the lens drive unit 14 drives the zooming mechanism. At that time, the zooming control signal SZ from the control unit 15 is sequentially set to indicate the first zooming state and the second zooming state, and accordingly, the zooming mechanism causes the optical system 13 to operate.
The focal length of the lens system is sequentially set to the focal length fa corresponding to the first zooming state and the focal length fb corresponding to the second zooming state.

【００１６】固体撮像部１２の出力部から得られる撮像
出力信号ＱＡ及びＱＢは、本発明に係るカメラの自動キ
ャリブレーション装置の一例を形成するビデオ信号デー
タ形成部１７に供給される。ビデオ信号データ形成部１
７は、撮像出力信号ＱＡ及びＱＢが直接に供給されるア
ナログ／ディジタル（Ａ／Ｄ）変換部１８と撮像出力処
理部１９とから成る。Ａ／Ｄ変換部１８においては、撮
像出力信号ＱＡ及びＱＢの夫々についてのアナログ−デ
ィジタル変換が行われて、ディジタル撮像出力信号ＤＱ
Ａ及びＤＱＢが形成される。そして、これらのディジタ
ル撮像出力信号ＤＱＡ及びＤＱＢは撮像出力処理部１９
に供給され、撮像出力処理部１９においては、ディジタ
ル撮像出力信号ＤＱＡに基づいて、例えば、ライン周波
数を略１５．７５Ｈｚとしてフィールド周波数を６０Ｈ
ｚとするビデオ信号に基づくディジタルビデオ信号デー
タＤＶＡが形成され、また、ディジタル撮像出力信号Ｄ
ＱＢに基づいて、例えば、ライン周波数を略１５．７５
Ｈｚとしてフィールド周波数を６０Ｈｚとするビデオ信
号に基づくディジタルビデオ信号データＤＶＢが形成さ
れて、ディジタルビデオ信号データＤＶＡ及びディジタ
ルビデオ信号データＤＶＢが、順次、スイッチ２０の可
動接点２０ａに供給される。The image pickup output signals QA and QB obtained from the output section of the solid-state image pickup section 12 are supplied to a video signal data forming section 17 forming an example of an automatic calibration device for a camera according to the present invention. Video signal data forming unit 1
Reference numeral 7 comprises an analog / digital (A / D) converter 18 to which the image pickup output signals QA and QB are directly supplied, and an image pickup output processor 19. In the A / D converter 18, analog-digital conversion is performed on each of the image pickup output signals QA and QB to generate a digital image pickup output signal DQ.
A and DQB are formed. Then, these digital image pickup output signals DQA and DQB are sent to the image pickup output processing unit 19
In the imaging output processing unit 19, based on the digital imaging output signal DQA, for example, the line frequency is set to about 15.75 Hz and the field frequency is set to 60 H.
Digital video signal data DVA is formed based on the video signal of z, and the digital imaging output signal D
Based on QB, for example, the line frequency is approximately 15.75.
Digital video signal data DVB based on a video signal having a field frequency of 60 Hz is formed, and the digital video signal data DVA and the digital video signal data DVB are sequentially supplied to the movable contact 20a of the switch 20.

【００１７】ディジタルビデオ信号データＤＶＡに対応
するビデオ信号とディジタルビデオ信号データＤＶＢに
対応するビデオ信号とは、ビデオカメラ１１により同一
の撮像対象が、光学系１３の光軸方向が一定に維持され
たもとで、光学系１３におけるレンズ・システムの焦点
距離がｆａとされる第１のズーミング状態、及び、光学
系１３におけるレンズ・システムの焦点距離がｆｂとさ
れる第２のズーミング状態の夫々のもとで撮像されて得
られるものとされることになる。従って、ディジタルビ
デオ信号データＤＶＡに対応するビデオ信号によりあら
わされる画面画像とディジタルビデオ信号データＤＶＢ
に対応するビデオ信号によりあらわされる画面画像と
は、内容を同一とするも倍率を異にするものとなり、夫
々における中央付近に置かれるレンズ中心及びその近傍
における画像は略同一となり、両者についての相関が極
めて大なるものとされる。With respect to the video signal corresponding to the digital video signal data DVA and the video signal corresponding to the digital video signal data DVB, the same image pickup target is kept by the video camera 11 while the optical axis direction of the optical system 13 is kept constant. Under the first zooming state in which the focal length of the lens system in the optical system 13 is fa and in the second zooming state in which the focal length of the lens system in the optical system 13 is fb. Will be obtained by being imaged in. Therefore, the screen image represented by the video signal corresponding to the digital video signal data DVA and the digital video signal data DVB
The screen image represented by the corresponding video signal has the same content but a different magnification, and the image at the lens center placed near each center and in the vicinity thereof are substantially the same, and the correlation between the two Is extremely large.

【００１８】スイッチ２０は、制御ユニット１５からの
スイッチ制御信号ＳＳ１によって制御され、ビデオカメ
ラ１１における固体撮像部１２の出力部から第１のズー
ミング状態のもとで撮像出力信号ＱＡが送出されて、ビ
デオ信号データ形成部１７における撮像出力処理部１９
からディジタルビデオ信号データＤＶＡが得られると
き、可動接点２０ａが選択接点２０ｂに接続され、ま
た、固体撮像部１２の出力部から第２のズーミング状態
のもとで撮像出力信号ＱＢが送出されて、撮像出力処理
部１９からディジタルビデオ信号データＤＶＢが得られ
るとき、可動接点２０ａが選択接点２０ｃに接続され
る。それにより、スイッチ２０の選択接点２０ｂには、
ディジタルビデオ信号データＤＶＡが得られ、また、ス
イッチ２０の選択接点２０ｃには、ディジタルビデオ信
号データＤＶＢが得られる。The switch 20 is controlled by a switch control signal SS1 from the control unit 15, and an image pickup output signal QA is sent from the output section of the solid-state image pickup section 12 of the video camera 11 under the first zooming state, Imaging output processing unit 19 in the video signal data forming unit 17
When the digital video signal data DVA is obtained from, the movable contact 20a is connected to the selection contact 20b, and the output unit of the solid-state imaging unit 12 outputs the imaging output signal QB under the second zooming state, When the digital video signal data DVB is obtained from the imaging output processing unit 19, the movable contact 20a is connected to the selection contact 20c. Thereby, the selection contact 20b of the switch 20 is
Digital video signal data DVA is obtained, and digital video signal data DVB is obtained at the selection contact 20c of the switch 20.

【００１９】スイッチ２０の選択接点２０ｂに得られる
ディジタルビデオ信号データＤＶＡは、ビデオデータメ
モリ部２１に供給される。ビデオデータメモリ部２１に
は、制御ユニット１５からのメモリ書込制御信号ＷＡも
供給され、ビデオデータメモリ部２１に、メモリ書込制
御信号ＷＡに従って、ビデオ信号の１フィールド期間分
あるいは１フレーム期間（連続する２フィールド期間）
分のディジタルビデオ信号データＤＶＡの書込みが行わ
れる。また、スイッチ２０の選択接点２０ｃに得られる
ディジタルビデオ信号データＤＶＢは、ビデオデータメ
モリ部２２に供給される。ビデオデータメモリ部２２に
は、制御ユニット１５からのメモリ書込制御信号ＷＢも
供給され、ビデオデータメモリ部２２に、メモリ書込制
御信号ＷＢに従って、ビデオ信号の１フィールド期間分
あるいは１フレーム期間分のディジタルビデオ信号デー
タＤＶＢの書込みが行われる。The digital video signal data DVA obtained at the selection contact 20b of the switch 20 is supplied to the video data memory section 21. The video data memory unit 21 is also supplied with the memory write control signal WA from the control unit 15, and the video data memory unit 21 is supplied with one field period or one frame period (one frame period) of the video signal according to the memory write control signal WA. (2 consecutive field periods)
The minute digital video signal data DVA is written. The digital video signal data DVB obtained at the selection contact 20c of the switch 20 is supplied to the video data memory unit 22. The video data memory unit 22 is also supplied with the memory write control signal WB from the control unit 15, and the video data memory unit 22 is supplied with one field period or one frame period of the video signal according to the memory write control signal WB. The digital video signal data DVB is written.

【００２０】その後、ビデオデータメモリ部２１に制御
ユニット１５からのメモリ読出制御信号ＲＡが供給さ
れ、ビデオデータメモリ部２１からディジタルビデオ信
号データＤＶＡの一部分がメモリ読出制御信号ＲＡに従
って読み出される。斯かるビデオデータメモリ部２１か
らのディジタルビデオ信号データＤＶＡの一部分の読出
しにあっては、図２に示される如くに、ディジタルビデ
オ信号データＤＶＡに対応するビデオ信号によりあらわ
される画面画像ＰＯＡについてその中央付近における区
分画像領域ＡＡが設定されたもとで、制御ユニット１５
からのメモリ読出制御信号ＲＡによるビデオデータメモ
リ部２１に対するアドレス制御により、ビデオデータメ
モリ部２１に格納されたディジタルビデオ信号データＤ
ＶＡのうちの区分画像領域ＡＡに相当する部分が、区分
ビデオ信号データＤＢＡとして読み出される。Thereafter, the video data memory unit 21 is supplied with the memory read control signal RA from the control unit 15, and a part of the digital video signal data DVA is read from the video data memory unit 21 in accordance with the memory read control signal RA. In reading a part of the digital video signal data DVA from the video data memory unit 21, as shown in FIG. 2, the center of the screen image POA represented by the video signal corresponding to the digital video signal data DVA is displayed. With the divided image area AA in the vicinity set, the control unit 15
Address control for the video data memory unit 21 by the memory read control signal RA from the digital video signal data D stored in the video data memory unit 21.
A portion of VA corresponding to the divided image area AA is read as divided video signal data DBA.

【００２１】また、これとともに、ビデオデータメモリ
部２２に制御ユニット１５からのメモリ読出制御信号Ｒ
Ｂが供給され、ビデオデータメモリ部２２からディジタ
ルビデオ信号データＤＶＢの一部分がメモリ読出制御信
号ＲＢに従って読み出される。斯かるビデオデータメモ
リ部２２からのディジタルビデオ信号データＤＶＢの一
部分の読出しにあっても、図３に示される如くに、ディ
ジタルビデオ信号データＤＶＢに対応するビデオ信号に
よりあらわされる画面画像ＰＯＢについてその中央付近
における区分画像領域ＡＢが設定されたもとで、制御ユ
ニット１５からのメモリ読出制御信号ＲＢによるビデオ
データメモリ部２２に対するアドレス制御により、ビデ
オデータメモリ部２２に格納されたディジタルビデオ信
号データＤＶＢのうちの区分画像領域ＡＢに相当する部
分が、区分ビデオ信号データＤＢＢとして読み出され
る。At the same time, a memory read control signal R from the control unit 15 is sent to the video data memory section 22.
B is supplied, and part of the digital video signal data DVB is read from the video data memory unit 22 according to the memory read control signal RB. Even when reading a part of the digital video signal data DVB from the video data memory unit 22, as shown in FIG. 3, the center of the screen image POB represented by the video signal corresponding to the digital video signal data DVB. With the divided image area AB in the vicinity set, the address control for the video data memory unit 22 by the memory read control signal RB from the control unit 15 causes the digital video signal data DVB of the digital video signal data DVB stored in the video data memory unit 22 to be controlled. A portion corresponding to the divided image area AB is read out as divided video signal data DBB.

【００２２】斯かる際、区分画像領域ＡＡ及び区分画像
領域ＡＢは、各々の面積が、例えば、ディジタルビデオ
信号データＤＶＡに対応するビデオ信号が得られるビデ
オカメラ１１における第１のズーミング状態のもとでの
レンズ・システムの焦点距離ｆａ、及び、ディジタルビ
デオ信号データＤＶＢに対応するビデオ信号が得られる
ビデオカメラ１１における第２のズーミング状態のもと
でのレンズ・システムの焦点距離ｆｂに応じて設定され
るものとなされ、具体的には、区分画像領域ＡＡの面積
に対する区分画像領域ＡＢの面積の比が、焦点距離ｆａ
に対する焦点距離ｆｂの比に等しくなるようにされる。At this time, the divided image area AA and the divided image area AB have the respective areas under the first zooming state in the video camera 11 from which a video signal corresponding to the digital video signal data DVA can be obtained, for example. In accordance with the focal length fa of the lens system in step S1 and the focal length fb of the lens system in the second zooming state in the video camera 11 in which a video signal corresponding to the digital video signal data DVB is obtained. Specifically, the ratio of the area of the segmented image area AB to the area of the segmented image area AA is specifically the focal length fa.
To the focal length fb.

【００２３】ビデオデータメモリ部２１から読み出され
た区分ビデオ信号データＤＢＡは、データ補正部２３に
よる補正が加えられて補正区分ビデオ信号データＤＢ
Ａ’とされた後、レンズ中心検出部２４に供給され、ま
た、ビデオデータメモリ部２２から読み出された区分ビ
デオ信号データＤＢＢは、直接に、レンズ中心検出部２
４に供給される。データ補正部２３は、区分ビデオ信号
データＤＢＡと区分ビデオ信号データＤＢＢとの間のオ
フセットを無くすものであり、区分ビデオ信号データＤ
ＢＡが補正されて得られる補正区分ビデオ信号データＤ
ＢＡ’は、区分ビデオ信号データＤＢＢに対してオフセ
ットを有さないものとされる。The segmented video signal data DBA read from the video data memory unit 21 is corrected by the data compensation unit 23 to be compensated segmented video signal data DB.
The segmented video signal data DBB, which is supplied to the lens center detection unit 24 after being set to A ′ and read from the video data memory unit 22, is directly input to the lens center detection unit 2.
4 is supplied. The data correction unit 23 eliminates an offset between the segmental video signal data DBA and the segmental video signal data DBB.
Correction division video signal data D obtained by correcting BA
BA 'has no offset with respect to the divided video signal data DBB.

【００２４】レンズ中心検出部２４は、補正区分ビデオ
信号データＤＢＡ’と区分ビデオ信号データＤＢＢとが
供給されるデータ比較部２５を含んでおり、データ比較
部２５においては、補正区分ビデオ信号データＤＢＡ’
と区分ビデオ信号データＤＢＢとの相互比較が行われ
る。斯かる比較においては、補正区分ビデオ信号データ
ＤＢＡ’があらわす区分画像領域ＡＡについて、水平方
向（図２における矢印Ｈの方向）及び垂直方向（図２に
おける矢印Ｖの方向）の夫々に均等分布された多数のサ
ンプリング点が設定されるとともに、図４に示される如
く、区分画像領域ＡＡにそれをさらに細分する細分画像
領域ＸＡＡが、その中心位置Ｘａを〔ＩＡ１，ＪＡ１〕
から〔ＩＡｐ，ＪＡｑ〕まで、区分画像領域ＡＡ内にお
いて水平方向及び垂直方向に順次移動させるものとして
設定され、また、区分ビデオ信号データＤＢＢがあらわ
す区分画像領域ＡＢについて、水平方向（図３における
矢印Ｈの方向）及び垂直方向（図３における矢印Ｖの方
向）の夫々に均等分布された多数のサンプリング点が、
補正区分ビデオ信号データＤＢＡ’があらわす区分画像
領域ＡＡにおけるサンプリング点に対応するものとされ
て設定されるとともに、図５に示される如く、区分画像
領域ＡＢにそれをさらに細分する細分画像領域ＸＡＢ
が、その中心位置Ｘｂを〔ＩＢ１，ＪＢ１〕から〔ＩＢ
ｔ，ＪＢｕ〕まで、区分画像領域ＡＢ内において水平方
向及び垂直方向に順次移動させるものとして設定され
る。次に、区分画像領域ＡＡにおける中心位置Ｘａを
〔ＩＡ１，ＪＡ１〕とする細分画像領域ＸＡＡから中心
位置Ｘａを〔ＩＡｐ，ＪＡｑ〕とする細分画像領域ＸＡ
Ａまでと、区分画像領域ＡＢにおける中心位置Ｘｂを
〔ＩＢ１，ＪＢ１〕とする細分画像領域ＸＡＢから中心
位置Ｘｂを〔ＩＢｔ，ＪＢｕ〕とする細分画像領域ＸＡ
Ｂまでとについて、中心位置Ｘａを〔ＩＡ１，ＪＡ１〕
とする細分画像領域ＸＡＡと中心位置Ｘｂを〔ＩＢ１，
ＪＢ１〕とする細分画像領域ＸＡＢ，中心位置Ｘａを
〔ＩＡｐ，ＪＡｑ〕とする細分画像領域ＸＡＡと中心位
置Ｘｂを〔ＩＢｔ，ＪＢｕ〕とする細分画像領域ＸＡ
Ｂ、というように対応するもの同志の組が設定される。The lens center detecting section 24 includes a data comparing section 25 to which the corrected divided video signal data DBA 'and the divided video signal data DBB are supplied. In the data comparing section 25, the corrected divided video signal data DBA is obtained. '
And the segmented video signal data DBB are compared with each other. In this comparison, the divided image area AA represented by the corrected divided video signal data DBA ′ is evenly distributed in the horizontal direction (direction of arrow H in FIG. 2) and the vertical direction (direction of arrow V in FIG. 2). A large number of sampling points are set, and as shown in FIG. 4, the subdivided image area XAA for subdividing the subdivided image area AA has its center position Xa [IA1, JA1].
To [IAp, JAq] are set to sequentially move in the horizontal direction and the vertical direction in the divided image area AA, and the divided image area AB represented by the divided video signal data DBB is set in the horizontal direction (arrow in FIG. 3). A large number of sampling points evenly distributed in each of the H direction) and the vertical direction (direction of arrow V in FIG. 3)
The corrected segmental video signal data DBA 'is set to correspond to the sampling points in the segmented image area AA, and as shown in FIG. 5, the segmented image area XAB is further segmented into segmented image areas AB.
However, the center position Xb is changed from [IB1, JB1] to [IB
t, JBu] are set to be sequentially moved in the horizontal direction and the vertical direction within the divided image area AB. Next, from the subdivided image area XAA whose center position Xa is [IA1, JA1] in the divided image area AA to the subdivided image area XA whose center position Xa is [IAp, JAq].
Up to A, the subdivided image area XA whose center position Xb is [IB1, JB1] in the divided image area AB to the subdivided image area XA whose center position Xb is [IBt, JBu].
For up to B, set the center position Xa to [IA1, JA1]
The subdivided image area XAA and the center position Xb are [IB1,
JB1], a subdivided image area XAB whose center position Xa is [IAp, JAq] and a subdivided image area XA whose center position Xb is [IBt, JBu].
A set of corresponding comrades such as B is set.

【００２５】続いて、設定された細分画像領域ＸＡＡと
細分画像領域ＸＡＢとの組の夫々に関して、細分画像領
域ＸＡＡ内にある各サンプリング点に対応する補正区分
ビデオ信号データＤＢＡ’と、細分画像領域ＸＡＡ内に
あるサンプリング点に対応するものとされた細分画像領
域ＸＡＢ内にある各サンプリング点に対応する区分ビデ
オ信号データＤＢＢとの間の差が求められる。斯かる
際、例えば、中心位置Ｘａを〔ＩＡ１，ＪＡ１〕とする
細分画像領域ＸＡＡとそれに対応する中心位置Ｘｂを
〔ＩＢ１，ＪＢ１〕とする細分画像領域ＸＡＢとの組に
関しては、図４に示される如くの、中心位置Ｘａを〔Ｉ
Ａ１，ＪＡ１〕とする細分画像領域ＸＡＡにおけるサン
プリング点〔ｉａ１，ｊａ１〕からサンプリング点〔ｉ
ａｍ，ｊａｎ〕までと、図５に示される如くの、中心位
置Ｘｂを〔ＩＢ１，ＪＢ１〕とする細分画像領域ＸＡＢ
におけるサンプリング点〔ｉｂ１，ｊｂ１〕からサンプ
リング点〔ｉｂｒ，ｊｂｓ〕までとについて、サンプリ
ング点〔ｉａ１，ｊａ１〕とサンプリング点〔ｉｂ１，
ｊｂ１〕，サンプリング点〔ｉａｍ，ｊａｎ〕とサンプ
リング点〔ｉｂｒ，ｊｂｓ〕、というように対応するも
の同志の組が設定され、設定された組の各々を成す一対
のサンプリング点に夫々対応する補正区分ビデオ信号デ
ータＤＢＡ’と区分ビデオ信号データＤＢＢとの間の輝
度レベル差が算出される。Next, regarding each set of the set subdivided image area XAA and the subdivided image area XAB, the corrected division video signal data DBA 'corresponding to each sampling point in the subdivided image area XAA and the subdivided image area. The difference between the sampling video signal data DBB corresponding to each sampling point in the subdivided image area XAB determined to correspond to the sampling point in XAA is obtained. In this case, for example, a set of the subdivided image area XAA having the center position Xa as [IA1, JA1] and the corresponding subdivided image area XAB having the center position Xb as [IB1, JB1] is shown in FIG. Center position Xa as shown in [I
A1, JA1] and the sampling point [ia1, ja1] to the sampling point [i
am, Jan] and the subdivided image area XAB having the center position Xb as [IB1, JB1] as shown in FIG.
From the sampling point [ib1, jb1] to the sampling point [ibr, jbs] in the above, the sampling point [ia1, ja1] and the sampling point [ib1,
jb1], sampling point [iam, jan] and sampling point [ibr, jbs], etc., corresponding sets of comrades are set, and correction sections corresponding respectively to a pair of sampling points forming each of the set sets. The brightness level difference between the video signal data DBA ′ and the segmented video signal data DBB is calculated.

【００２６】そして、細分画像領域ＸＡＡ内にあるサン
プリング点とそれに対応する細分画像領域ＸＡＢ内にあ
るサンプリング点との組の各々について算出された、一
対のサンプリング点に夫々対応する補正区分ビデオ信号
データＤＢＡ’と区分ビデオ信号データＤＢＢとの間の
輝度レベル差について、夫々の絶対値の総和が求められ
る。斯かる総和は、設定された各組を成す相互に対応す
る細分画像領域ＸＡＡと細分画像領域ＸＡＢとについて
の相関をあらわすものとなり（以下、相関総和とい
う）、その値が小である程、設定された組を成す相互に
対応する細分画像領域ＸＡＡと細分画像領域ＸＡＢとに
ついての相関が大であることを示す。このようにして、
設定された各組を成す相互に対応する細分画像領域ＸＡ
Ａと細分画像領域ＸＡＢとについての相関総和が得られ
るデータ比較部２５からは、相互に対応する細分画像領
域ＸＡＡと細分画像領域ＸＡＢとの組の一つについての
相関総和が求められる毎に、状況伝達信号ＳＤが制御ユ
ニット１５に供給され、制御ユニット１５からは、状況
伝達信号ＳＤが供給される毎に、データ比較部２５にお
いて相互に対応する細分画像領域ＸＡＡと細分画像領域
ＸＡＢとの次の組についての相関総和が求められる状態
とすべく、ビデオデータメモリ部２１に対するそれから
区分ビデオ信号データＤＢＡを読み出すためのメモリ読
出制御信号ＲＡの送出、及び、ビデオデータメモリ部２
２に対するそれから区分ビデオ信号データＤＢＢを読み
出すためのメモリ読出制御信号ＲＢの送出が行われる。Then, the corrected segment video signal data corresponding to each of the pair of sampling points calculated for each set of sampling points in the subdivided image area XAA and corresponding sampling points in the subdivided image area XAB. With respect to the brightness level difference between DBA 'and the segmented video signal data DBB, the sum of the absolute values of each is obtained. Such a total represents a correlation between the subdivided image areas XAA and the subdivided image areas XAB corresponding to each other in each set that has been set (hereinafter, referred to as a total correlation), and the smaller the value, the more the setting. It is shown that there is a large correlation between the subdivided image areas XAA and the subdivided image areas XAB corresponding to each other forming the set. In this way
Corresponding subdivided image areas XA that form each set
Every time the correlation sum for one of the pairs of the subdivided image area XAA and the subdivided image area XAB corresponding to each other is obtained from the data comparison unit 25 that obtains the sum of correlation for A and the subdivided image area XAB, The situation transmission signal SD is supplied to the control unit 15, and every time the situation transmission signal SD is supplied from the control unit 15, the data comparison unit 25 outputs the next subdivided image area XAA and subdivided image area XAB corresponding to each other. Of the memory read control signal RA for reading the divided video signal data DBA from the video data memory unit 21 and the video data memory unit 2 so that the correlation sum for the set
The memory read control signal RB for reading the divided video signal data DBB from the data for 2 is sent.

【００２７】また、データ比較部２５からは、相互に対
応する細分画像領域ＸＡＡと細分画像領域ＸＡＢとの組
の夫々についての相関総和をあらわす相関データＲＣが
送出されて、それが判定部２６に供給される。判定部２
６においては、相関データＲＣがあらわす相互に対応す
る細分画像領域ＸＡＡと細分画像領域ＸＡＢとの組の夫
々についての相関総和のうちの最小値をとるもの、即
ち、相関が最大であるものが選出され、その選出された
最小値をとる相関総和が得られる相互に対応する細分画
像領域ＸＡＡと細分画像領域ＸＡＢとの組が選択される
とともに、選択された細分画像領域ＸＡＡと細分画像領
域ＸＡＢとの組を成す細分画像領域ＸＡＡもしくは細分
画像領域ＸＡＢにおける中心位置ＸａもしくはＸｂを、
ディジタルビデオ信号データＤＶＢに対応するビデオ信
号によりあらわされる画面画像ＰＯＢにおけるビデオカ
メラ１１のレンズ中心としてあらわす中心指示信号ＳＣ
が形成される。Further, the data comparison section 25 sends correlation data RC representing the sum of correlations for each pair of the subdivided image area XAA and the subdivided image area XAB corresponding to each other, and the correlation data RC is sent to the decision section 26. Supplied. Judgment unit 2
In FIG. 6, the one that takes the minimum value of the correlation sums for each pair of the subdivided image area XAA and the subdivided image area XAB corresponding to each other represented by the correlation data RC, that is, the one that has the largest correlation is selected. Then, a pair of subdivided image areas XAA and XAB corresponding to each other from which the correlation sum having the selected minimum value is obtained is selected, and the selected subdivided image area XAA and subdivided image area XAB are selected. The central position Xa or Xb in the subdivided image area XAA or the subdivided image area XAB forming
Center indication signal SC represented as the lens center of the video camera 11 in the screen image POB represented by the video signal corresponding to the digital video signal data DVB
Is formed.

【００２８】判定部２６において得られる中心指示信号
ＳＣは、出力端子２７に送出されるとともに、画像処理
部２８にビデオカメラ１１のレンズ中心についてのキャ
リブレーションを行うべく送出される。画像処理部２８
には、制御ユニット１５からのスイッチ制御信号ＳＳ２
によって制御されるスイッチ２９を通じて、ビデオ信号
データ形成部１７から導出されるディジタルビデオ信号
データＤＶＡもしくはＤＶＢが必要に応じて供給され、
画像処理部２８に供給されたディジタルビデオ信号デー
タＤＶＡもしくはＤＶＢは、判定部２６からの中心指示
信号ＳＣに基づくビデオカメラ１１のレンズ中心につい
てのキャリブレーションが行われるもとで、所定のディ
ジタル画像処理が施されるものとされる。画像処理部２
８からは、ディジタルビデオ信号データＤＶＡもしくは
ＤＶＢに対するディジタル画像処理が施されて得られる
出力データＤＸが、出力端子３０に導出される。The center instruction signal SC obtained in the judging section 26 is sent to the output terminal 27 and is also sent to the image processing section 28 to calibrate the lens center of the video camera 11. Image processing unit 28
To the switch control signal SS2 from the control unit 15.
The digital video signal data DVA or DVB derived from the video signal data forming unit 17 is supplied as necessary through the switch 29 controlled by
The digital video signal data DVA or DVB supplied to the image processing unit 28 is subjected to predetermined digital image processing under the calibration of the lens center of the video camera 11 based on the center instruction signal SC from the determination unit 26. Will be given. Image processing unit 2
From 8, the output data DX obtained by subjecting the digital video signal data DVA or DVB to digital image processing is derived to the output terminal 30.

【００２９】このようにして、データ比較部２５からの
相関データＲＣが判定部２６に供給され、判定部２６に
おいて相関データＲＣに基づく判定が行われることによ
り、ディジタルビデオ信号データＤＶＢに対応するビデ
オ信号によりあらわされる画面画像ＰＯＢにおけるビデ
オカメラ１１のレンズ中心が、容易かつ迅速に求めら
れ、求められた画面画像ＰＯＢにおけるビデオカメラ１
１のレンズ中心をあらわすものとして判定部２６から送
出される中心指示信号ＳＣによって、ビデオカメラ１１
のレンズ中心についてのキャリブレーションが自動的に
行われることになる。In this way, the correlation data RC from the data comparison unit 25 is supplied to the determination unit 26, and the determination unit 26 makes a determination based on the correlation data RC, so that the video corresponding to the digital video signal data DVB is obtained. The lens center of the video camera 11 in the screen image POB represented by the signal is easily and quickly obtained, and the video camera 1 in the obtained screen image POB is obtained.
The center instruction signal SC sent from the determination unit 26 as representing the center of the lens 1 indicates the video camera 11
Calibration of the lens center of will be automatically performed.

【００３０】[0030]

【発明の効果】以上の説明から明らかな如く、本発明に
係るカメラの自動キャリブレーション装置にあっては、
ズーミング機能を具えたビデオカメラにより、それが有
する光学系の光軸方向が変化せしめられることなく得ら
れる、第１のズーミング状態のもとでの第１の撮像出力
信号、及び、第２のズーミング状態のもとでの第２の撮
像出力信号に基づいて、夫々、第１及び第２のビデオ信
号データが形成されて、第１及び第２のメモリ部に夫々
別個に格納され、その後、第１の撮像出力信号に基づく
ビデオ信号があらわす画面画像の中央付近における第１
の区分画像領域が設定されたもとで、第１のメモリ部か
ら第１のビデオ信号データのうちの区分画像領域に対応
する第１の区分ビデオ信号データが読み出され、また、
第２の撮像出力信号に基づくビデオ信号があらわす画面
画像の中央付近における第２の区分画像領域が設定され
たもとで、第２のメモリ部から第２のビデオ信号データ
のうちの第２の区分画像領域に対応する第２の区分ビデ
オ信号データが読み出されて、第１の区分ビデオ信号デ
ータと第２の区分ビデオ信号データとにおける相互対応
部分間の相関が算出されてその相関が最大となる相互対
応部分が求められ、それを、第１及び第２の撮像出力信
号の夫々に基づくビデオ信号があらわす画面画像におけ
るビデオカメラのレンズ中心としてあらわすレンズ中心
指示信号が、ビデオカメラのレンズ中心についてのキャ
リブレーションを行うべく送出される。As is apparent from the above description, in the camera automatic calibration apparatus according to the present invention,
The first imaging output signal and the second zooming under the first zooming state, which is obtained by the video camera having the zooming function without changing the optical axis direction of the optical system of the video camera. First and second video signal data are respectively formed on the basis of the second image pickup output signal under the state, and are separately stored in the first and second memory units, and then, respectively. 1 near the center of the screen image represented by the video signal based on the imaging output signal of No. 1
Under the setting of the divided image area of, the first divided video signal data corresponding to the divided image area of the first video signal data is read from the first memory unit, and
The second divided image of the second video signal data from the second memory unit is set under the setting of the second divided image area near the center of the screen image represented by the video signal based on the second image pickup output signal. The second segmental video signal data corresponding to the area is read out, the correlation between the mutually corresponding portions of the first segmental video signal data and the second segmental video signal data is calculated, and the correlation is maximized. A mutually corresponding portion is obtained, and a lens center indicating signal representing the center portion of the video camera in the screen image represented by the video signal based on each of the first and second imaging output signals is It is sent out for calibration.

【００３１】従って、本発明に係るカメラの自動キャリ
ブレーション装置によれば、ビデオカメラからのビデオ
信号に基づいて得られる再生画面画像上における実際の
ビデオカメラのレンズ中心が、ビデオカメラの正面にお
ける特殊な平面パターンの配置，ビデオカメラから特殊
な平面パターンまでの距離の計測等を要することなく、
容易かつ迅速に求めることができ、その結果、ビデオカ
メラのレンズ中心についてのキャリブレーションを自動
的に行うことができることになる。Therefore, according to the camera automatic calibration device of the present invention, the actual lens center of the video camera on the reproduced screen image obtained based on the video signal from the video camera is a special lens in front of the video camera. Without the need for arranging various flat patterns and measuring the distance from the video camera to the special flat pattern,
It can be determined easily and quickly, and as a result, the center of lens of the video camera can be automatically calibrated.

【図面の簡単な説明】[Brief description of drawings]

【図１】本発明に係るカメラの自動キャリブレーション
装置の一例をそれが適用されたビデオカメラと共に示す
ブロック構成図である。FIG. 1 is a block diagram showing an example of a camera automatic calibration device according to the present invention together with a video camera to which the device is applied.

【図２】図１に示される例についての動作説明に供され
る概念図である。FIG. 2 is a conceptual diagram provided for explaining the operation of the example shown in FIG.

【図３】図１に示される例についての動作説明に供され
る概念図である。FIG. 3 is a conceptual diagram provided for explaining the operation of the example shown in FIG.

【図４】図１に示される例についての動作説明に供され
る概念図である。FIG. 4 is a conceptual diagram for explaining the operation of the example shown in FIG.

【図５】図１に示される例についての動作説明に供され
る概念図である。FIG. 5 is a conceptual diagram provided for explaining the operation of the example shown in FIG.

【符号の説明】[Explanation of symbols]

１１ ビデオカメラ １２ 固体撮像部 １３ 光学系 １４ レンズ駆動部 １５ 制御ユニット １７ ビデオ信号データ形成部 １８ Ａ／Ｄ変換部 １９ 撮像出力処理部 ２１，２２ ビデオデータメモリ部 ２３ データ補正部 ２４ レンズ中心検出部 ２５ データ比較部 ２６ 判定部 ２８ 画像処理部 11 video camera 12 solid-state imaging unit 13 optical system 14 lens driving unit 15 control unit 17 video signal data forming unit 18 A / D conversion unit 19 imaging output processing unit 21, 22 video data memory unit 23 data correction unit 24 lens center detection unit 25 data comparison unit 26 determination unit 28 image processing unit

Claims (3)

【特許請求の範囲】[Claims] 【請求項１】ズーミング機能を具えたビデオカメラによ
り、該ビデオカメラが有する光学系の光軸方向が変化せ
しめられることなく、第１のズーミング状態及び第２の
ズーミング状態の夫々のもとでの撮像動作が行われて得
られる、上記第１のズーミング状態のもとでの第１の撮
像出力信号と上記第２のズーミング状態のもとでの第２
の撮像出力信号とが供給され、上記第１の撮像出力信号
に基づくビデオ信号をあらわす第１のビデオ信号データ
及び上記第２の撮像出力信号に基づくビデオ信号をあら
わす第２のビデオ信号データを得るビデオ信号データ形
成部と、 該ビデオ信号データ形成部から得られる上記第１及び第
２のビデオ信号データが夫々個別に格納される第１及び
第２のメモリ部と、 上記第１の撮像出力信号に基づくビデオ信号があらわす
画面画像の中央付近における第１の区分画像領域が設定
されたもとで、上記第１のメモリ部から上記第１のビデ
オ信号データのうちの上記区分画像領域に対応する第１
の区分ビデオ信号データが読み出されるとともに、上記
第２の撮像出力信号に基づくビデオ信号があらわす画面
画像の中央付近における第２の区分画像領域が設定され
たもとで、上記第２のメモリ部から上記第２のビデオ信
号データのうちの上記第２の区分画像領域に対応する第
２の区分ビデオ信号データが読み出される状態をとるメ
モリ制御部と、 上記第１の区分ビデオ信号データと上記第２の区分ビデ
オ信号データとにおける相互対応部分間の相関を算出し
て該相関が最大となる上記相互対応部分を求め、該相関
が最大となる上記相互対応部分を、上記第１及び第２の
撮像出力信号の夫々に基づくビデオ信号があらわす画面
画像における上記ビデオカメラのレンズ中心としてあら
わすレンズ中心指示信号を、上記ビデオカメラのレンズ
中心についてのキャリブレーションを行うべく送出する
レンズ中心検出部と、 を備えて構成されるカメラの自動キャリブレーション装
置。1. A video camera having a zooming function is used in a first zooming state and a second zooming state without changing the optical axis direction of an optical system of the video camera. A first imaging output signal under the first zooming state and a second image under the second zooming state obtained by performing an imaging operation.
Image pickup output signal is supplied to obtain first video signal data representing a video signal based on the first image pickup output signal and second video signal data representing a video signal based on the second image pickup output signal. A video signal data forming unit, first and second memory units individually storing the first and second video signal data obtained from the video signal data forming unit, and the first imaging output signal The first divided image area in the vicinity of the center of the screen image represented by the video signal based on is set, and the first divided image area corresponding to the divided image area of the first video signal data from the first memory unit is set.
And the second segmented image area in the vicinity of the center of the screen image represented by the video signal based on the second image pickup output signal is set and the second segmented video signal data is read from the second memory section. A memory control unit in a state in which the second segment video signal data corresponding to the second segment image area of the second segment video signal data is read out; the first segment video signal data and the second segment The correlation between the mutually corresponding portions with the video signal data is calculated to obtain the mutually corresponding portion having the largest correlation, and the mutually corresponding portion having the largest correlation is used as the first and second imaging output signals. In the lens of the video camera, the lens center indicating signal, which is represented as the lens center of the video camera in the screen image represented by the video signal based on An automatic camera calibration device that is equipped with a lens center detector that sends out to perform calibration for the mind. 【請求項２】第１の区分画像領域と第２の区分画像領域
との比が、ビデオカメラが第１のズーミング状態にある
もとでのレンズの焦点距離と上記ビデオカメラが第２の
ズーミング状態にあるもとでの上記レンズの焦点距離と
の比に応じたものとされたことを特徴とする請求項１記
載のカメラの自動キャリブレーション装置。2. The ratio of the first segmented image area to the second segmented image area is the focal length of the lens when the video camera is in the first zooming state and the video camera is in the second zooming state. The automatic calibration device for a camera according to claim 1, wherein the automatic calibration device is adapted to a ratio with a focal length of the lens under a state. 【請求項３】レンズ中心検出部が、第１の区分ビデオ信
号データと第２の区分ビデオ信号データとにおける各相
互対応部分間の輝度レベル差の絶対値の総和を算出し、
算出された総和の最小値を検出して、該最小値が得られ
ることになる上記第１の区分ビデオ信号データと上記第
２の区分ビデオ信号データとにおける相互対応部分を、
第１及び第２の撮像出力信号の夫々に基づくビデオ信号
があらわす画面画像におけるビデオカメラのレンズ中心
としてあらわすレンズ中心指示信号を形成することを特
徴とする請求項１又は２記載のカメラの自動キャリブレ
ーション装置。3. A lens center detector calculates a sum of absolute values of brightness level differences between mutually corresponding portions in the first segment video signal data and the second segment video signal data,
Detecting the minimum value of the calculated total sums, the mutual corresponding portions in the first segmental video signal data and the second segmental video signal data, which will obtain the minimum value,
3. The automatic camera calibration according to claim 1, wherein a lens center instruction signal represented as a lens center of the video camera in a screen image represented by a video signal based on each of the first and second imaging output signals is formed. Device.