JPH06290256A - 画像追尾装置 - Google Patents
画像追尾装置Info
- Publication number
- JPH06290256A JPH06290256A JP5073945A JP7394593A JPH06290256A JP H06290256 A JPH06290256 A JP H06290256A JP 5073945 A JP5073945 A JP 5073945A JP 7394593 A JP7394593 A JP 7394593A JP H06290256 A JPH06290256 A JP H06290256A
- Authority
- JP
- Japan
- Prior art keywords
- image
- image signal
- field
- window
- tracking
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S3/00—Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received
- G01S3/78—Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received using electromagnetic waves other than radio waves
- G01S3/782—Systems for determining direction or deviation from predetermined direction
- G01S3/785—Systems for determining direction or deviation from predetermined direction using adjustment of orientation of directivity characteristics of a detector or detector system to give a desired condition of signal derived from that detector or detector system
- G01S3/786—Systems for determining direction or deviation from predetermined direction using adjustment of orientation of directivity characteristics of a detector or detector system to give a desired condition of signal derived from that detector or detector system the desired condition being maintained automatically
- G01S3/7864—T.V. type tracking systems
- G01S3/7865—T.V. type tracking systems using correlation of the live video image with a stored image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/255—Detecting or recognising potential candidate objects based on visual cues, e.g. shapes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/08—Detecting or categorising vehicles
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
- H04N23/635—Region indicators; Field of view indicators
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Electromagnetism (AREA)
- Signal Processing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
- Closed-Circuit Television Systems (AREA)
- Navigation (AREA)
- Traffic Control Systems (AREA)
Abstract
(57)【要約】
【目的】 追尾対象車の設定を一度行えば、追尾ウィン
ドウがずれることなく追尾することができ、もって安全
運転が図れる画像追尾装置を得る。 【構成】 画像用メモリ5に取り込まれる画像信号を一
つのフレームを構成する第1フィールドと第2フィール
ドの画像信号とし、これら第1フィールドの画像信号と
第2フィールドの画像信号を比較することにより画像信
号に一時的な外乱が入ったことを検出する外乱検出装置
11を備えた。
ドウがずれることなく追尾することができ、もって安全
運転が図れる画像追尾装置を得る。 【構成】 画像用メモリ5に取り込まれる画像信号を一
つのフレームを構成する第1フィールドと第2フィール
ドの画像信号とし、これら第1フィールドの画像信号と
第2フィールドの画像信号を比較することにより画像信
号に一時的な外乱が入ったことを検出する外乱検出装置
11を備えた。
Description
【0001】
【産業上の利用分野】この発明は、例えば自動車に搭載
される画像追尾装置に係り、特に追尾ウィンドウのずれ
を防止し得るビデオカメラを用いた画像追尾装置に関す
るものである。
される画像追尾装置に係り、特に追尾ウィンドウのずれ
を防止し得るビデオカメラを用いた画像追尾装置に関す
るものである。
【0002】
【従来の技術】従来より、ビデオカメラに使用されるイ
メージセンサを用いた画像追尾装置は、例えば特開平3
−197805号に開示されている。図9はその一例で
ある画像追尾装置を示すブロック図である。図9におい
て、1は追尾対象車、2はレンズ、3はレンズ2の後方
における焦点距離fの位置に設けられたイメージセン
サ、4はイメージセンサ3に接続されたA/D変換器、
5はA/D変換器4に接続された画像用メモリ、6はメ
モリ5に接続された基準画像用メモリ、7はこれらメモ
リ5、6に接続されたコンピュータ(CPU)、8はC
PU7に接続されるとともに、イメージセンサ3に接続
された表示画面、9はCPU7に接続された追尾ウィン
ドウ設定手段としてのスイッチである。
メージセンサを用いた画像追尾装置は、例えば特開平3
−197805号に開示されている。図9はその一例で
ある画像追尾装置を示すブロック図である。図9におい
て、1は追尾対象車、2はレンズ、3はレンズ2の後方
における焦点距離fの位置に設けられたイメージセン
サ、4はイメージセンサ3に接続されたA/D変換器、
5はA/D変換器4に接続された画像用メモリ、6はメ
モリ5に接続された基準画像用メモリ、7はこれらメモ
リ5、6に接続されたコンピュータ(CPU)、8はC
PU7に接続されるとともに、イメージセンサ3に接続
された表示画面、9はCPU7に接続された追尾ウィン
ドウ設定手段としてのスイッチである。
【0003】以上の構成において、レンズ2とイメージ
センサ3はビデオカメラ10における光学系を構成して
いる。レンズ2の前面からRの距離にある追尾対象車1
の像は、レンズ2によってイメージセンサ3上に結像さ
れる。イメージセンサ3より得られる画像信号は、A/
D変換器4によりデジタル信号に変換され、画像用メモ
リ5に格納される。追尾ウィンドウの設定は、運転者が
予めスイッチ9で追尾対象となる画像を選ぶものとす
る。
センサ3はビデオカメラ10における光学系を構成して
いる。レンズ2の前面からRの距離にある追尾対象車1
の像は、レンズ2によってイメージセンサ3上に結像さ
れる。イメージセンサ3より得られる画像信号は、A/
D変換器4によりデジタル信号に変換され、画像用メモ
リ5に格納される。追尾ウィンドウの設定は、運転者が
予めスイッチ9で追尾対象となる画像を選ぶものとす
る。
【0004】例えば、ある時刻t0に格納された画像用
メモリ5の画像信号に追尾ウィンドウを設定してなる画
像信号を基準画像用メモリ6に格納し、その画像信号に
おける追尾ウィンドウ内の画像信号を基準画像信号とす
ると、次の時刻t1に更新された画像用メモリ5の画像
の中より基準画像信号と最も相関性の良い画像を探し出
して新ウィンドウを設定する。これにより、追尾ウィン
ドウを自動的に更新することができる。
メモリ5の画像信号に追尾ウィンドウを設定してなる画
像信号を基準画像用メモリ6に格納し、その画像信号に
おける追尾ウィンドウ内の画像信号を基準画像信号とす
ると、次の時刻t1に更新された画像用メモリ5の画像
の中より基準画像信号と最も相関性の良い画像を探し出
して新ウィンドウを設定する。これにより、追尾ウィン
ドウを自動的に更新することができる。
【0005】
【発明が解決しようとする課題】しかしながら、従来の
イメージセンサを用いた画像追尾装置では、ワイパーや
車体の振動等による一時的な外乱が画像信号に入ること
がある為、画像のコントラストが悪くなり、基準画像信
号との相関性が損なわれることがあった。そのため、追
尾ウィンドウがずれる傾向があり、しばしばドライバー
が運転中に表示画面8を見ながら追尾対象車1をスイッ
チ9などで再度設定する必要があり、安全運転を妨げる
という問題点があった。
イメージセンサを用いた画像追尾装置では、ワイパーや
車体の振動等による一時的な外乱が画像信号に入ること
がある為、画像のコントラストが悪くなり、基準画像信
号との相関性が損なわれることがあった。そのため、追
尾ウィンドウがずれる傾向があり、しばしばドライバー
が運転中に表示画面8を見ながら追尾対象車1をスイッ
チ9などで再度設定する必要があり、安全運転を妨げる
という問題点があった。
【0006】この発明は、上記のような問題点を解決す
る為になされたもので、追尾対象車の設定を一度行え
ば、追尾ウィンドウがずれることなく追尾することがで
き、もって安全運転が図れる画像追尾装置を得ることを
目的としている。
る為になされたもので、追尾対象車の設定を一度行え
ば、追尾ウィンドウがずれることなく追尾することがで
き、もって安全運転が図れる画像追尾装置を得ることを
目的としている。
【0007】
【課題を解決するための手段】この発明の請求項1に係
る画像追尾装置は、撮像された画像を画像信号として出
力するビデオカメラと、このビデオカメラにより出力さ
れる画像信号を記憶する画像用メモリと、この画像用メ
モリに記憶された画像信号に対して追尾ウィンドウを設
定する追尾ウィンドウ設定手段と、この追尾ウィンドウ
設定手段によって上記追尾ウィンドウが設定された画像
を基準画像信号として記憶する基準画像用メモリと、こ
の基準画像用メモリに記憶された基準画像信号と所定時
間後に上記ビデオカメラによって得られた画像信号を比
較処理することにより追尾ウィンドウを更新するウィン
ドウ更新手段とを有する画像追尾装置に、上記画像用メ
モリに取り込まれる上記画像信号を一つのフレームを構
成する第1フィールドと第2フィールドの画像信号と
し、これら第1フィールドの画像信号と第2フィールド
の画像信号を比較することにより上記画像信号に一時的
な外乱が入ったことを検出する外乱検出手段を備えたも
のである。
る画像追尾装置は、撮像された画像を画像信号として出
力するビデオカメラと、このビデオカメラにより出力さ
れる画像信号を記憶する画像用メモリと、この画像用メ
モリに記憶された画像信号に対して追尾ウィンドウを設
定する追尾ウィンドウ設定手段と、この追尾ウィンドウ
設定手段によって上記追尾ウィンドウが設定された画像
を基準画像信号として記憶する基準画像用メモリと、こ
の基準画像用メモリに記憶された基準画像信号と所定時
間後に上記ビデオカメラによって得られた画像信号を比
較処理することにより追尾ウィンドウを更新するウィン
ドウ更新手段とを有する画像追尾装置に、上記画像用メ
モリに取り込まれる上記画像信号を一つのフレームを構
成する第1フィールドと第2フィールドの画像信号と
し、これら第1フィールドの画像信号と第2フィールド
の画像信号を比較することにより上記画像信号に一時的
な外乱が入ったことを検出する外乱検出手段を備えたも
のである。
【0008】また、この発明の請求項2に係る画像追尾
装置は、上記請求項1の画像追尾装置において、上記ウ
ィンドウ更新手段は、一時的な外乱が検出されると、外
乱の入っていない正常な画像が入力されるまでウィンド
ウの更新を行わない機能と、所定の時間を超えてもウィ
ンドウの更新を行わない場合は画像追尾を中断する機能
とを備えたものである。
装置は、上記請求項1の画像追尾装置において、上記ウ
ィンドウ更新手段は、一時的な外乱が検出されると、外
乱の入っていない正常な画像が入力されるまでウィンド
ウの更新を行わない機能と、所定の時間を超えてもウィ
ンドウの更新を行わない場合は画像追尾を中断する機能
とを備えたものである。
【0009】また、この発明の請求項3に係る画像追尾
装置は、撮像された画像を画像信号として出力するビデ
オカメラと、このビデオカメラにより出力される画像信
号を記憶する画像用メモリと、この画像用メモリに記憶
された画像信号に対して追尾ウィンドウを設定する追尾
ウィンドウ設定手段と、この追尾ウィンドウ設定手段に
よって追尾ウィンドウが設定された画像を基準画像信号
として記憶する基準画像用メモリと、この基準画像用メ
モリに記憶された基準画像信号と所定時間後に上記ビデ
オカメラによって得られた画像信号を比較処理すること
により追尾ウィンドウを更新するウィンドウ更新手段と
を有する画像追尾装置に、上記画像用メモリに取り込ま
れる上記画像信号を一つのフレームを構成する第1フィ
ールドと第2フィールドの画像信号とし、これら第1フ
ィールドの画像信号と第2フィールドの画像信号を比較
することにより上記画像信号に一時的な外乱が入ったこ
とを検出する外乱検出手段と、この外乱検出手段により
上記画像信号に一時的な外乱が検出されると、上記画像
信号の第1フィールドの画像信号と第2フィールドの画
像信号を、それぞれ上記基準画像信号とされた画像信号
の第1フィールドの画像信号と第2フィールドの画像信
号と比較することにより、上記外乱の影響の少ないフィ
ールドの画像信号を検出するフィールド検出手段とを備
え、上記ウィンドウ更新手段には、上記フィールド検出
手段により検出された外乱の影響の少ないフィールドの
画像信号を用いて追尾ウィンドウを更新する機能を備え
たものである。
装置は、撮像された画像を画像信号として出力するビデ
オカメラと、このビデオカメラにより出力される画像信
号を記憶する画像用メモリと、この画像用メモリに記憶
された画像信号に対して追尾ウィンドウを設定する追尾
ウィンドウ設定手段と、この追尾ウィンドウ設定手段に
よって追尾ウィンドウが設定された画像を基準画像信号
として記憶する基準画像用メモリと、この基準画像用メ
モリに記憶された基準画像信号と所定時間後に上記ビデ
オカメラによって得られた画像信号を比較処理すること
により追尾ウィンドウを更新するウィンドウ更新手段と
を有する画像追尾装置に、上記画像用メモリに取り込ま
れる上記画像信号を一つのフレームを構成する第1フィ
ールドと第2フィールドの画像信号とし、これら第1フ
ィールドの画像信号と第2フィールドの画像信号を比較
することにより上記画像信号に一時的な外乱が入ったこ
とを検出する外乱検出手段と、この外乱検出手段により
上記画像信号に一時的な外乱が検出されると、上記画像
信号の第1フィールドの画像信号と第2フィールドの画
像信号を、それぞれ上記基準画像信号とされた画像信号
の第1フィールドの画像信号と第2フィールドの画像信
号と比較することにより、上記外乱の影響の少ないフィ
ールドの画像信号を検出するフィールド検出手段とを備
え、上記ウィンドウ更新手段には、上記フィールド検出
手段により検出された外乱の影響の少ないフィールドの
画像信号を用いて追尾ウィンドウを更新する機能を備え
たものである。
【0010】さらに、この発明の請求項4に係る画像追
尾装置は、撮像された画像を画像信号として出力するビ
デオカメラと、このビデオカメラにより出力される画像
信号を記憶する画像用メモリと、この画像用メモリに記
憶された画像信号に対して追尾ウィンドウを設定する追
尾ウィンドウ設定手段と、この追尾ウィンドウ設定手段
によって上記追尾ウィンドウが設定された画像を基準画
像信号として記憶する基準画像用メモリと、この基準画
像用メモリに記憶された基準画像信号と所定時間後に上
記ビデオカメラによって得られた画像信号を比較処理す
ることにより追尾ウィンドウを更新するウィンドウ更新
手段とを有する画像追尾装置に、上記画像用メモリに取
り込まれる上記画像信号を一つのフレームを構成する第
1フィールドと第2フィールドの画像信号とし、これら
第1フィールドの画像信号と第2フィールドの画像信号
を比較することにより上記画像信号に一時的な外乱が入
ったことを検出する外乱検出手段と、この外乱検出手段
により上記画像信号に一時的な外乱が検出されると、上
記画像信号の第1フィールドの画像信号と第2フィール
ドの画像信号を、それぞれ上記基準画像信号とされた画
像信号の第1フィールドの画像信号と第2フィールドの
画像信号と比較することにより、上記外乱の影響の少な
いフィールドの画像信号を検出するフィールド検出手段
と、このフィールド検出手段により検出された上記外乱
の影響の少ないフィールドの画像信号により、他のフィ
ールドの画像信号を補間により求める補間手段とを備
え、上記ウィンドウ更新手段は、上記補間手段により得
られた上記他のフィールドの画像信号と上記外乱の影響
の少ないフィールドの画像信号とを合成した画像信号に
よって上記追尾ウィンドウを更新する機能を備えたもの
である。
尾装置は、撮像された画像を画像信号として出力するビ
デオカメラと、このビデオカメラにより出力される画像
信号を記憶する画像用メモリと、この画像用メモリに記
憶された画像信号に対して追尾ウィンドウを設定する追
尾ウィンドウ設定手段と、この追尾ウィンドウ設定手段
によって上記追尾ウィンドウが設定された画像を基準画
像信号として記憶する基準画像用メモリと、この基準画
像用メモリに記憶された基準画像信号と所定時間後に上
記ビデオカメラによって得られた画像信号を比較処理す
ることにより追尾ウィンドウを更新するウィンドウ更新
手段とを有する画像追尾装置に、上記画像用メモリに取
り込まれる上記画像信号を一つのフレームを構成する第
1フィールドと第2フィールドの画像信号とし、これら
第1フィールドの画像信号と第2フィールドの画像信号
を比較することにより上記画像信号に一時的な外乱が入
ったことを検出する外乱検出手段と、この外乱検出手段
により上記画像信号に一時的な外乱が検出されると、上
記画像信号の第1フィールドの画像信号と第2フィール
ドの画像信号を、それぞれ上記基準画像信号とされた画
像信号の第1フィールドの画像信号と第2フィールドの
画像信号と比較することにより、上記外乱の影響の少な
いフィールドの画像信号を検出するフィールド検出手段
と、このフィールド検出手段により検出された上記外乱
の影響の少ないフィールドの画像信号により、他のフィ
ールドの画像信号を補間により求める補間手段とを備
え、上記ウィンドウ更新手段は、上記補間手段により得
られた上記他のフィールドの画像信号と上記外乱の影響
の少ないフィールドの画像信号とを合成した画像信号に
よって上記追尾ウィンドウを更新する機能を備えたもの
である。
【0011】
【作用】この発明の請求項1に係る画像追尾装置によれ
ば、第1フィールドの画像信号と、第2フィールドの画
像信号を比較することにより取り込んだ画像信号に一時
的な外乱が入ったことが検出できる。
ば、第1フィールドの画像信号と、第2フィールドの画
像信号を比較することにより取り込んだ画像信号に一時
的な外乱が入ったことが検出できる。
【0012】また、この発明の請求項2に係る画像追尾
装置によれば、一時的な外乱が入った場合はウィンドウ
の更新が行われず、またかかる時間が所定時間以上とな
ったときは追尾動作が中止される。
装置によれば、一時的な外乱が入った場合はウィンドウ
の更新が行われず、またかかる時間が所定時間以上とな
ったときは追尾動作が中止される。
【0013】また、この発明の請求項3に係る画像追尾
装置によれば、一時的な外乱の影響の少ないフィールド
の画像信号を用いて追尾ウィンドウの更新を行うことが
できる。
装置によれば、一時的な外乱の影響の少ないフィールド
の画像信号を用いて追尾ウィンドウの更新を行うことが
できる。
【0014】更に、この発明の請求項4に係る画像追尾
装置によれば、一時的な外乱が入っているフィールドの
画像信号に代えて、外乱の影響の少ないフィールドの画
像信号と、この外乱の影響の少ないフィールドの画像信
号から補間によって得られる画像信号との合成画像の画
像信号を用いて追尾ウィンドウの更新を行うので情報量
を大幅に損なう事なく画像追尾を行うことができる。
装置によれば、一時的な外乱が入っているフィールドの
画像信号に代えて、外乱の影響の少ないフィールドの画
像信号と、この外乱の影響の少ないフィールドの画像信
号から補間によって得られる画像信号との合成画像の画
像信号を用いて追尾ウィンドウの更新を行うので情報量
を大幅に損なう事なく画像追尾を行うことができる。
【0015】
実施例1.以下、この発明の実施例1を図について説明
する。図1は実施例1の構成を示すブロック図である。
図1において、1〜10は図9に示したものと同じであ
る。11は画像用メモリ5に接続された外乱検出手段を
構成する外乱検出装置であり、この外乱検出装置11は
その出力側がCPU7に接続されている。12は画像用
メモリ5及び基準画像用メモリ6に接続され、補間手段
を構成する補間処理装置である。
する。図1は実施例1の構成を示すブロック図である。
図1において、1〜10は図9に示したものと同じであ
る。11は画像用メモリ5に接続された外乱検出手段を
構成する外乱検出装置であり、この外乱検出装置11は
その出力側がCPU7に接続されている。12は画像用
メモリ5及び基準画像用メモリ6に接続され、補間手段
を構成する補間処理装置である。
【0016】以下に実施例1の動作を図2〜図8を用い
て説明する。図2と図3は共にビデオカメラ10で撮像
された1フレームにおける走行中の画像の一例であり、
図2は追尾対象車1Aにウィンドウ22が更新された前
回の画像を示し、図3は今回取り込まれた画像において
外乱が入った一例としてワイパー23がかかった場合の
画像を示している。1フレームにおける第1フィールド
と第2フィールドの画像信号の比較を行うサーチ範囲2
1にはウィンドウ22が含まれている。図4は、図2に
示された1フレームにおける画像のサーチ範囲内の画像
をフィールド毎に分解して示した図であり、(a)に第
1フィールドの画像を示し、(b)に第2フィールドの
画像を示している。図5は、図3に示された1フレーム
における画像のサーチ範囲内の画像をフィールド毎に分
解して示した図であり、(c)に第1フィールドの画像
を示し、(d)に第2フィールドの画像を示している。
図6は、図2のサーチ範囲内の画像を画素単位で表した
もので、Aij,Bijはそれぞれ第1、第2フィール
ド画像の1画素のA/D変換値である。図7は、図3の
サーチ範囲内の画像を画素単位で表したもので、Ci
j,Dijはそれぞれ第1、第2フィールド画像の1画
素のA/D変換値である。図8は実施例1の処理手順を
示すフローチャートである。
て説明する。図2と図3は共にビデオカメラ10で撮像
された1フレームにおける走行中の画像の一例であり、
図2は追尾対象車1Aにウィンドウ22が更新された前
回の画像を示し、図3は今回取り込まれた画像において
外乱が入った一例としてワイパー23がかかった場合の
画像を示している。1フレームにおける第1フィールド
と第2フィールドの画像信号の比較を行うサーチ範囲2
1にはウィンドウ22が含まれている。図4は、図2に
示された1フレームにおける画像のサーチ範囲内の画像
をフィールド毎に分解して示した図であり、(a)に第
1フィールドの画像を示し、(b)に第2フィールドの
画像を示している。図5は、図3に示された1フレーム
における画像のサーチ範囲内の画像をフィールド毎に分
解して示した図であり、(c)に第1フィールドの画像
を示し、(d)に第2フィールドの画像を示している。
図6は、図2のサーチ範囲内の画像を画素単位で表した
もので、Aij,Bijはそれぞれ第1、第2フィール
ド画像の1画素のA/D変換値である。図7は、図3の
サーチ範囲内の画像を画素単位で表したもので、Ci
j,Dijはそれぞれ第1、第2フィールド画像の1画
素のA/D変換値である。図8は実施例1の処理手順を
示すフローチャートである。
【0017】以下、実施例1の画像追尾処理手順を図8
のフローチャートを用いて説明する。まず、ステップS
30において、画像信号の取り込みを行う。この時取り
込まれた今回の画像信号は上述したように画像として図
3に示され、前回に取り込まれた画像信号は同様に画像
として図2に示されている。
のフローチャートを用いて説明する。まず、ステップS
30において、画像信号の取り込みを行う。この時取り
込まれた今回の画像信号は上述したように画像として図
3に示され、前回に取り込まれた画像信号は同様に画像
として図2に示されている。
【0018】ステップS31では、ステップS30で取
り込まれ、図3に示される画像のサーチ範囲21内の画
像に外乱が入っていないかを判断するために、図5
(c)、(d)に示される図3のサーチ範囲21内の画
像の第1フィールドの画像と第2フィールドの画像の相
関性を表す比較演算値Eを求める比較演算を行う。比較
演算値Eは第1,第2フィールドの画像を形成する画像
信号の差の総和であり、図7の記号を用いて式(1)によ
り求められる。
り込まれ、図3に示される画像のサーチ範囲21内の画
像に外乱が入っていないかを判断するために、図5
(c)、(d)に示される図3のサーチ範囲21内の画
像の第1フィールドの画像と第2フィールドの画像の相
関性を表す比較演算値Eを求める比較演算を行う。比較
演算値Eは第1,第2フィールドの画像を形成する画像
信号の差の総和であり、図7の記号を用いて式(1)によ
り求められる。
【0019】 E=ΣiΣj│Cij−Dij│ ・・・・・(1)
【0020】ステップS32において、比較演算値Eが
予め定められている所定値E1より大きい場合は、サー
チ範囲21内の第1フィールドの画像と第2フィールド
の画像には相関性はないと判断され、一方比較演算値E
が予め定められている所定値E1より大きくないときは
相関性があると判断される。従って、正常な外乱のない
画像では第1フィールドの画像と第2フィールドの画像
には相関性があることより、比較演算値が所定値E1よ
り小さい場合は、これら画像には一時的な外乱がないと
判断され、一方、比較演算値が所定値E1より小さくな
い場合はこれら画像には一時的な外乱が入ったと判断す
る。即ち、CPU7、及びステップS31、ステップS
32を実行するプログラムは外乱検出装置11とともに
請求項における外乱検出手段を構成している。
予め定められている所定値E1より大きい場合は、サー
チ範囲21内の第1フィールドの画像と第2フィールド
の画像には相関性はないと判断され、一方比較演算値E
が予め定められている所定値E1より大きくないときは
相関性があると判断される。従って、正常な外乱のない
画像では第1フィールドの画像と第2フィールドの画像
には相関性があることより、比較演算値が所定値E1よ
り小さい場合は、これら画像には一時的な外乱がないと
判断され、一方、比較演算値が所定値E1より小さくな
い場合はこれら画像には一時的な外乱が入ったと判断す
る。即ち、CPU7、及びステップS31、ステップS
32を実行するプログラムは外乱検出装置11とともに
請求項における外乱検出手段を構成している。
【0021】一時的な外乱が入ったと判断されるとステ
ップS33において、図2に示される前時刻の画像サー
チ範囲21内の画像を基準画像として、図4(a)に示
される基準画像の第1フィールドの画像と図5(c)に
示される外乱の入った画像の第1フィールドの画像の相
関性を表す比較演算値Fを求める比較演算を行う。比較
演算値Fは、基準画像と今回のサーチ範囲内の画像のそ
れぞれの第1フィールドの画像の画像信号の差の総和で
あり、図7、図8の記号を用いて式(2)により求められ
る。
ップS33において、図2に示される前時刻の画像サー
チ範囲21内の画像を基準画像として、図4(a)に示
される基準画像の第1フィールドの画像と図5(c)に
示される外乱の入った画像の第1フィールドの画像の相
関性を表す比較演算値Fを求める比較演算を行う。比較
演算値Fは、基準画像と今回のサーチ範囲内の画像のそ
れぞれの第1フィールドの画像の画像信号の差の総和で
あり、図7、図8の記号を用いて式(2)により求められ
る。
【0022】 F=ΣiΣj│Aij−Cij│ ・・・・・(2)
【0023】また、図4(b)に示される基準画像の第
2フィールドの画像と図5(d)に示された外乱の入っ
た画像の第2フィールドの画像においても同様の比較を
行い、図7、図8の記号を用いて式(3)より比較演算値
Gを求める。
2フィールドの画像と図5(d)に示された外乱の入っ
た画像の第2フィールドの画像においても同様の比較を
行い、図7、図8の記号を用いて式(3)より比較演算値
Gを求める。
【0024】 G=ΣiΣj│Bij−Dij│ ・・・・・(3)
【0025】ステップS34において、一般に比較が行
われたフィールド画像間に相関性があるほど比較演算値
は小さくなることから、比較演算値F,Gのうち値が小
さい方の比較に用いたフィールド画像の方が一時的な外
乱による影響が少ないと判断する。即ち、CPU7、及
びステップS33、ステップS34を実行するプログラ
ムは請求項3、及び請求項4におけるフィールド検出手
段を構成している。
われたフィールド画像間に相関性があるほど比較演算値
は小さくなることから、比較演算値F,Gのうち値が小
さい方の比較に用いたフィールド画像の方が一時的な外
乱による影響が少ないと判断する。即ち、CPU7、及
びステップS33、ステップS34を実行するプログラ
ムは請求項3、及び請求項4におけるフィールド検出手
段を構成している。
【0026】ステップS35では、上述したフィールド
検出手段より検出された外乱による影響が少ないフィー
ルドの画像を用いて補間処理を行う。実施例1では、こ
の補間処理の手法は限定しておらず、仕様に応じて決定
すれば良い。図7を用いて、第1フィールドの画像信号
を第2フィールドの画像信号へ補間する手法の一例とし
ては、式(4)の様に単に置き換えるだけのものでも良い
し、式(5)の様に平均フィルタを用いてもよい。
検出手段より検出された外乱による影響が少ないフィー
ルドの画像を用いて補間処理を行う。実施例1では、こ
の補間処理の手法は限定しておらず、仕様に応じて決定
すれば良い。図7を用いて、第1フィールドの画像信号
を第2フィールドの画像信号へ補間する手法の一例とし
ては、式(4)の様に単に置き換えるだけのものでも良い
し、式(5)の様に平均フィルタを用いてもよい。
【0027】 Dij=Cij または Ci+1,j ・・・・・(4) Dij=(Ci.j+Ci+1.j)/2 ・・・・(5)
【0028】即ち、CPU7、及びステップS35を実
行するプログラムは補間処理装置12とともに請求項4
における補間手段を構成している。
行するプログラムは補間処理装置12とともに請求項4
における補間手段を構成している。
【0029】ステップS36では、一時的な外乱が検出
された場合は上述した手順により補間されたフィールド
の画像信号を用いて、外乱の影響の少ない正常なフィー
ルドの画像信号との合成画像を作り、この合成画像の画
像信号を用い、また、一時的な外乱が検出されなかった
場合は画像用メモリ5に書き込まれた画像信号をそのま
ま用いて、従来例で説明したようにウィンドウの更新を
行う。即ち、CPU7、及びステップS36を実行する
プログラムは請求項3または請求項4においてウィンド
ウ更新手段に備えられた機能を構成している。
された場合は上述した手順により補間されたフィールド
の画像信号を用いて、外乱の影響の少ない正常なフィー
ルドの画像信号との合成画像を作り、この合成画像の画
像信号を用い、また、一時的な外乱が検出されなかった
場合は画像用メモリ5に書き込まれた画像信号をそのま
ま用いて、従来例で説明したようにウィンドウの更新を
行う。即ち、CPU7、及びステップS36を実行する
プログラムは請求項3または請求項4においてウィンド
ウ更新手段に備えられた機能を構成している。
【0030】実施例2.上記実施例1では、一時的な外
乱が入った場合に、外乱の影響が少ないフィールドの画
像信号を用いてウィンドウを更新することにより、追尾
機能の信頼性の向上をはかっているが、実施例2とし
て、ウィンドウの更新を行うために取り込んだ画像信号
に一時的な外乱が入った場合は、その画像信号を用いて
のウィンドウの更新は行わず、前回更新されたウィンド
ウと同じ位置にウィンドウを設定することにより、一時
的な外乱が入ると外乱の入っていない正常な画像信号が
入力されるまでウィンドウの更新を中止するようにし、
その機能を従来技術で説明したウィンドウ更新手段に備
えさせる。また、取り込まれている画像信号は時々刻々
と変化している為、長時間ウィンドウの更新を中止した
場合は全く別の画像信号に変わっている恐れがあるた
め、ウィンドウの更新を中止している時間が予め定めて
いる時間を超えると追尾機能を中断するようにし、その
機能をウィンドウ更新手段に備えさせる。その結果、一
時的な外乱の影響をうけてウィンドウがずれてしまうこ
とがなくなるので、実施例1と同様の動作が期待出来
る。
乱が入った場合に、外乱の影響が少ないフィールドの画
像信号を用いてウィンドウを更新することにより、追尾
機能の信頼性の向上をはかっているが、実施例2とし
て、ウィンドウの更新を行うために取り込んだ画像信号
に一時的な外乱が入った場合は、その画像信号を用いて
のウィンドウの更新は行わず、前回更新されたウィンド
ウと同じ位置にウィンドウを設定することにより、一時
的な外乱が入ると外乱の入っていない正常な画像信号が
入力されるまでウィンドウの更新を中止するようにし、
その機能を従来技術で説明したウィンドウ更新手段に備
えさせる。また、取り込まれている画像信号は時々刻々
と変化している為、長時間ウィンドウの更新を中止した
場合は全く別の画像信号に変わっている恐れがあるた
め、ウィンドウの更新を中止している時間が予め定めて
いる時間を超えると追尾機能を中断するようにし、その
機能をウィンドウ更新手段に備えさせる。その結果、一
時的な外乱の影響をうけてウィンドウがずれてしまうこ
とがなくなるので、実施例1と同様の動作が期待出来
る。
【0031】なお、以上の実施例ではウィンドウの設定
は運転者がスイッチ9の操作を行うとしているが、応用
されるシステムに応じて自由に決定すれば良い。例えば
特開平3−45898のような車両抽出フィルタを用い
てもよいし、1986年の情報処理学会誌第127巻に
開示されているように車両の左右対称性に着目して決定
してもよい。
は運転者がスイッチ9の操作を行うとしているが、応用
されるシステムに応じて自由に決定すれば良い。例えば
特開平3−45898のような車両抽出フィルタを用い
てもよいし、1986年の情報処理学会誌第127巻に
開示されているように車両の左右対称性に着目して決定
してもよい。
【0032】
【発明の効果】この発明の請求項1に係る画像追尾装置
によれば、撮像された画像を画像信号として出力するビ
デオカメラと、このビデオカメラにより出力される画像
信号を記憶する画像用メモリと、この画像用メモリに記
憶された画像信号に対して追尾ウィンドウを設定する追
尾ウィンドウ設定手段と、この追尾ウィンドウ設定手段
によって上記追尾ウィンドウが設定された画像を基準画
像信号として記憶する基準画像用メモリと、この基準画
像用メモリに記憶された基準画像信号と所定時間後に上
記ビデオカメラによって得られた画像信号を比較処理す
ることにより追尾ウィンドウを更新するウィンドウ更新
手段とを有する画像追尾装置に、上記画像用メモリに取
り込まれる上記画像信号を一つのフレームを構成する第
1フィールドと第2フィールドの画像信号とし、これら
第1フィールドの画像信号と第2フィールドの画像信号
を比較することにより上記画像信号に一時的な外乱が入
ったことを検出する外乱検出手段を備えたため、取り込
んだ画像に一時的な外乱が入ったことが検出出来、例え
ば、この一時的な外乱の影響を除いて追尾ウィンドウの
更新を行うことが出来、もって追尾ウィンドウがずれる
ことがなく、安全運転を図ることができるという効果を
奏する。
によれば、撮像された画像を画像信号として出力するビ
デオカメラと、このビデオカメラにより出力される画像
信号を記憶する画像用メモリと、この画像用メモリに記
憶された画像信号に対して追尾ウィンドウを設定する追
尾ウィンドウ設定手段と、この追尾ウィンドウ設定手段
によって上記追尾ウィンドウが設定された画像を基準画
像信号として記憶する基準画像用メモリと、この基準画
像用メモリに記憶された基準画像信号と所定時間後に上
記ビデオカメラによって得られた画像信号を比較処理す
ることにより追尾ウィンドウを更新するウィンドウ更新
手段とを有する画像追尾装置に、上記画像用メモリに取
り込まれる上記画像信号を一つのフレームを構成する第
1フィールドと第2フィールドの画像信号とし、これら
第1フィールドの画像信号と第2フィールドの画像信号
を比較することにより上記画像信号に一時的な外乱が入
ったことを検出する外乱検出手段を備えたため、取り込
んだ画像に一時的な外乱が入ったことが検出出来、例え
ば、この一時的な外乱の影響を除いて追尾ウィンドウの
更新を行うことが出来、もって追尾ウィンドウがずれる
ことがなく、安全運転を図ることができるという効果を
奏する。
【0033】また、この発明の請求項2に係る画像追尾
装置は、上記請求項1の画像追尾装置において、上記ウ
ィンドウ更新手段は、一時的な外乱が検出されると、外
乱の入っていない正常な画像が入力されるまでウィンド
ウの更新を行わない機能と、所定の時間を超えてもウィ
ンドウの更新を行わない場合は画像追尾を中断する機能
とを備えたため、上記効果に加えて画像追尾の信頼性を
維持できるという効果を奏する。
装置は、上記請求項1の画像追尾装置において、上記ウ
ィンドウ更新手段は、一時的な外乱が検出されると、外
乱の入っていない正常な画像が入力されるまでウィンド
ウの更新を行わない機能と、所定の時間を超えてもウィ
ンドウの更新を行わない場合は画像追尾を中断する機能
とを備えたため、上記効果に加えて画像追尾の信頼性を
維持できるという効果を奏する。
【0034】また、この発明の請求項3に係る画像追尾
装置は、撮像された画像を画像信号として出力するビデ
オカメラと、このビデオカメラにより出力される画像信
号を記憶する画像用メモリと、この画像用メモリに記憶
された画像信号に対して追尾ウィンドウを設定する追尾
ウィンドウ設定手段と、この追尾ウィンドウ設定手段に
よって追尾ウィンドウが設定された画像を基準画像信号
として記憶する基準画像用メモリと、この基準画像用メ
モリに記憶された基準画像信号と所定時間後に上記ビデ
オカメラによって得られた画像信号を比較処理すること
により追尾ウィンドウを更新するウィンドウ更新手段と
を有する画像追尾装置に、上記画像用メモリに取り込ま
れる上記画像信号を一つのフレームを構成する第1フィ
ールドと第2フィールドの画像信号とし、これら第1フ
ィールドの画像信号と第2フィールドの画像信号を比較
することにより上記画像信号に一時的な外乱が入ったこ
とを検出する外乱検出手段と、この外乱検出手段により
上記画像信号に一時的な外乱が検出されると、上記画像
信号の第1フィールドの画像信号と第2フィールドの画
像信号を、それぞれ上記基準画像信号とされた画像信号
の第1フィールドの画像信号と第2フィールドの画像信
号と比較することにより、上記外乱の影響の少ないフィ
ールドの画像信号を検出するフィールド検出手段とを備
え、上記ウィンドウ更新手段には、上記フィールド検出
手段により検出された外乱の影響の少ないフィールドの
画像信号を用いて追尾ウィンドウを更新する機能を備え
たため、外乱の影響の少ない画像信号を用いて追尾ウィ
ンドウの更新を行うことができ、もって追尾ウィンドウ
がずれることなく追尾を行うことが出来、安全運転を図
ることができるという効果を奏する。
装置は、撮像された画像を画像信号として出力するビデ
オカメラと、このビデオカメラにより出力される画像信
号を記憶する画像用メモリと、この画像用メモリに記憶
された画像信号に対して追尾ウィンドウを設定する追尾
ウィンドウ設定手段と、この追尾ウィンドウ設定手段に
よって追尾ウィンドウが設定された画像を基準画像信号
として記憶する基準画像用メモリと、この基準画像用メ
モリに記憶された基準画像信号と所定時間後に上記ビデ
オカメラによって得られた画像信号を比較処理すること
により追尾ウィンドウを更新するウィンドウ更新手段と
を有する画像追尾装置に、上記画像用メモリに取り込ま
れる上記画像信号を一つのフレームを構成する第1フィ
ールドと第2フィールドの画像信号とし、これら第1フ
ィールドの画像信号と第2フィールドの画像信号を比較
することにより上記画像信号に一時的な外乱が入ったこ
とを検出する外乱検出手段と、この外乱検出手段により
上記画像信号に一時的な外乱が検出されると、上記画像
信号の第1フィールドの画像信号と第2フィールドの画
像信号を、それぞれ上記基準画像信号とされた画像信号
の第1フィールドの画像信号と第2フィールドの画像信
号と比較することにより、上記外乱の影響の少ないフィ
ールドの画像信号を検出するフィールド検出手段とを備
え、上記ウィンドウ更新手段には、上記フィールド検出
手段により検出された外乱の影響の少ないフィールドの
画像信号を用いて追尾ウィンドウを更新する機能を備え
たため、外乱の影響の少ない画像信号を用いて追尾ウィ
ンドウの更新を行うことができ、もって追尾ウィンドウ
がずれることなく追尾を行うことが出来、安全運転を図
ることができるという効果を奏する。
【0035】さらに、この発明の請求項4に係る画像追
尾装置は、撮像された画像を画像信号として出力するビ
デオカメラと、このビデオカメラにより出力される画像
信号を記憶する画像用メモリと、この画像用メモリに記
憶された画像信号に対して追尾ウィンドウを設定する追
尾ウィンドウ設定手段と、この追尾ウィンドウ設定手段
によって上記追尾ウィンドウが設定された画像を基準画
像信号として記憶する基準画像用メモリと、この基準画
像用メモリに記憶された基準画像信号と所定時間後に上
記ビデオカメラによって得られた画像信号を比較処理す
ることにより追尾ウィンドウを更新するウィンドウ更新
手段とを有する画像追尾装置に、上記画像用メモリに取
り込まれる上記画像信号を一つのフレームを構成する第
1フィールドと第2フィールドの画像信号とし、これら
第1フィールドの画像信号と第2フィールドの画像信号
を比較することにより上記画像信号に一時的な外乱が入
ったことを検出する外乱検出手段と、この外乱検出手段
により上記画像信号に一時的な外乱が検出されると、上
記画像信号の第1フィールドの画像信号と第2フィール
ドの画像信号を、それぞれ上記基準画像信号とされた画
像信号の第1フィールドの画像信号と第2フィールドの
画像信号と比較することにより、上記外乱の影響の少な
いフィールドの画像信号を検出するフィールド検出手段
と、このフィールド検出手段により検出された上記外乱
の影響の少ないフィールドの画像信号により、他のフィ
ールドの画像信号を補間により求める補間手段とを備
え、上記ウィンドウ更新手段は、上記補間手段により得
られた上記他のフィールドの画像信号と上記外乱の影響
の少ないフィールドの画像信号とを合成した画像信号に
よって上記追尾ウィンドウを更新する機能を備えたた
め、画像情報を大幅に損なう事なく画像追尾を行うこと
が出来、従ってその信頼性を損なう事なく画像追尾を行
うことができ、もって安全運転を図ることができるとい
う効果を奏する。
尾装置は、撮像された画像を画像信号として出力するビ
デオカメラと、このビデオカメラにより出力される画像
信号を記憶する画像用メモリと、この画像用メモリに記
憶された画像信号に対して追尾ウィンドウを設定する追
尾ウィンドウ設定手段と、この追尾ウィンドウ設定手段
によって上記追尾ウィンドウが設定された画像を基準画
像信号として記憶する基準画像用メモリと、この基準画
像用メモリに記憶された基準画像信号と所定時間後に上
記ビデオカメラによって得られた画像信号を比較処理す
ることにより追尾ウィンドウを更新するウィンドウ更新
手段とを有する画像追尾装置に、上記画像用メモリに取
り込まれる上記画像信号を一つのフレームを構成する第
1フィールドと第2フィールドの画像信号とし、これら
第1フィールドの画像信号と第2フィールドの画像信号
を比較することにより上記画像信号に一時的な外乱が入
ったことを検出する外乱検出手段と、この外乱検出手段
により上記画像信号に一時的な外乱が検出されると、上
記画像信号の第1フィールドの画像信号と第2フィール
ドの画像信号を、それぞれ上記基準画像信号とされた画
像信号の第1フィールドの画像信号と第2フィールドの
画像信号と比較することにより、上記外乱の影響の少な
いフィールドの画像信号を検出するフィールド検出手段
と、このフィールド検出手段により検出された上記外乱
の影響の少ないフィールドの画像信号により、他のフィ
ールドの画像信号を補間により求める補間手段とを備
え、上記ウィンドウ更新手段は、上記補間手段により得
られた上記他のフィールドの画像信号と上記外乱の影響
の少ないフィールドの画像信号とを合成した画像信号に
よって上記追尾ウィンドウを更新する機能を備えたた
め、画像情報を大幅に損なう事なく画像追尾を行うこと
が出来、従ってその信頼性を損なう事なく画像追尾を行
うことができ、もって安全運転を図ることができるとい
う効果を奏する。
【図1】この発明の実施例1を示すブロック図である。
【図2】前回ウィンドウが更新された画像を示す図であ
る。
る。
【図3】今回ウィンドウが更新される画像を示す図であ
る。
る。
【図4】図2に示された1フレームの画像のサーチ範囲
内の画像をフィールド毎に分解して示す図である。
内の画像をフィールド毎に分解して示す図である。
【図5】図3に示された1フレームの画像のサーチ範囲
内の画像をフィールド毎に分解して示す図である。
内の画像をフィールド毎に分解して示す図である。
【図6】図2のサーチ範囲内の画像を画素単位で表した
図である。
図である。
【図7】図3のサーチ範囲内の画像を画素単位で表した
図である。
図である。
【図8】実施例1の処理手順を示すフローチャートであ
る。
る。
【図9】従来の画像追尾装置を示すブロック図である。
5 画像用メモリ 6 基準画像用メモリ 7 CPU 9 スイッチ 11 外乱検出装置 12 補間処理装置 22 追尾ウィンドウ 23 ワイパー
Claims (4)
- 【請求項1】 撮像された画像を画像信号として出力す
るビデオカメラと、このビデオカメラにより出力される
画像信号を記憶する画像用メモリと、この画像用メモリ
に記憶された画像信号に対して追尾ウィンドウを設定す
る追尾ウィンドウ設定手段と、この追尾ウィンドウ設定
手段によって上記追尾ウィンドウが設定された画像を基
準画像信号として記憶する基準画像用メモリと、この基
準画像用メモリに記憶された基準画像信号と所定時間後
に上記ビデオカメラによって得られた画像信号を比較処
理することにより追尾ウィンドウを更新するウィンドウ
更新手段とを有する画像追尾装置において、 上記画像用メモリに取り込まれる上記画像信号を一つの
フレームを構成する第1フィールドと第2フィールドの
画像信号とし、これら第1フィールドの画像信号と第2
フィールドの画像信号を比較することにより上記画像信
号に一時的な外乱が入ったことを検出する外乱検出手段
を備えたことを特徴とする画像追尾装置。 - 【請求項2】 上記ウィンドウ更新手段は、一時的な外
乱が検出されると、外乱の入っていない正常な画像が入
力されるまでウィンドウの更新を行わない機能と、所定
の時間を超えてもウィンドウの更新を行わない場合は画
像追尾を中断する機能とを備えたことを特徴とする請求
項1の画像追尾装置。 - 【請求項3】 撮像された画像を画像信号として出力す
るビデオカメラと、このビデオカメラにより出力される
画像信号を記憶する画像用メモリと、この画像用メモリ
に記憶された画像信号に対して追尾ウィンドウを設定す
る追尾ウィンドウ設定手段と、この追尾ウィンドウ設定
手段によって追尾ウィンドウが設定された画像を基準画
像信号として記憶する基準画像用メモリと、この基準画
像用メモリに記憶された基準画像信号と所定時間後に上
記ビデオカメラによって得られた画像信号を比較処理す
ることにより追尾ウィンドウを更新するウィンドウ更新
手段とを有する画像追尾装置において、 上記画像用メモリに取り込まれる上記画像信号を一つの
フレームを構成する第1フィールドと第2フィールドの
画像信号とし、これら第1フィールドの画像信号と第2
フィールドの画像信号を比較することにより上記画像信
号に一時的な外乱が入ったことを検出する外乱検出手段
と、 この外乱検出手段により上記画像信号に一時的な外乱が
検出されると、上記画像信号の第1フィールドの画像信
号と第2フィールドの画像信号を、それぞれ上記基準画
像信号とされた画像信号の第1フィールドの画像信号と
第2フィールドの画像信号と比較することにより、上記
外乱の影響の少ないフィールドの画像信号を検出するフ
ィールド検出手段とを備え、 上記ウィンドウ更新手段には、上記フィールド検出手段
により検出された外乱の影響の少ないフィールドの画像
信号を用いて追尾ウィンドウを更新する機能を備えたこ
とを特徴とする画像追尾装置。 - 【請求項4】 撮像された画像を画像信号として出力す
るビデオカメラと、このビデオカメラにより出力される
画像信号を記憶する画像用メモリと、この画像用メモリ
に記憶された画像信号に対して追尾ウィンドウを設定す
る追尾ウィンドウ設定手段と、この追尾ウィンドウ設定
手段によって上記追尾ウィンドウが設定された画像を基
準画像信号として記憶する基準画像用メモリと、この基
準画像用メモリに記憶された基準画像信号と所定時間後
に上記ビデオカメラによって得られた画像信号を比較処
理することにより追尾ウィンドウを更新するウィンドウ
更新手段とを有する画像追尾装置において、 上記画像用メモリに取り込まれる上記画像信号を一つの
フレームを構成する第1フィールドと第2フィールドの
画像信号とし、これら第1フィールドの画像信号と第2
フィールドの画像信号を比較することにより上記画像信
号に一時的な外乱が入ったことを検出する外乱検出手段
と、 この外乱検出手段により上記画像信号に一時的な外乱が
検出されると、上記画像信号の第1フィールドの画像信
号と第2フィールドの画像信号を、それぞれ上記基準画
像信号とされた画像信号の第1フィールドの画像信号と
第2フィールドの画像信号と比較することにより、上記
外乱の影響の少ないフィールドの画像信号を検出するフ
ィールド検出手段と、 このフィールド検出手段により検出された上記外乱の影
響の少ないフィールドの画像信号により、他のフィール
ドの画像信号を補間により求める補間手段とを備え、 上記ウィンドウ更新手段は、上記補間手段により得られ
た上記他のフィールドの画像信号と上記外乱の影響の少
ないフィールドの画像信号とを合成した画像信号によっ
て上記追尾ウィンドウを更新する機能を備えたことを特
徴とする画像追尾装置。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP5073945A JP2983407B2 (ja) | 1993-03-31 | 1993-03-31 | 画像追尾装置 |
GB9406140A GB2276790B (en) | 1993-03-31 | 1994-03-28 | Image following apparatus |
DE4411179A DE4411179B4 (de) | 1993-03-31 | 1994-03-30 | Bildeinfangvorrichtung |
US08/729,423 US5706362A (en) | 1993-03-31 | 1996-10-11 | Image tracking apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP5073945A JP2983407B2 (ja) | 1993-03-31 | 1993-03-31 | 画像追尾装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPH06290256A true JPH06290256A (ja) | 1994-10-18 |
JP2983407B2 JP2983407B2 (ja) | 1999-11-29 |
Family
ID=13532754
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP5073945A Expired - Fee Related JP2983407B2 (ja) | 1993-03-31 | 1993-03-31 | 画像追尾装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US5706362A (ja) |
JP (1) | JP2983407B2 (ja) |
DE (1) | DE4411179B4 (ja) |
GB (1) | GB2276790B (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014054289A1 (ja) * | 2012-10-03 | 2014-04-10 | 株式会社デンソー | 車両用ナビゲーションシステムおよび車両用撮影装置 |
JP2014073737A (ja) * | 2012-10-03 | 2014-04-24 | Denso Corp | 車両用撮影装置 |
CN113435237A (zh) * | 2020-03-23 | 2021-09-24 | 丰田自动车株式会社 | 物体状态识别装置、识别方法和识别用程序以及控制装置 |
Families Citing this family (98)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6822563B2 (en) | 1997-09-22 | 2004-11-23 | Donnelly Corporation | Vehicle imaging system with accessory control |
US5877897A (en) | 1993-02-26 | 1999-03-02 | Donnelly Corporation | Automatic rearview mirror, vehicle lighting control and vehicle interior monitoring system using a photosensor array |
US6891563B2 (en) | 1996-05-22 | 2005-05-10 | Donnelly Corporation | Vehicular vision system |
US7655894B2 (en) | 1996-03-25 | 2010-02-02 | Donnelly Corporation | Vehicular image sensing system |
US6307587B1 (en) * | 1996-10-18 | 2001-10-23 | California Institute Of Technology | Input circuit for an image processor |
CA2232997C (en) * | 1997-03-26 | 2001-07-10 | Dalhousie University | Dynamic target addressing system |
KR100224752B1 (ko) | 1997-06-11 | 1999-10-15 | 윤종용 | 표적 추적 방법 및 장치 |
US6281931B1 (en) * | 1997-11-04 | 2001-08-28 | Tien Ren Tsao | Method and apparatus for determining and correcting geometric distortions in electronic imaging systems |
US6163338A (en) * | 1997-12-11 | 2000-12-19 | Johnson; Dan | Apparatus and method for recapture of realtime events |
DE19902681A1 (de) * | 1999-01-23 | 2000-07-27 | Lfk Gmbh | Verfahren und System zum Wiederfinden von Objekten in Bildern |
US6107942A (en) * | 1999-02-03 | 2000-08-22 | Premier Management Partners, Inc. | Parking guidance and management system |
SG89282A1 (en) | 1999-05-28 | 2002-06-18 | Kent Ridge Digital Labs | Motion information extraction system |
US6360486B1 (en) * | 2000-06-16 | 2002-03-26 | Meritor Light Vehicle Technology, Llc | Window object detection system with vibration compensation |
US20020071594A1 (en) * | 2000-10-12 | 2002-06-13 | Allen Kool | LS tracker system |
US7183944B2 (en) * | 2001-06-12 | 2007-02-27 | Koninklijke Philips Electronics N.V. | Vehicle tracking and identification of emergency/law enforcement vehicles |
DE10141055B4 (de) * | 2001-08-22 | 2013-09-05 | Ibeo Automobile Sensor Gmbh | Verfahren zur Bestimmung von Bewegungsinformationen |
JP2003098424A (ja) * | 2001-09-25 | 2003-04-03 | Fujitsu Ten Ltd | 画像処理測距装置 |
KR200277875Y1 (ko) * | 2002-03-11 | 2002-06-14 | 이스턴 마스텍 주식회사 | 자동차의 후방용 감시카메라의 좌우반전 스위칭 장치 |
AU2003225228A1 (en) | 2002-05-03 | 2003-11-17 | Donnelly Corporation | Object detection system for vehicle |
DE10313002B4 (de) * | 2003-03-24 | 2006-03-23 | Daimlerchrysler Ag | Fahrzeugumgebungserfassungseinheit |
US8498452B2 (en) * | 2003-06-26 | 2013-07-30 | DigitalOptics Corporation Europe Limited | Digital image processing using face detection information |
US9692964B2 (en) | 2003-06-26 | 2017-06-27 | Fotonation Limited | Modification of post-viewing parameters for digital images using image region or feature information |
US8948468B2 (en) | 2003-06-26 | 2015-02-03 | Fotonation Limited | Modification of viewing parameters for digital images using face detection information |
US7471846B2 (en) * | 2003-06-26 | 2008-12-30 | Fotonation Vision Limited | Perfecting the effect of flash within an image acquisition devices using face detection |
US8330831B2 (en) * | 2003-08-05 | 2012-12-11 | DigitalOptics Corporation Europe Limited | Method of gathering visual meta data using a reference image |
US8494286B2 (en) | 2008-02-05 | 2013-07-23 | DigitalOptics Corporation Europe Limited | Face detection in mid-shot digital images |
US7565030B2 (en) | 2003-06-26 | 2009-07-21 | Fotonation Vision Limited | Detecting orientation of digital images using face detection information |
US8682097B2 (en) * | 2006-02-14 | 2014-03-25 | DigitalOptics Corporation Europe Limited | Digital image enhancement with reference images |
US8989453B2 (en) * | 2003-06-26 | 2015-03-24 | Fotonation Limited | Digital image processing using face detection information |
US9129381B2 (en) * | 2003-06-26 | 2015-09-08 | Fotonation Limited | Modification of post-viewing parameters for digital images using image region or feature information |
US7362368B2 (en) * | 2003-06-26 | 2008-04-22 | Fotonation Vision Limited | Perfecting the optics within a digital image acquisition device using face detection |
US7269292B2 (en) * | 2003-06-26 | 2007-09-11 | Fotonation Vision Limited | Digital image adjustable compression and resolution using face detection information |
US8363951B2 (en) * | 2007-03-05 | 2013-01-29 | DigitalOptics Corporation Europe Limited | Face recognition training method and apparatus |
US8155397B2 (en) * | 2007-09-26 | 2012-04-10 | DigitalOptics Corporation Europe Limited | Face tracking in a camera processor |
US7844076B2 (en) * | 2003-06-26 | 2010-11-30 | Fotonation Vision Limited | Digital image processing using face detection and skin tone information |
US8553949B2 (en) * | 2004-01-22 | 2013-10-08 | DigitalOptics Corporation Europe Limited | Classification and organization of consumer digital images using workflow, and face detection and recognition |
US8896725B2 (en) | 2007-06-21 | 2014-11-25 | Fotonation Limited | Image capture device with contemporaneous reference image capture mechanism |
US8593542B2 (en) * | 2005-12-27 | 2013-11-26 | DigitalOptics Corporation Europe Limited | Foreground/background separation using reference images |
US7616233B2 (en) * | 2003-06-26 | 2009-11-10 | Fotonation Vision Limited | Perfecting of digital image capture parameters within acquisition devices using face detection |
US7792335B2 (en) | 2006-02-24 | 2010-09-07 | Fotonation Vision Limited | Method and apparatus for selective disqualification of digital images |
US7792970B2 (en) * | 2005-06-17 | 2010-09-07 | Fotonation Vision Limited | Method for establishing a paired connection between media devices |
US7620218B2 (en) | 2006-08-11 | 2009-11-17 | Fotonation Ireland Limited | Real-time face tracking with reference images |
US7440593B1 (en) * | 2003-06-26 | 2008-10-21 | Fotonation Vision Limited | Method of improving orientation and color balance of digital images using face detection information |
US7574016B2 (en) * | 2003-06-26 | 2009-08-11 | Fotonation Vision Limited | Digital image processing using face detection information |
US7564994B1 (en) * | 2004-01-22 | 2009-07-21 | Fotonation Vision Limited | Classification system for consumer digital images using automatic workflow and face detection and recognition |
US7526103B2 (en) | 2004-04-15 | 2009-04-28 | Donnelly Corporation | Imaging system for vehicle |
JP4760089B2 (ja) * | 2004-10-14 | 2011-08-31 | 日産自動車株式会社 | 車載画像処理装置、および画像処理方法 |
US8320641B2 (en) * | 2004-10-28 | 2012-11-27 | DigitalOptics Corporation Europe Limited | Method and apparatus for red-eye detection using preview or other reference images |
US8488023B2 (en) * | 2009-05-20 | 2013-07-16 | DigitalOptics Corporation Europe Limited | Identifying facial expressions in acquired digital images |
US7315631B1 (en) | 2006-08-11 | 2008-01-01 | Fotonation Vision Limited | Real-time face tracking in a digital image acquisition device |
US8503800B2 (en) * | 2007-03-05 | 2013-08-06 | DigitalOptics Corporation Europe Limited | Illumination detection using classifier chains |
US7715597B2 (en) | 2004-12-29 | 2010-05-11 | Fotonation Ireland Limited | Method and component for image recognition |
US10878646B2 (en) | 2005-12-08 | 2020-12-29 | Smartdrive Systems, Inc. | Vehicle event recorder systems |
US20070150138A1 (en) | 2005-12-08 | 2007-06-28 | James Plante | Memory management in event recording systems |
US7804983B2 (en) | 2006-02-24 | 2010-09-28 | Fotonation Vision Limited | Digital image acquisition control and correction method and apparatus |
US9201842B2 (en) | 2006-03-16 | 2015-12-01 | Smartdrive Systems, Inc. | Vehicle event recorder systems and networks having integrated cellular wireless communications systems |
US8996240B2 (en) | 2006-03-16 | 2015-03-31 | Smartdrive Systems, Inc. | Vehicle event recorders with integrated web server |
US20070268158A1 (en) * | 2006-05-09 | 2007-11-22 | Drivecam, Inc. | System and Method for Reducing Driving Risk With Insight |
US7659827B2 (en) * | 2006-05-08 | 2010-02-09 | Drivecam, Inc. | System and method for taking risk out of driving |
US7804426B2 (en) * | 2006-05-08 | 2010-09-28 | Drivecam, Inc. | System and method for selective review of event data |
US20080043736A1 (en) * | 2006-08-18 | 2008-02-21 | Drivecam, Inc. | Data Transfer System and Method |
US7536457B2 (en) * | 2006-05-08 | 2009-05-19 | Drivecam, Inc. | System and method for wireless delivery of event data |
US9836716B2 (en) | 2006-05-09 | 2017-12-05 | Lytx, Inc. | System and method for reducing driving risk with hindsight |
US8373567B2 (en) * | 2006-05-08 | 2013-02-12 | Drivecam, Inc. | System and method for identifying non-event profiles |
US8314708B2 (en) * | 2006-05-08 | 2012-11-20 | Drivecam, Inc. | System and method for reducing driving risk with foresight |
US20070257782A1 (en) * | 2006-05-08 | 2007-11-08 | Drivecam, Inc. | System and Method for Multi-Event Capture |
EP2033142B1 (en) * | 2006-06-12 | 2011-01-26 | Tessera Technologies Ireland Limited | Advances in extending the aam techniques from grayscale to color images |
WO2008015586A2 (en) * | 2006-08-02 | 2008-02-07 | Fotonation Vision Limited | Face recognition with combined pca-based datasets |
US7916897B2 (en) | 2006-08-11 | 2011-03-29 | Tessera Technologies Ireland Limited | Face tracking for controlling imaging parameters |
US7972045B2 (en) | 2006-08-11 | 2011-07-05 | Donnelly Corporation | Automatic headlamp control system |
US7403643B2 (en) * | 2006-08-11 | 2008-07-22 | Fotonation Vision Limited | Real-time face tracking in a digital image acquisition device |
US8649933B2 (en) | 2006-11-07 | 2014-02-11 | Smartdrive Systems Inc. | Power management systems for automotive video event recorders |
US8989959B2 (en) | 2006-11-07 | 2015-03-24 | Smartdrive Systems, Inc. | Vehicle operator performance history recording, scoring and reporting systems |
US8868288B2 (en) | 2006-11-09 | 2014-10-21 | Smartdrive Systems, Inc. | Vehicle exception event management systems |
US8055067B2 (en) * | 2007-01-18 | 2011-11-08 | DigitalOptics Corporation Europe Limited | Color segmentation |
JP5049356B2 (ja) * | 2007-02-28 | 2012-10-17 | デジタルオプティックス・コーポレイション・ヨーロッパ・リミテッド | テクスチャ空間分解に基づく統計的顔モデリングにおける指向性照明変動性の分離 |
WO2008109622A1 (en) | 2007-03-05 | 2008-09-12 | Fotonation Vision Limited | Face categorization and annotation of a mobile phone contact list |
US8649604B2 (en) * | 2007-03-05 | 2014-02-11 | DigitalOptics Corporation Europe Limited | Face searching and detection in a digital image acquisition device |
US8239092B2 (en) | 2007-05-08 | 2012-08-07 | Smartdrive Systems Inc. | Distributed vehicle event recorder systems having a portable memory data transfer system |
US7916971B2 (en) * | 2007-05-24 | 2011-03-29 | Tessera Technologies Ireland Limited | Image processing method and apparatus |
US8750578B2 (en) | 2008-01-29 | 2014-06-10 | DigitalOptics Corporation Europe Limited | Detecting facial expressions in digital images |
US7855737B2 (en) * | 2008-03-26 | 2010-12-21 | Fotonation Ireland Limited | Method of making a digital camera image of a scene including the camera user |
EP2277141A2 (en) * | 2008-07-30 | 2011-01-26 | Tessera Technologies Ireland Limited | Automatic face and skin beautification using face detection |
WO2010063463A2 (en) * | 2008-12-05 | 2010-06-10 | Fotonation Ireland Limited | Face recognition using face tracker classifier data |
US20100271533A1 (en) * | 2009-04-28 | 2010-10-28 | Crispin Porter & Bogusky | Image Recordation Device with a Plurality of Lenses |
US8379917B2 (en) * | 2009-10-02 | 2013-02-19 | DigitalOptics Corporation Europe Limited | Face recognition performance using additional image features |
US9728228B2 (en) | 2012-08-10 | 2017-08-08 | Smartdrive Systems, Inc. | Vehicle event playback apparatus and methods |
US9501878B2 (en) | 2013-10-16 | 2016-11-22 | Smartdrive Systems, Inc. | Vehicle event playback apparatus and methods |
US9610955B2 (en) | 2013-11-11 | 2017-04-04 | Smartdrive Systems, Inc. | Vehicle fuel consumption monitor and feedback systems |
US8892310B1 (en) | 2014-02-21 | 2014-11-18 | Smartdrive Systems, Inc. | System and method to detect execution of driving maneuvers |
DE102014207897A1 (de) * | 2014-04-28 | 2015-10-29 | Robert Bosch Gmbh | Verfahren zum Erzeugen eines Anzeigebildes |
US9663127B2 (en) | 2014-10-28 | 2017-05-30 | Smartdrive Systems, Inc. | Rail vehicle event detection and recording system |
US11069257B2 (en) | 2014-11-13 | 2021-07-20 | Smartdrive Systems, Inc. | System and method for detecting a vehicle event and generating review criteria |
US9679420B2 (en) | 2015-04-01 | 2017-06-13 | Smartdrive Systems, Inc. | Vehicle event recording system and method |
US20170270378A1 (en) * | 2016-03-16 | 2017-09-21 | Haike Guan | Recognition device, recognition method of object, and computer-readable recording medium |
JP6866210B2 (ja) * | 2017-03-31 | 2021-04-28 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
CN108932731B (zh) * | 2017-05-24 | 2021-02-05 | 上海云从企业发展有限公司 | 基于先验信息的目标跟踪方法及*** |
US10692364B1 (en) | 2019-02-28 | 2020-06-23 | Honeywell International Inc. | Security systems integration |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US3828122A (en) * | 1970-09-29 | 1974-08-06 | Bendix Corp | Tv area correlation tracker |
JPS5952359A (ja) * | 1982-09-02 | 1984-03-26 | Hitachi Medical Corp | 画像間演算時の画像歪み自動補正装置 |
DE3444836A1 (de) * | 1984-12-08 | 1986-06-12 | Robert Bosch Gmbh, 7000 Stuttgart | Verfahren zur umwandlung eines videosignals |
US4661853A (en) * | 1985-11-01 | 1987-04-28 | Rca Corporation | Interfield image motion detector for video signals |
KR930004880B1 (ko) * | 1989-03-07 | 1993-06-09 | 미쓰비시 덴끼 가부시기가이샤 | 추미식 차간거리 측정장치 |
KR940000019B1 (ko) * | 1989-12-25 | 1994-01-05 | 미쯔비시 덴끼 가부시기가이샤 | 거리측정장치 |
GB9019538D0 (en) * | 1990-09-07 | 1990-10-24 | Philips Electronic Associated | Tracking a moving object |
US5151945A (en) * | 1990-09-11 | 1992-09-29 | The Research Foundation Of State Univ. Of N.Y. | Determination of ambient light level changes in visual images |
JPH04150572A (ja) * | 1990-10-12 | 1992-05-25 | Ricoh Co Ltd | Mtf劣化補正法及び原稿読取装置 |
US5243418A (en) * | 1990-11-27 | 1993-09-07 | Kabushiki Kaisha Toshiba | Display monitoring system for detecting and tracking an intruder in a monitor area |
JPH04243491A (ja) * | 1991-01-17 | 1992-08-31 | Mitsubishi Electric Corp | 自動車用画像追尾装置 |
GB2256989B (en) * | 1991-06-21 | 1995-02-08 | Sony Broadcast & Communication | Video image capture apparatus |
-
1993
- 1993-03-31 JP JP5073945A patent/JP2983407B2/ja not_active Expired - Fee Related
-
1994
- 1994-03-28 GB GB9406140A patent/GB2276790B/en not_active Expired - Fee Related
- 1994-03-30 DE DE4411179A patent/DE4411179B4/de not_active Expired - Fee Related
-
1996
- 1996-10-11 US US08/729,423 patent/US5706362A/en not_active Expired - Lifetime
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014054289A1 (ja) * | 2012-10-03 | 2014-04-10 | 株式会社デンソー | 車両用ナビゲーションシステムおよび車両用撮影装置 |
JP2014073737A (ja) * | 2012-10-03 | 2014-04-24 | Denso Corp | 車両用撮影装置 |
CN113435237A (zh) * | 2020-03-23 | 2021-09-24 | 丰田自动车株式会社 | 物体状态识别装置、识别方法和识别用程序以及控制装置 |
CN113435237B (zh) * | 2020-03-23 | 2023-12-26 | 丰田自动车株式会社 | 物体状态识别装置、识别方法和计算机可读的记录介质以及控制装置 |
Also Published As
Publication number | Publication date |
---|---|
GB2276790B (en) | 1997-03-19 |
GB9406140D0 (en) | 1994-05-18 |
GB2276790A (en) | 1994-10-05 |
US5706362A (en) | 1998-01-06 |
DE4411179A1 (de) | 1994-10-06 |
JP2983407B2 (ja) | 1999-11-29 |
DE4411179B4 (de) | 2008-08-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JPH06290256A (ja) | 画像追尾装置 | |
EP2182730B1 (en) | Monitor and vehicle periphery monitor | |
JP3807331B2 (ja) | カメラの汚れ検出装置およびカメラの汚れ検出方法 | |
JP3300337B2 (ja) | 画像処理装置および監視システム | |
US7899314B2 (en) | Photographing system | |
JPH04313199A (ja) | 車間距離検出装置 | |
US6400762B2 (en) | Video signal processing circuit and video signal processing method | |
JP5759907B2 (ja) | 車載撮像装置 | |
JPH07193763A (ja) | テレビジョン受信機 | |
WO2018042976A1 (ja) | 画像生成装置、画像生成方法、記録媒体、および画像表示システム | |
JP2009117978A (ja) | 車両周辺表示装置 | |
JPH06247246A (ja) | 接近車監視装置 | |
JP2940582B2 (ja) | 斜め後方走行車検出方法 | |
JPH04243491A (ja) | 自動車用画像追尾装置 | |
JP2011164665A (ja) | 車両周囲変化検出装置 | |
JP4814752B2 (ja) | 表示制御装置 | |
JP2004287752A (ja) | 監視装置 | |
US11926263B2 (en) | Vehicle surrounding area image generation device, vehicle surrounding area display system, and vehicle surrounding area display method | |
JP2857001B2 (ja) | 距離測定装置 | |
JP3608033B2 (ja) | 車両後退支援装置 | |
JP2635232B2 (ja) | 車間距離検出装置 | |
JP3947117B2 (ja) | 車両周辺画像処理システム | |
JPH05176218A (ja) | 画像動き補正装置 | |
JPH0737099A (ja) | 移動物体検出装置 | |
JP2971693B2 (ja) | 距離測定装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080924 Year of fee payment: 9 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080924 Year of fee payment: 9 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090924 Year of fee payment: 10 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090924 Year of fee payment: 10 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100924 Year of fee payment: 11 |
|
LAPS | Cancellation because of no payment of annual fees |