JP3675066B2 - 赤外線撮像装置および画像補正方法 - Google Patents
赤外線撮像装置および画像補正方法 Download PDFInfo
- Publication number
- JP3675066B2 JP3675066B2 JP29378796A JP29378796A JP3675066B2 JP 3675066 B2 JP3675066 B2 JP 3675066B2 JP 29378796 A JP29378796 A JP 29378796A JP 29378796 A JP29378796 A JP 29378796A JP 3675066 B2 JP3675066 B2 JP 3675066B2
- Authority
- JP
- Japan
- Prior art keywords
- infrared
- calibration
- average value
- measuring
- luminance
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000003702 image correction Methods 0.000 title claims description 77
- 238000003331 infrared imaging Methods 0.000 title claims description 53
- 238000000034 method Methods 0.000 title claims description 14
- 230000035945 sensitivity Effects 0.000 claims description 146
- 238000012937 correction Methods 0.000 claims description 104
- 230000008859 change Effects 0.000 claims description 91
- 238000003384 imaging method Methods 0.000 claims description 50
- 230000000903 blocking effect Effects 0.000 claims description 46
- 238000003705 background correction Methods 0.000 claims description 40
- 238000005259 measurement Methods 0.000 claims description 28
- 238000001514 detection method Methods 0.000 claims description 25
- 238000012545 processing Methods 0.000 claims description 16
- 238000006243 chemical reaction Methods 0.000 claims description 6
- 230000004044 response Effects 0.000 claims description 4
- 238000010586 diagram Methods 0.000 description 31
- 230000006870 function Effects 0.000 description 9
- 230000003287 optical effect Effects 0.000 description 7
- 230000002123 temporal effect Effects 0.000 description 5
- 238000004364 calculation method Methods 0.000 description 2
- 230000006866 deterioration Effects 0.000 description 2
- 230000004907 flux Effects 0.000 description 2
- 230000036632 reaction speed Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 238000009529 body temperature measurement Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000006185 dispersion Substances 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- NJPPVKZQTLUDBO-UHFFFAOYSA-N novaluron Chemical compound C1=C(Cl)C(OC(F)(F)C(OC(F)(F)F)F)=CC=C1NC(=O)NC(=O)C1=C(F)C=CC=C1F NJPPVKZQTLUDBO-UHFFFAOYSA-N 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 238000007619 statistical method Methods 0.000 description 1
Images
Landscapes
- Radiation Pyrometers (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
Description
【０００１】
【発明の属する技術分野】
この発明は、対象物から放射される赤外光を集光し、光電変換した後、映像信号として出力する赤外線撮像装置に関するものである。
【０００２】
【従来の技術】
一般に、従来の赤外線撮像装置は、航空機、車両、艦船などに搭載されて、夜間監視を用途に使われている。
【０００３】
図８は従来のこの種の赤外線撮像装置の一例の構成図であり、１は赤外レンズ、２は画像補正用シャッタ、３は二次元赤外線検知素子を持つ赤外線検知器、４はアンプ、５はサンプルホールド回路、６はＡ／Ｄ変換器、７は画像補正器、８はＤ／Ａ変換器、９は撮像制御器、１０は出力映像信号、１１は画像補正指令信号である。
【０００４】
次に動作について説明する。目標物体の撮像動作として、赤外レンズ１は目標物体及びその背景から放射される赤外光を集光し、赤外線検知器３上に赤外像を結像する。赤外線検知器３には検知画素が二次元的に配列されており、各検知画素は結像された赤外像の一部を光電変換する。アンプ４は各検知画素の発生する断続信号を増幅し、サンプルホールド回路５はアンプ４から出力される断続信号を連続した走査信号に変換する。その信号はさらに画像補正処理しやすいようにＡ／Ｄ変換器６によりデジタル信号（以下画像データという）に変換された後、画像補正器７により画素ごとに出力される輝度の補正（以下画像補正という）をかけられ、さらに、Ｄ／Ａ変換器８により出力映像信号１０に変換され外部へ出力される。撮像制御部９は、赤外レンズ１へピントの調整指令や、画像補正器７へペデスタルレベルやゲインの調整指令等を、外部からの指令に基づき出力することで撮像装置全系の制御を行う。画像補正用シャッタ２は、外部から画像補正指令信号１１が入力された際に、赤外レンズ１と赤外線検知器３の間の赤外線光路に機械的に挿入されることで、赤外レンズ１が集光する赤外光を遮ると同時に、画像補正器７が画像補正のための補正データ（以下画像補データという）を設定（以下キャリブレーションという）できるような均一な赤外光を、赤外線検知器３上に放射するために使用される。
【０００５】
次に、画像補正に関する以下の二つの基本的な考えを説明する。第一に通常、赤外線検知器３に使用されているような二次元赤外検知素子の検知画素の出力の大きさは、各々の検知画素の微妙な特性の違いにより、同じ温度の物体を撮像した場合でも、ほんの少しばらつく。このばらつきは、感度ばらつきと呼ばれ、表示画像のノイズの原因となる他、遠距離のため画面内の像が小さい目標を追跡する場合、ばらつきによって目標の認識が難しくなり見失うことがあるため、取り除く必要がある。感度ばらつきの画像補正データを設定する動作（以下感度キャリブレーションという。）と感度キャリブレーション後の感度ばらつきの画像補正（以下感度補正という。）について示したのが図９である。図中、２７はある画素ａの出力特性のラインａ、２８はそれとは別の画素ｂの出力特性のラインｂ、２９は温度アで補正をかけた画素ａの出力特性ラインａａ、３０は温度アで補正をかけた画素ｂの出力特性ラインｂｂ、３１は補正によりそろえられる各画素の出力ラインｃである。通常、ラインｃ３１には全検知画素出力特性の平均等が使用される。画像補正器７は各々の画素の出力をラインｃ３１の傾きにあわせるための画素対応の温度の関数として、ラインａ２７及びラインｂ２８など各検知画素出力特性データの傾きを、あらかじめ内部のメモリに保持している。画像補正器７は、例えば温度アで補正をかける場合、まず補正がかけられた温度アで各画素の出力をラインｃ３１に一致させるように、ラインａ２７の出力イ及びラインｂ２８の出力ウに等に相当する全検知画素出力の平均値をラインｃ３１のエに一致させるようにラインａ２７とラインｂ２８から所要の温度に依然しない一定値を加算もしくは減算してラインａａ２９及びラインｂｂ３０を算出する。次にこのラインａａ２９とラインｂｂ３０をメモリに保持されている各画素ごとの関数にかけて各画素の出力を補正出力ラインｃ３１にのせるよう操作し、上記一定値を上記メモリに画像補正データとして記憶する。この際、各々の画素への入力が一定の温度でないと、補正ラインｃ３１にのせるための加算や減算がうまく行かず、補正むらができてしまう。画像補正用シャッタ２は感度キャリブレーション時に、赤外線の光路を遮り画像補正用シャッタ２自身の温度を赤外線検知器３に放射することで、各画素の検知する温度を一定にするために使用される。画像補正器７は画像補正用シャッタ２により赤外線検知器３に均一な温度の赤外線が放射される状態において、むらのない画像補正が可能になる。また、感度キャリブレーション終了後、画像補正器７は、上記メモリに記憶された上記画像補正データと上記各画素ごとの関数により各画素ごとに出力される輝度の補正をかけることによって感度補正を行っていく。
【０００６】
上記が、二次元赤外検知素子の感度補正による画像補正の基本的な考え方である。第二に、実際の赤外線撮像装置では、赤外レンズ１の結像能力によって、像の中心部と端の部分で集められるエネルギーの差が表示画像上に現れることがある。図１０は目標の発する光をレンズを通し集光する様子を簡単に示した図である。３２はレンズの正面に置かれた目標Ａ、３３は斜め前に置かれた目標Ｂ、３４はレンズ、３５は結像面、３６は目標Ａから発する光束ＡＡ、３７は目標Ｂから発する光束ＢＢである。今、目標Ａ３２と目標Ｂ３３は同じ大きさ、同じ温度でありレンズ３４との位置関係のみが図１０に示すとおり異なっているとする。この場合、光束ＡＡ３６に比べ光束ＢＢ３７はレンズ３４に入射する幅が狭く、一定の温度面を撮像しているのにもかかわらず結像面３５でのエネルギー量は均一にならない。図１１にはこのようなエネルギーの不均一が実際にどのような画像に見えるかのディスプレイ上の中間値画像の一例を示してある。今、目標Ａ３２は目標Ｂ３３と温度が同じなので、上記のようなエネルギーの不均一がなければ、同じ明るさに写るはずである。しかしながら画面上では、エネルギーの不均一の影響で目標Ａ３２のほうが明るく、目標Ｂ３３のほうが暗く写る。実際の赤外線撮像装置におけるこのようなエネルギーの不均一の原因としては、このほかにもレンズや他の光学系要素自体から発する赤外光などもあげられ、通常それらを全て含めてレンズシェーディングと呼ぶ（以下シェーディングという。）。従来の赤外線撮像装置では、このようなシェーディングを補正しようとした場合、比較的温度が均一と思われるもの（例えば「空」など）に視軸を向け、レンズのピントをぼかした状態で、かつ補正用のシャッタを閉じずにキャリブレーションを行う方法がある。これは、上記感度キャリブレーション時にピントをぼかした状態のシェーディングによる検知画素の出力の不均一も含めて出力ラインｃ３１からの差分を測定することで、出力ラインｃ３１にのせるために加算もしくは減算される感度補正用の画像補正データに上記差分を含めるためである。また、ピントをずらすのは、ピントがあった状態では赤外線検知器３上に結像された赤外像が画像補正むらの原因になるためである。この画像補正データを設定する動作をデフォーカスキャリブレーションというが、この他にシェーディングを補正するキャリブレーション方法としてレンズの前にシャッタを配置して行う方法があるが、シャッタと赤外線検知器３との間で温度差があると、これも補正むらの原因となるため、この外界を写しながら行うデフォーカスキャリブレーションが、最も出力画像を綺麗に整えるキャリブレーション手段とされている。また、キャリブレーション終了後は、上記感度補正と同様に上記メモリに記憶されるデフォーカスキャリブレーションによる画像補正データと上記各画素ごとの関数により各画素ごとに出力される輝度の補正をかけることによって画像補正を行っていく。
【０００７】
このように、従来の赤外線撮像装置では、キャリブレーションを行い出力画像を整えるのだが、撮像を続けていると、徐々に画像が見にくくなるという現象が起こる。これはキャリブレーションの際に使用した画像補正器７の画素対応の関数が、実際の画素の特性と部分的に違っているため、撮像している外界や装置の温度変化により、画像補正がずれてしまったり、または環境の温度変化によりシェーディングの量が変わってしまったりするためである。このような場合、従来の装置では、運用中の温度状態にあわせたキャリブレーションを何度もやり直すことで、画像の補正状態を修正していた。
【０００８】
【発明が解決しようとする課題】
上記のように、キャリブレーションは二次元赤外線検知素子を使用した赤外線撮像装置にとって、無くてはならない機能であるのだが、通常、画像の状態の把握は定量的に行えずに、表示される画面を見ている使用者の主観によってしまい、そのためキャリブレーションは使用者からの指令によって行われている。このため、使用者の練度によって、赤外線撮像装置の出力する画像の品質が著しく異なるという問題があった。
【０００９】
また、温度に代表される装置使用環境の変化が激しい、例えば航空機に搭載する赤外線撮像装置については、安定した温度環境下で使われるものより、頻繁にキャリブレーションを行う必要がある。しかし、状況に応じて、デフォーカスキャリブレーションやシャッタを利用したキャリブレーションを行うのは操作が複雑で、特に戦闘機のパイロットが使用者の場合などには、他の装置の操作を行いながら、画像の状態を判断しキャリブレーションの指令を行う必要があるため、キャリブレーション操作が使用者の負担になるという問題があった。
【００１０】
この発明は、かかる課題を解消するためになされたものであり、どのような練度の使用者が使用しても出力する画像品質が安定し、またキャリブレーション操作が使用者の負担にならないよう、キャリブレーションを行うタイミングを自動生成し、自動でキャリブレーションを行う赤外線撮像装置を得ることを目的としている。
【００１１】
【課題を解決するための手段】
この第一の発明にかかる赤外線撮像装置は、赤外レンズにより集光された赤外光を遮断する遮断手段と、上記遮断手段により赤外光が遮断されている間の画像信号から赤外線検知器の出力のばらつきを各画素ごとに求めた輝度の偏差の平均値を求めることによって測定する感度ばらつき測定手段と、上記感度ばらつき測定手段による出力のばらつきの測定をあらかじめ設定された時間毎に行う手段、上記感度ばらつき測定手段により測定された出力のばらつきからキャリブレーションを行うための指令信号を生成する手段から成る制御手段とを備えたことにより、素子感度の補正ずれの状態を撮像中に定量的に把握してキャリブレーションを行うタイミングを生成し、自動でキャリブレーションを行えるようにしたものである。
【００１２】
また、この第二の発明にかかる赤外線撮像装置は、赤外レンズにより集光される前の赤外光を遮断する第一の遮断手段と、赤外レンズにより集光された赤外光を遮断する第二の遮断手段と、第一の遮断手段により赤外光が遮断されている間のデジタル画像信号から赤外レンズの放射する赤外光により生ずる上記赤外線検知器の出力の分布を画面内の部分から成る領域ごとの輝度の平均値の分布を求めて測定するシェーディング測定手段と、第二の遮断手段により赤外光が遮断されている間の上記画像信号から上記赤外線検知器の出力のばらつきを各画素ごとに求めた輝度の偏差の平均値を求めることによって測定する感度ばらつき測定手段と、上記シェーディング測定手段による出力信号の分布測定と上記感度ばらつき測定手段による出力のばらつきの測定を交互に行う手段、上記シェーディング測定手段により測定された出力の分布と上記感度ばらつき測定手段により測定された出力のばらつきからキャリブレーションを行うための指令信号を生成する手段から成る制御手段とを備えたことで、素子感度の補正ずれの状態及びシェーディングの補正ずれの状態を撮像中に定量的に把握してキャリブレーションを行うタイミングを生成し、自動でキャリブレーションを行えるようにしたものである。
【００１３】
また、この第三の発明にかかる赤外線撮像装置は、赤外レンズにより集光される前の赤外光を一画面出力単位時間遮断する第一の遮断手段と、赤外レンズにより集光された赤外光を一画面出力単位時間遮断する第二の遮断手段と、第一の遮断手段により赤外光が遮断されている間のデジタル画像信号から上記赤外レンズの放射する赤外光により生ずる出力信号の分布を測定するシェーディング測定手段と、第二の遮断手段により赤外光が遮断されている間の画像信号から赤外線検知器の出力のばらつきを測定する感度ばらつき測定手段と、上記シェーディング測定手段による出力信号の分布測定と上記感度ばらつき測定手段による出力のばらつきの測定を交互に行うよう制御する手段と、上記シェーディング測定手段により測定された出力信号の分布と上記感度ばらつき測定手段により測定された出力のばらつきからキャリブレーションをしなおすための指令信号を生成する手段とから成る制御手段と、上記制御手段が指令信号を生成する際に上記シェーディング測定手段と上記感度ばらつき測定手段の測定結果を利用し段階的に幾つかのキャリブレーションの実施を制御する制御手段を備えたことで、素子感度の補正ずれの状態及びシェーディングの補正ずれの状態を撮像中に定量的に把握してキャリブレーションを行うタイミングを生成するとともに、キャリブレーションの成否を判断し段階的なキャリブレーションを自動で行えるようにしたものである。
【００１４】
また、この第四の発明にかかる赤外線撮像装置は、赤外レンズにより集光された赤外光をキャリブレーションの間遮断する遮断手段と、補正回路の補正した画面の画像信号から画面内の輝度の偏差の平均値を測定する感度ばらつき測定手段と、上記感度ばらつき測定手段により測定された輝度の偏差の平均値から時間に対する上記輝度の偏差の平均値の傾きを測定する手段、上記変化の傾きに一つ前のキャリブレーションを実施した時から経過した時間をかけて輝度の偏差の平均値の増加量を推測することによってキャリブレーションを行うための指令信号を生成する手段とから成る感度ばらつき変化測定手段を具備したことで、画面の輝度ばらつきの状態とその変化を定量的に測定し、その値からキャリブレーションを行うタイミングを生成して、自動でキャリブレーションを行えるようにしたものである。
【００１５】
また、この第五の発明にかかる赤外線撮像装置は、赤外レンズにより集光される前の赤外光をキャリブレーションの間遮断する第一の遮断手段と、上記赤外レンズにより集光された赤外光をキャリブレーションの間遮断する第二の遮断手段と、上記補正回路の補正した画面の画像信号から画面内の輝度の偏差の平均値を測定する感度ばらつき測定手段と、上記感度ばらつき測定手段により測定された輝度の偏差の平均値から時間に対する上記輝度の偏差の平均値の傾きを測定する感度ばらつき変化測定手段と、上記補正回路の補正した画面の画像信号から画面内の位置ごとの輝度の平均を測定する上記シェーディング測定手段と、上記シェーディング測定手段により測定された画面内の位置ごとの輝度の平均からその時間に対する傾きを測定するシェーディング変化測定手段と、上記シェーディング測定手段と上記シェーディング変化測定手段の測定した上記偏差の平均値の傾きと画面内の位置ごとの輝度の平均の傾き及び一つ前のキャリブレーション実施時から経過した時間とからキャリブレーションをしなおすための指令信号を生成する制御手段とを備えたことで、画面の輝度ばらつきの状態とその変化及び画面のシェーディングの状態とその変化を定量的に測定し、それらの値からキャリブレーションを行うタイミングを生成して、自動でキャリブレーションを行えるようにしたものである。
【００１６】
また、この第六の発明にかかる赤外線撮像装置は、赤外レンズにより集光された赤外光をキャリブレーションの間遮断する遮断手段と、補正回路の補正した画面の画像信号から画面内の輝度の偏差の平均値を測定する感度ばらつき測定手段と、上記感度ばらつき測定手段により測定された輝度の偏差の平均値からその時間変化を測定する感度ばらつき変化測定手段と、上記補正回路の補正した画面の画像信号から常に画面内の部分ごとの輝度の平均を測定するシェーディング測定手段と、上記シェーディング測定手段により測定された画面内の位置ごとの輝度からその時間に対する傾きを測定するシェーディング変化測定手段と、第二の測定手段の測定したばらつきの時間変化と一つ前のキャリブレーション時から経過した時間とからキャリブレーションを行うための指令信号を生成する制御手段と、上記シェーディング変化測定手段の測定した画面内の部分ごとの輝度の平均の傾きと前回画像補正用のデータを取得した時から経過した時間とから画面内の部分ごとの輝度の補正量を定める補正量設定手段とを備えたことにより、画面の輝度ばらつきの状態とその変化を定量的に測定し、それらの値からキャリブレーションを行うタイミングを生成して、自動でキャリブレーションを行えるようにするとともに、画面のシェーディングの状態とその変化を定量的に測定することで補正する量を定め、シェーディングをキャリブレーションを行わずに補正できるようにしたものである。
【００１７】
また、この第七の発明にかかる赤外線撮像装置は、赤外レンズにより集光された赤外光をキャリブレーションの間遮断する遮断手段と、補正回路の補正した画面の画像信号から常に画面内の輝度のばらつきを測定する感度ばらつき測定手段と、上記感度ばらつき測定手段により測定された輝度のばらつきからその時間変化を測定する感度ばらつき変化測定手段と、上記感度ばらつき変化測定手段の測定したばらつきの時間変化と前回キャリブレーション時から経過した時間とからキャリブレーションをしなおすための指令信号を生成する制御手段と、上記赤外レンズの温度を測定する温度測定手段と、温度測定手段により測定された温度と一つ前にキャリブレーションを実施したときから経過した時間とから温度差を測定する温度差測定手段と、上記温度差測定手段の測定した温度変化量から画面内の部分ごとの輝度の補正量を定める補正量設定手段とを備えたことにより、画面の輝度ばらつきの状態とその変化を定量的に測定し、それらの値からキャリブレーションを行うタイミングを生成するとともに、光学系の温度とその変化を定量的に測定しかつそれによってシェーディングの補正量を定め、シェーディングをキャリブレーションを行わずに補正できるようにしたものである。
【００１８】
また、この第八の発明にかかる赤外線撮像装置は、上記第一、四、六、七の発明における赤外線撮像装置において、上記補正回路の出力する画像信号を記憶する手段、上記第一の遮断手段により赤外光が遮断されている間は上記記憶する手段から１フレーム前の画像信号を出力する記憶出力手段とを備えたものである。
【００１９】
さらにまた、この第九の発明にかかる赤外線撮像装置は、上記第二、三、五の発明における赤外線撮像装置において、上記補正回路の出力する画像信号を記憶する手段、上記第一、第二の遮断手段により赤外光が遮断されている間は上記記憶手段から１フレーム前の画像信号を出力する手段から成る記憶出力手段とを備えたものである。
【００２０】
【発明の実施の形態】
実施の形態１．
図１は実施の形態１による赤外線撮像装置の構成を示すブロック図である。図１において、１２は画像補正用シャッタＡ、１３は画像補正器Ａ、１４は感度ばらつき測定器である。それ以外は従来の装置と同一である。
【００２１】
次に動作について説明する。通常、赤外レンズ１より入射した目標物体及びその背景からの赤外光は、従来と同じ動作で画像補正器Ａ１３内に設置される画像補正器７で画像補正された後、Ｄ／Ａ変換され出力映像信号１０として外部機器に出力される。出力映像信号１０は１秒間に３０画面（フレーム）分の直列の信号であり、６０分の１秒ごとに、奇数番目の水平ラインの集まった画面（オッドフィールド）と偶数番目の水平ラインの集まった画面（イーブンフィールド）を交互に出力することで、１つの画面を出力する。画像補正用シャッタＡ１２には通常写真のカメラに使用されるような反応の早いものを使用し（従来の画像補正用シャッタは反応速度が秒単位程度に遅いものであった。）、例えば一画面出力単位時間である１フレームに対応する３０分の１秒間、外界から赤外レンズ１をとおして赤外線検知器３に集光される赤外光を遮断できるようにした。撮像制御器９は例えば３０秒に一度程度、画像補正用シャッタＡ１２に１フレームの赤外光遮断の指令を出すとともに画像補正器Ａ１３に赤外光遮断の指令を伝える。画像補正器Ａ１３は内部に画像補正器７と出力切換スイッチ１３ａとフレームメモリ１３ｂをもち、赤外光の遮断の指令を受けることで出力切換スイッチ１３ａをキの側に切り換える。出力切換スイッチ１３ａがキの側に切り換えられると、フレームメモリ１３ｂのデータは更新されず結果として後段のＤ／Ａ変換器８に一つ前と同じフレームの画像データが送られる。赤外光が遮断されている間、画像補正器７の出力する画像データは出力切換スイッチ１３ａのキをとおし感度ばらつき測定器１４に送られる。感度ばらつき測定器１４は内部に各画素に対応するフレームメモリ１４ａ、標準偏差測定器１４ｂ及び標準偏差記憶器１４ｃを持っており、感度ばらつきを測定する。また、撮像制御器９からあらかじめ設定された時間後に自動的に、あるいは赤外光の遮断解除の指令が出力されて、上記出力切換スイッチ１３ａがオの側に切り換って画像補正器７から出力される画像データはＤ／Ａ変換器８に出力される。
【００２２】
図１２は感度ばらつき測定動作の概要を示す図である。図中、３８は画像補正器Ａ１３から入力されフレームメモリ１４ａに記憶される画像データを、３９は標準偏差測定器１４ｂにより設定されるばらつきを測定するゲートを、４０は感度ばらつき測定部１４内で計測され標準偏差記憶器１４ｃに記憶される感度ばらつきを示している。感度ばらつき測定器１４では画像データ３８が入力されると、ばらつき測定ゲート３９をＸ方向及びＹ方向に順に動かすことで、フレームメモリ１４ａのアドレスを指定する。フレームメモリ１４ａは指定されたアドレスのデータを標準偏差測定器１４ｂに出力、標準偏差測定器１４ｂは”数１”に従いゲート内の輝度の標準偏差をデジタル計算処理によって求めて感度ばらつきを測定する。
なお、上記輝度の標準偏差のかわりにゲート内の輝度の差分の絶対値の平均を使って感度ばらつきを測定してもよい。
【００２３】
【数１】
【００２４】
測定された輝度の標準偏差は標準偏差記憶器１４ｃ内の対応箇所に記憶される。感度ばらつき測定器１４に入力される画像データは、画像補正用シャッタＡ１２が閉じ、外界からの赤外光が遮断されている状態の画像なので、画像補正が全くずれていない場合、測定された各ゲート内の輝度のばらつきのデータは０になり、輝度の偏差は観測されない。つまり、仮にゲート内で偏差が観測されれば、それが画像補正ずれであるといえる。１画面分の各ゲート内の輝度の標準偏差の測定が完了した時点で、感度ばらつき測定器１４は標準偏差記憶器１４ｃ内の輝度の標準偏差の平均値を求める。この値が例えばあらかじめ記憶された前回のキャリブレーション直後の平均値の３倍（直後の平均値をσとすると３σになる）をこえたところで（あるいは、直後の平均値とあらかじめ設定した値との和をこえたところで）、感度ばらつき判定器１４ｄは補正ずれが発生していると判断し、画像補正用シャッタＡ１２を閉じた状態でキャリブレーションを行うよう画像補正指令信号１１を撮像制御器９に出力する。また、撮像制御器９は画像補正指令信号１１を受けて画像補正器７にキャリブレーション指令を送り、キャリブレーション終了直後、感度ばらつき判定器１４ｄは新たに輝度の標準偏差の平均値σを記憶保持し、画像補正用シャッタＡ１２が開く。
【００２５】
従来の装置では、撮像中に素子感度の補正ずれを測定する手段をもたなかったため、キャリブレーションは表示される画面を見ているオペレータの主観によって行われていた。この発明では素子感度の補正ずれの状態を撮像中に定量的に把握する手段を従来の装置に付加し、従来使用者が主観に基づき行っていたキャリブレーション指令を自動生成することで、自動でキャリブレーションを行えるようにし、結果として安定した映像品質の赤外線画像を出力できるようにしている。また、統計的手法を用いたデジタル計算処理を行う簡単な回路構成により、複雑な回路による構成要素を使わずに感度ばらつきを測定することができる。
【００２６】
実施の形態２．
図２はこの発明の実施の形態２を示すブロック図である。図において、１３ｃは画像補正器ＡＡ、１５は画像補正用シャッタＢ、１６はシェーディング量測定器である。それ以外で、１２から１４は実施の形態１と、他は従来の装置と同一である。
【００２７】
次に動作の説明をする。本実施の形態２においても通常の撮像動作は、従来の装置と同じである。本実施の形態における画像補正用シャッタＢ１５は、赤外レンズ１に入射される赤外光を遮断するために赤外レンズ１の手前におく。なお、反応速度は画像補正用シャッタＡと同じ程度のものを使用している。撮像制御器９は例えば１５秒に一度程度ずつ交互に画像補正用シャッタＡ１２と画像補正用シャッタＢ１５に１フレームの赤外光遮断の指令を出すとともに画像補正器ＡＡ１３ｃに赤外画像が遮断されることを伝える。画像補正器ＡＡ１３ｃは、画像補正器Ａ１３について、出力切換を３系統にかえた出力切換スイッチＡ１３ｄに変更したもので、画像補正用シャッタＡが閉じた場合は感度ばらつき測定器１４に、画像補正用シャッタＢが閉じたときはシェーディング量測定器１６に画像データを出力する。シェーディング量測定器１６は感度ばらつき測定器１４と同じような構成で、フレームメモリとシェーディング判定器を持っており、画面の部分ごとのシェーディング量を測定する。図１３はシェーディング量測定動作の概要を示す図である。シェーディング量測定器１６は入力された１画面分のデータを図１３のように例えば４８の領域に分割し、各々の領域の画像データの平均値を求める。シェーディング量測定器１６に入力される画像データは、画像補正用シャッタＢ１５が閉じ、外界からの赤外光が遮断されている状態の画面なので、シェーディングが無い場合、各々の領域の輝度の平均値の差はない。すなわちこの各々の領域の平均値に差があれば、それはシェーディングによるものといえる。図１４にシェーディング補正できている場合とできていない場合の各々の領域の輝度の平均値の分布を示している。図中、４２は補正できている場合の分布、４３は補正できていない場合の分布である。図１４に示すとおり、補正できている場合は、分布の幅は狭く、できていない場合は分布の幅は広くなる。シェーディング量測定器１６は各々の領域の輝度の平均値から最大値と最小値を求めることで、分布の幅を測定し、それが例えば前回のキャリブレーション直後の平均値βから３倍（３β）をこえたところで（あるいは直後の平均値とあらかじめ設定した値との和をこえたところで）シェーディング測定器１６のシェーディング判定器が画像補正用シャッタＢ１５を閉じた状態でキャリブレーション（例えばデフォーカスキャリブレーション）を行う画像補正指令信号１１を撮像制御部９に出力する。また感度ばらつき測定器１４は実施の形態１と同様の動作で感度ばらつきを検出した場合、画像補正用シャッタＡ１２を閉じた状態でキャリブレーションを行う画像補正指令信号１１を撮像制御部９に出力する。撮像制御部９は画像補正指令信号１１を受けて画像補正器７にキャリブレーション指令を送り、キャリブレーション終了直後、感度ばらつき測定器１４は新たに輝度の標準偏差の平均値αを記憶保持し、画像補正用シャッタＡ１２が開き、またはシェーディング量測定器１６は新たに輝度の平均値の分布の幅βを記憶保持し、画像補正用シャッタＢ１５が開く。
【００２８】
従来の装置では、撮像中にシェーディングの補正ずれを測定する手段をもたなかったため、キャリブレーションは表示される画面を見ているオペレータの主観によって行われていた。この発明では素子感度の補正ずれの状態を撮像中に定量的に把握する手段及びシェーディングの補正ずれの状態を撮像中に定量的に把握する手段を従来の装置に付加し、従来使用者が主観に基づき行っていたキャリブレーション指令を自動生成することで、レンズシェーディング補正を含めた自動でのキャリブレーションを行えるようにし、結果として安定した映像品質の赤外線画像を出力できるようにしている。
【００２９】
実施の形態３．
図３はこの発明の実施の形態３を示すブロック図である。図において、１７は補正状態判定器である。それ以外は、実施の形態２と同一である。
【００３０】
次に動作について説明する。本実施の形態３において、撮像動作及び感度ばらつき、シェーディングの量の測定動作は実施の形態２と全く同じである。本形態においては、補正状態判定器１７がキャリブレーション状態を判定し、内部にもつプログラムに基づき３種類のキャリブレーションをシーケンシャルに行えるようにしている。図１５にキャリブレーション制御の流れ図を示す。補正状態判定器１７は感度ばらつき測定器１４もしくはシェーディング量測定器１６からキャリブレーション要求を受けると、キャリブレーション実行状態となり、撮像制御器９に赤外レンズ１のピントをずらす指令（デフォーカス指令）を出させる。ピントが充分にずれて、かつ二つの画像補正シャッタが開いた状態で画像補正器ＡＡ１３ｃは第一のキャリブレーションを実施する（デフォーカスキャリブレーション）。デフォーカスキャリブレーションが終了した時点で、補正状態判定器１７よりデフォーカスキャリブレーション終了指令を受けて撮像制御器９は赤外レンズ１のピントを元に戻して画像補正用シャッタＢ１５を２フレーム分の時間閉じる。シャッタが閉じられたところで、画像補正器Ａ１３は感度ばらつき測定器１４及びシェーディング量測定器１６に出力を切り換え各々に１フレームずつの画像データを送る。感度ばらつき測定器１４及びシェーディング量測定器１６は感度ばらつき及びシェーディング量を測定し補正状態判定器１７に結果を送る。補正状態判定器１７は各々の結果が前回のキャリブレーション直後の測定値に対して許容範囲内であるか、あらかじめ設定されて内部のメモリに記憶されている値と比較し判定する。補正状態が許容範囲内であればデフォーカスキャリブレーションが正常に終了したとみなしキャリブレーション操作は終了する。補正状態が許容範囲外と判定された場合、補正状態判定器１７は撮像制御器９に画像補正用シャッタＢ１５のみを閉じた状態の第二のキャリブレーション（レンズシェーディングキャリブレーション）を要求する。レンズシェーディングキャリブレーションが終了した時点で、撮像制御器９は画像補正用シャッタＡ１２を１フレーム分の時間閉じる。シャッタが閉じられたところで、画像補正器ＡＡ１３ｃは感度ばらつき測定器１４のみに画像データを送る。感度ばらつき測定器１４は感度ばらつきを測定し、補正状態判定器１７に結果を送る。補正状態判定器１７は結果が前回のキャリブレーション直後のばらつきの測定値として許容範囲内であるか、あらかじめ設定されて内部のメモリに記憶されている値と比較し判定する。ここで補正状態が許容範囲内と判定された場合はキャリブレーションは終了し、感度ばらつきとシェーディングの測定値を記憶する。仮に許容範囲外と判定された場合は、画像補正用シャッタＡ１２を閉じた状態の第三の感度キャリブレーションを行いキャリブレーションを終了し、感度ばらつきとシェーディングの測定値を記憶する。また、キャリブレーション終了時点で補正状態判定器１７のキャリブレーション実行状態が解除される。
【００３１】
従来の装置では、どの運用状態でどのキャリブレーションを行うか使用者の主観で決定しており、またキャリブレーションの後にシェーディングの補正ずれや、感度のばらつきを測定する手段をもたなかったため、画面に補正むらを残したままで装置が運用されることがあった。例えば、航空機に搭載された本発明の赤外線撮像装置が空や海等の均一な温度背景を撮像している場合、デフォーカスキャリブレーションを行うのが最もよいキャリブレーションであるが、背景の中に雲や太陽が入ってくることにより、赤外レンズ１のピントをずらしても背景が均一にならず、レンズシェーディングキャリブレーションを行う方がよい場合がある。また、レンズシェーディングキャリブレーションを行う場合は、赤外レンズ１と画像補正用シャッタＢ１５との間に温度差があってレンズシェーディングキャリブレーションがうまく行かないことがあるので、この時は感度キャリブレーションを行う。このように使用者は状況に応じてキャリブレーション方法を選定する必要がある。本発明ではキャリブレーションの成否を判断する手段を付け加えることで、３種類のキャリブレーション指令をシーケンシャルに発生させることが可能となり、これにより運用状態における最も有効なキャリブレーションが自動的に選択されるようになるため、結果として安定した映像品質の赤外線画像を出力できる。
【００３２】
実施の形態４．
図４はこの発明の実施の形態４を示すブロック図である。図中、１８は感度ばらつき変化測定器である。それ以外で、１４と１３は実施の形態１と、他は従来の装置と同一である。
【００３３】
次に動作について説明する。通常の撮像動作に関しては従来の装置と同等であるが、本実施の形態では、環境の温度変化が小さく画面内の輝度に大きな影響を与えないような場合を想定している。また、本実施の形態においては、感度ばらつき測定器１４は常に画像補正器１３からデータを受け、実施の形態１と同様の操作で画面全体の各ゲート内の標準偏差を測定し、その平均値を感度ばらつき変化測定器１８に出力する。従来の装置では、正常にキャリブレーションが終了した後、温度環境等の変化状態にもよるが、３０分程度ごとにはキャリブレーションをやりなおしており、経験的にキャリブレーション直後１０分程度は出力される画像の状態は良好であるといえる。感度ばらつき変化測定器１８は、感度キャリブレーション実施後のあらかじめ設定された時間、例えば１０分間程度、感度ばらつき測定器１４から受けた標準偏差の平均値のデータを内部のメモリに蓄える。データが蓄積された時点で、感度ばらつき変化測定器１８は”数２”によりばらつきの時間的な変化量を求める。
【００３４】
【数２】
【００３５】
図１６は感度ばらつきの平均値と時間の関係を示したグラフである。図中、４４は測定された感度ばらつき平均値のライン、４５は求められるばらつきの時間的な変化のラインである。赤外線撮像装置がほぼ同じような画面を写し続けているとすると、感度キャリブレーション直後に見られる輝度のばらつきの大きさは、画面の持つ輝度のばらつきの固有値Ｃであると考えられる。当然、赤外線撮像装置の撮像対象が変化するにつれ画面の輝度のばらつきも変わるが、もし補正の劣化が起こらないのであれば、測定値は固有値Ｃを中心にＤの幅をもって観測される。ところが実際は時間の経過に伴い補正ずれが発生し徐々に大きくなるので、図１６に示すように輝度のばらつきの各ゲート内の標準偏差の平均値は増大する。感度ばらつき変化測定器１８は”数２”によって感度ばらつきの単位時間あたりの変化量を求め、その値に感度キャリブレーションしてからの経過時間をかけることで、例えば、感度キャリブレーション後１０分経過後の或時点での感度ばらつきの増加量を推測し、その値が感度キャリブレーションの直後の輝度ばらつきの各ゲート内の標準偏差の平均値の３倍（３σ）をこえた時点で、撮像制御器９に画像補正指令信号１１を出力する。
なお、本実施の形態における画像補正器は、従来の装置の画像補正器７と同様にフレームメモリを持たず、画像補正用シャッタ２が閉じている間に画像補正用シャッタ２の像を外部機器に出力するものであってもよい。
【００３６】
従来の装置では、感度キャリブレーションの後に継続して、画面の輝度のばらつきとその変化量を測定する手段をもたなかったため、感度キャリブレーションは表示される画面を見ているオペレータの主観によって行われていた。また、実施の形態１では外界から入射される赤外光を遮断するため、非常に短い時間ではあるが一定間隔で画像がとぎれてしまい、目標の検出や追尾を行う場合に複雑な信号処理が必要となる。本発明では画面の輝度ばらつきの状態とその変化を定量的に測定する手段を従来の装置に付加し、従来使用者が主観に基づき行っていたキャリブレーション指令を自動生成することで、自動で感度キャリブレーションを行えるようにするとともに、キャリブレーション後あらかじめ定められた時間経過後は、画像のとぎれをなくし、結果として安定した映像品質の赤外線画像を出力するとともに、後段で目標検出や追尾などをするために都合のよい画像を出力している。
【００３７】
実施の形態５．
図５はこの発明の実施の形態５を示すブロック図である。図において１９は画像補正用シャッタＣ、２０はシェーディング量変化測定器、１３ｃは実施の形態２と同一である。それ以外は実施の形態４と同一である。
【００３８】
次に動作について説明する。実施の形態５について、通常の撮像動作及び感度ばらつき変化測定器によるキャリブレーション要求までは実施の形態４と同じであり、環境の温度変化が小さい場合を想定している。画像補正用シャッタＣ１９は従来の装置に使用されている画像補正用シャッタ２と同程度の反応速度のもので、レンズシェーディングキャリブレーションの際に、外界の赤外光を遮断することのみを目標としている。この画像補正用シャッタＣ１９は、赤外線撮像装置に視軸駆動機構がついていて、撮像装置を格納する機能がある場合などは、それを持って代用することもある。シェーディング量測定器１６は常に画像補正器７からデータを受け、実施の形態２と同様に例えば４８に分割された各々の領域の輝度の平均値を測定する。シェーディング量変化測定器２０は感度ばらつき変化測定器１８と同様にキャリブレーション後あらかじめ設定された時間、例えば１０分間はシェーディング量測定器１６の測定した輝度の平均値を、画面の中心からの距離に応じて図１７のようにまとめ直し、この領域ごとの平均値として内部のメモリに蓄積する。また例えば１０分経過後は各々の領域について”数３”に基づき輝度平均値の時間変化量を求める。
【００３９】
【数３】
【００４０】
図１８は図１７で示した領域Ａと領域Ｅの輝度の平均値と時間の関係を示したグラフである。図中、４６は領域Ａで測定された輝度の平均値のライン、４７は領域Ｅで測定された輝度の平均値のライン、４８は領域Ａで求められる輝度平均値の時間的な変化のライン、４９は領域Ｅで求められる輝度平均値の時間的な変化のラインである。赤外線撮像装置がほぼ同じような画面を写し続けているとすると、キャリブレーション直後に見られる輝度の平均値の大きさは、画面の輝度の固有値Ｃであると考えられる。当然、赤外線撮像装置の撮像対象が変化するにつれ画面の輝度ばらつきも変わるが、もし補正の劣化が起こらないのであれば、測定値は固有値Ｃを中心にＤの幅をもって観測される。ところが実際は時間の経過に伴いシェーディング量が変化するため、図１８に示すように輝度の平均値は変化する。シェーディング量変化測定器２０は”数３”によって領域ごとの輝度の単位時間あたりの変化量を求め、その値にキャリブレーションしてからの経過時間をかけることで、現時点の領域ごとの輝度の変化量を推測し、その値の最大値と最小値の差が、例えば前回のキャリブレーション直後の各々の領域の輝度の平均値の３倍（３σ）を越えた時点で（あるいは、直後の平均値とあらかじめ設定した値との和を越えたところで）、撮像補正用シャッタＣを閉じた状態でレンズシェーディングキャリブレーションを行う画像補正指令信号１１を撮像制御器９に出力する。また、感度ばらつき変化測定器１８は実施の形態４と同様要領で画像補正用シャッタ２を閉じた状態で感度キャリブレーションを行う画像補正指令信号１１を撮像制御器９に出力する。
なお、本実施の形態における画像補正器は、従来の装置の画像補正器７と同様にフレームメモリを持たず、画像補正用シャッタ２が閉じている間に画像補正用シャッタ２の像を外部機器に出力するものであってもよい。
【００４１】
従来の装置では、キャリブレーションの後に継続して、画面のシェーディングとその変化量を測定する手段をもたなかったため、キャリブレーションは表示される画面を見ているオペレータの主観によって行われる。また、実施の形態２では外界から入射される赤外光を遮断するため、非常に短い時間ではあるが一定間隔で画像がとぎれてしまい、目標の検出や追尾を行う場合に複雑な信号処理が必要となる。本発明では画面の輝度ばらつきの状態とその変化を定量的に測定する手段及び画面のシェーディングの状態とその変化を定量的に測定する手段を従来の装置に付加し、従来使用者が主観に基づき行っていたキャリブレーション指令を自動生成することで、レンズシェーディング補正を含めた自動でのキャリブレーションを行えるようにするとともに、キャリブレーション後あらかじめ設定された時間経過後は、画像のとぎれをなくし、結果として安定した映像品質の赤外線画像を出力するとともに、後段で目標検出や追尾などをするために都合のよい画像を出力している。
【００４２】
実施の形態６．
図６はこの発明の実施の形態６を示すブロック図である。図において２１は画像補正器Ｂ、２２はシェーディング補正量設定器Ａである。それ以外は実施の形態５と同一である。
【００４３】
次に動作について説明する。実施の形態６について、赤外レンズ１からＡ／Ｄ変換器６までの動作と感度ばらつき変化測定器１８によるキャリブレーション要求は実施の形態４と同じである。画像補正器Ｂ２１は感度キャリブレーションにより事前に感度ばらつきが補正された画像データを感度ばらつき測定器１４に出力すると同時にシェーディング量測定器１６に出力する。感度ばらつき測定器１８は実施の形態５と同じ要領で画像補正用シャッタ２を閉じた状態で感度キャリブレーションを行う画像補正指令信号１１を撮像制御器９に出力する。しかしながら、画像補正用シャッタ２は赤外レンズ１の内側にあるため、レンズシェーディングまで含めた、キャリブレーションは行えない。そのため、本実施の形態６では、シェーディングの補正をするための回路として、シェーディング補正量設定器Ａ２２を付加している。今、画像補正器Ｂ２１によるキャリブレーション終了後、画像補正用シャッタ２を開いた状態で、例えば航空機に搭載された本発明の赤外線撮像装置において１フレーム間の画像の変化が小さい（ある一定領域の輝度の時間平均がほとんど変化しない）背景や目標を撮像している場合を考える。シェーディング補正量設定器Ａ２２はシェーディング量変化測定器２０から、図１７に示した５つの領域のキャリブレーション後からの輝度の変化量を受け、画面の中央からの距離に対応したシェーディングの補正量を定める。図１９はシェーディング補正量設定器Ａ２２の補正量設定の概念図である。図中５０から５４はシェーディング量変化測定器２０から得られる領域ＡからＥの輝度の平均値の傾きに一つ前のキャリブレーション終了時からの経過時間をかけて求めた輝度の平均値の増加量を示すプロットであり、５５は定められたシェーディングの補正量を示すシェーディングラインである。シェーディング補正量設定器Ａ２２は５つのプロットから適当な２次の曲線を求め、かつそれを輝度変化量０のラインについて反転させたラインをシェーディング補正量として画像補正器Ｂ２１に出力する。画像補正器Ｂ２１は感度ばらつきのみを補正した画面からシェーディング補正量を差し引いたデータをＤ／Ａ変換器８にリアルタイムで送る。実施の形態２や実施の形態５ではレンズシェーディングをキャリブレーションで補正するために、レンズの前面シャッタを置くという、機構的な構成となっている。それに対し、本実施の形態６では、従来の赤外線撮像装置の機構的な構成をできるだけかえず、かつ前述のシェーディングキャリブレーションのように補正用の均一温度面でデータを取り込むという操作をせずに、電気的な信号処理でリアルタイムにレンズシェーディング補正を達成する。
また、シェーディング量変化測定器２０から得られる輝度の変化量は画像補正用シャッタ２を開いた状態で得られるので、一定時間ごとに変化量を更新していけば補正の精度が高くなる。
【００４４】
従来の装置では、キャリブレーションの後に継続して、画面のシェーディングとその変化量を測定し、その値から補正するシェーディング量を決める手段とを持たなかったため、レンズシェーディングをキャリブレーションで補正するしかなく、そのためにレンズの前面にシャッタを置くという機構的な構成が必要だった。本実施の形態６では、従来の赤外線撮像装置の機構的な構成をできるだけかえずに、電気的な信号処理回路を付加することでリアルタイムのレンズシェーディング補正を達成しているとともに、画面の輝度ばらつきの状態とその変化を定量的に測定する手段を従来の装置に付加し、従来使用者が主観に基づき行っていたキャリブレーション指令を自動生成することで、自動でキャリブレーションを行い、安定した映像品質の赤外線画像を出力する。
【００４５】
実施の形態７．
図７はこの発明の実施の形態７を示すブロック図である。図において２３は赤外レンズＡ、２４は温度信号、２５は温度変化測定器、２６はシェーディング補正量設定器Ｂである。それ以外は実施の形態６と同一である。
【００４６】
次に動作について説明する。実施の形態７について、通常の撮像動作と感度ばらつき変化測定器１８によるキャリブレーション要求は実施の形態６と同じである。赤外レンズＡ２３はレンズの鏡筒部分の温度を測定する温度モニタ５８を持ち温度信号２４を温度変化測定器２５に送る。温度変化測定器２５は前回のキャリブレーションしてからの順次入力される温度信号２４から赤外レンズＡ２３の温度差を測定しシェーディング補正量設定器Ｂ２６に出力する。シェーディング補正量設定器Ｂ２６は内部のメモリに赤外レンズＡ２３の固有のレンズシェーディングの特性（例えば、温度差の４乗に比例して赤外線のエネルギー量が変化する。）を示すデータを保持している。図２０はシェーディング補正量設定器Ｂ２６の保持している上記データの１例を示す図である。図中、５６は赤外レンズＡ２３が温度差Ａのときに持っているシェーディングライン、５７は温度差Ｂのときに持っているシェーディングラインをそれぞれ示している。上記シェーディングラインは、輝度の増加量を使用する温度範囲内におけるレンズ鏡筒部分の温度差と画面中心からの距離の関数として表現したものである。上記内部のメモリ内には、例えばあらかじめシュミレーションや実験計測結果に基づいて離散化された上記シェーディングラインの節点が記憶されており、温度差に対応した所要のシェーディングラインを節点間を適度に補間することによって得ることができる。あるいは、上記内部のメモリ内に、上記シェーディングラインを多項式のような近似手段で表現した近似式の定数が記憶されており、温度差と画面中心からの距離から所要の輝度の増加量を出力することによってシェーディングラインを表現してもよい。シェーディング補正量設定器Ｂ２６は図２０に示すようなシェーディングラインから、画面中心からの位置ごとに温度変化に対応して、例えば温度差がＢのときは、温度Ｂのシェーディングライン５７を打ち消すように輝度の増加量を求め、シェーディングの補正量を決めて画像補正器Ｂ２１に出力する。画像補正器Ｂ２１は実施の形態６と同じ動作でＤ／Ａ変換器８にシェーディング補正されたデータをリアルタイムで送り、出力映像信号１０を出力する。実施の形態６では、画像データから各々の画素の補正量を定めていたため、画像を測定するための回路と、補正量を定める回路が必要であったが、本実施の形態７ではシェーディングが温度差に依存する性質を利用して温度を測定することにより、画像を測定する回路を無くすことができるため、少ない回路規模で同等の機能を達成できる。温度測定回路は熱電対と抵抗とトランジスタで構成できるのに対し、画像を測定する回路にはシェーディング量測定器１６内のフレームメモリのような画像を記憶するための膨大なメモリと高速の演算装置が必要である。また、上記固有のレンズシェーディングの特性データに要するメモリは、温度特性を離散的に表現する代表的な幾つかの点を記憶する程度でよく、上記画像を記憶するための膨大なメモリよりは充分小さくなり、小型、軽量化がはかれる。
【００４７】
従来の装置では、キャリブレーションの後に継続して光学系の温度とその変化量を測定し、その値から補正するシェーディング量を決める手段とを持たなかったため、レンズシェーディングをキャリブレーションで補正するしかなく、そのためにレンズの前面にシャッタを置く機構的な構成が必要であった。本実施の形態７では光学系の温度とその変化を定量的に測定する手段とレンズの特性データを保持している手段を付加することで、前述の実施の形態６よりも簡単な信号処理回路でリアルタイムのレンズシェーディング補正を達成している。また、画面の輝度ばらつきの状態とその変化を定量的に測定する手段を付加し、従来使用者が主観に基づき行っていたキャリブレーション指令を自動生成することで、自動でキャリブレーションを行い、安定した映像品質の赤外線画像を出力する。
【００４８】
実施の形態８．
この発明の実施の形態は、実施の形態１，２，４，５の感度ばらつき測定器において画像の補正ずれを定量的に検知した後、アラーム音や点滅光などの警告信号（または、目盛による警告表示）を発生するものである。これによって、使用者が画像の補正ずれを定量的に把握でき、画像補正器のキャリブレーションを手動で行うタイミングを得ることができる。
【００４９】
実施の形態９．
この発明の実施の形態は、実施の形態２，４，８のシェーディング量測定器において画像の補正ずれを定量的に検知した後、アラーム音や点滅光などの警告信号（または、目盛による警告表示）を発生するものである。これによって、使用者が画像の補正ずれを定量的に把握でき、画像補正器のキャリブレーションを手動で行うタイミングを得ることができる。
【００５０】
【発明の効果】
この第一の発明にかかる赤外線撮像装置は、素子感度の補正ずれの状態を撮像中に各画素ごとに求めた輝度の偏差の平均値を用いて定量的に把握する手段を従来の装置に付加したことで、従来使用者が主観に基づきおこなっていたキャリブレーション指令を生成して、キャリブレーションを行うことができる。これによって操作が簡単でありながら、素子感度の補正ずれやシェーディングの補正ずれによる性能劣化が少なく、使用者がキャリブレーション操作に煩わされることのない赤外線撮像装置を得ることができる。
【００５１】
また、第二の発明によれば、素子感度の補正ずれの状態を撮像中に定量的に把握する手段及びシェーディングの補正ずれの状態を撮像中に画面内に分割された幾つかの領域内の輝度の平均値から全領域の輝度分布を求めて定量的に把握する手段を従来の装置に付加したことで、従来使用者が主観に基づきおこなっていたキャリブレーション指令を生成し、レンズシェーディング補正を含めた自動でのキャリブレーションが行える。
【００５２】
また、第三の発明によれば、キャリブレーションの成否を判断する手段を付け加えることで、３種類のキャリブレーション指令をシェーディングに発生させることが可能となり、これにより運用状態における有効なキャリブレーションが自動的に選択され、実施される。これによって、最適なキャリブレーションをされた状態の画像を出力できる赤外線撮像装置を得ることができる。
【００５３】
また、第四の発明によれば、画面の輝度ばらつきの状態とその変化を定量的に測定する手段を従来の装置に付加したことで、従来使用者が主観に基づき行っていたキャリブレーション指令を生成し、自動でキャリブレーションが行える。また、第一の発明では短時間の画像のとぎれが発生するが、後段で目標検出や追尾などの信号処理する場合に都合のよい画像を出力できる。これによって信号処理にも適した画像を出力する赤外線撮像装置を得ることができる。
【００５４】
また、第五の発明によれば、画面の輝度ばらつきの状態とその変化を定量的に測定する手段及び画面のシェーディングの状態とその変化を定量的に測定する手段を従来の装置に付加したことで、従来使用者が主観に基づき行っていたキャリブレーション指令を生成し、レンズシェーディング補正を含めた自動でのキャリブレーションが行える。また、第二の発明で起きていた短時間の画像のとぎれをなくすことで、後段で目標検出や追尾などをする場合に都合のよい画像を出力できる。
【００５５】
また、第六の発明によれば、画面のシェーディングの状態とその変化を定量的に測定し、かつそれによって補正する量を定める手段を付加したことでリアルタイムのレンズシェーディング補正を達成している。また、画面の輝度ばらつきの状態とその変化を定量的に測定する手段を従来の装置に付加したことで、従来使用者が主観に基づき行っていたキャリブレーション指令を生成し、自動でキャリブレーションを行える。これによってレンズシェーディングがリアルタイムに補正されることによりシェーディングの補正ずれによる性能劣化が少なく、従来の装置ほど頻繁にキャリブレーションが行われない赤外線撮像装置を得ることができる。
【００５６】
さらにまた、第七の発明によれば、光学系の温度とその変化を定量的に測定する手段とレンズの特性データを保持している手段を付加したことで、第六の発明より簡単な回路でリアルタイムのレンズシェーディング補正を達成している。また、従来の装置ほど頻繁にキャリブレーションが行われない赤外線撮像装置をより小型軽量で得ることができる。
【図面の簡単な説明】
【図１】 この発明の実施の形態１の構成を示すブロック図である。
【図２】 この発明の実施の形態２の構成を示すブロック図である。
【図３】 この発明の実施の形態３の構成を示すブロック図である。
【図４】 この発明の実施の形態４の構成を示すブロック図である。
【図５】 この発明の実施の形態５の構成を示すブロック図である。
【図６】 この発明の実施の形態６の構成を示すブロック図である。
【図７】 この発明の実施の形態７の構成を示すブロック図である。
【図８】 従来の装置の構成を示すブロック図である。
【図９】 従来の装置のキャリブレーションの概要を示す図である。
【図１０】 目標の発生する光をレンズを通し集光する様子を示す図である。
【図１１】 シェーディング画像の一例を示すディスプレイ上の中間値画像である。
【図１２】 感度ばらつき測定動作の概要を示す図である。
【図１３】 シェーディング量測定動作の概要を示す図である。
【図１４】 シェーディング補正状態による領域の輝度平均値の分布を示す図である。
【図１５】 キャリブレーション制御の流れ図である。
【図１６】 感度ばらつきの平均値と時間の関係を示した図である。
【図１７】 輝度測定領域をまとめ直した様子を示す図である。
【図１８】 輝度の平均値と時間の関係を示す図である。
【図１９】 シェーディング補正量設定器Ａ２２のシェーディング補正量設定の概念図である。
【図２０】 シェーディング補正量設定器Ｂ２６のシェーディング補正量設定の概念図である。
【符号の説明】
１ 赤外レンズ、２ 画像補正用シャッタ、３ 赤外線検知器、４ アンプ、５ サンプルホールド回路、６ Ａ／Ｄ変換器、７ 画像補正器、８ Ｄ／Ａ変換器、９ 撮像制御器、１０ 出力映像信号、１１ 画像補正指令信号、１２ 画像補正用シャッタＡ、１３ 画像補正器Ａ、１３ａ 出力切換スイッチ、１３ｂ フレームメモリ、１３ｃ 画像補正器ＡＡ、１３ｄ 出力切換スイッチＡ、１４ 感度ばらつき測定器、１４ａ フレームメモリ、１４ｂ 標準偏差測定器、１４ｃ 標準偏差記憶器、１４ｄ 感度ばらつき判定器、１５ 画像補正用シャッタＢ、１６ シェーディング量測定器、１７ 補正状態判定器、１８ 感度ばらつき変化測定器、１９ 画像補正用シャッタＣ、２０ シェーディング量変化測定器、２１ 画像補正器Ｂ、２２ シェーディング補正量設定Ａ、２３ 赤外レンズＡ、２４ 温度信号、２５ 温度変換測定器、２６ シェーディング補正量設定Ｂ、２７ 出力特性ラインａ、２８ 出力特性ラインｂ、２９ 出力特性ラインａａ、３０ 出力特性ラインｂｂ、３１ 出力ラインｃ、３２ 目標Ａ、３３ 目標Ｂ、３４ レンズ、３５ 結像面、３６ 光束ＡＡ、３７ 光束ＢＢ、３８ 画像データ、３９ ばらつき測定ゲート、４０ 計測された感度ばらつき、４１ シェーディング測定領域、４２ 補正できている場合の輝度平均値の分布、４３ 補正できていない場合の輝度平均値の分布、４４ 測定された感度ばらつき平均値のライン、４５ ばらつきの時間的変化のライン、４６ 領域Ａの輝度平均値ライン、４７ 領域Ｅの輝度平均値ライン、４８ 領域Ａの輝度平均値の時間変化ライン、４９ 領域Ｅの輝度平均値の時間変化ライン、５０ 領域Ａのシェーディング変化量のプロット、５１ 領域Ｂのシェーディング変化量のプロット、５２ 領域Ｃのシェーディング変化量のプロット、５３ 領域Ｄのシェーディング変化量のプロット、５４ 領域Ｅのシェーディング変化量のプロット、５５ シェーディング補正量を示すライン、５６ 温度Ａの時の赤外レンズＡ２３のシェーディングライン、５７ 温度Ｂの時の赤外レンズＡ２３のシェーディングライン、５８ 温度モニタ。
【発明の属する技術分野】
この発明は、対象物から放射される赤外光を集光し、光電変換した後、映像信号として出力する赤外線撮像装置に関するものである。
【０００２】
【従来の技術】
一般に、従来の赤外線撮像装置は、航空機、車両、艦船などに搭載されて、夜間監視を用途に使われている。
【０００３】
図８は従来のこの種の赤外線撮像装置の一例の構成図であり、１は赤外レンズ、２は画像補正用シャッタ、３は二次元赤外線検知素子を持つ赤外線検知器、４はアンプ、５はサンプルホールド回路、６はＡ／Ｄ変換器、７は画像補正器、８はＤ／Ａ変換器、９は撮像制御器、１０は出力映像信号、１１は画像補正指令信号である。
【０００４】
次に動作について説明する。目標物体の撮像動作として、赤外レンズ１は目標物体及びその背景から放射される赤外光を集光し、赤外線検知器３上に赤外像を結像する。赤外線検知器３には検知画素が二次元的に配列されており、各検知画素は結像された赤外像の一部を光電変換する。アンプ４は各検知画素の発生する断続信号を増幅し、サンプルホールド回路５はアンプ４から出力される断続信号を連続した走査信号に変換する。その信号はさらに画像補正処理しやすいようにＡ／Ｄ変換器６によりデジタル信号（以下画像データという）に変換された後、画像補正器７により画素ごとに出力される輝度の補正（以下画像補正という）をかけられ、さらに、Ｄ／Ａ変換器８により出力映像信号１０に変換され外部へ出力される。撮像制御部９は、赤外レンズ１へピントの調整指令や、画像補正器７へペデスタルレベルやゲインの調整指令等を、外部からの指令に基づき出力することで撮像装置全系の制御を行う。画像補正用シャッタ２は、外部から画像補正指令信号１１が入力された際に、赤外レンズ１と赤外線検知器３の間の赤外線光路に機械的に挿入されることで、赤外レンズ１が集光する赤外光を遮ると同時に、画像補正器７が画像補正のための補正データ（以下画像補データという）を設定（以下キャリブレーションという）できるような均一な赤外光を、赤外線検知器３上に放射するために使用される。
【０００５】
次に、画像補正に関する以下の二つの基本的な考えを説明する。第一に通常、赤外線検知器３に使用されているような二次元赤外検知素子の検知画素の出力の大きさは、各々の検知画素の微妙な特性の違いにより、同じ温度の物体を撮像した場合でも、ほんの少しばらつく。このばらつきは、感度ばらつきと呼ばれ、表示画像のノイズの原因となる他、遠距離のため画面内の像が小さい目標を追跡する場合、ばらつきによって目標の認識が難しくなり見失うことがあるため、取り除く必要がある。感度ばらつきの画像補正データを設定する動作（以下感度キャリブレーションという。）と感度キャリブレーション後の感度ばらつきの画像補正（以下感度補正という。）について示したのが図９である。図中、２７はある画素ａの出力特性のラインａ、２８はそれとは別の画素ｂの出力特性のラインｂ、２９は温度アで補正をかけた画素ａの出力特性ラインａａ、３０は温度アで補正をかけた画素ｂの出力特性ラインｂｂ、３１は補正によりそろえられる各画素の出力ラインｃである。通常、ラインｃ３１には全検知画素出力特性の平均等が使用される。画像補正器７は各々の画素の出力をラインｃ３１の傾きにあわせるための画素対応の温度の関数として、ラインａ２７及びラインｂ２８など各検知画素出力特性データの傾きを、あらかじめ内部のメモリに保持している。画像補正器７は、例えば温度アで補正をかける場合、まず補正がかけられた温度アで各画素の出力をラインｃ３１に一致させるように、ラインａ２７の出力イ及びラインｂ２８の出力ウに等に相当する全検知画素出力の平均値をラインｃ３１のエに一致させるようにラインａ２７とラインｂ２８から所要の温度に依然しない一定値を加算もしくは減算してラインａａ２９及びラインｂｂ３０を算出する。次にこのラインａａ２９とラインｂｂ３０をメモリに保持されている各画素ごとの関数にかけて各画素の出力を補正出力ラインｃ３１にのせるよう操作し、上記一定値を上記メモリに画像補正データとして記憶する。この際、各々の画素への入力が一定の温度でないと、補正ラインｃ３１にのせるための加算や減算がうまく行かず、補正むらができてしまう。画像補正用シャッタ２は感度キャリブレーション時に、赤外線の光路を遮り画像補正用シャッタ２自身の温度を赤外線検知器３に放射することで、各画素の検知する温度を一定にするために使用される。画像補正器７は画像補正用シャッタ２により赤外線検知器３に均一な温度の赤外線が放射される状態において、むらのない画像補正が可能になる。また、感度キャリブレーション終了後、画像補正器７は、上記メモリに記憶された上記画像補正データと上記各画素ごとの関数により各画素ごとに出力される輝度の補正をかけることによって感度補正を行っていく。
【０００６】
上記が、二次元赤外検知素子の感度補正による画像補正の基本的な考え方である。第二に、実際の赤外線撮像装置では、赤外レンズ１の結像能力によって、像の中心部と端の部分で集められるエネルギーの差が表示画像上に現れることがある。図１０は目標の発する光をレンズを通し集光する様子を簡単に示した図である。３２はレンズの正面に置かれた目標Ａ、３３は斜め前に置かれた目標Ｂ、３４はレンズ、３５は結像面、３６は目標Ａから発する光束ＡＡ、３７は目標Ｂから発する光束ＢＢである。今、目標Ａ３２と目標Ｂ３３は同じ大きさ、同じ温度でありレンズ３４との位置関係のみが図１０に示すとおり異なっているとする。この場合、光束ＡＡ３６に比べ光束ＢＢ３７はレンズ３４に入射する幅が狭く、一定の温度面を撮像しているのにもかかわらず結像面３５でのエネルギー量は均一にならない。図１１にはこのようなエネルギーの不均一が実際にどのような画像に見えるかのディスプレイ上の中間値画像の一例を示してある。今、目標Ａ３２は目標Ｂ３３と温度が同じなので、上記のようなエネルギーの不均一がなければ、同じ明るさに写るはずである。しかしながら画面上では、エネルギーの不均一の影響で目標Ａ３２のほうが明るく、目標Ｂ３３のほうが暗く写る。実際の赤外線撮像装置におけるこのようなエネルギーの不均一の原因としては、このほかにもレンズや他の光学系要素自体から発する赤外光などもあげられ、通常それらを全て含めてレンズシェーディングと呼ぶ（以下シェーディングという。）。従来の赤外線撮像装置では、このようなシェーディングを補正しようとした場合、比較的温度が均一と思われるもの（例えば「空」など）に視軸を向け、レンズのピントをぼかした状態で、かつ補正用のシャッタを閉じずにキャリブレーションを行う方法がある。これは、上記感度キャリブレーション時にピントをぼかした状態のシェーディングによる検知画素の出力の不均一も含めて出力ラインｃ３１からの差分を測定することで、出力ラインｃ３１にのせるために加算もしくは減算される感度補正用の画像補正データに上記差分を含めるためである。また、ピントをずらすのは、ピントがあった状態では赤外線検知器３上に結像された赤外像が画像補正むらの原因になるためである。この画像補正データを設定する動作をデフォーカスキャリブレーションというが、この他にシェーディングを補正するキャリブレーション方法としてレンズの前にシャッタを配置して行う方法があるが、シャッタと赤外線検知器３との間で温度差があると、これも補正むらの原因となるため、この外界を写しながら行うデフォーカスキャリブレーションが、最も出力画像を綺麗に整えるキャリブレーション手段とされている。また、キャリブレーション終了後は、上記感度補正と同様に上記メモリに記憶されるデフォーカスキャリブレーションによる画像補正データと上記各画素ごとの関数により各画素ごとに出力される輝度の補正をかけることによって画像補正を行っていく。
【０００７】
このように、従来の赤外線撮像装置では、キャリブレーションを行い出力画像を整えるのだが、撮像を続けていると、徐々に画像が見にくくなるという現象が起こる。これはキャリブレーションの際に使用した画像補正器７の画素対応の関数が、実際の画素の特性と部分的に違っているため、撮像している外界や装置の温度変化により、画像補正がずれてしまったり、または環境の温度変化によりシェーディングの量が変わってしまったりするためである。このような場合、従来の装置では、運用中の温度状態にあわせたキャリブレーションを何度もやり直すことで、画像の補正状態を修正していた。
【０００８】
【発明が解決しようとする課題】
上記のように、キャリブレーションは二次元赤外線検知素子を使用した赤外線撮像装置にとって、無くてはならない機能であるのだが、通常、画像の状態の把握は定量的に行えずに、表示される画面を見ている使用者の主観によってしまい、そのためキャリブレーションは使用者からの指令によって行われている。このため、使用者の練度によって、赤外線撮像装置の出力する画像の品質が著しく異なるという問題があった。
【０００９】
また、温度に代表される装置使用環境の変化が激しい、例えば航空機に搭載する赤外線撮像装置については、安定した温度環境下で使われるものより、頻繁にキャリブレーションを行う必要がある。しかし、状況に応じて、デフォーカスキャリブレーションやシャッタを利用したキャリブレーションを行うのは操作が複雑で、特に戦闘機のパイロットが使用者の場合などには、他の装置の操作を行いながら、画像の状態を判断しキャリブレーションの指令を行う必要があるため、キャリブレーション操作が使用者の負担になるという問題があった。
【００１０】
この発明は、かかる課題を解消するためになされたものであり、どのような練度の使用者が使用しても出力する画像品質が安定し、またキャリブレーション操作が使用者の負担にならないよう、キャリブレーションを行うタイミングを自動生成し、自動でキャリブレーションを行う赤外線撮像装置を得ることを目的としている。
【００１１】
【課題を解決するための手段】
この第一の発明にかかる赤外線撮像装置は、赤外レンズにより集光された赤外光を遮断する遮断手段と、上記遮断手段により赤外光が遮断されている間の画像信号から赤外線検知器の出力のばらつきを各画素ごとに求めた輝度の偏差の平均値を求めることによって測定する感度ばらつき測定手段と、上記感度ばらつき測定手段による出力のばらつきの測定をあらかじめ設定された時間毎に行う手段、上記感度ばらつき測定手段により測定された出力のばらつきからキャリブレーションを行うための指令信号を生成する手段から成る制御手段とを備えたことにより、素子感度の補正ずれの状態を撮像中に定量的に把握してキャリブレーションを行うタイミングを生成し、自動でキャリブレーションを行えるようにしたものである。
【００１２】
また、この第二の発明にかかる赤外線撮像装置は、赤外レンズにより集光される前の赤外光を遮断する第一の遮断手段と、赤外レンズにより集光された赤外光を遮断する第二の遮断手段と、第一の遮断手段により赤外光が遮断されている間のデジタル画像信号から赤外レンズの放射する赤外光により生ずる上記赤外線検知器の出力の分布を画面内の部分から成る領域ごとの輝度の平均値の分布を求めて測定するシェーディング測定手段と、第二の遮断手段により赤外光が遮断されている間の上記画像信号から上記赤外線検知器の出力のばらつきを各画素ごとに求めた輝度の偏差の平均値を求めることによって測定する感度ばらつき測定手段と、上記シェーディング測定手段による出力信号の分布測定と上記感度ばらつき測定手段による出力のばらつきの測定を交互に行う手段、上記シェーディング測定手段により測定された出力の分布と上記感度ばらつき測定手段により測定された出力のばらつきからキャリブレーションを行うための指令信号を生成する手段から成る制御手段とを備えたことで、素子感度の補正ずれの状態及びシェーディングの補正ずれの状態を撮像中に定量的に把握してキャリブレーションを行うタイミングを生成し、自動でキャリブレーションを行えるようにしたものである。
【００１３】
また、この第三の発明にかかる赤外線撮像装置は、赤外レンズにより集光される前の赤外光を一画面出力単位時間遮断する第一の遮断手段と、赤外レンズにより集光された赤外光を一画面出力単位時間遮断する第二の遮断手段と、第一の遮断手段により赤外光が遮断されている間のデジタル画像信号から上記赤外レンズの放射する赤外光により生ずる出力信号の分布を測定するシェーディング測定手段と、第二の遮断手段により赤外光が遮断されている間の画像信号から赤外線検知器の出力のばらつきを測定する感度ばらつき測定手段と、上記シェーディング測定手段による出力信号の分布測定と上記感度ばらつき測定手段による出力のばらつきの測定を交互に行うよう制御する手段と、上記シェーディング測定手段により測定された出力信号の分布と上記感度ばらつき測定手段により測定された出力のばらつきからキャリブレーションをしなおすための指令信号を生成する手段とから成る制御手段と、上記制御手段が指令信号を生成する際に上記シェーディング測定手段と上記感度ばらつき測定手段の測定結果を利用し段階的に幾つかのキャリブレーションの実施を制御する制御手段を備えたことで、素子感度の補正ずれの状態及びシェーディングの補正ずれの状態を撮像中に定量的に把握してキャリブレーションを行うタイミングを生成するとともに、キャリブレーションの成否を判断し段階的なキャリブレーションを自動で行えるようにしたものである。
【００１４】
また、この第四の発明にかかる赤外線撮像装置は、赤外レンズにより集光された赤外光をキャリブレーションの間遮断する遮断手段と、補正回路の補正した画面の画像信号から画面内の輝度の偏差の平均値を測定する感度ばらつき測定手段と、上記感度ばらつき測定手段により測定された輝度の偏差の平均値から時間に対する上記輝度の偏差の平均値の傾きを測定する手段、上記変化の傾きに一つ前のキャリブレーションを実施した時から経過した時間をかけて輝度の偏差の平均値の増加量を推測することによってキャリブレーションを行うための指令信号を生成する手段とから成る感度ばらつき変化測定手段を具備したことで、画面の輝度ばらつきの状態とその変化を定量的に測定し、その値からキャリブレーションを行うタイミングを生成して、自動でキャリブレーションを行えるようにしたものである。
【００１５】
また、この第五の発明にかかる赤外線撮像装置は、赤外レンズにより集光される前の赤外光をキャリブレーションの間遮断する第一の遮断手段と、上記赤外レンズにより集光された赤外光をキャリブレーションの間遮断する第二の遮断手段と、上記補正回路の補正した画面の画像信号から画面内の輝度の偏差の平均値を測定する感度ばらつき測定手段と、上記感度ばらつき測定手段により測定された輝度の偏差の平均値から時間に対する上記輝度の偏差の平均値の傾きを測定する感度ばらつき変化測定手段と、上記補正回路の補正した画面の画像信号から画面内の位置ごとの輝度の平均を測定する上記シェーディング測定手段と、上記シェーディング測定手段により測定された画面内の位置ごとの輝度の平均からその時間に対する傾きを測定するシェーディング変化測定手段と、上記シェーディング測定手段と上記シェーディング変化測定手段の測定した上記偏差の平均値の傾きと画面内の位置ごとの輝度の平均の傾き及び一つ前のキャリブレーション実施時から経過した時間とからキャリブレーションをしなおすための指令信号を生成する制御手段とを備えたことで、画面の輝度ばらつきの状態とその変化及び画面のシェーディングの状態とその変化を定量的に測定し、それらの値からキャリブレーションを行うタイミングを生成して、自動でキャリブレーションを行えるようにしたものである。
【００１６】
また、この第六の発明にかかる赤外線撮像装置は、赤外レンズにより集光された赤外光をキャリブレーションの間遮断する遮断手段と、補正回路の補正した画面の画像信号から画面内の輝度の偏差の平均値を測定する感度ばらつき測定手段と、上記感度ばらつき測定手段により測定された輝度の偏差の平均値からその時間変化を測定する感度ばらつき変化測定手段と、上記補正回路の補正した画面の画像信号から常に画面内の部分ごとの輝度の平均を測定するシェーディング測定手段と、上記シェーディング測定手段により測定された画面内の位置ごとの輝度からその時間に対する傾きを測定するシェーディング変化測定手段と、第二の測定手段の測定したばらつきの時間変化と一つ前のキャリブレーション時から経過した時間とからキャリブレーションを行うための指令信号を生成する制御手段と、上記シェーディング変化測定手段の測定した画面内の部分ごとの輝度の平均の傾きと前回画像補正用のデータを取得した時から経過した時間とから画面内の部分ごとの輝度の補正量を定める補正量設定手段とを備えたことにより、画面の輝度ばらつきの状態とその変化を定量的に測定し、それらの値からキャリブレーションを行うタイミングを生成して、自動でキャリブレーションを行えるようにするとともに、画面のシェーディングの状態とその変化を定量的に測定することで補正する量を定め、シェーディングをキャリブレーションを行わずに補正できるようにしたものである。
【００１７】
また、この第七の発明にかかる赤外線撮像装置は、赤外レンズにより集光された赤外光をキャリブレーションの間遮断する遮断手段と、補正回路の補正した画面の画像信号から常に画面内の輝度のばらつきを測定する感度ばらつき測定手段と、上記感度ばらつき測定手段により測定された輝度のばらつきからその時間変化を測定する感度ばらつき変化測定手段と、上記感度ばらつき変化測定手段の測定したばらつきの時間変化と前回キャリブレーション時から経過した時間とからキャリブレーションをしなおすための指令信号を生成する制御手段と、上記赤外レンズの温度を測定する温度測定手段と、温度測定手段により測定された温度と一つ前にキャリブレーションを実施したときから経過した時間とから温度差を測定する温度差測定手段と、上記温度差測定手段の測定した温度変化量から画面内の部分ごとの輝度の補正量を定める補正量設定手段とを備えたことにより、画面の輝度ばらつきの状態とその変化を定量的に測定し、それらの値からキャリブレーションを行うタイミングを生成するとともに、光学系の温度とその変化を定量的に測定しかつそれによってシェーディングの補正量を定め、シェーディングをキャリブレーションを行わずに補正できるようにしたものである。
【００１８】
また、この第八の発明にかかる赤外線撮像装置は、上記第一、四、六、七の発明における赤外線撮像装置において、上記補正回路の出力する画像信号を記憶する手段、上記第一の遮断手段により赤外光が遮断されている間は上記記憶する手段から１フレーム前の画像信号を出力する記憶出力手段とを備えたものである。
【００１９】
さらにまた、この第九の発明にかかる赤外線撮像装置は、上記第二、三、五の発明における赤外線撮像装置において、上記補正回路の出力する画像信号を記憶する手段、上記第一、第二の遮断手段により赤外光が遮断されている間は上記記憶手段から１フレーム前の画像信号を出力する手段から成る記憶出力手段とを備えたものである。
【００２０】
【発明の実施の形態】
実施の形態１．
図１は実施の形態１による赤外線撮像装置の構成を示すブロック図である。図１において、１２は画像補正用シャッタＡ、１３は画像補正器Ａ、１４は感度ばらつき測定器である。それ以外は従来の装置と同一である。
【００２１】
次に動作について説明する。通常、赤外レンズ１より入射した目標物体及びその背景からの赤外光は、従来と同じ動作で画像補正器Ａ１３内に設置される画像補正器７で画像補正された後、Ｄ／Ａ変換され出力映像信号１０として外部機器に出力される。出力映像信号１０は１秒間に３０画面（フレーム）分の直列の信号であり、６０分の１秒ごとに、奇数番目の水平ラインの集まった画面（オッドフィールド）と偶数番目の水平ラインの集まった画面（イーブンフィールド）を交互に出力することで、１つの画面を出力する。画像補正用シャッタＡ１２には通常写真のカメラに使用されるような反応の早いものを使用し（従来の画像補正用シャッタは反応速度が秒単位程度に遅いものであった。）、例えば一画面出力単位時間である１フレームに対応する３０分の１秒間、外界から赤外レンズ１をとおして赤外線検知器３に集光される赤外光を遮断できるようにした。撮像制御器９は例えば３０秒に一度程度、画像補正用シャッタＡ１２に１フレームの赤外光遮断の指令を出すとともに画像補正器Ａ１３に赤外光遮断の指令を伝える。画像補正器Ａ１３は内部に画像補正器７と出力切換スイッチ１３ａとフレームメモリ１３ｂをもち、赤外光の遮断の指令を受けることで出力切換スイッチ１３ａをキの側に切り換える。出力切換スイッチ１３ａがキの側に切り換えられると、フレームメモリ１３ｂのデータは更新されず結果として後段のＤ／Ａ変換器８に一つ前と同じフレームの画像データが送られる。赤外光が遮断されている間、画像補正器７の出力する画像データは出力切換スイッチ１３ａのキをとおし感度ばらつき測定器１４に送られる。感度ばらつき測定器１４は内部に各画素に対応するフレームメモリ１４ａ、標準偏差測定器１４ｂ及び標準偏差記憶器１４ｃを持っており、感度ばらつきを測定する。また、撮像制御器９からあらかじめ設定された時間後に自動的に、あるいは赤外光の遮断解除の指令が出力されて、上記出力切換スイッチ１３ａがオの側に切り換って画像補正器７から出力される画像データはＤ／Ａ変換器８に出力される。
【００２２】
図１２は感度ばらつき測定動作の概要を示す図である。図中、３８は画像補正器Ａ１３から入力されフレームメモリ１４ａに記憶される画像データを、３９は標準偏差測定器１４ｂにより設定されるばらつきを測定するゲートを、４０は感度ばらつき測定部１４内で計測され標準偏差記憶器１４ｃに記憶される感度ばらつきを示している。感度ばらつき測定器１４では画像データ３８が入力されると、ばらつき測定ゲート３９をＸ方向及びＹ方向に順に動かすことで、フレームメモリ１４ａのアドレスを指定する。フレームメモリ１４ａは指定されたアドレスのデータを標準偏差測定器１４ｂに出力、標準偏差測定器１４ｂは”数１”に従いゲート内の輝度の標準偏差をデジタル計算処理によって求めて感度ばらつきを測定する。
なお、上記輝度の標準偏差のかわりにゲート内の輝度の差分の絶対値の平均を使って感度ばらつきを測定してもよい。
【００２３】
【数１】
測定された輝度の標準偏差は標準偏差記憶器１４ｃ内の対応箇所に記憶される。感度ばらつき測定器１４に入力される画像データは、画像補正用シャッタＡ１２が閉じ、外界からの赤外光が遮断されている状態の画像なので、画像補正が全くずれていない場合、測定された各ゲート内の輝度のばらつきのデータは０になり、輝度の偏差は観測されない。つまり、仮にゲート内で偏差が観測されれば、それが画像補正ずれであるといえる。１画面分の各ゲート内の輝度の標準偏差の測定が完了した時点で、感度ばらつき測定器１４は標準偏差記憶器１４ｃ内の輝度の標準偏差の平均値を求める。この値が例えばあらかじめ記憶された前回のキャリブレーション直後の平均値の３倍（直後の平均値をσとすると３σになる）をこえたところで（あるいは、直後の平均値とあらかじめ設定した値との和をこえたところで）、感度ばらつき判定器１４ｄは補正ずれが発生していると判断し、画像補正用シャッタＡ１２を閉じた状態でキャリブレーションを行うよう画像補正指令信号１１を撮像制御器９に出力する。また、撮像制御器９は画像補正指令信号１１を受けて画像補正器７にキャリブレーション指令を送り、キャリブレーション終了直後、感度ばらつき判定器１４ｄは新たに輝度の標準偏差の平均値σを記憶保持し、画像補正用シャッタＡ１２が開く。
【００２５】
従来の装置では、撮像中に素子感度の補正ずれを測定する手段をもたなかったため、キャリブレーションは表示される画面を見ているオペレータの主観によって行われていた。この発明では素子感度の補正ずれの状態を撮像中に定量的に把握する手段を従来の装置に付加し、従来使用者が主観に基づき行っていたキャリブレーション指令を自動生成することで、自動でキャリブレーションを行えるようにし、結果として安定した映像品質の赤外線画像を出力できるようにしている。また、統計的手法を用いたデジタル計算処理を行う簡単な回路構成により、複雑な回路による構成要素を使わずに感度ばらつきを測定することができる。
【００２６】
実施の形態２．
図２はこの発明の実施の形態２を示すブロック図である。図において、１３ｃは画像補正器ＡＡ、１５は画像補正用シャッタＢ、１６はシェーディング量測定器である。それ以外で、１２から１４は実施の形態１と、他は従来の装置と同一である。
【００２７】
次に動作の説明をする。本実施の形態２においても通常の撮像動作は、従来の装置と同じである。本実施の形態における画像補正用シャッタＢ１５は、赤外レンズ１に入射される赤外光を遮断するために赤外レンズ１の手前におく。なお、反応速度は画像補正用シャッタＡと同じ程度のものを使用している。撮像制御器９は例えば１５秒に一度程度ずつ交互に画像補正用シャッタＡ１２と画像補正用シャッタＢ１５に１フレームの赤外光遮断の指令を出すとともに画像補正器ＡＡ１３ｃに赤外画像が遮断されることを伝える。画像補正器ＡＡ１３ｃは、画像補正器Ａ１３について、出力切換を３系統にかえた出力切換スイッチＡ１３ｄに変更したもので、画像補正用シャッタＡが閉じた場合は感度ばらつき測定器１４に、画像補正用シャッタＢが閉じたときはシェーディング量測定器１６に画像データを出力する。シェーディング量測定器１６は感度ばらつき測定器１４と同じような構成で、フレームメモリとシェーディング判定器を持っており、画面の部分ごとのシェーディング量を測定する。図１３はシェーディング量測定動作の概要を示す図である。シェーディング量測定器１６は入力された１画面分のデータを図１３のように例えば４８の領域に分割し、各々の領域の画像データの平均値を求める。シェーディング量測定器１６に入力される画像データは、画像補正用シャッタＢ１５が閉じ、外界からの赤外光が遮断されている状態の画面なので、シェーディングが無い場合、各々の領域の輝度の平均値の差はない。すなわちこの各々の領域の平均値に差があれば、それはシェーディングによるものといえる。図１４にシェーディング補正できている場合とできていない場合の各々の領域の輝度の平均値の分布を示している。図中、４２は補正できている場合の分布、４３は補正できていない場合の分布である。図１４に示すとおり、補正できている場合は、分布の幅は狭く、できていない場合は分布の幅は広くなる。シェーディング量測定器１６は各々の領域の輝度の平均値から最大値と最小値を求めることで、分布の幅を測定し、それが例えば前回のキャリブレーション直後の平均値βから３倍（３β）をこえたところで（あるいは直後の平均値とあらかじめ設定した値との和をこえたところで）シェーディング測定器１６のシェーディング判定器が画像補正用シャッタＢ１５を閉じた状態でキャリブレーション（例えばデフォーカスキャリブレーション）を行う画像補正指令信号１１を撮像制御部９に出力する。また感度ばらつき測定器１４は実施の形態１と同様の動作で感度ばらつきを検出した場合、画像補正用シャッタＡ１２を閉じた状態でキャリブレーションを行う画像補正指令信号１１を撮像制御部９に出力する。撮像制御部９は画像補正指令信号１１を受けて画像補正器７にキャリブレーション指令を送り、キャリブレーション終了直後、感度ばらつき測定器１４は新たに輝度の標準偏差の平均値αを記憶保持し、画像補正用シャッタＡ１２が開き、またはシェーディング量測定器１６は新たに輝度の平均値の分布の幅βを記憶保持し、画像補正用シャッタＢ１５が開く。
【００２８】
従来の装置では、撮像中にシェーディングの補正ずれを測定する手段をもたなかったため、キャリブレーションは表示される画面を見ているオペレータの主観によって行われていた。この発明では素子感度の補正ずれの状態を撮像中に定量的に把握する手段及びシェーディングの補正ずれの状態を撮像中に定量的に把握する手段を従来の装置に付加し、従来使用者が主観に基づき行っていたキャリブレーション指令を自動生成することで、レンズシェーディング補正を含めた自動でのキャリブレーションを行えるようにし、結果として安定した映像品質の赤外線画像を出力できるようにしている。
【００２９】
実施の形態３．
図３はこの発明の実施の形態３を示すブロック図である。図において、１７は補正状態判定器である。それ以外は、実施の形態２と同一である。
【００３０】
次に動作について説明する。本実施の形態３において、撮像動作及び感度ばらつき、シェーディングの量の測定動作は実施の形態２と全く同じである。本形態においては、補正状態判定器１７がキャリブレーション状態を判定し、内部にもつプログラムに基づき３種類のキャリブレーションをシーケンシャルに行えるようにしている。図１５にキャリブレーション制御の流れ図を示す。補正状態判定器１７は感度ばらつき測定器１４もしくはシェーディング量測定器１６からキャリブレーション要求を受けると、キャリブレーション実行状態となり、撮像制御器９に赤外レンズ１のピントをずらす指令（デフォーカス指令）を出させる。ピントが充分にずれて、かつ二つの画像補正シャッタが開いた状態で画像補正器ＡＡ１３ｃは第一のキャリブレーションを実施する（デフォーカスキャリブレーション）。デフォーカスキャリブレーションが終了した時点で、補正状態判定器１７よりデフォーカスキャリブレーション終了指令を受けて撮像制御器９は赤外レンズ１のピントを元に戻して画像補正用シャッタＢ１５を２フレーム分の時間閉じる。シャッタが閉じられたところで、画像補正器Ａ１３は感度ばらつき測定器１４及びシェーディング量測定器１６に出力を切り換え各々に１フレームずつの画像データを送る。感度ばらつき測定器１４及びシェーディング量測定器１６は感度ばらつき及びシェーディング量を測定し補正状態判定器１７に結果を送る。補正状態判定器１７は各々の結果が前回のキャリブレーション直後の測定値に対して許容範囲内であるか、あらかじめ設定されて内部のメモリに記憶されている値と比較し判定する。補正状態が許容範囲内であればデフォーカスキャリブレーションが正常に終了したとみなしキャリブレーション操作は終了する。補正状態が許容範囲外と判定された場合、補正状態判定器１７は撮像制御器９に画像補正用シャッタＢ１５のみを閉じた状態の第二のキャリブレーション（レンズシェーディングキャリブレーション）を要求する。レンズシェーディングキャリブレーションが終了した時点で、撮像制御器９は画像補正用シャッタＡ１２を１フレーム分の時間閉じる。シャッタが閉じられたところで、画像補正器ＡＡ１３ｃは感度ばらつき測定器１４のみに画像データを送る。感度ばらつき測定器１４は感度ばらつきを測定し、補正状態判定器１７に結果を送る。補正状態判定器１７は結果が前回のキャリブレーション直後のばらつきの測定値として許容範囲内であるか、あらかじめ設定されて内部のメモリに記憶されている値と比較し判定する。ここで補正状態が許容範囲内と判定された場合はキャリブレーションは終了し、感度ばらつきとシェーディングの測定値を記憶する。仮に許容範囲外と判定された場合は、画像補正用シャッタＡ１２を閉じた状態の第三の感度キャリブレーションを行いキャリブレーションを終了し、感度ばらつきとシェーディングの測定値を記憶する。また、キャリブレーション終了時点で補正状態判定器１７のキャリブレーション実行状態が解除される。
【００３１】
従来の装置では、どの運用状態でどのキャリブレーションを行うか使用者の主観で決定しており、またキャリブレーションの後にシェーディングの補正ずれや、感度のばらつきを測定する手段をもたなかったため、画面に補正むらを残したままで装置が運用されることがあった。例えば、航空機に搭載された本発明の赤外線撮像装置が空や海等の均一な温度背景を撮像している場合、デフォーカスキャリブレーションを行うのが最もよいキャリブレーションであるが、背景の中に雲や太陽が入ってくることにより、赤外レンズ１のピントをずらしても背景が均一にならず、レンズシェーディングキャリブレーションを行う方がよい場合がある。また、レンズシェーディングキャリブレーションを行う場合は、赤外レンズ１と画像補正用シャッタＢ１５との間に温度差があってレンズシェーディングキャリブレーションがうまく行かないことがあるので、この時は感度キャリブレーションを行う。このように使用者は状況に応じてキャリブレーション方法を選定する必要がある。本発明ではキャリブレーションの成否を判断する手段を付け加えることで、３種類のキャリブレーション指令をシーケンシャルに発生させることが可能となり、これにより運用状態における最も有効なキャリブレーションが自動的に選択されるようになるため、結果として安定した映像品質の赤外線画像を出力できる。
【００３２】
実施の形態４．
図４はこの発明の実施の形態４を示すブロック図である。図中、１８は感度ばらつき変化測定器である。それ以外で、１４と１３は実施の形態１と、他は従来の装置と同一である。
【００３３】
次に動作について説明する。通常の撮像動作に関しては従来の装置と同等であるが、本実施の形態では、環境の温度変化が小さく画面内の輝度に大きな影響を与えないような場合を想定している。また、本実施の形態においては、感度ばらつき測定器１４は常に画像補正器１３からデータを受け、実施の形態１と同様の操作で画面全体の各ゲート内の標準偏差を測定し、その平均値を感度ばらつき変化測定器１８に出力する。従来の装置では、正常にキャリブレーションが終了した後、温度環境等の変化状態にもよるが、３０分程度ごとにはキャリブレーションをやりなおしており、経験的にキャリブレーション直後１０分程度は出力される画像の状態は良好であるといえる。感度ばらつき変化測定器１８は、感度キャリブレーション実施後のあらかじめ設定された時間、例えば１０分間程度、感度ばらつき測定器１４から受けた標準偏差の平均値のデータを内部のメモリに蓄える。データが蓄積された時点で、感度ばらつき変化測定器１８は”数２”によりばらつきの時間的な変化量を求める。
【００３４】
【数２】
図１６は感度ばらつきの平均値と時間の関係を示したグラフである。図中、４４は測定された感度ばらつき平均値のライン、４５は求められるばらつきの時間的な変化のラインである。赤外線撮像装置がほぼ同じような画面を写し続けているとすると、感度キャリブレーション直後に見られる輝度のばらつきの大きさは、画面の持つ輝度のばらつきの固有値Ｃであると考えられる。当然、赤外線撮像装置の撮像対象が変化するにつれ画面の輝度のばらつきも変わるが、もし補正の劣化が起こらないのであれば、測定値は固有値Ｃを中心にＤの幅をもって観測される。ところが実際は時間の経過に伴い補正ずれが発生し徐々に大きくなるので、図１６に示すように輝度のばらつきの各ゲート内の標準偏差の平均値は増大する。感度ばらつき変化測定器１８は”数２”によって感度ばらつきの単位時間あたりの変化量を求め、その値に感度キャリブレーションしてからの経過時間をかけることで、例えば、感度キャリブレーション後１０分経過後の或時点での感度ばらつきの増加量を推測し、その値が感度キャリブレーションの直後の輝度ばらつきの各ゲート内の標準偏差の平均値の３倍（３σ）をこえた時点で、撮像制御器９に画像補正指令信号１１を出力する。
なお、本実施の形態における画像補正器は、従来の装置の画像補正器７と同様にフレームメモリを持たず、画像補正用シャッタ２が閉じている間に画像補正用シャッタ２の像を外部機器に出力するものであってもよい。
【００３６】
従来の装置では、感度キャリブレーションの後に継続して、画面の輝度のばらつきとその変化量を測定する手段をもたなかったため、感度キャリブレーションは表示される画面を見ているオペレータの主観によって行われていた。また、実施の形態１では外界から入射される赤外光を遮断するため、非常に短い時間ではあるが一定間隔で画像がとぎれてしまい、目標の検出や追尾を行う場合に複雑な信号処理が必要となる。本発明では画面の輝度ばらつきの状態とその変化を定量的に測定する手段を従来の装置に付加し、従来使用者が主観に基づき行っていたキャリブレーション指令を自動生成することで、自動で感度キャリブレーションを行えるようにするとともに、キャリブレーション後あらかじめ定められた時間経過後は、画像のとぎれをなくし、結果として安定した映像品質の赤外線画像を出力するとともに、後段で目標検出や追尾などをするために都合のよい画像を出力している。
【００３７】
実施の形態５．
図５はこの発明の実施の形態５を示すブロック図である。図において１９は画像補正用シャッタＣ、２０はシェーディング量変化測定器、１３ｃは実施の形態２と同一である。それ以外は実施の形態４と同一である。
【００３８】
次に動作について説明する。実施の形態５について、通常の撮像動作及び感度ばらつき変化測定器によるキャリブレーション要求までは実施の形態４と同じであり、環境の温度変化が小さい場合を想定している。画像補正用シャッタＣ１９は従来の装置に使用されている画像補正用シャッタ２と同程度の反応速度のもので、レンズシェーディングキャリブレーションの際に、外界の赤外光を遮断することのみを目標としている。この画像補正用シャッタＣ１９は、赤外線撮像装置に視軸駆動機構がついていて、撮像装置を格納する機能がある場合などは、それを持って代用することもある。シェーディング量測定器１６は常に画像補正器７からデータを受け、実施の形態２と同様に例えば４８に分割された各々の領域の輝度の平均値を測定する。シェーディング量変化測定器２０は感度ばらつき変化測定器１８と同様にキャリブレーション後あらかじめ設定された時間、例えば１０分間はシェーディング量測定器１６の測定した輝度の平均値を、画面の中心からの距離に応じて図１７のようにまとめ直し、この領域ごとの平均値として内部のメモリに蓄積する。また例えば１０分経過後は各々の領域について”数３”に基づき輝度平均値の時間変化量を求める。
【００３９】
【数３】
図１８は図１７で示した領域Ａと領域Ｅの輝度の平均値と時間の関係を示したグラフである。図中、４６は領域Ａで測定された輝度の平均値のライン、４７は領域Ｅで測定された輝度の平均値のライン、４８は領域Ａで求められる輝度平均値の時間的な変化のライン、４９は領域Ｅで求められる輝度平均値の時間的な変化のラインである。赤外線撮像装置がほぼ同じような画面を写し続けているとすると、キャリブレーション直後に見られる輝度の平均値の大きさは、画面の輝度の固有値Ｃであると考えられる。当然、赤外線撮像装置の撮像対象が変化するにつれ画面の輝度ばらつきも変わるが、もし補正の劣化が起こらないのであれば、測定値は固有値Ｃを中心にＤの幅をもって観測される。ところが実際は時間の経過に伴いシェーディング量が変化するため、図１８に示すように輝度の平均値は変化する。シェーディング量変化測定器２０は”数３”によって領域ごとの輝度の単位時間あたりの変化量を求め、その値にキャリブレーションしてからの経過時間をかけることで、現時点の領域ごとの輝度の変化量を推測し、その値の最大値と最小値の差が、例えば前回のキャリブレーション直後の各々の領域の輝度の平均値の３倍（３σ）を越えた時点で（あるいは、直後の平均値とあらかじめ設定した値との和を越えたところで）、撮像補正用シャッタＣを閉じた状態でレンズシェーディングキャリブレーションを行う画像補正指令信号１１を撮像制御器９に出力する。また、感度ばらつき変化測定器１８は実施の形態４と同様要領で画像補正用シャッタ２を閉じた状態で感度キャリブレーションを行う画像補正指令信号１１を撮像制御器９に出力する。
なお、本実施の形態における画像補正器は、従来の装置の画像補正器７と同様にフレームメモリを持たず、画像補正用シャッタ２が閉じている間に画像補正用シャッタ２の像を外部機器に出力するものであってもよい。
【００４１】
従来の装置では、キャリブレーションの後に継続して、画面のシェーディングとその変化量を測定する手段をもたなかったため、キャリブレーションは表示される画面を見ているオペレータの主観によって行われる。また、実施の形態２では外界から入射される赤外光を遮断するため、非常に短い時間ではあるが一定間隔で画像がとぎれてしまい、目標の検出や追尾を行う場合に複雑な信号処理が必要となる。本発明では画面の輝度ばらつきの状態とその変化を定量的に測定する手段及び画面のシェーディングの状態とその変化を定量的に測定する手段を従来の装置に付加し、従来使用者が主観に基づき行っていたキャリブレーション指令を自動生成することで、レンズシェーディング補正を含めた自動でのキャリブレーションを行えるようにするとともに、キャリブレーション後あらかじめ設定された時間経過後は、画像のとぎれをなくし、結果として安定した映像品質の赤外線画像を出力するとともに、後段で目標検出や追尾などをするために都合のよい画像を出力している。
【００４２】
実施の形態６．
図６はこの発明の実施の形態６を示すブロック図である。図において２１は画像補正器Ｂ、２２はシェーディング補正量設定器Ａである。それ以外は実施の形態５と同一である。
【００４３】
次に動作について説明する。実施の形態６について、赤外レンズ１からＡ／Ｄ変換器６までの動作と感度ばらつき変化測定器１８によるキャリブレーション要求は実施の形態４と同じである。画像補正器Ｂ２１は感度キャリブレーションにより事前に感度ばらつきが補正された画像データを感度ばらつき測定器１４に出力すると同時にシェーディング量測定器１６に出力する。感度ばらつき測定器１８は実施の形態５と同じ要領で画像補正用シャッタ２を閉じた状態で感度キャリブレーションを行う画像補正指令信号１１を撮像制御器９に出力する。しかしながら、画像補正用シャッタ２は赤外レンズ１の内側にあるため、レンズシェーディングまで含めた、キャリブレーションは行えない。そのため、本実施の形態６では、シェーディングの補正をするための回路として、シェーディング補正量設定器Ａ２２を付加している。今、画像補正器Ｂ２１によるキャリブレーション終了後、画像補正用シャッタ２を開いた状態で、例えば航空機に搭載された本発明の赤外線撮像装置において１フレーム間の画像の変化が小さい（ある一定領域の輝度の時間平均がほとんど変化しない）背景や目標を撮像している場合を考える。シェーディング補正量設定器Ａ２２はシェーディング量変化測定器２０から、図１７に示した５つの領域のキャリブレーション後からの輝度の変化量を受け、画面の中央からの距離に対応したシェーディングの補正量を定める。図１９はシェーディング補正量設定器Ａ２２の補正量設定の概念図である。図中５０から５４はシェーディング量変化測定器２０から得られる領域ＡからＥの輝度の平均値の傾きに一つ前のキャリブレーション終了時からの経過時間をかけて求めた輝度の平均値の増加量を示すプロットであり、５５は定められたシェーディングの補正量を示すシェーディングラインである。シェーディング補正量設定器Ａ２２は５つのプロットから適当な２次の曲線を求め、かつそれを輝度変化量０のラインについて反転させたラインをシェーディング補正量として画像補正器Ｂ２１に出力する。画像補正器Ｂ２１は感度ばらつきのみを補正した画面からシェーディング補正量を差し引いたデータをＤ／Ａ変換器８にリアルタイムで送る。実施の形態２や実施の形態５ではレンズシェーディングをキャリブレーションで補正するために、レンズの前面シャッタを置くという、機構的な構成となっている。それに対し、本実施の形態６では、従来の赤外線撮像装置の機構的な構成をできるだけかえず、かつ前述のシェーディングキャリブレーションのように補正用の均一温度面でデータを取り込むという操作をせずに、電気的な信号処理でリアルタイムにレンズシェーディング補正を達成する。
また、シェーディング量変化測定器２０から得られる輝度の変化量は画像補正用シャッタ２を開いた状態で得られるので、一定時間ごとに変化量を更新していけば補正の精度が高くなる。
【００４４】
従来の装置では、キャリブレーションの後に継続して、画面のシェーディングとその変化量を測定し、その値から補正するシェーディング量を決める手段とを持たなかったため、レンズシェーディングをキャリブレーションで補正するしかなく、そのためにレンズの前面にシャッタを置くという機構的な構成が必要だった。本実施の形態６では、従来の赤外線撮像装置の機構的な構成をできるだけかえずに、電気的な信号処理回路を付加することでリアルタイムのレンズシェーディング補正を達成しているとともに、画面の輝度ばらつきの状態とその変化を定量的に測定する手段を従来の装置に付加し、従来使用者が主観に基づき行っていたキャリブレーション指令を自動生成することで、自動でキャリブレーションを行い、安定した映像品質の赤外線画像を出力する。
【００４５】
実施の形態７．
図７はこの発明の実施の形態７を示すブロック図である。図において２３は赤外レンズＡ、２４は温度信号、２５は温度変化測定器、２６はシェーディング補正量設定器Ｂである。それ以外は実施の形態６と同一である。
【００４６】
次に動作について説明する。実施の形態７について、通常の撮像動作と感度ばらつき変化測定器１８によるキャリブレーション要求は実施の形態６と同じである。赤外レンズＡ２３はレンズの鏡筒部分の温度を測定する温度モニタ５８を持ち温度信号２４を温度変化測定器２５に送る。温度変化測定器２５は前回のキャリブレーションしてからの順次入力される温度信号２４から赤外レンズＡ２３の温度差を測定しシェーディング補正量設定器Ｂ２６に出力する。シェーディング補正量設定器Ｂ２６は内部のメモリに赤外レンズＡ２３の固有のレンズシェーディングの特性（例えば、温度差の４乗に比例して赤外線のエネルギー量が変化する。）を示すデータを保持している。図２０はシェーディング補正量設定器Ｂ２６の保持している上記データの１例を示す図である。図中、５６は赤外レンズＡ２３が温度差Ａのときに持っているシェーディングライン、５７は温度差Ｂのときに持っているシェーディングラインをそれぞれ示している。上記シェーディングラインは、輝度の増加量を使用する温度範囲内におけるレンズ鏡筒部分の温度差と画面中心からの距離の関数として表現したものである。上記内部のメモリ内には、例えばあらかじめシュミレーションや実験計測結果に基づいて離散化された上記シェーディングラインの節点が記憶されており、温度差に対応した所要のシェーディングラインを節点間を適度に補間することによって得ることができる。あるいは、上記内部のメモリ内に、上記シェーディングラインを多項式のような近似手段で表現した近似式の定数が記憶されており、温度差と画面中心からの距離から所要の輝度の増加量を出力することによってシェーディングラインを表現してもよい。シェーディング補正量設定器Ｂ２６は図２０に示すようなシェーディングラインから、画面中心からの位置ごとに温度変化に対応して、例えば温度差がＢのときは、温度Ｂのシェーディングライン５７を打ち消すように輝度の増加量を求め、シェーディングの補正量を決めて画像補正器Ｂ２１に出力する。画像補正器Ｂ２１は実施の形態６と同じ動作でＤ／Ａ変換器８にシェーディング補正されたデータをリアルタイムで送り、出力映像信号１０を出力する。実施の形態６では、画像データから各々の画素の補正量を定めていたため、画像を測定するための回路と、補正量を定める回路が必要であったが、本実施の形態７ではシェーディングが温度差に依存する性質を利用して温度を測定することにより、画像を測定する回路を無くすことができるため、少ない回路規模で同等の機能を達成できる。温度測定回路は熱電対と抵抗とトランジスタで構成できるのに対し、画像を測定する回路にはシェーディング量測定器１６内のフレームメモリのような画像を記憶するための膨大なメモリと高速の演算装置が必要である。また、上記固有のレンズシェーディングの特性データに要するメモリは、温度特性を離散的に表現する代表的な幾つかの点を記憶する程度でよく、上記画像を記憶するための膨大なメモリよりは充分小さくなり、小型、軽量化がはかれる。
【００４７】
従来の装置では、キャリブレーションの後に継続して光学系の温度とその変化量を測定し、その値から補正するシェーディング量を決める手段とを持たなかったため、レンズシェーディングをキャリブレーションで補正するしかなく、そのためにレンズの前面にシャッタを置く機構的な構成が必要であった。本実施の形態７では光学系の温度とその変化を定量的に測定する手段とレンズの特性データを保持している手段を付加することで、前述の実施の形態６よりも簡単な信号処理回路でリアルタイムのレンズシェーディング補正を達成している。また、画面の輝度ばらつきの状態とその変化を定量的に測定する手段を付加し、従来使用者が主観に基づき行っていたキャリブレーション指令を自動生成することで、自動でキャリブレーションを行い、安定した映像品質の赤外線画像を出力する。
【００４８】
実施の形態８．
この発明の実施の形態は、実施の形態１，２，４，５の感度ばらつき測定器において画像の補正ずれを定量的に検知した後、アラーム音や点滅光などの警告信号（または、目盛による警告表示）を発生するものである。これによって、使用者が画像の補正ずれを定量的に把握でき、画像補正器のキャリブレーションを手動で行うタイミングを得ることができる。
【００４９】
実施の形態９．
この発明の実施の形態は、実施の形態２，４，８のシェーディング量測定器において画像の補正ずれを定量的に検知した後、アラーム音や点滅光などの警告信号（または、目盛による警告表示）を発生するものである。これによって、使用者が画像の補正ずれを定量的に把握でき、画像補正器のキャリブレーションを手動で行うタイミングを得ることができる。
【００５０】
【発明の効果】
この第一の発明にかかる赤外線撮像装置は、素子感度の補正ずれの状態を撮像中に各画素ごとに求めた輝度の偏差の平均値を用いて定量的に把握する手段を従来の装置に付加したことで、従来使用者が主観に基づきおこなっていたキャリブレーション指令を生成して、キャリブレーションを行うことができる。これによって操作が簡単でありながら、素子感度の補正ずれやシェーディングの補正ずれによる性能劣化が少なく、使用者がキャリブレーション操作に煩わされることのない赤外線撮像装置を得ることができる。
【００５１】
また、第二の発明によれば、素子感度の補正ずれの状態を撮像中に定量的に把握する手段及びシェーディングの補正ずれの状態を撮像中に画面内に分割された幾つかの領域内の輝度の平均値から全領域の輝度分布を求めて定量的に把握する手段を従来の装置に付加したことで、従来使用者が主観に基づきおこなっていたキャリブレーション指令を生成し、レンズシェーディング補正を含めた自動でのキャリブレーションが行える。
【００５２】
また、第三の発明によれば、キャリブレーションの成否を判断する手段を付け加えることで、３種類のキャリブレーション指令をシェーディングに発生させることが可能となり、これにより運用状態における有効なキャリブレーションが自動的に選択され、実施される。これによって、最適なキャリブレーションをされた状態の画像を出力できる赤外線撮像装置を得ることができる。
【００５３】
また、第四の発明によれば、画面の輝度ばらつきの状態とその変化を定量的に測定する手段を従来の装置に付加したことで、従来使用者が主観に基づき行っていたキャリブレーション指令を生成し、自動でキャリブレーションが行える。また、第一の発明では短時間の画像のとぎれが発生するが、後段で目標検出や追尾などの信号処理する場合に都合のよい画像を出力できる。これによって信号処理にも適した画像を出力する赤外線撮像装置を得ることができる。
【００５４】
また、第五の発明によれば、画面の輝度ばらつきの状態とその変化を定量的に測定する手段及び画面のシェーディングの状態とその変化を定量的に測定する手段を従来の装置に付加したことで、従来使用者が主観に基づき行っていたキャリブレーション指令を生成し、レンズシェーディング補正を含めた自動でのキャリブレーションが行える。また、第二の発明で起きていた短時間の画像のとぎれをなくすことで、後段で目標検出や追尾などをする場合に都合のよい画像を出力できる。
【００５５】
また、第六の発明によれば、画面のシェーディングの状態とその変化を定量的に測定し、かつそれによって補正する量を定める手段を付加したことでリアルタイムのレンズシェーディング補正を達成している。また、画面の輝度ばらつきの状態とその変化を定量的に測定する手段を従来の装置に付加したことで、従来使用者が主観に基づき行っていたキャリブレーション指令を生成し、自動でキャリブレーションを行える。これによってレンズシェーディングがリアルタイムに補正されることによりシェーディングの補正ずれによる性能劣化が少なく、従来の装置ほど頻繁にキャリブレーションが行われない赤外線撮像装置を得ることができる。
【００５６】
さらにまた、第七の発明によれば、光学系の温度とその変化を定量的に測定する手段とレンズの特性データを保持している手段を付加したことで、第六の発明より簡単な回路でリアルタイムのレンズシェーディング補正を達成している。また、従来の装置ほど頻繁にキャリブレーションが行われない赤外線撮像装置をより小型軽量で得ることができる。
【図面の簡単な説明】
【図１】 この発明の実施の形態１の構成を示すブロック図である。
【図２】 この発明の実施の形態２の構成を示すブロック図である。
【図３】 この発明の実施の形態３の構成を示すブロック図である。
【図４】 この発明の実施の形態４の構成を示すブロック図である。
【図５】 この発明の実施の形態５の構成を示すブロック図である。
【図６】 この発明の実施の形態６の構成を示すブロック図である。
【図７】 この発明の実施の形態７の構成を示すブロック図である。
【図８】 従来の装置の構成を示すブロック図である。
【図９】 従来の装置のキャリブレーションの概要を示す図である。
【図１０】 目標の発生する光をレンズを通し集光する様子を示す図である。
【図１１】 シェーディング画像の一例を示すディスプレイ上の中間値画像である。
【図１２】 感度ばらつき測定動作の概要を示す図である。
【図１３】 シェーディング量測定動作の概要を示す図である。
【図１４】 シェーディング補正状態による領域の輝度平均値の分布を示す図である。
【図１５】 キャリブレーション制御の流れ図である。
【図１６】 感度ばらつきの平均値と時間の関係を示した図である。
【図１７】 輝度測定領域をまとめ直した様子を示す図である。
【図１８】 輝度の平均値と時間の関係を示す図である。
【図１９】 シェーディング補正量設定器Ａ２２のシェーディング補正量設定の概念図である。
【図２０】 シェーディング補正量設定器Ｂ２６のシェーディング補正量設定の概念図である。
【符号の説明】
１ 赤外レンズ、２ 画像補正用シャッタ、３ 赤外線検知器、４ アンプ、５ サンプルホールド回路、６ Ａ／Ｄ変換器、７ 画像補正器、８ Ｄ／Ａ変換器、９ 撮像制御器、１０ 出力映像信号、１１ 画像補正指令信号、１２ 画像補正用シャッタＡ、１３ 画像補正器Ａ、１３ａ 出力切換スイッチ、１３ｂ フレームメモリ、１３ｃ 画像補正器ＡＡ、１３ｄ 出力切換スイッチＡ、１４ 感度ばらつき測定器、１４ａ フレームメモリ、１４ｂ 標準偏差測定器、１４ｃ 標準偏差記憶器、１４ｄ 感度ばらつき判定器、１５ 画像補正用シャッタＢ、１６ シェーディング量測定器、１７ 補正状態判定器、１８ 感度ばらつき変化測定器、１９ 画像補正用シャッタＣ、２０ シェーディング量変化測定器、２１ 画像補正器Ｂ、２２ シェーディング補正量設定Ａ、２３ 赤外レンズＡ、２４ 温度信号、２５ 温度変換測定器、２６ シェーディング補正量設定Ｂ、２７ 出力特性ラインａ、２８ 出力特性ラインｂ、２９ 出力特性ラインａａ、３０ 出力特性ラインｂｂ、３１ 出力ラインｃ、３２ 目標Ａ、３３ 目標Ｂ、３４ レンズ、３５ 結像面、３６ 光束ＡＡ、３７ 光束ＢＢ、３８ 画像データ、３９ ばらつき測定ゲート、４０ 計測された感度ばらつき、４１ シェーディング測定領域、４２ 補正できている場合の輝度平均値の分布、４３ 補正できていない場合の輝度平均値の分布、４４ 測定された感度ばらつき平均値のライン、４５ ばらつきの時間的変化のライン、４６ 領域Ａの輝度平均値ライン、４７ 領域Ｅの輝度平均値ライン、４８ 領域Ａの輝度平均値の時間変化ライン、４９ 領域Ｅの輝度平均値の時間変化ライン、５０ 領域Ａのシェーディング変化量のプロット、５１ 領域Ｂのシェーディング変化量のプロット、５２ 領域Ｃのシェーディング変化量のプロット、５３ 領域Ｄのシェーディング変化量のプロット、５４ 領域Ｅのシェーディング変化量のプロット、５５ シェーディング補正量を示すライン、５６ 温度Ａの時の赤外レンズＡ２３のシェーディングライン、５７ 温度Ｂの時の赤外レンズＡ２３のシェーディングライン、５８ 温度モニタ。
Claims (9)
- 目標物体から放射される赤外光を集光し結像するための赤外レンズと、上記赤外レンズの結像した赤外光の像を赤外線検知素子により光電変換する赤外線検知器と、上記赤外線検知器の出力信号を画像信号に変換する変換回路と、上記画像信号を信号処理し上記赤外線検知素子のばらつきを補正する補正回路とから構成される赤外線撮像装置において、赤外光を遮断する遮断手段と、あらかじめ設定された時間間隔で第一の遮断指令を上記遮断手段に発生する手段、キャリブレーションの要求信号を受けてからキャリブレーション指令を上記補正回路に発生し、かつ第二の遮断指令を上記遮断手段に発生する手段とを有する制御手段と、上記遮断手段により赤外光が遮断されている間に上記補正回路で信号処理された上記画像信号から各画素ごとに求めた輝度の偏差の平均値を求めて感度ばらつきを測定する感度ばらつき測定手段と、上記輝度の偏差の平均値が一つ前に行われたキャリブレーションで測定された上記輝度の偏差の平均値とあらかじめ設定された値との積、又は和より大きいときに上記キャリブレーションの要求信号を上記制御手段に発生する感度ばらつき判定手段とを備えたことを特徴とする赤外線撮像装置。
- 目標物体から放射される赤外光を集光し結像するための赤外レンズと、上記赤外レンズの結像した赤外光の像を赤外線検知素子により光電変換する赤外線検知器と、上記赤外線検知器の出力信号を画像信号に変換する変換回路と、上記画像信号を信号処理し上記赤外線検知素子の出力のばらつきを補正する補正回路とから構成される赤外線撮像装置において、上記赤外レンズにより集光される前の赤外光を遮断する第一の遮断手段と、上記赤外レンズにより集光された赤外光を遮断する第二の遮断手段と、上記第一の遮断手段により赤外光が遮断されている間に上記補正回路で信号処理された上記画像信号から画面内の部分ごとの輝度の平均値の分布を求めてシェーディング量を測定するシェーディング測定手段と、上記シェーディング測定手段で測定される上記輝度の平均値の分布の幅が一つ前に行われたキャリブレーションで測定された上記輝度の平均値の分布の幅とあらかじめ設定された幅との積、又は和より大きいときに第一のキャリブレーションの要求信号を発生するシェーディング判定手段と、上記第二の遮断手段により赤外光が遮断されている間に上記補正回路で信号処理された画像信号から画素ごとに求めた輝度の偏差の平均値を得て感度ばらつきを測定する感度ばらつき測定手段と、上記感度ばらつき測定手段で測定される上記輝度の偏差の平均値が一つ前に行われたキャリブレーションで測定された上記輝度の偏差の平均値とあらかじめ設定された値との積、又は和より大きいときに第二のキャリブレーションの要求信号を発生する感度ばらつき判定手段と、上記第一の遮断手段と上記第二の遮断手段に交互に第一、第二の遮断指令を発生し、かつ上記第一の遮断手段と上記第二の遮断手段による赤外光遮断時間を指定する手段、上記シェーディング判定手段から出力される上記第一のキャリブレーションの要求信号を受けて上記補正回路に第一のキャリブレーション指令を発生し、かつ上記第一の遮断手段に第三の遮断指令を発生する手段、上記感度ばらつき判定手段から出力される上記第二のキャリブレーションの要求信号を受けて上記補正回路に第二のキャリブレーション指令を発生し、かつ上記第二の遮断手段に第四の遮断指令を発生する手段から成る制御手段とを備えたことを特徴とする赤外線撮像装置。
- 目標物体から放射される赤外光を集光し結像する機能とピントを調整する機能を有する赤外レンズと、上記赤外レンズの結像した赤外光の像を赤外線検知素子により光電変換する赤外線検知器と、上記赤外線検知器の出力信号を画像信号に変換する変換回路と、上記画像信号を信号処理し上記赤外線検知素子の出力のばらつきを補正する補正回路とから構成される赤外線撮像装置の画像補正方法において、上記赤外レンズにより集光される前の赤外光を遮断する第一の遮断手段と、上記赤外レンズにより集光された赤外光を遮断する第二の遮断手段と、赤外光が遮断されている間に上記補正回路で補正された上記画像信号から画面内の部分ごとの輝度の平均値の分布を求めてシェーディング量を測定するシェーディング測定手段と、上記シェーディング測定手段で測定される上記輝度の平均値の分布の幅が一つ前に行われたキャリブレーションで測定された上記輝度の平均値の分布の幅とあらかじめ設定された幅との積、又は和より大きいときに第一のキャリブレーションの要求信号を発生するシェーディング判定手段と、赤外光が遮断されている間に上記補正回路で補正された画像信号から画素ごとに求めた輝度の偏差の平均値を得て感度ばらつきを測定する感度ばらつき測定手段と、上記感度ばらつき測定手段で測定される上記輝度の偏差の平均値が一つ前に行われたキャリブレーションで測定された上記輝度の偏差の平均値とあらかじめ設定された値との積、又は和より大きいときに第二のキャリブレーションの要求信号を発生する感度ばらつき判定手段と、上記第一の遮断手段、上記第二の遮断手段、上記補正回路及び上記赤外レンズに第一の遮断指令、第二の遮断指令、キャリブレーションの指令及びデフォーカス指令を出力する制御手段とを備え、上記制御手段は、上記シェーディング判定手段、又は上記感度ばらつき判定手段から上記第一、第二のキャリブレーションの要求信号が発生されたとき、次の手順により画像を補正する赤外線撮像装置の画像補正方法
（１）上記第一の遮断手段と上記第二の遮断手段を開放し、上記赤外レンズをデフォーカスにした状態で上記補正回路の第一のキャリブレーションを実施させる手順
（２）上記第一のキャリブレーション終了後、上記第一の遮断手段が遮断された状態で補正された画像信号から上記輝度の平均値の分布の幅と、上記輝度の偏差の平均値を測定させる手順
（３）上記手順（２）で測定された上記輝度の平均値の分布の幅があらかじめ設定された幅より大きいとき、又は上記輝度の偏差の平均値があらかじめ設定された値より大きいときに上記補正回路において第二のキャリブレーションを実施させる手順
（４）上記第二のキャリブレーション終了後、補正された画像信号から上記輝度の偏差の平均値を測定させる手順
（５）上記手順（４）で測定された上記輝度の偏差の平均値があらかじめ設定された値より大きいとき、上記補正回路において第三のキャリブレーションを実施させる手順。 - 上記感度ばらつき測定手段により測定された上記輝度の偏差の平均値から、時間に対する上記輝度の偏差の平均値の変化の傾きを測定する手段、上記変化の傾きにキャリブレーション後の経過時間をかけて輝度の偏差の平均値の増加量を推測し、上記増加量が一つ前に実施されたキャリブレーション終了時の上記輝度の偏差の平均値とあらかじめ設定された値との積、又は和より大きいときに上記キャリブレーションの要求信号を上記制御手段に発生する手段から成る感度ばらつき変化測定手段を具備したことを特徴とする請求項１記載の赤外線撮像装置。
- 上記シェーディング測定手段により測定された上記輝度の平均値の分布の幅から、時間に対する上記輝度の平均値の分布の幅の変化の傾きを測定する手段、上記分布の幅の変化の傾きにキャリブレーション後の経過時間をかけて輝度の平均値の分布の幅の増加量を推測し、上記分布の幅の増加量が一つ前に実施されたキャリブレーション終了時の上記輝度の平均値の分布の幅とあらかじめ設定された幅との積、又は和より大きいとき、上記第一のキャリブレーションの要求信号を上記制御手段に発生する手段から成るシェーディング変化測定手段と、上記感度ばらつき測定手段によりあらかじめ設定された時間に測定された上記輝度の偏差の平均値から、時間に対する上記輝度の偏差の平均値の変化の傾きを測定する手段、上記偏差の平均値の変化の傾きにキャリブレーション後の経過時間をかけて輝度の偏差の平均値の増加量を推測し、上記偏差の平均値の増加量が一つ前に実施されたキャリブレーション終了時の上記輝度の偏差の平均値とあらかじめ設定された値との積、又は和より大きいとき、上記キャリブレーションの要求信号を上記制御手段に発生する手段から成る感度ばらつき変化測定手段とを具備したことを特徴とする請求項２記載の赤外線撮像装置。
- 目標物体から放射される赤外光を集光し結像するための赤外レンズと、上記赤外レンズの結像した赤外光の像を赤外線検知素子により光電変換する赤外線検知器と、上記赤外線検知器の出力信号を画像信号に変換する変換回路と、上記画像信号を信号処理し赤外線検知素子の出力のばらつきを補正する補正回路とから構成される赤外線撮像装置において、赤外光を遮断する遮断手段と、上記遮断手段により赤外光が遮断されている間に上記補正回路で信号処理された上記画像信号から画素ごとに求めた輝度の偏差の平均値を得て感度ばらつきを測定する感度ばらつき測定手段と、上記感度ばらつき測定手段により測定された上記輝度の偏差の平均値から、時間に対する上記輝度の偏差の平均値の変化の傾きを測定する手段、上記偏差の変化の傾きにキャリブレーション後の経過時間をかけて輝度の偏差の平均値の増加量を推測し、上記増加量が一つ前に実施されたキャリブレーション終了時の上記輝度の偏差の平均値とあらかじめ設定された値との積、又は和より大きいときにキャリブレーションの要求信号を発生する手段から成る感度ばらつき変化測定手段と、上記遮断手段が開放された状態で上記補正回路で信号処理された上記画像信号から画面内の部分ごとの輝度の平均値を求めてシェーディング量を測定するシェーディング測定手段と、上記シェーディング測定手段で測定される上記輝度の平均値から、時間に対する上記輝度の平均値の変化の傾きを測定するシェーディング変化測定手段と、上記シェーディング変化測定手段から得られる上記輝度の平均値の傾きにキャリブレーション後の経過時間をかけて上記各領域ごとの輝度の平均値の増加量を求め、画面内における上記各領域の画面中心からの距離に対応した上記輝度の平均値の増加量を示す近似曲線を求め、上記近似曲線に沿った上記輝度の平均値の増加量を打ち消すように上記補正回路におけるシェーディングの補正量を定める補正量設定手段と、上記遮断手段に上記遮断指令を発生手段、上記感度ばらつき変化測定手段から出力される上記キャリブレーション要求信号を受けて上記補正回路にキャリブレーション指令を発生する手段とを有する制御手段とを備えたことを特徴とする赤外線撮像装置。
- 目標物体から放射される赤外光を集光し結像するための赤外レンズと、上記赤外レンズの結像した赤外光の像を赤外線検知素子により光電変換する赤外線検知器と、上記赤外線検知器の出力信号を信号処理し赤外線検知素子の出力のばらつきを補正する補正回路とから構成される赤外線撮像装置において、赤外光を遮断する遮断手段と、赤外光が遮断されている間に上記補正回路で信号処理された上記画像信号から画素ごとに求めた輝度の偏差の平均値を得て感度ばらつきを測定する感度ばらつき測定手段と、上記感度ばらつき測定手段により測定された上記輝度の偏差の平均値から、時間に対する上記輝度の偏差の平均値の変化の傾きを測定する手段、上記偏差の変化の傾きにキャリブレーション後の経過時間をかけて輝度の偏差の平均値の増加量を推測し、上記増加量が一つ前に実施されたキャリブレーション終了時の上記輝度の偏差の平均値とあらかじめ設定された値との積、又は和より大きいときにキャリブレーションの要求信号を出力する手段から成る感度ばらつき変化測定手段と、上記赤外レンズの温度を測定する温度測定手段と、上記温度測定手段により測定された一つ前に実施されたキャリブレーション終了時点の温度と現時点の温度との温度差を算出する温度変化測定手段と、上記温度変化測定手段の測定した上記温度差に対応したシェーディングの補正量を、あらかじめ記憶された温度差と画面内における画素の位置に対する輝度の増加量の関係を示すデータに基づいて出力する補正量設定手段と、上記遮断手段に上記遮断指令を発生する手段、上記感度ばらつき変化測定手段から出力される上記キャリブレーション要求信号を受けて上記補正回路にキャリブレーション指令を出力する手段とを有する制御手段とを備えたことを特徴とする赤外線撮像装置。
- 上記補正回路の出力する画像信号を記憶する記憶手段、上記第一の遮断手段により赤外光が遮断されている間は上記記憶手段から１フレーム前の画像信号を出力する記憶出力手段とを備えたことを特徴とする請求項１，４，６，７いずれか記載の赤外線撮像装置。
- 上記補正回路の出力する画像信号を記憶する記憶手段、上記第一、第二の遮断手段により赤外光が遮断されている間は上記記憶手段から１フレーム前の画像信号を出力する手段から成る記憶出力手段とを備えたことを特徴とする請求項２，３，５いずれか記載の赤外線撮像装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP29378796A JP3675066B2 (ja) | 1996-11-06 | 1996-11-06 | 赤外線撮像装置および画像補正方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP29378796A JP3675066B2 (ja) | 1996-11-06 | 1996-11-06 | 赤外線撮像装置および画像補正方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH10142065A JPH10142065A (ja) | 1998-05-29 |
| JP3675066B2 true JP3675066B2 (ja) | 2005-07-27 |
Family
ID=17799172
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP29378796A Expired - Fee Related JP3675066B2 (ja) | 1996-11-06 | 1996-11-06 | 赤外線撮像装置および画像補正方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3675066B2 (ja) |
Families Citing this family (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3635937B2 (ja) | 1998-09-10 | 2005-04-06 | 三菱電機株式会社 | 赤外線カメラ |
| EP1160550A4 (en) | 1999-01-14 | 2008-01-30 | Matsushita Electric Ind Co Ltd | INFRARED IMAGING APPARATUS, A VEHICLE EQUIPPED THEREWITH, AND DEVICE FOR ADJUSTING AN INFRARED IMAGE |
| JP4268774B2 (ja) | 2001-08-31 | 2009-05-27 | 富士通株式会社 | 赤外線撮影装置 |
| US7388610B2 (en) | 2002-08-16 | 2008-06-17 | Zoran Corporation | Techniques of modifying image field data by extrapolation |
| US7391450B2 (en) | 2002-08-16 | 2008-06-24 | Zoran Corporation | Techniques for modifying image field data |
| US7408576B2 (en) | 2002-08-16 | 2008-08-05 | Zoran Corporation | Techniques for modifying image field data as a function of radius across the image field |
| JP4749397B2 (ja) * | 2007-08-23 | 2011-08-17 | 三菱電機株式会社 | 赤外線撮像装置 |
| JP5084473B2 (ja) * | 2007-12-05 | 2012-11-28 | 三菱電機株式会社 | 赤外線撮像装置 |
| JP5970965B2 (ja) * | 2012-06-07 | 2016-08-17 | 日本電気株式会社 | 撮像装置 |
| WO2016185701A1 (ja) | 2015-05-21 | 2016-11-24 | 富士フイルム株式会社 | 赤外線撮像装置及び固定パターンノイズデータの更新方法 |
| JP6291629B2 (ja) | 2015-05-21 | 2018-03-14 | 富士フイルム株式会社 | 赤外線撮像装置及び固定パターンノイズデータの更新方法 |
| EP3832538B1 (en) * | 2019-12-05 | 2022-05-11 | Axis AB | Automatic malfunction detection in a thermal camera |
| WO2023199465A1 (ja) * | 2022-04-14 | 2023-10-19 | 日立Astemo株式会社 | 車載画像処理装置、および、そのキャリブレーション方法 |
-
1996
- 1996-11-06 JP JP29378796A patent/JP3675066B2/ja not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JPH10142065A (ja) | 1998-05-29 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8760509B2 (en) | Thermal imager with non-uniformity correction | |
| JP3675066B2 (ja) | 赤外線撮像装置および画像補正方法 | |
| US7772557B2 (en) | Offset compensation scheduling algorithm for infrared imagers | |
| JP2954704B2 (ja) | 微小画像信号の動的補正方法と装置 | |
| EP0837600A2 (en) | Infrared sensor device with temperature correction function | |
| WO2007125691A1 (ja) | X線画像診断装置 | |
| US10432881B2 (en) | Infrared imaging device and method of updating fixed pattern noise data | |
| US6982412B2 (en) | Infra red camera calibration | |
| JP2005096752A (ja) | 赤外線画像撮像装置およびこれを搭載した車両 | |
| US8481918B2 (en) | System and method for improving the quality of thermal images | |
| US10536626B2 (en) | Infrared imaging device, fixed pattern noise calculation method, and fixed pattern noise calculation program | |
| US10523883B2 (en) | Infrared imaging device and method of updating fixed pattern noise data | |
| TW201743285A (zh) | 增強影像 | |
| EP1483556B1 (en) | Improvements in or relating to the calibration of infra red cameras | |
| JP3517811B2 (ja) | 赤外線撮像装置 | |
| KR101429512B1 (ko) | 밴딩 노이즈 제거 장치 및 방법 | |
| JP3376991B2 (ja) | 赤外線撮像方法及び赤外線撮像装置 | |
| JP2003000576A (ja) | 画像処理装置及び画像処理方法 | |
| JP3067285B2 (ja) | 画像処理を用いた火災検出装置 | |
| JP2002311327A (ja) | 多点測距装置 | |
| JP4604112B2 (ja) | 被写体情報測定方法及び被写体情報測定装置、並びに露光制御方法及び、露光制御装置 | |
| US6044127A (en) | X-ray examination apparatus including an exposure control system and a method of controlling an amplifier of an image pick-up apparatus | |
| JP7143558B2 (ja) | 赤外線撮像装置及びそれに用いられるプログラム | |
| JP2004117254A (ja) | 赤外線撮像装置 | |
| CN111366253B (zh) | 红外光电***的非均匀性校正系数获取方法及校正方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20040716 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20040921 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20041221 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050218 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20050412 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20050425 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080513 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090513 Year of fee payment: 4 |
|
| LAPS | Cancellation because of no payment of annual fees |