JP3618645B2 - 撮像装置及びその劣化画素信号補正方法 - Google Patents
撮像装置及びその劣化画素信号補正方法 Download PDFInfo
- Publication number
- JP3618645B2 JP3618645B2 JP2000230259A JP2000230259A JP3618645B2 JP 3618645 B2 JP3618645 B2 JP 3618645B2 JP 2000230259 A JP2000230259 A JP 2000230259A JP 2000230259 A JP2000230259 A JP 2000230259A JP 3618645 B2 JP3618645 B2 JP 3618645B2
- Authority
- JP
- Japan
- Prior art keywords
- pixel
- signal
- deteriorated
- smear
- level
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Transforming Light Signals Into Electric Signals (AREA)
- Studio Devices (AREA)
Description
【発明の属する技術分野】
この発明は、撮像装置、特に擬似信号補正機能を有する撮像装置、及びその劣化画素信号補正方法に関する。
【0002】
【従来の技術】
CCD撮像素子を使用した固体撮像装置においては、CCD撮像素子特有の現象として、強烈な光が入射したときに発生するスミア現象による画質劣化が問題となっている。すなわち、この現象は、本来の電荷蓄積領域に捕捉されなかった電荷が、ポテンシャル障壁を乗り越えて垂直転送路に漏れ込むことによるものである。通常の定常的な光に起因する場合は、この現象が垂直転送期間にわたって発生するため、例えばスポット光の場合は、その上下に伸びる縦筋になり、例えば空を含む景観のような高輝度部が水平方向に広がっている被写体の場合は、画面全体がフレアがかった白けた画像が得られる。
【0003】
これを補正する方法としては、スミアがその発生原理から垂直方向にほぼ同レベルで生じることに着目して、有効画素領域外の遮光された蓄積画素領域である垂直OB(オプティカルブラック:光学的黒)画素の出力レベルをスミア除去基準信号とし、これを有効画面の画素出力信号から減じる方法が、例えば特開平7−67038号公報に開示されていて公知である。
【0004】
【発明が解決しようとする課題】
ところで、上記従来の技術を用いて単純にスミア補正を採用したとすると、現実のカメラに使用される撮像素子の出力レンジは限られているため、スミア成分が大きい場合は、補正によって却って画質劣化を来す不具合があった。これを具体例を挙げて説明すると、強いスポット光に起因する縦筋状のスミアが、撮像素子の飽和レベルに達するレベル( 100%)で発生している状態を考えると、スミアがない部分の撮像素子出力信号はスミア補正後もそのまま出力されるが、スミア部分では撮像素子飽和のため素子出力は 100%にとどまるから、スミア補正後の出力(素子出力−スミア成分)は0となってしまう。したがって、縦の黒筋が発生することになる。あるいは、このときスポット光部分自体を被写体として見れば、この部分もやはり出力0となってしまう。
【0005】
このような縦に伸びる黒筋や、非常に高輝度の筈の被写体が黒つぶれしてしまうという現象は、極めて不自然な奇異な画像を生じるものである。たとえスミアレベルが小さい通常の被写体において従来よりも高画質な撮像が可能になるとしても、種々の被写体シーンを対象とする撮像装置としては許容し難い画質劣化(破綻した画像)を生じるものであり、したがって上記従来のスミア補正方法は、採用が困難であるという問題点を有していた。
【0006】
すなわち、スミアが飽和レベル付近に達している場合は、被写体の輝度情報をほとんど得ることができないから、従来の補正は無意味であるか、むしろ新たな偽信号を生じるだけであり、却って百害あって一利なしというべき状態になるものであった。あるいは、少なくとも不自然でない画質を得ることは困難であった。
【0007】
本発明は、従来のスミア補正方法における上記問題点を解決するためになされたもので、少なくとも破綻を来たすような不自然な画質劣化を生じないようにすると共に、スミアに起因して被写体の輝度情報を全く得ることができない部分に関しても、従来よりも実質的な画質の向上をはかった効果的なスミア補正が可能な撮像装置及びその劣化画素信号補正方法を提供することを目的とする。
【0008】
また本発明は、スミア成分のレベルに基づいて判定を行い、信号の飽和などに起因する従来のスミア補正では対応不可能な劣化画素に対してデータの補償を適用することが可能な撮像装置及びその劣化画素信号補正方法を提供することを目的とする。また本発明は、スミア成分のレベルと有効信号画素の出力レベルを共に考慮したより高度の判定を行い、信号の飽和などに起因する従来の補正では対応不可能な画素に対してデータの補償を適用することが可能な撮像装置及びその劣化画素信号補正方法を提供することを目的とする。また本発明は、無制限に補償を行うことに伴う不自然な画像の生成のおそれのない撮像装置及びその劣化画素信号補正方法を提供することを目的とする。また本発明は、白筋に代表される原理的に避け得ない不自然な目立つ偽信号が低減あるいは除去された画像を得ることができる撮像装置及びその劣化画素信号補正方法を提供することを目的とする。また本発明は、スミアが軽減され且つ不自然な目立つ偽信号が低減あるいは除去された総合的に高画質な画像を得ることができる撮像装置及びその劣化画素信号補正方法を提供することを目的とする。
【0009】
【課題を解決するための手段】
上記問題点を解決するため、請求項1に係る発明は、垂直ブランキング期間中に撮像素子の遮光画素列から出力される信号に基づいて、該撮像素子の有効画素に発生したスミアレベルを検出するスミアレベル検出手段と、該スミアレベル検出手段で検出されたスミアレベルが所定値を超える場合、これに対応する有効画素を出力劣化画素と判定する劣化画素判定手段と、該劣化画素判定手段で出力劣化画素と判定された画素からの信号が所定の飽和レベルに達しているとき、この劣化画素について所定の補償条件を満足するか否かを判定する補償条件判定手段と、該補償条件判定手段により補償条件を満たすと判定された劣化画素からの信号を、当該劣化画素近隣の非劣化画素信号によって置き換える劣化画素補正手段とを備え、前記劣化画素補正手段は、少なくとも出力劣化画素と判定されなかった非劣化画素、及び、前記補償条件を満足しないと判定された劣化画素からの信号に対しては、該信号のレベルから検出スミアレベルを差し引くと共に、飽和レベルと検出スミアレベルとに基づく係数を乗じて出力レベルを補正するようにして撮像装置を構成するものである。
【0010】
このように構成された撮像装置においては、スミアレベル検出手段と劣化画素判定手段とを備え、検出されたスミアレベルが所定値を超える場合に、これに対応する有効画素を出力劣化画素と判定するようになっているので、信号の飽和などに起因する従来の補正では対応不可能な画素に対してデータの補償を適用することが可能になり、またこの際の判定をスミアレベルのみで行うことができる。また、出力劣化画素について所定の補償条件を満たすか否かを判定する補償条件判定手段を備えているので、無制限に補償を行うことに伴う不自然な画像の生成のおそれを防止することができる。また、前記のような構成の劣化画素補正手段を備えているので、所定条件を満たすと判定された劣化画素については、近隣の非劣化画素信号に基づいてデータ補償が行われ、白筋に代表される原理的に避け得ない不自然な目立つ偽信号が低減あるいは除去された画像が得られる。また少なくとも出力劣化画素と判定されなかった非劣化画素、及び、前記補償条件を満足しないと判定された劣化画素からの信号に対しては、該信号のレベルから検出スミアレベルを差し引くと共に、飽和レベルと検出スミアレベルとに基づく係数を乗じて出力レベルを補正するようにしているので、スミアレベルを考慮した、スミアが軽減され且つ不自然な目立つ偽信号が低減あるいは除去された、より高画質な画像を得ることができる。
【0011】
上記請求項1に係る撮像装置においては、請求項2に記載のように、前記スミアレベル検出手段によって検出される撮像素子のスミアレベルは、同一水平アドレスの遮光画素列からの信号レベルの総和を該同一遮光画素列内の総画素数で除したもので形成するのが好ましい。また上記請求項1又は2に係る撮像装置においては、請求項3に記載のように、前記所定の補償条件は、当該劣化画素列を中央とする近隣画素列4列のうちに、少なくとも1列の非劣化画素列を含むという条件とするのが好ましい。
【0012】
請求項4に係る発明は、垂直ブランキング期間中に撮像素子の遮光画素列から出力される信号に基づいて、該撮像素子の有効画素に発生したスミアレベルを検出するステップと、該スミアレベル検出ステップで検出されたスミアレベルが所定値を超える場合、これに対応する有効画素を出力劣化画素と判定するステップと、該劣化画素判定ステップで出力劣化画素と判定された画素からの信号が所定の飽和レベルに達しているとき、この劣化画素について所定の補償条件を満足するか否かを判定するステップと、該補償条件判定ステップにおいて補償条件を満たすと判定された劣化画素からの信号を、当該劣化画素近隣の非劣化画素信号によって置き換える劣化画素補正ステップの各ステップを含み、前記劣化画素補正ステップは、少なくとも出力劣化画素と判定されなかった非劣化画素、及び、前記補償条件を満足しないと判定された劣化画素からの信号に対しては、該信号のレベルから検出スミアレベルを差し引くと共に、飽和レベルと検出スミアレベルとに基づく係数を乗じて出力レベルを補正するステップを含んで撮像装置の劣化画素信号補正方法を構成するものである。
【0013】
このように構成した撮像装置の劣化画素信号補正方法においては、スミアレベル検出ステップと劣化画素判定ステップとを有し、検出されたスミアレベルが所定値を超える場合に、これに対応する有効画素を出力劣化画素と判定するようになっているので、信号の飽和などに起因する従来の補正では対応不可能な画素に対してデータの補償を適用することが可能になり、またこの際の判定をスミアレベルのみで行うことができる。また、出力劣化画素について所定の補償条件を満たすか否かを判定する補償条件判定ステップを有しているので、無制限に補償を行うことに伴う不自然な画像の生成のおそれを防止することができる。また、上記構成の劣化画素補正ステップを有しているので、所定条件を満たすと判定された劣化画素については、近隣の非劣化画素信号に基づいてデータ補償が行われ、白筋に代表される原理的に避け得ない不自然な目立つ偽信号が低減あるいは除去された画像が得られる。また少なくとも出力劣化画素と判定されなかった非劣化画素、及び、前記補償条件を満足しないと判定された劣化画素からの信号に対しては、該信号のレベルから検出スミアレベルを差し引くと共に、飽和レベルと検出スミアレベルとに基づく係数を乗じて出力レベルを補正するようにしているので、スミアレベルを考慮した、スミアが軽減され且つ不自然な目立つ偽信号が低減あるいは除去された、より高画質な画像を得ることができる。
【0014】
上記請求項4に係る撮像装置の劣化画素信号補正方法においては、請求項5に記載のように、前記スミアレベル検出ステップで検出される撮像素子のスミアレベルは、同一水平アドレスの遮光画素列からの信号レベルの総和を該同一遮光画素列内の総画素数で除したものとするのが好ましい。また上記請求項4又は5に係る撮像装置の劣化画素信号補正方法においては、請求項6に記載のように、前記所定の所定の補償条件は、当該劣化画素列を中央とする近隣画素列4列のうちに、少なくとも1列の非劣化画素列を含むという条件とするのが好ましい。
【0015】
【発明の実施の形態】
次に、実施の形態について説明する。図1は、本発明に係る撮像装置の第1の実施の形態のディジタルビデオカメラを示すブロック構成図である。図1において、1はレンズ系、2はレンズ駆動機構、3は露出制御機構、4はフィルタ系、5はCCD撮像素子、6はCCDドライバ、7はA/Dコンバータを含むプリプロセス回路、8はディジタルプロセス回路で、ハードとしてメモリを含み、全てのディジタルプロセス処理を行うものである。9は記録部(VTRブロック)、10はビデオテープ、11はLCD画像表示系、12は主たる構成としてマイコンを含むシステムコントローラ、13は操作スイッチ系、14は表示用LCDを含む操作表示系、15はレンズドライバ、16は露出制御ドライバ、17はEEPROMである。
【0016】
このように構成されているディジタルビデオカメラにおいては、システムコントローラ12が全ての制御を統括的に行なっており、虹彩絞り(アイリス)である露出制御機構3と、CCDドライバ6によるCCD撮像素子5の駆動を制御して、所定の動画レートで露光(電荷蓄積)及び信号の読み出しを行ない、それをプリプロセス回路7を介してディジタルプロセス回路8に一旦格納し、この中で所定の各種信号処理を施した後に記録部9に送出して、ビデオテープ10に記録するものである。
【0017】
そして、上記各種信号処理を施すディジタルプロセス回路8には、本発明の要部であるところの、垂直OB画素の出力レベル情報を用いたスミア補正処理が含まれている。すなわち、ディジタルプロセス回路8には垂直OB画素の出力レベルを検出するスミアレベル検出部8−1,該スミアレベル検出部8−1の検出出力等に基づいて出力劣化画素を判定する出力劣化画素判定部8−2,出力劣化画素について所定の補償条件を満たすか否かを判定する補償条件判定部8−3,補償条件を満たすと判定された劣化画素のデータ補償を行うデータ補償部8−4並びにスミア補正部8−5を備えている(なお、これらの各部8−1〜8−5は、現実の演算処理においては必ずしも明確に分離されていないこともあるが、説明の便宜と概念を明確化のために分けて示すものである)。勿論これら全ての処理は、上記所定の動画レートでの記録を行なうに足る速度で行われる、いわゆるリアルタイム処理である。
【0018】
次に、本発明のスミア補正に直接関わる処理を中心にシステムコントローラ12によるカメラ制御について説明を行なう。まず、上記動作における露光によって生じたCCD撮像素子5の信号電荷を順次読み出した1画面に対応する撮像出力信号を、ディジタルプロセス回路8の所定メモリ領域に格納すると、まずスミアレベル検出部8−1で垂直OB画素の出力を用いて、スミア成分を検出してスミア除去基準信号を算出する。算出に当たっては、必要に応じて上記公開公報記載の従来技術と同様に、複数ラインあるOB画素のデータのうち同じ水平アドレスを持つ画素毎の和をとり、その画素数で除することで平均値を得る。上記スミア除去基準信号は1ライン分の画像信号であるが、その1ライン分の画像信号を構成する各1画素信号の値として、上記演算で得られる平均値を用いる。このようにして得られるスミア除去基準信号をSm(i)とする。但しi は水平アドレス、後出のjは垂直アドレスである。
【0019】
そして、出力劣化画素判定部8−2,補償条件判定部8−3,データ補償部8−4及びスミア補正部8−5において、このスミア除去基準信号を用いて有効画像領域の撮像出力信号Sig(i,j) に対して補正処理を施す。本発明のスミア補正処理は、このときの撮像出力信号やスミアのレベルに応じて異なる処理を行ない、更にそれでもなお原理的に補正不能なものの中で、所定の補償処理が可能なものについては、近隣画素の情報を用いて補償処理を行なうところに特徴がある。撮像素子(又はその出力を受ける信号処理系)の飽和レベルをSat、所定の比較レベルをR1及びR2(0<R1<R2<Sat)、スミア補正後の出力をSout(i,j)とすると(当然ながら0≦Sm(i)≦Sig(i,j) ≦Satである)、本実施の形態における具体的な信号処理は、以下のとおりである。
まず、基本的な信号処理については、次式(1)で示すものとする。
Sout(i,j)=S1(i,j) ≡{Sig(i,j) −Sm(i)}×Sat/{Sat−Sm(i)} ・・・・・・・(1)
【0020】
ここで、この実施の形態のスミア補正信号処理の具体的な意味について解説する。対比される従来の処理を式で表わせば、次式(2)のように表される。
Sout(i,j)=Sig(i,j) −Sm(i) ・・・・・・・・・・(2)
この従来の処理の場合、上記従来技術の問題点では特に理解し易い問題例を示したが、これを一般化すれば、問題は出力信号のレンジが小さくなること、すなわちスミア補正後の出力信号Sout(i,j)の最大値は、スミアレベルの分だけ小さくなって、Sat−Sm(i)になってしまうということである。
【0021】
そして、このため極端なケースでは上記黒筋の発生となるが、そうでなくても「飽和が生じたとき、すなわちSig(i,j) =Sat」で「スミアが存在する、すなわちSm(i)>0」のときは、そのスミアレベルに応じてグレイ〜黒の筋を生じてしまうことになって、無補正の時の白筋に比して、極めて不自然な奇異な画像を生じることになる。これらの態様をグラフで示すと、図2の(A),(B)のようになる。図2の(A)は無補正の場合の入出力特性を示す図で、図2の(B)は従来の処理による入出力特性を示している。この図2の(B)の特性から、本来の信号成分のみが得られてはいるものの最大値が小さくなっているのがわかる。
【0022】
これに対して、本実施の形態における上記(1)式のS1(i,j) は、Sig(i,j) =Satを代入すれば、出力Sout(i,j)=Satが得られる。この場合、その部分はスミアの影響又は被写体自体の高輝度のため飽和レベルの白出力になってしまうが、少なくとも従来の無補正画像と同等であるから、上記従来のスミア補正のような奇異な画像を生じることはない。
【0023】
この(1)式のS1(i,j) に対応する変換(入出力)特性を図3に示す。図3の特性と図2の(B)に示した特性とを比較すると、本実施の形態に係る図3の特性は、低輝度になるほど本来の信号成分のみである図2の(B)に示した特性の値に近づき(信号成分=0で一致)、高輝度側では無補正の値に近づいている(Sig(i,j) =Satで一致)ことが判る。スミアの発生レベルが比較的小さい場合は、特に低輝度被写体においてこれが視認されやすいから、(1)式のS1(i,j) はスミアの補正効果と上記従来の不具合現象の解消を妥協的にではあるが、効果的に両立させたものになっている。
【0024】
さて、このようなスミア補正を行なえば、従来のスミア補正方法が有していた欠点は解消されるが、撮像素子出力が飽和してしまった場合は、従来の無補正の場合と同様に白筋等を生じてしまうことは事実で、この場合飽和画素については被写体情報が得られないから、本来原理的に如何ともし難いものである。ここで、本発明においては、このようなスミアによって画素情報が劣化した画素についても、その劣化状態を判定し、更に所定の条件を充たす場合には、その劣化画素を画素欠陥と同様に見做して、近隣画素等を用いた補償処理を行なうことで、実質的な画質(鑑賞上の画質)を更に少しでも向上させるようにしたもので、この点が極めて特徴的である。
【0025】
具体的には、所定の基準レベルをR(≠0)として、以下の(1)〜(4)の劣化判定基準により劣化画素の判定を行なう。
(1)Sm(i)=Satの場合(スミアレベルが飽和に達している場合:この場合必然的にSig(i,j) =Satとなる)
この場合は、スミアの影響によって出力が劣化した画素であるから、劣化画素と判定する。被写体情報はない。
(2)Sm(i)>R,且つSig(i,j) =Satの場合
この場合は、スミアの影響によって出力が劣化した画素である可能性が高いので、劣化画素と判定する。被写体情報はやはりない。
(3)Sm(i)>R,且つSig(i,j) <Satの場合
この場合は、スミアは高いレベルで存在するが、被写体情報を有しており、劣化画素ではないと判定する。
(4)Sm(i)≦Rの場合
この場合は劣化画素ではないと判定する。(飽和画素についても、スミアの影響はあり得るが、被写体自身のレベルが高いことが主因であるとする。)
【0026】
劣化画素と判定された画素については、続いて所定の補償条件を満たすかどうか判定する補償条件判定を行なう。その条件は、着目画素信号Sig(i,j) の左右いずれかの近接画素が劣化画素ではないこととし、具体的には次の条件とする。
[補償条件:i−2、i−1、i+1、i+2の各列のうちに少なくとも1列の劣化画素を含まない列(非劣化画素列)が存在すること。すなわち、当該劣化画素列を中央とする近隣画素列4列のうちに、少なくとも1列の非劣化画素列を含むという条件。]
この補償条件を充たす劣化画素に対しては、補償処理を行なうことになるが、それに先立ち全画素について(少なくとも非劣化画素及び補償条件を充たさなかった劣化画素について)、上記(1)式のS1(i,j) によるスミア補正を行なう。すなわち補償処理に際しては、この補正後のデータを用いるものである。
【0027】
次に、補償処理の内容を具体的に示す。
Sig(i-1,j) ,Sig(i+1,j) のいずれかが非劣化画素である場合は、その非劣化画素の画素情報(いずれも非劣化画素の場合は平均値)を、そうでない場合すなわちSig(i-1,j) ,Sig(i+1,j) がいずれも劣化画素である場合は、Sig(i-2,j) 又はSig(i+2,j) のいずれかの画素情報(いずれも非劣化の場合は平均値)を、当該Sig(i,j) の値に充当する。つまり、近隣の非劣化画素信号で置き換えるという補償処理を行う。
【0028】
すなわち、劣化画素に関しては、少なくとも左右いずれかの近隣2画素以内の非劣化画素の情報(被写体情報を反映した情報)によって代替されるから、例えば従来スミアによって生じていた白筋は、その幅を最大4画素減じることができる。当然4画素幅以内のものであれば、この補償処理によって消えることになる。このような処理を無制限に、例えば非常に多くの画素幅に亙って行なえば、不自然な画像を生じることはもちろんであるが、数画素程度にとどめれば、不自然さはそれほど目立つことはなく、白筋というかなり不自然な目立つ偽信号を低減あるいは除去するという大きな効果を得ることができる。
【0029】
以上のような補償処理を含むスミア補正処理によって、総合的には、比較的低レベルのスミア発生に対して、従来のスミア補正に比較的近い(スミアが目立ちやすい低輝度被写体部分では、本来の被写体信号により近い出力が得られる)充分な補正効果を有しつつ、従来の補正で生じていた信号飽和に起因する不具合が大幅に軽減されて、特に黒筋などの画質の破綻というべき奇異な不自然な疑似信号が生じることのない補正特性を有し、且つ白筋など原理的に避け得ない不自然な目立つ偽信号を低減あるいは除去した、高画質なスミア補正処理が行なわれる。
【0030】
以上のように、スミア補正処理を経た出力画像信号Sout(i,j)は、適宜各種信号処理を経てビデオテープ10に記録、あるいはLCD画像表示系11に表示される。記録あるいは表示される画像は、スミアが効果的に補正され不自然な疑似信号が生じない高画質な画像である。
【0031】
なお、また本実施の形態に係るディジタルビデオカメラは、上記各種信号処理に含んでおり、上記スミア補正における補償処理とは別の、従来公知の画素欠陥補償手段を有しており、有効画素部分に対応する上記スミア補正後の出力信号に対して、上記EEPROM17に格納された欠陥画素アドレスデータに基づいて、この処理がなされる。このときスミア補正を先に行い、欠陥補償を後に行うことには意味がある。これは、次の理由による。すなわち、欠陥補償には通常異なる水平アドレスの出力信号を用いるから、処理順序を単純に入替え欠陥補償を先に行なうと、スミア補正が正しく行われず、新たな偽信号の原因になって好ましくないためである。
【0032】
なお、上記実施の形態の他にも様々な実施の形態が考えられる。例えば、補償処理に先立って行う(1)式のS1(i,j) の補正を、従来公知のスミア補正を含む任意の補正特性とすることができる。この場合採用する補正特性によっては、必ずしも総合的に充分な画質が得られないケースも有り得るが、少なくとも従来改善不可能であった白筋というかなり不自然な目立つ偽信号を低減あるいは除去するという効果が得られることに変わりはなく、もし採用する補正特性が上記実施の形態よりも優れたものであれば、その組合せによって総合画質は更に優れたものとなる。
【0033】
これとは別に上記説明においては、補償条件及び補償処理を比較的単純な形で記述したが、撮像素子がモノクロであればそのまま適用できる。一方、単板カラー撮像素子の場合は、色コーディングの影響で、上記説明を文字どおりに読むと適用困難な場合がある。しかし、この場合も、例えばその色コーディングに関する色情報を得るための最小単位(色に関する画素と言い得る)に着目して、これを上記実施の形態の1画素に読み替えればよいものである。このようにすることで、本発明はカラー撮像装置にも同様に適用できる。
【0034】
また、上記実施の形態ではスミア検出のために、いわゆる垂直OB画素対応の出力を用いているが、これは一例であり、現実に対応する光電変換素子(画素蓄積部)がなくても、垂直ブランキング期間に対応する撮像素子出力を用いてスミアの検出は同様に可能であるから、そのような周知の構成に置き換えてもよいことは明らかである。
【0035】
更には、上記実施の形態は主として動画を記録対象とするものであったが、信号処理は1フレームの画像のみ(フレーム内処理)で行なっているから、これをそのまま静止画撮影に適用できることは当然である。例えば上記カメラが付加的に有する静止画撮影モードに、あるいは別の静止画撮影を主目的とするディジタルスチルカメラに応用したものは、それぞれ好適な実施の形態となる。無論、上記説明は本発明の適用範囲をフレーム内処理に限る意図では毛頭無く、フレーム間処理に適用することも容易であることは言を待たない。
【0036】
以上本発明のいくつかの実施の形態を具体的に示したが、本発明はこれらに限られることなく、特許請求の範囲に記載の限りにおいて如何なる態様をも取り得るものであることは言うまでもない。
【0037】
【発明の効果】
以上上記実施の形態に基づいて説明したように、本発明によれば、スミア補正によりスミアが軽減され、且つ不自然な偽信号が低減あるいは除去された高画質な画像を得ることができる。具体的には、本発明に係る撮像装置及びその劣化画素信号補正方法によれば、スミアレベル検出手段と劣化画素判定手段又はスミアレベル検出ステップと劣化画素判定ステップを備え、検出されたスミアレベルが所定値を超える場合に、これに対応する有効画素を出力劣化画素と判定するようになっているので、信号の飽和などに起因する従来の補正では対応不可能な画素に対してデータの補償を適用することが可能になり、またこの際の判定をスミアレベルのみで行うことができる。また、出力劣化画素について所定の補償条件を満たすか否かを判定する補償条件判定手段又は補償条件判定ステップを備えているので、無制限に補償を行うことに伴う不自然な画像の生成のおそれを防止することができる。また、前記のような構成の劣化画素補正手段あるいは劣化画素補正ステップを備えているので、所定条件を満たすと判定された劣化画素については、近隣の非劣化画素信号に基づいてデータ補償が行われ、白筋に代表される原理的に避け得ない不自然な目立つ偽信号が低減あるいは除去された画像が得られる。また、所定条件を満たさない劣化画素についてはスミアレベルに応じて出力レベルを補正するようにしているので、スミアレベルを考慮した、スミアが軽減され且つ不自然な目立つ偽信号が低減あるいは除去された、より高画質な画像を得ることができる。
【図面の簡単な説明】
【図1】本発明に係る撮像装置の実施の形態のディジタルビデオカメラの構成を示すブロック図である。
【図2】本発明の実施の形態におけるスミア補正に対比するための無補正時の入出力特性及び従来のスミア補正の入出力特性を示す図である。
【図3】図1に示した実施の形態におけるスミア補正の態様を説明するためのスミア補正部の入出力特性を示す図である。
【符号の説明】
1 レンズ系
2 レンズ駆動機構
3 露出制御機構
4 フィルタ系
5 CCD撮像素子
6 CCDドライバ
7 プリプロセス回路
8 ディジタルプロセス回路
8−1 スミアレベル検出部
8−2 出力劣化画素判定部
8−3 補償条件判定部
8−4 データ補償部
8−5 スミア補正部
9 記録部
10 ビデオテープ
11 LCD画像表示系
12 システムコントローラ
13 操作スイッチ系
14 操作表示系
15 レンズドライバ
16 露出制御ドライバ
17 EEPROM
Claims (6)
- 垂直ブランキング期間中に撮像素子の遮光画素列から出力される信号に基づいて、該撮像素子の有効画素に発生したスミアレベルを検出するスミアレベル検出手段と、該スミアレベル検出手段で検出されたスミアレベルが所定値を超える場合、これに対応する有効画素を出力劣化画素と判定する劣化画素判定手段と、該劣化画素判定手段で出力劣化画素と判定された画素からの信号が所定の飽和レベルに達しているとき、この劣化画素について所定の補償条件を満足するか否かを判定する補償条件判定手段と、該補償条件判定手段により補償条件を満たすと判定された劣化画素からの信号を、当該劣化画素近隣の非劣化画素信号によって置き換える劣化画素補正手段とを備え、前記劣化画素補正手段は、少なくとも出力劣化画素と判定されなかった非劣化画素、及び、前記補償条件を満足しないと判定された劣化画素からの信号に対しては、該信号のレベルから検出スミアレベルを差し引くと共に、飽和レベルと検出スミアレベルとに基づく係数を乗じて出力レベルを補正するように構成されていることを特徴とする撮像装置。
- 前記スミアレベル検出手段によって検出される撮像素子のスミアレベルは、同一水平アドレスの遮光画素列からの信号レベルの総和を該同一遮光画素列内の総画素数で除したものであることを特徴とする請求項1に係る撮像装置。
- 前記所定の補償条件は、当該劣化画素列を中央とする近隣画素列4列のうちに、少なくとも1列の非劣化画素列を含むという条件であることを特徴とする請求項1又は2に係る撮像装置。
- 垂直ブランキング期間中に撮像素子の遮光画素列から出力される信号に基づいて、該撮像素子の有効画素に発生したスミアレベルを検出するステップと、該スミアレベル検出ステップで検出されたスミアレベルが所定値を超える場合、これに対応する有効画素を出力劣化画素と判定するステップと、該劣化画素判定ステップで出力劣化画素と判定された画素からの信号が所定の飽和レベルに達しているとき、この劣化画素について所定の補償条件を満足するか否かを判定するステップと、該補償条件判定ステップにおいて補償条件を満たすと判定された劣化画素からの信号を、当該劣化画素近隣の非劣化画素信号によって置き換える劣化画素補正ステップの各ステップを含み、前記劣化画素補正ステップは、少なくとも出力劣化画素と判定されなかった非劣化画素、及び、前記補償条件を満足しないと判定された劣化画素からの信号に対しては、該信号のレベルから検出スミアレベルを差し引くと共に、飽和レベルと検出スミアレベルとに基づく係数を乗じて出力レベルを補正するステップを含んでいることを特徴とする撮像装置の劣化画素信号補正方法。
- 前記スミアレベル検出ステップで検出される撮像素子のスミアレベルは、同一水平アドレスの遮光画素列からの信号レベルの総和を該同一遮光画素列内の総画素数で除したものであることを特徴とする請求項4に係る撮像装置の劣化画素信号補正方法。
- 前記所定の補償条件は、当該劣化画素列を中央とする近隣画素列4列のうちに、少なくとも1列の非劣化画素列を含むという条件であることを特徴とする請求項4又は5に係る撮像装置の劣化画素信号補正方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2000230259A JP3618645B2 (ja) | 1999-08-02 | 2000-07-31 | 撮像装置及びその劣化画素信号補正方法 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP11-218598 | 1999-08-02 | ||
JP21859899 | 1999-08-02 | ||
JP2000230259A JP3618645B2 (ja) | 1999-08-02 | 2000-07-31 | 撮像装置及びその劣化画素信号補正方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2001111899A JP2001111899A (ja) | 2001-04-20 |
JP3618645B2 true JP3618645B2 (ja) | 2005-02-09 |
Family
ID=26522648
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2000230259A Expired - Fee Related JP3618645B2 (ja) | 1999-08-02 | 2000-07-31 | 撮像装置及びその劣化画素信号補正方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP3618645B2 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7924329B2 (en) | 2004-10-22 | 2011-04-12 | Sanyo Electric Co., Ltd. | Noise eliminator |
JP4803800B2 (ja) * | 2006-01-11 | 2011-10-26 | 株式会社メガチップス | 画像センサーデータ処理装置 |
JP4785564B2 (ja) * | 2006-03-03 | 2011-10-05 | キヤノン株式会社 | 欠陥補正装置及び欠陥補正方法 |
-
2000
- 2000-07-31 JP JP2000230259A patent/JP3618645B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2001111899A (ja) | 2001-04-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US6970193B1 (en) | Electronic imaging apparatus operable in two modes with a different optical black correction procedure being effected in each mode | |
US6809763B1 (en) | Image pickup apparatus and method of correcting deteriorated pixel signal thereof | |
JP4404823B2 (ja) | 撮像装置 | |
US20040169896A1 (en) | Image sensing apparatus, image sensing method, and program | |
JP2001292376A (ja) | 撮像装置 | |
JP2002354340A (ja) | 撮像装置 | |
US20090027519A1 (en) | Noise reduction device, noise reduction method and video camera | |
US7843501B2 (en) | Image sensing apparatus and defect correction method | |
JP4339450B2 (ja) | 撮像装置 | |
JP2002077738A (ja) | クランプ装置 | |
JP4266443B2 (ja) | 撮像装置 | |
JP3618645B2 (ja) | 撮像装置及びその劣化画素信号補正方法 | |
JP3720683B2 (ja) | 撮像装置 | |
JP2002238057A (ja) | 撮像装置、輝度補正方法、およびその方法をコンピュータで実行するためのプログラム | |
JP2001177768A (ja) | 撮像装置 | |
JP4262363B2 (ja) | 撮像装置 | |
JP3824344B2 (ja) | 固体撮像装置 | |
JP3238968B2 (ja) | 固体撮像装置 | |
JP4498086B2 (ja) | 画像処理装置および画像処理方法 | |
JP5055173B2 (ja) | 撮像装置、及び撮像装置の制御方法 | |
JP3796421B2 (ja) | 撮像装置及び撮像方法 | |
JP2001292377A (ja) | 撮像装置 | |
JP4266445B2 (ja) | 撮像装置 | |
JP2006014163A (ja) | 固体撮像装置およびスミア補正方法 | |
JP4602541B2 (ja) | 撮像装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20040810 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20040929 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20041102 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20041110 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20071119 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20081119 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091119 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101119 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101119 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111119 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111119 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121119 Year of fee payment: 8 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131119 Year of fee payment: 9 |
|
LAPS | Cancellation because of no payment of annual fees |