JP3998369B2 - 画像処理方法および画像処理装置 - Google Patents
画像処理方法および画像処理装置 Download PDFInfo
- Publication number
- JP3998369B2 JP3998369B2 JP12602899A JP12602899A JP3998369B2 JP 3998369 B2 JP3998369 B2 JP 3998369B2 JP 12602899 A JP12602899 A JP 12602899A JP 12602899 A JP12602899 A JP 12602899A JP 3998369 B2 JP3998369 B2 JP 3998369B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- processing
- lens
- sharpness
- film
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000012545 processing Methods 0.000 title claims description 245
- 238000003672 processing method Methods 0.000 title claims description 14
- 230000004075 alteration Effects 0.000 claims description 98
- 238000012937 correction Methods 0.000 claims description 70
- 238000000034 method Methods 0.000 claims description 43
- 230000008569 process Effects 0.000 claims description 24
- 239000003086 colorant Substances 0.000 claims description 18
- 230000002093 peripheral effect Effects 0.000 claims description 18
- 230000006866 deterioration Effects 0.000 claims description 13
- 230000009467 reduction Effects 0.000 description 15
- 238000006243 chemical reaction Methods 0.000 description 13
- 239000000463 material Substances 0.000 description 13
- 238000004364 calculation method Methods 0.000 description 12
- 238000010586 diagram Methods 0.000 description 10
- 230000010354 integration Effects 0.000 description 10
- 238000003384 imaging method Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 7
- 230000015556 catabolic process Effects 0.000 description 5
- 238000006731 degradation reaction Methods 0.000 description 5
- 230000001965 increasing effect Effects 0.000 description 5
- 238000011161 development Methods 0.000 description 3
- 230000011514 reflex Effects 0.000 description 3
- 230000035945 sensitivity Effects 0.000 description 3
- 230000001629 suppression Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000009792 diffusion process Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000003702 image correction Methods 0.000 description 2
- 239000004615 ingredient Substances 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 229920006395 saturated elastomer Polymers 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 238000009825 accumulation Methods 0.000 description 1
- 238000003556 assay Methods 0.000 description 1
- 238000003705 background correction Methods 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000012888 cubic function Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000012850 discrimination method Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000000873 masking effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000001454 recorded image Methods 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 230000003595 spectral effect Effects 0.000 description 1
- 230000002195 synergetic effect Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 238000010200 validation analysis Methods 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- 238000005406 washing Methods 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Landscapes
- Television Signal Processing For Recording (AREA)
- Facsimile Image Signal Circuits (AREA)
- Control Of Exposure In Printing And Copying (AREA)
- Image Processing (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は、デジタルの画像処理方法および画像処理装置の技術分野に属し、詳しくは、フィルム画像を光電的に読み取り、この画像が再現されたプリント（写真）を得るデジタルフォトプリンタ等において、レンズ付きフィルムや安価なコンパクトカメラや低コストなデジタルカメラ等の性能の高くないレンズで撮影された画像であっても、高画質な画像を得ることができる画像処理方法および画像処理装置に関する。
【０００２】
【従来の技術】
現在、ネガフィルム、リバーサルフィルム等の写真フィルム（以下、フィルムとする）に撮影された画像の感光材料（印画紙）への焼き付けは、フィルムの画像を感光材料に投影して感光材料を露光する、いわゆる直接露光（アナログ露光）が主流である。
【０００３】
これに対し、近年では、デジタル露光を利用する焼付装置、すなわち、フィルムに記録された画像を光電的に読み取って、読み取った画像をデジタル信号とした後、種々の画像処理を施して記録用の画像データとし、この画像データに応じて変調した記録光によって感光材料を走査露光して画像（潜像）を記録し、仕上がりプリント（写真）とするデジタルフォトプリンタが実用化された。
【０００４】
デジタルフォトプリンタでは、画像をデジタル画像データとして、画像処理によって焼付時の露光条件を決定することができるので、逆光やストロボ撮影等に起因する画像の飛びやツブレの補正、鮮鋭度強調処理等を好適に行って、従来の直接露光では得られなかった高品位なプリントを得ることができる。また、画像や文字の合成等も画像処理で行うことができ、用途に応じて自由に編集／処理したプリントも出力可能である。
【０００５】
しかも、デジタルフォトプリンタによれば、フィルムに撮影された画像以外にも、デジタルカメラで撮影された画像やコンピュータで処理した画像もプリントとして出力でき、また、プリント以外にも、画像データをコンピュータ等に供給したり、フロッピーディスク等の記録媒体に保存しておくこともできるので、画像データを、写真以外の様々な用途に利用することができる。
【０００６】
このようなデジタルフォトプリンタは、基本的に、フィルムに読取光を入射して、その投影光を読み取ることによって、フィルムに記録された画像を光電的に読み取るスキャナ（画像読取装置）と、スキャナによって読み取られた画像データやデジタルカメラ等から供給された画像データに所定の画像処理を施し、画像記録のための画像データや露光条件を得る画像処理装置と、画像処理装置から出力された画像データに応じて、例えば光ビーム走査によって感光材料を走査露光して潜像を記録するプリンタ（画像記録装置）と、プリンタによって露光された感光材料に現像処理を施して、画像が再生されたプリントとするプロセサ（現像装置）とを有して構成される。
【０００７】
【発明が解決しようとする課題】
ところで、一般的なユーザが通常の写真撮影を行なう場合には、一眼レフカメラのような高価で高性能なカメラを使用することは少なく、安価でかつ露光やピント合わせ等の操作が自動化された、いわゆるコンパクトカメラを使用するのが通常である。また、近年では、手軽である等の理由から、いわゆるレンズ付きフィルムを使用するユーザも非常に多い。
【０００８】
一眼レフカメラ等のように、ある程度のコストをかけられるカメラでは、精度の高いレンズを用い、さらに複数枚のレンズを組み合わせることにより、非常に高画質な画像を撮影することができる。
これに対し、レンズ付きフィルムや安価なコンパクトカメラでは、レンズにコストをかけることができず、安価なレンズを１〜２枚しか用いることができないため、画質的に十分な画像を撮影することができず、プリントに再生された画像は、必ずしも高画質と言うことはできない。
【０００９】
本発明の目的は、前記従来技術の問題点を解決することにあり、レンズ付きフィルムやコンパクトカメラ等の安価なカメラで撮影された画像や、安価なデジタルカメラによって撮影された画像からであっても、高画質な画像が再生された高品質のプリント（写真）を得ることができる画像処理方法および画像処理装置を提供することにある。
【００１０】
【課題を解決するための手段】
前述のように、レンズ付きフィルムやコンパクトカメラでは、レンズにコストをかけることができないので、十分な画質の画像を撮影することができず、高画質な画像が再生された高品質の仕上がりプリントを得ることができない。従来、このようなレンズ性能に起因する画質低下、特に画像ボケを補正するためには、画像の位相を考慮する、すなわちピントボケ（ＰＳＦ:Point Spread Function）の逆変換を行なう必要がある。ただし、この方法では、処理回路の規模か大きくなり、また処理も難しいという問題点がある。
このような問題点について、本発明者が鋭意検討を重ねた結果、レンズ付きフィルム等によって撮影された画像であっても、鮮鋭度強調処理（シャープネス処理）の強度を変更、特に通常（デフォルト）よりも強く掛けることにより、処理が難しいＰＳＦ補正を行わなくても、ピントボケが是正された十分な画質のプリントを得られることを見いだし、また、鮮鋭度強調処理機能を有する装置であれば、このように鮮鋭度強調処理の強度を変更することにより、製品等のコストを上昇させることなく、レンズ性能に起因する画質低下をカバーすることができることを見いだした結果、本発明に至ったものである。
【００１１】
すなわち、本発明の画像処理方法は、光学的に撮影された画像から赤、青及び緑の３原色の画像データを得、少なくとも鮮鋭度強調処理を施して出力画像用の画像データとする画像処理方法であって、前記画像を撮影したレンズの情報を得てレンズ種を判別して、レンズ種に応じて、前記レンズの特性に起因する歪曲収差、倍率色収差および周辺光量の少なくとも１つを補正し、補正された画像の前記鮮鋭度強調処理の強度を、レンズ種に応じて、３原色の各色毎に独立に変更する際、３原色のうち、少なくとも赤色の画像の前記鮮鋭度強調処理の強度を、緑色の画像の前記鮮鋭度強調処理の強度よりも強くすることを特徴とする。
【００１２】
ここで、前記鮮鋭度強調処理の強度は、１コマの画像全体で一律に変更される、もしくは前記１コマの画像を複数の画像領域に分割し、その分割された画像領域毎に変更されるのが好ましい。
【００１３】
また、本発明の画像処理装置は、光学的に撮影された画像から得られた赤、青及び緑の３原色の画像データに画像処理を施し、出力画像用の画像データとする画像処理装置であって、前記画像を撮影したレンズの判別情報を取得し、そのレンズ種を判別する判別手段と、判別したレンズ種に応じたレンズ特性を記憶する記憶手段、および、対応するレンズ種のレンズ特性を前記記憶手段から受け取り、画像の位置情報とレンズ特性とから前記レンズ特性に起因する歪曲収差、倍率色収差および周辺光量の少なくとも１つを補正する画質劣化補正手段を含み、前記画質劣化補正手段で補正した画像に、前記判別手段により判別されたレンズ種に応じて鮮鋭度強調処理を少なくとも行なう画像処理手段と、を有し、前記画像処理手段は、前記鮮鋭度強調処理の強度を３原色の各色毎に独立に変更し、３原色のうち、少なくとも赤色の画像の前記鮮鋭度強調処理の強度を、緑色の画像の前記鮮鋭度強調処理の強度よりも強くすることを特徴とする。
【００１４】
ここで、前記画質劣化補正手段は、レンズ特性による倍率色収差および歪曲収差、あるいはさらに周辺光量を補正するものであり、倍率色収差に起因する３原色の基準となる色に対する他の色の画像位置のずれ量を算出し、この倍率色収差に起因するずれ量と、歪曲収差に起因する前記基準となる色の画像位置のずれ量とを用いて、歪曲収差に加え倍率色収差も補正した各画像の適正な位置を算出し、前記各画像の適正な位置から画質劣化の補正を行い、あるいは前記各画像の適正な位置を用いて画質劣化の補正および電子変倍処理を行なうのが好ましい。
【００１５】
また、前記画像処理手段は、前記鮮鋭度強調処理の強度を１コマの画像全体で一律に変更する、もしくは前記１コマの画像を複数の画像領域に分割し、その分割された画像領域毎に変更するのが好ましい。
【００１６】
【発明の実施の形態】
以下、本発明の画像処理方法および画像処理装置について、添付の図面に示される好適実施例を基に詳細に説明する。
【００１７】
図１に、本発明の画像処理方法を実施する本発明の画像処理装置を利用するデジタルフォトプリンタの一実施例のブロック図が示される。
図１に示されるデジタルフォトプリンタ（以下、フォトプリンタとする）１０は、基本的に、フィルムＦに撮影された画像を光電的に読み取るスキャナ（画像読取装置）１２と、読み取られた画像データ（画像情報）の画像処理やフォトプリンタ１０全体の操作および制御等を行う画像処理装置１４と、画像処理装置１４から出力された画像データに応じて変調した光ビームで感光材料（印画紙）を画像露光し、現像処理してプリント（写真）として出力するプリンタ１６とを有する。
また、画像処理装置１４には、様々な条件の入力（設定）、様々な処理の選択や指示、色／濃度補正などの指示等を入力するためのキーボード１８ａおよびマウス１８ｂを有する操作系１８と、スキャナ１２で読み取られた画像、各種の操作指示、条件の設定／登録画面等を表示するディスプレイ２０とが接続される。
【００１８】
スキャナ１２は、フィルムＦ等に撮影された画像を１コマずつ光電的に読み取る装置で、光源２２と、可変絞り２４と、フィルムＦに入射する読取光をフィルムＦの面方向で均一にする拡散ボックス２８と、フィルムＦを所定の位置に保持するスキャナ３０と、結像レンズユニット３２と、Ｒ（赤）、Ｇ（緑）およびＢ（青）の各画像読取に対応するラインＣＣＤセンサを有するイメージセンサ３４と、アンプ（増幅器）３６と、Ａ／Ｄ（アナログ／デジタル）変換器３８とを有する。
【００１９】
また、フォトプリンタ１０においては、新写真システム（ＡＰＳ；Advanced Photo System ）のフィルムや１３５サイズのネガ（あるいはリバーサル）フィルム等のフィルムの種類やサイズ、ストリップスやスライド等のフィルムの形態等に応じて、スキャナ１２の本体に装着自在な専用のキャリア３０が用意されており、キャリア３０を交換することにより、各種のフィルムや処理に対応することができる。フィルムに撮影され、プリント作成に供される画像（コマ）は、このキャリア３０によって所定の読取位置に搬送される。
【００２０】
スキャナ１２において、フィルムＦに撮影された画像を読み取る際には、光源２２から射出され、可変絞り２４によって光量調整された読取光が、キャリア３０によって所定の読取位置に位置されたフィルムＦに入射して、透過することにより、フィルムＦに撮影された画像を担持する投影光を得る。
【００２１】
キャリア３０は、図２（Ａ）に示されるように、所定の読取位置にフィルムＦを位置させつつ、イメージセンサ３４のラインＣＣＤセンサの延在方向（主走査方向）と直交する副走査方向に、フィルムＦの長手方向を一致させて搬送する、読取位置を副走査方向に挟んで配置される搬送ローラ対３０ａおよび３０ｂと、フィルムＦの投影光を所定のスリット状に規制する、読取位置に対応する位置において主走査方向に延在するスリット４０ａを有するマスク４０とを有する。
フィルムＦは、このキャリア３０によって読取位置に配置されて副走査方向に搬送されつつ、読取光を入射される。これにより、結果的にフィルムＦが主走査方向に延在するスリット４０ａによって２次元的にスリット走査され、フィルムＦに撮影された各コマの画像が読み取られる。
【００２２】
周知のように、新写真システムのフィルムには、磁気記録媒体が形成されており、新写真システムのフィルム（カートリッジ）に対応するキャリア３０には、この磁気記録媒体に記録された情報を読み取り、また必要な情報を記録する磁気ヘッド４２が配置されている。フィルムＦの磁気記録媒体に記録された情報は、磁気ヘッド４２で読み取られて、スキャナ１２本体から画像処理装置１４等の必要な部位に送られ、あるいは、各種の情報が磁気ヘッド４２によってフィルムＦの磁気記録媒体に記録される。
また、図中符号４４は、フィルムに光学的に記録されるＤＸコード、拡張ＤＸコード、ＦＮＳコード等のバーコードや、フィルムに光学的に記録された各種の情報を読み取るためのセンサ（バーコードリーダ）であり、センサ４４で読み取られた各種の情報が画像処理装置１４等の必要な部位に送られる。
【００２３】
前述のように、読取光は、所定の読取位置において、キャリア３０に保持されたフィルムＦを透過して、画像を担持する投影光となり、この投影光は、結像レンズユニット３２によってイメージセンサ３４の受光面に結像される。
図２（Ｂ）に示されるように、イメージセンサ３４は、Ｒ画像を読み取るラインＣＣＤセンサ３４Ｒ、Ｇ画像を読み取るラインＣＣＤセンサ３４Ｇ、およびＢ画像を読み取るラインＣＣＤセンサ３４Ｂを有する、いわゆる３ラインのカラーＣＣＤセンサで、各ラインＣＣＤセンサは、前述のように主走査方向に延在している。フィルムＦの投影光は、このイメージセンサ３４によって、Ｒ、ＧおよびＢの３原色に分解されて光電的に読み取られる。
イメージセンサ３４の出力信号は、アンプ３６で増幅され、Ａ／Ｄ変換器３８でデジタル信号とされて、画像処理装置１４に送られる。
【００２４】
スキャナ１２においては、フィルムＦに撮影された画像の読み取りを、低解像度で読み取るプレスキャンと、出力画像の画像データを得るための本スキャンとの、２回の画像読取で行う。
プレスキャンは、スキャナ１２が対象とする全てのフィルムの画像を、イメージセンサ３４が飽和することなく読み取れるように、あらかじめ設定された、プレスキャンの読取条件で行われる。一方、本スキャンは、プレスキャンデータから、その画像（コマ）の最低濃度よりも若干低い濃度でイメージセンサ３４が飽和するように、各コマ毎に設定された本スキャンの読取条件で行われる。
プレスキャンおよび本スキャンの出力信号は、解像度と出力レベルが異なる以外は、基本的に同じである。
【００２５】
なお、本発明において、スキャナ１２は、このようなスリット走査によるものに限定されず、エリアＣＣＤセンサを用い、１コマの画像の全面を一度に、Ｒ，Ｇ，Ｂについて面順次で読み取る、面読取を利用するものであってもよい。
また、フォトプリンタ１０は、ネガやリバーサル等のフィルムに撮影された画像を光電的に読み取るスキャナ１２以外にも、反射原稿の画像を読み取る画像読取装置、デジタルカメラやデジタルビデオカメラ等の撮像デバイス、コンピュータ通信等の通信手段、ＦＤ（フロッピーディスク）、ＭＯ（光磁気記録媒体）、スマートメディア等の画像記録媒体などの各種の画像データ供給源を利用することができ、これらを直接またはその駆動装置を介して画像処理装置１４に接続することにより、これらの画像データ供給源から画像データを受け取って、プリントを作成することができる。
特に、本発明は、デジタルカメラやデジタルビデオカメラなどのような撮像デバイスで被写体が直接光学的に撮影された画像（デジタル画像データ）に好適に利用可能であり、図示例のフォトプリンタ１０においては、直接被写体をデジタルカメラ等の撮像デバイスで撮影して得られたデジタル画像データが記録された画像記録媒体２５を駆動してデジタル画像データを読み出す記録媒体駆動装置２６が画像処理装置１４に接続されている。もちろん、デジタルカメラ等を直接画像処理装置１４に接続して、撮影された画像データを直接画像処理装置１４に入力可能にしてもよい。
【００２６】
前述のように、スキャナ１２や記録媒体駆動装置２６等からの出力信号（画像データ）は、画像処理装置１４に出力される。以下の説明では、主としてスキャナ１２から画像処理装置１４に１コマの画像データが供給される場合を代表例として説明する。
図３に画像処理装置（以下、処理装置１４とする）のブロック図を示す。処理装置１４は、データ処理部５０、Ｌｏｇ変換器５２、プレスキャンメモリ５４、本スキャンメモリ５６、プレスキャン処理部５８、本スキャン処理部６０、および条件設定部６２を有する。
なお、図３は、主に画像処理関連の部位を示しており、処理装置１４には、これ以外にも、処理装置１４を含むフォトプリンタ１０全体の制御や管理を行うＣＰＵ、フォトプリンタ１０の作動等に必要な情報を記憶するメモリ等が配置される。また、操作系１８やディスプレイ２０は、このＣＰＵ等（ＣＰＵバス）を介して各部位に接続される。
【００２７】
スキャナ１２から出力されたＲ，ＧおよびＢの各デジタル信号は、データ処理部５０において、ＤＣオフセット補正、暗時補正、シェーディング補正等の所定のデータ処理を施された後に、Ｌｏｇ変換器５２で変換されてデジタル画像（濃度）データとされ、プレスキャン（画像）データはプレスキャンメモリ５４に、本スキャン（画像）データは本スキャンメモリ５６に、それぞれ記憶される。
なお、プレスキャンデータと本スキャンデータは、解像度（画素密度）と信号レベルが異なる以外は、基本的に同じデータである。
【００２８】
プレスキャンメモリ５４に記憶されたプレスキャンデータはプレスキャン処理部５８において、本スキャンメモリ５６に記憶された本スキャンデータは本スキャン処理部６０において、それぞれ処理される。
プレスキャン処理部５８は、画像処理部６４およびデータ変換部６６を有し、他方、本スキャン処理部６０は、画像処理部６８、データ変換部７０およびレンズ種判別部７４を有する。
【００２９】
プレスキャン処理部５８の画像処理部６４と、本スキャン処理部６０の画像処理部６８は、共に、後述する条件設定部６２が設定した画像処理条件に応じて、スキャナ１２によって読み取られた画像（画像データ）に所定の画像処理を施す部位である。
画像処理部６４および６８は、処理する画像データの画素密度が異なり、また画像処理部６４が収差補正部７２を有さない以外は、基本的に同じ処理を行なうものであるので、以下の説明は、本スキャン処理部６０の画像処理部６８を代表例として行なう。なお、本発明においては、プレスキャン処理部５８の画像処理部６４にも、収差補正部を設けて、必要に応じて、プレスキャン画像に後述する歪曲収差や倍率色収差などの収差や周辺光量低下などの画質劣化の補正を行なってもよい。
【００３０】
画像処理部６８（６４）のＬＵＴは、ＬＵＴ（ルックアップテーブル）によって、画像の色バランス調整、コントラスト調整（階調処理）、および明るさ調整（濃度調整）を行なう部位であり、また、ＭＴＸは、マトリクス演算によって、画像の彩度調整を行なう部位である。
【００３１】
本スキャン処理部６０の画像処理部６８には、ＭＴＸとブロック６８Ａとの間に、歪曲収差および倍率色収差などの収差や周辺光量低下などの画質劣化の補正（以下、代表して収差補正という）ならびに電子変倍処理を行う収差補正部７２が配置される。また、収差補正部７２およびブロック６８には、レンズ種判別部７４が接続される。
【００３２】
後に詳述するが、本発明に係る処理装置１４においては、フィルムＦに被写体を撮影したレンズまたは直接被写体を撮像デバイスで撮影したレンズのレンズ種を判別し、予め選択設定されている所定のレンズ種で撮影された画像には、ブロック６８Ａで行なう鮮鋭度強調処理（シャープネス処理）を強くかける。本発明においては、これにより、レンズ付きフィルムやコンパクトカメラやデジタルカメラような低コストのレンズで撮影された画像からも、困難なＰＳＦ補正などをかけることなく、高画質な画像を再生した高品質なプリントを出力することを可能にしている。
ここで、図示例の処理装置１４においては、好ましい態様として、所定のレンズ種で撮影された、シャープネス処理を強くかける画像の場合には、レンズ特性に起因する収差補正も施し、高強度シャープネスとの相乗効果により、より高画質な画像を得ている。
言い換えれば、本発明においては、高画質な画像を得るために収差補正が必要な、性能の低いレンズで撮影された画像には、シャープネス処理を強くかけ、あるいはさらに収差補正を行い、高画質な画像を得ることを実現している。なお、本発明の高強度シャープネス強調処理は、１コマの全画面に一律に同じ強度でかけてもよいし、収差補正と同様に、レンズ特性に合わせて、すなわち画像の中心からの距離に応じて強度を変えてもよい。こうすることで、レンズに起因するピントボケも細かく補正でき、さらに適切なシャープネス処理がかかった高画質画像を再生することができる。
【００３３】
レンズ種判別部７４は、レンズ種を判別するためのレンズ情報を取得して、フィルムＦに画像を撮影したレンズ種を判別し、その結果から、高強度シャープネス処理および収差補正の要・不要を判断し、その結果に基づく指示を収差補正部７２およびブロック６８Ａに出し、さらに、判別したレンズ種のレンズ特性を収差補正部７２に供給する。
なお、本発明においては、画像にシャープネス処理を強くかけるレンズ種には限定はないが、少なくともレンズ付きフィルム（以下、ＬＦとする）で撮影された画像には、シャープネス処理を強くかけるのが好ましい。
【００３４】
フィルムＦに画像を撮影したレンズ種を判別するためのレンズ情報、およびその取得手段には特に限定はなく、各種の方法が利用可能である。
通常は、カメラの機種が判ればレンズ種が判別できるので、例えば、新写真システムのＬＦであれば、スキャナ１２（キャリア３０）において、フィルムＦに磁気記録されたカートリッジＩＤおよび／またはフィルム種を読み取り、これをカメラ機種すなわちレンズ種の判別に利用してもよい。
ところで、本発明において用いられるレンズ情報としては、レンズ情報自体であってもよいし、レンズ情報を間接的に示す情報、例えばカメラの機種などの情報でもよいし、このようなレンズ情報をコード化したもの、すなわちレンズ情報を直接または間接的に示すコード、例えばレンズ種コードやカメラ機種コードであってもよい。このようなコードとしては、上述したレンズ情報を得ることのできるフィルムカートリッジＩＤやカメラ機種であってもよい。ここで、レンズ情報とは、レンズそのものに関する情報やレンズの性能に関する情報であってもよいし、ＬＦおよびカメラの機種に関する情報であっても、さらにはレンズによる画質劣化量、例えば歪曲収差、倍率色収差、周辺光量低下等に関する各劣化量の情報などであってもよい。
このようなレンズ情報をフィルム製造時、またはフィルム装填時、あるいはデジタルカメラなどへの画像記録媒体挿入時、もしくは撮影時に光学的または磁気的あるいはまた電気的に記録し、スキャナ１２（キャリア３０）において、フィルムＦに記録されたレンズ情報を読み取り、これを用いてレンズ種を判別してもよい。
【００３５】
すなわち、デジタルカメラなどのように、フィルムを使用せずに、直接撮像デバイスで直接被写体を撮影して、直接画像記録媒体に画像データを記録する場合には、画像記録媒体挿入時あるいは撮影時にレンズ情報を１連のコマの画像データや１コマの画像データのヘッダなどに電気的に記録しておき、これを読み出してレンズ種を判別してもよい。
また、ＬＦの場合には、フィルムＦをカメラに装填する前（製造時）に、予めフィルムＦにレンズ種などのレンズ情報を磁気的に（新写真システム（ＡＰＳ）−ＬＦの場合）もしくは光学的に（１３５−ＬＦ、ＡＰＳ−ＬＦの場合）記録して、これを用いてレンズ種を判別してもよい。
例えば１３５−ＬＦ、ＡＰＳ−ＬＦなどのＬＦであれば、レンズ情報をフィルム製造時にＤＸコードや拡張ＤＸコードとは別にフィルムの非撮影領域（有効領域外）に予め光学的に記録しておくことができるし、例えば、ＡＰＳ−ＬＦであれば、ＡＰＳフィルムの先頭と最後の、フィルムメーカーが自由に使用できるロッドコードに同様に予め光学的に記録しておくこともできる。また、ＡＰＳ−ＬＦであれば、ＡＰＳフィルムの磁気層にレンズ情報をフィルム製造時に予め磁気的に記録しておくこともできる。さらに、ＩＣ付フィルムカートリッジを用いる１３５−ＬＦ、ＡＰＳ−ＬＦの場合には、このカートリッジＩＣにレンズ情報をフィルム製造時に予め電気的に記録しておくこともできる。
【００３６】
また、新写真システム（ＡＰＳ）のカメラやＡＰＳ−ＬＦであれば、フィルムＦにカメラの機種やレンズ種などのレンズ情報をフィルムの装填時や撮影時に磁気記録し、上記と同様に、これを利用してもよい。
また、カメラによっては、例えば通常の１３５フィルムを用いるカメラ、ＡＰＳカメラ、１３５−ＬＦ、ＡＰＳ−ＬＦの場合には、レンズ種（カメラの機種）などのレンズ情報をフィルムの装填時や撮影時にカメラの側からＬＥＤ等を用いてフィルムの有効領域外に光学的に記録しておくこともできる。あるいは、同様な各種のカメラおいて、撮影時にカメラの露光開口枠の開口縁部に設けられたノッチをフィルムに露光・焼き付け、レンズ情報として図６（Ａ）および（Ｂ）に示すようなノッチマーク４６をフィルムの有効領域外に光学的に記録もよいし、撮影時にカメラのフィルムの撮影画面を規定するアパーチャに設けられた凹凸をフィルムに露光し、図６（Ｃ）および（Ｄ）に示すような凹凸４８をフィルムの有効領域外に記録してもよい。図６（Ａ）および（Ｂ）に示すノッチマーク４６の場合には、ノッチマーク４６の数や形状やその間隔等を用いたコードにより、図６（Ｃ）および（Ｄ）に示す凹凸４８の場合にもその数や形状やその間隔等を用いたコード、好ましくはバーコードリーダで読取可能なバーコードにより、レンズ情報を記録することができる。これらの場合には、スキャナ１２（キャリア３０）において画像の撮影領域（有効領域）より大きい範囲を読み取り、読み取られたノッチマーク４６や凹凸４８からレンズ情報を読み取りレンズ種を判別すればよい。
【００３７】
なお、ＡＰＳフィルムは、全てのコマが通常一台のカメラで撮影されるが、ＡＰＳカメラによっては、途中交換（ＭＲＣ）機能を備えたものもあるため、ＡＰＳカメラの途中交換機能を使い、一本のＡＰＳフィルムが異なるカメラで撮影された場合には、本発明のレンズ種に応じたシャープネス強度の変更は、途中交換機能を考慮して判別されたそれぞれのカメラのレンズ種を用いて行うのは、もちろんである。
また、受け付け時に、ＬＦの機種や１３５フィルムなどの撮影に用いたカメラの機種を顧客に聞きいて記録しておき、プリント作成時にオペレータがこれをキーボード１８ａ等で入力して、レンズ種を判別してもよい。
【００３８】
また、特にレンズ種を判別せず、ある特定のフィルムＦ、例えば、ＬＦで撮影されたフィルムＦである場合には、ＬＦのフィルムであることの検出をもってレンズ種の検出とし、一律の条件でシャープネス処理を強くかけ、あるいはさらに収差補正を行なってもよい。なお、ＬＦのフィルムＦであることの判別は、前述のレンズ種の判別方法に加え、レンズタイプの情報、フィルム等に記録されるカメラ識別コード、フィルム製造時に記録される新写真システムのＳＳＵ（Snap Shooting Unit）インジケータ等が利用できる。
【００３９】
レンズ種判別部７４には、各種のレンズ種に応じたレンズ特性の情報、具体的には、レンズの歪曲収差および倍率色収差ならびに周辺光量低下の特性の情報、シャープネス処理の強度を中心からの距離に応じて変える場合にはそのための画像のボケ特性（例えば、ピントボケ特性、すなわちＰＳＦ特性）の情報が記憶されている。あるいは、前述のように、ＬＦであれば一律の補正をかける場合には、ＬＦの平均的なレンズ特性の情報を持てばよい。
レンズ種判別部７４は、その画像が所定のレンズ種で撮影された、シャープネス処理を強くかけ、また、収差補正が必要な画像であると判断した場合には、判別したレンズ種に応じたレンズ特性の情報をメモリから読み出し、収差補正部７２に供給する。
【００４０】
レンズ特性としては、特に限定はないが、一般的に、レンズの歪曲収差の特性や倍率色収差や周辺光量低下や必要に応じて画像のボケなどの特性は、レンズの光軸すなわちフィルムＦに撮影された画像の中心からの距離（例えば、ｘ−ｙで示される）をパラメータとする３次関数で、ある程度まで近似することができるので、歪曲収差や倍率色収差や周辺光量低下や画像のボケなどの補正が必要なレンズ種について、その歪曲収差の特性を示す関数および倍率色収差の特性を示す関数ならびに周辺光量低下の特性を示す関数や画像のボケ特性を示す関数などを、レンズ特性として記憶しておけばよい。
【００４１】
収差補正部７２は、レンズ種判別部７４が必要と判断した画像について、レンズ種判別部７４から供給されたフィルムＦのレンズ特性と、画像データ（画素）の位置情報、例えば、画像の中心からの座標位置（中心の画素から何画素目か）とを用いて、歪曲収差、倍率色収差の補正および周辺光量低下の補正、ならびに電子変倍処理を行う。なお、この座標は、例えば、ｘ−ｙ座標でも極座標でもよく、画像（画素）の位置が相対的に検出できれば、各種の位置情報が利用可能である。
従って、レンズ種判別部７４がシャープネス処理を強くかけることは不要と判断した画像については、撮影レンズに起因する画質劣化はないものとして、収差補正部７２では電子変倍処理のみが行なわれる。また、シャープネス処理を強くかける必要があると判定した場合でも、レンズ特性が記憶されていない場合には電子変倍処理のみが行なわれる。
【００４２】
ここで、レンズ特性と画像の位置情報（以下、画素位置とする）とを用いた倍率色収差および歪曲収差の補正を別々に行うと、演算に時間がかかり、また、補間演算も複数回行う必要が生じるため、画質が劣化するという問題がある。
そのため、好ましくは、Ｒ、ＧおよびＢの３原色の基準となる色、通常はＧを基準として、ＲおよびＢの像倍率を変換して、ＲおよびＢの画像をＧ画像に合わせることで倍率色収差を補正し、その後、Ｇ画像の歪曲収差を補正して、画像の歪曲収差および倍率色収差を補正する。これにより、各画素の適正位置を算出し、これを用いて、各画素の画像データを補間演算することによって、フィルムに撮影された画像の倍率色収差および歪曲収差を補正した画像データを得ることができる。
従って、歪曲収差についてはＧ画像に対する演算のみを行えばよいので、演算量や補間演算を減らして、より好適な倍率色収差および歪曲収差の補正を行うことができる。
【００４３】
また、画像処理装置では、通常、画像データ処理による画像の拡大もしくは縮小、すなわち、電子変倍処理を行って、画像（画像データ）を出力画像に応じたサイズにして出力する。この電子変倍処理は、通常、画像データを補間演算することにより行われる。
ところが、前記倍率色収差および歪曲収差の補正でも補間演算が必要であるため、結果的に、２回の補間が行われる結果となり、画質が劣化してしまう場合もある。
【００４４】
そのため、より好ましくは、前記レンズ特性と画像データの画素位置とを用いて、倍率色収差に起因する基準色（Ｇ）に対するＲおよびＢの画素位置のずれ量と、歪曲収差に起因する基準色の画素位置のずれ量とから、各画素毎の適正位置を算出し、算出された各画素の適正位置の情報を用いて、各画素の画像データを補間して画像の電子変倍処理を行う。言い換えれば、倍率色収差および歪曲収差による画素位置のずれ量を算出することにより、各画素が本来どの位置にあるべきであるかを検出し、この適正な位置に応じて画像データの補間演算を行って電子変倍処理を行う。
これにより、１回の補間演算で、歪曲収差および倍率色収差の補正と、電子変倍処理とを行うことができる。
【００４５】
図示例の収差補正部７２は、上記処理方法を実施する部位であり、図４の概念図に示されるように、座標変換処理部７２Ａと、拡大縮小処理部７２Ｂとを有する。
なお、図４において、ｉｒ，ｉｇおよびｉｂは、それぞれＭＴＸから供給された画像データ（入力画像データ）の画素位置（アドレス）を； Ｉｒ，ＩｇおよびＩｂは、倍率色収差および歪曲収差が補正された画像データの画素位置を；
ΔｒおよびΔｂは、それぞれ倍率色収差によるＧの画素位置に対するＲおよびＢの画素位置のずれ量（すなわち補正量）を； Ｄは、歪曲収差によるＧの画素位置のずれ量を； それぞれ示す。
【００４６】
収差補正部７２においては、ＭＴＸから画像データが供給されると、座標変換処理部７２Ａにおいて、レンズ種判別部７４から供給されたレンズ特性を用いて、ＲおよびＢの画像データの各画素位置ｉｒおよびｉｂにおける、Ｇの画像データｉｇに対する倍率色収差によるずれ量ΔｒおよびΔｂを算出し、さらに、Ｇの入力画像データｉｇの歪曲収差によるずれ量Ｄを算出する。
【００４７】
次いで、Ｒの入力画像データの各画素位置ｉｒに前記ΔｒとＤを加えて、倍率色収差および歪曲収差を補正されたＲの画像データの画素位置Ｉｒを算出し、Ｂの入力画像データの各画素位置ｉｂに前記ΔｂとＤを加えて、倍率色収差および歪曲収差を補正されたＢの画像データの画素位置Ｉｂを算出し、Ｇの入力画像データの各画素位置ｉｇに前記Ｄを加えて、倍率色収差および歪曲収差を補正されたＢの画像データの画素位置Ｉｂを算出する。
すなわち、この計算では、Ｇ画像を基準として、Ｒ画像およびＢ画像の倍率色収差を補正して、全画像をＧ画像に位置合わせして、Ｇ画像の歪曲収差によるずれ量Ｄを用いて、全体の歪曲収差を補正して、Ｒ，ＧおよびＢの各画像の倍率色収差および歪曲収差を補正された画素位置を算出している。
【００４８】
次いで、拡大縮小処理部７２Ｂにおいて、この倍率色収差および歪曲収差を補正された画素位置Ｉｒ，ＩｇおよびＩｂを用いて、拡大／縮小倍率に応じた画像データの補間処理（Ｎ倍補間）を行うことにより画像の変倍を行い、倍率色収差および歪曲収差が補正され、かつ電子変倍処理が行われた画像データとして、ブロック６８Ａに出力する。電子変倍処理の方法には特に限定はなく、公知の方法が各種利用可能であり、例えば、バイリニア補間を用いる方法、スプライン補間を用いる方法等が例示される。
【００４９】
なお、歪曲収差の補正を行なうと、再現領域の画像が無くなる、いわゆるケラレを生じる場合があるので、歪曲収差の補正を行う場合には、通常よりも０．１％〜５％程度高い変倍率で電子変倍処理（補間）を行うのが好ましい。
また、その際の電子変倍率は、レンズ種に応じて各種設定してもよい。また、歪曲収差の量は、画像の縦と横で異なる場合があるので、それに応じて、縦と横で電子変倍処理の変倍率を変えてもよい。
【００５０】
図示例の装置においては、好ましい態様として、歪曲収差および倍率色収差の両者を補正しているが、いずれか一方のみを行なってもよい。この場合にも、収差補正と電子変倍処理とを別々に行なうのではなく、前述の方法と同様に、収差に起因するずれ量を補正した適正位置を算出し、この適正位置の情報を用いて画像データの補間を行って電子変倍処理を行うのが好ましい。
さらに、歪曲収差や倍率色収差のみならず、レンズに起因する周辺光量低下やピントボケ（ＰＳＦ:Point Spread Function）の特性も記憶しておき、前記収差補正に加え、ピントボケ補正や周辺光量補正も行うようにしてもよい。
【００５１】
画像処理部６４のＭＴＸ、および収差補正部７２で処理された画像データは、次いで、ブロック６４Ａおよび６８Ａで処理される。
【００５２】
ブロック６４Ａおよび６８Ａは、シャープネス処理に加え、覆い焼き処理（中間階調を維持した画像ダイナミックレンジの圧縮）、文字や画像の合成等の、前述の各種の処理以外の各種の画像処理を行なう部位である。なお、プレスキャン処理部５８にはブロック６４Ａは無くてもよく、また、ブロック６４Ａではシャープネス処理も行なわなくてもよい。以下の説明では、シャープネス処理は、ブロック６８Ａのみで行なう。
ここで、本発明にかかる処理装置１４においては、前述のように、レンズ種判別部７４による指示に応じて、特定のレンズ種で撮影された画像には、ブロック６８Ａ（あるいはさらにブロック６４Ａ）でのシャープネス処理を、通常よりも強くかける。
【００５３】
図５に、ブロック６８Ａにおいてシャープネス処理を行う処理手段の一例のプロック図を示す。
同図に示されるように、（シャープネス）処理手段９０は、第１ローパスフィルタ（以下、ＬＰＦという）９２と、第１減算器９４と、輝度算出手段９６と、第２ＬＰＦ９８と、第２減算器１００と、第１アンプ１０２と、第２アンプ１０４と、第１加算器１０６と、第２加算器１０８とを有する。
【００５４】
処理手段９０においては、所定の処理を終えて入力された画像データ（以下、原信号という）ＳF （Ｒ，Ｇ，Ｂ）を第１ＬＰＦ９２で処理して、原信号ＳF （Ｒ，Ｇ，Ｂ）の低周波数成分ＲL ，ＧL ，ＢL を抽出する。第１ＬＰＦ９２は、例えば、９×９のＬＰＦである。
一方、第１減算器９４は、原信号ＳF からこの低周波数成分ＲL ，ＧL ，ＢL を減算して、中間・高周波数成分ＲMH，ＧMH，ＢMHを抽出する。
ここで、抽出された後の低周波数成分ＲL 、ＧL 、ＢL は、光学的に撮影されたカラー画像中のエッジや細かいテクスチャやフィルムの粒状によるザラツキを含まないものである。一方、中間周波数成分ＲM 、ＧM 、ＢM はフィルム粒状によるザラツキを含むものであり、高周波数成分ＲH 、ＧH 、ＢH は、カラー画像中のエッジや細かいテクスチャアを含むものである。
【００５５】
次いで、輝度算出手段９６において、第１減算器９４によって得られた中間・高周波数成分ＲMH，ＧMH，ＢMHから輝度成分が抽出される。
この輝度成分は、原信号ＳF の中間・高周波数成分ＲMH，ＧMH，ＢMHをＹＩＱ規定に変換した際の輝度（中間・高周波数）成分ＹMHで、例えば、下記式によって算出される。
ＹMH＝０．３Ｒ＋０．５９Ｇ＋０．１１Ｂ
ＩMH＝ＱMH＝０
ここで、色成分である成分ＩMHおよび成分ＱMHは一般の被写体を写した画像の場合は殆ど成分を持たないことが経験的にわかっている。従って、成分ＩMHおよび成分ＱMHは、フィルム粒状に起因する色のザラツキとみなして０とおくことにより、ザラツキを抑制した良好な再生画像を得ることができる。
【００５６】
次いで、輝度成分ＹMHに対して、第２ＬＰＦ９８によってフィルタリング処理を施して、輝度成分ＹMHの中間周波数成分ＹM を得る。第２ＬＰＦ９８は、例えば、５×５のＬＰＦである。
さらに、第２減算器１００において、輝度成分ＹMHから中間周波数成分ＹM を減算することにより輝度成分ＹMHの高周波数成分ＹH を得る。
第２ＬＰＦ９８で得られた中間周波数成分ＹM に、第１アンプ１０２において中間周波数成分ＹM に対するシャープネスゲインであるゲインＭ（gainＭ）を、他方、減算によって得られた高周波数成分ＹH に、第２アンプ１０４において高周波数成分ＹH に対するシャープネスゲインであるゲインＨ（gainＨ）を、それぞれ乗算し、処理済成分Ｙ′M ，Ｙ′H を得る。
ここで、処理手段９０においては、シャープネス強調処理を行う時、フィルム粒状によるザラツキを目立たせることなく、画像中のエッジや細かいテクスチャアを強調できるように、粒状を抑制するためにフィルム粒状によるザラツキを含む中間周波数成分ＲM 、ＧM 、ＢM （輝度成分ＹM ）をあまり強調し過ぎないようにゲインＭを設定し、画像中のエッジや細かいテクスチャアを含む高周波数成分ＲH 、ＧH 、ＢH （輝度成分ＹH ）を強調するようにゲインＨを設定しておくのが好ましい。こうすることにより、処理手段９０において粒状抑制シャープネス強調処理を行うことができる。
【００５７】
第１アンプ１０２および第２アンプ１０４で得られた処理済成分Ｙ′M およびＹ′H は、第１加算器１０８で合成され、処理済輝度成分Ｙ′MHが得られる。
さらに、第２加算器１０８において、このようにして得られた処理済輝度成分Ｙ′MHを前述した原信号ＳF の低周波数成分ＲL ，ＧL ，ＢL と合成して、シャープネス処理された画像データＲ′，Ｇ′，Ｂ′が得られる。
この際、前述した成分ＩMHおよびＱMHの値は０とされているため、処理された輝度成分Ｙ′MHを逆変換してＲＧＢのデータに対応させると、ＲＧＢ３つのデータは全て成分ＹMH’と同一の値となるので、処理された輝度成分ＹMH’を逆変換しないで合成することにより処理を簡便なものすることがとできる。
【００５８】
ここで、本発明は、前述のように、レンズ種判別部７４で判別される特定のレンズ種によって撮影された画像は、通常のシャープネス強調処理、好ましくは粒状抑制シャープネス強調処理よりもシャープネス処理を強くかけるものであり、図示例においては、第２アンプ１０４で乗算するゲインＨを通常の設定値よりさらに大きくすることにより、すなわち高周波数成分をより強調することにより、シャープネス処理を強くかけるものである。この例では、高周波数成分のゲインＨを大きくすることによりシャープネス強調処理の強度を大きくするので、高周波数成分のゲインＨをシャープネス強調処理の強度とすることができる。
【００５９】
処理手段９０においては、フィルム種やプリントサイズ等に応じた好適なゲインＭおよびゲインＨが、デフォルトとして設定されている。例えば、一眼レフカメラ等の特定のレンズ種に指定されていないレンズを有するカメラで撮影されたフィルムから２Ｌサイズのプリントを作成する場合には、デフォルトとして、例えばゲインＭにはデジタル値１０（例えば、ゲイン１．２５に相当）が、ゲインＨにはデジタル値２８（例えば、ゲイン３．５０に相当）が、それぞれ設定されており、処理手段９０は、通常は、これらのシャープネスゲインを用いて、シャープネス処理を行なう。
これに対し、例えば、ＬＦで撮影されたフィルム等、特定のレンズ種で撮影された、レンズ種判別部７４がシャープネス処理を強くかけることを指示した画像には、処理手段９０は、デフォルトよりも大きなゲインＨ、例えば、前述の例であれば、ゲインＨをデジタル値３２（例えば、ゲイン４．５０に相当）として、高強度のシャープネス処理を行なう。
【００６０】
本発明において、シャープネス処理を通常よりも強くかける方法は、上記方法に限定はされず、利用するシャープネス処理の方法に応じた、各種の方法が利用可能である。
シャープネス処理を強くかける場合における、シャープネス強度となるゲインＨやゲインＭ等のシャープネス処理条件は、レンズ種に係わらず一律であってもよいが、レンズ種のレンズ特性に応じて、それぞれに最適な条件を設定してもよい。
【００６１】
また、上述した例では、高強度のシャープネス処理を行なう際に、シャープネス強調処理の強度、すなわち高周波数成分のゲインＨを１コマの画像全体で一律に変更しているが、本発明はこれに限定されず、１コマの画像を複数の領域に分割して、その分割された領域内の画像毎に変更してもよい。１コマの画像の複数の領域への分割の仕方は、特に制限的ではなく、どのように分割してもよいし、分割された領域の大きさや形状も、特に制限的ではなく、どのような大きさ、形状であってもよい。例えば、１コマの画像を、複数の矩形、具体的には第１象限当たり、２０×２０の矩形領域に分割してもよいし、画像の中心を中心とする同心円によって中心円および複数の平板状円環（リング）に分割してもよいし、１画素単位に分割してもよいし、画像中の主要被写体を含む１つまたは２つ以上の領域と含まないいくつかの領域に分割してもよいし、主要被写体領域とそれ以外の領域に分割してもよい。もちろん、残りのシャープネス処理条件の１つである中周波数成分のゲインＭも、分割された領域内の画像毎に変更してもよい。
なお、この場合には、分割された各領域でのシャープネス強調処理の強度（ゲインＨ）や条件（ゲインＭ）が異なるので、各領域の境界における繋がりを滑らかにするために、隣接する領域のシャープネス強度（ゲインＨ）や条件（ゲインＭ）をその変化が滑らかになるように設定するのが好ましい。
【００６２】
この時、レンズ特性に起因するピントのズレ、従って、撮影された画像のボケ（ＰＳＦ）は、歪曲収差や倍率色収差などの収差や周辺光量低下などの画質劣化と同様に、画像の中心からの距離に応じて大きくなる傾向にある。このため、この画像のボケ特性を歪曲収差や倍率色収差などの収差の特性や周辺光量の特性の情報とともに、レンズ種判別部７４に、各種のレンズ種に応じたレンズ特性の情報として記憶させておき、処理手段９０が本発明のシャープネス強調処理を行う場合に、判別されたレンズ種に応じた画像のボケ特性の情報をメモリから読み出し、分割された各領域の位置とボケの大きさから分割された領域毎のシャープネス強度（ゲインＨ）や条件（ゲインＭ）を決定してもよい。
こうすることにより、たとえ、収差補正部７２においてＰＳＦ補正を行わなくても、レンズに起因する画像のボケをその度合いに応じて適切に補正することができるので、画像のボケのない、もしくは極めて少ない高画質画像を再生することができる。
この場合には、１コマの画像を、複数の矩形、例えば第１象限あたり２０×２０の矩形領域に分割したり、画像の中心を中心とする同心円によって中心円および複数の平板状円環（リング）に分割するのが好ましい。なお、１コマの画像を、複数の矩形領域に分割する場合には、対称性を利用して１コマの画像全体の１／４の領域のみにある各単位矩形領域、例えば４０×４０の単位矩形領域に分割する場合には第一象限の２０×２０の単位矩形領域のシャープネス強度（ゲインＨ）や条件（ゲインＭ）を決定すればよい。
【００６３】
また、上述した例では、高強度のシャープネス処理を行なう際に、シャープネス強度（ゲインＨ）を３原色の画像データ、例えばＲＧＢ画像データで一律に変更しているが、本発明はこれに限定されず、ＲＧＢ画像データ毎に独立に変更してもよい。もちろん、残りのシャープネス処理条件（ゲインＭ）も、ＲＧＢ画像データ毎に独立に変更してもよい。
シャープネス強度（ゲインＨ）や条件（ゲインＭ）をＲＧＢ画像データ毎に独立に変更する場合には、例えば上述した図５に示すシャープネス処理回路９０をＲＧＢ毎に備え、ゲインＨを、それぞれゲインＨＲ、ゲインＨＧおよびゲインＨＢとして、ゲインＭを、それぞれゲインＭＲ、ゲインＭＧおよびゲインＭＢとして、ＲＧＢ毎のシャープネス処理回路の第１および第２アンプ（１０２、１０４に相当）に独立に設定すればよい。
【００６４】
そうして、中間・高周波数成分ＲMH，ＧMH，ＢMHから輝度成分ＹMHを求めるのではなく、それぞれに第２ＬＰＦ９８によるフィルタリング処理を施し中間周波数成分ＲM 、ＧM 、ＢM を求め、次いで、中間・高周波数成分ＲMH，ＧMH，ＢMHからそれぞれ中間周波数成分ＲM 、ＧM 、ＢM を減算して、高周波数成分ＲH ，ＧH ，ＢH を求める。この後、得られた中間周波数成分ＲM 、ＧM 、ＢM にそれぞれゲインＭＲ、ゲインＭＧ、ゲインＭＢを乗算して、処理済中間周波数成分ＲM ' 、ＧM ' 、ＢM ' を求め、得られた高周波数成分ＲH ，ＧH ，ＢH にそれぞれゲインＨＲ、ゲインＨＧ、ゲインＨＢを乗算して、処理済高周波数成分ＲH ’、ＧH ’、ＢH ’を求める。
こうして得られた処理済中間周波数成分ＲM ' 、ＧM ' 、ＢM ' と処理済高周波数成分ＲH ’、ＧH ’、ＢH ’とをそれぞれ加算し、処理済輝度成分Ｙ′MHの代わりに、中間・高周波数成分ＲMH’，ＧMH’，ＢMH’を求め、それぞれ低周波数成分ＲL ，ＧL ，ＢL と合成して、シャープネス処理された画像データＲ′，Ｇ′，Ｂ′を得ることができる。
【００６５】
このように、シャープネス強度（ゲインＨ）や条件（ゲインＭ）をＲＧＢ画像データ毎に独立に変更する場合に、ＲＧＢ画像データ毎に全く独立に変更してもよいが、３原色ＲＧＢに対するレンズ特性や人の目の視感度特性等を考慮して、以下の２つの方法を行うのが好ましい。
第１の方法は、Ｇについてはデフォルト強度とし、ＲおよびＢについてはデフォルト強度より大きい強度とする方法（Ｇ＜Ｒ＝Ｂ）である。これは、通常、ＲとＢとはＧに比べて、ピントがあっておらず、シャープネスが劣るからである。一方、第２の方法は、ＧおよびＢについてはデフォルト強度とし、Ｒのみについてはデフォルト強度より大きい強度とする方法（Ｇ＝Ｂ＜Ｒ）である。これは、人の目の視感度特性は、Ｇ＞Ｒ＞Ｂであり、Ｇに比べてピントがあっておらず、シャープネスが劣るＲとＢのうち、Ｂは人の目には目立たないからである。
これらの方法を用いることにより、全体の処理量を減らすことができる。
【００６６】
上述した例では、シャープネス強調の強度を変更する際に、高周波数成分のゲインや中周波数成分のゲインをＲＧＢ画像データに一律に、またはそれぞれに独立に変更しているが、本発明はこれに限定されず、どのような方法で行ってもよい。例えば、それぞれのゲインは、変更せずに、高・中・低周波数成分に分解する周波数領域（周波数帯）を変更してもよい。また、シャープネス強調処理の方法自体を変更してもよく、その強度の変更を行うようにしてもよい。例えば、アンシャープマスキングによるシャープネス強調処理の場合には、強調係数を変更するようにすればよい。
【００６７】
また、上述した例では、レンズ種に応じてシャープネス強調処理の強度を変更しているが、そのレンズを備えたカメラで撮影されるフィルムが高感度である場合には、シャープネスの強度を強くするとフィルムの粒状も強調され、再生された画像にザラツキが目立つようになる恐れもある。このため、シャープネスの強度は、レンズ種に応じてのみならず、フィルム種によっても変更してもよい。例えば、高感度フィルムの場合には、シャープネスの強度（ゲインＨ）を大きくする割合を下げたり、限度を設けたり、さらには粒状を多く含む中周波数成分のゲインＭをデフォルトより下げたりして、粒状抑制を強くするのが好ましい。
こうすることにより、コンパクトカメラやＬＦのような特定のレンズで高感度フィルムに撮影された画像であっても、粒状の荒れや画像のボケの少ない高画質画像が再生された高品質なプリントを得ることができる。
ここで、ＬＦのように、レンズ種とフィルム種とが１対１に対応している場合には、フィルム種はレンズ種から判別すればよい。また、フィルム種は、一般的にフィルムに光学的に記録されている情報、例えばＤＸコードや拡張ＤＸコードなどの情報や、さらにＡＰＳフィルムの場合は磁気的に記録されている情報を読み取ることによって、判別することができるので、これらを利用すればよい。
【００６８】
また、図示例においては、収差補正を行なった後にシャープネス処理を行なっているが、本発明はこれに限定はされず、シャープネス処理を行なった後に収差補正を行なってもよい。ただし、画質的には、図示例のように、収差補正を行なった後に、シャープネス処理を行なった方が有利である。
なお、本発明においては、収差補正は必ずしも必要ではなく、特定のレンズ種で撮影された画像に、シャープネス処理を強くかけるのみであってもよい。
【００６９】
画像処理部６４および６８で処理された画像データは、データ変換部６６および７０に送られる。
プレスキャン処理部５８のデータ変換部６６は、画像処理部６４によって処理された画像データを、３Ｄ（三次元）−ＬＵＴ等を用いて変換して、ディスプレイ２０による表示に対応する画像データにする。なお、必要に応じて、このデータ変換部６６で電子変倍処理を行なってもよい。
他方、本スキャン処理部６０のデータ変換部７０は、同様に、画像処理部６８によって処理された画像データを３Ｄ−ＬＵＴを用いて変換し、プリンタ１６による画像記録に対応する画像データとしてプリンタ１６に供給する。
【００７０】
プレスキャン処理部５８および本スキャン処理部６０による各種の画像処理条件は、条件設定部６２によって設定される。
この条件設定部６２は、セットアップ部７２、キー補正部７８およびパラメータ統合部８０を有する。
【００７１】
セットアップ部７６は、プレスキャンデータを用いて、本スキャンの読取条件を設定すると共に、施す画像処理を選択して、画像処理部６４および６８やデータ変換部６６および７０における画像処理条件を設定し、パラメータ統合部８０に供給する。
具体的には、セットアップ部７６は、プレスキャンデータから、濃度ヒストグラムの作成や、平均濃度、ハイライト（最低濃度）、シャドー（最高濃度）等の画像特徴量の算出等を行い、加えて、必要に応じて行われるオペレータによる指示に応じて、本スキャンの読み取り条件を設定し、また、前述のグレイバランス調整等を行なうＬＵＴや彩度調整を行うマトリクス演算式の作成等の画像処理条件を決定する。
【００７２】
キー補正部７８は、キーボード１８ａ等による、明るさ、色、階調、彩度等の補正指示に応じて、画像の補正量を算出して、パラメータ統合部８０に供給するものである。
パラメータ統合部８０は、セットアップ部７６が設定した画像処理条件を受け取り、供給された画像処理条件をプレスキャン処理部５８の画像処理部６４および本スキャン処理部６０の画像処理部６８に設定し、さらに、キー補正部７８で算出された補正量に応じて、この補正を行なうＬＵＴ等を作成して所定の部位に設定し、また、各部位に設定した画像処理条件を補正する。
【００７３】
以下、スキャナ１２および処理装置１４の作用を説明する。
オペレータがフィルムＦに対応するキャリア３０をスキャナ１２に装填し、キャリア３０の所定位置にフィルムＦ（カートリッジ）をセットし、作成するプリントサイズ等の必要な指示を入力した後に、プリント作成開始を指示する。
【００７４】
前記プリント開始の指示により、スキャナ１２の可変絞り２４の絞り値やイメージセンサ（ラインＣＣＤセンサ）３４の蓄積時間がプレスキャンの読取条件に応じて設定され、その後、キャリア３０がフィルムＦをプレスキャンに応じた速度で副走査方向に搬送して、プレスキャンが開始され、前述のように所定の読取位置において、フィルムＦがスリット走査されて投影光がイメージセンサ３４に結像して、フィルムＦに撮影された画像がＲ，ＧおよびＢに分解されて光電的に読み取られる。
【００７５】
また、このフィルムＦの搬送の際に、キャリア３０の磁気ヘッド４２によってフィルムＦに磁気記録された情報が読み取られ、また、センサ４４によってＤＸコード等の各種の情報が読まれ、必要な情報が処理装置１４等の所定の部位に送られ、例えば、処理装置１４のレンズ種判別部７４が判別情報を得る。なお、判別情報は、オペレータによる入力等、各種の方法で提供されてもよいのは、前述のとおりである。
【００７６】
本発明においては、プレスキャンおよび本スキャンは、１コマずつ行ってもよく、全コマあるいは所定の複数コマずつ、連続的にプレスキャンおよび本スキャンを行ってもよい。以下の例では、説明を簡潔にするために、１コマの画像読取を例に説明を行う。
【００７７】
プレスキャンによるイメージセンサ３４の出力信号は、アンプ３６で増幅されて、Ａ／Ｄ変換器３８に送られ、デジタル信号とされ、処理装置１４に送られ、データ処理部５０でデータ処理を施され、Ｌｏｇ変換器５２でデジタル画像データであるプレスキャンデータとされ、プレスキャンメモリ５４に記憶される。
【００７８】
プレスキャンメモリ５４にプレスキャンデータが記憶されると、条件設定部６２のセットアップ部７６がこれを読み出し、濃度ヒストグラムの作成、ハイライトやシャドー等の画像特徴量の算出等を行い、本スキャンの読取条件を設定してスキャナ１２に供給し、また、階調調整等の各種の画像処理条件を設定し、パラメータ統合部８０に供給する。
パラメータ統合部７６は、供給された画像処理条件を、プレスキャン処理部５６および本スキャン処理部５８の所定部位（ハードウエア）に設定する。
【００７９】
検定を行う場合には、プレスキャン処理部６２によってプレスキャンデータがプレスキャンメモリ５４から読み出され、画像処理部６４において設定された画像処理条件で画像処理され、さらに、データ変換部６６で変換され、シュミレーション画像としてディスプレイ２０に表示される。
オペレータは、ディスプレイ２０の表示を見て、画像すなわち処理結果の確認（検定）を行い、必要に応じて、キーボード１８ａに設定された調整キー等を用いて色、濃度、階調等を補正する。
この調整の入力は、キー補正部７８に送られ、キー補正部７８は補正入力に応じた補正量を算出し、これをパラメータ統合部７６に送る。パラメータ統合部７６は、この補正量に応じて、これを実行するための補正条件を設定し、また、先に設定した画像処理条件の補正等を行う。従って、この補正すなわちオペレータによる調整入力に応じて、ディスプレイ２０に表示される画像も変化する。
【００８０】
オペレータは、このコマの画像が適正（検定ＯＫ）であると判定すると、キーボード１８ａ等を用いてプリント開始を指示する。これにより、画像処理条件が確定し、スキャナ１２において可変絞り２４の絞り値等が設定された本スキャンの読取条件に応じて設定されると共に、キャリア３０が本スキャンに対応する速度でフィルムＦを搬送し、本スキャンが開始される。
なお、検定を行わない場合には、パラメータ統合部８０による本スキャン処理部６０の画像処理部６８への画像処理条件の設定を終了した時点で画像処理条件が確定し、本スキャンが開始される。このような検定の有無は、モードとして選択可能にするのが好ましい。
【００８１】
本スキャンは、可変絞り２４の絞り値等の読取条件が設定された本スキャンの読取条件となる以外はプレスキャンと同様に行われ、イメージセンサ３４からの出力信号はアンプ３６で増幅されて、Ａ／Ｄ変換器３８でデジタル信号とされ、処理装置１４のデータ処理部５０で処理されて、Ｌｏｇ変換器５２で本スキャンデータとされ、本スキャンメモリ５６に送られる。
本スキャンデータが本スキャンメモリ５４に送られると、本スキャン処理部６０によって読み出され、画像処理部６８のＬＵＴおよびＭＴＸで階調調整や彩度調整が施され、次いで、収差補正部７２に送られる。
【００８２】
一方、レンズ種判別部７４は、取得した判別情報からレンズ種を判別し、その画像が特定のレンズ種で撮影された、シャープネス処理を強くかけ、かつ収差補正を行なう必要がある画像か否かを判定し、必要と判定した場合には、その旨の指示をブロック６８Ａおよび収差補正部７２に送り、また、そのレンズ種のレンズ特性を読み出し、これを収差補正部７２に送る。
【００８３】
収差補正部７２は、レンズ特性と画像データの画素位置とから、前述のようにして、座標変換処理部７２Ａにおいて、倍率色収差および歪曲収差を補正した画素位置Ｉｒ，ＩｇおよびＩｂを算出して、拡大縮小処理部７２Ｂにおくる。拡大縮小処理部７２Ｂでは、画素位置Ｉｒ，ＩｇおよびＩｂを用いて、画像データのＮ倍補間を行って画像の電子変倍を行い、収差補正および電子変倍処理を施された画像データとしてブロック６８Ａに出力する。
なお、レンズ種判別部７４が、シャープネス処理を強くかける必要がないと判断した画像は、座標変換処理部７２Ａでは何の処理も行われず、拡大縮小処理部７２Ｂで電子変倍処理のみが行われる。
【００８４】
画像データは、さらに、ブロック６８Ａにおいてシャープネス処理や覆い焼き処理等の必要な画像処理を施され、データ変換部７０に送られる。
ここで、レンズ種判別部７４からシャープネス処理を強くかけることを指示された画像は、前述のように、ブロック６８Ａにおいてシャープネス処理を行なう処理装置９０において、高周波数成分に乗算するシャープネスゲインであるゲインＨを、デフォルト（例えば、デジタル値２８）よりも高くして（例えば、デジタル値３２）、シャープネス処理を強くかける。
【００８５】
画像データは、次いで、画像データ変換部７０においてプリンタ１６による画像記録に応じた画像データに変換され、プリンタ１６に送られる。
【００８６】
プリンタ１６は、感光材料（印画紙）を画像データに応じて露光して潜像を記録し、感光材料に応じた現像処理を施して（仕上り）プリントとして出力するものである。例えば、感光材料をプリントに応じた所定長に切断した後に、バックプリントの記録、感光材料（印画紙）の分光感度特性に応じた、赤（Ｒ）露光、緑（Ｇ）露光および青（Ｂ）露光の３種の光ビームを画像データ（記録画像）に応じて変調すると共に、主走査方向に偏向し、主走査方向と直交する副走査方向に感光材料を搬送することによる潜像の記録等を行い、潜像を記録した感光材料に、発色現像、漂白定着、水洗等の所定の湿式現像処理を行い、乾燥してプリントとした後に、仕分けして集積する。
【００８７】
以上、本発明の画像処理方法および画像処理装置について詳細に説明したが、本発明は上記実施例に限定はされず、本発明の要旨を逸脱しない範囲において、各種の改良および変更を行ってもよいのはもちろんである。
【００８８】
【発明の効果】
以上、詳細に説明したように、本発明によれば、レンズ付きフィルムや安価なコンパクトカメラやデジタルカメラ等で撮影された画像であっても、高画質な画像が再生された高品質のプリントを出力することができる。
【図面の簡単な説明】
【図１】 本発明の画像処理装置を利用するデジタルフォトプリンタの一例のブロック図である。
【図２】 （Ａ）は、図１に示されるデジタルフォトプリンタのキャリアの概念図を、（Ｂ）は、図１に示されるデジタルフォトプリンタのイメージセンサの概念図を、それぞれ示す。
【図３】 図１に示されるデジタルフォトプリンタの画像処理装置の一例のブロック図である。
【図４】 図３に示される画像処理装置の収差補正部の概念図である。
【図５】 図３に示される画像処理装置においてシャープネスを行なう処理手段のブロック図である。
【図６】 （Ａ）、（Ｂ）、（Ｃ）および（Ｄ）は、それぞれ本発明の画像処理装置において利用されるレンズ情報がコードとして記録されたフィルムの一例の平面図である。
【符号の説明】
１０ （デジタル）フォトプリンタ
１２ スキャナ
１４ （画像）処理装置
１６ プリンタ
１８ 操作系
１８ａ キーボード
１８ｂ マウス
２０ ディスプレイ
２２ 光源
２４ 可変絞り
２５ 画像記録媒体
２６ 記録媒体駆動装置
２８ 拡散ボックス
３０ キャリア
３２ 結像レンズユニット
３４ イメージセンサ
３６ アンプ
３８ Ａ／Ｄ変換器
４０ マスク
４２ 磁気ヘッド
４４ センサ
４６ ノッチマーク
４８ 凹凸
５０ データ処理部
５２ Ｌｏｇ変換器
５４ プレスキャン（フレーム）メモリ
５６ 本スキャン（フレーム）メモリ
５８ プレスキャン処理部
６０ 本スキャン処理部
６２ 条件設定部
６４，６８ 画像処理部
６６，７０ データ変換部
７２ 収差補正部
７２Ａ 座標変換処理部
７２Ｂ 拡大縮小処理部
７４ レンズ種判別部
７６ セットアップ部
７８ キー補正部
８０ パラメータ統合部
９０ 処理手段
９２ 第１ＬＰＦ
９４ 第１減算器
９６ 輝度算出手段
９８ 第２ＬＰＦ
１００ 第２減算器
１０２ 第１アンプ
１０４ 第２アンプ
１０６ 第１加算器
１０８ 第２加算器
【発明の属する技術分野】
本発明は、デジタルの画像処理方法および画像処理装置の技術分野に属し、詳しくは、フィルム画像を光電的に読み取り、この画像が再現されたプリント（写真）を得るデジタルフォトプリンタ等において、レンズ付きフィルムや安価なコンパクトカメラや低コストなデジタルカメラ等の性能の高くないレンズで撮影された画像であっても、高画質な画像を得ることができる画像処理方法および画像処理装置に関する。
【０００２】
【従来の技術】
現在、ネガフィルム、リバーサルフィルム等の写真フィルム（以下、フィルムとする）に撮影された画像の感光材料（印画紙）への焼き付けは、フィルムの画像を感光材料に投影して感光材料を露光する、いわゆる直接露光（アナログ露光）が主流である。
【０００３】
これに対し、近年では、デジタル露光を利用する焼付装置、すなわち、フィルムに記録された画像を光電的に読み取って、読み取った画像をデジタル信号とした後、種々の画像処理を施して記録用の画像データとし、この画像データに応じて変調した記録光によって感光材料を走査露光して画像（潜像）を記録し、仕上がりプリント（写真）とするデジタルフォトプリンタが実用化された。
【０００４】
デジタルフォトプリンタでは、画像をデジタル画像データとして、画像処理によって焼付時の露光条件を決定することができるので、逆光やストロボ撮影等に起因する画像の飛びやツブレの補正、鮮鋭度強調処理等を好適に行って、従来の直接露光では得られなかった高品位なプリントを得ることができる。また、画像や文字の合成等も画像処理で行うことができ、用途に応じて自由に編集／処理したプリントも出力可能である。
【０００５】
しかも、デジタルフォトプリンタによれば、フィルムに撮影された画像以外にも、デジタルカメラで撮影された画像やコンピュータで処理した画像もプリントとして出力でき、また、プリント以外にも、画像データをコンピュータ等に供給したり、フロッピーディスク等の記録媒体に保存しておくこともできるので、画像データを、写真以外の様々な用途に利用することができる。
【０００６】
このようなデジタルフォトプリンタは、基本的に、フィルムに読取光を入射して、その投影光を読み取ることによって、フィルムに記録された画像を光電的に読み取るスキャナ（画像読取装置）と、スキャナによって読み取られた画像データやデジタルカメラ等から供給された画像データに所定の画像処理を施し、画像記録のための画像データや露光条件を得る画像処理装置と、画像処理装置から出力された画像データに応じて、例えば光ビーム走査によって感光材料を走査露光して潜像を記録するプリンタ（画像記録装置）と、プリンタによって露光された感光材料に現像処理を施して、画像が再生されたプリントとするプロセサ（現像装置）とを有して構成される。
【０００７】
【発明が解決しようとする課題】
ところで、一般的なユーザが通常の写真撮影を行なう場合には、一眼レフカメラのような高価で高性能なカメラを使用することは少なく、安価でかつ露光やピント合わせ等の操作が自動化された、いわゆるコンパクトカメラを使用するのが通常である。また、近年では、手軽である等の理由から、いわゆるレンズ付きフィルムを使用するユーザも非常に多い。
【０００８】
一眼レフカメラ等のように、ある程度のコストをかけられるカメラでは、精度の高いレンズを用い、さらに複数枚のレンズを組み合わせることにより、非常に高画質な画像を撮影することができる。
これに対し、レンズ付きフィルムや安価なコンパクトカメラでは、レンズにコストをかけることができず、安価なレンズを１〜２枚しか用いることができないため、画質的に十分な画像を撮影することができず、プリントに再生された画像は、必ずしも高画質と言うことはできない。
【０００９】
本発明の目的は、前記従来技術の問題点を解決することにあり、レンズ付きフィルムやコンパクトカメラ等の安価なカメラで撮影された画像や、安価なデジタルカメラによって撮影された画像からであっても、高画質な画像が再生された高品質のプリント（写真）を得ることができる画像処理方法および画像処理装置を提供することにある。
【００１０】
【課題を解決するための手段】
前述のように、レンズ付きフィルムやコンパクトカメラでは、レンズにコストをかけることができないので、十分な画質の画像を撮影することができず、高画質な画像が再生された高品質の仕上がりプリントを得ることができない。従来、このようなレンズ性能に起因する画質低下、特に画像ボケを補正するためには、画像の位相を考慮する、すなわちピントボケ（ＰＳＦ:Point Spread Function）の逆変換を行なう必要がある。ただし、この方法では、処理回路の規模か大きくなり、また処理も難しいという問題点がある。
このような問題点について、本発明者が鋭意検討を重ねた結果、レンズ付きフィルム等によって撮影された画像であっても、鮮鋭度強調処理（シャープネス処理）の強度を変更、特に通常（デフォルト）よりも強く掛けることにより、処理が難しいＰＳＦ補正を行わなくても、ピントボケが是正された十分な画質のプリントを得られることを見いだし、また、鮮鋭度強調処理機能を有する装置であれば、このように鮮鋭度強調処理の強度を変更することにより、製品等のコストを上昇させることなく、レンズ性能に起因する画質低下をカバーすることができることを見いだした結果、本発明に至ったものである。
【００１１】
すなわち、本発明の画像処理方法は、光学的に撮影された画像から赤、青及び緑の３原色の画像データを得、少なくとも鮮鋭度強調処理を施して出力画像用の画像データとする画像処理方法であって、前記画像を撮影したレンズの情報を得てレンズ種を判別して、レンズ種に応じて、前記レンズの特性に起因する歪曲収差、倍率色収差および周辺光量の少なくとも１つを補正し、補正された画像の前記鮮鋭度強調処理の強度を、レンズ種に応じて、３原色の各色毎に独立に変更する際、３原色のうち、少なくとも赤色の画像の前記鮮鋭度強調処理の強度を、緑色の画像の前記鮮鋭度強調処理の強度よりも強くすることを特徴とする。
【００１２】
ここで、前記鮮鋭度強調処理の強度は、１コマの画像全体で一律に変更される、もしくは前記１コマの画像を複数の画像領域に分割し、その分割された画像領域毎に変更されるのが好ましい。
【００１３】
また、本発明の画像処理装置は、光学的に撮影された画像から得られた赤、青及び緑の３原色の画像データに画像処理を施し、出力画像用の画像データとする画像処理装置であって、前記画像を撮影したレンズの判別情報を取得し、そのレンズ種を判別する判別手段と、判別したレンズ種に応じたレンズ特性を記憶する記憶手段、および、対応するレンズ種のレンズ特性を前記記憶手段から受け取り、画像の位置情報とレンズ特性とから前記レンズ特性に起因する歪曲収差、倍率色収差および周辺光量の少なくとも１つを補正する画質劣化補正手段を含み、前記画質劣化補正手段で補正した画像に、前記判別手段により判別されたレンズ種に応じて鮮鋭度強調処理を少なくとも行なう画像処理手段と、を有し、前記画像処理手段は、前記鮮鋭度強調処理の強度を３原色の各色毎に独立に変更し、３原色のうち、少なくとも赤色の画像の前記鮮鋭度強調処理の強度を、緑色の画像の前記鮮鋭度強調処理の強度よりも強くすることを特徴とする。
【００１４】
ここで、前記画質劣化補正手段は、レンズ特性による倍率色収差および歪曲収差、あるいはさらに周辺光量を補正するものであり、倍率色収差に起因する３原色の基準となる色に対する他の色の画像位置のずれ量を算出し、この倍率色収差に起因するずれ量と、歪曲収差に起因する前記基準となる色の画像位置のずれ量とを用いて、歪曲収差に加え倍率色収差も補正した各画像の適正な位置を算出し、前記各画像の適正な位置から画質劣化の補正を行い、あるいは前記各画像の適正な位置を用いて画質劣化の補正および電子変倍処理を行なうのが好ましい。
【００１５】
また、前記画像処理手段は、前記鮮鋭度強調処理の強度を１コマの画像全体で一律に変更する、もしくは前記１コマの画像を複数の画像領域に分割し、その分割された画像領域毎に変更するのが好ましい。
【００１６】
【発明の実施の形態】
以下、本発明の画像処理方法および画像処理装置について、添付の図面に示される好適実施例を基に詳細に説明する。
【００１７】
図１に、本発明の画像処理方法を実施する本発明の画像処理装置を利用するデジタルフォトプリンタの一実施例のブロック図が示される。
図１に示されるデジタルフォトプリンタ（以下、フォトプリンタとする）１０は、基本的に、フィルムＦに撮影された画像を光電的に読み取るスキャナ（画像読取装置）１２と、読み取られた画像データ（画像情報）の画像処理やフォトプリンタ１０全体の操作および制御等を行う画像処理装置１４と、画像処理装置１４から出力された画像データに応じて変調した光ビームで感光材料（印画紙）を画像露光し、現像処理してプリント（写真）として出力するプリンタ１６とを有する。
また、画像処理装置１４には、様々な条件の入力（設定）、様々な処理の選択や指示、色／濃度補正などの指示等を入力するためのキーボード１８ａおよびマウス１８ｂを有する操作系１８と、スキャナ１２で読み取られた画像、各種の操作指示、条件の設定／登録画面等を表示するディスプレイ２０とが接続される。
【００１８】
スキャナ１２は、フィルムＦ等に撮影された画像を１コマずつ光電的に読み取る装置で、光源２２と、可変絞り２４と、フィルムＦに入射する読取光をフィルムＦの面方向で均一にする拡散ボックス２８と、フィルムＦを所定の位置に保持するスキャナ３０と、結像レンズユニット３２と、Ｒ（赤）、Ｇ（緑）およびＢ（青）の各画像読取に対応するラインＣＣＤセンサを有するイメージセンサ３４と、アンプ（増幅器）３６と、Ａ／Ｄ（アナログ／デジタル）変換器３８とを有する。
【００１９】
また、フォトプリンタ１０においては、新写真システム（ＡＰＳ；Advanced Photo System ）のフィルムや１３５サイズのネガ（あるいはリバーサル）フィルム等のフィルムの種類やサイズ、ストリップスやスライド等のフィルムの形態等に応じて、スキャナ１２の本体に装着自在な専用のキャリア３０が用意されており、キャリア３０を交換することにより、各種のフィルムや処理に対応することができる。フィルムに撮影され、プリント作成に供される画像（コマ）は、このキャリア３０によって所定の読取位置に搬送される。
【００２０】
スキャナ１２において、フィルムＦに撮影された画像を読み取る際には、光源２２から射出され、可変絞り２４によって光量調整された読取光が、キャリア３０によって所定の読取位置に位置されたフィルムＦに入射して、透過することにより、フィルムＦに撮影された画像を担持する投影光を得る。
【００２１】
キャリア３０は、図２（Ａ）に示されるように、所定の読取位置にフィルムＦを位置させつつ、イメージセンサ３４のラインＣＣＤセンサの延在方向（主走査方向）と直交する副走査方向に、フィルムＦの長手方向を一致させて搬送する、読取位置を副走査方向に挟んで配置される搬送ローラ対３０ａおよび３０ｂと、フィルムＦの投影光を所定のスリット状に規制する、読取位置に対応する位置において主走査方向に延在するスリット４０ａを有するマスク４０とを有する。
フィルムＦは、このキャリア３０によって読取位置に配置されて副走査方向に搬送されつつ、読取光を入射される。これにより、結果的にフィルムＦが主走査方向に延在するスリット４０ａによって２次元的にスリット走査され、フィルムＦに撮影された各コマの画像が読み取られる。
【００２２】
周知のように、新写真システムのフィルムには、磁気記録媒体が形成されており、新写真システムのフィルム（カートリッジ）に対応するキャリア３０には、この磁気記録媒体に記録された情報を読み取り、また必要な情報を記録する磁気ヘッド４２が配置されている。フィルムＦの磁気記録媒体に記録された情報は、磁気ヘッド４２で読み取られて、スキャナ１２本体から画像処理装置１４等の必要な部位に送られ、あるいは、各種の情報が磁気ヘッド４２によってフィルムＦの磁気記録媒体に記録される。
また、図中符号４４は、フィルムに光学的に記録されるＤＸコード、拡張ＤＸコード、ＦＮＳコード等のバーコードや、フィルムに光学的に記録された各種の情報を読み取るためのセンサ（バーコードリーダ）であり、センサ４４で読み取られた各種の情報が画像処理装置１４等の必要な部位に送られる。
【００２３】
前述のように、読取光は、所定の読取位置において、キャリア３０に保持されたフィルムＦを透過して、画像を担持する投影光となり、この投影光は、結像レンズユニット３２によってイメージセンサ３４の受光面に結像される。
図２（Ｂ）に示されるように、イメージセンサ３４は、Ｒ画像を読み取るラインＣＣＤセンサ３４Ｒ、Ｇ画像を読み取るラインＣＣＤセンサ３４Ｇ、およびＢ画像を読み取るラインＣＣＤセンサ３４Ｂを有する、いわゆる３ラインのカラーＣＣＤセンサで、各ラインＣＣＤセンサは、前述のように主走査方向に延在している。フィルムＦの投影光は、このイメージセンサ３４によって、Ｒ、ＧおよびＢの３原色に分解されて光電的に読み取られる。
イメージセンサ３４の出力信号は、アンプ３６で増幅され、Ａ／Ｄ変換器３８でデジタル信号とされて、画像処理装置１４に送られる。
【００２４】
スキャナ１２においては、フィルムＦに撮影された画像の読み取りを、低解像度で読み取るプレスキャンと、出力画像の画像データを得るための本スキャンとの、２回の画像読取で行う。
プレスキャンは、スキャナ１２が対象とする全てのフィルムの画像を、イメージセンサ３４が飽和することなく読み取れるように、あらかじめ設定された、プレスキャンの読取条件で行われる。一方、本スキャンは、プレスキャンデータから、その画像（コマ）の最低濃度よりも若干低い濃度でイメージセンサ３４が飽和するように、各コマ毎に設定された本スキャンの読取条件で行われる。
プレスキャンおよび本スキャンの出力信号は、解像度と出力レベルが異なる以外は、基本的に同じである。
【００２５】
なお、本発明において、スキャナ１２は、このようなスリット走査によるものに限定されず、エリアＣＣＤセンサを用い、１コマの画像の全面を一度に、Ｒ，Ｇ，Ｂについて面順次で読み取る、面読取を利用するものであってもよい。
また、フォトプリンタ１０は、ネガやリバーサル等のフィルムに撮影された画像を光電的に読み取るスキャナ１２以外にも、反射原稿の画像を読み取る画像読取装置、デジタルカメラやデジタルビデオカメラ等の撮像デバイス、コンピュータ通信等の通信手段、ＦＤ（フロッピーディスク）、ＭＯ（光磁気記録媒体）、スマートメディア等の画像記録媒体などの各種の画像データ供給源を利用することができ、これらを直接またはその駆動装置を介して画像処理装置１４に接続することにより、これらの画像データ供給源から画像データを受け取って、プリントを作成することができる。
特に、本発明は、デジタルカメラやデジタルビデオカメラなどのような撮像デバイスで被写体が直接光学的に撮影された画像（デジタル画像データ）に好適に利用可能であり、図示例のフォトプリンタ１０においては、直接被写体をデジタルカメラ等の撮像デバイスで撮影して得られたデジタル画像データが記録された画像記録媒体２５を駆動してデジタル画像データを読み出す記録媒体駆動装置２６が画像処理装置１４に接続されている。もちろん、デジタルカメラ等を直接画像処理装置１４に接続して、撮影された画像データを直接画像処理装置１４に入力可能にしてもよい。
【００２６】
前述のように、スキャナ１２や記録媒体駆動装置２６等からの出力信号（画像データ）は、画像処理装置１４に出力される。以下の説明では、主としてスキャナ１２から画像処理装置１４に１コマの画像データが供給される場合を代表例として説明する。
図３に画像処理装置（以下、処理装置１４とする）のブロック図を示す。処理装置１４は、データ処理部５０、Ｌｏｇ変換器５２、プレスキャンメモリ５４、本スキャンメモリ５６、プレスキャン処理部５８、本スキャン処理部６０、および条件設定部６２を有する。
なお、図３は、主に画像処理関連の部位を示しており、処理装置１４には、これ以外にも、処理装置１４を含むフォトプリンタ１０全体の制御や管理を行うＣＰＵ、フォトプリンタ１０の作動等に必要な情報を記憶するメモリ等が配置される。また、操作系１８やディスプレイ２０は、このＣＰＵ等（ＣＰＵバス）を介して各部位に接続される。
【００２７】
スキャナ１２から出力されたＲ，ＧおよびＢの各デジタル信号は、データ処理部５０において、ＤＣオフセット補正、暗時補正、シェーディング補正等の所定のデータ処理を施された後に、Ｌｏｇ変換器５２で変換されてデジタル画像（濃度）データとされ、プレスキャン（画像）データはプレスキャンメモリ５４に、本スキャン（画像）データは本スキャンメモリ５６に、それぞれ記憶される。
なお、プレスキャンデータと本スキャンデータは、解像度（画素密度）と信号レベルが異なる以外は、基本的に同じデータである。
【００２８】
プレスキャンメモリ５４に記憶されたプレスキャンデータはプレスキャン処理部５８において、本スキャンメモリ５６に記憶された本スキャンデータは本スキャン処理部６０において、それぞれ処理される。
プレスキャン処理部５８は、画像処理部６４およびデータ変換部６６を有し、他方、本スキャン処理部６０は、画像処理部６８、データ変換部７０およびレンズ種判別部７４を有する。
【００２９】
プレスキャン処理部５８の画像処理部６４と、本スキャン処理部６０の画像処理部６８は、共に、後述する条件設定部６２が設定した画像処理条件に応じて、スキャナ１２によって読み取られた画像（画像データ）に所定の画像処理を施す部位である。
画像処理部６４および６８は、処理する画像データの画素密度が異なり、また画像処理部６４が収差補正部７２を有さない以外は、基本的に同じ処理を行なうものであるので、以下の説明は、本スキャン処理部６０の画像処理部６８を代表例として行なう。なお、本発明においては、プレスキャン処理部５８の画像処理部６４にも、収差補正部を設けて、必要に応じて、プレスキャン画像に後述する歪曲収差や倍率色収差などの収差や周辺光量低下などの画質劣化の補正を行なってもよい。
【００３０】
画像処理部６８（６４）のＬＵＴは、ＬＵＴ（ルックアップテーブル）によって、画像の色バランス調整、コントラスト調整（階調処理）、および明るさ調整（濃度調整）を行なう部位であり、また、ＭＴＸは、マトリクス演算によって、画像の彩度調整を行なう部位である。
【００３１】
本スキャン処理部６０の画像処理部６８には、ＭＴＸとブロック６８Ａとの間に、歪曲収差および倍率色収差などの収差や周辺光量低下などの画質劣化の補正（以下、代表して収差補正という）ならびに電子変倍処理を行う収差補正部７２が配置される。また、収差補正部７２およびブロック６８には、レンズ種判別部７４が接続される。
【００３２】
後に詳述するが、本発明に係る処理装置１４においては、フィルムＦに被写体を撮影したレンズまたは直接被写体を撮像デバイスで撮影したレンズのレンズ種を判別し、予め選択設定されている所定のレンズ種で撮影された画像には、ブロック６８Ａで行なう鮮鋭度強調処理（シャープネス処理）を強くかける。本発明においては、これにより、レンズ付きフィルムやコンパクトカメラやデジタルカメラような低コストのレンズで撮影された画像からも、困難なＰＳＦ補正などをかけることなく、高画質な画像を再生した高品質なプリントを出力することを可能にしている。
ここで、図示例の処理装置１４においては、好ましい態様として、所定のレンズ種で撮影された、シャープネス処理を強くかける画像の場合には、レンズ特性に起因する収差補正も施し、高強度シャープネスとの相乗効果により、より高画質な画像を得ている。
言い換えれば、本発明においては、高画質な画像を得るために収差補正が必要な、性能の低いレンズで撮影された画像には、シャープネス処理を強くかけ、あるいはさらに収差補正を行い、高画質な画像を得ることを実現している。なお、本発明の高強度シャープネス強調処理は、１コマの全画面に一律に同じ強度でかけてもよいし、収差補正と同様に、レンズ特性に合わせて、すなわち画像の中心からの距離に応じて強度を変えてもよい。こうすることで、レンズに起因するピントボケも細かく補正でき、さらに適切なシャープネス処理がかかった高画質画像を再生することができる。
【００３３】
レンズ種判別部７４は、レンズ種を判別するためのレンズ情報を取得して、フィルムＦに画像を撮影したレンズ種を判別し、その結果から、高強度シャープネス処理および収差補正の要・不要を判断し、その結果に基づく指示を収差補正部７２およびブロック６８Ａに出し、さらに、判別したレンズ種のレンズ特性を収差補正部７２に供給する。
なお、本発明においては、画像にシャープネス処理を強くかけるレンズ種には限定はないが、少なくともレンズ付きフィルム（以下、ＬＦとする）で撮影された画像には、シャープネス処理を強くかけるのが好ましい。
【００３４】
フィルムＦに画像を撮影したレンズ種を判別するためのレンズ情報、およびその取得手段には特に限定はなく、各種の方法が利用可能である。
通常は、カメラの機種が判ればレンズ種が判別できるので、例えば、新写真システムのＬＦであれば、スキャナ１２（キャリア３０）において、フィルムＦに磁気記録されたカートリッジＩＤおよび／またはフィルム種を読み取り、これをカメラ機種すなわちレンズ種の判別に利用してもよい。
ところで、本発明において用いられるレンズ情報としては、レンズ情報自体であってもよいし、レンズ情報を間接的に示す情報、例えばカメラの機種などの情報でもよいし、このようなレンズ情報をコード化したもの、すなわちレンズ情報を直接または間接的に示すコード、例えばレンズ種コードやカメラ機種コードであってもよい。このようなコードとしては、上述したレンズ情報を得ることのできるフィルムカートリッジＩＤやカメラ機種であってもよい。ここで、レンズ情報とは、レンズそのものに関する情報やレンズの性能に関する情報であってもよいし、ＬＦおよびカメラの機種に関する情報であっても、さらにはレンズによる画質劣化量、例えば歪曲収差、倍率色収差、周辺光量低下等に関する各劣化量の情報などであってもよい。
このようなレンズ情報をフィルム製造時、またはフィルム装填時、あるいはデジタルカメラなどへの画像記録媒体挿入時、もしくは撮影時に光学的または磁気的あるいはまた電気的に記録し、スキャナ１２（キャリア３０）において、フィルムＦに記録されたレンズ情報を読み取り、これを用いてレンズ種を判別してもよい。
【００３５】
すなわち、デジタルカメラなどのように、フィルムを使用せずに、直接撮像デバイスで直接被写体を撮影して、直接画像記録媒体に画像データを記録する場合には、画像記録媒体挿入時あるいは撮影時にレンズ情報を１連のコマの画像データや１コマの画像データのヘッダなどに電気的に記録しておき、これを読み出してレンズ種を判別してもよい。
また、ＬＦの場合には、フィルムＦをカメラに装填する前（製造時）に、予めフィルムＦにレンズ種などのレンズ情報を磁気的に（新写真システム（ＡＰＳ）−ＬＦの場合）もしくは光学的に（１３５−ＬＦ、ＡＰＳ−ＬＦの場合）記録して、これを用いてレンズ種を判別してもよい。
例えば１３５−ＬＦ、ＡＰＳ−ＬＦなどのＬＦであれば、レンズ情報をフィルム製造時にＤＸコードや拡張ＤＸコードとは別にフィルムの非撮影領域（有効領域外）に予め光学的に記録しておくことができるし、例えば、ＡＰＳ−ＬＦであれば、ＡＰＳフィルムの先頭と最後の、フィルムメーカーが自由に使用できるロッドコードに同様に予め光学的に記録しておくこともできる。また、ＡＰＳ−ＬＦであれば、ＡＰＳフィルムの磁気層にレンズ情報をフィルム製造時に予め磁気的に記録しておくこともできる。さらに、ＩＣ付フィルムカートリッジを用いる１３５−ＬＦ、ＡＰＳ−ＬＦの場合には、このカートリッジＩＣにレンズ情報をフィルム製造時に予め電気的に記録しておくこともできる。
【００３６】
また、新写真システム（ＡＰＳ）のカメラやＡＰＳ−ＬＦであれば、フィルムＦにカメラの機種やレンズ種などのレンズ情報をフィルムの装填時や撮影時に磁気記録し、上記と同様に、これを利用してもよい。
また、カメラによっては、例えば通常の１３５フィルムを用いるカメラ、ＡＰＳカメラ、１３５−ＬＦ、ＡＰＳ−ＬＦの場合には、レンズ種（カメラの機種）などのレンズ情報をフィルムの装填時や撮影時にカメラの側からＬＥＤ等を用いてフィルムの有効領域外に光学的に記録しておくこともできる。あるいは、同様な各種のカメラおいて、撮影時にカメラの露光開口枠の開口縁部に設けられたノッチをフィルムに露光・焼き付け、レンズ情報として図６（Ａ）および（Ｂ）に示すようなノッチマーク４６をフィルムの有効領域外に光学的に記録もよいし、撮影時にカメラのフィルムの撮影画面を規定するアパーチャに設けられた凹凸をフィルムに露光し、図６（Ｃ）および（Ｄ）に示すような凹凸４８をフィルムの有効領域外に記録してもよい。図６（Ａ）および（Ｂ）に示すノッチマーク４６の場合には、ノッチマーク４６の数や形状やその間隔等を用いたコードにより、図６（Ｃ）および（Ｄ）に示す凹凸４８の場合にもその数や形状やその間隔等を用いたコード、好ましくはバーコードリーダで読取可能なバーコードにより、レンズ情報を記録することができる。これらの場合には、スキャナ１２（キャリア３０）において画像の撮影領域（有効領域）より大きい範囲を読み取り、読み取られたノッチマーク４６や凹凸４８からレンズ情報を読み取りレンズ種を判別すればよい。
【００３７】
なお、ＡＰＳフィルムは、全てのコマが通常一台のカメラで撮影されるが、ＡＰＳカメラによっては、途中交換（ＭＲＣ）機能を備えたものもあるため、ＡＰＳカメラの途中交換機能を使い、一本のＡＰＳフィルムが異なるカメラで撮影された場合には、本発明のレンズ種に応じたシャープネス強度の変更は、途中交換機能を考慮して判別されたそれぞれのカメラのレンズ種を用いて行うのは、もちろんである。
また、受け付け時に、ＬＦの機種や１３５フィルムなどの撮影に用いたカメラの機種を顧客に聞きいて記録しておき、プリント作成時にオペレータがこれをキーボード１８ａ等で入力して、レンズ種を判別してもよい。
【００３８】
また、特にレンズ種を判別せず、ある特定のフィルムＦ、例えば、ＬＦで撮影されたフィルムＦである場合には、ＬＦのフィルムであることの検出をもってレンズ種の検出とし、一律の条件でシャープネス処理を強くかけ、あるいはさらに収差補正を行なってもよい。なお、ＬＦのフィルムＦであることの判別は、前述のレンズ種の判別方法に加え、レンズタイプの情報、フィルム等に記録されるカメラ識別コード、フィルム製造時に記録される新写真システムのＳＳＵ（Snap Shooting Unit）インジケータ等が利用できる。
【００３９】
レンズ種判別部７４には、各種のレンズ種に応じたレンズ特性の情報、具体的には、レンズの歪曲収差および倍率色収差ならびに周辺光量低下の特性の情報、シャープネス処理の強度を中心からの距離に応じて変える場合にはそのための画像のボケ特性（例えば、ピントボケ特性、すなわちＰＳＦ特性）の情報が記憶されている。あるいは、前述のように、ＬＦであれば一律の補正をかける場合には、ＬＦの平均的なレンズ特性の情報を持てばよい。
レンズ種判別部７４は、その画像が所定のレンズ種で撮影された、シャープネス処理を強くかけ、また、収差補正が必要な画像であると判断した場合には、判別したレンズ種に応じたレンズ特性の情報をメモリから読み出し、収差補正部７２に供給する。
【００４０】
レンズ特性としては、特に限定はないが、一般的に、レンズの歪曲収差の特性や倍率色収差や周辺光量低下や必要に応じて画像のボケなどの特性は、レンズの光軸すなわちフィルムＦに撮影された画像の中心からの距離（例えば、ｘ−ｙで示される）をパラメータとする３次関数で、ある程度まで近似することができるので、歪曲収差や倍率色収差や周辺光量低下や画像のボケなどの補正が必要なレンズ種について、その歪曲収差の特性を示す関数および倍率色収差の特性を示す関数ならびに周辺光量低下の特性を示す関数や画像のボケ特性を示す関数などを、レンズ特性として記憶しておけばよい。
【００４１】
収差補正部７２は、レンズ種判別部７４が必要と判断した画像について、レンズ種判別部７４から供給されたフィルムＦのレンズ特性と、画像データ（画素）の位置情報、例えば、画像の中心からの座標位置（中心の画素から何画素目か）とを用いて、歪曲収差、倍率色収差の補正および周辺光量低下の補正、ならびに電子変倍処理を行う。なお、この座標は、例えば、ｘ−ｙ座標でも極座標でもよく、画像（画素）の位置が相対的に検出できれば、各種の位置情報が利用可能である。
従って、レンズ種判別部７４がシャープネス処理を強くかけることは不要と判断した画像については、撮影レンズに起因する画質劣化はないものとして、収差補正部７２では電子変倍処理のみが行なわれる。また、シャープネス処理を強くかける必要があると判定した場合でも、レンズ特性が記憶されていない場合には電子変倍処理のみが行なわれる。
【００４２】
ここで、レンズ特性と画像の位置情報（以下、画素位置とする）とを用いた倍率色収差および歪曲収差の補正を別々に行うと、演算に時間がかかり、また、補間演算も複数回行う必要が生じるため、画質が劣化するという問題がある。
そのため、好ましくは、Ｒ、ＧおよびＢの３原色の基準となる色、通常はＧを基準として、ＲおよびＢの像倍率を変換して、ＲおよびＢの画像をＧ画像に合わせることで倍率色収差を補正し、その後、Ｇ画像の歪曲収差を補正して、画像の歪曲収差および倍率色収差を補正する。これにより、各画素の適正位置を算出し、これを用いて、各画素の画像データを補間演算することによって、フィルムに撮影された画像の倍率色収差および歪曲収差を補正した画像データを得ることができる。
従って、歪曲収差についてはＧ画像に対する演算のみを行えばよいので、演算量や補間演算を減らして、より好適な倍率色収差および歪曲収差の補正を行うことができる。
【００４３】
また、画像処理装置では、通常、画像データ処理による画像の拡大もしくは縮小、すなわち、電子変倍処理を行って、画像（画像データ）を出力画像に応じたサイズにして出力する。この電子変倍処理は、通常、画像データを補間演算することにより行われる。
ところが、前記倍率色収差および歪曲収差の補正でも補間演算が必要であるため、結果的に、２回の補間が行われる結果となり、画質が劣化してしまう場合もある。
【００４４】
そのため、より好ましくは、前記レンズ特性と画像データの画素位置とを用いて、倍率色収差に起因する基準色（Ｇ）に対するＲおよびＢの画素位置のずれ量と、歪曲収差に起因する基準色の画素位置のずれ量とから、各画素毎の適正位置を算出し、算出された各画素の適正位置の情報を用いて、各画素の画像データを補間して画像の電子変倍処理を行う。言い換えれば、倍率色収差および歪曲収差による画素位置のずれ量を算出することにより、各画素が本来どの位置にあるべきであるかを検出し、この適正な位置に応じて画像データの補間演算を行って電子変倍処理を行う。
これにより、１回の補間演算で、歪曲収差および倍率色収差の補正と、電子変倍処理とを行うことができる。
【００４５】
図示例の収差補正部７２は、上記処理方法を実施する部位であり、図４の概念図に示されるように、座標変換処理部７２Ａと、拡大縮小処理部７２Ｂとを有する。
なお、図４において、ｉｒ，ｉｇおよびｉｂは、それぞれＭＴＸから供給された画像データ（入力画像データ）の画素位置（アドレス）を； Ｉｒ，ＩｇおよびＩｂは、倍率色収差および歪曲収差が補正された画像データの画素位置を；
ΔｒおよびΔｂは、それぞれ倍率色収差によるＧの画素位置に対するＲおよびＢの画素位置のずれ量（すなわち補正量）を； Ｄは、歪曲収差によるＧの画素位置のずれ量を； それぞれ示す。
【００４６】
収差補正部７２においては、ＭＴＸから画像データが供給されると、座標変換処理部７２Ａにおいて、レンズ種判別部７４から供給されたレンズ特性を用いて、ＲおよびＢの画像データの各画素位置ｉｒおよびｉｂにおける、Ｇの画像データｉｇに対する倍率色収差によるずれ量ΔｒおよびΔｂを算出し、さらに、Ｇの入力画像データｉｇの歪曲収差によるずれ量Ｄを算出する。
【００４７】
次いで、Ｒの入力画像データの各画素位置ｉｒに前記ΔｒとＤを加えて、倍率色収差および歪曲収差を補正されたＲの画像データの画素位置Ｉｒを算出し、Ｂの入力画像データの各画素位置ｉｂに前記ΔｂとＤを加えて、倍率色収差および歪曲収差を補正されたＢの画像データの画素位置Ｉｂを算出し、Ｇの入力画像データの各画素位置ｉｇに前記Ｄを加えて、倍率色収差および歪曲収差を補正されたＢの画像データの画素位置Ｉｂを算出する。
すなわち、この計算では、Ｇ画像を基準として、Ｒ画像およびＢ画像の倍率色収差を補正して、全画像をＧ画像に位置合わせして、Ｇ画像の歪曲収差によるずれ量Ｄを用いて、全体の歪曲収差を補正して、Ｒ，ＧおよびＢの各画像の倍率色収差および歪曲収差を補正された画素位置を算出している。
【００４８】
次いで、拡大縮小処理部７２Ｂにおいて、この倍率色収差および歪曲収差を補正された画素位置Ｉｒ，ＩｇおよびＩｂを用いて、拡大／縮小倍率に応じた画像データの補間処理（Ｎ倍補間）を行うことにより画像の変倍を行い、倍率色収差および歪曲収差が補正され、かつ電子変倍処理が行われた画像データとして、ブロック６８Ａに出力する。電子変倍処理の方法には特に限定はなく、公知の方法が各種利用可能であり、例えば、バイリニア補間を用いる方法、スプライン補間を用いる方法等が例示される。
【００４９】
なお、歪曲収差の補正を行なうと、再現領域の画像が無くなる、いわゆるケラレを生じる場合があるので、歪曲収差の補正を行う場合には、通常よりも０．１％〜５％程度高い変倍率で電子変倍処理（補間）を行うのが好ましい。
また、その際の電子変倍率は、レンズ種に応じて各種設定してもよい。また、歪曲収差の量は、画像の縦と横で異なる場合があるので、それに応じて、縦と横で電子変倍処理の変倍率を変えてもよい。
【００５０】
図示例の装置においては、好ましい態様として、歪曲収差および倍率色収差の両者を補正しているが、いずれか一方のみを行なってもよい。この場合にも、収差補正と電子変倍処理とを別々に行なうのではなく、前述の方法と同様に、収差に起因するずれ量を補正した適正位置を算出し、この適正位置の情報を用いて画像データの補間を行って電子変倍処理を行うのが好ましい。
さらに、歪曲収差や倍率色収差のみならず、レンズに起因する周辺光量低下やピントボケ（ＰＳＦ:Point Spread Function）の特性も記憶しておき、前記収差補正に加え、ピントボケ補正や周辺光量補正も行うようにしてもよい。
【００５１】
画像処理部６４のＭＴＸ、および収差補正部７２で処理された画像データは、次いで、ブロック６４Ａおよび６８Ａで処理される。
【００５２】
ブロック６４Ａおよび６８Ａは、シャープネス処理に加え、覆い焼き処理（中間階調を維持した画像ダイナミックレンジの圧縮）、文字や画像の合成等の、前述の各種の処理以外の各種の画像処理を行なう部位である。なお、プレスキャン処理部５８にはブロック６４Ａは無くてもよく、また、ブロック６４Ａではシャープネス処理も行なわなくてもよい。以下の説明では、シャープネス処理は、ブロック６８Ａのみで行なう。
ここで、本発明にかかる処理装置１４においては、前述のように、レンズ種判別部７４による指示に応じて、特定のレンズ種で撮影された画像には、ブロック６８Ａ（あるいはさらにブロック６４Ａ）でのシャープネス処理を、通常よりも強くかける。
【００５３】
図５に、ブロック６８Ａにおいてシャープネス処理を行う処理手段の一例のプロック図を示す。
同図に示されるように、（シャープネス）処理手段９０は、第１ローパスフィルタ（以下、ＬＰＦという）９２と、第１減算器９４と、輝度算出手段９６と、第２ＬＰＦ９８と、第２減算器１００と、第１アンプ１０２と、第２アンプ１０４と、第１加算器１０６と、第２加算器１０８とを有する。
【００５４】
処理手段９０においては、所定の処理を終えて入力された画像データ（以下、原信号という）ＳF （Ｒ，Ｇ，Ｂ）を第１ＬＰＦ９２で処理して、原信号ＳF （Ｒ，Ｇ，Ｂ）の低周波数成分ＲL ，ＧL ，ＢL を抽出する。第１ＬＰＦ９２は、例えば、９×９のＬＰＦである。
一方、第１減算器９４は、原信号ＳF からこの低周波数成分ＲL ，ＧL ，ＢL を減算して、中間・高周波数成分ＲMH，ＧMH，ＢMHを抽出する。
ここで、抽出された後の低周波数成分ＲL 、ＧL 、ＢL は、光学的に撮影されたカラー画像中のエッジや細かいテクスチャやフィルムの粒状によるザラツキを含まないものである。一方、中間周波数成分ＲM 、ＧM 、ＢM はフィルム粒状によるザラツキを含むものであり、高周波数成分ＲH 、ＧH 、ＢH は、カラー画像中のエッジや細かいテクスチャアを含むものである。
【００５５】
次いで、輝度算出手段９６において、第１減算器９４によって得られた中間・高周波数成分ＲMH，ＧMH，ＢMHから輝度成分が抽出される。
この輝度成分は、原信号ＳF の中間・高周波数成分ＲMH，ＧMH，ＢMHをＹＩＱ規定に変換した際の輝度（中間・高周波数）成分ＹMHで、例えば、下記式によって算出される。
ＹMH＝０．３Ｒ＋０．５９Ｇ＋０．１１Ｂ
ＩMH＝ＱMH＝０
ここで、色成分である成分ＩMHおよび成分ＱMHは一般の被写体を写した画像の場合は殆ど成分を持たないことが経験的にわかっている。従って、成分ＩMHおよび成分ＱMHは、フィルム粒状に起因する色のザラツキとみなして０とおくことにより、ザラツキを抑制した良好な再生画像を得ることができる。
【００５６】
次いで、輝度成分ＹMHに対して、第２ＬＰＦ９８によってフィルタリング処理を施して、輝度成分ＹMHの中間周波数成分ＹM を得る。第２ＬＰＦ９８は、例えば、５×５のＬＰＦである。
さらに、第２減算器１００において、輝度成分ＹMHから中間周波数成分ＹM を減算することにより輝度成分ＹMHの高周波数成分ＹH を得る。
第２ＬＰＦ９８で得られた中間周波数成分ＹM に、第１アンプ１０２において中間周波数成分ＹM に対するシャープネスゲインであるゲインＭ（gainＭ）を、他方、減算によって得られた高周波数成分ＹH に、第２アンプ１０４において高周波数成分ＹH に対するシャープネスゲインであるゲインＨ（gainＨ）を、それぞれ乗算し、処理済成分Ｙ′M ，Ｙ′H を得る。
ここで、処理手段９０においては、シャープネス強調処理を行う時、フィルム粒状によるザラツキを目立たせることなく、画像中のエッジや細かいテクスチャアを強調できるように、粒状を抑制するためにフィルム粒状によるザラツキを含む中間周波数成分ＲM 、ＧM 、ＢM （輝度成分ＹM ）をあまり強調し過ぎないようにゲインＭを設定し、画像中のエッジや細かいテクスチャアを含む高周波数成分ＲH 、ＧH 、ＢH （輝度成分ＹH ）を強調するようにゲインＨを設定しておくのが好ましい。こうすることにより、処理手段９０において粒状抑制シャープネス強調処理を行うことができる。
【００５７】
第１アンプ１０２および第２アンプ１０４で得られた処理済成分Ｙ′M およびＹ′H は、第１加算器１０８で合成され、処理済輝度成分Ｙ′MHが得られる。
さらに、第２加算器１０８において、このようにして得られた処理済輝度成分Ｙ′MHを前述した原信号ＳF の低周波数成分ＲL ，ＧL ，ＢL と合成して、シャープネス処理された画像データＲ′，Ｇ′，Ｂ′が得られる。
この際、前述した成分ＩMHおよびＱMHの値は０とされているため、処理された輝度成分Ｙ′MHを逆変換してＲＧＢのデータに対応させると、ＲＧＢ３つのデータは全て成分ＹMH’と同一の値となるので、処理された輝度成分ＹMH’を逆変換しないで合成することにより処理を簡便なものすることがとできる。
【００５８】
ここで、本発明は、前述のように、レンズ種判別部７４で判別される特定のレンズ種によって撮影された画像は、通常のシャープネス強調処理、好ましくは粒状抑制シャープネス強調処理よりもシャープネス処理を強くかけるものであり、図示例においては、第２アンプ１０４で乗算するゲインＨを通常の設定値よりさらに大きくすることにより、すなわち高周波数成分をより強調することにより、シャープネス処理を強くかけるものである。この例では、高周波数成分のゲインＨを大きくすることによりシャープネス強調処理の強度を大きくするので、高周波数成分のゲインＨをシャープネス強調処理の強度とすることができる。
【００５９】
処理手段９０においては、フィルム種やプリントサイズ等に応じた好適なゲインＭおよびゲインＨが、デフォルトとして設定されている。例えば、一眼レフカメラ等の特定のレンズ種に指定されていないレンズを有するカメラで撮影されたフィルムから２Ｌサイズのプリントを作成する場合には、デフォルトとして、例えばゲインＭにはデジタル値１０（例えば、ゲイン１．２５に相当）が、ゲインＨにはデジタル値２８（例えば、ゲイン３．５０に相当）が、それぞれ設定されており、処理手段９０は、通常は、これらのシャープネスゲインを用いて、シャープネス処理を行なう。
これに対し、例えば、ＬＦで撮影されたフィルム等、特定のレンズ種で撮影された、レンズ種判別部７４がシャープネス処理を強くかけることを指示した画像には、処理手段９０は、デフォルトよりも大きなゲインＨ、例えば、前述の例であれば、ゲインＨをデジタル値３２（例えば、ゲイン４．５０に相当）として、高強度のシャープネス処理を行なう。
【００６０】
本発明において、シャープネス処理を通常よりも強くかける方法は、上記方法に限定はされず、利用するシャープネス処理の方法に応じた、各種の方法が利用可能である。
シャープネス処理を強くかける場合における、シャープネス強度となるゲインＨやゲインＭ等のシャープネス処理条件は、レンズ種に係わらず一律であってもよいが、レンズ種のレンズ特性に応じて、それぞれに最適な条件を設定してもよい。
【００６１】
また、上述した例では、高強度のシャープネス処理を行なう際に、シャープネス強調処理の強度、すなわち高周波数成分のゲインＨを１コマの画像全体で一律に変更しているが、本発明はこれに限定されず、１コマの画像を複数の領域に分割して、その分割された領域内の画像毎に変更してもよい。１コマの画像の複数の領域への分割の仕方は、特に制限的ではなく、どのように分割してもよいし、分割された領域の大きさや形状も、特に制限的ではなく、どのような大きさ、形状であってもよい。例えば、１コマの画像を、複数の矩形、具体的には第１象限当たり、２０×２０の矩形領域に分割してもよいし、画像の中心を中心とする同心円によって中心円および複数の平板状円環（リング）に分割してもよいし、１画素単位に分割してもよいし、画像中の主要被写体を含む１つまたは２つ以上の領域と含まないいくつかの領域に分割してもよいし、主要被写体領域とそれ以外の領域に分割してもよい。もちろん、残りのシャープネス処理条件の１つである中周波数成分のゲインＭも、分割された領域内の画像毎に変更してもよい。
なお、この場合には、分割された各領域でのシャープネス強調処理の強度（ゲインＨ）や条件（ゲインＭ）が異なるので、各領域の境界における繋がりを滑らかにするために、隣接する領域のシャープネス強度（ゲインＨ）や条件（ゲインＭ）をその変化が滑らかになるように設定するのが好ましい。
【００６２】
この時、レンズ特性に起因するピントのズレ、従って、撮影された画像のボケ（ＰＳＦ）は、歪曲収差や倍率色収差などの収差や周辺光量低下などの画質劣化と同様に、画像の中心からの距離に応じて大きくなる傾向にある。このため、この画像のボケ特性を歪曲収差や倍率色収差などの収差の特性や周辺光量の特性の情報とともに、レンズ種判別部７４に、各種のレンズ種に応じたレンズ特性の情報として記憶させておき、処理手段９０が本発明のシャープネス強調処理を行う場合に、判別されたレンズ種に応じた画像のボケ特性の情報をメモリから読み出し、分割された各領域の位置とボケの大きさから分割された領域毎のシャープネス強度（ゲインＨ）や条件（ゲインＭ）を決定してもよい。
こうすることにより、たとえ、収差補正部７２においてＰＳＦ補正を行わなくても、レンズに起因する画像のボケをその度合いに応じて適切に補正することができるので、画像のボケのない、もしくは極めて少ない高画質画像を再生することができる。
この場合には、１コマの画像を、複数の矩形、例えば第１象限あたり２０×２０の矩形領域に分割したり、画像の中心を中心とする同心円によって中心円および複数の平板状円環（リング）に分割するのが好ましい。なお、１コマの画像を、複数の矩形領域に分割する場合には、対称性を利用して１コマの画像全体の１／４の領域のみにある各単位矩形領域、例えば４０×４０の単位矩形領域に分割する場合には第一象限の２０×２０の単位矩形領域のシャープネス強度（ゲインＨ）や条件（ゲインＭ）を決定すればよい。
【００６３】
また、上述した例では、高強度のシャープネス処理を行なう際に、シャープネス強度（ゲインＨ）を３原色の画像データ、例えばＲＧＢ画像データで一律に変更しているが、本発明はこれに限定されず、ＲＧＢ画像データ毎に独立に変更してもよい。もちろん、残りのシャープネス処理条件（ゲインＭ）も、ＲＧＢ画像データ毎に独立に変更してもよい。
シャープネス強度（ゲインＨ）や条件（ゲインＭ）をＲＧＢ画像データ毎に独立に変更する場合には、例えば上述した図５に示すシャープネス処理回路９０をＲＧＢ毎に備え、ゲインＨを、それぞれゲインＨＲ、ゲインＨＧおよびゲインＨＢとして、ゲインＭを、それぞれゲインＭＲ、ゲインＭＧおよびゲインＭＢとして、ＲＧＢ毎のシャープネス処理回路の第１および第２アンプ（１０２、１０４に相当）に独立に設定すればよい。
【００６４】
そうして、中間・高周波数成分ＲMH，ＧMH，ＢMHから輝度成分ＹMHを求めるのではなく、それぞれに第２ＬＰＦ９８によるフィルタリング処理を施し中間周波数成分ＲM 、ＧM 、ＢM を求め、次いで、中間・高周波数成分ＲMH，ＧMH，ＢMHからそれぞれ中間周波数成分ＲM 、ＧM 、ＢM を減算して、高周波数成分ＲH ，ＧH ，ＢH を求める。この後、得られた中間周波数成分ＲM 、ＧM 、ＢM にそれぞれゲインＭＲ、ゲインＭＧ、ゲインＭＢを乗算して、処理済中間周波数成分ＲM ' 、ＧM ' 、ＢM ' を求め、得られた高周波数成分ＲH ，ＧH ，ＢH にそれぞれゲインＨＲ、ゲインＨＧ、ゲインＨＢを乗算して、処理済高周波数成分ＲH ’、ＧH ’、ＢH ’を求める。
こうして得られた処理済中間周波数成分ＲM ' 、ＧM ' 、ＢM ' と処理済高周波数成分ＲH ’、ＧH ’、ＢH ’とをそれぞれ加算し、処理済輝度成分Ｙ′MHの代わりに、中間・高周波数成分ＲMH’，ＧMH’，ＢMH’を求め、それぞれ低周波数成分ＲL ，ＧL ，ＢL と合成して、シャープネス処理された画像データＲ′，Ｇ′，Ｂ′を得ることができる。
【００６５】
このように、シャープネス強度（ゲインＨ）や条件（ゲインＭ）をＲＧＢ画像データ毎に独立に変更する場合に、ＲＧＢ画像データ毎に全く独立に変更してもよいが、３原色ＲＧＢに対するレンズ特性や人の目の視感度特性等を考慮して、以下の２つの方法を行うのが好ましい。
第１の方法は、Ｇについてはデフォルト強度とし、ＲおよびＢについてはデフォルト強度より大きい強度とする方法（Ｇ＜Ｒ＝Ｂ）である。これは、通常、ＲとＢとはＧに比べて、ピントがあっておらず、シャープネスが劣るからである。一方、第２の方法は、ＧおよびＢについてはデフォルト強度とし、Ｒのみについてはデフォルト強度より大きい強度とする方法（Ｇ＝Ｂ＜Ｒ）である。これは、人の目の視感度特性は、Ｇ＞Ｒ＞Ｂであり、Ｇに比べてピントがあっておらず、シャープネスが劣るＲとＢのうち、Ｂは人の目には目立たないからである。
これらの方法を用いることにより、全体の処理量を減らすことができる。
【００６６】
上述した例では、シャープネス強調の強度を変更する際に、高周波数成分のゲインや中周波数成分のゲインをＲＧＢ画像データに一律に、またはそれぞれに独立に変更しているが、本発明はこれに限定されず、どのような方法で行ってもよい。例えば、それぞれのゲインは、変更せずに、高・中・低周波数成分に分解する周波数領域（周波数帯）を変更してもよい。また、シャープネス強調処理の方法自体を変更してもよく、その強度の変更を行うようにしてもよい。例えば、アンシャープマスキングによるシャープネス強調処理の場合には、強調係数を変更するようにすればよい。
【００６７】
また、上述した例では、レンズ種に応じてシャープネス強調処理の強度を変更しているが、そのレンズを備えたカメラで撮影されるフィルムが高感度である場合には、シャープネスの強度を強くするとフィルムの粒状も強調され、再生された画像にザラツキが目立つようになる恐れもある。このため、シャープネスの強度は、レンズ種に応じてのみならず、フィルム種によっても変更してもよい。例えば、高感度フィルムの場合には、シャープネスの強度（ゲインＨ）を大きくする割合を下げたり、限度を設けたり、さらには粒状を多く含む中周波数成分のゲインＭをデフォルトより下げたりして、粒状抑制を強くするのが好ましい。
こうすることにより、コンパクトカメラやＬＦのような特定のレンズで高感度フィルムに撮影された画像であっても、粒状の荒れや画像のボケの少ない高画質画像が再生された高品質なプリントを得ることができる。
ここで、ＬＦのように、レンズ種とフィルム種とが１対１に対応している場合には、フィルム種はレンズ種から判別すればよい。また、フィルム種は、一般的にフィルムに光学的に記録されている情報、例えばＤＸコードや拡張ＤＸコードなどの情報や、さらにＡＰＳフィルムの場合は磁気的に記録されている情報を読み取ることによって、判別することができるので、これらを利用すればよい。
【００６８】
また、図示例においては、収差補正を行なった後にシャープネス処理を行なっているが、本発明はこれに限定はされず、シャープネス処理を行なった後に収差補正を行なってもよい。ただし、画質的には、図示例のように、収差補正を行なった後に、シャープネス処理を行なった方が有利である。
なお、本発明においては、収差補正は必ずしも必要ではなく、特定のレンズ種で撮影された画像に、シャープネス処理を強くかけるのみであってもよい。
【００６９】
画像処理部６４および６８で処理された画像データは、データ変換部６６および７０に送られる。
プレスキャン処理部５８のデータ変換部６６は、画像処理部６４によって処理された画像データを、３Ｄ（三次元）−ＬＵＴ等を用いて変換して、ディスプレイ２０による表示に対応する画像データにする。なお、必要に応じて、このデータ変換部６６で電子変倍処理を行なってもよい。
他方、本スキャン処理部６０のデータ変換部７０は、同様に、画像処理部６８によって処理された画像データを３Ｄ−ＬＵＴを用いて変換し、プリンタ１６による画像記録に対応する画像データとしてプリンタ１６に供給する。
【００７０】
プレスキャン処理部５８および本スキャン処理部６０による各種の画像処理条件は、条件設定部６２によって設定される。
この条件設定部６２は、セットアップ部７２、キー補正部７８およびパラメータ統合部８０を有する。
【００７１】
セットアップ部７６は、プレスキャンデータを用いて、本スキャンの読取条件を設定すると共に、施す画像処理を選択して、画像処理部６４および６８やデータ変換部６６および７０における画像処理条件を設定し、パラメータ統合部８０に供給する。
具体的には、セットアップ部７６は、プレスキャンデータから、濃度ヒストグラムの作成や、平均濃度、ハイライト（最低濃度）、シャドー（最高濃度）等の画像特徴量の算出等を行い、加えて、必要に応じて行われるオペレータによる指示に応じて、本スキャンの読み取り条件を設定し、また、前述のグレイバランス調整等を行なうＬＵＴや彩度調整を行うマトリクス演算式の作成等の画像処理条件を決定する。
【００７２】
キー補正部７８は、キーボード１８ａ等による、明るさ、色、階調、彩度等の補正指示に応じて、画像の補正量を算出して、パラメータ統合部８０に供給するものである。
パラメータ統合部８０は、セットアップ部７６が設定した画像処理条件を受け取り、供給された画像処理条件をプレスキャン処理部５８の画像処理部６４および本スキャン処理部６０の画像処理部６８に設定し、さらに、キー補正部７８で算出された補正量に応じて、この補正を行なうＬＵＴ等を作成して所定の部位に設定し、また、各部位に設定した画像処理条件を補正する。
【００７３】
以下、スキャナ１２および処理装置１４の作用を説明する。
オペレータがフィルムＦに対応するキャリア３０をスキャナ１２に装填し、キャリア３０の所定位置にフィルムＦ（カートリッジ）をセットし、作成するプリントサイズ等の必要な指示を入力した後に、プリント作成開始を指示する。
【００７４】
前記プリント開始の指示により、スキャナ１２の可変絞り２４の絞り値やイメージセンサ（ラインＣＣＤセンサ）３４の蓄積時間がプレスキャンの読取条件に応じて設定され、その後、キャリア３０がフィルムＦをプレスキャンに応じた速度で副走査方向に搬送して、プレスキャンが開始され、前述のように所定の読取位置において、フィルムＦがスリット走査されて投影光がイメージセンサ３４に結像して、フィルムＦに撮影された画像がＲ，ＧおよびＢに分解されて光電的に読み取られる。
【００７５】
また、このフィルムＦの搬送の際に、キャリア３０の磁気ヘッド４２によってフィルムＦに磁気記録された情報が読み取られ、また、センサ４４によってＤＸコード等の各種の情報が読まれ、必要な情報が処理装置１４等の所定の部位に送られ、例えば、処理装置１４のレンズ種判別部７４が判別情報を得る。なお、判別情報は、オペレータによる入力等、各種の方法で提供されてもよいのは、前述のとおりである。
【００７６】
本発明においては、プレスキャンおよび本スキャンは、１コマずつ行ってもよく、全コマあるいは所定の複数コマずつ、連続的にプレスキャンおよび本スキャンを行ってもよい。以下の例では、説明を簡潔にするために、１コマの画像読取を例に説明を行う。
【００７７】
プレスキャンによるイメージセンサ３４の出力信号は、アンプ３６で増幅されて、Ａ／Ｄ変換器３８に送られ、デジタル信号とされ、処理装置１４に送られ、データ処理部５０でデータ処理を施され、Ｌｏｇ変換器５２でデジタル画像データであるプレスキャンデータとされ、プレスキャンメモリ５４に記憶される。
【００７８】
プレスキャンメモリ５４にプレスキャンデータが記憶されると、条件設定部６２のセットアップ部７６がこれを読み出し、濃度ヒストグラムの作成、ハイライトやシャドー等の画像特徴量の算出等を行い、本スキャンの読取条件を設定してスキャナ１２に供給し、また、階調調整等の各種の画像処理条件を設定し、パラメータ統合部８０に供給する。
パラメータ統合部７６は、供給された画像処理条件を、プレスキャン処理部５６および本スキャン処理部５８の所定部位（ハードウエア）に設定する。
【００７９】
検定を行う場合には、プレスキャン処理部６２によってプレスキャンデータがプレスキャンメモリ５４から読み出され、画像処理部６４において設定された画像処理条件で画像処理され、さらに、データ変換部６６で変換され、シュミレーション画像としてディスプレイ２０に表示される。
オペレータは、ディスプレイ２０の表示を見て、画像すなわち処理結果の確認（検定）を行い、必要に応じて、キーボード１８ａに設定された調整キー等を用いて色、濃度、階調等を補正する。
この調整の入力は、キー補正部７８に送られ、キー補正部７８は補正入力に応じた補正量を算出し、これをパラメータ統合部７６に送る。パラメータ統合部７６は、この補正量に応じて、これを実行するための補正条件を設定し、また、先に設定した画像処理条件の補正等を行う。従って、この補正すなわちオペレータによる調整入力に応じて、ディスプレイ２０に表示される画像も変化する。
【００８０】
オペレータは、このコマの画像が適正（検定ＯＫ）であると判定すると、キーボード１８ａ等を用いてプリント開始を指示する。これにより、画像処理条件が確定し、スキャナ１２において可変絞り２４の絞り値等が設定された本スキャンの読取条件に応じて設定されると共に、キャリア３０が本スキャンに対応する速度でフィルムＦを搬送し、本スキャンが開始される。
なお、検定を行わない場合には、パラメータ統合部８０による本スキャン処理部６０の画像処理部６８への画像処理条件の設定を終了した時点で画像処理条件が確定し、本スキャンが開始される。このような検定の有無は、モードとして選択可能にするのが好ましい。
【００８１】
本スキャンは、可変絞り２４の絞り値等の読取条件が設定された本スキャンの読取条件となる以外はプレスキャンと同様に行われ、イメージセンサ３４からの出力信号はアンプ３６で増幅されて、Ａ／Ｄ変換器３８でデジタル信号とされ、処理装置１４のデータ処理部５０で処理されて、Ｌｏｇ変換器５２で本スキャンデータとされ、本スキャンメモリ５６に送られる。
本スキャンデータが本スキャンメモリ５４に送られると、本スキャン処理部６０によって読み出され、画像処理部６８のＬＵＴおよびＭＴＸで階調調整や彩度調整が施され、次いで、収差補正部７２に送られる。
【００８２】
一方、レンズ種判別部７４は、取得した判別情報からレンズ種を判別し、その画像が特定のレンズ種で撮影された、シャープネス処理を強くかけ、かつ収差補正を行なう必要がある画像か否かを判定し、必要と判定した場合には、その旨の指示をブロック６８Ａおよび収差補正部７２に送り、また、そのレンズ種のレンズ特性を読み出し、これを収差補正部７２に送る。
【００８３】
収差補正部７２は、レンズ特性と画像データの画素位置とから、前述のようにして、座標変換処理部７２Ａにおいて、倍率色収差および歪曲収差を補正した画素位置Ｉｒ，ＩｇおよびＩｂを算出して、拡大縮小処理部７２Ｂにおくる。拡大縮小処理部７２Ｂでは、画素位置Ｉｒ，ＩｇおよびＩｂを用いて、画像データのＮ倍補間を行って画像の電子変倍を行い、収差補正および電子変倍処理を施された画像データとしてブロック６８Ａに出力する。
なお、レンズ種判別部７４が、シャープネス処理を強くかける必要がないと判断した画像は、座標変換処理部７２Ａでは何の処理も行われず、拡大縮小処理部７２Ｂで電子変倍処理のみが行われる。
【００８４】
画像データは、さらに、ブロック６８Ａにおいてシャープネス処理や覆い焼き処理等の必要な画像処理を施され、データ変換部７０に送られる。
ここで、レンズ種判別部７４からシャープネス処理を強くかけることを指示された画像は、前述のように、ブロック６８Ａにおいてシャープネス処理を行なう処理装置９０において、高周波数成分に乗算するシャープネスゲインであるゲインＨを、デフォルト（例えば、デジタル値２８）よりも高くして（例えば、デジタル値３２）、シャープネス処理を強くかける。
【００８５】
画像データは、次いで、画像データ変換部７０においてプリンタ１６による画像記録に応じた画像データに変換され、プリンタ１６に送られる。
【００８６】
プリンタ１６は、感光材料（印画紙）を画像データに応じて露光して潜像を記録し、感光材料に応じた現像処理を施して（仕上り）プリントとして出力するものである。例えば、感光材料をプリントに応じた所定長に切断した後に、バックプリントの記録、感光材料（印画紙）の分光感度特性に応じた、赤（Ｒ）露光、緑（Ｇ）露光および青（Ｂ）露光の３種の光ビームを画像データ（記録画像）に応じて変調すると共に、主走査方向に偏向し、主走査方向と直交する副走査方向に感光材料を搬送することによる潜像の記録等を行い、潜像を記録した感光材料に、発色現像、漂白定着、水洗等の所定の湿式現像処理を行い、乾燥してプリントとした後に、仕分けして集積する。
【００８７】
以上、本発明の画像処理方法および画像処理装置について詳細に説明したが、本発明は上記実施例に限定はされず、本発明の要旨を逸脱しない範囲において、各種の改良および変更を行ってもよいのはもちろんである。
【００８８】
【発明の効果】
以上、詳細に説明したように、本発明によれば、レンズ付きフィルムや安価なコンパクトカメラやデジタルカメラ等で撮影された画像であっても、高画質な画像が再生された高品質のプリントを出力することができる。
【図面の簡単な説明】
【図１】 本発明の画像処理装置を利用するデジタルフォトプリンタの一例のブロック図である。
【図２】 （Ａ）は、図１に示されるデジタルフォトプリンタのキャリアの概念図を、（Ｂ）は、図１に示されるデジタルフォトプリンタのイメージセンサの概念図を、それぞれ示す。
【図３】 図１に示されるデジタルフォトプリンタの画像処理装置の一例のブロック図である。
【図４】 図３に示される画像処理装置の収差補正部の概念図である。
【図５】 図３に示される画像処理装置においてシャープネスを行なう処理手段のブロック図である。
【図６】 （Ａ）、（Ｂ）、（Ｃ）および（Ｄ）は、それぞれ本発明の画像処理装置において利用されるレンズ情報がコードとして記録されたフィルムの一例の平面図である。
【符号の説明】
１０ （デジタル）フォトプリンタ
１２ スキャナ
１４ （画像）処理装置
１６ プリンタ
１８ 操作系
１８ａ キーボード
１８ｂ マウス
２０ ディスプレイ
２２ 光源
２４ 可変絞り
２５ 画像記録媒体
２６ 記録媒体駆動装置
２８ 拡散ボックス
３０ キャリア
３２ 結像レンズユニット
３４ イメージセンサ
３６ アンプ
３８ Ａ／Ｄ変換器
４０ マスク
４２ 磁気ヘッド
４４ センサ
４６ ノッチマーク
４８ 凹凸
５０ データ処理部
５２ Ｌｏｇ変換器
５４ プレスキャン（フレーム）メモリ
５６ 本スキャン（フレーム）メモリ
５８ プレスキャン処理部
６０ 本スキャン処理部
６２ 条件設定部
６４，６８ 画像処理部
６６，７０ データ変換部
７２ 収差補正部
７２Ａ 座標変換処理部
７２Ｂ 拡大縮小処理部
７４ レンズ種判別部
７６ セットアップ部
７８ キー補正部
８０ パラメータ統合部
９０ 処理手段
９２ 第１ＬＰＦ
９４ 第１減算器
９６ 輝度算出手段
９８ 第２ＬＰＦ
１００ 第２減算器
１０２ 第１アンプ
１０４ 第２アンプ
１０６ 第１加算器
１０８ 第２加算器
Claims (5)
- 光学的に撮影された画像から赤、青及び緑の３原色の画像データを得、少なくとも鮮鋭度強調処理を施して出力画像用の画像データとする画像処理方法であって、前記画像を撮影したレンズの情報を得てレンズ種を判別して、レンズ種に応じて、前記レンズの特性に起因する歪曲収差、倍率色収差および周辺光量の少なくとも１つを補正し、補正された画像の前記鮮鋭度強調処理の強度を、レンズ種に応じて、３原色の各色毎に独立に変更する際、
３原色のうち、少なくとも赤色の画像の前記鮮鋭度強調処理の強度を、緑色の画像の前記鮮鋭度強調処理の強度よりも強くすることを特徴とする画像処理方法。 - 前記鮮鋭度強調処理の強度は、１コマの画像全体で一律に変更される、もしくは前記１コマの画像を複数の画像領域に分割し、その分割された画像領域毎に変更される請求項１に記載の画像処理方法。
- 光学的に撮影された画像から得られた赤、青及び緑の３原色の画像データに画像処理を施し、出力画像用の画像データとする画像処理装置であって、
前記画像を撮影したレンズの判別情報を取得し、そのレンズ種を判別する判別手段と、
判別したレンズ種に応じたレンズ特性を記憶する記憶手段、および、対応するレンズ種のレンズ特性を前記記憶手段から受け取り、画像の位置情報とレンズ特性とから前記レンズ特性に起因する歪曲収差、倍率色収差および周辺光量の少なくとも１つを補正する画質劣化補正手段を含み、前記画質劣化補正手段で補正した画像に、前記判別手段により判別されたレンズ種に応じて鮮鋭度強調処理を少なくとも行なう画像処理手段と、を有し、
前記画像処理手段は、前記鮮鋭度強調処理の強度を３原色の各色毎に独立に変更し、３原色のうち、少なくとも赤色の画像の前記鮮鋭度強調処理の強度を、緑色の画像の前記鮮鋭度強調処理の強度よりも強くすることを特徴とする画像処理装置。 - 前記画質劣化補正手段は、レンズ特性による倍率色収差および歪曲収差、あるいはさらに周辺光量を補正するものであり、倍率色収差に起因する３原色の基準となる色に対する他の色の画像位置のずれ量を算出し、この倍率色収差に起因するずれ量と、歪曲収差に起因する前記基準となる色の画像位置のずれ量とを用いて、歪曲収差に加え倍率色収差も補正した各画像の適正な位置を算出し、前記各画像の適正な位置から画質劣化の補正を行い、あるいは前記各画像の適正な位置を用いて画質劣化の補正および電子変倍処理を行なう請求項３に記載の画像処理装置。
- 前記画像処理手段は、前記鮮鋭度強調処理の強度を１コマの画像全体で一律に変更する、もしくは前記１コマの画像を複数の画像領域に分割し、その分割された画像領域毎に変更する請求項３または４に記載の画像処理装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP12602899A JP3998369B2 (ja) | 1998-09-16 | 1999-05-06 | 画像処理方法および画像処理装置 |
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP10-261304 | 1998-09-16 | ||
| JP26130498 | 1998-09-16 | ||
| JP12602899A JP3998369B2 (ja) | 1998-09-16 | 1999-05-06 | 画像処理方法および画像処理装置 |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2000156785A JP2000156785A (ja) | 2000-06-06 |
| JP2000156785A5 JP2000156785A5 (ja) | 2005-06-02 |
| JP3998369B2 true JP3998369B2 (ja) | 2007-10-24 |
Family
ID=26462297
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP12602899A Expired - Fee Related JP3998369B2 (ja) | 1998-09-16 | 1999-05-06 | 画像処理方法および画像処理装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3998369B2 (ja) |
Families Citing this family (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7433089B2 (en) | 2001-09-27 | 2008-10-07 | Fujifilm Corporation | Image processor |
| JP2003108998A (ja) * | 2001-09-28 | 2003-04-11 | Olympus Optical Co Ltd | 画像処理方法 |
| JP2003304492A (ja) | 2002-02-08 | 2003-10-24 | Canon Inc | 画像処理装置 |
| JP2007048112A (ja) * | 2005-08-11 | 2007-02-22 | Noritsu Koki Co Ltd | 画像処理装置および画像処理プログラム |
| JP2007148500A (ja) * | 2005-11-24 | 2007-06-14 | Olympus Corp | 画像処理装置および画像処理方法 |
| US8169516B2 (en) * | 2008-07-18 | 2012-05-01 | Ricoh Co., Ltd. | Electo-optical color imaging systems having strong lateral chromatic aberration compensated by digital image processing |
| JP5268533B2 (ja) * | 2008-09-30 | 2013-08-21 | キヤノン株式会社 | 画像処理方法、画像処理装置、撮像装置及び画像処理プログラム |
| US8477206B2 (en) | 2008-09-30 | 2013-07-02 | Canon Kabushiki Kaisha | Image processing apparatus and image processing method for performing image restoration using restoration filter |
| JP5444970B2 (ja) * | 2009-09-08 | 2014-03-19 | 株式会社ニコン | 撮像装置 |
| KR101332495B1 (ko) * | 2010-05-20 | 2013-11-26 | 엘지디스플레이 주식회사 | 영상처리방법 및 이를 이용한 표시장치 |
| JP5657375B2 (ja) | 2010-12-24 | 2015-01-21 | オリンパス株式会社 | 内視鏡装置及びプログラム |
| KR102063984B1 (ko) * | 2013-01-28 | 2020-01-08 | 엘지디스플레이 주식회사 | 결함 검사 장치 및 이의 왜곡 보정방법 |
| JP6953952B2 (ja) * | 2017-09-26 | 2021-10-27 | コニカミノルタ株式会社 | 画像処理装置、画像処理方法及び画像形成装置 |
-
1999
- 1999-05-06 JP JP12602899A patent/JP3998369B2/ja not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2000156785A (ja) | 2000-06-06 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US6603885B1 (en) | Image processing method and apparatus | |
| US6807316B2 (en) | Image processing method and image processing apparatus | |
| JP2007096509A (ja) | 画像処理装置、および画像処理方法 | |
| JP3998369B2 (ja) | 画像処理方法および画像処理装置 | |
| US7200280B2 (en) | Image processing apparatus | |
| JP3405266B2 (ja) | 画像処理方法および装置 | |
| JP3783817B2 (ja) | 画像処理方法および画像処理装置 | |
| JPH11191871A (ja) | 画像処理装置 | |
| JP3549413B2 (ja) | 画像処理方法および画像処理装置 | |
| JPH11317863A (ja) | 画像処理装置 | |
| JP3631370B2 (ja) | 画像処理方法および画像処理装置 | |
| JP2001223891A (ja) | 画像処理方法 | |
| JP2001086332A (ja) | 画像処理装置 | |
| US6891888B2 (en) | Image processing method and image processing apparatus | |
| JP3625370B2 (ja) | 画像処理方法および画像処理装置 | |
| JP2000324339A (ja) | 画像処理方法および画像処理装置 | |
| JP4204673B2 (ja) | 画像処理方法および画像処理装置 | |
| JP3576812B2 (ja) | 画像処理装置及び画像処理方法 | |
| JP4667072B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
| JP3434716B2 (ja) | 画像処理方法および画像処理装置 | |
| JP2002300390A (ja) | 画像再生方法及び画像再生装置 | |
| JP3894250B2 (ja) | 画像処理装置 | |
| JP2000057336A (ja) | 画像処理方法および装置 | |
| JP2000092309A (ja) | 画像処理方法および画像処理装置 | |
| JPH11313214A (ja) | 画像処理方法および画像処理装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20040809 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20040809 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20061026 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20061107 |
|
| A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20061206 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070109 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20070206 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070406 |
|
| A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20070518 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20070612 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070628 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20070724 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20070807 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100817 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110817 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110817 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120817 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120817 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130817 Year of fee payment: 6 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |