JP2021019314A - 画像処理装置及びその制御方法及びプログラム - Google Patents

Abstract

【課題】 ユーザが映像を撮影時に、観賞用のモニタの輝度レンジを考慮して、露出調整を行えるようにする。【解決手段】撮像部の露出を調整するための情報をユーザに提示する画像処理装置であって、初期の露出設定に基づき撮像部で撮像して得た画像データの輝度分布に基づいて、明部及び暗部の代表輝度値を検出する検出部と、目標とする表示装置の輝度レンジを表す表示ダイナミックレンジを設定する設定部と、撮像部が撮像する輝度レンジを表す入力ダイナミックレンジと、表示ダイナミックレンジとを比較する比較部と、該比較部の比較の結果に基づき、検出部で検出した明部及び暗部の代表輝度値を用いて露出の調整可能な範囲を決定し、決定した範囲での露出調整のためのユーザインタフェースを提示する処理部とを有する。【選択図】 図３

Description

本発明は、撮像する際の露出を調整するための技術に関するものである。

近年、提案されているITU-R BT.2100（非特許文献１）などのＨＤＲ（High Dynamic Range）の映像信号システムでは、高輝度部の階調を、被写体の見た目に近いコントラストで再現できる。一方で、出力モニタのピーク輝度によって、再現できる輝度階調が変わってしまう場合がある。したがって、ＨＤＲの映像信号をカメラで撮影、現像する際、撮影中の被写体が、最終的な鑑賞用のモニタで、どのように再現されるかを確認できるようにすると、ユーザの作画意図を反映させやすくなる。従来、ＨＤＲに対応した画像処理装置の露出決定方法としては、画像における代表輝度値を出力機器の入出力特性に基づいて変換した絶対輝度値に基づき、撮影時の基準露出を決定するものが提案されている（例えば特許文献１）。

特開２０１８−５６７０２号公報

Recommendation ITU-R BT.2100-2 (07/2018)

特許文献１では、撮影シーンのダイナミックレンジや、作画意図によってユーザが基準露出を変更したい場合に、どの露出範囲であれば、最終的な出力モニタの輝度再現範囲で適切に再現されるのかを把握することはできない。また、適正な露出設定値を確認するために、露出ブラケッティング撮影する場合にも、カメラ内表示デバイスの輝度レンジが、観賞用の出力モニタで再現可能な輝度レンジと異なる場合には、撮影中の表示画像からカメラ設定が適切かを確認することが困難である。

本発明は、ユーザが映像を撮影時に、観賞用のモニタの輝度レンジを考慮して、露出調整を行えるようにするための技術を提供しようとするものである。

この課題を解決するため、例えば本発明の画像処理装置は以下の構成を備える。すなわち、
撮像手段の露出を調整するための情報をユーザに提示する画像処理装置であって、
初期の露出設定に基づき前記撮像手段で撮像して得た画像データの輝度分布に基づいて、明部及び暗部の代表輝度値を検出する検出手段と、
目標とする表示装置の輝度レンジを表す表示ダイナミックレンジを設定する設定手段と、
前記撮像手段が撮像する輝度レンジを表す入力ダイナミックレンジと、前記表示ダイナミックレンジとを比較する比較手段と、
該比較手段の比較の結果に基づき、前記検出手段で検出した前記明部及び暗部の代表輝度値を用いて露出の調整可能な範囲を決定し、決定した範囲での露出調整のためのユーザインタフェースを提示する処理手段とを有する。

本発明によれば、ユーザが映像を撮影時に、観賞用のモニタの輝度レンジを考慮して、露出調整を行うことが可能になる。

実施形態の画像処理装置のブロック構成図。 実施形態の画像処理装置の処理手順を示すフローチャート。 露出調整範囲決定部の処理手順を示すフローチャート。 露出補正範囲決定部の処理内容を説明するため図。 露出補正範囲決定部の処理内容を説明するため図。 露出補正範囲決定部の処理内容を説明するため図。 露出補正のユーザインタフェースの表示例を示す図。 入力画像の輝度分布を示すヒストグラム。

以下、添付図面を参照して実施形態を詳しく説明する。尚、以下の実施形態は特許請求の範囲に係る発明を限定するものでない。実施形態には複数の特徴が記載されているが、これらの複数の特徴の全てが発明に必須のものとは限らず、また、複数の特徴は任意に組み合わせられてもよい。さらに、添付図面においては、同一若しくは同様の構成に同一の参照番号を付し、重複した説明は省略する。

［第１の実施形態］
本実施形態は、撮影画像に対して、ITU-R BT.2100などのHDR規格に対応した現像処理、映像信号のエンコードを行ってダイナミックレンジの広い画像を記録する画像処理装置に関する。したがって、本画像処理装置で撮影、現像された映像信号は、HDR規格に対応した外部モニタで再生表示することを想定している。さらに、本画像処理装置で撮影中に画像を確認するための内部表示部（背面液晶パネル、電子ビューファインダーなど）では、輝度再現範囲が前記外部モニタと異なる場合があることを想定している。

図１は実施形態における画像処理装置のブロック構成図であり、撮像装置に適用した場合の構成を示している。

図１において、光学系１０１は、ズームレンズやフォーカスレンズから構成されるレンズ群、絞り調整装置、および、シャッター装置を備えている。この光学系１０１は、撮像素子１０２に結像する被写体像の倍率やピント位置、あるいは、光量を調整する。撮像素子１０２は、ＣＣＤやＣＭＯＳセンサー等の光電変換素子で構成され、光学系１０１を通過した結像した被写体の光束を光電変換し電気信号に変換し、出力する。Ａ／Ｄ変換部１０３は、撮像素子１０２から入力した１画素当たりの映像信号を所定のbit数（例えば14bit）でデジタル画像に変換し、出力する。

画像処理部１０４は、Ａ／Ｄ変換部１０３からの出力信号に対して現像処理を行う。具体的には、画像処理部１０４は、Ａ／Ｄ変換部１０３からの信号に対し、ノイズ抑圧、デモザイク、階調変換、色補正、輪郭補償等を含む現像処理を行い、輝度信号、色信号を生成する。また、画像処理部１０４は、Ａ／Ｄ変換部１０３から出力された信号のみでなく、記録部１１０から読み出した画像データに対しても同様の画像処理を行うことができる。

入力画像解析部１０５は、入力画像の信号レベルを解析し、光学系１０１、撮像部１０２、画像処理部１０４の制御パラメータを制御するための評価値を生成する。

想定輝度再現範囲決定部１０６は、本画像処理装置で記録されたHDR対応の映像信号を、ユーザの目標として外部モニタで表示したときに再現可能な輝度範囲を決定する。

露出調整範囲決定部１０７は、想定輝度再現範囲決定部１０６の決定結果と、入力画像解析部１０５からの解析結果の評価値に基づいて、撮影中のシーンに対して露出調整可能な範囲を決定する。

表示処理部１０９は、画像処理部１０４から出力される映像信号を液晶パネルなどの表示用部材に逐次表示することにより、電子ビューファインダ（ＥＶＦ）として機能する。記録処理部１０８は、画像処理部１０４から出力される映像信号を記録する機能を有し、たとえば、半導体メモリが搭載されたメモリカードなどの情報記録媒体を含んでもよい。ユーザ指示部１１０は、タッチパネル、ボタンを含み、ユーザが露出設定や現像設定などの画像処理装置の処理内容を指定するためのユーザインタフェースである。

システム制御部１１１は、ＣＰＵ、当該ＣＰＵが実行するプログラムを格納したＲＯＭ、及び、ＣＰＵのワークエリアとして機能するＲＡＭで構成される。そして、このシステム制御部１１１は、実施形態の画像処理装置の各処理部と接続し、画像信号および、制御信号を介して、画像処理装置全体の動作を制御する。

次に、図２のフローチャートを参照して、本実施形態の画像処理装置の処理フローを説明する。

Ｓ１００にて、システム制御部１１１は、画像処理装置の入力ダイナミックレンジを決定する。

ここで、入力ダイナミックレンジは、撮像素子１０２で取得し、再現できる被写体の輝度レンジを示す。入力ダイナミックレンジの下限値Cmin（nitsまたはcd/m²）は、撮像素子１０２に光が入っていない状態に相当し、ダイナミックレンジの設定によらず常にCmin=0となる。入力ダイナミックレンジの上限値Cmax（nitsまたはcd/m²）は、撮像素子が飽和する被写体輝度に相当する。また、本実施形態では、反射率100%の被写体の輝度が100nitsである想定で撮像を行うものとする。例えば、３段階のダイナミックレンジ設定があり、それぞれ、撮像素子が飽和する被写体輝度のレベルが、Cmax=｛200nits、400nits、800nits｝のいずれかであるとする。

入力ダイナミックレンジは、ユーザが、撮影したいシーンのダイナミックレンジに応じて設定するか、入力画像解析部１０５の解析結果に基づき、画像処理装置が自動的に設定するものとする。入力ダイナミックレンジが設定されると、システム制御部１１１は、入力ダイナミックレンジに応じた飽和レベルで撮像素子１０２が飽和するよう、光学系１０１の絞り、シャッタースピード、撮像素子１０２のＩＳＯ感度の設定を行う。

Ｓ１０１にて、システム制御部１１１は、ユーザの指示に基づき、想定輝度再現範囲決定部１０５を制御し、想定輝度再現範囲を設定させる。

具体的には、最終的にユーザが想定する鑑賞用の出力モニタの表示ダイナミックレンジの最大輝度値Dmax（nitsまたはcd/m²）と最小輝度値Dmin（nitsまたはcd/m²）、前記出力モニタが対応するHDR信号のエンコード方式（PQ(Perceptual Quantization)、HLG(Hybrid Log-Gamma)など）を設定する。

なお、ここで言う最大輝度値Dmax,最小輝度値Dmin、並びに、エンコード方式は、ユーザがユーザ指示部１１０を操作して設定するものとする。ただし、システム制御部１１１が有するＲＯＭ等の記憶装置に、各種モニタを特定するための情報（例えばメーカ名、モデル名）と、そのモニタの最大輝度値Dmax、最小輝度値Dmin、（場合によっては更にエンコード方式）が予めテーブルとして記憶してき、ユーザがその中の１つをユーザ指示部１１０から選択するようにしても良い。また、図示しない通信部を介して、ネットワークからその情報を取得するようにしても良い。また、ユーザが最終出力モニタを設定しない場合には、システム制御部１１１が初期値を設定するものとする。一例としては、最大輝度Dmax=600nits、最小輝度Dmin=0nits、HDR信号のエンコード方式がPQという情報が、想定輝度再現範囲設定部で設定されるものとする。

Ｓ１０２にて、システム制御部１１１は光学系１０１、撮像素子１０２を制御し、撮影を開始することで、画像の取り込みを開始する。

Ｓ１０３にて、システム制御部１１１は入力画像解析部１０５を制御し、A/D変換部１０３から出力される画像の信号レベルを解析し、以下の手順で撮影シーンのダイナミックレンジを算出させる。

まず、入力画像解析部１０５は、入力される画像を複数のブロック領域に分割し、各ブロックの平均輝度値を算出する。そして、入力画像解析部１０５は、算出した平均輝度値に基づく、図８に示すような輝度ヒストグラムを作成する。次に、入力画像解析部１０５は、作成した輝度ヒストグラムを参照し、撮影シーンの明部の代表輝度値Smax（nitsまたはcd/m²）、撮影シーンの暗部の代表輝度値Smin（nitsまたはcd/m²）を求め、これらSmaxとSminの差分を撮影シーンのダイナミックレンジに設定する。また、Smaxは、輝度ヒストグラムにおいて、上位の輝度領域LHの平均輝度値、Sminは、輝度ヒストグラムにおいて、下位の輝度領域LLの平均輝度値とする。LH、LLは、あらかじめ所定の範囲を設定するものとする。具体的には、輝度ヒストグラムが示す分布の上位10%の平均輝度値をLH、下位10%の平均輝度値をLLとする。なお、ここで示した10％という数値はあくまで例示であると理解されたい。ユーザがユーザ指示部１１０から適宜設定もしくは選択するようにしても良いからである。

上記では、撮影シーンから代表輝度Smin,Smaxを検出するものとしたが、撮影シーン中のユーザが望む領域（例えば人物の顔等）を設定し、その設定した領域内の画像から求めるようにしても良い。

Ｓ１０４にて、システム制御部１１１は露出調整範囲決定部１０７を制御し、想定輝度再現範囲決定部１０６と、入力画像解析部１０５の出力を参照し、撮影中のシーンにおいて、露出調整可能な範囲を決定させる。そして、その範囲内での露出調整を行って、撮像処理を行う。

Ｓ１０５にて、システム制御部１１１は、画像処理部１０４を制御し、Ａ／Ｄ変換部１０３の出力信号に対して現像処理を行わせる。

Ｓ１０６にて、システム制御部１１１は表示処理部１０９、記録処理部１０８を制御し、画像処理部１０４の出力信号を受けての表示や記録に係る処理を行わせる。表示処理部１０９は、撮影時の撮像装置の光学系、撮像素子、現像の設定値や、画像の特徴を示すヒストグラムなどの付帯情報を、現像処理部１０４の出力画像と対応づけて表示する。記録処理部１０８は、現像処理部１０４の出力画像を、撮影中の付帯情報と対応づけて記録する。

ここで、表示処理部１０９で表示可能な最大の輝度は、本画像処理装置で撮影、現像された映像信号を生成する外部モニタの最大輝度よりも低い場合がある。

これは、外部モニタと表示処理部１０９のデバイスが異なることに加えて、電力消費を抑えるため、撮像動作中は、表示処理部１０９での表示輝度を下げるような制御を行うことに起因している。このような条件下では、撮像中に、表示処理部１０９に表示される現像結果の画像を視認しながら、ユーザが露出設定の可否を判断することが困難となる。したがって、本実施形態では、露出調整範囲決定部１０７において、最終出力モニタの輝度表示性能とHDR信号のエンコード方式を考慮し、撮影時に設定された基準の露出に対してユーザが露出設定を変更できる範囲を算出し、表示するための情報を決定する。

次に、図３のフローチャートと、図４、図５、図６の模式図を参照して、本実施形態の特徴である、システム制御部１１１の制御下の露出調整範囲決定部１０７の処理内容について説明する。

尚、図４、図５、図６は、入力ダイナミックレンジ、想定輝度再現範囲、撮影シーンの輝度分布情報の大小関係の一例を示す模式図である。

図３において、Ｓ２００，Ｓ２０１、Ｓ２０２にて、露出調整範囲決定部１０７は、画像処理装置の入力ダイナミックレンジCmin,Cmax、最終出力モニタの想定輝度再現範囲Dmin、Dmax、HDR信号のエンコード方式、撮影シーンの輝度分布情報Smin,Smax,を入力する。

Ｓ２０３にて、露出調整範囲決定部１０７は、入力画像の輝度解析結果を参照し、露出調整のための基準レベルSave（nitsまたはcd/m2）を決定する。露出調整のための基準値は、入力画像の中央の所定領域の平均輝度値としてもよいし、ユーザが選択した画像中の矩形領域内の平均輝度値としてもよい。

Ｓ２０４〜Ｓ２０９にて、露出調整範囲決定部１０７は、想定輝度再現範囲、入力ダイナミックレンジ、HDR信号のエンコード方式、撮影シーンの輝度分布情報に基づき、露出調整範囲を決定する。

まず、Ｓ２０４にて、露出調整範囲決定部１０７は、想定輝度再現範囲と入力ダイナミックレンジを比較し、想定輝度再現範囲が、入力ダイナミックレンジ以上である場合には処理をＳ２０５に進める。また、想定輝度再現範囲が、入力ダイナミックレンジ未満である場合、露出調整範囲決定部１０７は処理をＳ２０６に進める。

Ｓ２０５にて、露出調整範囲決定部１０７は、撮影シーンの輝度分布が入力ダイナミックレンジを超えないよう、式（１）、（２）によって、露出調整量ΔEV＋、ΔEV-を算出する。

ここで、ΔEV+は、Ｓ２０３で決定した露出調整の基準レベルSaveに対して、露出をプラス補正できる上限の補正量(nitsまたはcd/m²)を示す。また、ΔEV-は、Ｓ２０３で決定した露出調整の基準レベルSaveに対して、露出をマイナス補正できる下限の補正量(nitsまたはcd/m²)を示す。

図４の模式図に示すように、撮影シーンの暗部の代表輝度値Sminと、撮像素子１０２が出力可能な最小の輝度レベルCminとの差分が、ΔEV-となる。また、撮影シーンの明部の代表輝度値Smaxと撮像素子１０２で出力可能な最大の輝度レベルCmaxの差分が、ΔEV＋となる
ΔEV- = Smin - Cmin …（１）
ΔEV+ = Cmax - Smax …（２）

Ｓ２０６，Ｓ２０８にて、露出調整範囲決定部１０７は、HDR信号のエンコード方式に応じて、露出調整範囲の設定方法を切り替える。

露出調整範囲決定部１０７は、HDR信号のエンコード方式がPQ方式の場合はＳ２０７、HDR信号のエンコード方式がHLGの場合にはＳ２０９、そして、その以外の場合はＳ２０５に処理を分岐させる。

HDR信号のエンコード方式で、PQ方式とは、非特許文献１（p.5 TABEL4 Reference PQ OETF）に記載の方式であり、HLG方式とは、非特許文献１（p.6 TABLE5 HLG Reference OETF）に記載のエンコード方式である。また、その他の方式としては、一例として、ログ形式のエンコード方式を想定しているが、それ以外のエンコード方式でも構わない。

Ｓ２０７にて、露出調整範囲決定部１０７は、HDR信号のエンコード方式がPQの場合の露出調整範囲を決定する。

PQ方式は、シーンの明るさをモニタ表示の絶対輝度に対応づけてエンコードするため、画像処理装置において、撮影シーンの輝度分布が出力モニタの輝度範囲内に収まるように撮影、現像されていれば、モニタ表示時に正しく再現できる。

したがって、撮影シーンの輝度分布が想定輝度再現範囲を超えないよう、式（３）、（４）で露出調整量の上限値ΔEV＋、下限値ΔEV-を決定する。

ΔEV+は、Ｓ２０３で決定した露出調整の基準レベルSaveに対して、露出をプラス補正できる上限の補正量(nitsまたはcd/m²)を示す。また、ΔEV-は、Ｓ２０３で決定した露出調整の基準レベルSaveに対して、露出をマイナス補正できる下限の補正量(nitsまたはcd/m2)を示す。
ΔEV- = Smin - Dmin …（３）
ΔEV+ = Dmax - Smax …（４）

図５の模式図に示すように、撮影シーンの暗部の代表輝度値Sminと、観賞用の出力モニタで再現可能な最小の輝度レベルDminとの差分がΔEV-となる。また、撮影シーンの明部の代表輝度値Smaxと、観賞用の出力モニタで再現可能な最大の輝度レベルDmaxの差分がΔEV＋となる
Ｓ２０９，Ｓ２１０にて、露出調整範囲決定部１０７は、HDR信号のエンコード方式がHLGの場合の露出調整範囲を決定する。

HLG方式は、シーンの明るさの最大輝度をモニタ表示の最大輝度に相対的に対応づけたエンコードを行う。したがって、画像処理装置の入力ダイナミックレンジに対して、鑑賞用の出力モニタの上限の輝度値が低い場合に、暗部から中間の輝度域にある被写体が暗くなってしまう場合がある。

そのため、Ｓ２０９にて、露出調整範囲決定部１０７は、入力ダイナミックレンジと想定輝度再現範囲の差分に応じた所定のゲインｋ(ΔL)をかけて、撮影シーンの輝度値を補正する。

図６において、撮影シーンの暗部の代表輝度値Smin、明部の代表輝度値Smax、基準露出Saveをそれぞれ露出補正したものが、Smin'、Smax'、Save'となる。

ΔLは、入力ダイナミックレンジの上限値（撮像部で出力可能な最大の輝度レベルCmax）と観賞用の出力モニタで再現可能な最大の輝度レベルDmaxを用いて、式（５）に従って求める。補正ゲインｋは、あらかじめ定められた係数αを用いて、式（６）に従って求める。
ΔL = Dmax - Cmax …（５）
ｋ = ΔL^α …（６）

HLG方式の場合も、画像処理装置において、露出補正後の撮影シーンの輝度分布が出力モニタの輝度範囲内に収まるように撮影、現像されていれば、モニタ表示時に正しく再現できる。

したがって、Ｓ２１０にて、露出調整範囲決定部１０７は、露出補正後の撮影シーンの輝度分布情報Smin’、Smax’が想定輝度再現範囲を超えないよう、式（７）、（８）で露出調整量の上限値ΔEV＋、下限値ΔEV-を決定する。

ΔEV+は、Ｓ２０９で決定した露出調整の基準レベルSave’に対して、露出をプラス補正できる上限の補正量(nitsまたはcd/m²)を示す。ΔEV-は、Ｓ２０９で決定した露出調整の基準レベルSave’に対して、露出をマイナス補正できる下限の補正量(nitsまたはcd/m²)を示す。
ΔEV- = Smin'- Dmin' …（７）
ΔEV+ = Dmax - Smax' …（８）

図６の模式図に示すように、基準露出補正後の撮影シーンの暗部の代表輝度値Smin’と、観賞用の出力モニタで再現可能な最小の輝度レベルDminとの差分がΔEV-となる。また、基準露出補正後の撮影シーンの明部の代表輝度値Smax’と、観賞用の出力モニタで再現可能な最大の輝度レベルDmaxの差分がΔEV＋となる
以上で、露出補正量決定部１０７での処理を終了する。

システム制御部１１１は、露出調整範囲決定部１０７で算出された、露出調整範囲にかかかるユーザインタフェースもしくは情報を、表示処理部１０９を介して、現像結果とともに提示する。ここで表示処理部１０９により提示されたユーザインタフェースの表示の一例を図７に示す。

図７において、参照符号７５０は表示処理部１０９により表示される画面を示している。参照符号７５１は、撮像画像した入力画像を示している。矩形領域７００は、入力画像において露出調整を行う際の基準被写体領域を示しており、画像表示画面の下部に、基準露出レベルと、露出調整可能な範囲を示すスライダーのアイコンが描画される。

参照符号７０１は、矩形領域７００の平均輝度値を示している。参照符号７０２は、撮影シーンの輝度分布の幅を示すバー、参照符号７０３（両端矢印の範囲）は、露出調整範囲決定部で算出された、最終出力モニタで再現可能な露出調整範囲（ΔＥＶ−〜ΔＥＶ＋）を示す。この露出調整範囲７０３は、前述したように最終出力モニタの再現範囲を考慮して決定されたものであり、画像処理装置がその仕様上調整できる露出量の幅とは異なる範囲である。

ユーザが露出を調整する操作を行うと、輝度分布幅のバー７０２が左右に動き、ユーザの露出調整の目安となる。バー７０２は露出調整範囲７０３の範囲でのみ移動可能である。

なお、本実施形態では、バー７０２は、露出調整範囲７０３の範囲でのみ調整できるが、その幅を超えて調整できるようにしてもよい。一部の領域で白飛びや黒つぶれが生じたとしても、所望の露出に設定したい場合があるからである。このとき、例えばバー７０２および露出調整範囲７０３を示す表示に加えて、画像処理装置の仕様上調整可能な露出範囲（例えば−３段〜＋３段）を表示してもよい。つまり、図７の画面では、現在の露出設定が最終出力モニタで再現可能かをユーザに認識させることができればよい。

前述したように、露出調整範囲７０３は、図３〜図６を用いて説明した処理の結果に基づき異なるものとなる。つまり、同じシーンを同じ入力ダイナミックレンジで撮影する場合であっても、最終出力モニタが異なる場合は、露出調整範囲７０３は異なる範囲となる場合がある。

また、露出調整範囲決定部１０７での処理は、撮像部１０２において、撮像動作が更新されるごとに実施するが、表示処理部１０９での露出調整範囲の表示は、想定輝度再現範囲決定部１０６の設定が更新された場合か、撮影シーンの輝度分布が大きく変化した場合、もしくは、所定のフレーム間隔で更新するものとする。

上記構成において、ユーザがバー７０２を操作すると、その操作に応じて撮像に係る露出が決定される。そのうえで、ユーザが撮像に係る操作を行うことで、ユーザが望むモニタにて高い階調性が再現できる画像を得ることできることになる。

以上説明したように、本実施形態によれば、HDR規格に対応した映像信号を生成する際に、最終出力モニタの想定輝度再現範囲と、入力画像の信号レベルとに基づいて、ユーザが露出調整範囲を把握し、露出調整を行うことができる。

（その他の実施例）
上記実施形態ではHDR規格に対応した映像信号について説明したが、必ずしもHDR規格に限定されない。本発明は、撮像により得られる映像のダイナミックレンジと最終的な表示デバイスが対応するダイナミックレンジに差がある場合に適用することができる。

本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

発明は上記実施形態に制限されるものではなく、発明の精神及び範囲から離脱することなく、様々な変更及び変形が可能である。従って、発明の範囲を公にするために請求項を添付する。

１０１…光学系、１０２…撮像部、１０３…Ａ／Ｄ変換部、１０４…画像処理部、１０５…入力画像解析部、１０６…想定輝度再現範囲決定部、１０７…露出調整範囲決定部、１０８…記録処理部、１０９…表示処理部、１１０…ユーザ指示部、１１１…システム制御部

Claims (9)

1. 撮像手段の露出を調整するための情報をユーザに提示する画像処理装置であって、
   初期の露出設定に基づき前記撮像手段で撮像して得た画像データの輝度分布に基づいて、明部及び暗部の代表輝度値を検出する検出手段と、
   目標とする表示装置の輝度レンジを表す表示ダイナミックレンジを設定する設定手段と、
   前記撮像手段が撮像する輝度レンジを表す入力ダイナミックレンジと、前記表示ダイナミックレンジとを比較する比較手段と、
   該比較手段の比較の結果に基づき、前記検出手段で検出した前記明部及び暗部の代表輝度値を用いて露出の調整可能な範囲を決定し、決定した範囲での露出調整のためのユーザインタフェースを提示する処理手段と
   を有することを特徴とする画像処理装置。
2. 前記処理手段は、
   前記比較手段の比較の結果が、前記表示ダイナミックレンジが前記入力ダイナミックレンジと同じ、もしくは、より広いことを示す場合、前記入力ダイナミックレンジが示す範囲を、露出の調整可能な範囲として決定する
   ことを特徴とする請求項１に記載の画像処理装置。
3. 更に、エンコード方式としてPQ(Perceptual Quantization)、HLG(Hybrid Log-Gamma)のいずれを用いるかを設定する設定手段を有することを特徴とする請求項１又は２に記載の画像処理装置。
4. 前記処理手段は、
   前記比較手段の比較の結果が、前記表示ダイナミックレンジが前記入力ダイナミックレンジより狭いことを示す場合であって、前記PQをエンコード方式として設定されている場合には、前記表示ダイナミックレンジが示す範囲を、露出の調整可能な範囲として決定する
   ことを特徴とする請求項３に記載の画像処理装置。
5. 前記処理手段は、
   前記比較手段の比較の結果が、前記表示ダイナミックレンジが前記入力ダイナミックレンジより狭いことを示す場合であって、前記HLGをエンコード方式として設定されている場合には、前記検出手段で検出した前記明部及び暗部の代表輝度値を補正し、当該補正後の代表輝度値と、前記表示ダイナミックレンジが示す範囲から、露出の調整可能な範囲を決定する
   ことを特徴とする請求項３または４に記載の画像処理装置。
6. 更に、前記露出の調整可能な範囲において調整した露出に基づいて撮像した画像を現像処理し、記録する手段を有することを特徴とする請求項１乃至５のいずれか１項に記載の画像処理装置。
7. 前記検出手段は、前記撮像手段で得た画像において、ユーザが設定した領域内の画像から前記明部及び暗部の代表輝度値を検出することを特徴とする請求項１乃至６のいずれか１項に記載の画像処理装置。
8. 撮像手段の露出を調整するための情報をユーザに提示する画像処理装置の制御方法であって、
   初期の露出設定に基づき前記撮像手段で撮像して得た画像データの輝度分布に基づいて、明部及び暗部の代表輝度値を検出する検出工程と、
   目標とする表示装置の輝度レンジを表す表示ダイナミックレンジを設定する設定工程と、
   前記撮像手段が撮像する輝度レンジを表す入力ダイナミックレンジと、前記表示ダイナミックレンジとを比較する比較工程と、
   該比較工程の比較の結果に基づき、前記検出工程で検出した前記明部及び暗部の代表輝度値を用いて露出の調整可能な範囲を決定し、決定した範囲での露出調整のためのユーザインタフェースを提示する処理工程と
   を有することを特徴とする画像処理装置の制御方法。
9. コンピュータが読み込み実行することで、前記コンピュータに、請求項８に記載の方法の各工程を実行させるためのプログラム。

Images