JP2018006912A - 撮像装置、画像処理装置及びそれらの制御方法、プログラム - Google Patents
撮像装置、画像処理装置及びそれらの制御方法、プログラム Download PDFInfo
- Publication number
- JP2018006912A JP2018006912A JP2016129132A JP2016129132A JP2018006912A JP 2018006912 A JP2018006912 A JP 2018006912A JP 2016129132 A JP2016129132 A JP 2016129132A JP 2016129132 A JP2016129132 A JP 2016129132A JP 2018006912 A JP2018006912 A JP 2018006912A
- Authority
- JP
- Japan
- Prior art keywords
- image
- shooting
- setting
- candidate
- scene
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 51
- 238000012545 processing Methods 0.000 title claims description 109
- 238000000034 method Methods 0.000 title claims description 60
- 230000000694 effects Effects 0.000 claims abstract description 37
- 238000009826 distribution Methods 0.000 claims description 14
- 238000012937 correction Methods 0.000 description 57
- 238000001514 detection method Methods 0.000 description 39
- 238000006243 chemical reaction Methods 0.000 description 35
- 230000008569 process Effects 0.000 description 30
- 238000004458 analytical method Methods 0.000 description 25
- 238000010586 diagram Methods 0.000 description 25
- 230000006870 function Effects 0.000 description 10
- 238000005375 photometry Methods 0.000 description 9
- 239000011159 matrix material Substances 0.000 description 8
- 230000035945 sensitivity Effects 0.000 description 8
- 230000015572 biosynthetic process Effects 0.000 description 7
- 238000003702 image correction Methods 0.000 description 7
- 238000003786 synthesis reaction Methods 0.000 description 7
- 238000004364 calculation method Methods 0.000 description 6
- 230000008859 change Effects 0.000 description 5
- 230000006978 adaptation Effects 0.000 description 3
- 238000011156 evaluation Methods 0.000 description 3
- 238000000605 extraction Methods 0.000 description 3
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 description 3
- 238000003825 pressing Methods 0.000 description 3
- 230000003044 adaptive effect Effects 0.000 description 2
- 239000002131 composite material Substances 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 238000012850 discrimination method Methods 0.000 description 2
- 210000000887 face Anatomy 0.000 description 2
- 230000007935 neutral effect Effects 0.000 description 2
- 238000004091 panning Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 241000238370 Sepia Species 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000006837 decompression Effects 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000003908 quality control method Methods 0.000 description 1
- 238000002310 reflectometry Methods 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 238000003860 storage Methods 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 239000013598 vector Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/22—Matching criteria, e.g. proximity measures
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
- H04N23/12—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with one sensor only
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/62—Control of parameters via user interfaces
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
- H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04842—Selection of displayed objects or displayed text elements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/61—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"
- H04N25/615—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4" involving a transfer function modelling the optical system, e.g. optical transfer function [OTF], phase transfer function [PhTF] or modulation transfer function [MTF]
- H04N25/6153—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4" involving a transfer function modelling the optical system, e.g. optical transfer function [OTF], phase transfer function [PhTF] or modulation transfer function [MTF] for colour signals
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Oral & Maxillofacial Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Bioinformatics & Computational Biology (AREA)
- Artificial Intelligence (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- General Engineering & Computer Science (AREA)
- Studio Devices (AREA)
- Exposure Control For Cameras (AREA)
Abstract
【解決手段】第1の撮影設定に基づいて、第1の画像を撮像する撮像部と、第1の撮影設定と第1の画像の特徴量とに基づいて、被写体のシーンを判別するシーン判別部と、シーン判別部による判別の結果に基づいて、撮影設定の候補を生成する候補生成部と、候補生成部によって生成された撮影設定の候補に基づいて、撮影設定の候補により得られる効果を反映した画像を生成する画像生成部と、画像生成部によって生成された画像を表示する表示部と、を備え、候補生成部は、シーン判別部による判別の結果に基づいて撮影設定のうちの所定のパラメータが閾値以上離れた複数の撮影設定の候補を生成する第1の動作と、シーン判別部による判別の結果に基づいて少なくとも1つの撮影設定の候補を生成する第2の動作の少なくともいずれかを行い、表示部は、第1の動作により生成された撮影設定の候補を優先的に表示する。
【選択図】 図5
Description
また、シーンオート機能を搭載したカメラでは、カメラがシーンに応じた最適な状態を設定するため、どのようなカメラ設定を行った結果最終的な画像を得られたのかを理解することが難しく、ユーザがカメラの機能を覚えることが難しいという問題があった。そして、これは撮影時だけでなく、撮影済みの画像を編集しようとする場合にも、同様の問題が生じていた。
R’=R×WB_R
B’=B×WB_B
G2’=G1×WB_G1
ここで、R’,G1’,G2’,B’の値が同じ値になると、ホワイトバランスが適切に設定されたことになる。
Cy={R + B−(G1+G2)}/Y×1024
Y=(R+G1+G2+B)/4
ここで、Cx,Cyの値はWB係数(WB_R,WB_G1,WB_G2,WB_B)から算出可能であり、逆にCx,Cyから、WB係数の平均値を1024と仮定することで、WB係数を算出できる。またCx,Cyの値を用いて、それぞれのCx,Cyに対するWB補正値をΔCx,ΔCyとし、WB補正設定値(A−B)をα、WB補正設定値(G−Mg)をβとすると、以下のようにCx,Cyの値を補正することで、WB補正を行うことができる。
Cy’=Cy+β×ΔCy
本実施形態においては、α、βは±9段階まで設定可能として説明する。
V’=(1+鮮やかさの設定値×ΔGain)×V
ここでΔGainは、鮮やかさの設定に応じた彩度の強調量を制御するパラメータであり、例えばΔGainを0.1として、設定値を−4〜+4まで変更可能とすると、標準の彩度設定に対して0.6倍〜1.4倍の鮮やかさの設定を行うことが可能となる。
ここでγ(x)は、図2Bに示される輝度階調変換回路143で設定される標準の階調変換特性を示し、γ-1(x)は、γ(x)の逆変換特性を示す。
ContCorrect(x)=γi(γ0-1(x))
コントラスト設定値i=−4〜+4
ここでは、γi()は、図2Bに示される輝度階調変換回路143で設定される、コントラスト補正が設定された場合の階調変換特性を示し、添え字のiは設定値を示している。iの値については、0が標準を示し、+方向がコントラストを強める変換を示し、−方向がコントラストを弱める変換を示す。
GainR=WB_G_補正後/WB_G_AWB
GainR=WB_B_補正後/WB_B_AWB
WBCorrectR(x)=cγ(cγ-1(x)×GainR)
WBCorrectG(x)=cγ(cγ-1(x)×GainG)
WBCorrectB(x)=cγ(cγ-1(x)×GainB)
ここでcγ()は、図2Bに示される色階調変換回路145で用いられる階調特性を示しており、色用のガンマカーブである。本実施形態ではWB係数比率は0.1刻みのカーブを図示しているが、0.1以下のゲインは線形補間を用いて階調変換特性を決定してもよい。
と表現でき、合成された演算マトリクスQを3×3マトリクス回路163に設定することで色の補正を行うことが可能となる。もちろん彩度強調、色相角度変換だけでなく、各種風景やポートレイトの色再現用の変換式も3x3マトリクスで表現することは可能であり、前述したマトリクスQに合成することで、画像変換処理を行うことができる。
色相 H=tan-1(V/U)
彩度 S=√(U2+V2)
ブロックごとのYHSのデータが面内色分布データとなる。
(i:ブロック位置)
ブロック輝度値に、ブロック毎の主要被写体の重みや中央重点の重みAE_Weightが乗算されて輝度値Y_Aveが算出される。
算出された輝度値がAE目標値(AE_Target)になるように、測光値との露出段差DeltaBvを計算する。
算出された露出段差を測光時の露出値に加算することで、被写体輝度を算出する。
上記露出計算に使用するApex値は定義により算出可能である。
Tv: Tv=log2(1/T) T:シャッター速度
Sv: Sv=log2(S×0.32) S:ISO感度値
適正露出の時には、下記の式が成り立つ。
算出された被写体輝度値から、あらかじめ設定されたプログラム線図に基づいて絞り値、シャッター速度、感度を算出する。
(iはブロック位置を示す)
被写体距離は、AF(オートフォーカス)の結果から算出される。オートフォーカスの方式には、コントラスト検出方式と位相差検出方式がある。位相差検出方式の中には、撮像面内に位相差を検出する画素が配置された撮像素子を用いて、画面全体にわたり被写体距離を算出できる方式もある。
ポートレイト判定では、図1の顔検出回路120の検出結果から、顔が画面の中心付近で一定以上の大きさであり、且つ顔の数が2人以下である場合にポートレイトシーンと判定する。より具体的には、顔の位置、顔の大きさ、顔検出信頼度、人数などに基づいてポートレイト度の値を算出し、所定の値以上の場合、ポートレイトシーンであると判定する。
顔位置重み:中央→100%、像高8割以上→0%
顔大きさ重み:画角20%以上→100%、画角5%未満→0%
顔信頼度:0%〜100%
人数重み:1人→100%、2人→50%、3人→30%、4人以上→0%
ここで顔位置重みを決定する場合、例えば検出した複数の顔の全てに対して、顔の中心位置と大きさから重要度を算出し、顔の重要度が最も高い顔を主顔、それ以外の顔を副顔として、顔位置重みを決定する。
主被写体の動き量に応じて、所定値以上の動きがあった場合に、動き被写体として判定してもよい。また動き量とフレーム間のデータ取得時間との関係から、被写体ぶれを起こさない、最適なシャッター速度の算出を行うことが可能である。
風景判定は、図6のS203において測光を行って得られた被写体輝度と、画面内色分布取得回路132のデータを用いて行う。判定条件としては、例えば所定の被写体輝度値以上であること、及び面内色味判定によって得られた緑ブロック、青ブロックの数を用いる。
マクロ判定は、AFから算出される主要被写体の距離を用いて行う。撮影レンズ102の焦点距離に対して、被写体距離が所定の割合未満の場合、例えば被写体距離が焦点距離の20倍未満の場合に、マクロ撮影と判定する。それ以上の距離の場合は距離情報に応じて、例えば焦点距離の40倍までの間の場合にマクロ判定度を0として、マクロ判別度を算出する。焦点距離の倍率は、撮影レンズ102の絞り値に応じて変更してもよい。
撮影シーンに対してダイナミックレンジの計算を行う。本実施形態においては、コントラストデータから、所定輝度以上の画素数をカウントし、その数が所定数以上の場合に、明部側のダイナミックレンジが不足していると判断する。逆に所定輝度値以下の画素数をカウントして、その数が所定数以上の場合に暗部側のダイナミックレンジが不足していると判断する。また、カウントされた画素数に応じて、オーバー側、アンダー側のダイナミックレンジの不足量を推定してもよい。
逆光判定では、画像中心部分または主被写体検出部分のブロックBv値の平均値と、画像周辺部分のブロックBv値の平均値の差分を算出し、背景の方が所定以上明るい場合に逆光と判断する。また、逆光度の判定を行う場合には、上記の差分が、たとえば2段未満の場合には逆光度0%とし、4段以上ある場合に逆光度100%として判定を行うことが可能である。
明るさ判定は、被写体輝度を用いて行う。所定の被写体輝度以上、例えば、Bv=5以上の場合に屋外と判定し、Bv=5未満の場合に、屋内と判定することが可能である。被写体輝度以外にも面内の色分布を見て、緑、青といった被写体が多い場合には、屋外判定の度合いを強めるなどの判定を行ってもよい。例えば、図15のように、青・緑ブロック数に応じてBv上限以上で屋外度100%、Bv下限以下で0%とし、中間Bvの場合には線形補間を行い、屋外度を算出する。
青空判定は、Bv値および面内色情報を用いて行う。例えば、
条件1:Bv7以上、青色ブロック40%以上
条件2:Bv5以上、青色ブロック20%以上、白色ブロック30%以上
のどちらかの条件を満たす場合に青空と判定する。また、条件1、条件2で検出されるブロック数の割合によって青空度を算出する。
夜景判定では、Bv値が0以下であり、且つヒストグラムのコントラスト値が所定の値以上の場合に夜景と判定する。Bv値が低く、コントラスト値が高いほど値が大きくなるように夜景度を算出する。
夕景判定は、Bv値および面内色情報を用いて行う。
条件1:Bv2以上5以下、オレンジブロック40%以上、青色ブロック20%以上、コントラスト値30以上
条件2:Bv5以上10以下、オレンジブロック20%以上、青色ブロック40%以上、コントラスト値30以上
のどちらかの条件を満たす場合に、夕景と判定する。オレンジブロックの数に応じて夕景度を算出することも可能である。
スポットライト判定では、画像中心部分または主被写体検出部分のブロックBv値の平均値と、画像周辺部分のブロックBv値の平均値の差分を算出し、例えば4段以上周辺輝度値が低い場合にスポットライトがあると判定する。また、上記の差分の大きさに応じてスポットライト度を算出してもよい。
背景距離の算出は、既に説明した画面内距離マップを用いて行う。ブロックごとに被写体距離のヒストグラムを生成し、主要被写体距離に対して、例えば深度換算で5深度以上離れている領域のうち、最も出現頻度が高い領域の距離を背景被写体距離としてもよい。あるいは、所定の数以上のブロックを有するブロックのうち最も離れた距離にある領域を背景距離としてもよい。背景距離から所定の距離以内の領域のブロックを背景領域として設定することで、主被写体領域と背景領域の設定および被写体距離の算出が可能となる。
色シーン判定では、黄色、青色、赤色、緑色の色シーン判別度を算出する。色シーン判別度は、前述したブロック積分値から算出された色相、彩度から所定の条件を満たす面内ブロック数を抽出し、その数に基づいて算出する。
条件1:白色ブロックが10%以上
条件2:明るいと判定されている
条件3:黒ブロックが10%以下であり、白色ブロックが60%以下である
を満たす場合にハイキー撮影と判定する。ハイキー判別度は、白色ブロックの割合を用いて決定する。白色ブロックが10%でハイキー度30%、白色ブロックが30%でハイキー度を70%と判定する。ハイキー判定がなされた場合には、露出設定を+6、彩度を−3、コントラストを−2に設定する。
条件1:白色ブロックが10%以上30%以下である
条件2:黒ブロックが10%以上30%以下である
条件3:コントラスト(画像の輝度標準偏差)が50以上である
を満たす場合にローキー撮影と判定する。ローキー判別度は、上記判定を満たす場合に、50%と設定する。ローキー判定がなされた場合には、露出設定を−6、彩度を+3、コントラストを+2に設定する。
条件1:白色ブロックが10%以上30%以下である
条件2:白ブロックと黒ブロック以外のブロックが画面の50%を有する
条件3:コントラスト(画像の輝度標準偏差)が50以上である
を満たす場合にモノクロ撮影と判定する。モノクロ判別度は、上記判定を満たす場合に、40%と設定する。
同様にして、Bv6以上で黄色ブロックが20%以上の場合、シーン判別度を40%に決定する。その場合の設定は、露出を+3、コントラストを+3、彩度を+2、色合い設定を太陽、色合い補正(A−B)を+9とする。このように設定することで、アンバーにかぶらせて、朝の光に包まれているイメージを持った画像が撮影できる。
さらに、3つの撮影設定が決定されたら、各候補の類似度を算出する。各撮影設定ごとに差分を取得し、項目ごとに重みをかけて差分値を計算する。項目の重みとしては、画像に対する影響の高い設定である、明るさ設定、背景ボケ設定、仕上がり設定、色合い設定の重みを大きくし、被写体ぶれ、色合い補正(A−B)、色合い補正(G−Mg)、クッキリ感、鮮やかさの重みを小さく設定する。これらの撮影設定の差分に重みを乗算し、所定の差分以上にならなかった場合には、優先度の低い撮影設定候補の削除を行い、前述した撮影設定抽出フローに新たな撮影設定の抽出を行う。
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
Claims (20)
- 第1の撮影設定に基づいて、第1の画像を撮像する撮像手段と、
前記第1の撮影設定と前記第1の画像の特徴量とに基づいて、被写体のシーンを判別するシーン判別手段と、
前記シーン判別手段による判別の結果に基づいて、撮影設定の候補を生成する候補生成手段と、
前記候補生成手段によって生成された撮影設定の候補に基づいて、該撮影設定の候補により得られる効果を反映した画像を生成する画像生成手段と、
前記画像生成手段によって生成された画像を表示する表示手段と、を備え、
前記候補生成手段は、前記シーン判別手段による判別の結果に基づいて前記撮影設定のうちの所定のパラメータが閾値以上離れた複数の撮影設定の候補を生成する第1の動作と、前記シーン判別手段による判別の結果に基づいて少なくとも1つの撮影設定の候補を生成する第2の動作の少なくともいずれかを行い、
前記表示手段は、前記第1の動作により生成された前記撮影設定の候補を優先的に表示することを特徴とする撮像装置。 - 前記表示手段により表示された前記複数の画像から、ユーザが1つの画像を選択するための選択手段をさらに備えることを特徴とする請求項1に記載の撮像装置。
- 前記選択手段により選択された画像に対応する撮影設定を用いて前記撮像手段に撮影を行わせる制御手段をさらに備えることを特徴とする請求項2に記載の撮像装置。
- 前記画像生成手段は、前記第1の画像に対して画像処理を施すことにより、前記撮影設定の候補により得られる効果を反映した画像を生成することを特徴とする請求項1乃至3のいずれか1項に記載の撮像装置。
- 前記候補生成手段は、前記第1の動作により2つの前記撮影設定の候補を生成するとともに、前記第2の動作により少なくとも1つの前記撮影設定の候補を生成し、前記表示手段は、前記第1の動作により前記撮影設定の候補が生成された場合には、前記第1の動作と前記第2の動作により生成された複数の撮影設定の候補を表示し、前記第1の動作により前記撮影設定の候補が生成されなかった場合には、前記第2の動作により生成された前記撮影設定の候補を表示することを特徴とする請求項1乃至4のいずれか1項に記載の撮像装置。
- 前記第1の動作で生成された前記撮影設定の候補と前記第2の動作で生成された前記撮影設定の候補について類似度を判定する判定手段をさらに備え、前記表示手段は、前記判定手段により類似度が高いと判定されなかった前記撮影設定の候補を表示することを特徴とする請求項5に記載の撮像装置。
- 前記候補生成手段は、前記シーン判別手段により、ポートレイト撮影、逆光撮影、マクロ撮影のいずれかが判別された場合には、絞り値または露出の異なる前記撮影設定の候補を生成することを特徴とする請求項1乃至6のいずれか1項に記載の撮像装置。
- 前記候補生成手段は、前記シーン判別手段によりポートレイト撮影が判別された場合には、前記第1の動作において、絞り開放の前記撮影設定の候補と、所定値よりも絞りを絞った前記撮影設定の候補とを生成することを特徴とする請求項7に記載の撮像装置。
- 前記候補生成手段は、前記シーン判別手段により逆光撮影が判別された場合には、主被写体が適正露出となる前記撮影設定の候補と、背景が適正露出となる前記撮影設定の候補とを生成することを特徴とする請求項7に記載の撮像装置。
- 前記候補生成手段は、前記シーン判別手段によりマクロ撮影が判別された場合には、絞り開放の前記撮影設定の候補と、所定値よりも絞りを絞った前記撮影設定の候補とを生成することを特徴とする請求項7に記載の撮像装置。
- 前記候補生成手段は、前記シーン判別手段により、風景撮影、夕景撮影、夜景撮影、ハイキー撮影、ローキー撮影、モノクロ撮影のいずれかが判別された場合には、前記第2の動作により前記撮影設定の候補を生成することを特徴とする請求項1乃至6のいずれか1項に記載の撮像装置。
- 前記候補生成手段は、前記第2の動作において、画面内の色分布に基づいて前記撮影設定の候補を生成することを特徴とする請求項1乃至6のいずれか1項に記載の撮像装置。
- 前記候補生成手段は、前記第2の動作において、緑色、黄色、青色、マゼンタの色分布に基づいて前記撮影設定の候補を生成することを特徴とする請求項12に記載の撮像装置。
- 第1の画像の特徴量に基づいて、被写体のシーンを判別するシーン判別手段と、
前記シーン判別手段による判別の結果に基づいて、撮影パラメータおよび画像処理パラメータの少なくともいずれかに関する設定の候補を生成する候補生成手段と、
前記候補生成手段によって生成された設定の候補に基づいて、該設定の候補により得られる効果を反映した画像を生成する画像生成手段と、
前記画像生成手段によって生成された画像を表示する表示手段と、を備え、
前記候補生成手段は、前記シーン判別手段による判別の結果に基づいて前記設定のうちの所定のパラメータが閾値以上離れた複数の設定の候補を生成する第1の動作と、前記シーン判別手段による判別の結果に基づいて少なくとも1つの設定の候補を生成する第2の動作の少なくともいずれかを行い、
前記表示手段は、前記第1の動作により生成された前記設定の候補を優先的に表示することを特徴とする画像処理装置。 - 前記表示手段により表示された前記複数の画像から、ユーザが1つの画像を選択するための選択手段をさらに備えることを特徴とする請求項14に記載の画像処理装置。
- 前記選択手段により選択された画像に対応する設定を用いて撮像手段に撮影を行わせる制御手段をさらに備えることを特徴とする請求項15に記載の画像処理装置。
- 前記画像生成手段は、前記第1の画像に対して画像処理を施すことにより、前記設定の候補により得られる効果を反映した画像を生成することを特徴とする請求項14乃至16のいずれか1項に記載の画像処理装置。
- 第1の撮影設定に基づいて、第1の画像を撮像する撮像手段を備える撮像を装置を制御する方法であって、
前記第1の撮影設定と前記第1の画像の特徴量とに基づいて、被写体のシーンを判別するシーン判別工程と、
前記シーン判別工程における判別の結果に基づいて、撮影設定の候補を生成する候補生成工程と、
前記候補生成工程において生成された撮影設定の候補に基づいて、該撮影設定の候補により得られる効果を反映した画像を生成する画像生成工程と、
前記画像生成工程において生成された画像を表示する表示工程と、を有し、
前記候補生成工程では、前記シーン判別工程における判別の結果に基づいて前記撮影設定のうちの所定のパラメータが閾値以上離れた複数の撮影設定の候補を生成する第1の動作と、前記シーン判別工程における判別の結果に基づいて少なくとも1つの撮影設定の候補を生成する第2の動作の少なくともいずれかを行い、
前記表示工程では、前記第1の動作により生成された前記撮影設定の候補を優先的に表示することを特徴とする撮像装置の制御方法。 - 第1の画像の特徴量に基づいて、被写体のシーンを判別するシーン判別工程と、
前記シーン判別工程における判別の結果に基づいて、撮影パラメータおよび画像処理パラメータの少なくともいずれかに関する設定の候補を生成する候補生成工程と、
前記候補生成工程において生成された設定の候補に基づいて、該設定の候補により得られる効果を反映した画像を生成する画像生成工程と、
前記画像生成工程において生成された画像を表示する表示工程と、を有し、
前記候補生成工程では、前記シーン判別工程における判別の結果に基づいて前記設定のうちの所定のパラメータが閾値以上離れた複数の設定の候補を生成する第1の動作と、前記シーン判別工程における判別の結果に基づいて少なくとも1つの設定の候補を生成する第2の動作の少なくともいずれかを行い、
前記表示工程では、前記第1の動作により生成された前記設定の候補を優先的に表示することを特徴とする画像処理装置の制御方法。 - 請求項18又は19に記載の制御方法の各工程をコンピュータに実行させるためのプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016129132A JP6685188B2 (ja) | 2016-06-29 | 2016-06-29 | 撮像装置、画像処理装置及びそれらの制御方法、プログラム |
US15/635,905 US10070052B2 (en) | 2016-06-29 | 2017-06-28 | Image capturing apparatus, image processing apparatus, and control methods thereof |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016129132A JP6685188B2 (ja) | 2016-06-29 | 2016-06-29 | 撮像装置、画像処理装置及びそれらの制御方法、プログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2018006912A true JP2018006912A (ja) | 2018-01-11 |
JP2018006912A5 JP2018006912A5 (ja) | 2019-08-08 |
JP6685188B2 JP6685188B2 (ja) | 2020-04-22 |
Family
ID=60807242
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016129132A Active JP6685188B2 (ja) | 2016-06-29 | 2016-06-29 | 撮像装置、画像処理装置及びそれらの制御方法、プログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US10070052B2 (ja) |
JP (1) | JP6685188B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108848308A (zh) * | 2018-06-27 | 2018-11-20 | 维沃移动通信有限公司 | 一种拍摄方法及移动终端 |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB201708572D0 (en) * | 2017-05-30 | 2017-07-12 | Expodo Ltd | Image capture |
CN110012210B (zh) * | 2018-01-05 | 2020-09-22 | Oppo广东移动通信有限公司 | 拍照方法、装置、存储介质及电子设备 |
CN108462833B (zh) * | 2018-03-26 | 2021-01-22 | 北京小米移动软件有限公司 | 拍摄方法、装置及计算机可读存储介质 |
CN108965846A (zh) * | 2018-09-07 | 2018-12-07 | 晶晨半导体(上海)股份有限公司 | 调节白平衡的方法、***及显示器 |
JP7091974B2 (ja) * | 2018-09-26 | 2022-06-28 | オムロン株式会社 | 画像処理システム、画像処理装置、画像処理方法、および画像処理プログラム |
US11893668B2 (en) | 2021-03-31 | 2024-02-06 | Leica Camera Ag | Imaging system and method for generating a final digital image via applying a profile to image information |
CN113206956B (zh) * | 2021-04-29 | 2023-04-07 | 维沃移动通信(杭州)有限公司 | 图像处理方法、装置、设备及存储介质 |
US20230316470A1 (en) * | 2022-01-10 | 2023-10-05 | Samsung Electronics Co., Ltd. | Method for correcting image by device and device therefor |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006261915A (ja) * | 2005-03-16 | 2006-09-28 | Casio Comput Co Ltd | 撮影装置 |
JP2007194819A (ja) * | 2006-01-18 | 2007-08-02 | Casio Comput Co Ltd | カメラ装置、及び撮影条件設定方法 |
JP2009077157A (ja) * | 2007-09-20 | 2009-04-09 | Fujifilm Corp | 撮影制御方法、撮像装置、撮影意図判定装置、及び撮影システム |
US20120092515A1 (en) * | 2010-10-14 | 2012-04-19 | Samsung Electronics Co., Ltd. | Digital image processing apparatus and digital image processing method capable of obtaining sensibility-based image |
US20140139699A1 (en) * | 2012-11-19 | 2014-05-22 | Samsung Electronics Co., Ltd. | Photographing apparatus and method for controlling thereof |
JP2015062297A (ja) * | 2014-11-06 | 2015-04-02 | オリンパスイメージング株式会社 | 撮像装置及び撮像方法 |
JP2015088801A (ja) * | 2013-10-28 | 2015-05-07 | オリンパス株式会社 | 画像処理装置、画像処理方法及び画像処理プログラム |
JP2015204570A (ja) * | 2014-04-15 | 2015-11-16 | キヤノン株式会社 | 撮像装置、制御方法及びプログラム |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3948652B2 (ja) * | 2002-03-15 | 2007-07-25 | 株式会社リコー | シーン選択機能を有する撮像装置 |
US20070248330A1 (en) * | 2006-04-06 | 2007-10-25 | Pillman Bruce H | Varying camera self-determination based on subject motion |
JP5397068B2 (ja) * | 2009-06-03 | 2014-01-22 | ソニー株式会社 | 撮像装置、撮像制御方法、露出制御装置および露出制御方法 |
US8488958B2 (en) * | 2010-05-25 | 2013-07-16 | Apple Inc. | Scene adaptive auto exposure |
US8928772B2 (en) * | 2012-09-21 | 2015-01-06 | Eastman Kodak Company | Controlling the sharpness of a digital image |
JP6214178B2 (ja) * | 2013-01-25 | 2017-10-18 | キヤノン株式会社 | 撮像装置、クライアント装置、撮像システム、撮像装置の制御方法、クライアント装置の制御方法、および撮像システムの制御方法 |
JP6261187B2 (ja) * | 2013-05-21 | 2018-01-17 | キヤノン株式会社 | 画像処理装置、画像処理方法およびプログラム |
US9544497B2 (en) * | 2014-05-21 | 2017-01-10 | Qualcomm Incorporated | System and method for determining image resolution |
-
2016
- 2016-06-29 JP JP2016129132A patent/JP6685188B2/ja active Active
-
2017
- 2017-06-28 US US15/635,905 patent/US10070052B2/en active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006261915A (ja) * | 2005-03-16 | 2006-09-28 | Casio Comput Co Ltd | 撮影装置 |
JP2007194819A (ja) * | 2006-01-18 | 2007-08-02 | Casio Comput Co Ltd | カメラ装置、及び撮影条件設定方法 |
JP2009077157A (ja) * | 2007-09-20 | 2009-04-09 | Fujifilm Corp | 撮影制御方法、撮像装置、撮影意図判定装置、及び撮影システム |
US20120092515A1 (en) * | 2010-10-14 | 2012-04-19 | Samsung Electronics Co., Ltd. | Digital image processing apparatus and digital image processing method capable of obtaining sensibility-based image |
US20140139699A1 (en) * | 2012-11-19 | 2014-05-22 | Samsung Electronics Co., Ltd. | Photographing apparatus and method for controlling thereof |
JP2015088801A (ja) * | 2013-10-28 | 2015-05-07 | オリンパス株式会社 | 画像処理装置、画像処理方法及び画像処理プログラム |
JP2015204570A (ja) * | 2014-04-15 | 2015-11-16 | キヤノン株式会社 | 撮像装置、制御方法及びプログラム |
JP2015062297A (ja) * | 2014-11-06 | 2015-04-02 | オリンパスイメージング株式会社 | 撮像装置及び撮像方法 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108848308A (zh) * | 2018-06-27 | 2018-11-20 | 维沃移动通信有限公司 | 一种拍摄方法及移动终端 |
CN108848308B (zh) * | 2018-06-27 | 2019-12-31 | 维沃移动通信有限公司 | 一种拍摄方法及移动终端 |
Also Published As
Publication number | Publication date |
---|---|
JP6685188B2 (ja) | 2020-04-22 |
US20180007260A1 (en) | 2018-01-04 |
US10070052B2 (en) | 2018-09-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6685188B2 (ja) | 撮像装置、画像処理装置及びそれらの制御方法、プログラム | |
US10397486B2 (en) | Image capture apparatus and method executed by image capture apparatus | |
US10142536B2 (en) | Camera using preview image to select exposure | |
JP6259185B2 (ja) | 撮像装置及びその制御方法、プログラム並びに記憶媒体 | |
US8111946B2 (en) | Image processing apparatus, imaging apparatus, and image processing method | |
JP5141733B2 (ja) | 撮像装置、撮像方法、及びプログラム | |
JP6218389B2 (ja) | 画像処理装置及び画像処理方法 | |
JP6193721B2 (ja) | 画像処理装置及び画像処理方法、プログラム、記憶媒体 | |
JP6401324B2 (ja) | ダイナミックフォトの撮影方法及び装置 | |
JP2007067907A (ja) | 撮像装置、撮像方法および撮像プログラム、ならびに、画像処理装置、画像処理方法および画像処理プログラム | |
JP2009089357A (ja) | 撮像装置、撮像方法、プログラム、および集積回路 | |
JP2016213718A (ja) | 画像処理装置及び画像処理方法、プログラム、記憶媒体 | |
CN110047060B (zh) | 图像处理方法、装置、存储介质及电子设备 | |
WO2019019904A1 (zh) | 白平衡处理方法、装置和终端 | |
JP4999871B2 (ja) | 撮像装置およびその制御方法 | |
CN111095913B (zh) | 图像处理装置和处理方法、摄像装置、摄像方法、存储介质 | |
US11838648B2 (en) | Image processing device, imaging apparatus, image processing method, and program for determining a condition for high dynamic range processing | |
JP2014179920A (ja) | 撮像装置及びその制御方法、プログラム、並びに記憶媒体 | |
JP2015211233A (ja) | 画像処理装置および画像処理装置の制御方法 | |
JP2010011153A (ja) | 撮像装置、撮像方法及びプログラム | |
JP5335964B2 (ja) | 撮像装置およびその制御方法 | |
JP6703787B2 (ja) | 撮像装置及びその制御方法、プログラム、記憶媒体 | |
JP2002369074A (ja) | 光学機器の露出制御装置およびプログラム、並びに方法 | |
JP5351663B2 (ja) | 撮像装置およびその制御方法 | |
JP2003259231A (ja) | 自動露出制御装置及びそのプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190625 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190625 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200214 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200302 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200331 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6685188 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |