JP5482292B2 - 撮影シーン判定装置 - Google Patents
撮影シーン判定装置 Download PDFInfo
- Publication number
- JP5482292B2 JP5482292B2 JP2010043693A JP2010043693A JP5482292B2 JP 5482292 B2 JP5482292 B2 JP 5482292B2 JP 2010043693 A JP2010043693 A JP 2010043693A JP 2010043693 A JP2010043693 A JP 2010043693A JP 5482292 B2 JP5482292 B2 JP 5482292B2
- Authority
- JP
- Japan
- Prior art keywords
- scene
- lightness
- hue
- saturation
- brightness
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Exposure Control For Cameras (AREA)
- Details Of Cameras Including Film Mechanisms (AREA)
- Color Television Image Signal Generators (AREA)
- Studio Devices (AREA)
Description
図3は,本実施の形態におけるシーン判定部による撮影シーンの判定処理を示すフローチャート図である。図4は,撮影シーンの判定処理における第2のシーン判定工程に対応するシーンシンボル再割り当て工程のフローチャート図である。
次に,分割された複数のブロック毎に代表の色情報を算出する(301)。即ち,ブロック内のすべての画素の画像データのRGBデータを平均してブロックのRGB平均値を算出し,そのRGB平均値をHSIデータに変換する。このHSIデータ(色相H,彩度S,明度I)をブロックの色情報とする。
Imax = max{R,G,B}
Imin = min{R,G,B}
I = Imax
S = (Imax −Imin)/I
H = π/3*(b−g) (R= Imaxのとき)
H = π/3*(2+r−b) (G= Imaxのとき)
H = π/3*(4+g−r) (B= Imaxのとき)
但し,
r = (Imax−R)/( Imax −Imin)
g = (Imax−G)/( Imax −Imin)
b = (Imax−B)/( Imax −Imin)
RGB値がそれぞれ0〜255の値(8ビット)であるとすると,例えば,明度Iは0〜255,彩度Sは0〜1,色相Hは0以上360未満の値となる。
次に,撮影シーンの判定処理は,8×8のブロックそれぞれについて,ブロックのHSIデータに基づいて六角錘モデルの色空間領域からシーンシンボルの割り当てを行う(302)。即ち,各ブロックのHSIデータが,HSI色空間内の予め定められた複数の領域のどれに属するかを判定して,その属する色領域情報を示すシーンシンボルを各ブロックに割り当てる。このシーンシンボルが,明度領域情報,色相彩度領域情報に対応する。例えば,所定のシーンシンボルが予め求めた基準値以上存在する画像は,所定の撮影シーンと判定される。つまり,シーンシンボルの数,占有比率が撮影シーンの特徴を表しているのである。
色相Hが0以上60未満,330以上360未満の領域にシーンシンボル「夕」
色相Hが80以上140未満の領域にシーンシンボル「緑」
色相Hが220以上260未満の領域にシーンシンボル「空」
色相Hが上記以外の領域にシーンシンボル「他」
シーンシンボル「夕」の色相彩度領域は,夕景シーンや紅葉シーンなどの赤系色を多く有する撮影シーンに代表的に現れる色相彩度領域情報である。シーンシンボル「緑」の色相彩度領域は,草,山,森林などの緑系色を多く有する撮影シーンに代表的に現れる色相彩度領域である。そして,シーンシンボル「空」の色相彩度領域は,青空や海などの青系色を多く有する撮影シーンに代表的に現れる色相彩度領域である。
(0,1):明度I=180,彩度S=0.6,色相H=100 :シーンシンボル「緑」
(0,2):明度I=220,彩度S=0.8,色相H=235 :シーンシンボル「空」
(0,3):明度I=130,彩度S=0.7,色相H=50 :シーンシンボル「夕」
(0,4):明度I=110,彩度S=0.4,色相H=280 :シーンシンボル「他」
シーン判定部201は,すべてのブロックについてシーンシンボルの割り当てを実施する。
次に,シーン判定部201は,64個のブロックのシーンシンボルの占有比率から,撮像シーンとして雪景シーン候補と夕景シーン候補を選択する(303)。これらの撮像シーンが曇りシーンと紅葉シーンと誤判定される確率が高いからである。1つの画像の64個のブロックにおいてシーンシンボル「雪」の数が基準値を超えていれば,その画像の撮像シーンは雪景シーン候補と判定され,越えていなければ雪景シーン候補から外される。また,同様に,シーンシンボル「夕」の数が基準値を超えていれば,その画像の撮像シーンは夕景シーン候補と判定され,越えていなければ夕景シーン候補から外される。具体的な基準値の例は後述するとおりである。
図3に示されるとおり,第1のシーン判定工程303で雪景シーン候補または夕景シーン候補が選択されると,シーン判定部はシーンシンボル再割り当て工程304を実行する。
Iu_r=220,Ith_r=100
の場合であれば,ブロックの色情報が
明度I=80,彩度S=0.6,色相H=0
について明度加算すると,明度加算後の色情報は,
明度I=160,彩度S=0.6,色相H=0
になる。つまり,明度IはIu_r=220とIth_r=100との間のI=160になる。
Iu_g=240,Ith_g=100
の場合であれば,ブロックの色情報が
明度I=80,彩度S=0.6,色相H=120
について明度加算すると,明度加算後の色情報は,
明度I=170,彩度S=0.6,色相H=120
になる。つまり,明度IはIu_g=240とIth_g=100との間のI=170になる。
Iu_b=200,Ith_b=100
の場合であれば,ブロックの色情報が
明度I=80,彩度S=0.6,色相H=240
について明度加算すると,明度加算後の色情報は,
明度I=150,彩度S=0.6,色相H=240
になる。つまり,明度IはIu_b=200とIth_b=100との間のI=150になる。
図3に戻り,シーン判定部は,シーンシンボルが再割り当てされた画像について,シーン再判定305を行う。シーン再判定でも,画像の64個のブロックに再割り当てされたシーンシンボルの占有状態に基づいて撮影シーンの判定を行う。なお,シーンシンボル「他」を含めると誤検出の可能性があるので,撮影シーンの判定ではシーンシンボル「他」は除外する。
以下,雪景シーン,雪景シーンと誤検出されやすいシーン,夕景シーン,夕景シーンと誤検出されやすいシーンの例について説明する。
撮像した画像データに基づいて複数の撮影シーンのいずれかを判定する撮影シーン判定装置において,
1画像を分割した複数のブロックについての,前記画像データの明度が明度閾値以上かそれより低いかの明度領域情報と,前記画像データの前記明度が前記明度閾値以上の場合の前記画像データの色相彩度座標上における色相彩度領域情報とに基づいて,前記撮影シーンを判定する第1のシーン判定を行い,
前記第1のシーン判定において前記複数の撮影シーンのうち予め決められた特定の撮影シーンに判定された場合に,前記明度が明度閾値より低い明度領域情報を有する低明度ブロックについての前記色相彩度領域情報に基づいて前記撮影シーンを再判定する第2のシーン判定を行うシーン検出部を有する撮影シーン判定装置。
付記1において,
さらに,前記画像データの明度,色相,彩度データの入力に応じて,前記低明度の明度領域情報または前記明度領域情報が高明度の場合の色相彩度領域情報を出力するルックアップテーブルを有し,
前記シーン検出部は,
前記第1のシーン判定においては,前記ルックアップテーブルを参照して,前記撮像した画像データの明度,色相,彩度データに対する前記明度領域情報,または色相彩度領域情報を前記複数のブロック毎に抽出し,
前記第2のシーン判定においては,前記低明度ブロックの画像データの明度を前記明度閾値以上に加算し,前記ルックアップテーブルを参照して,前記加算した明度データと色相,彩度データとに対する前記色相彩度領域情報を前記低明度ブロック毎に抽出する撮影シーン判定装置。
付記1において,
さらに,前記画像データの明度,色相,彩度データの入力に応じて,前記明度領域情報が低明度の場合の低明度色相彩度領域情報,または前記明度領域情報が高明度の場合の高明度色相彩度領域情報を出力するルックアップテーブルを有し,
前記シーン検出部は,
前記第1のシーン判定においては,前記ルックアップテーブルを参照して,前記撮像した画像データの明度,色相,彩度データに対する前記低明度色相彩度領域情報または前記高明度色相彩度領域情報を前記複数のブロック毎に抽出し,
前記第2のシーン判定においては,前記低明度ブロックについての前記低明度色相彩度領域情報に基づいて前記第2のシーン判定を行う撮影シーン判定装置。
付記2または3において,
前記色相彩度領域情報は,前記色相彩度座標上の複数領域のうちいずれの色相彩度領域かを示し,
前記第1及び第2のシーン判定では,前記複数のブロックそれぞれの明度領域情報と色相彩度領域情報の数が,前記複数の撮影シーン毎に予め決められた基準数と一致する場合に,一致した撮影シーンを前記撮像した画像の撮影シーンと判定する撮影シーン判定装置。
付記2において,
前記前記色相彩度領域情報は,前記色相彩度座標上の複数領域のうちいずれの色相彩度領域かを示し,
前記第2のシーン判定において,前記低明度ブロックの画像データの明度を前記明度閾値以上に加算するとき前記色相彩度領域毎に定められた加算演算に基づいて加算し,当該色相彩度領域毎加算した明度データと色相,彩度データとに対する前記色相彩度領域情報を前記低明度ブロック毎に抽出する撮影シーン判定装置。
付記1,2または3のいずれかにおいて,
前記前記色相彩度領域情報は,前記色相彩度座標上の複数領域のうちいずれの色相彩度領域かを示し,
前記特定の撮影シーンは,前記色相彩度領域情報が白色に対応する色相彩度領域であるブロックの数が第1の基準値以上のときに判定される雪景シーン,前記色相彩度領域情報が赤色に対応する色相彩度領域であるブロックの数が第2の基準値以上のときに判定される夕景シーンのいずれかを有する撮影シーン判定装置。
付記6において,
前記第1のシーン判定において,前記雪景シーンまたは夕景シーンに判定された場合でも,前記第2のシーン判定において,前記色相彩度領域情報が前記白色以外または赤色以外に対応する色相彩度領域であるブロックの数が第3または第4の基準値以上のときには,前記雪景シーン以外の撮影シーンまたは前記夕景シーン以外の撮影シーンに判定される撮影シーン判定装置。
付記1乃至7のいずれかに記載の撮影シーン判定装置と,
撮像素子とを有するデジタルカメラ。
Claims (5)
- 撮像した画像データに基づいて複数の撮影シーンのいずれかを判定する撮影シーン判定装置において,
1画像を分割した複数のブロックについての,前記画像データの明度が明度閾値以上かそれより低いかの明度領域情報と,前記画像データの前記明度が前記明度閾値以上の場合の前記画像データの色相彩度座標上における色相彩度領域情報とに基づいて,前記撮影シーンを判定する第1のシーン判定を行い,
前記第1のシーン判定において前記複数の撮影シーンのうち予め決められた特定の撮影シーンに判定された場合に,前記明度が明度閾値より低い明度領域情報を有する低明度ブロックについての前記色相彩度領域情報に基づいて前記撮影シーンを再判定する第2のシーン判定を行うシーン検出部を有する撮影シーン判定装置。 - 請求項1において,
さらに,前記画像データの明度,色相,彩度データの入力に応じて,前記明度領域情報が低明度の場合または前記明度領域情報が高明度の場合の色相彩度領域情報を出力するルックアップテーブルを有し,
前記シーン検出部は,
前記第1のシーン判定においては,前記ルックアップテーブルを参照して,前記撮像した画像データの明度,色相,彩度データに対する前記明度領域情報,または色相彩度領域情報を前記複数のブロック毎に抽出し,
前記第2のシーン判定においては,前記低明度ブロックの画像データの明度を前記明度閾値以上に加算し,前記ルックアップテーブルを参照して,前記加算した明度データと色相,彩度データとに対する前記色相彩度領域情報を前記低明度ブロック毎に抽出する撮影シーン判定装置。 - 請求項1において,
さらに,前記画像データの明度,色相,彩度データの入力に応じて,前記明度領域情報が低明度の場合の低明度色相彩度領域情報,または前記明度領域情報が高明度の場合の高明度色相彩度領域情報を出力するルックアップテーブルを有し,
前記シーン検出部は,
前記第1のシーン判定においては,前記ルックアップテーブルを参照して,前記撮像した画像データの明度,色相,彩度データに対する前記低明度色相彩度領域情報または前記高明度色相彩度領域情報を前記複数のブロック毎に抽出し,
前記第2のシーン判定においては,前記低明度ブロックについての前記低明度色相彩度領域情報に基づいて前記第2のシーン判定を行う撮影シーン判定装置。 - 請求項2において,
前記色相彩度領域情報は,前記色相彩度座標上の複数領域のうちいずれの色相彩度領域かを示し,
前記第2のシーン判定において,前記低明度ブロックの画像データの明度を前記明度閾値以上に加算するとき前記色相彩度領域毎に定められた加算演算に基づいて加算し,当該色相彩度領域毎加算した明度データと色相,彩度データとに対する前記色相彩度領域情報を前記低明度ブロック毎に抽出する撮影シーン判定装置。 - 請求項1,2または3のいずれかにおいて,
前記色相彩度領域情報は,前記色相彩度座標上の複数領域のうちいずれの色相彩度領域かを示し,
前記特定の撮影シーンは,前記色相彩度領域情報が白色に対応する色相彩度領域であるブロックの数が第1の基準値以上のときに判定される雪景シーン,前記色相彩度領域情報が赤色に対応する色相彩度領域であるブロックの数が第2の基準値以上のときに判定される夕景シーンのいずれかを有する撮影シーン判定装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010043693A JP5482292B2 (ja) | 2010-03-01 | 2010-03-01 | 撮影シーン判定装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010043693A JP5482292B2 (ja) | 2010-03-01 | 2010-03-01 | 撮影シーン判定装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011182147A JP2011182147A (ja) | 2011-09-15 |
JP5482292B2 true JP5482292B2 (ja) | 2014-05-07 |
Family
ID=44693199
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010043693A Expired - Fee Related JP5482292B2 (ja) | 2010-03-01 | 2010-03-01 | 撮影シーン判定装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5482292B2 (ja) |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4703498B2 (ja) * | 2006-06-30 | 2011-06-15 | 三洋電機株式会社 | デジタルカメラ |
JP4910821B2 (ja) * | 2007-03-27 | 2012-04-04 | セイコーエプソン株式会社 | 画像識別方法 |
JP5206209B2 (ja) * | 2008-08-04 | 2013-06-12 | ソニー株式会社 | 撮像装置と画像処理装置と撮像方法およびプログラム |
-
2010
- 2010-03-01 JP JP2010043693A patent/JP5482292B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2011182147A (ja) | 2011-09-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8164649B2 (en) | White balance adjusting device, imaging apparatus, and recording medium storing white balance adjusting program | |
KR102346522B1 (ko) | 영상 처리 장치 및 그것의 자동 화이트 밸런싱 방법 | |
CN110602467B (zh) | 图像降噪方法、装置、存储介质及电子设备 | |
US10325354B2 (en) | Depth assisted auto white balance | |
JP5918915B2 (ja) | カラーフィルタを有するセンサを用いて、改善されたカラー画像を作成するための方法およびデバイス | |
KR100955145B1 (ko) | 적응형 자동 화이트 밸런스 | |
KR101279374B1 (ko) | 카메라의 영상 개선을 위한 안개제거 영상 보정 장치 및 방법 | |
US8879841B2 (en) | Anisotropic denoising method | |
CN102474628B (zh) | 图像处理方法和设备 | |
US20070047803A1 (en) | Image processing device with automatic white balance | |
EP1389771A2 (en) | Digital image system and method for combining demosaicing and bad pixel correction | |
CN107872663B (zh) | 图像处理方法及装置、计算机可读存储介质和计算机设备 | |
JP2016151955A (ja) | 画像処理装置、撮像装置、距離計測装置、および画像処理方法 | |
CN108063934B (zh) | 图像处理方法及装置、计算机可读存储介质和计算机设备 | |
US7505069B2 (en) | Method and apparatus for maintaining consistent white balance in successive digital images | |
TWI736599B (zh) | 影像中飽和像素之檢測方法 | |
US9092661B2 (en) | Facial features detection | |
JP5706705B2 (ja) | 画像処理装置およびその制御方法、ならびに撮像装置 | |
JP5482292B2 (ja) | 撮影シーン判定装置 | |
JP2009004966A (ja) | 撮像装置 | |
US7688357B2 (en) | Method and apparatus for color temperature correction in a built-in camera of a portable terminal | |
KR20170008177A (ko) | 정보 처리 장치, 정보 처리 방법, 컴퓨터 판독가능 기록매체 | |
JP2009302960A (ja) | 映像信号処理装置並びにプログラム及び方法 | |
WO2022067761A1 (zh) | 图像处理方法、装置、拍摄设备、可移动平台及计算机可读存储介质 | |
CN109788217B (zh) | 不良像素补偿方法与装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20121031 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20131010 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20131022 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20131220 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140121 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140203 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5482292 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
LAPS | Cancellation because of no payment of annual fees |