JP4966167B2 - 画像評価装置及びこの画像評価装置を有するカメラ - Google Patents
画像評価装置及びこの画像評価装置を有するカメラ Download PDFInfo
- Publication number
- JP4966167B2 JP4966167B2 JP2007293856A JP2007293856A JP4966167B2 JP 4966167 B2 JP4966167 B2 JP 4966167B2 JP 2007293856 A JP2007293856 A JP 2007293856A JP 2007293856 A JP2007293856 A JP 2007293856A JP 4966167 B2 JP4966167 B2 JP 4966167B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- evaluation
- value
- unit
- priority value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000011156 evaluation Methods 0.000 title claims description 262
- 238000003860 storage Methods 0.000 claims description 48
- 238000012545 processing Methods 0.000 claims description 25
- 238000003384 imaging method Methods 0.000 claims description 11
- 230000003287 optical effect Effects 0.000 claims description 6
- 238000004364 calculation method Methods 0.000 claims description 5
- 239000000284 extract Substances 0.000 claims description 2
- 238000012986 modification Methods 0.000 claims 1
- 230000004048 modification Effects 0.000 claims 1
- 238000000034 method Methods 0.000 description 44
- 238000001514 detection method Methods 0.000 description 16
- 238000010586 diagram Methods 0.000 description 11
- 238000012854 evaluation process Methods 0.000 description 8
- 241000032989 Ipomoea lacunosa Species 0.000 description 5
- 238000012937 correction Methods 0.000 description 5
- 230000000694 effects Effects 0.000 description 4
- 238000000605 extraction Methods 0.000 description 4
- 239000013598 vector Substances 0.000 description 4
- 230000003247 decreasing effect Effects 0.000 description 3
- 230000014509 gene expression Effects 0.000 description 3
- 238000007796 conventional method Methods 0.000 description 2
- 230000007547 defect Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- NAWXUBYGYWOOIX-SFHVURJKSA-N (2s)-2-[[4-[2-(2,4-diaminoquinazolin-6-yl)ethyl]benzoyl]amino]-4-methylidenepentanedioic acid Chemical compound C1=CC2=NC(N)=NC(N)=C2C=C1CCC1=CC=C(C(=O)N[C@@H](CC(=C)C(O)=O)C(O)=O)C=C1 NAWXUBYGYWOOIX-SFHVURJKSA-N 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 238000005034 decoration Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 238000013178 mathematical model Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Landscapes
- Television Signal Processing For Recording (AREA)
- Facsimiles In General (AREA)
- Studio Devices (AREA)
- Image Analysis (AREA)
Description
で定義し、当該Vmax(i,j)、Vmin(i,j)及びS(i,j)に基づいて露出不良判定処理を行って評価値を算出するように構成されることが好ましい。
それでは、図1及び図4に示すデジタルカメラの使用例の説明図、並びに図5〜図7に示すフローチャート、図9〜図12に示す模式図を用いて、画像評価部14による画像の評価処理及び優先値設定部15による優先値の設定処理について説明する。これらの処理は、例えば、撮像部11により撮影が行われ、画像情報記憶部13にデジタル画像が登録されたタイミングで起動され、この登録されたデジタル画像に対して処理が実行される。または、図示はしないが、ディスプレイ20等に表示された適宜の設定画面に優先値設定ボタンを設け、このボタンをクリックすることで画像の評価処理及び優先値の設定処理が実行されるように構成してもよい。なお、以降の説明では、撮像部11により登録されたこのデジタル画像を「評価対象画像100」と呼ぶ。
まず、評価方法の一つである、手ぶれの検出による評価方法での処理手順について図9の模式図を用いて説明する。「手ぶれ」とは、露光時に撮影者の手が動いてしまい、画像全体がぶれてしまった状態を示す。このような手ぶれを生じたデジタル画像は、下記式(1)によりモデル化される。
次に、被写体ぶれの検出による評価方法での処理手順について説明する。「被写体ぶれ」とは露光時に主要被写体が動いてしまい、最終的に出来上がった画像において、主要被写体がぶれてしまっているものである。前述の「手ぶれ」は画像全体がぶれてしまっている状態なのに対し、「被写体ぶれ」は画像の一部、特に主要被写体のみがぶれてしまっている点が異なる。被写体ぶれは、主要被写体が画像中に存在する領域がわかれば、前述の式(1)で表される手ぶれの検出の際と同じ数理モデルにより表現することができる。また、「ぶれ幅σ」の検出も、前述の式(2)で表される手ぶれと同じ手法を用いて行うことができる。したがって、被写体ぶれの検出には、まず、この被写体ぶれの検出を行う主要被写体領域を特定する必要がある。本実施例では、撮影時の情報として合焦に使用されたAFエリア情報(オートフォーカスエリア情報)を用いることで主要被写体領域の特定を実現している。このAFエリア情報を、画像撮影時に、撮影時の情報として画像情報記憶部13の属性情報(AFエリア情報領域52c)に記憶しておく。そして、被写体ぶれ検出時には、画像情報記憶部13から読み出されたAFエリア情報をもとに、評価対象画像100の該当する領域のみを切り出して、前述の手ぶれ検出と同様の手法を用いて、被写体ぶれを検出し、ミスショットの強度を示す「ぶれ幅σ」を定義する。そして、このぶれ幅に基づいて、手ぶれ検出時の手法と同様に、前述の式(3)と同様の計算方法を用いて、評価値Vsblurを算出する。
次に、類似画像の抽出による評価方法での処理手順を説明する。ここで言う「類似画像」とは、スライドショーの対象となるデジタル画像群のうち、同一シーンを連続撮影している画像等、互いに似通っている画像のグループを意味する。このような類似画像の検出は、ISO/IEC 15938−3(mpeg7 visual discription)で定義されている各種画像統計量を特徴量として各画像を特徴付け、各特徴量を成分とする特徴ベクトルを画像毎に定義し、この特徴ベクトルの定義された線形空間を特徴空間として定義した上で、各画像に対応する特徴ベクトルの「距離」に応じてグルーピングすることにより行うことができる。
次に、露出不良判定による評価方法での処理手順について、図6のフローチャート及び図12に示す模式図を用いて説明する。まず、図6に示すように、評価対象画像から処理対象領域の抽出を行う(ステップS701)。それには、図12(a)に示される、与えられた評価対象画像Iに対し、下記式(5)で定義するsobel filter(ソーベルフィルター)Sh、SVを適用し、その後に相対強度(以下単に強度と呼ぶ)Tbを閾値として2値化処理を実行し、図12(b)に示されるエッジ画像集合Iedgeを求める。
ここまでの説明において、重み係数wblur等はシステムに予め設定された固定値またはユーザにより初期値として手動入力された値を用いることを前提としていたが、他の異なる実施例として、重み係数を、係数修正部17により、ユーザの好みに応じて半自動的に更新し、画像評価におけるユーザの手間を削減するよう構成してもよい。この重み係数の更新とは、すなわち、優先値設定部15により設定された評価対象画像100の優先値を、ユーザが自分の好みに応じて変更可能にシステムを構成し、そのユーザの好みを重み係数に反映するものである。その手法を、図7のフローチャートを用いて以下に説明する。なお、以下の説明において、Vtotalの算出方法が、前述したように最も影響の大きい優先値の効果のみを、総合的評価値として反映させる方法、すなわち、前記式(12)を用いるものではないことを前提とする。
それでは、以上のようにして設定された優先値に基づいて、デジタルカメラ10において、上述の評価が行われたデジタル画像によるスライドショーを生成及び表示するためのスライドショー生成部18の処理について、図8に示すフローチャートを用いて説明する。ユーザの操作によりスライドショー生成部18を実行すると、まず、画像記憶部13に記憶されているデジタル画像のうち、スライドショー実行の対象となるデジタル画像が記憶されたフォルダを選択する(ステップS901)。そして、スライドショーのテンプレート(デジタル画像とともに表示される背景や装飾又は音楽等の演出若しくはデザイン)を選択する(ステップS902)。このとき、テンプレートの選択は、利用者に対して登録されているテンプレートをディスプレイ20等に表示して選択させても良いし、このスライドショー生成部18で自動的に選択するように構成しても良い。
13 画像情報記憶部 14 画像評価部 15 優先値設定部
16 設定部 17 係数修正部 18スライドショー生成部
52 属性情報(属性情報領域)
52a 優先値領域 52b 撮影日時領域 52c AFエリア情報領域
100 評価対象画像
Claims (8)
- 評価対象画像及び当該評価対象画像の属性情報を対応付けて記憶する画像情報記憶部と、
前記画像情報記憶部から前記評価対象画像を選択し、当該評価対象画像に対して少なくとも1以上の評価方法を用いて評価値を算出する画像評価部と、
前記評価値を前記評価対象画像の前記属性情報に優先値として設定する優先値設定部と、から構成され、
前記画像評価部は、前記評価方法により算出される前記評価値に、当該評価方法毎に設定された重み係数を乗算した積のうち、最も大きい値を当該評価対象画像の前記評価値とするように構成された画像評価装置。 - 前記画像評価部は、前記1以上の評価方法の一つとして、前記画像記憶部に記憶されている前記評価対象画像から、当該評価対象画像間の類似度を算出し、当該類似度に基づいて類似する画像を類似画像群に分類し、当該分類毎に撮影時刻が一番遅い前記評価対象画像を中心に、残りの前記評価対象画像の前記評価値を前記類似度に反比例して算出するように構成された請求項1に記載の画像評価装置。
- 評価対象画像及び当該評価対象画像の属性情報を対応付けて記憶する画像情報記憶部と、
前記画像情報記憶部から前記評価対象画像を選択し、当該評価対象画像に対して少なくとも1以上の評価方法を用いて評価値を算出する画像評価部と、
前記評価値を前記評価対象画像の前記属性情報に優先値として設定する優先値設定部と、から構成され、
前記画像評価部は、前記1以上の評価方法の一つとして、前記画像記憶部に記憶されている前記評価対象画像から、当該評価対象画像間の類似度を算出し、当該類似度に基づいて類似する画像を類似画像群に分類し、当該分類毎に撮影時刻が一番遅い前記評価対象画像を中心に、残りの前記評価対象画像の前記評価値を前記類似度に反比例して算出するように構成された画像評価装置。 - 前記画像評価部は、前記評価方法により算出される前記評価値に、当該評価方法毎に設定された重み係数を乗算して得た値の総和を当該評価対象画像の前記評価値とするように構成された請求項3に記載の画像評価装置。
- 前記評価対象画像毎に、前記画像情報記憶部の前記属性情報に前記優先値を設定する設定部と、
前記優先値設定部により設定された前記優先値と前記設定部で設定された前記優先値との差を算出し、当該差から前記重み係数を修正する係数修正部とを有する請求項3または4に記載の画像評価装置。 - 前記画像評価部は、前記1以上の評価方法の一つとして、前記評価対象画像を小領域に分割し、前記小領域毎にエッジ画像を求め、当該エッジ画像から算出されるエッジ成分の最も高い前記小領域を処理対象領域に選定し、当該処理対象領域の各画素において、赤成分の強度をR(i,j)とし、緑成分の強度をG(i,j)とし、青成分の強度をB(i,j)とし、各画素において最も大きい成分の値Vmax(i,j)、最も小さい成分の値Vmin(i,j)及びその差分S(i,j)を次式
で定義し、当該Vmax(i,j)、Vmin(i,j)及びS(i,j)に基づいて露出不良判定処理を行って前記評価値を算出するように構成された請求項1〜5のいずれか一項に記載の画像評価装置。 - 前記画像情報記憶部から前記評価対象画像及び前記属性情報の前記優先値を取り出し、当該優先値に基づいてスライドショーを生成し、再生するスライドショー生成部を有する請求項1〜6のいずれか一項に記載の画像評価装置。
- 請求項1〜7のいずれか一項に記載の画像評価装置と、
光学系及び当該光学系で結像された像を検出する撮像素子を備え、当該撮像素子で検出された画像を評価対象画像として記憶部に記憶させる撮像部とを有し、
前記撮像部により前記画像情報記憶部に前記評価対象画像が記憶されたときに、前記優先値設定部により当該評価対象画像に対する前記優先値が設定されるように構成されるカメラ。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007293856A JP4966167B2 (ja) | 2007-11-13 | 2007-11-13 | 画像評価装置及びこの画像評価装置を有するカメラ |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007293856A JP4966167B2 (ja) | 2007-11-13 | 2007-11-13 | 画像評価装置及びこの画像評価装置を有するカメラ |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009122792A JP2009122792A (ja) | 2009-06-04 |
JP4966167B2 true JP4966167B2 (ja) | 2012-07-04 |
Family
ID=40814905
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007293856A Active JP4966167B2 (ja) | 2007-11-13 | 2007-11-13 | 画像評価装置及びこの画像評価装置を有するカメラ |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4966167B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6948787B2 (ja) | 2016-12-09 | 2021-10-13 | キヤノン株式会社 | 情報処理装置、方法およびプログラム |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000137791A (ja) * | 1998-10-30 | 2000-05-16 | Minolta Co Ltd | 画像評価装置 |
JP2006254107A (ja) * | 2005-03-10 | 2006-09-21 | Olympus Imaging Corp | 画像評価装置、画像評価プログラム、画像評価プログラムを記録する記録媒体、画像評価方法 |
JP2006311340A (ja) * | 2005-04-28 | 2006-11-09 | Olympus Imaging Corp | 画像表示装置及びデジタルカメラ |
-
2007
- 2007-11-13 JP JP2007293856A patent/JP4966167B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2009122792A (ja) | 2009-06-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
AU2017261537B2 (en) | Automated selection of keeper images from a burst photo captured set | |
JP4772839B2 (ja) | 画像識別方法および撮像装置 | |
JP5389903B2 (ja) | 最適映像選択 | |
JP4840426B2 (ja) | 電子機器、ぼけ画像選別方法及びプログラム | |
US7599568B2 (en) | Image processing method, apparatus, and program | |
JP5034661B2 (ja) | 画像管理装置、画像表示装置、撮像装置、および、これらにおける処理方法ならびに当該方法をコンピュータに実行させるプログラム | |
JP5834879B2 (ja) | 画像印刷装置、方法、プログラム、画像処理装置、方法及びプログラム | |
US8437542B2 (en) | Image processing apparatus, method, and program | |
US7760249B2 (en) | Image recording and playing system and image recording and playing method | |
JP2012105205A (ja) | キーフレーム抽出装置、キーフレーム抽出プログラム、キーフレーム抽出方法、撮像装置、およびサーバ装置 | |
EP2765555B1 (en) | Image evaluation device, image selection device, image evaluation method, recording medium, and program | |
JP2004005384A (ja) | 画像処理方法、画像処理装置、プログラム及び記録媒体、自動トリミング装置、並びに肖像写真撮影装置 | |
WO2015196681A1 (zh) | 一种图片处理方法及电子设备 | |
US20190104222A1 (en) | Information processing apparatus, control method, and storage medium | |
JP4966167B2 (ja) | 画像評価装置及びこの画像評価装置を有するカメラ | |
JP2021111228A (ja) | 学習装置、学習方法、及びプログラム | |
CN108132935B (zh) | 图像分类方法及图像展示方法 | |
JP2004023656A (ja) | 画像処理装置、画像処理方法、及び、プログラム | |
JP2007080136A (ja) | 画像内に表現された被写体の特定 | |
JP2010173323A (ja) | 印刷装置 | |
CN110222207B (zh) | 图片的整理方法、装置和智能终端 | |
JP4770965B2 (ja) | 画像マッチング装置、およびカメラ | |
JP2010245923A (ja) | 被写体追尾装置、およびカメラ | |
Liao | A sharpness measure for image quality assessment using average effective number of neighbors | |
Fan | Image forensics on exchangeable image file format header |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A625 | Written request for application examination (by other person) |
Free format text: JAPANESE INTERMEDIATE CODE: A625 Effective date: 20101025 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20111117 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120111 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120316 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120330 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4966167 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150406 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |