JP5423305B2 - 画像評価装置及びカメラ - Google Patents
画像評価装置及びカメラ Download PDFInfo
- Publication number
- JP5423305B2 JP5423305B2 JP2009237106A JP2009237106A JP5423305B2 JP 5423305 B2 JP5423305 B2 JP 5423305B2 JP 2009237106 A JP2009237106 A JP 2009237106A JP 2009237106 A JP2009237106 A JP 2009237106A JP 5423305 B2 JP5423305 B2 JP 5423305B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- evaluation
- images
- frequency
- frequency distribution
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000011156 evaluation Methods 0.000 title claims description 669
- 238000009826 distribution Methods 0.000 claims description 310
- 239000013598 vector Substances 0.000 claims description 292
- 238000003384 imaging method Methods 0.000 claims description 73
- 230000008859 change Effects 0.000 claims description 62
- 238000012937 correction Methods 0.000 claims description 52
- 239000006185 dispersion Substances 0.000 claims description 48
- 238000001514 detection method Methods 0.000 claims description 37
- 230000007246 mechanism Effects 0.000 claims description 13
- 238000000605 extraction Methods 0.000 claims description 10
- 230000002708 enhancing effect Effects 0.000 claims description 6
- 238000011161 development Methods 0.000 claims description 5
- 238000010586 diagram Methods 0.000 description 50
- 238000000034 method Methods 0.000 description 43
- 238000012545 processing Methods 0.000 description 39
- 230000008569 process Effects 0.000 description 19
- 230000006870 function Effects 0.000 description 11
- 230000001965 increasing effect Effects 0.000 description 10
- 239000000284 extract Substances 0.000 description 9
- 230000003287 optical effect Effects 0.000 description 6
- 230000035945 sensitivity Effects 0.000 description 5
- 230000000694 effects Effects 0.000 description 4
- 208000003443 Unconsciousness Diseases 0.000 description 3
- 238000005259 measurement Methods 0.000 description 3
- 238000005375 photometry Methods 0.000 description 3
- 238000007781 pre-processing Methods 0.000 description 3
- 230000002123 temporal effect Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 230000000994 depressogenic effect Effects 0.000 description 2
- 230000001815 facial effect Effects 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 238000003825 pressing Methods 0.000 description 2
- 238000011867 re-evaluation Methods 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 238000012854 evaluation process Methods 0.000 description 1
- 238000003702 image correction Methods 0.000 description 1
- 230000009191 jumping Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000001454 recorded image Methods 0.000 description 1
- 230000011514 reflex Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/21—Intermediate information storage
- H04N1/2104—Intermediate information storage for one or a few pictures
- H04N1/2112—Intermediate information storage for one or a few pictures using still video cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/223—Analysis of motion using block-matching
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/418—External card to be used in combination with the client device, e.g. for conditional access
- H04N21/4184—External card to be used in combination with the client device, e.g. for conditional access providing storage capabilities, e.g. memory stick
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/4223—Cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
- H04N21/4334—Recording operations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/14—Picture signal circuitry for video frequency region
- H04N5/144—Movement detection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/765—Interface circuits between an apparatus for recording and another apparatus
- H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
- H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30168—Image quality inspection
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Studio Devices (AREA)
- Television Signal Processing For Recording (AREA)
Description
請求項2に記載の画像評価装置は、カメラの撮影画面内の被写体を、前記カメラの撮像手段が所定時間間隔で連続的に複数フレーム撮像したときの複数の画像を記憶する記憶手段と、前記記憶手段に記憶している複数の画像を、複数の前記画像を撮像した際に前記撮影画面内で前記被写体が時系列的に変化している状態を示す特徴量に基づいて評価する画像評価手段と、を備え、前記記憶手段は、複数の前記画像が撮像されたときの、各画像におけるデフォーカス量を前記画像と共に記憶しており、前記画像評価手段は、前記記憶手段に記憶している複数の前記画像から、前記撮影画面内に設定された複数の焦点検出位置で検出されたデフォーカス量の変化に基づいて、前記被写体の前記撮影画面内における相対移動状態を算出し、前記相対移動状態を前記特徴量として評価することを特徴とする。
請求項3に記載の画像評価装置は、カメラの撮影画面内の被写体を、前記カメラの撮像手段が所定時間間隔で連続的に複数フレーム撮像したときの複数の画像を記憶する記憶手段と、前記記憶手段に記憶している複数の画像を、複数の前記画像を撮像した際に前記撮影画面内で前記被写体が時系列的に変化している状態を示す特徴量に基づいて評価する画像評価手段と、を備え、前記画像評価手段は、前記記憶手段に記憶している複数の前記画像から、各画像を複数の分割領域に分割したときの各分割領域のフレーム間で生じる動きベクトルの度数分布を形成する、閾値度数以上の度数をもつピーク度数の個数を算出し、前記ピーク度数の個数に基づいて、前記評価を行なうことを特徴とする。
請求項4に記載の画像評価装置は、カメラの撮影画面内の被写体を、前記カメラの撮像手段が所定時間間隔で連続的に複数フレーム撮像したときの複数の画像を記憶する記憶手段と、前記記憶手段に記憶している複数の画像を、複数の前記画像を撮像した際に前記撮影画面内で前記被写体が時系列的に変化している状態を示す特徴量に基づいて評価する画像評価手段と、を備え、前記画像評価手段は、前記記憶手段に記憶している複数の前記画像から、各画像を複数の分割領域に分割したときの各分割領域のフレーム間で生じる動きベクトルの度数分布を形成する、閾値度数以上の度数をもつピーク度数の個数を算出し、当該ピーク度数の個数に基づいて、前記評価を行うと共に、前記動きベクトルの度数分布を形成する、閾値度数以上の度数をもつピーク度数の個数が変化してから所定時間内に撮像された画像に対する評価を、その他の画像に対する評価よりも相対的に高くすることを特徴とする。
請求項5に記載の画像評価装置は、カメラの撮影画面内の被写体を、前記カメラの撮像手段が所定時間間隔で連続的に複数フレーム撮像したときの複数の画像を記憶する記憶手段と、前記記憶手段に記憶している複数の画像を、複数の前記画像を撮像した際に前記撮影画面内で前記被写体が時系列的に変化している状態を示す特徴量に基づいて評価する画像評価手段と、を備え、前記画像評価手段は、前記記憶手段に記憶している複数の前記画像から、各画像を複数の分割領域に分割したときの各分割領域のフレーム間で生じる動きベクトルの度数分布を特徴量として算出すると共に、前記動きベクトルの度数分布と、好ましい画像の評価基準として予め設定されている動きベクトルのモデル度数分布との類似性に基づいて、前記評価を行うことを特徴とする。
請求項6に記載の画像評価装置は、カメラの撮影画面内の被写体を、前記カメラの撮像手段が所定時間間隔で連続的に複数フレーム撮像したときの複数の画像を記憶する記憶手段と、前記記憶手段に記憶している複数の画像を、複数の前記画像を撮像した際に前記撮影画面内で前記被写体が時系列的に変化している状態を示す特徴量に基づいて評価する画像評価手段と、を備え、前記画像評価手段は、前記画像を複数の分割領域に分割したときの各分割領域のフレーム間で生じる動きベクトルの度数分布における分散度を前記特徴量とし、前記動きベクトルの度数分布における分散度と、好ましい画像の評価基準として予め設定されている動きベクトルのモデル度数分布における分散度との類似性に基づいて、前記評価を行うことを特徴とする。
請求項7に記載の画像評価装置は、カメラの撮影画面内の被写体を、前記カメラの撮像手段が所定時間間隔で連続的に複数フレーム撮像したときの複数の画像を記憶する記憶手段と、前記記憶手段に記憶している複数の画像を、複数の前記画像を撮像した際に前記撮影画面内で前記被写体が時系列的に変化している状態を示す特徴量に基づいて評価する画像評価手段と、を備え、前記画像評価手段は、前記記憶手段に記憶している複数の前記画像から、各画像を複数の分割領域に分割したときの各分割領域のフレーム間で生じる動きベクトルの度数分布を算出すると共に、閾値度数以上の度数量をもつピーク度数で形成される、前記動きベクトルの度数分布を抽出し、前記動きベクトルの度数分布に含まれる前記ピーク度数の度数量の変化量と、前記度数量の変化量の評価基準とに基づいて、前記評価を行うことを特徴とする。
請求項8に記載の画像評価装置は、カメラの撮影画面内の被写体を、前記カメラの撮像手段が所定時間間隔で連続的に複数フレーム撮像したときの複数の画像を記憶する記憶手段と、前記記憶手段に記憶している複数の画像を、複数の前記画像を撮像した際に前記撮影画面内で前記被写体が時系列的に変化している状態を示す特徴量に基づいて評価する画像評価手段と、を備え、前記画像評価手段は、1つの画像に対して、互いに異なる複数の評価手法を用いて評価する機構を備え、前記評価の対象となった複数の前記画像において、同一の評価手法による評価が他の評価手法の評価よりも高い画像が予め決められた複数枚連続している場合は、同一の前記評価手法による評価を、他の前記評価手法による評価よりも高くして、複数の前記画像に対する評価を行うことを特徴とする。
請求項9に記載の画像評価装置は、カメラの撮影画面内の被写体を、前記カメラの撮像手段が所定時間間隔で連続的に複数フレーム撮像したときの複数の画像を記憶する記憶手段と、前記記憶手段に記憶している複数の画像を、複数の前記画像を撮像した際に前記撮影画面内で前記被写体が時系列的に変化している状態を示す特徴量に基づいて評価する画像評価手段と、を備え、前記画像評価手段は、1つの画像に対して、互いに異なる複数の評価手法を用いて評価する機構を備え、前記評価の対象となった複数の前記画像に対して、他の評価手法よりも高評価を与えている評価手法で、且つ複数の前記評価手法の中で、複数の前記画像に対して高評価を与えている割合が最も多い評価手法による評価を、他の前記評価手法による評価よりも相対的に高くして、複数の前記画像に対する評価を行うことを特徴とする。
請求項10に記載の画像評価装置は、カメラの撮影画面内の被写体を、前記カメラの撮像手段が所定時間間隔で連続的に複数フレーム撮像したときの複数の画像を記憶する記憶手段と、前記記憶手段に記憶している複数の画像を、複数の前記画像を撮像した際に前記撮影画面内で前記被写体が時系列的に変化している状態を示す特徴量に基づいて評価する画像評価手段と、前記記憶手段に記憶した複数の画像の評価結果の中に、補正を要する評価項目が存在する場合は、前記評価項目に基づいて前記カメラで撮像する際の条件が補正されるように制御する撮像条件補正手段を備えること、を特徴とする。
請求項11に記載の画像評価装置は、カメラの撮影画面内の被写体を、前記カメラの撮像手段が所定時間間隔で連続的に複数フレーム撮像したときの複数の画像を記憶する記憶手段と、前記記憶手段に記憶している複数の画像を、複数の前記画像を撮像した際に前記撮影画面内で前記被写体が時系列的に変化している状態を示す特徴量に基づいて評価する画像評価手段と、少なくとも前記記憶手段に記憶した画像、及び前記画像に関する補正情報を表示する表示手段と、前記記憶手段に記憶した画像の評価結果を分析して、前記画像の評価結果をより高めるための補正情報を抽出する補正情報抽出手段と、を備え、前記画像評価手段は、前記記憶手段に記憶した画像と、前記補正情報抽出手段により抽出された前記画像の補正情報とを前記表示手段に表示させること、を特徴とする。
請求項12に記載の画像評価装置は、請求項5に記載の画像評価装置において、前記画像評価手段は、前記画像の中央付近の領域における前記動きベクトルの度数分布と、前記中央付近の領域において好ましい画像の評価基準として予め設定されている動きベクトルのモデル度数分布との類似性に基づいて、前記評価を行うことを特徴とする。
請求項13に記載の画像評価装置は、請求項5に記載の画像評価装置において、前記画像評価手段は、前記画像の中央付近にあり、且つ背景でない領域と色が似ていて、当該領域と前記色の連続性を有する領域について前記動きベクトルの度数分布を前記特徴量として算出することを特徴とする。
請求項14に記載の画像評価装置は、請求項5、12又は13のいずれか一項に記載の画像評価装置において、前記画像評価手段は、前記動きベクトルの度数分布に含まれる、撮影画面の動き成分を除去することを特徴とする。
請求項15に記載の画像評価装置は、請求項5、12乃至14のいずれか一項に記載の画像評価装置において、前記画像評価手段は、前記動きベクトルの度数分布と前記動きベクトルのモデル度数分布とをそれぞれ2次元のグラフに変換すると共に、当該2次元のグラフの展開領域を複数の分割領域に分割し、2次元のグラフに変換した前記動きベクトルの度数分布及び前記好ましい画像の評価基準として予め設定されている動きベクトルのモデル度数分布について、対応する前記分割領域毎に度数差の絶対値を算出し、当該絶対値の和を前記類似性とすることを特徴とする。
請求項16に記載の画像評価装置は、カメラの撮影画面内の被写体を、前記カメラの撮像手段が所定時間間隔で連続的に複数フレーム撮像したときの複数の画像を記憶する記憶手段と、前記記憶手段に記憶している複数の画像を、複数の前記画像を撮像した際に前記撮影画面内で前記被写体が時系列的に変化している状態を示す特徴量に基づいて評価する画像評価手段と、を備え、前記画像評価手段は、 前記画像を複数の分割領域に分割したときの各分割領域のフレーム間で生じる動きベクトルの度数分布における分散度を前記特徴量とし、複数の前記画像から算出した前記動きベクトルの度数分布の中から、閾値度数以上の度数量をもつピーク度数に基づいて形成される前記動きベクトルの度数分布を抽出し、当該動きベクトルの度数分布における分散度と、好ましい画像の評価基準として予め設定されている動きベクトルのモデル度数分布における分散度との類似性に基づいて、前記評価を行うことを特徴とする。
請求項17に記載の画像評価装置は、請求項5、7、12乃至16のいずれか一項に記載の画像評価装置において、前記画像評価手段は、前記評価の対象となった画像のうち、ユーザにより選択された画像の動きベクトルの度数分布の傾向に基づいて、好ましい画像の評価基準として予め設定されている動きベクトルのモデル度数分布を更新することを特徴とする。
請求項18に記載の画像評価装置は、カメラの撮影画面内の被写体を、前記カメラの撮像手段が所定時間間隔で連続的に複数フレーム撮像したときの複数の画像を記憶する記憶手段と、前記記憶手段に記憶している複数の画像を、複数の前記画像を撮像した際に前記撮影画面内で前記被写体が時系列的に変化している状態を示す特徴量に基づいて評価する画像評価手段と、を備え、前記画像評価手段は、前記画像を複数の分割領域に分割したときの各分割領域のフレーム間で生じる動きベクトルの度数分布における分散度を前記特徴量とし、前記動きベクトルの度数分布における分散度と、好ましい画像の評価基準として予め設定されている動きベクトルのモデル度数分布における分散度との類似性に基づいて、前記評価を行うと共に、前記評価の対象となった画像のうち、ユーザにより選択された画像の動きベクトルの度数分布における分散度の傾向に基づいて、好ましい画像の評価基準として予め設定されている動きベクトルのモデル度数分布における分散度を更新することを特徴とする。
請求項19に記載の画像評価装置は、請求項16に記載の画像評価装置において、前記画像評価手段は、前記評価の対象となった画像のうち、ユーザにより選択された画像の動きベクトルの度数分布に含まれるピーク度数の度数量に基づいて、前記評価基準として設定された動きベクトルのモデル度数分布を定義する際に使用される、当該モデル度数分布に含まれるピーク度数の度数量を更新することを特徴とする。
請求項20に記載の画像評価装置は、請求項7に記載の画像評価装置において、前記画像評価手段は、前記評価の対象となった画像のうち、ユーザにより選択された画像の動きベクトルの度数分布に含まれるピーク度数の度数量に基づいて、閾値度数以上の度数量をもつピーク度数で形成される、前記動きベクトルの度数分布を抽出する際の前記閾値度数を更新することを特徴とする。
請求項21に記載の画像評価装置は、請求項7又は20に記載の画像評価装置において、前記画像評価手段は、前記評価の対象となった画像のうち、ユーザにより選択された画像の動きベクトルの度数分布に含まれる前記ピーク度数の度数量の変化量に基づいて、前記評価基準を更新することを特徴とする。
請求項22に記載の画像評価装置は、撮像手段により撮像された複数フレームの画像を記憶する記憶手段と、被写体が時系列的に変化している状態を示す特徴量に基づいて、前記記憶手段に記憶されている前記複数フレームの画像を評価する画像評価手段とを備え、
前記記憶手段は、前記撮像手段により撮像される際のデフォーカス量を、前記複数フレームの画像と共に記憶しており、前記画像評価手段は、前記記憶手段に記憶されている前記複数フレームの画像から、各画像を複数の分割領域に分割したときの各分割領域のフレーム間で生じる前記デフォーカス量の変化状態の度数分布を算出し、前記デフォーカス量の変化状態の度数分布を前記特徴量として評価することを特徴とする。
請求項23に記載の画像評価装置は、撮像手段により撮像された複数フレームの画像を記憶する記憶手段と、被写体が時系列的に変化している状態を示す特徴量に基づいて、前記記憶手段に記憶されている前記複数フレームの画像を評価する画像評価手段とを備え、前記記憶手段は、前記撮像手段により撮像される際のデフォーカス量を、前記複数フレームの画像と共に記憶しており、前記画像評価手段は、前記記憶手段に記憶されている前記複数フレームの画像から、複数の焦点検出位置で検出された前記デフォーカス量の変化に基づいて、前記被写体の撮影画面内における相対移動状態を算出し、前記相対移動状態を前記特徴量として評価することを特徴とする。
請求項24に記載の画像評価装置は、撮像手段により撮像された複数フレームの画像を記憶する記憶手段と、被写体が時系列的に変化している状態を示す特徴量に基づいて、前記記憶手段に記憶されている前記複数フレームの画像を評価する画像評価手段とを備え、
前記画像評価手段は、前記記憶手段に記憶されている前記複数フレームの画像から、各画像を複数の分割領域に分割したときの各分割領域のフレーム間で生じる動きベクトルの度数分布を形成する、閾値度数以上の度数をもつピーク度数の個数を算出し、前記ピーク度数の個数に基づいて、前記評価を行なうことを特徴とする。
請求項25に記載の画像評価装置は、撮像手段により撮像された複数フレームの画像を記憶する記憶手段と、被写体が時系列的に変化している状態を示す特徴量に基づいて、前記記憶手段に記憶されている前記複数フレームの画像を評価する画像評価手段とを備え、
前記画像評価手段は、前記記憶手段に記憶されている前記複数フレームの画像から、各画像を複数の分割領域に分割したときの各分割領域のフレーム間で生じる動きベクトルの度数分布を特徴量として算出すると共に、前記動きベクトルの度数分布と、好ましい画像の評価基準として予め設定されている動きベクトルのモデル度数分布との類似性に基づいて、前記評価を行うことを特徴とする。
請求項26に記載の画像評価装置は、撮像手段により撮像された複数フレームの画像を記憶する記憶手段と、被写体が時系列的に変化している状態を示す特徴量に基づいて、前記記憶手段に記憶されている前記複数フレームの画像を評価する画像評価手段とを備え、前記画像評価手段は、前記画像を複数の分割領域に分割したときの各分割領域のフレーム間で生じる動きベクトルの度数分布における分散度を前記特徴量とし、前記動きベクトルの度数分布における分散度と、好ましい画像の評価基準として予め設定されている動きベクトルのモデル度数分布における分散度との類似性に基づいて、前記評価を行うことを特徴とする。
請求項27に記載の画像評価装置は、撮像手段により撮像された複数フレームの画像を記憶する記憶手段と、被写体が時系列的に変化している状態を示す特徴量に基づいて、前記記憶手段に記憶されている前記複数フレームの画像を評価する画像評価手段とを備え、前記画像評価手段は、前記記憶手段に記憶されている前記複数フレームの画像から、各画像を複数の分割領域に分割したときの各分割領域のフレーム間で生じる動きベクトルの度数分布を算出すると共に、閾値度数以上の度数量をもつピーク度数で形成される、前記動きベクトルの度数分布を抽出し、前記動きベクトルの度数分布に含まれる前記ピーク度数の度数量の変化量と、前記度数量の変化量の評価基準とに基づいて、前記評価を行うことを特徴とする。
請求項28に記載の画像評価装置は、撮像手段により撮像された複数フレームの画像を記憶する記憶手段と、被写体が時系列的に変化している状態を示す特徴量に基づいて、前記記憶手段に記憶されている前記複数フレームの画像を評価する画像評価手段とを備え、前記画像評価手段は、1つの画像に対して、互いに異なる複数の評価手法を用いて評価する機構を備え、前記評価の対象となった複数の前記画像において、同一の評価手法による評価が他の評価手法の評価よりも高い画像が予め決められた複数枚連続している場合は、同一の前記評価手法による評価を、他の前記評価手法による評価よりも高くして、複数の前記画像に対する評価を行うことを特徴とする。
請求項29に記載の画像評価装置は、撮像手段により撮像された複数フレームの画像を記憶する記憶手段と、被写体が時系列的に変化している状態を示す特徴量に基づいて、前記記憶手段に記憶されている前記複数フレームの画像を評価する画像評価手段とを備え、前記画像評価手段は、1つの画像に対して、互いに異なる複数の評価手法を用いて評価する機構を備え、前記評価の対象となった複数の前記画像に対して、他の評価手法よりも高評価を与えている評価手法で、且つ複数の前記評価手法の中で、複数の前記画像に対して高評価を与えている割合が最も多い評価手法による評価を、他の前記評価手法による評価よりも相対的に高くして、複数の前記画像に対する評価を行うことを特徴とする。
請求項30に記載の画像評価装置は、撮像手段により撮像された複数フレームの画像を記憶する記憶手段と、被写体が時系列的に変化している状態を示す特徴量に基づいて、前記記憶手段に記憶されている前記複数フレームの画像を評価する画像評価手段と、記記憶手段に記憶されている前記複数フレームの画像の評価結果の中に、補正を要す評価項目が存在する場合は、前記評価項目に基づいて前記撮像手段で撮像する際の条件が補正されるように制御する撮像条件補正手段を備えることを特徴とする。
請求項31に記載の画像評価装置は、撮像手段により撮像された複数フレームの画像を記憶する記憶手段と、被写体が時系列的に変化している状態を示す特徴量に基づいて、前記記憶手段に記憶されている前記複数フレームの画像を評価する画像評価手段と、少なくとも前記記憶手段に記憶されている前記画像、及び前記画像に関する補正情報を表示する表示手段と、前記記憶手段に記憶した画像の評価結果を分析して、前記画像の評価結果をより高めるための補正情報を抽出する補正情報抽出手段と、を備え、前記画像評価手段は、前記記憶手段に記憶されている前記画像と、前記補正情報抽出手段により抽出された前記画像の補正情報とを前記表示手段に表示させること、を特徴とする画像評価装置。
請求項32に記載のカメラは、請求項1乃至31のいずれか一項に記載の前記画像評価装置を備える。
1.1 カメラ1の構成
図1は、実施形態1に係わるカメラの機能的な構成を示すブロック図である。本実施形態1のカメラ1は、カメラボディ2と、レンズ鏡筒3とを備える。カメラ1は、カメラボディ2にレンズ鏡筒3が着脱可能なレンズ交換式カメラとして構成されている。
本実施形態における撮像センサ7は、所定の時間間隔において、後述する撮影フレーム内の被写体の1フレーム分の画像を連続的に複数フレーム撮像する撮像手段として機能する。
本実施形態におけるボディ側マイコン21は、上記の処理以外にも、後述する画像評価手段、撮影条件補正手段、及び補正情報抽出手段としての処理を実行する。
次に、上記のように構成された実施形態1のカメラ1において、画像の撮影から記憶までの一連の処理手順を図2のフローチャートを参照しながら説明する。図2に示すフローチャートの処理は、ボディ側マイコン21により実行される。このフローチャートに基づく処理は、ユーザが不図示の設定画面で画像評価モードの項目を選択し、不図示のレリーズボタンを半押しすることでスタートする。
なお、カメラ1がライブビュー機能を備えている場合は、撮像センサ7で撮像されたライブビュー画面の画像データ(画像)をバッファ25の撮影画像記憶エリアに記憶してもよい。
ステップS108において、ボディ側マイコン21は、画像評価手段の処理として、バッファ25に記憶している画像情報を、動きベクトルやデフォーカス量等の特徴量と、ステップS106で求めた主要被写体の位置とに基づいて評価する。
このように、ピントが後ピン又は前ピンである場合や、ブレがある場合には点数は加算されない。
上述した画像の選択と記憶は、図2のステップS116に引き続いて実行される。ただし、ステップS114において、撮影した画像とその評価結果をバッファ25の撮影画像記憶エリアに記憶する際に、評価結果の点数に基づいて記憶するか否かを選択してもよい。
上記実施形態では、動きベクトルの度数分布を算出し、この度数分布を特徴量として画像を評価する例について説明した。本発明の評価手法はこの例に限らず、以下の実施形態に示すような評価手法を採用することができる。
図6は、デフォーカス量の変化を説明するための概念図である。図7は、光軸方向における被写体の相対的な位置の時間変化を示すグラフ図である。自動車レース等の移動する被写体を撮影する場合は、画面内の測距エリアで検出されたデフォーカス情報の時間変化を観測する。図6に示すように、画面(撮影フレーム)101の中央付近には、フォーカスゾーン102が表示される。このフォーカスゾーン102の中には、不図示の複数の測距エリアが配置されている。
図8(a)、(b)は、被写体の動きベクトルの変化を説明するための概念図である。図9は、動きベクトルのヒストグラムの変化を説明するための概念図である。図10は、動きベクトルの度数分布に含まれるピーク度数の個数の変化を説明するためのグラフ図である。
図11は、撮像した画像における動きベクトルのヒストグラムを説明するための概念図である。図12(a)、(b)は、図10のヒストグラムを2次元化した場合の概念図である。なお、動きベクトルのヒストグラムは、図4や図9に示すように、3次元の図として表わしている。しかしながら、必要に応じて、動きベクトルのヒストグラムを、図12に示すように、2次元の図として表わす。ヒストグラムの説明を容易にするためである。
本実施形態の評価手法では、撮像した画像の動きベクトルの度数分布と、好ましい画像(以下、モデル画像という)の評価基準として予め設定された動きベクトルのモデル度数分布との類似性に基づいて評価を行う。
次に、撮像した画像における動きベクトルの度数分布と、モデル画像における動きベクトルのモデル度数分布との類似性を判断する手法について説明する。
図15(a)〜(c)は、モデル画像の度数分布を用いた評価において高い評価となった画像の例を示す説明図である。図15(a)〜(c)に示す各画像には、画面101に主要被写体である自動車104が同じ大きさ、同じ撮影アングルで記録されている。モデル画像の度数分布を用いた評価において、図15(a)〜(c)に示す3つの画像は、いずれも高い評価となっている。この場合、ボディ側マイコン21は、画面101の中央付近に、所定の大きさをもつ領域を設定する。図15では、画面101の約30パーセント程度の大きさをもつ領域103を画面101の中央付近に設定した例を示す。
図16(a)、(b)は、モデル画像の度数分布を用いた評価において高い評価となった画像の例を示す説明図である。図16(a)、(b)に示す各画像は、画面101に、主要被写体であるスケーターが同じ位置に、ほぼ同じ大きさで記録されている。図16(a)、(b)において、左側の図は撮像された画像を示し、右側の図は分割された画面内におけるメインブロック及びサブブロックの位置を示している。左右の図において、画面101は同じ割合で分割されている。
図16では、メインブロックとして、ブロックAが特定される。ブロックAは、本例では3つのブロックで構成される。図16(a)では、サブブロックとしてA1が特定される。図16(b)では、サブブロックとしてA1〜A5が特定される。
図17(a)は、撮像した画像における動きベクトルの度数分布とその分散度を示す概念図である。図17(b)は、モデル画像におけるモデル度数分布とその分散度を示す概念図である。本実施形態の評価手法では、撮像した画像における動きベクトルの度数分布の分散度と、モデル画像における度数分布の分散度との類似性に基づいて評価を行う。
なお、ボディ側マイコン21は、予め記憶しているモデル画像における動きベクトルのモデル度数分布に基づいて、モデル画像における分散度を算出してもよい。
図18(a)、(b)は、カメラ1が連続して撮像した画像における動きベクトルの度数分布を示すヒストグラムである。カメラ1は、(a)、(b)の順に画像を撮像している。本実施形態の評価手法では、撮像した画像における動きベクトルの度数分布を算出し、その度数分布に含まれるピーク度数の度数量の変化量に基づいて画像の評価を行う。
1.4.1 モデル画像の度数分布を更新
1.3.3の実施形態では、好ましい画像(モデル画像)の評価基準として予め設定された動きベクトルのモデル度数分布を用いた画像の評価について説明した。このモデル画像の動きベクトルのモデル度数分布は、ユーザにより選択された画像に基づいて更新してもよい。
1.3.7の実施形態では、モデル画像における度数分布の分散度に基づく画像の評価について説明した。このモデル画像における度数分布の分散度は、ユーザにより選択された画像に基づいて更新してもよい。
1.3.7の実施形態において、モデル画像における動きベクトルの度数分布に含まれるピーク度数の度数量は、ユーザにより選択された画像に基づいて更新してもよい。
1.3.8の実施形態において、ユーザにより選択された画像の動きベクトルの度数分布に含まれるピーク度数の度数量に基づいて、閾値度数を更新するようにしてもよい。
なお、予め設定されている閾値度数thを、ユーザにより選択された画像の動きベクトルの度数分布に含まれるピーク度数において、最も大きな度数量に基づいて更新してもよい。
1.5.1 評価手法の自動学習(1)
本実施形態では、評価結果の連続性に基づいて評価手法の重み付けを変更する場合について説明する。
本実施形態では、複数の評価手法により評価を行う際に、高い評価結果を与えた割合に基づいて評価手法の重み付けを変更する場合について説明する。
本実施形態によれば、多くの画像に対して高い評価を与えている、より好ましい評価手法による評価を、以後の画像に対する評価に反映させることができる。
本実施形態では、複数の評価手法により評価を行う際に、ユーザにより選択された画像に基づいて、評価手法の重み付けを変更する場合について説明する。
E=W1×(評価手法A)+W2×(評価手法B)W3×(評価手法C)・・・(1)
ボディ側マイコン21は、撮影した画像の評価結果を、その後の撮影に役立つようにユーザにフィードバックする。以下、2つの実施形態について説明する。
本実施形態は、例えば、レリーズボタンを押し続けて、連続して複数枚の画像を撮影する場合に、途中から撮影条件を自動的に補正する処理を行うものである。このために、ボディ側マイコン21は、撮影条件補正手段の処理として、バッファ25に記憶した複数の画像の評価結果の中に補正を要する評価項目が存在する場合に、この評価項目に基づいて、撮像センサ7で撮像する際の条件を補正する処理を実行する。ここで、撮像する際の条件とは、絞り値やシャッタスピード等の露出条件、焦点調節、撮影感度等の各種条件が含まれる。
本実施形態は、画像の評価結果に基づいて、ユーザに対し最適な画像を撮影するための設定や操作等を提案するものである。このために、ボディ側マイコン21は、補正情報抽出手段の処理として、バッファ25に記憶している画像の評価結果を分析して、その画像の評価結果をより高めるための補正情報を抽出する処理を実行する。次に、ボディ側マイコン21は、この補正情報を表示パネル28に表示する処理を実行する。ここで、補正情報は、1又は複数の情報からなり、文字や記号によるメッセージ表示、バーグラフ表示、グラフィック表示等のほか、音声等も含まれる。
(1)バッファ25に記憶している画像情報を、複数フレームの画像を撮像した際に撮影フレーム内で時系列に変化する特徴量に基づいて評価するようにしている。このため、顔等の画像の部分的な特徴に注目して画像を評価する手法に比べて、画像全体を総合的に評価することができる。この結果、より良い画像の評価を行うことができる。
2.1 カメラ1Aの構成
図26は実施形態2に係わるカメラの機能的な構成を示すブロック図である。図26に示すカメラ1Aでは、焦点調節や測光、露出に関する各部の動作を1つのマイコン29で制御している。また、撮像センサ7は測光(露光)だけでなく、焦点検出、電子シャッタとしての機能を備えている。したがって、本実施形態におけるマイコン29は、図1の焦点検出部22、シャッタ制御部23としての機能を備えている。
次に、上記のように構成された実施形態2のカメラ1Aにおいて、画像の撮影から記憶までの一連の処理手順を図27のフローチャートを参照しながら説明する。図27に示すフローチャートの処理は、マイコン29により実行される。このフローチャートに基づく処理は、ユーザが不図示の設定画面で画像評価モードの項目を選択したうえで、不図示のレリーズボタンが半押しされたときからスタートする。以下の説明において、実施形態1と同じ処理については、実施形態1の対応するステップ番号を示して、重複した説明を省略する。
ステップS302〜ステップS305におけるマイコン29の処理は、図2のステップS103〜ステップS106の処理と同じである。
以上説明した実施形態に限定されることなく、本発明は以下に示すような種々の変形や変更が可能であり、それらも本発明の範囲内である。
実施形態1では、レリーズボタンの半押し中に画像の評価を行うようにしている。これに対し、レリーズボタンの半押し中は画像の評価に必要な各種演算のみを行い、レリーズボタンが全押しされた後に、バッファ25に記憶している画像について評価を行うようにしてもよい。
また更に、動きベクトルのヒストグラム分布上におけるピーク度数の、ヒストグラム分布座標上における位置のうち、原点(各ヒストグラム分布のうち、手振れなどカメラ本体の動き成分を除去したヒストグラム分布の原点)から最も離間した位置のピーク度数と、その原点との間の絶対的な距離(長さ)が、他の画像に比して相対的に大きい画像の評価を高めるようにしてもよい。これにより、画面内の被写体が急激に変化(移動や変形等)をしたときの画像の評価を高めることができる。図面を用いて具体的に説明すると、例えば、図18(a)において、原点から最も離れたピーク度数はピーク度数Cであるので、この画像における絶対距離は原点とピーク度数Cとを直線で結んだ長さになる。そして、不図示ではあるが、この図18(a)に示したピーク度数Cよりも原点からの距離が遠い位置にピーク度数を有するヒストグラム分布を形成する画像があった場合には、その画像の評価を相対的に高めに評価することになる。
なお、実施形態1、2及び変形形態は、適宜に組み合わせて用いることもできるが、ここでは詳細な説明を省略する。また、本発明は、上記各実施形態に限定されない。
Claims (32)
- カメラの撮影画面内の被写体を、前記カメラの撮像手段が所定時間間隔で連続的に複数フレーム撮像したときの複数の画像を記憶する記憶手段と、
前記記憶手段に記憶している複数の画像を、複数の前記画像を撮像した際に前記撮影画面内で前記被写体が時系列的に変化している状態を示す特徴量に基づいて評価する画像評価手段と、
を備え、
前記記憶手段は、複数の前記画像が撮像されたときの、各画像におけるデフォーカス量を前記画像と共に記憶しており、
前記画像評価手段は、
前記記憶手段に記憶している複数の前記画像から、各画像を複数の分割領域に分割したときの各分割領域のフレーム間で生じる前記デフォーカス量の変化状態の度数分布を算出し、前記デフォーカス量の変化状態の度数分布を、前記特徴量として評価することを特徴とする画像評価装置。 - カメラの撮影画面内の被写体を、前記カメラの撮像手段が所定時間間隔で連続的に複数フレーム撮像したときの複数の画像を記憶する記憶手段と、
前記記憶手段に記憶している複数の画像を、複数の前記画像を撮像した際に前記撮影画面内で前記被写体が時系列的に変化している状態を示す特徴量に基づいて評価する画像評価手段と、
を備え、
前記記憶手段は、複数の前記画像が撮像されたときの、各画像におけるデフォーカス量を前記画像と共に記憶しており、
前記画像評価手段は、
前記記憶手段に記憶している複数の前記画像から、前記撮影画面内に設定された複数の焦点検出位置で検出されたデフォーカス量の変化に基づいて、前記被写体の前記撮影画面内における相対移動状態を算出し、前記相対移動状態を前記特徴量として評価することを特徴とする画像評価装置。 - カメラの撮影画面内の被写体を、前記カメラの撮像手段が所定時間間隔で連続的に複数フレーム撮像したときの複数の画像を記憶する記憶手段と、
前記記憶手段に記憶している複数の画像を、複数の前記画像を撮像した際に前記撮影画面内で前記被写体が時系列的に変化している状態を示す特徴量に基づいて評価する画像評価手段と、
を備え、
前記画像評価手段は、
前記記憶手段に記憶している複数の前記画像から、各画像を複数の分割領域に分割したときの各分割領域のフレーム間で生じる動きベクトルの度数分布を形成する、閾値度数以上の度数をもつピーク度数の個数を算出し、前記ピーク度数の個数に基づいて、前記評価を行なうことを特徴とする画像評価装置。 - カメラの撮影画面内の被写体を、前記カメラの撮像手段が所定時間間隔で連続的に複数フレーム撮像したときの複数の画像を記憶する記憶手段と、
前記記憶手段に記憶している複数の画像を、複数の前記画像を撮像した際に前記撮影画面内で前記被写体が時系列的に変化している状態を示す特徴量に基づいて評価する画像評価手段と、
を備え、
前記画像評価手段は、
前記記憶手段に記憶している複数の前記画像から、各画像を複数の分割領域に分割したときの各分割領域のフレーム間で生じる動きベクトルの度数分布を形成する、閾値度数以上の度数をもつピーク度数の個数を算出し、当該ピーク度数の個数に基づいて、前記評価を行うと共に、
前記動きベクトルの度数分布を形成する、閾値度数以上の度数をもつピーク度数の個数が変化してから所定時間内に撮像された画像に対する評価を、その他の画像に対する評価よりも相対的に高くすることを特徴とする画像評価装置。 - カメラの撮影画面内の被写体を、前記カメラの撮像手段が所定時間間隔で連続的に複数フレーム撮像したときの複数の画像を記憶する記憶手段と、
前記記憶手段に記憶している複数の画像を、複数の前記画像を撮像した際に前記撮影画面内で前記被写体が時系列的に変化している状態を示す特徴量に基づいて評価する画像評価手段と、
を備え、
前記画像評価手段は、
前記記憶手段に記憶している複数の前記画像から、各画像を複数の分割領域に分割したときの各分割領域のフレーム間で生じる動きベクトルの度数分布を特徴量として算出すると共に、前記動きベクトルの度数分布と、好ましい画像の評価基準として予め設定されている動きベクトルのモデル度数分布との類似性に基づいて、前記評価を行うことを特徴とする画像評価装置。 - カメラの撮影画面内の被写体を、前記カメラの撮像手段が所定時間間隔で連続的に複数フレーム撮像したときの複数の画像を記憶する記憶手段と、
前記記憶手段に記憶している複数の画像を、複数の前記画像を撮像した際に前記撮影画面内で前記被写体が時系列的に変化している状態を示す特徴量に基づいて評価する画像評価手段と、
を備え、
前記画像評価手段は、
前記画像を複数の分割領域に分割したときの各分割領域のフレーム間で生じる動きベクトルの度数分布における分散度を前記特徴量とし、
前記動きベクトルの度数分布における分散度と、好ましい画像の評価基準として予め設定されている動きベクトルのモデル度数分布における分散度との類似性に基づいて、前記評価を行うことを特徴とする画像評価装置。 - カメラの撮影画面内の被写体を、前記カメラの撮像手段が所定時間間隔で連続的に複数フレーム撮像したときの複数の画像を記憶する記憶手段と、
前記記憶手段に記憶している複数の画像を、複数の前記画像を撮像した際に前記撮影画面内で前記被写体が時系列的に変化している状態を示す特徴量に基づいて評価する画像評価手段と、
を備え、
前記画像評価手段は、
前記記憶手段に記憶している複数の前記画像から、各画像を複数の分割領域に分割したときの各分割領域のフレーム間で生じる動きベクトルの度数分布を算出すると共に、閾値度数以上の度数量をもつピーク度数で形成される、前記動きベクトルの度数分布を抽出し、前記動きベクトルの度数分布に含まれる前記ピーク度数の度数量の変化量と、前記度数量の変化量の評価基準とに基づいて、前記評価を行うことを特徴とする画像評価装置。 - カメラの撮影画面内の被写体を、前記カメラの撮像手段が所定時間間隔で連続的に複数フレーム撮像したときの複数の画像を記憶する記憶手段と、
前記記憶手段に記憶している複数の画像を、複数の前記画像を撮像した際に前記撮影画面内で前記被写体が時系列的に変化している状態を示す特徴量に基づいて評価する画像評価手段と、
を備え、
前記画像評価手段は、1つの画像に対して、互いに異なる複数の評価手法を用いて評価する機構を備え、
前記評価の対象となった複数の前記画像において、同一の評価手法による評価が他の評価手法の評価よりも高い画像が予め決められた複数枚連続している場合は、同一の前記評価手法による評価を、他の前記評価手法による評価よりも高くして、複数の前記画像に対する評価を行うことを特徴とする画像評価装置。 - カメラの撮影画面内の被写体を、前記カメラの撮像手段が所定時間間隔で連続的に複数フレーム撮像したときの複数の画像を記憶する記憶手段と、
前記記憶手段に記憶している複数の画像を、複数の前記画像を撮像した際に前記撮影画面内で前記被写体が時系列的に変化している状態を示す特徴量に基づいて評価する画像評価手段と、
を備え、
前記画像評価手段は、1つの画像に対して、互いに異なる複数の評価手法を用いて評価する機構を備え、
前記評価の対象となった複数の前記画像に対して、他の評価手法よりも高評価を与えている評価手法で、且つ複数の前記評価手法の中で、複数の前記画像に対して高評価を与えている割合が最も多い評価手法による評価を、他の前記評価手法による評価よりも相対的に高くして、複数の前記画像に対する評価を行うことを特徴とする画像評価装置。 - カメラの撮影画面内の被写体を、前記カメラの撮像手段が所定時間間隔で連続的に複数フレーム撮像したときの複数の画像を記憶する記憶手段と、
前記記憶手段に記憶している複数の画像を、複数の前記画像を撮像した際に前記撮影画面内で前記被写体が時系列的に変化している状態を示す特徴量に基づいて評価する画像評価手段と、
前記記憶手段に記憶した複数の画像の評価結果の中に、補正を要する評価項目が存在する場合は、前記評価項目に基づいて前記カメラで撮像する際の条件が補正されるように制御する撮像条件補正手段を備えること、
を特徴とする画像評価装置。 - カメラの撮影画面内の被写体を、前記カメラの撮像手段が所定時間間隔で連続的に複数フレーム撮像したときの複数の画像を記憶する記憶手段と、
前記記憶手段に記憶している複数の画像を、複数の前記画像を撮像した際に前記撮影画面内で前記被写体が時系列的に変化している状態を示す特徴量に基づいて評価する画像評価手段と、
少なくとも前記記憶手段に記憶した画像、及び前記画像に関する補正情報を表示する表示手段と、
前記記憶手段に記憶した画像の評価結果を分析して、前記画像の評価結果をより高めるための補正情報を抽出する補正情報抽出手段と、
を備え、
前記画像評価手段は、
前記記憶手段に記憶した画像と、前記補正情報抽出手段により抽出された前記画像の補正情報とを前記表示手段に表示させること、
を特徴とする画像評価装置。 - 請求項5に記載の画像評価装置において、
前記画像評価手段は、
前記画像の中央付近の領域における前記動きベクトルの度数分布と、前記中央付近の領域において好ましい画像の評価基準として予め設定されている動きベクトルのモデル度数分布との類似性に基づいて、前記評価を行うことを特徴とする画像評価装置。 - 請求項5に記載の画像評価装置において、
前記画像評価手段は、
前記画像の中央付近にあり、且つ背景でない領域と色が似ていて、当該領域と前記色の連続性を有する領域について前記動きベクトルの度数分布を前記特徴量として算出することを特徴とする画像評価装置。 - 請求項5、12又は13のいずれか一項に記載の画像評価装置において、
前記画像評価手段は、
前記動きベクトルの度数分布に含まれる、撮影画面の動き成分を除去することを特徴とする画像評価装置。 - 請求項5、12乃至14のいずれか一項に記載の画像評価装置において、
前記画像評価手段は、
前記動きベクトルの度数分布と前記動きベクトルのモデル度数分布とをそれぞれ2次元のグラフに変換すると共に、当該2次元のグラフの展開領域を複数の分割領域に分割し、2次元のグラフに変換した前記動きベクトルの度数分布及び前記好ましい画像の評価基準として予め設定されている動きベクトルのモデル度数分布について、対応する前記分割領域毎に度数差の絶対値を算出し、当該絶対値の和を前記類似性とすることを特徴とする画像評価装置。 - カメラの撮影画面内の被写体を、前記カメラの撮像手段が所定時間間隔で連続的に複数フレーム撮像したときの複数の画像を記憶する記憶手段と、
前記記憶手段に記憶している複数の画像を、複数の前記画像を撮像した際に前記撮影画面内で前記被写体が時系列的に変化している状態を示す特徴量に基づいて評価する画像評価手段と、
を備え、
前記画像評価手段は、
前記画像を複数の分割領域に分割したときの各分割領域のフレーム間で生じる動きベクトルの度数分布における分散度を前記特徴量とし、
複数の前記画像から算出した前記動きベクトルの度数分布の中から、閾値度数以上の度数量をもつピーク度数に基づいて形成される前記動きベクトルの度数分布を抽出し、当該動きベクトルの度数分布における分散度と、好ましい画像の評価基準として予め設定されている動きベクトルのモデル度数分布における分散度との類似性に基づいて、前記評価を行うことを特徴とする画像評価装置。 - 請求項5、7、12乃至16のいずれか一項に記載の画像評価装置において、
前記画像評価手段は、
前記評価の対象となった画像のうち、ユーザにより選択された画像の動きベクトルの度数分布の傾向に基づいて、好ましい画像の評価基準として予め設定されている動きベクトルのモデル度数分布を更新することを特徴とする画像評価装置。 - カメラの撮影画面内の被写体を、前記カメラの撮像手段が所定時間間隔で連続的に複数フレーム撮像したときの複数の画像を記憶する記憶手段と、
前記記憶手段に記憶している複数の画像を、複数の前記画像を撮像した際に前記撮影画面内で前記被写体が時系列的に変化している状態を示す特徴量に基づいて評価する画像評価手段と、
を備え、
前記画像評価手段は、
前記画像を複数の分割領域に分割したときの各分割領域のフレーム間で生じる動きベクトルの度数分布における分散度を前記特徴量とし、
前記動きベクトルの度数分布における分散度と、好ましい画像の評価基準として予め設定されている動きベクトルのモデル度数分布における分散度との類似性に基づいて、前記評価を行うと共に、
前記評価の対象となった画像のうち、ユーザにより選択された画像の動きベクトルの度数分布における分散度の傾向に基づいて、好ましい画像の評価基準として予め設定されている動きベクトルのモデル度数分布における分散度を更新することを特徴とする画像評価装置。 - 請求項16に記載の画像評価装置において、
前記画像評価手段は、
前記評価の対象となった画像のうち、ユーザにより選択された画像の動きベクトルの度数分布に含まれるピーク度数の度数量に基づいて、前記評価基準として設定された動きベクトルのモデル度数分布を定義する際に使用される、当該モデル度数分布に含まれるピーク度数の度数量を更新することを特徴とする画像評価装置。 - 請求項7に記載の画像評価装置において、
前記画像評価手段は、
前記評価の対象となった画像のうち、ユーザにより選択された画像の動きベクトルの度数分布に含まれるピーク度数の度数量に基づいて、閾値度数以上の度数量をもつピーク度数で形成される、前記動きベクトルの度数分布を抽出する際の前記閾値度数を更新することを特徴とする画像評価装置。 - 請求項7又は20に記載の画像評価装置において、
前記画像評価手段は、
前記評価の対象となった画像のうち、ユーザにより選択された画像の動きベクトルの度数分布に含まれる前記ピーク度数の度数量の変化量に基づいて、前記評価基準を更新することを特徴とする画像評価装置。 - 撮像手段により撮像された複数フレームの画像を記憶する記憶手段と、
被写体が時系列的に変化している状態を示す特徴量に基づいて、前記記憶手段に記憶されている前記複数フレームの画像を評価する画像評価手段とを備え、
前記記憶手段は、前記撮像手段により撮像される際のデフォーカス量を、前記複数フレームの画像と共に記憶しており、
前記画像評価手段は、前記記憶手段に記憶されている前記複数フレームの画像から、各画像を複数の分割領域に分割したときの各分割領域のフレーム間で生じる前記デフォーカス量の変化状態の度数分布を算出し、前記デフォーカス量の変化状態の度数分布を前記特徴量として評価することを特徴とする画像評価装置。 - 撮像手段により撮像された複数フレームの画像を記憶する記憶手段と、
被写体が時系列的に変化している状態を示す特徴量に基づいて、前記記憶手段に記憶されている前記複数フレームの画像を評価する画像評価手段とを備え、
前記記憶手段は、前記撮像手段により撮像される際のデフォーカス量を、前記複数フレームの画像と共に記憶しており、
前記画像評価手段は、前記記憶手段に記憶されている前記複数フレームの画像から、複数の焦点検出位置で検出された前記デフォーカス量の変化に基づいて、前記被写体の撮影画面内における相対移動状態を算出し、前記相対移動状態を前記特徴量として評価することを特徴とする画像評価装置。 - 撮像手段により撮像された複数フレームの画像を記憶する記憶手段と、
被写体が時系列的に変化している状態を示す特徴量に基づいて、前記記憶手段に記憶されている前記複数フレームの画像を評価する画像評価手段とを備え、
前記画像評価手段は、前記記憶手段に記憶されている前記複数フレームの画像から、各画像を複数の分割領域に分割したときの各分割領域のフレーム間で生じる動きベクトルの度数分布を形成する、閾値度数以上の度数をもつピーク度数の個数を算出し、前記ピーク度数の個数に基づいて、前記評価を行なうことを特徴とする画像評価装置。 - 撮像手段により撮像された複数フレームの画像を記憶する記憶手段と、
被写体が時系列的に変化している状態を示す特徴量に基づいて、前記記憶手段に記憶されている前記複数フレームの画像を評価する画像評価手段とを備え、
前記画像評価手段は、前記記憶手段に記憶されている前記複数フレームの画像から、各画像を複数の分割領域に分割したときの各分割領域のフレーム間で生じる動きベクトルの度数分布を特徴量として算出すると共に、前記動きベクトルの度数分布と、好ましい画像の評価基準として予め設定されている動きベクトルのモデル度数分布との類似性に基づいて、前記評価を行うことを特徴とする画像評価装置。 - 撮像手段により撮像された複数フレームの画像を記憶する記憶手段と、
被写体が時系列的に変化している状態を示す特徴量に基づいて、前記記憶手段に記憶されている前記複数フレームの画像を評価する画像評価手段とを備え、
前記画像評価手段は、前記画像を複数の分割領域に分割したときの各分割領域のフレーム間で生じる動きベクトルの度数分布における分散度を前記特徴量とし、前記動きベクトルの度数分布における分散度と、好ましい画像の評価基準として予め設定されている動きベクトルのモデル度数分布における分散度との類似性に基づいて、前記評価を行うことを特徴とする画像評価装置。 - 撮像手段により撮像された複数フレームの画像を記憶する記憶手段と、
被写体が時系列的に変化している状態を示す特徴量に基づいて、前記記憶手段に記憶されている前記複数フレームの画像を評価する画像評価手段とを備え、
前記画像評価手段は、前記記憶手段に記憶されている前記複数フレームの画像から、各画像を複数の分割領域に分割したときの各分割領域のフレーム間で生じる動きベクトルの度数分布を算出すると共に、閾値度数以上の度数量をもつピーク度数で形成される、前記動きベクトルの度数分布を抽出し、前記動きベクトルの度数分布に含まれる前記ピーク度数の度数量の変化量と、前記度数量の変化量の評価基準とに基づいて、前記評価を行うことを特徴とする画像評価装置。 - 撮像手段により撮像された複数フレームの画像を記憶する記憶手段と、
被写体が時系列的に変化している状態を示す特徴量に基づいて、前記記憶手段に記憶されている前記複数フレームの画像を評価する画像評価手段とを備え、
前記画像評価手段は、1つの画像に対して、互いに異なる複数の評価手法を用いて評価する機構を備え、
前記評価の対象となった複数の前記画像において、同一の評価手法による評価が他の評価手法の評価よりも高い画像が予め決められた複数枚連続している場合は、同一の前記評価手法による評価を、他の前記評価手法による評価よりも高くして、複数の前記画像に対する評価を行うことを特徴とする画像評価装置。 - 撮像手段により撮像された複数フレームの画像を記憶する記憶手段と、
被写体が時系列的に変化している状態を示す特徴量に基づいて、前記記憶手段に記憶されている前記複数フレームの画像を評価する画像評価手段とを備え、
前記画像評価手段は、1つの画像に対して、互いに異なる複数の評価手法を用いて評価する機構を備え、
前記評価の対象となった複数の前記画像に対して、他の評価手法よりも高評価を与えている評価手法で、且つ複数の前記評価手法の中で、複数の前記画像に対して高評価を与えている割合が最も多い評価手法による評価を、他の前記評価手法による評価よりも相対的に高くして、複数の前記画像に対する評価を行うことを特徴とする画像評価装置。 - 撮像手段により撮像された複数フレームの画像を記憶する記憶手段と、
被写体が時系列的に変化している状態を示す特徴量に基づいて、前記記憶手段に記憶されている前記複数フレームの画像を評価する画像評価手段と、
前記記憶手段に記憶されている前記複数フレームの画像の評価結果の中に、補正を要する評価項目が存在する場合は、前記評価項目に基づいて前記撮像手段で撮像する際の条件が補正されるように制御する撮像条件補正手段を備えることを特徴とする画像評価装置。 - 撮像手段により撮像された複数フレームの画像を記憶する記憶手段と、
被写体が時系列的に変化している状態を示す特徴量に基づいて、前記記憶手段に記憶されている前記複数フレームの画像を評価する画像評価手段と、
少なくとも前記記憶手段に記憶されている前記画像、及び前記画像に関する補正情報を表示する表示手段と、
前記記憶手段に記憶した画像の評価結果を分析して、前記画像の評価結果をより高めるための補正情報を抽出する補正情報抽出手段と、
を備え、
前記画像評価手段は、
前記記憶手段に記憶されている前記画像と、前記補正情報抽出手段により抽出された前記画像の補正情報とを前記表示手段に表示させること、を特徴とする画像評価装置。 - 請求項1乃至31のいずれか一項に記載の前記画像評価装置を備えるカメラ。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009237106A JP5423305B2 (ja) | 2008-10-16 | 2009-10-14 | 画像評価装置及びカメラ |
US12/588,398 US8929655B2 (en) | 2008-10-16 | 2009-10-14 | Image evaluation apparatus and camera |
US14/104,595 US9565332B2 (en) | 2008-10-16 | 2013-12-12 | Image evaluation apparatus and camera |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008267499 | 2008-10-16 | ||
JP2008267499 | 2008-10-16 | ||
JP2009237106A JP5423305B2 (ja) | 2008-10-16 | 2009-10-14 | 画像評価装置及びカメラ |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2010119097A JP2010119097A (ja) | 2010-05-27 |
JP5423305B2 true JP5423305B2 (ja) | 2014-02-19 |
Family
ID=42240044
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009237106A Active JP5423305B2 (ja) | 2008-10-16 | 2009-10-14 | 画像評価装置及びカメラ |
Country Status (2)
Country | Link |
---|---|
US (2) | US8929655B2 (ja) |
JP (1) | JP5423305B2 (ja) |
Families Citing this family (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5494963B2 (ja) * | 2009-11-09 | 2014-05-21 | 株式会社リコー | カメラシステム |
JP5631106B2 (ja) | 2010-08-18 | 2014-11-26 | キヤノン株式会社 | 画像処理装置、その制御方法、及びプログラム、並びに撮像装置 |
JP2012065128A (ja) * | 2010-09-16 | 2012-03-29 | Nikon Corp | 画像評価装置及び画像評価プログラム |
US20130308829A1 (en) * | 2011-01-24 | 2013-11-21 | Adc Technology Inc. | Still image extraction apparatus |
US8724854B2 (en) * | 2011-04-08 | 2014-05-13 | Adobe Systems Incorporated | Methods and apparatus for robust video stabilization |
JP5665655B2 (ja) * | 2011-05-24 | 2015-02-04 | 株式会社日立製作所 | 画像処理装置及び方法 |
JP5858658B2 (ja) * | 2011-06-20 | 2016-02-10 | キヤノン株式会社 | 撮像装置 |
JP5868053B2 (ja) | 2011-07-23 | 2016-02-24 | キヤノン株式会社 | 画像処理方法、画像処理装置、およびプログラム |
JP2013054430A (ja) * | 2011-09-01 | 2013-03-21 | Nikon Corp | 画像評価装置、撮像装置およびプログラム |
JP2013115668A (ja) | 2011-11-29 | 2013-06-10 | Sony Corp | 画像処理装置、および画像処理方法、並びにプログラム |
US8872898B2 (en) * | 2011-12-14 | 2014-10-28 | Ebay Inc. | Mobile device capture and display of multiple-angle imagery of physical objects |
US9300907B2 (en) * | 2012-07-25 | 2016-03-29 | Unify Gmbh & Co. Kg | Method for handling interference during the transmission of a chronological succession of digital images |
JP6137847B2 (ja) * | 2013-01-28 | 2017-05-31 | オリンパス株式会社 | 撮像装置及び撮像装置の制御方法 |
US20150023230A1 (en) * | 2013-07-19 | 2015-01-22 | Qualcomm Incorporated | Dual sim dual active subscriber identification module with a single transmit chain and dual or single receive chain |
JP6286944B2 (ja) * | 2013-08-28 | 2018-03-07 | ソニー株式会社 | 情報処理装置、撮像装置、情報処理方法、およびプログラム |
JP6448334B2 (ja) * | 2014-12-02 | 2019-01-09 | キヤノン株式会社 | 表示制御装置及び表示制御装置の制御方法 |
JP6465705B2 (ja) * | 2015-03-16 | 2019-02-06 | キヤノン株式会社 | 動きベクトル検出装置、動体角速度算出装置、撮像装置およびレンズ装置 |
JP6446329B2 (ja) * | 2015-06-03 | 2018-12-26 | 株式会社日立製作所 | カメラのキャリブレーション装置、カメラシステム及び、カメラのキャリブレーション方法 |
JP6210106B2 (ja) * | 2015-11-18 | 2017-10-11 | カシオ計算機株式会社 | 撮影装置、画像評価方法及びプログラム |
CN110910340A (zh) * | 2018-08-28 | 2020-03-24 | 奥林巴斯株式会社 | 注解装置和注解方法 |
US10824923B1 (en) * | 2019-01-23 | 2020-11-03 | Facebook Technologies, Llc | System and method for improving localization and object tracking |
US11367169B2 (en) * | 2019-04-26 | 2022-06-21 | Lg Electronics Inc. | Method for processing picture of automatic driving vehicle |
CN111064935B (zh) * | 2019-12-30 | 2022-01-18 | 中祖建设安装工程有限公司 | 一种智慧工地人员姿态检测方法及*** |
CN117041531B (zh) * | 2023-09-04 | 2024-03-15 | 无锡维凯科技有限公司 | 一种基于图像质量评估的手机摄像头聚焦检测方法和*** |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3226020B2 (ja) * | 1997-05-28 | 2001-11-05 | 日本電気株式会社 | 動きベクトル検出装置 |
US6389168B2 (en) * | 1998-10-13 | 2002-05-14 | Hewlett Packard Co | Object-based parsing and indexing of compressed video streams |
JP2000209468A (ja) * | 1999-01-18 | 2000-07-28 | Nikon Corp | 評価表示機能を有する電子カメラ、およびプログラムを記録した記録媒体 |
JP4377472B2 (ja) | 1999-03-08 | 2009-12-02 | 株式会社東芝 | 顔画像処理装置 |
US7327891B2 (en) * | 2001-07-17 | 2008-02-05 | Yesvideo, Inc. | Automatic selection of a visual image or images from a collection of visual images, based on an evaluation of the quality of the visual images |
JP4639043B2 (ja) * | 2003-11-28 | 2011-02-23 | ソニー株式会社 | 動画像編集装置及び動画像編集方法 |
JP2005277981A (ja) | 2004-03-26 | 2005-10-06 | Seiko Epson Corp | 画像処理のための対象画像の選択 |
JP4636887B2 (ja) * | 2005-01-11 | 2011-02-23 | キヤノン株式会社 | 光学機器 |
JP2008165700A (ja) | 2007-01-05 | 2008-07-17 | Seiko Epson Corp | 画像処理装置、電子機器、画像処理システム、画像処理方法、および、プログラム |
JP4826485B2 (ja) * | 2007-01-25 | 2011-11-30 | ソニー株式会社 | 画像保存装置、画像保存方法 |
-
2009
- 2009-10-14 US US12/588,398 patent/US8929655B2/en active Active
- 2009-10-14 JP JP2009237106A patent/JP5423305B2/ja active Active
-
2013
- 2013-12-12 US US14/104,595 patent/US9565332B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US20140098262A1 (en) | 2014-04-10 |
US20100149361A1 (en) | 2010-06-17 |
JP2010119097A (ja) | 2010-05-27 |
US9565332B2 (en) | 2017-02-07 |
US8929655B2 (en) | 2015-01-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5423305B2 (ja) | 画像評価装置及びカメラ | |
JP4196714B2 (ja) | デジタルカメラ | |
KR100924685B1 (ko) | 촬상 장치 및 그 제어 방법 | |
US8538252B2 (en) | Camera | |
KR100839772B1 (ko) | 대상 결정 장치 및 촬상 장치 | |
JP5394296B2 (ja) | 撮像装置及び画像処理方法 | |
JP4582423B2 (ja) | 撮像装置、画像処理装置、撮像方法、及び画像処理方法 | |
US8106995B2 (en) | Image-taking method and apparatus | |
US7973833B2 (en) | System for and method of taking image and computer program | |
KR20070014058A (ko) | 촬상 장치 및 촬상 방법 | |
JP2004320286A (ja) | デジタルカメラ | |
JP2004317699A (ja) | デジタルカメラ | |
JP2007324965A (ja) | デジタルカメラ、撮影制御方法および画像出力システム | |
US20040252223A1 (en) | Image pickup device, image pickup system and image pickup method | |
US7796163B2 (en) | System for and method of taking image based on objective body in a taken image | |
JP5144724B2 (ja) | 撮像装置、画像処理装置、撮像方法、及び画像処理方法 | |
JP2004320285A (ja) | デジタルカメラ | |
CN108471503A (zh) | 摄像设备及其控制方法 | |
US20210158537A1 (en) | Object tracking apparatus and control method thereof | |
JP4567538B2 (ja) | 露出量算出システムならびにその制御方法およびその制御プログラム | |
JP2009252069A (ja) | 画像処理装置、撮像装置、画像処理方法及びプログラム | |
US11523047B2 (en) | Imaging device, imaging method, and program | |
JP2022023643A (ja) | 視線位置処理装置、撮像装置、学習装置、視線位置処理方法、学習方法、及びプログラム | |
US20220272271A1 (en) | Image pickup apparatus capable of keeping focus on subject even when moving direction of subject changes in time series, control method for image pickup apparatus, and storage medium | |
JP2012065128A (ja) | 画像評価装置及び画像評価プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20120220 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20121211 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130516 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130521 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130722 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20131029 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20131111 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 Ref document number: 5423305 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |