JP4327827B2 - 映像記録再生システムおよび映像記録再生方法 - Google Patents

Description

この発明は、デジタルカメラや携帯電話器等の映像を取り扱うことできる機器における映像記録再生システムに係り、特にメモリに記録される映像データを削除するに便利な映像記録再生システムおよび映像記録再生方法に関する。

従来の映像記録再生システムとして取り扱われる、例えばデジタルカメラの場合、再生および消去が簡単にできることから、人物等の同一被写体に対して多数の映像（写真）データを取得することが多い。このため、メモリ不足が生じた際には、多数の映像の中から取扱者自身が削除する映像を選定して映像データの削除がなされるようになっている。すなわち、取扱者にてこの映像データの削除を行うに場合は、映像データの１枚１枚を取扱者にて先ずチェックしなければならないようになっている。

この種の映像記録再生システムとして例えば特許文献１に開示されているものがある。特許文献１に示される映像記録再生システム１は、図９〜図１１に示すように、写真撮影したデータを取扱者自身にて自動的にプリントアウトできるラボシステムに適用された例である。

図９は、映像記録再生システム１におけるシステムの制御系全体を示す機能ブロック図である。図１０は、図９に示す映像処理部の機能ブロック図である。図１１は、図９におけるグループ化処理ルーチンのフロー図である。

映像記録再生システム１は、図９に示すように、映像データが入力される入力部２、入力された映像データをイメージデータに変換するデータ変換器３、この変換されたイメージデータに所定の映像処理を施す映像処理部４、映像処理後のデータを記憶するメモリ部５、入力された映像データを表示し、任意のモード設定を行うための表示部６、所望の映像を出力制御する出力部７、プリント料金を演算する料金演算部８、所定の料金が投入されたかどうかを判断する料金投入分９および各ブロック２〜９の全体制御を行う制御部１０とから構成される。

映像処理部４は、図１０に示すように、特徴抽出部１１と、類似度判定部１２と、グループ化部１０と、撮影状態判定部１４とから構成される。

このように構成された映像記録再生システム１は、図１１に示すように、グループ化処理ルーチンに従って映像処理がなされる。すなわち処理が開始されると、図示しない映像が表示される画面においてグルーピングモードが選択されたか否かが判別される＜ステップ１＞。

グルーピングモードが選択されている場合には、グループ化の基準がシーンであるか否かを判別する＜ステップ２＞。

シーンを判別した場合、入力されたＲＧＢデータが色相、明度、彩度に変換処理する＜ステップ３＞。

そして、各映像のＨ，Ｖ，Ｃ毎にヒストグラムを作成する＜ステップ４＞。

第１ページ目映像データがヒストグラムの作成が完了すると、この作成されたヒストグラムのデータをメモリ部に格納する。そして、次ページ以降のページについても、順次ヒストグラムのデータを作成してメモリ部に格納し、全ページの映像データについてＨ，Ｖ，Ｃのパターン作成と記憶処理を行う＜ステップ５＞。

メモリ部から全ページの映像データについてのＨ，Ｖ，Ｃのヒストグラムパターンを読み出す＜ステップ６＞。

次に、各ページの映像毎にパターンマッチングを行う＜ステップ７＞。

比較する映像のヒストグラムパターンの差異が閾値未満であるか否かを判定する＜ステップ８＞。

その結果、閾値未満であった場合には、これらのページの映像は同一シーンが撮影されたものであると判断する＜ステップ９＞。

このヒストグラムパターンの読み出し、パターンマッチングおよび同一シーンの判定を全てのページの映像データに対して終了するまで繰り返す＜ステップ１０＞。

全ての映像について同一シーンの判定が終了すると、同一シーンであると判定された写真映像がメモリ上でグループ化される＜ステップ１１＞。

このように、映像記録再生システム１によれば、以上の＜ステップ１＞〜＜ステップ１１＞による処理により、数多くの写真データがあった場合にも人手を使うことなく、自動的且つ簡単に近似のシーン毎にグループ化することができるようになっている。
特開２０００−１３７７２２号公報

従来の映像記録再生システム１によれば、数多くの写真データがあった場合にでも人手を使うことなく、自動的且つ簡単に近似するシーン毎にグループ化できるので、所望する映像を選択する場合に、グループ単位で大まかにデータ検索できる。

従って、取扱者において見ようとする映像データや、削除しようとする映像データの選別作業が取扱者によって比較的容易に行うことができる。

しかしながら、映像記録再生システム１によれば、グループ単位で大まかにデータ検索できたとしても、そのグループ単位の検索対象となる生の映像データ全数を取扱者により一つずつ目視確認しなければならず、特に映像データ量が多い場合には、その確認作業に手間取り相当の労力を要していた。

本発明は、以上の点に鑑みてなされたもので、映像処理再生システムである、例えばカメラにて撮影し、映像データメモリに蓄えられた多数の映像データの検索作業の自動化を向上させることで、取扱者による映像データの検索作業をより一層容易に行なうことができる映像記録再生システムおよび映像記録再生方法を提供することを目的とする。

上記目的を達成するために、本発明に係る映像記録再生システムは、映像を撮影する撮影部と、前記撮像部で撮影された映像データを記憶する映像データ記憶部と、映像データ記憶部に記憶された前記映像データを検索し、互いに類似していない画像データを非類似画像として登録する演算処理部と、登録された前記非類似画像をサムネイル画像として表示する映像表示部と、を具備し、前記演算処理部は、前記非類似画像として登録しようとする対象画像が複数ある場合において、（ａ）前記対象画像の１つと既に登録されている前記非類似画像との類似度を、登録されている総ての前記非類似画像に対して算出し、（ｂ）算出した前記類似度が所定の閾値よりも低い場合はそれらの類似度を累積して類似度累積値をさらに算出し、（ｃ）前記複数の対象画像の中で最も低い前記類似度累積値を示す対象画像を前記非類画像として新たに登録し、前記（ａ）から（ｂ）の処理を、前記非類画像の登録数が予め指定されている所定数に達するまで繰り返す、ことを特徴とする。

本発明に係る映像記録再生システムによれば、映像データメモリに蓄えられた多数の映像データをサムネイル画像として映像表示部に表示できるので、取扱者にとって映像データの検索作業や不要画像の削除が容易且つ簡便に行うことができる映像記録再生システムおよび映像記録再生方法を提供することができる。

本発明の映像記録再生システムの実施形態を添付図面を参照して説明する。

図１は、本発明の映像記録再生システム２０の概要を示すブロック図である。図２は、本発明の映像記録再生システム２０の演算処理部における機能を示すブロック図である。図３は、映像記録再生システム２０による映像削除候補選定機能を説明するフロー図である。

図１に示す映像記録再生システム２０は、取扱者が簡単に取り扱うことのできる、例えばＣＣＤカメラや携帯電話のようなカメラ機能付の機器に設けられる映像記録再生システムである。この映像記録再生システム２０は、映像を撮影する撮影部２１と、この撮影部２１により撮影して得た映像データａを演算処理する演算処理部２２と、この演算処理部２２により演算処理して得られた映像処理データａ´に基づき映像表示する映像表示部２３と、前記演算処理部２２にて演算処理して得られた映像処理データａ´をデータ保存する映像データメモリ２４とから構成される。

撮影部２１は、例えば図示しないレンズ装置およびＣＣＤ（撮像素子）が設けられ、静止画像および動画像を取得する光学系を備えたものである。

演算処理部２２は、撮影部２１により撮影された映像データａに基づく映像の非類似映像データａ１を記録する映像データ記憶部２５と、この映像データ記憶部２５に記憶された非類似映像データａ１から特定の代表パターン映像データａｘを抽出して、抽出した映像データａｘと類似する映像データａ１１を作成する映像データ制御部（以下、第１の映像データ作成部という。）２６と、代表パターン映像データａｘに類似した複数の映像データａ１１を抽出して、サムネイル映像データａ４を作成する映像データ処理部（以下、第２の映像データ作成部という。）２７と、各種映像処理のために用いられるＲＡＭ（Random Access Memory）２８と、を備えている。

映像データ記憶部２５は、撮影部２１により撮影された映像データａを一時的に記憶させる働きをなすものである。

第１の映像データ作成部２６は、その機能について図２に示すように、メモリ残量判定機能３１および映像削除候補選定機能３２を有する。

メモリ残量判定機能３１は、演算処理部２２の、例えば映像データ記憶部２５に設けられるもので、例えば１枚の映像を撮影するときに必要なメモリ容量を判定基準とすることができる。なお、このメモリ残量判定機能３１は、ＲＡＭ２８に設けてもよく、更には映像データ記憶部２５とＲＡＭ２８とを協働させて機能させてもよい。

また、映像削除候補選定機能３２は、インデックス作成／映像解析機能３３および非類似映像検索機能３４を有している。

インデックス作成／映像解析機能３３は、映像検索／映像の鮮明度（手ぶれ，ピンボケ，コントラスト不良等）の判別を実行する際に、必要なインデックスデータを作成するモジュールである。すなわち、図４に示すように、映像読み込み処理＜ステップ１＞、映像縮小処理＜ステップ２＞、色空間変換処理＜ステップ３＞、ヒストグラム変換処理（例えば画像のカラーヒストグラム化）＜ステップ４ａ＞、エッジ検出処理＜ステップ４ｂ＞およびファイル出力処理＜ステップ５＞の各ステップを踏むことにより得られるものである。

具体的には、映像読み込み処理＜ステップ１＞で読み込まれる映像ファイルは、例えばＢＭＰ（Bit Map）などの非圧縮映像データでもよい。ＪＰＥＧ(Joint Photographic Experts Group)等の（不／可逆）圧縮映像でもよい。

映像縮小処理＜ステップ２＞では、元となる映像から画素を間引くことで映像を縮小し、メモリ消費、演算量の縮小を図り高速化することができる。この場合の、縮小映像のサイズは、例えば３２×３２Pixel程度の大きさにすることができる。

色空間変換処理＜ステップ３＞では、Ｒ・Ｇ・Ｂ（またはＹＣｒＣｂ）色空間よりＨ・Ｓ・Ｂ（色相・彩度・明度）空間色に変換される。

また、ヒストグラム計算処理＜ステップ４ａ＞では、色空間変換された縮小映像に対し、例えば縦横３分割に領域分割を施した領域映像毎にＨ・Ｓ・Ｂそれぞれのヒストグラムを求めるものである。

更に、エッジ検出処理＜ステップ４ｂ＞では、２つの方法がある。そして、何れかで算出された値を映像の鮮明度とすることができる。この方法の１つは、Ｗａｖｅｌｅｔ変換を用いてエッジを検出する手法である。これは、図４＜ステップ４ｂ＞に示すように、色空間処理を施した後、例えば縦横３分割に領域分割を行い、領域映像毎のＨ（色相）成分に対してＷａｖｅｌｅｔ変換を施す。そして、得られたＷａｖｅｌｅｔ係数の対角成分の合計を算出する。

また、２つめの方法は、ラプラシアンフィルタ等のエッジ検出フィルタを用いてエッジ検出する方法である。

具体的には、図４の点線で示すように、映像縮小処理＜ステップ２＞の次のステップからエッジ検出処理＜ステップ４ｂ＞のステップに入るようにする。すなわち、映像縮小処理を施した後、例えば縦横３分割を行い、領域のＲ・Ｇ・Ｂ成分それぞれに対して、例えばラプラシアンフィルタ（画像の先鋭化処理）を適用する。そして、各成分に対してラプラシアンフィルタの値が閾値以上の場合、エッジと判別し、カウントアップする。

更に、ファイル出力処理＜ステップ５＞では、得られたヒストグラム計算値とエッジ検出値をファイル出力するものである。

一方、非類似映像検索機能３４は、図５（Ａ）および（Ｂ）に示すように、先ず映像データＡを非類似映像データａ１（映像データＡ）として１枚与え、先ずその１枚の非類似映像データａ１と検索対象映像データＢとの類似度が所望の閾値以下、且つ最小数である映像データＢを非類似映像データａ２（映像データＢ）として判別し、そこで判別された非類似映像データａ２（映像データＢ）と最初の非類似映像データａ１（映像データＡ）とのそれぞれの類似度を求め、類似度が閾値以内且つ類似度の合計が最小数となった映像データＣを非類似映像データａ３とし、非類似映像データａ１，ａ２，ａ３を代表パターン映像データａｓとして定めることができる機能を有している。

具体的には、図６に示すように、非類似映像データ検索機能を有し、特定された検索対象映像ａの中から任意の１映像を非類似映像として登録する＜ステップ１＞と、１つの非類似映像データａ１に類似するものを抽出する類似度比較計算処理を行う＜ステップ２＞と、この処理の結果、予め基準に定めた閾値以内であればｆｌａｇ＝１とし、類似度累積計算を行うステップを踏むようになっている。

続いて、類似度の累積が適正（例えば最小値）であるかをチェックする＜ステップ３＞。適正であれば、検索対象映像を非類似映像として仮登録する＜ステップ４＞。ここで全ての検索対象映像を検索するか否かをチェックする＜ステップ５＞。なお＜ステップ３＞で、ｆｌａｇ＝０の場合には、この＜ステップ５＞に入る。

次に、＜ステップ５＞が完了すれば、類似度の累積が最適となった検索対象映像を非類似映像として登録する＜ステップ６＞。

次に、＜ステップ６＞にて登録された非類似映像が指定（所望）の登録数に達したかをチェックする＜ステップ７＞。

なお、＜ステップ７＞の段階で指定の登録数に達していない場合には、＜ステップ２＞の段階に戻るようになる。すなわち、検索対象映像データから１映像データを読み込む＜ステップ８＞。

次に、上述の＜ステップ７＞で登録された非類似映像データから１映像データを読み込む＜ステップ９＞。そして、ＲＡＭ２８に、計算済の類似度データがあるかをチェックする＜ステップ１０＞。すなわち、ＲＡＭ２８上に既に非類似映像データと検索対象映像データとのヒストグラムの差分値（計算値）が保持されている場合、その類似度が閾値以内かどうか判別する＜ステップ１１＞。閾値以内であればｆｌａｇ＝１として類似度累積計算する＜ステップ１２＞。閾値以外であればｆｌａｇ＝０として処理を中止する。そして、登録された全ての非類似映像データを検索したかをチェックする＜ステップ１３＞を踏む。

なお、ＲＡＭ２８上に、差分値が保持されていない場合には、検索対象映像データを読み込み、その非類似映像データと検索対象映像データとのヒストグラムの差分を計算する＜ステップ１４＞。そして、ＲＡＭ２８に、類似度を記憶させる＜ステップ１５＞を踏む。

このように、＜ステップ１＞〜＜ステップ１３＞乃至は＜ステップ１＞〜＜ステップ１５＞を踏むことにより、非類似映像検索機能３４が発揮される。

類似映像検索機能３５は、図２に示すように、撮影部２１により撮影された映像データａおよび映像データ記憶部２５に記憶された映像データａの中から、１つの非類似映像データａ１を特定することにより、この特定された非類似映像データａ１を代表パターン映像データａｘとして認識（映像データ記憶部２５に記憶）し、この認識された代表パターン映像データａｘに対して類似する映像データａを検索する機能を有するものである。

具体的には、図７に示すように、先ず任意の映像１枚を読み込む＜ステップ１＞。このとき、実際に読み込むデータは、任意の映像に対応するインデックス作成／映像解析部３３で得られたインデックスデータである。類似度比較計算処理＜ステップ２ａ＞では、検索対象映像に対応するインデックスデータを読み込み＜ステップ２ｂ＞、キー映像とのヒストグラムの差分を計算する。このときの差分が閾値以上の映像を類似映像として判別する＜ステップ２ｃ＞機能を発揮するものである。

一方、ＲＡＭ２８は、第１の映像データ作成部２６にて登録された、１つの非類似映像データａ１に類似する所要数の映像データａ１１の類似度比較計算処理にあたって、類似度のレベル（度数閾値）基準となるデータを保存するものである。このデータは、取扱者により任意に類似度のレベルが選択設定することができるようになっている。

一方、映像表示部２３は、演算処理部２２から出力される各種の映像データ、すなわち、映像処理データａ´，非類似映像データａ１（ａ１１），サムネイル映像データａ４，代表パターン映像データａｘのそれぞれを入力して画面表示されるものである。

また、映像データメモリ２４は、第１の映像データ作成部２６にて認識された代表パターン映像データａｘを複数記憶することができるもので、例えば取扱者にて任意に選定した４つの代表パターン映像データａｘが記憶される。

次に、映像記録再生システム２０の作用について、図１〜図３および図８を参照して説明する。

図８は、映像記録再生システム２０の映像表示部２３に表示される映像データａの代表パターン映像のサムネイル映像ａｓを例示する図で、（Ａ）は、代表パターン映像のサムネイル画像ａｓを、（Ｂ）は、（Ａ）における１つのサムネイル画像ａｓ１に含まれる複数の画像（例えば６つの画像）を示す図である。

図１に示すように、撮影部２１にて被写体を撮影すると、撮影部２１にて被写体の映像データａを生成し、演算処理部２２へ送信する。映像データａを受信した演算処理部２２は、第１の映像データ作成部２６にてメモリ残量判定および映像削除候補選定を行う。メモリ残量が必要量ないと判断されれば、映像削除候補選定機能３２を働かせる。この映像削除候補選定機能３２による映像削除候補の選定にあたっては、先ず、図２に示すインデックス作成／映像解析機能３３により、インデックス作成／映像解析を行う。

次に、インデックス作成／映像解析がなされてから以後について、図３を参照して説明する。

図２に示すインデックス作成／映像解析機能３３によるインデックス作成／映像解析により、所定基準（閾値）以下の映像データａ１を抽出する＜ステップ１＞。

次に、この抽出された映像データａ１の中から所望の１つまたは２つ以上の代表パターン映像データａｘを選定して、この代表パターン映像データａｘに類似する映像データａ１を検索して抽出する＜ステップ２＞。

この抽出された映像データａ１をエッジ判別処理する＜ステップ３＞。

次に、図８（Ａ）に示すように、非類似映像からなるサムネイル画像ａｓ（映像Ａ〜Ｆ）を、映像表示部２３に画面表示する＜ステップ４＞。

続いて、サムネイル画像ａｓの中の、例えばＡ画像ａｓ１を選択し、この複数枚（例えば画像Ａ１〜Ａ６の６枚）を、図８（Ｂ）に示すように表示する。このＡ画像ａｓ１の複数枚（画像Ａ１〜Ａ６）の内、画像Ａ１〜Ａ３には、削除を可能とする削除候補アイコンＩ１〜Ｉ３がそれぞれ表示される＜ステップ５＞。

これらの削除候補アイコンＩ１〜Ｉ３は、Ａ画像ａｓ１の中で、例えば相対的に画質レベルの低いものに対して自動的に付加される。従って、映像記録再生システム２０の取扱者にて、画像Ａ１〜Ａ３の何れか、または全部が不要であれば、削除候補アイコンＩ１〜Ｉ３をクリックして削除することができる。

なお、図８に示すサムネイル画像（複数に縮小画像化される絵柄の映像）ａｓの画像Ａ〜Ｆのそれぞれに付加されたｘ／ｙは、母数ｙ（例えば６（枚））に対して削除候補対象となる不鮮明画像数ｘ（例えば３（枚））を表している。

本発明の映像記録再生システム２０によれば、映像を撮影する撮影部２１と、この撮影部２１により撮影して得た映像データａを演算処理する演算処理部２２と、この演算処理部２２により演算処理して得られた映像処理データａ´に基づき映像表示する映像表示部２３と、前記映像処理データａ´をデータ保存する映像データメモリ２４とを備え、演算処理部２２は、撮影部２１により撮影された映像データａに基づく映像からインデックス作成／映像解析した結果から所定の閾値以下の映像データａの中から所定の映像データａ１を記録する映像データ記憶部２７と、この映像データ記憶部２７に記憶された映像データａ１から抽出して代表パターン映像データａｘとし、この代表パターン映像データａｘに類似した複数の映像データａ１を抽出して、サムネイル映像データａ４を作成する映像データ作成部２６（２７）とを備えた構成であるから、映像データメモリ２４に蓄えられた多数の映像データａをサムネイル画像ａｓとして映像表示部２３に表示できるので、取扱者にとって映像データａの検索作業や不要画像の削除が容易且つ簡便に行うことができる映像記録再生システムを提供することができる。

また、映像記録再生システム２０によれば、映像処理再生システムである、例えばカメラ２０に撮影し、映像データメモリ２４に蓄えられた多数の映像データａの検索作業の自動化をより一層向上させることができ、取扱者にとって映像データａの検索作業がより一層容易に行なうことができる。

更に、映像記録再生システム２０の第２の映像データ作成部は、非類似映像データａ１の中から特定された代表パターン映像データａｘに類似した複数の映像データａ１１を抽出してグルーピングすると共に、このグルーピングされた映像データａ１１に対して、例えばエッジ判別手法を用いて映像データａ１１の鮮明，不鮮明を相対的に判別できる機能を備え、映像表示部２３側に表示することができるようにしたから、映像記録再生システムである、例えばカメラ２０の取扱者にとって、自動的に抽出される映像データａ１１の映像の鮮明度の向上によって、映像データの検索作業がより一層容易に行なうことができる。

更にまた、代表パターン映像データａｘに類似する映像データを判別して画像表示部２３に表示可能に設けるにあたって、画像表示部２３には、図示しないが代表パターン映像ａｓに類似する画像を見たり、削除することのできる削除候補アイコンを付設することにより一層使い勝手をよくすることができる。

更にまた、映像記録再生システム２０における映像記録再生方法によれば、記録された映像データａに対して非類似映像データａ１の検索を行うステップと、この検索により得られた映像データａ１から代表パターン映像データａｘを選定するステップと、この代表パターン映像データａｘに類似するサムネイル映像データａ４を検索するステップと、この検索されたサムネイル映像データａ４に基づくサムネイル画像ａｓを表示するステップと、この表示されたサムネイル画像ａｓ毎に類似する画像をグルーピングするステップと、このグルーピングされた複数の画像ａｓ１を不鮮明度を基準に相対的に判別するステップとを具備する映像記録再生方法であるから、映像データメモリ２４に蓄えられた多数の映像データａをサムネイル画像ａｓとして映像表示部に表示することができるので、取扱者にとって映像データの検索作業や不要画像の削除が容易且つ簡便に行うことができる。

また、映像記録再生システム２０における映像記録再生方法によれば、記録された映像データａに対して非類似映像データａ１の検索を行うステップと、この検索により得られた映像データａ１から代表パターン映像データａｓを選定するステップと、この代表パターン映像データａｓに類似するサムネイル映像データａ４を検索するステップと、この検索されたサムネイル映像データａ４に基づくサムネイル画像ａｓを表示するステップと、この表示されたサムネイル画像ａｓ毎に類似する画像をグルーピングするステップと、このグルーピングされた複数の画像ａｓ１を不鮮明度を基準に相対的に判別し、この判別結果を、前記複数の画像ａｓ１別に画像表示するステップとを具備する映像記録再生方法であるから、映像記録再生システムである、例えばカメラ２０の取扱者にとって、自動的に抽出される映像データａ１１の映像の鮮明度の向上によって、映像データの検索作業がより一層容易に行なうことができると共に、画質そのものが取扱者にて目視にて容易に判別することができるように、例えばサムネイル画像ａｓそのものの不鮮明のままで表示することができる他、映像データメモリ２４に蓄えられた多種の映像データａに基づくサムネイル画像ａｓとして映像表示部２３に表示することができるので、取扱者にとって映像データａの検索作業や不要画像の削除が容易且つ簡便に行うことができる。

なお、本発明の映像記録再生システム２０によれば、上述した実施形態のものに限られない。すなわち、映像記録再生システムとして例示したカメラ２０は、必ずしも撮影部２１を備える必要はなく、映像処理再生専用の装置であってもよい。

また、映像記録再生システム２０によれば、インデックス作成／映像解析機能３３および非類似映像検索機能３４を第１の映像データ作成部２６に、類似映像検索機能３５を第２の映像データ作成部２７にて発揮させるようにしたが、上記３機能を上記２つの作成部に特定される必要はなく、上記２つの作成部の何れか一方か、両方を１つにした映像データ作成部であってもよいことは勿論である。

本発明の映像記録再生システムの概要を示すブロック図。 本発明の映像記録再生システムの演算処理部における機能を説明するブロック図。 本発明の映像記録再生システムによる映像削除候補選定機能を説明するフロー図。 本発明の映像記録再生システムによるインデックス作成処理機能を説明するフロー図。 本発明の映像記録再生システムにおける検索対象映像と非類似映像との対比関係を示す図で、（Ａ）は検索対象映像と非類似映像との関係を、（Ｂ）は検索された非類似映像と検索対象映像との相関を示す図。 本発明の映像記録再生システムによる非類似映像検索処理機能を説明するフロー図。 本発明の映像記録再生システムによる類似映像検索処理機能を説明するフロー図。 本発明の映像記録再生システムの映像表示部に表示される映像データの代表パターン映像のサムネイル画像を例示する図で、（Ａ）は代表パターン映像のサムネイル画像を示す図、（Ｂ）は（Ａ）における代表パターン映像のサムネイル画像の１つに含まれる個々の画像を示す図。 従来の映像記録再生システムにおけるシステムの制御系全体を示す機能ブロック図。 図９に示す映像処理部の機能ブロック図。 図９におけるグループ化処理ルーチンのフロー図。

符号の説明

２０ カメラ（映像記録再生システム）
２１ 撮影部
２２ 演算処理部
２３ 映像表示部
２４ 映像データメモリ
２４ａ 映像テーブルデータメモリ
２６ 第１の映像データ作成部（映像データ制御部）
２７ 第２の映像データ作成部（映像データ処理部）
２５ 映像データ記憶部
２８ ＲＡＭ（Random Access Memory）
３０ 演算処理機能
３１ メモリ残量判定機能
３２ 映像削除候補選定機能
３３ インデックス作成／映像解析機能
３４ 非類似映像検索機能
３５ 類似映像検索機能
Ａ１〜Ａ６ 画像
ａ 映像データ
ａ´ 映像処理データ
ａ１（ａ１１），ａ２，ａ３ 非類似映像データ
ａ４（ａ４１） サムネイル映像データ
ａｘ 代表パターン映像データ
ａｓ（ａｓ１） サムネイル画像
Ｉ１〜Ｉ３ 削除候補アイコン

Claims (8)

1. 映像を撮影する撮影部と、
   前記撮像部で撮影された映像データを記憶する映像データ記憶部と、
   映像データ記憶部に記憶された前記映像データを検索し、互いに類似していない画像データを非類似画像として登録する演算処理部と、
   登録された前記非類似画像をサムネイル画像として表示する映像表示部と、
   を具備し、
   前記演算処理部は、
   前記非類似画像として登録しようとする対象画像が複数ある場合において、
   （ａ）前記対象画像の１つと既に登録されている前記非類似画像との類似度を、登録されている総ての前記非類似画像に対して算出し、
   （ｂ）算出した前記類似度が所定の閾値よりも低い場合はそれらの類似度を累積して類似度累積値をさらに算出し、
   （ｃ）前記複数の対象画像の中で最も低い前記類似度累積値を示す対象画像を前記非類画像として新たに登録し、
   前記（ａ）から（ｂ）の処理を、前記非類似画像の登録数が予め指定されている所定数に達するまで繰り返す、
   ことを特徴とする映像記録再生システム。
2. 前記演算処理部は、
   （ｄ）登録されている前記非類似画像の１つを特定し、
   （ｅ）特定した前記非類似画像と映像データ記憶部に記憶される夫々の前記映像データに対して前記類似度を求め、求めた前記類似度が所定の閾値よりも高い映像データを、特定した前記非類似画像のグループに属する類似画像として選択し、登録する、
   ことを特徴とする請求項１記載の映像記録再生システム。
3. 前記類似度は、色相、彩度、及び明度の少なくとも１つのヒストグラムの差に基づいて算出される値であり、比較する２つの画像において前記ヒストグラムの差が大きい場合には前記２つの画像の前記類似度は低い値を示し、前記ヒストグラムの差が小さい場合には前記類似度は高い値を示す、
   ことを特徴とする請求項１又は２に記載の映像記録再生システム。
4. 前記演算処理部は、
   同一のグループに属する前記類似画像に対して、鮮明、不鮮明を相対的に判別し、
   前記映像表示部は、
   前記類似画像のうち、不鮮明であると判別された画像を識別可能に表示する、
   ことを特徴とする請求項２記載の映像記録再生システム。
5. 映像を撮影し、
   撮影して映像データを記憶し、
   記憶したされた前記映像データを検索し、互いに類似していない画像データを非類似画像として登録し、
   登録した前記非類似画像をサムネイル画像として表示する、
   ステップを具備し、
   を具備し、
   前記登録するステップは、
   前記非類似画像として登録しようとする対象画像が複数ある場合において、
   （ａ）前記対象画像の１つと既に登録されている前記非類似画像との類似度を、登録されている総ての前記非類似画像に対して算出し、
   （ｂ）算出した前記類似度が所定の閾値よりも低い場合はそれらの類似度を累積して類似度累積値をさらに算出し、
   （ｃ）前記複数の対象画像の中で最も低い前記類似度累積値を示す対象画像を前記非類画像として新たに登録し、
   前記（ａ）から（ｂ）の処理を、前記非類似画像の登録数が予め指定されている所定数に達するまで繰り返す、
   ことを特徴とする映像記録再生方法。
6. 前記登録するステップは、
   （ｄ）登録されている前記非類似画像の１つを特定し、
   （ｅ）特定した前記非類似画像と映像データ記憶部に記憶される夫々の前記映像データに対して前記類似度を求め、求めた前記類似度が所定の閾値よりも高い映像データを、特定した前記非類似画像のグループに属する類似画像として選択し、登録する、
   ステップをさらに備えたことを特徴とする請求項５記載の映像記録再生システム。
7. 前記類似度は、色相、彩度、及び明度の少なくとも１つのヒストグラムの差に基づいて算出される値であり、比較する２つの画像において前記ヒストグラムの差が大きい場合には前記２つの画像の前記類似度は低い値を示し、前記ヒストグラムの差が小さい場合には前記類似度は高い値を示す、
   ことを特徴とする請求項５又は６に記載の映像記録再生方法。
8. 前記登録するステップは、
   同一のグループに属する前記類似画像に対して、鮮明、不鮮明を相対的に判別し、
   前記表示するステップは、
   前記類似画像のうち、不鮮明であると判別された画像を識別可能に表示する、
   ことを特徴とする請求項６記載の映像記録再生方法。

Images