WO2012002039A1 - 代表画像決定装置および画像圧縮装置ならびにそれらの動作制御方法およびそのプログラム - Google Patents

Abstract

　異なる視点で撮像された複数の画像の代表画像を決定する。左目用画像のうち右目用画像には現れていない陰領域が検出される。同様に，右目用画像のうち左目用画像には現れていない陰領域が検出される。陰領域の画像の特性と陰領域の画像の特性とから，スコアが算出される。算出されたスコアが高い方の陰領域を含む画像が代表画像とされる。

Description

代表画像決定装置および画像圧縮装置ならびにそれらの動作制御方法およびそのプログラム

　この発明は，代表画像決定装置および画像圧縮装置ならびにそれらの動作制御方法およびそのプログラムに関する。

　立体を撮像して立体画像として表示することが行われるようになってきた。立体画像を表示できない表示装置では立体画像を表わす複数の画像から代表画像を選択し，その選択された代表画像を表示することが考えられる。このために，たとえば，三次元物体を撮像して得られる動画の中から三次元物体の特徴を捉えた画像を選択するものもある（特開２００９−４２９００号公報）。しかしながら，その選択された画像には現れていないが他の画像には重要な被写体が現れている場合がある。さらに，複数の異なる視点での撮像により得られた複数フレームの画像の中から，他の画像には現れていない画像部分を示すオクルージョン領域（陰領域）を抽出し，被写体の輪郭を高精度で求めるものもある（特開平６−２０３１４３号公報）。しかしながら，代表画像を決定することはできない。また，複数の画像について一律の割合で圧縮すると重要な画像の画質が低下することがある。

　この発明は，重要な被写体部分も現れるような代表画像を決定することを目的とする。また，この発明は，重要な画像の画質を低下させないことを目的とする。
　第１の発明による代表画像決定装置は，異なる視点から撮像され，かつ少なくとも一部分が共通する複数の画像のそれぞれの画像から，他の画像に現れていない陰領域を検出する陰領域検出装置（陰領域検出手段），上記陰領域検出装置によって検出される，複数の画像のそれぞれの陰領域に含まれている所定の対象物の割合にもとづいて陰領域の重要度を表わすスコアを算出するスコア算出装置（スコア算出手段），および上記スコア算出装置によって算出されたスコアが高い陰領域を含む画像を代表画像と決定する決定装置（決定手段）を備えていることを特徴とする。
　第１の発明は，上記代表画像決定装置に適した動作制御方法も提供している。すなわち，この方法は，陰領域検出装置が，異なる視点から撮像され，かつ少なくとも一部分が共通する複数の画像のそれぞれの画像から，他の画像に現れていない陰領域を検出し，スコア算出装置が，上記陰領域検出装置によって検出される，複数の画像のそれぞれの陰領域に含まれている所定の対象物の割合にもとづいて陰領域の重要度を表わすスコアを算出し，決定装置が，上記スコア算出装置によって算出されたスコアが高い陰領域を含む画像を代表画像と決定するものである。
　第１の発明は，上記代表画像決定装置の動作制御方法を実施するためのプログラムも提供している。そのようなプログラムを格納した記録媒体を提供するようにしてもよい。
　この発明によると，複数の画像のそれぞれの画像から，他の画像には現れていない陰領域が検出される。複数の画像のそれぞれの画像の陰領域内の画像の所定の対象物の割合にもとづいて陰領域の重要度を表わすスコアが算出される。算出されたスコアが高い陰領域を含む画像が代表画像と決定される。この発明によると，陰領域の画像部分の重要度が高い画像（所定の対象物の割合が多い画像）が代表画像として決定されるので，重要度の高い画像部分（所定の対象物）が現れていない画像が代表画像と決定されてしまうことを未然に防止できる。
　上記スコア算出装置は，たとえば，上記陰領域検出装置によって検出される，複数の画像のそれぞれの陰領域に含まれている所定の対象物の割合と，陰領域内の画像のエッジ強度，陰領域内の画像の彩度，陰領域内の画像の明るさ，陰領域の面積および陰領域内の画像の分散のうち少なくとも一つと，にもとづいて陰領域の重要度を表わすスコアを算出するものである。
　上記スコア算出装置は，たとえば，重複している陰領域のスコアが高くなるように算出するものである。
　上記複数の画像は３フレーム以上の画像の場合には，上記決定装置は，たとえば，上記スコア算出装置によって算出されたスコアが高い陰領域を含む２フレーム以上の画像を代表画像と決定するものである。
　上記スコア算出装置において算出されたスコアが高い陰領域が含まれている画像ほど圧縮の割合が小さくなるように圧縮する圧縮装置をさらに備えてもよい。
　上記決定装置により決定された代表画像の視点近く（代表画像の両側のうち少なくとも一方）の視点から撮像するように報知する第１の報知装置（第１の報知手段）をさらに備えてもよい。
　上記複数の画像は３フレーム以上の画像の場合には，上記決定装置は，たとえば，上記スコア算出装置によって算出されたスコアが高い陰領域を含む２フレームの画像を代表画像と決定するものである。そして，上記決定装置によって決定された２フレームの画像が隣り合う視点で撮像されたかどうかを判定する判定装置（判定手段），および上記判定装置において，上記決定装置によって決定された２フレームの画像が隣り合う視点で撮像されたと判定されたことにより，その２フレームの画像を撮像した２箇所の視点の間の視点からの撮像をするように報知し，上記決定装置によって決定された２フレームの画像が隣り合う視点で撮像されていないと判定されたことによりスコアのもっとも高い陰領域を含む画像の視点近くの視点からの撮像をするように報知する第２の報知装置（第２の報知手段）をさらに備えてもよい。
　上記決定装置は，たとえば，もっとも高い陰領域を含む画像を代表画像と決定するものである。この場合，上記複数の画像のそれぞれの画像を表わす画像データと上記決定装置によって決定された代表画像を識別するデータとを関連づけて記録媒体に記録する記録制御装置（記録制御手段）をさらに備えてもよい。
　上記所定の対象物は，たとえば，顔である。
　第２の発明による画像圧縮装置は，異なる視点から撮像され，かつ少なくとも一部分が共通する複数の画像のそれぞれの画像から，他の画像に現れていない陰領域を検出する陰領域検出装置（陰領域検出手段），上記陰領域検出装置によって検出される，複数の画像のそれぞれの陰領域に含まれている所定の対象物の割合にもとづいて陰領域の重要度を表わすスコアを算出するスコア算出装置（スコア算出手段），および上記スコア算出装置において算出されたスコアが高い陰領域が含まれている画像ほど圧縮の割合が小さくなるように圧縮する圧縮装置（圧縮手段）を備えていることを特徴とする。
　第２の発明は，上記画像圧縮装置に適した動作制御方法も提供している。すなわち，この方法は，陰領域検出装置が，異なる視点から撮像され，かつ少なくとも一部分が共通する複数の画像のそれぞれの画像から，他の画像に現れていない陰領域を検出し，スコア算出装置が，上記陰領域検出装置によって検出される，複数の画像のそれぞれの陰領域に含まれている所定の対象物の割合にもとづいて陰領域の重要度を表わすスコアを算出し，圧縮装置が，上記スコア算出装置において算出されたスコアが高い陰領域が含まれている画像ほど圧縮の割合が小さくなるように圧縮するものである。
　第２の発明は，上記画像圧縮装置の動作制御方法を実施するのに必要なコンピュータが読み取り可能なプログラムも提供している。また，そのようなプログラムを格納した記録媒体も提供するようにしてもよい。
　第２の発明によると，複数の画像のそれぞれの画像から，他の画像には現れていない陰領域が検出される。複数の画像のそれぞれの画像の陰領域内の画像の所定の対象物の割合にもとづいて陰領域の重要度を表わすスコアが算出される。算出されたスコアが高い陰領域が含まれている画像ほど圧縮の割合が小さくなるように圧縮（低圧縮）される。陰領域の重要度が高い画像ほど画質の高い画像が得られる。

　第１ａ図は左目用画像を，第１ｂ図は右目用画像を示している。
　第２図は代表画像決定処理手順を示すフローチャートである。
　第３ａ図は左目用画像を，第３ｂ図は右目用画像を示している。
　第４図から第９図はスコア・テーブルの一例である。
　第１０ａ図から第１０ｃ図は視点の異なる３つの画像を示している。
　第１１図は画像の一例である。
　第１２図および第１３図は代表画像決定処理手順を示すフローチャートである。
　第１４ａ図から第１４ｃ図は，視点の異なる３つの画像を示している。
　第１５図は画像の一例である。
　第１６ａ図から第１６ｃ図は，視点の異なる３つの画像を示している。
　第１７図は画像の一例である。
　第１８図は撮像アシスト・モードの処理手順を示すフローチャートである。
　第１９図は撮像アシスト・モードの処理手順を示すフローチャートである。
　第２０図は立体撮像ディジタル・カメラの電気的構成を示すブロック図である。

　第１ａ図および第１ｂ図は，立体撮像ディジタル・スチル・カメラにより撮像された画像を示している。第１ａ図は再生時に観賞者が左目で見る左目用画像１Ｌの一例で，第１ｂ図は再生時に観賞者が右目で見る右目用画像１Ｒの一例である。これらの左目用画像１Ｌおよび右目用画像１Ｒは異なる視点から撮像されたもので，撮像範囲の一部分が共通している。
　左目用画像１Ｌには，人物像２Ｌおよび３Ｌが含まれている。右目用画像１Ｒには，人物像２Ｒおよび３Ｒが含まれている。左目用画像１Ｌに含まれている人物像２Ｌと右目用画像１Ｒに含まれている人物像２Ｒとが同一人物を表わしており，左目用画像１Ｌに含まれている人物像３Ｌと右目用画像１Ｒに含まれている人物像３Ｒとが同一人物を表わしている。
　左目用画像１Ｌと右目用画像１Ｒとは異なる視点で撮像されている。このために，左目用画像１Ｌに含まれている人物像２Ｌおよび３Ｌの見え方と右目用画像１Ｒに含まれている人物像２Ｒおよび３Ｒの見え方とが異なっている。左目用画像１Ｌには現れているが右目用画像１Ｒには現れていない画像部分がある。逆に右目用画像１Ｒには現れているが左目用画像部分１Ｌには現れていない画像部分がある。
　この実施例は，異なる視点から撮像された複数の画像のうち少なくとも一部分が共通する複数の画像の中から代表画像を決定するものである。第１ａ図および第１ｂ図に示す例では，左目用画像１Ｌまたは右目用画像１Ｒのうち，いずれかの画像が代表画像として決定される。
　第２図は，代表画像を決定する処理手順を示すフローチャートである。
　第１ａ図および第１ｂ図に示すように異なる視点の複数の画像である左目用画像１Ｌおよび右目用画像１Ｒが読み取られる（ステップ１１）。これらの左目用画像１Ｌおよび右目用画像１Ｒを表わす画像データはメモリ・カードなどの記録媒体に記録されており，そのメモリ・カードから読み取られる。もちろん，これらの左目用画像１Ｌおよび右目用画像１Ｒを表わす画像データがメモリ・カードに記録されていずに撮像装置から直接得られるものでもよい。撮像装置は，立体撮像が可能なもので左目用画像１Ｌと右目用画像１Ｒとが一度に得られるものでもよいし，一つの撮像装置を用いて２回撮像することにより左目用画像１Ｌと右目用画像１Ｒとが得られるものでもよい。読み取られた左目用画像１Ｌおよび右目用画像１Ｒのそれぞれの画像から，他の画像には現れていない領域（陰領域ということにする。オクルージョン領域）が検出される（ステップ１２）。
　まず，左目用画像１Ｌの陰領域が検出される（右目用画像１Ｒの陰領域から検出してもよい）。左目用画像１Ｌと右目用画像１Ｒとを比較して，左目用画像１Ｌを構成する画素に対応する画素が右目用画像１Ｒに存在しないような画素で表わされる領域が左目用画像１Ｌの陰領域とされる。
　第３ａ図および第３ｂ図は，陰領域が図示されている左目用画像１Ｌおよび右目用画像１Ｒである。
　第３ａ図に示す左目用画像１Ｌにおいては，人物像２Ｌおよび３Ｌの左側のそれぞれに陰領域４Ｌがハッチングで図示されている。これらの陰領域４Ｌ内の画像部分が右目用画像１Ｒには含まれていないこととなる。
　左目用画像１Ｌの陰領域４Ｌが検出されると，その陰領域４Ｌのスコアが算出される（ステップ１３）。スコアの算出方法については後述する。
　読み取られた複数の画像のすべての画像について陰領域の検出および陰領域のスコアの算出が終了していなければ（ステップ１４でＮＯ），残りの画像について陰領域の検出および陰領域のスコアが算出される。この場合，右目用画像についての陰領域が検出される（ステップ１２）。
　第３ｂ図は，陰領域が図示された右目用画像１Ｒである。
　右目用画像１Ｒを構成する画素に対応する画素が左目用画像１Ｌに存在しないような画素で表わされる領域が右目用画像１Ｒの陰領域４Ｒとされる。第３ｂ図に示す右目用画像１Ｒにおいては，人物像２Ｒおよび３Ｒの右側のそれぞれに陰領域４Ｒがハッチングで図示されている。これらの陰領域４Ｒ内の画像部分が左目用画像１Ｌには含まれていないこととなる。
　左目用画像１Ｌの陰領域４Ｌのスコアおよび右目用画像１Ｒの陰領域４Ｒのスコアがそれぞれ算出される（図２ステップ１３）。スコアの算出方法については後述する。
　読み取られたすべての画像についての陰領域の検出および陰領域のスコアの算出が終了すると（ステップ１４でＹＥＳ），スコアのもっとも高い陰領域を含んでいる画像が代表画像と決定される（ステップ１５）。
　第４図から第９図は，スコア・テーブルの一例である。
　第４図は，陰領域に含まれている顔領域面積比に応じて決定されるスコアＳｆの値を示している。
　陰領域に含まれている顔の割合が０％から４９％，５０％から９９％または１００％であれば，それぞれスコアＳｆは０，４０または１００となる。
　第５図は，陰領域の画像部分の平均エッジ強度に応じて決定されるスコアＳｅの値を示している。
　エッジ強度が０から２５５までのレベルの場合，陰領域の画像部分の平均エッジ強度が０から１２７のレベル，１２８から１９１のレベルまたは１９２から２５５のレベルであれば，それぞれスコアＳｅは０，５０または１００となる。
　第６図は，陰領域の画像部分の平均彩度に応じて決定されるスコアＳｃの値を示している。
　平均彩度のレベルが０から１００までのレベルの場合，陰領域の画像部分の平均彩度が０から５９のレベル，６０から７９のレベルまたは８０から１００のレベルであれば，それぞれスコアは０，５０または１００となる。
　第７図は，陰領域の画像部分の平均明度に応じて決定されるスコアＳｂの値を示している。
　平均明度のレベルが０から１００までのレベルの場合，陰領域の画像部分の平均明度が０から５９のレベル，６０から７９のレベルまたは８０から１００のレベルであれば，それぞれスコアは０，５０または１００となる。
　第８図は，画像全体に対する陰領域の面積比に応じて決定されるスコアＳａの値を示している。
　面積比が０％から９％，１０％から２９％または３０％以上の場合であれば，それぞれスコアＳａは０，５０または１００となる。
　第９図は，陰領域内の画素の分散値に応じて決定されるスコアＳｖの値を示している。
　分散値が０から９９，１００から９９９または１０００以上の場合であれば，それぞれスコアＳｖは１０，６０または１００となる。
　このように，顔領域面積比に応じたスコアＳｆ，平均エッジ強度に応じたスコアＳｅ，平均彩度に応じたスコアＳｃ，平均明度に応じたスコアＳｂ，陰領域の面積比に応じたスコアＳａおよび分散値に応じたスコアＳｖから総合的なスコアＳｔが式１から算出される。式１において，α１からα６は任意の係数である。これらの係数α１からα６は必要に応じて重み付けが行われる。
　Ｓｔ＝α１×Ｓｆ＋α２×Ｓｅ＋α３×Ｓｃ＋α４×Ｓｂ＋α５×Ｓａ＋α６×Ｓｖ・・・式１
　このようにして算出されたスコアＳｔがもっとも高い陰領域を含む画像が代表画像と決定される。
　上述の実施例では，総合的なスコアＳｔを用いて代表画像を決定しているが，顔領域面積比に応じたスコアＳｆ，平均エッジ強度に応じたスコアＳｅ，平均彩度に応じたスコアＳｃ，平均明度に応じたスコアＳｂ，陰領域の面積比に応じたスコアＳａまたは分散値に応じたスコアＳｖのいずれか一つのスコアまたは任意の組み合わせのスコアの和がもっとも高い陰領域を含む画像を代表画像としてもよい。たとえば，陰領域に含まれる顔領域面積比（対象物。顔以外の対象物でもよい）のみにもとづいて得られるスコアＳｆから代表画像を決定してもよい。また，顔領域面積比のスコアＳｆと，平均エッジ強度に応じたスコアＳｅ，平均彩度に応じたスコアＳｃ，平均明度に応じたスコアＳｂ，陰領域の面積比に応じたスコアＳａまたは分散値に応じたスコアＳｖのうち少なくとも一つと，から代表画像を決定してもよい。
　第１０ａ図，第１０ｂ図および第１０ｃ図ならびに第１１図は，変形例を示している。
　この変形例は，３フレームの画像から代表画像を決定するものである。４フレーム以上の画像であっても同様である。
　第１０ａ図，第１０ｂ図および第１０ｃ図は，異なる視点で撮像され，少なくとも一部分の撮像範囲が共通する第１の画像３１Ａ，第２の画像３１Ｂおよび第３の画像３１Ｃの一例である。第２の画像３１Ｂは，被写体に向かって正面から撮像した場合に得られる画像である。第１の画像３１Ａは，第２の画像３１Ｂよりも左側（被写体に向かって左側）からの視点で撮像した場合に得られる画像である。第３の画像３３Ｃは，第２の画像３１Ｂよりも右側（被写体に向かって右側）からの視点で撮像された場合に得られる画像である。
　第１の画像３１Ａには，人物像３２Ａおよび人物像３３Ａが含まれている。第２の画像３１Ｂには，人物像３２Ｂおよび人物像３３Ｂが含まれている。第３の画像３１Ｃには，人物像３２Ｃおよび人物像３３Ｃが含まれている。人物像３２Ａ，３２Ｂおよび３２Ｃが同一人物を表わし，人物像３３Ａ，３３Ｂおよび３３Ｃが同一人物を表わしている。
　第１１図は，陰領域が図示されている第２の画像３１Ｂである。
　第２の画像３１Ｂの陰領域には，第２の画像３１Ｂには現れているが第１の画像３１Ａには現れていない第１の陰領域，第２の画像３１Ｂには現れているが第３の画像３１Ｃは現れていない第２の陰領域および第２の画像３１Ｂには現れているが第１の画像３１Ａおよび第３の画像３１Ｃの両方に現れていない第３の陰領域が含まれる。
　人物像３２Ｂの右側および人物像３３Ｂの右側の陰領域３４は，第２の画像３１Ｂには現れているが第１の画像３１Ａには現れていない第１の陰領域３４である。人物像３２Ｂの左側および人物像３３Ｂの左側の陰領域３５は，第２の画像３１Ｂには現れているが第３の画像３１Ｃには現れていない第２の陰領域３５である。人物像３２Ｂの右側にある第１の陰領域３４と人物像３３Ｂの左側にある第２の陰領域３５とが重なっている領域が，第２の画像３１Ｂには現れているが第１の画像３１Ａおよび第３の画像３１Ｃには現れていない第３の陰領域３６である。
　このように，３フレーム以上の画像の場合，陰領域のスコアを算出する画像以外の他の画像のすべてに現れていない画像部分を示す陰領域（第３の陰領域３６）と，他の画像のうち一部の画像にのみ現れていない画像部分を示す陰領域（第１の陰領域３４，第２の陰領域３５）と，が存在することがある。スコアを算出する場合には，陰領域のスコアを算出する画像以外の他の画像のすべてに現れていない画像部分を示す陰領域から得られるスコアの重みを重くし，他の画像のうち一部の画像にのみ現れていない画像部分を示す陰領域から得られるスコアの重みを重くする（重複している陰領域３６のスコアを高くする）。もちろん，このような重みを変えなくともよい。
　以上のようにして代表画像が決定されると，二次元用画像を表示する表示装置では，決定された代表画像が表示されるようになる。また，複数の異なる視点の画像を表わす画像データが一つの画像ファイルに格納される場合には，決定された代表画像のサムネイル画像を表わす画像データがファイルのヘッダに記録されるようにしてもよい。もちろん，そのファイルのヘッダには代表画像の識別データが記録されるようにしてもよい。
　第１２図は，代表画像の決定処理手順を示すフローチャートである。第１２図は，第２図の処理に対応するもので，第２図の処理と同一の処理については同一符号を付して説明を省略する。
　この実施例では，３フレームの画像が読み取られる（３フレーム以上でもよい）（ステップ１１Ａ）。３フレームの画像のそれぞれにおいて，陰領域のスコアが算出される（ステップ１２~１４）。３フレームの画像のうち，スコアの高い２フレームの画像が代表画像として決定される（ステップ１５Ａ）。このように代表画像は１フレームでなく２フレームでもよい。２フレームの画像が代表画像として決定されることにより，決定された２フレームの画像を用いて立体画像を表示させることができる。もっとも，４フレーム以上の画像が読み取られた場合には代表画像は３フレーム以上であってもよい。
　第１３図は，代表画像の決定および画像の圧縮処理手順を示すフローチャートである。第１３図も第２図に対応するもので，第２図の処理と同一の処理については同一符号を付して説明を省略する。
　上述のように代表画像が決定される（ステップ１５）。読み取られたすべての画像のそれぞれの画像において，陰領域のスコアが記憶されており，そのスコアが高いほど圧縮の程度が少なくなる低い圧縮率が選択される（ステップ１６）。圧縮率はあらかじめ定められており，その定められている圧縮率の中から選択される。選択された圧縮率を用いて，読み取られた画像のそれぞれの画像が圧縮される（ステップ１７）。陰領域のスコアが高いほど重要な画像と考えられ，そのような重要な画像ほど高画質となる。
　上述の実施例では，算出されたスコアのもっとも高い画像を代表画像と決定した上で，圧縮率を選択（決定）し，その選択された圧縮率で画像が圧縮されているが，スコアの高い画像を代表画像と決定することなく，圧縮率を選択してもよい。すなわち，複数の画像のそれぞれの画像から陰領域を検出し，検出された陰領域のスコアに応じて圧縮率を選択し，その選択された圧縮率で，それぞれの画像を圧縮するようにしてもよい。
　上述の実施例においても，上述したように総合的なスコアＳｔを用いて代表画像を決定してもよいし，顔領域面積比に応じたスコアＳｆ，平均エッジ強度に応じたスコアＳｅ，平均彩度に応じたスコアＳｃ，平均明度に応じたスコアＳｂ，陰領域の面積比に応じたスコアＳａまたは分散値に応じたスコアＳｖのいずれか一つのスコアまたは任意の組み合わせのスコアの和に応じて圧縮率を選択してもよい。たとえば，陰領域に含まれる顔領域面積比（対象物。顔以外の対象物でもよい）のみにもとづいて得られるスコアＳｆから代表画像を決定してもよい。また，顔領域面積比のスコアＳｆと，平均エッジ強度に応じたスコアＳｅ，平均彩度に応じたスコアＳｃ，平均明度に応じたスコアＳｂ，陰領域の面積比に応じたスコアＳａまたは分散値に応じたスコアＳｖのうち少なくとも一つと，から圧縮率を選択してもよい。
　第１４図から第１８図は，他の実施例を示している。この実施例は，すでに撮像された３フレーム以上の画像を利用して，次に撮像するときに適した視点を決定するものである。この実施例は同一の被写体を異なる視点から撮像するものである。
　第１４ａ図，第１４ｂ図および第１４ｃ図は，異なる視点から撮像することにより得られた第１の画像４１Ａ，第２の画像４１Ｂおよび第３の画像４１Ｃである。
　第１の画像４１Ａには，被写体像５１Ａ，５２Ａ，５３Ａおよび５４Ａが含まれている。第２の画像４１Ｂには，被写体像５１Ｂ，５１Ｂ，５３Ｂおよび５４Ｂが含まれている。第３の画像４１Ｃには，被写体像５１Ｃ，５２Ｃ，５３Ｃおよび５４Ｃが含まれている。被写体像５１Ａ，５１Ｂおよび５１Ｃは同一の被写体を表わしている。被写体像５２Ａ，５２Ｂおよび５２Ｃは同一の被写体を表わしている。被写体像５３Ａ，５３Ｂおよび５３Ｃは同一の被写体を表わしている。被写体像５４Ａ，５４Ｂおよび５４Ｃは同一の被写体を表わしている。これらの第１の画像４１Ａ，第２の画像４１Ｂおよび第３の画像４１Ｃは隣り合う視点で撮像されたものとする。
　上述したように，これらの第１の画像４１Ａ，第２の画像４１Ｂおよび第３の画像４１Ｃのそれぞれの陰領域が検出され（第１４ａ図，第１４ｂ図および第１４ｃ図では陰領域は図示が省略されている），陰領域のスコアが算出される。たとえば，第１４ａ図に示す第１の画像４１Ａのスコアはスコア６０であり，第１４ｂ図に示す第２の画像４１Ｂのスコアはスコア５０であり，第１４ｃ図に示す第３の画像４１Ｃのスコアはスコア１０であったものとする。
　この実施例では，スコアの上位２つの画像が隣り合っている場合には，その２つの画像を撮像した２つの視点の間の視点から撮像される画像が重要な画像となると考えられる。このために，スコアの上位２つの画像を撮像した２つの視点の間の視点から撮像するようにユーザに知らせられる。第１４ａ図，第１４ｂ図および第１４ｃ図に示す例では，第１の画像４１Ａと第２の画像４１Ｂとがスコアの高い上位２つの画像であるから，第１の画像４１Ａの撮像時の視点と第２の画像４１Ｂの撮像時の視点との間の視点から撮像するようにユーザに知らせられる。たとえば，第１の画像４１Ａと第２の画像４２Ａとがディジタル・スチル・カメラの背面に設けられている表示画面に表示され，「表示されている画像の中間から撮像してください」というメッセージを文字で表示する，あるいは音声で出力することとなろう。
　第１５図は，第１の画像４１Ａの撮像時の視点と第２の画像４１Ｂの撮像時の視点との間の視点から撮像して得られた画像４１Ｄである。
　この画像４１Ｄには，被写体像５１Ｄ，５２Ｄ，５３Ｄおよび５４Ｄが含まれている。被写体像５１Ｄは，第１４ａ図，第１４ｂ図および第１４ｃ図に示した第１の画像４１Ａの被写体像５１Ａ，第２の画像４１Ｂの被写体像５１Ｂおよび第３の画像４１Ｃの被写体像５１Ｃと同じ被写体を表わしている。同様に，被写体像５２Ｄは，被写体像５２Ａ，５２Ｂおよび５２Ｃと同じ被写体を，被写体像５３Ｄは，被写体像５３Ａ，５３Ｂおよび５３Ｃと同じ被写体を，被写体像５４Ｄは，被写体像５４Ａ，５４Ｂおよび５４Ｃと同じ被写体をそれぞれ表わしている。
　第１６ａ図，第１６ｂ図および第１６ｃ図は，異なる視点から撮像することにより得られた第１の画像６１Ａ，第２の画像６１Ｂおよび第３の画像６１Ｃである。
　第１の画像６１Ａには，被写体像７１Ａ，７２Ａ，７３Ａおよび７４Ａが含まれている。第２の画像６１Ｂには，被写体像７１Ｂ，７２Ｂ，７３Ｂおよび７４Ｂが含まれている。第３の画像６１Ｃには，被写体像７１Ｃ，７２Ｃ，７３Ｃおよび７４Ｃが含まれている。被写体像７１Ａ，７１Ｂおよび７１Ｃは同一の被写体を表わしている。被写体像７２Ａ，７２Ｂおよび７２Ｃは同一の被写体を表わしている。被写体像７３Ａ，７３Ｂおよび７３Ｃは同一の被写体を表わしている。被写体像７４Ａ，７４Ｂおよび７４Ｃは同一の被写体を表わしている。これらの第１の画像６１Ａ，第２の画像６１Ｂおよび第３の画像６１Ｃも隣り合う視点で撮像されたものとする。
　これらの第１の画像６１Ａ，第２の画像６１Ｂおよび第３の画像６１Ｃにおいてもそれぞれの陰領域が検出され（第１６ａ図，第１６ｂ図および第１６ｃ図では陰領域は図示が省略されている），陰領域のスコアが算出される。たとえば，第１６ａ図に示す第１の画像６１Ａのスコアはスコア５０であり，第１６ｂ図に示す第２の画像６１Ｂのスコアはスコア３０であり，第１６ｃ図に示す第３の画像６１Ｃのスコアはスコア４０であったものとする。
　上述のように，スコアの上位２つの画像が隣り合っている場合には，その２つの画像を撮像した２つの視点の間の視点から撮像される画像が重要な画像となると考えられるが，スコアの上位２つの画像が隣り合っていない場合には，もっとも高いスコアの画像が重要と考えられ，その画像を撮像した視点近傍の視点から撮像するようにユーザに知らせられる。第１６ａ図，第１６ｂ図および第１６ｃ図に示す例では，スコアの高い上位２つの画像は第１の画像６１Ａと第３の画像６１Ｃであり，これらの画像６１Ａと６１Ｃとは隣り合った視点で撮像されたものではないから，もっとも高いスコアの画像６１Ａの視点の近傍から撮像するようにユーザに知らせられる（たとえば，第１の画像６１Ａを撮像した視点の左側の視点から撮像するようにユーザに知らせられる）。たとえば，第１の画像６１Ａがディジタル・スチル・カメラの背面に設けられている表示画面に表示され，この画像６１Ａの視点の左側の視点から撮像することが好ましいという文章が表示されよう。
　第１７図は，第１の画像６１Ａの撮像時の視点の左側の視点から撮像して得られた画像６１Ｄである。
　この画像６１Ｄには，被写体像７１Ｄ，７２Ｄ，７３Ｄおよび７４Ｄが含まれている。被写体像７１Ｄは，第１６ａ図，第１６ｂ図および第１６ｃ図に示した第１の画像６１Ａの被写体像７１Ａ，第２の画像６１Ｂの被写体像７１Ｂおよび第３の画像６１Ｃの被写体像７１Ｃと同じ被写体を表わしている。同様に，被写体像７２Ｄは，被写体像７２Ａ，７２Ｂおよび７２Ｃと同じ被写体を，被写体像７３Ｄは，被写体像７３Ａ，７３Ｂおよび７３Ｃと同じ被写体を，被写体像７４Ｄは，被写体像７４Ａ，７４Ｂおよび７４Ｃと同じ被写体をそれぞれ表わしている。
　重要と思われる画像をユーザに撮像させることができる。
　第１８図は，上述の撮像アシスト・モードでの撮像処理手順を示すフローチャートである。この処理手順はディジタル・スチル・カメラを用いて撮像するものである。
　撮像アシスト・モードが設定されることにより，この処理手順が開始する。撮像の終了などにより撮像モード自体が完了していなければ（ステップ４１でＮＯ），同一の被写体を撮像して得られた撮像済みの画像が２フレームよりも多くなっているかどうかが確認される（ステップ４２）。撮像済みの画像が２フレームよりも多くなければ（ステップ４２でＮＯ），上述したように３フレーム以上の画像を用いて，撮像する視点を決定できないので，ユーザにより決定された異なる視点での撮像が行われる。
　撮像済みの画像が２フレームよりも多くなると（ステップ４２でＹＥＳ），メモリ・カードから撮像済みの画像を表わす画像データが読み取られて，上述のように画像ごとにスコアの算出処理が行われる（ステップ４３）。
　第１４ａ図，第１４ｂ図および第１４ｃ図に示すように，陰領域のスコアの高い上位２フレームの画像の視点が隣り合っている場合には（ステップ４４でＹＥＳ），陰領域のスコアの高い２フレームの画像の視点の間の視点が撮像視点候補としてユーザに知らせられる（ステップ４５）。第１６ａ図，第１６ｂ図および第１６ｃ図に示すように，スコアの高い上位２フレームの画像の視点が隣り合っていない場合には（ステップ４４でＮＯ），スコアのもっとも高い陰領域が含まれている画像の両側（近傍）を撮像視点候補としてユーザに知らせられる（ステップ４６）。上述のように，スコアのもっとも高い陰領域を含む画像の両方の視点のうち，画像が撮像されていない方の視点のみを撮像視点候補として知らせてもよい。視点が隣り合っている画像かどうかは，視点の異なる複数の画像のそれぞれに，撮像場所の位置情報が付随している場合には，その位置情報からわかる。また，視点の異なる複数の画像の撮像順序がある方向にしたがって撮像するように視点が変わる方向が決まっており，かつそれらの複数の画像をそれぞれ表わす画像データの画像ファイルまたはメモリ・カードへの格納順序を決めておく場合には，格納順序と視点が変わる方向とが対応しているので，視点が隣り合っている画像かどうかがわかる。さらに，画像を構成する画素が対応する対応点を，画像同士で比較することにより，その比較結果から被写体と撮像したカメラとの位置関係がわかり，視点が隣り合っているかどうかがわかる。
　ユーザは，撮像視点候補がわかると，その候補を参考にして被写体を撮像する（ステップ４７）。重要と思われる画像が得られるようになる。精度の高い撮像アシストが可能となる。
　第１９図は，上述の撮像アシスト・モードでの撮像処理手順を示すフローチャートである。この処理手順はディジタル・スチル・カメラを用いて撮像するものである。第１９図に示す処理手順は，第１８図に示す処理手順に対応するもので，第１８図に示す処理と同一の処理については同一符号を付して説明を省略する。
　第１８図に示す実施例では，スコアの高い２フレームの画像の視点が隣り合っている場合にはスコアの高い２フレームの画像の視点の間を撮像視点候補としてユーザに知らせ，スコアの高い２フレームの画像の視点が隣り合っていない場合にはスコアのもっとも高い画像の両側を撮像視点候補としてユーザに知らせている。これに対して，この実施例では，スコアの高い２フレームの画像の視点が隣り合っているかどうかにかかわらず，スコアのもっとも高い画像の両側（少なくとも一方の側でもよい）が撮像視点候補としてユーザに報知される（ステップ４６）。
　ユーザは，撮像視点候補がわかると，その候補を参考にして被写体を撮像する（ステップ４７）。この実施例においても重要と思われる画像が得られるようになる。精度の高い撮像アシストが可能となる。
　第２０図は，上述の実施例を実現する立体撮像ディジタル・カメラの電気的構成を示すブロック図である。
　メモリ・カード１３２に上述した動作を制御するプログラムが格納されており，そのプログラムがメディア制御装置１３１によって読み取られ，立体撮像ディジタル・カメラにインストールされる。もっとも，動作プログラムは立体撮像ディジタル・カメラにプレ・インストールされていてもよいし，ネットワークを介して立体撮像ディジタル・カメラに与えられてもよい。
　立体撮像ディジタル・カメラの全体の動作は，メインＣＰＵ８１によって統括される。立体撮像ディジタル・カメラには，撮像アシスト・モード，立体撮像モード，二次元撮像モード，立体画像再生モード，二次元画像再生モードなどのモード設定ボタン，二段ストローク・タイプのシャッタ・レリーズ・ボタンなどの各種ボタン類が含まれている操作装置８８が設けられている。操作装置８８から出力される操作信号は，メインＣＰＵ８１に入力する。
　立体撮像ディジタル・カメラには，左目用画像撮像装置９０と右目用画像撮像装置１１０とが含まれている。立体撮像モードが設定されると，これらの左目用画像撮像装置９０と右目用画像撮像装置１１０とによって被写体が連続的に（周期的に）撮像される。撮像アシスト・モードまたは二次元撮像モードが設定されると，左目用画像撮像装置９０のみ（右目用画像撮像装置１１０でもよい）によって被写体が連続的に撮像される。
　左目用画像撮像装置９０は，被写体を撮像することにより，立体動画を構成する左目用画像を表す画像データを出力するものである。左目用画像撮像装置９０には，第１のＣＣＤ９４が含まれている。第１のＣＣＤ９４の前方には，第１のズーム・レンズ９１，第１のフォーカス・レンズ９２，および絞り９３が設けられている。これらの第１のズーム・レンズ９１，第１のフォーカス・レンズ９２，および絞り９３は，それぞれズーム・レンズ制御装置９５，フォーカス・レンズ制御装置９６，および絞り制御装置９７によって駆動させられる。立体撮像モードが設定され，第１のＣＣＤ９４の受光面に左目用画像が結像すると，タイミング・ジェネレータ９８から与えられるクロック・パルスにもとづいて，左目用画像を表す左目用映像信号が第１のＣＣＤ９４から出力される。
　第１のＣＣＤ９４から出力された左目用映像信号は，アナログ信号処理装置１０１において，所定のアナログ信号処理が行われ，アナログ／ディジタル変換装置１０２においてディジタルの左目用画像データに変換される。左目用画像データは，画像入力コントローラ１０３からディジタル信号処理装置１０４に入力する。ディジタル信号処理装置１０４において左目用画像データに対して所定のディジタル信号処理が行われる。ディジタル信号処理装置１０４から出力された左目用画像データは３Ｄ画像生成装置１３９に入力する。
　右目用画像撮像装置１１０には，第２のＣＣＤ１１４が含まれている。第２のＣＣＤ１１４の前方には，ズーム・レンズ制御装置１１５，フォーカス・レンズ制御装置１１６および絞り制御装置１１７によってそれぞれ駆動させられる第２のズーム・レンズ１１１，第２のフォーカス・レンズ１１２および絞り１１３が設けられている。撮像モードが設定され，第２のＣＣＤ１１４の受光面に右目用画像が結像すると，タイミング・ジェネレータ１１８から与えられるクロック・パルスにもとづいて，右目用画像を表す右目用映像信号が第２のＣＣＤ１１４から出力される。
　第２のＣＣＤ１１４から出力された右目用映像信号は，アナログ信号処理装置１２１において，所定のアナログ信号処理が行われ，アナログ／ディジタル変換装置１２２においてディジタルの右目用画像データに変換される。右目用画像データは，画像入力コントローラ１２３からディジタル信号処理装置１２４に入力する。ディジタル信号処理装置１２４において右目用画像データに対して所定のディジタル信号処理が行われる。ディジタル信号処理装置１２４から出力された右目用画像データは３Ｄ画像生成装置１３９に入力する。
　３Ｄ画像生成装置１３９において，左目用画像データと右目用画像データとから，立体画像を表す画像データが生成されて表示制御装置１３３に入力する。表示制御装置１３３においてモニタ表示装置１３４が制御されることにより，モニタ表示装置１３４の表示画面に立体画像が表示される。
　シャッタ・レリーズ・ボタンの第一段階の押し下げがあると，左目用画像データおよび右目用画像データは，ＡＦ検出装置１４２に入力する。ＡＦ検出装置１４２において，第１のフォーカス・レンズ９２および第２のフォーカス・レンズ１１２の合焦制御量が算出される。算出された合焦制御量に応じて，第１のフォーカス・レンズ９２および第２のフォーカス・レンズ１１２が合焦位置に位置決めされる。
　左目用画像データは，ＡＥ／ＡＷＢ検出装置１４４に入力し，そのＡＥ／ＡＷＢ検出装置１４４において，左目用画像（右目用画像でもよい）から検出された顔を表わすデータを用いて左目用画像撮像装置９０および右目用画像撮像装置１１０のそれぞれの露出量が算出される。算出された露出量となるように，第１の絞り９３の絞り値および第１のＣＣＤ９４の電子シャッタ時間ならびに第２の絞り１１３の絞り値および第２のＣＣＤ１１４の電子シャッタ時間が決定される。また，ＡＥ／ＡＷＢ検出装置１４４において，入力した左目用画像（右目用画像でもよい）から検出された顔を表わすデータから白バランス調整量も算出される。算出された白バランス調整量にもとづいて，右目用映像信号がアナログ信号処理装置１０１において白バランス調整が行われ，左目用映像信号がアナログ信号処理装置１２１において白バランス調整が行われる。
　シャッタ・レリーズ・ボタンの第二段階の押し下げがあると，３Ｄ画像生成装置５９において生成された立体画像を表す画像データ（左目用画像データ，右目用画像データ）は圧縮／伸長処理装置１４０に入力する。圧縮／伸長処理装置１４０において立体画像を表す画像データが圧縮される。圧縮された画像データがメディア制御装置１３１によってメモリ・カード１３２に記録される。左目用画像と右目用画像との重要度に応じて上述のように圧縮率が選択される場合には，左目用画像データと右目用画像データとをＳＤＲＡＭ１３６に一時的に記憶しておき，左目用画像と右目用画像とのどちらが重要かが上述のように判定される。左目用画像と右目用画像とのうち，重要と判定された画像の圧縮率を高くして（圧縮の割合を高くして），圧縮／伸張装置１４０において圧縮が行われる。圧縮された画像データがメモリ・カード１３２に記録される。
　さらに，立体撮像ディジタル・カメラには，各種データ類を記憶するＶＲＡＭ１３５，上述したスコア・テーブルが格納されているＳＤＲＡＭ１３６，フラッシュＲＯＭ１３７およびＲＯＭ１３８も含まれている。また，立体撮像ディジタル・カメラには，バッテリィ８３が含まれており，このバッテリィ８３から供給される電源が電源制御装置８３に与えられる。電源制御装置８３から立体撮像ディジタル・カメラを構成する各装置に電源が供給される。さらに，立体撮像ディジタル・カメラには，フラッシュ制御装置８５によって制御されるフラッシュ８６も含まれている。
　立体画像再生モードが設定されると，メモリ・カード１３２に記録されている左目用画像データおよび右目用画像データが読み取られ，圧縮／伸張装置１４０に入力する。左目用画像データ及び右目用画像データが，圧縮／伸張装置１４０において伸張される。伸張された左目用画像データおよび右目用画像データが表示制御装置１３３に与えられる。すると，モニタ表示装置１７４の表示画面に立体画像が表示される。
　立体画像再生モードが設定されている場合に，同一の被写体について異なる３つ以上の視点から撮像された画像が存在していた場合には，それらの３つ以上の画像から二つの画像が上述のようにして代表画像として決定される。決定された２つの画像がモニタ表示装置１３４に与えられることにより立体画像が表示される。
　二次元画像再生モードが設定されると，メモリ・カード１３２に記録されている左目用画像データおよび右目用画像データ（異なる視点から撮像された３つ以上の画像を表わす画像データでもよい）が読み取られ，立体画像再生モードと同様に圧縮／伸張装置１４０において伸張される。伸張された左目用画像データによって表わされる左目用画像および右目用画像データによって表わされる右目用画像のうちいずれかの画像が上述のようにして代表画像として決定される。決定された画像を表わす画像データが表示制御装置１３３によってモニタ表示装置１３４に与えられる。モニタ表示装置１３４の表示画面に代表画像が二次元表示されるようになる。
　撮像アシスト・モードが設定されている場合には，上述したように，メモリ・カード１３２に同一の被写体について異なる視点から撮像された画像が３つ以上あると，撮像視点のアシスト情報（画像，メッセージなど）がモニタ表示装置１３４の表示画面に表示される。その撮像視点から左目用画像撮像装置９０および右目用画像撮像装置１１０のうち左目用画像撮像装置９０を用いて（右目用画像撮像装置１１０を用いてもよい）被写体が撮像される。
　上述の実施例においては，立体撮像ディジタル・カメラを用いているが，立体撮像ディジタル・カメラを用いずに，二次元撮像用のディジタル・カメラを用いてもよい。
　上述のように，代表画像が決定される場合には，左目用画像データと右目用画像データと代表画像を識別するデータ（たとえば，フレーム番号など）とが関連づけられてメモリ・カード１３２に記録される。たとえば，左目用画像データおよび右目用画像データが同一のファイルに格納される場合には，そのファイルのヘッダに左目用画像と右目用画像とのどちらが代表画像かを示すデータが格納されよう。
　さらに，上述の実施例では，左目用画像と右目用画像との二つの画像について説明されているが，二つの画像ではなく三つ以上の画像であっても同様に代表画像の決定，圧縮率の選択をすることができるのはいうまでもない。

Claims (14)

1. 異なる視点から撮像され，かつ少なくとも一部分が共通する複数の画像のそれぞれの画像から，他の画像に現れていない陰領域を検出する陰領域検出装置，
   　上記陰領域検出装置によって検出される，複数の画像のそれぞれの陰領域に含まれている所定の対象物の割合にもとづいて陰領域の重要度を表わすスコアを算出するスコア算出装置，および
   　上記スコア算出装置によって算出されたスコアが高い陰領域を含む画像を代表画像と決定する決定装置，
   　を備えた代表画像決定装置。
2. 上記スコア算出装置は，
   　上記陰領域検出装置によって検出される，複数の画像のそれぞれの陰領域に含まれている所定の対象物の割合と，陰領域内の画像のエッジ強度，陰領域内の画像の彩度，陰領域内の画像の明るさ，陰領域の面積および陰領域内の画像の分散のうち少なくとも一つと，にもとづいて陰領域の重要度を表わすスコアを算出するものである，
   　請求の範囲第１項に記載の代表画像決定装置。
3. 上記スコア算出装置は，
   　重複している陰領域のスコアが高くなるように算出するものである，
   　請求の範囲第２項に記載の代表画像決定装置。
4. 上記複数の画像は３フレーム以上の画像であり，
   　上記決定装置は，
   　上記スコア算出装置によって算出されたスコアが高い陰領域を含む少なくとも２フレームの画像を代表画像と決定するものである，
   　請求の範囲第３項に記載の代表画像決定装置。
5. 上記スコア算出装置において算出されたスコアが高い陰領域が含まれている画像ほど圧縮の割合が小さくなるように圧縮する圧縮装置，
   　をさらに備えた請求の範囲第４項に記載の代表画像決定装置。
6. 上記決定装置により決定された代表画像の視点近くの視点から撮像するように報知する第１の報知装置，
   　をさらに備えた請求の範囲第５項に記載の代表画像決定装置。
7. 上記複数の画像は３フレーム以上の画像であり，
   　上記決定装置は，
   　上記スコア算出装置によって算出されたスコアが高い陰領域を含む２フレームの画像を代表画像と決定するものであり，
   　上記決定装置によって決定された２フレームの画像が隣り合う視点で撮像されたかどうかを判定する判定装置，および
   　上記判定装置において，上記決定装置によって決定された２フレームの画像が隣り合う視点で撮像されたと判定されたことにより，その２フレームの画像を撮像した２箇所の視点の間の視点からの撮像をするように報知し，上記決定装置によって決定された２フレームの画像が隣り合う視点で撮像されていないと判定されたことによりスコアのもっとも高い陰領域を含む画像の視点近くの視点からの撮像をするように報知する第２の報知装置，
   　をさらに備えた請求の範囲第６項に記載の代表画像決定装置。
8. 上記決定装置は，上記スコア算出装置によって算出されたスコアがもっとも高い陰領域を含む画像を代表画像と決定するものであり，
   　上記複数の画像のそれぞれの画像を表わす画像データと上記決定装置によって決定された代表画像を識別するデータとを関連づけて記録媒体に記録する記録制御装置，
   　をさらに備えた請求の範囲第７項に記載の代表画像決定装置。
9. 上記所定の対象物は顔である，請求の範囲第８項に記載の代表画像決定装置。
10. 異なる視点から撮像され，かつ少なくとも一部分が共通する複数の画像のそれぞれの画像から，他の画像に現れていない陰領域を検出する陰領域検出装置，
    　上記陰領域検出装置によって検出される，複数の画像のそれぞれの陰領域に含まれている所定の対象物の割合にもとづいて陰領域の重要度を表わすスコアを算出するスコア算出装置，および
    　上記スコア算出装置において算出されたスコアが高い陰領域が含まれている画像ほど圧縮の割合が小さくなるように圧縮する圧縮装置，
    　を備えた画像圧縮装置。
11. 陰領域検出装置が，異なる視点から撮像され，かつ少なくとも一部分が共通する複数の画像のそれぞれの画像から，他の画像に現れていない陰領域を検出し，
    　スコア算出装置が，上記陰領域検出装置によって検出される，複数の画像のそれぞれの陰領域に含まれている所定の対象物の割合にもとづいて陰領域の重要度を表わすスコアを算出し，
    　決定装置が，上記スコア算出装置によって算出されたスコアが高い陰領域を含む画像を代表画像と決定する，
    　代表画像決定装置の動作制御方法。
12. 陰領域検出装置が，異なる視点から撮像され，かつ少なくとも一部分が共通する複数の画像のそれぞれの画像から，他の画像に現れていない陰領域を検出し，
    　スコア算出装置が，上記陰領域検出装置によって検出される，複数の画像のそれぞれの陰領域に含まれている所定の対象物の割合にもとづいて陰領域の重要度を表わすスコアを算出し，
    　圧縮装置が，上記スコア算出装置において算出されたスコアが高い陰領域が含まれている画像ほど圧縮の割合が小さくなるように圧縮する，
    　画像圧縮装置の動作制御方法。
13. 代表画像決定装置のコンピュータを制御するコンピュータ読み取り可能なプログラムであって，
    　異なる視点から撮像され，かつ少なくとも一部分が共通する複数の画像のそれぞれの画像から，他の画像に現れていない陰領域を検出させ，
    　複数の画像のそれぞれの陰領域に含まれている所定の対象物の割合にもとづいて陰領域の重要度を表わすスコアを算出させ，
    　算出されたスコアが高い陰領域を含む画像を代表画像と決定させるように代表画像決定装置のコンピュータを制御するプログラム。
14. 画像圧縮装置のコンピュータを制御するコンピュータ読み取り可能なプログラムであって，
    　異なる視点から撮像され，かつ少なくとも一部分が共通する複数の画像のそれぞれの画像から，他の画像に現れていない陰領域を検出させ，
    　複数の画像のそれぞれの陰領域に含まれている所定の対象物の割合にもとづいて陰領域の重要度を表わすスコアを算出させ，
    　算出されたスコアが高い陰領域が含まれている画像ほど圧縮の割合が小さくなるように圧縮させるように画像圧縮装置のコンピュータを制御するプログラム。

Images