JP2013183220A - Camera and image processor - Google Patents
Camera and image processor Download PDFInfo
- Publication number
- JP2013183220A JP2013183220A JP2012044326A JP2012044326A JP2013183220A JP 2013183220 A JP2013183220 A JP 2013183220A JP 2012044326 A JP2012044326 A JP 2012044326A JP 2012044326 A JP2012044326 A JP 2012044326A JP 2013183220 A JP2013183220 A JP 2013183220A
- Authority
- JP
- Japan
- Prior art keywords
- image
- camera
- synthesis
- shooting
- images
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000015572 biosynthetic process Effects 0.000 claims abstract description 27
- 238000003786 synthesis reaction Methods 0.000 claims abstract description 27
- 230000000694 effects Effects 0.000 claims abstract description 22
- 230000002194 synthesizing effect Effects 0.000 claims abstract description 14
- 239000000284 extract Substances 0.000 claims abstract description 7
- 239000000203 mixture Substances 0.000 claims description 30
- 238000012545 processing Methods 0.000 claims description 29
- 239000002131 composite material Substances 0.000 claims description 28
- 238000012937 correction Methods 0.000 claims description 25
- 238000011156 evaluation Methods 0.000 claims description 10
- 238000004519 manufacturing process Methods 0.000 claims description 7
- 238000001514 detection method Methods 0.000 claims description 3
- 238000002360 preparation method Methods 0.000 abstract description 3
- 238000003384 imaging method Methods 0.000 abstract description 2
- 238000000034 method Methods 0.000 description 27
- 238000011161 development Methods 0.000 description 26
- 238000009877 rendering Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 3
- 230000002093 peripheral effect Effects 0.000 description 3
- 238000003825 pressing Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 230000001771 impaired effect Effects 0.000 description 1
- 230000009191 jumping Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000010187 selection method Methods 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 238000003860 storage Methods 0.000 description 1
Images
Landscapes
- Studio Devices (AREA)
- Image Processing (AREA)
Abstract
Description
本発明は、カメラ、画像処理装置に関する。 The present invention relates to a camera and an image processing apparatus.
次のような画像処理装置が知られている。この画像処理装置は、連続撮影画像の中からベストショット画像を選択して記録する(例えば、特許文献1)。 The following image processing apparatus is known. This image processing apparatus selects and records a best shot image from among continuously shot images (for example, Patent Document 1).
しかしながら、従来の画像処理装置では、ベストショット画像を取得して記録することはできるが、取得したベストショット画像に演出効果を付すことはできなかった。 However, in the conventional image processing apparatus, the best shot image can be acquired and recorded, but it is not possible to give a production effect to the acquired best shot image.
本発明によるカメラは、使用者による撮影のための準備動作を検出したときに、撮像素子から入力される画像データを時系列で取得して予備撮影を行う予備撮影手段と、使用者による撮影動作を検出したときに、予備撮影手段によって取得された予備撮影画像データの中から特定の一枚の画像を選択する選択手段と、予備撮影画像データの中から合成用画像を抽出し、抽出した合成用画像と特定の一枚の画像とを合成する合成手段と、選択手段によって選択された特定の一枚の画像と、合成手段によって合成された合成画像とを記録する記録手段とを備えることを特徴とする。
本発明による画像処理装置は、予備撮影画像データの中から特定の一枚の画像を選択する選択手段と、予備撮影画像データの中から合成用画像を抽出し、抽出した合成用画像と特定の一枚の画像とを合成する合成手段と、選択手段によって選択された特定の一枚の画像と、合成手段によって合成された合成画像とを記録する記録手段とを備えることを特徴とする。
The camera according to the present invention includes a preliminary photographing means for performing preliminary photographing by acquiring image data input from the image pickup device in time series when a preparation operation for photographing by a user is detected, and a photographing operation by the user A selection means for selecting one specific image from the preliminary photographed image data acquired by the preliminary photographing means, and a composition image extracted from the preliminary photographed image data. And a recording means for recording the specific image selected by the selecting means and the composite image synthesized by the synthesizing means. Features.
An image processing apparatus according to the present invention includes a selection unit that selects a specific image from preliminary image data, and extracts a synthesis image from the preliminary image data. The image processing apparatus includes a combining unit that combines one image, a recording unit that records a specific image selected by the selecting unit, and the combined image combined by the combining unit.
本発明によれば、ベストショット画像を含んだ合成画像を生成して、ベストショット画像に演出効果を付すことができる。 According to the present invention, it is possible to generate a composite image including the best shot image and to provide a rendering effect to the best shot image.
図1は、本実施の形態におけるカメラの一実施の形態の構成を示すブロック図である。カメラ100は、操作部材101と、レンズ102と、撮像素子103と、制御装置104と、メモリカードスロット105と、モニタ106とを備えている。操作部材101は、使用者によって操作される種々の入力部材、例えば電源ボタン、レリーズボタン、ズームボタン、十字キー、決定ボタン、再生ボタン、削除ボタンなどを含んでいる。
FIG. 1 is a block diagram illustrating a configuration of an embodiment of a camera according to the present embodiment. The
レンズ102は、不図示のマウント部を介してカメラ100に着脱可能な構成となっていてもよいし、カメラ100と一体となっていてもよい。なお、レンズ102は、複数の光学レンズから構成されるが、図1では代表して1枚のレンズで表している。撮像素子103は、例えばCMOSなどのイメージセンサにより構成され、レンズ102を通過した光束による被写体像を光電変換してアナログ画像信号を生成し、生成したアナログ画像信号を制御装置104へ出力する。
The
制御装置104は、CPU、メモリ、およびその他の周辺回路により構成され、カメラ100を制御する。なお、制御装置104を構成するメモリには、SDRAMやフラッシュメモリが含まれる。SDRAMは、揮発性のメモリであって、CPUがプログラム実行時にプログラムを展開するためのワークメモリとして使用されたり、データを一時的に記録するためのバッファメモリとして使用される。また、フラッシュメモリは、不揮発性のメモリであって、制御装置104が実行するプログラムのデータや、プログラム実行時に読み込まれる種々のパラメータなどが記録されている。
The
制御装置104は、撮像素子103から入力されたアナログ画像信号をデジタル画像信号に変換し、種々の画像処理を施した後に所定の画像形式、例えばJPEG形式の本画像データを生成する。また、制御装置104は、生成した本画像データに基づいて、表示用画像データ、例えばサムネイル画像データを生成する。制御装置104は、本画像データとサムネイル画像データとを含み、さらにヘッダ情報を付加した画像ファイルを生成してメモリカードスロット105へ出力する。
The
メモリカードスロット105は、記憶媒体としてのメモリカードを挿入するためのスロットであり、制御装置104から出力された画像ファイルをメモリカードに書き込んで記録する。また、メモリカードスロット105は、制御装置104からの指示に基づいて、メモリカード内に記憶されている画像ファイルを読み込む。
The
モニタ106は、カメラ100の背面に搭載された液晶モニタ(背面モニタ)であり、当該モニタ106には、メモリカードに記憶されている画像やカメラ100を設定するための設定メニューなどが表示される。また、制御装置104は、使用者によってカメラ100のモードがライブビューモードに設定されると、撮像素子103から時系列で取得した画像の表示用画像データをモニタ106に出力する。これによってモニタ106にはスルー画が表示される。
The
本実施の形態におけるカメラ100は、使用者によって撮影のための予備操作が行われたときに、高速(例えば、30fpsや60fps等の速度)で連写を行ってプリキャプチャー撮影を行い、その後、使用者によって撮影指示のための操作が行われたときに、上記プリキャプチャー撮影によって取得された複数の画像を、あらかじめ決められた評価値を用いて評価することにより、特定の1枚の画像をベストショット画像として選択し、選択したベストショット画像をメモリカードに記録するベストショット撮影機能を備えている。
The
例えば、制御装置104は、使用者による操作部材101に含まれるレリーズボタンの半押し操作を上記予備操作として検出し、オートフォーカス処理等の撮影準備処理を開始するとともに、上述したプリキャプチャー撮影を行う。制御装置104は、その後、使用者によってレリーズボタンが全押しされたときに、撮影指示のための操作がなされたと判断して、ベストショット画像の選択を行う。
For example, the
なお、ベストショット画像の選択方法は、公知の処理であるため詳細な説明は省略するが、プリキャプチャー画像のそれぞれを解析して、一般的に良いと評価される画像が自動的に選択されるように評価値が算出される。例えば、手ブレ量が大きい画像の評価値や、人物が目を閉じている画像は、評価値が低く算出され、ベストショット画像として選択されにくくなっている。制御装置104は、プリキャプチャー撮影によって取得された複数の画像の中から、ベストショット画像選択のために算出された評価値が最も高い画像をベストショット画像として選択する。
The best shot image selection method is a well-known process and will not be described in detail. However, each pre-capture image is analyzed and an image generally evaluated as good is automatically selected. Thus, the evaluation value is calculated. For example, an evaluation value of an image with a large amount of camera shake or an image in which a person closes his / her eyes is calculated with a low evaluation value and is difficult to be selected as a best shot image. The
また、本実施の形態では、制御装置104は、上述したプリキャプチャー撮影機能により取得された複数の画像の中から、所定の選択条件に基づいて少なくともベストショット画像を含んだ2枚以上の画像を選択し、それらの画像を合成することにより、ベストショット画像に演出効果を付与した合成画像を生成する。なお、合成に用いる画像の選択条件については後述する。制御装置104は、使用者による一連の予備操作と撮影指示のための操作により取得したベストショット画像と合成画像とを関連付けてメモリカードに記録する。これによって、本実施の形態におけるカメラ100では、ベストショット画像を自動的に選択するとともに、ベストショット画像に演出効果を付与した合成画像を生成して、それぞれを関連付けて記録することができる。
In the present embodiment, the
図2は、本実施の形態における撮影処理の流れを示すフローチャートである。図2に示す処理は、使用者によってカメラ100のモードが上述したベストショット画像と合成画像とを関連付けて記録するモードに設定されたときに起動するプログラムとして、制御装置104によって実行される。
FIG. 2 is a flowchart showing a flow of photographing processing in the present embodiment. The process shown in FIG. 2 is executed by the
ステップS1において、制御装置104は、使用者によって操作部材101に含まれるレリーズボタンが半押しされることにより、上述した撮影のための予備操作が行われたか否かを判断する。ステップS1で肯定判断した場合には、ステップS2へ進む。
In step S <b> 1, the
ステップS2では、制御装置104は、図3に示すように、プリキャプチャー撮影における画像の取得タイミングを制御するための時間A、B、Cを設定する。時間A、B、Cの設定例を図3に示す。図3では、横軸が時刻を表しており、時刻t0でレリーズボタンが半押しされ、時刻t1でレリーズボタンが全押しされている。本実施の形態では、制御装置104は、時刻t0でレリーズボタンの半押しを検出した後、時間Cの間、プリキャプチャー撮影による高速連写を行って複数枚の画像を取得する。
In step S2, the
例えば、時間Cとしては、連写速度と連写によって取得すべき画像の枚数に応じて設定され、ここでは、60fpsの速度で高速連写を行って20枚の画像を取得するために必要な時間が設定される。時間Aは、時刻t1でレリーズボタンが全押しされる前に何枚の画像を取得するかに応じて設定され、時間Bは、時刻t1でレリーズボタンが全押しされた後に何枚の画像を取得するかに応じて設定される。例えば、20枚の画像のうち、レリーズボタンが全押しされる前に12枚、レリーズボタンが全押しされた後に8枚取得する場合には、時間C=時間A+時間B、かつ時間A:時間Bが6:4となるように、時間AとBとを設定する。その後、ステップS3へ進む。 For example, the time C is set according to the continuous shooting speed and the number of images to be acquired by continuous shooting. Here, the time C is necessary to acquire 20 images by performing high-speed continuous shooting at a speed of 60 fps. Time is set. Time A is set according to how many images are acquired before the release button is fully pressed at time t1, and time B is how many images are acquired after the release button is fully pressed at time t1. It is set according to whether to acquire. For example, out of 20 images, when acquiring 12 images before the release button is fully pressed and 8 images after the release button is fully pressed, time C = time A + time B and time A: time Times A and B are set so that B is 6: 4. Then, it progresses to step S3.
ステップS3では、制御装置104は、レリーズ待機処理を実行する。本実施の形態では、上述したように、高速連写を行ってプリキャプチャー撮影を行いながら、レリーズボタンからの入力信号の検出を継続して、使用者によるレリーズボタンの全押し操作を待ち受ける。なお、本実施の形態では、図3に示したように、レリーズボタンが全押しされる前は、時間Aの間だけ連写撮影を行えばよいが、レリーズボタンが全押しされるタイミング(時刻t1)は、使用者の操作タイミングに依存するため、制御装置104は、このタイミングを予測することができない。よって、制御装置104は、使用者によってレリーズボタンが半押しされた後にプリキャプチャー撮影を開始して画像を取得しておき、後の処理において、ここで取得しておいた画像の中から時間Aの間に撮影した画像のみを抽出する。
In step S3, the
その後、ステップS4へ進み、制御装置104は、レリーズボタンの半押しを検出してから所定時間以内に使用者によるレリーズボタンの全押し操作を検出したか否かを判断する。ステップS4で否定判断した場合には、ステップS1へ戻る。これにより、レリーズボタンの半押し操作から所定時間以内に全押し操作が行われない場合には、処理をタイムアウトさせることができる。これに対して、ステップS4で肯定判断した場合には、ステップS5へ進む。
Thereafter, the process proceeds to step S4, and the
ステップS5では、制御装置104は、レリーズ処理を開始する。具体的には、制御装置104は、図3に示したように、時刻t1でレリーズボタンが全押しされてから時間Bの間連写を継続する。その後、ステップS6へ進み、制御装置104は、図3に示したように、時刻t1から時間Bの経過した後に連写を終了して、プリキャプチャー撮影による画像の取得を終了する。このとき、制御装置104は、上述したように時刻t1よりも前にプリキャプチャー撮影により取得した画像のうち、時刻t1の前の時間Aの間に取得した画像を抽出する。そして、抽出した時刻t1の前の時間Aの間に取得した画像と、時刻t1の後に取得した画像とをプリキャプチャー撮影により取得した画像(以下、「プリキャプチャー画像」と呼ぶ)としてバッファメモリに記録する。これによって、図3に示した時間Cの間に取得したプリキャプチャー画像(予備画像)をバッファメモリに記録することができる。その後、ステップS7へ進む。
In step S5, the
ステップS7では、制御装置104は、ステップS6でバッファメモリに記録したプリキャプチャー画像を対象として、公知のベストショット画像選択処理を実行し、算出された評価値が最も高い画像をベストショット画像として選択する。これによって、例えば、時間Cの間に撮影された20枚のプリキャプチャー画像の中から1枚のベストショット画像が選択される。
In step S7, the
その後、ステップS8へ進み、制御装置104は、プリキャプチャー画像の中から複数の合成用画像を選択する。本実施の形態では、合成する画像の枚数はあらかじめ設定されているものとする。この設定枚数は、使用者が任意に変更できるようにしてもよい。あるいは、制御装置104が撮影条件や被写体に基づいて枚数を設定するようにしてもよい。例えば、被写体の動きが早い場合や移動量が大きい場合には、制御装置104は、設定枚数を多くして、合成画像が被写体の動きを的確に表すようにする。また、4枚の画像を合成するように設定されている場合には、制御装置104は、ステップS7で選択したベストショット画像を含む4枚の画像を合成するために、プリキャプチャー画像の中からベストショット画像を除いて選択した3枚の画像を合成用画像として選択する。
Thereafter, the process proceeds to step S8, and the
ここで、本実施の形態における合成用画像の選択条件の一例を示す。本実施の形態では、制御装置104は、例えば、撮影条件や被写体に基づいて合成用画像を選択するものとする。具体的には、制御装置104は、使用者がプリキャプチャー画像の撮影時にカメラを振って撮影方向を変更した場合のそれぞれのプリキャプチャー画像におけるカメラの移動方向やカメラの移動量、主要被写体の種類、撮影シーンの種類、主要被写体の移動量、主要被写体のポーズや配置等の1つまたはこれらの組み合わせに応じて合成用画像を選択する。なお、カメラの移動方向や移動量は、カメラ100にジャイロセンサ等を備えることに検出可能であり、撮影時にこれらを検出して画像に関連付けておくことで判定が可能になる。主要被写体の種類や撮影シーンの種類については、撮影時のシーン判定結果を画像に関連付けておくことで判定が可能になる。主要被写体の移動量や主要被写体のポーズや配置については、撮影時に被写体認識を行って、認識結果を画像に関連付けておくことで判定が可能になる。
Here, an example of selection conditions for the composition image in the present embodiment will be shown. In the present embodiment, it is assumed that the
図4〜図6に生成される合成用画像の一例を示す。図4はバスケットボールの試合中にシュートする人物の合成用画像、図5はジャンプするバレリーナの合成用画像、図6は揺らめいている旗Fの合成用画像である。
例えば、プリキャプチャー撮影によって取得された画像がバスケットボールの試合中にシュートをするゴルフのスイングをする人物を撮影した画像であるとする。この場合には、被写体の移動量(人物ゴルフクラブの移動量)に応じた枚数(図4の例では3枚)の合成用画像が選択される。その結果、図4に示すように、演出効果としてバスケットゴールに向けてシュートする人物の移動軌跡を表した合成用画像を作成することが可能となる。
An example of the composition image generated in FIGS. 4 to 6 is shown. 4 is a composite image of a person shooting during a basketball game, FIG. 5 is a composite image of a jumping ballerina, and FIG. 6 is a composite image of a fluttering flag F.
For example, it is assumed that an image acquired by pre-capture shooting is an image of a person who makes a golf swing to shoot during a basketball game. In this case, the number of images for composition (three in the example of FIG. 4) corresponding to the amount of movement of the subject (the amount of movement of the person golf club) is selected. As a result, as shown in FIG. 4, it is possible to create an image for synthesis that represents the movement trajectory of the person shooting toward the basket goal as a production effect.
あるいは、プリキャプチャー撮影によって取得された画像がジャンプをするバレリーナを撮影した画像であるとする。この場合には、カメラのスイング方向、スイング量、被写体の移動量に応じた枚数(図5の例では3枚)の合成用画像が選択される。その結果、図5に示すように、演出効果としてバレリーナのジャンプの軌跡を表した合成用画像を作成することが可能となる。あるいは、プリキャプチャー撮影によって取得された画像が静止している物体をカメラをスイングさせて撮影した画像である場合には、カメラのスイング方向、スイング量に応じた枚数の合成用画像を選択することにより、幻想的な演出効果を付した合成用画像を作成することが可能となる。 Alternatively, it is assumed that an image acquired by pre-capture shooting is an image of a ballerina that jumps. In this case, the number of compositing images (three in the example of FIG. 5) corresponding to the camera swing direction, swing amount, and subject movement amount is selected. As a result, as shown in FIG. 5, it is possible to create an image for synthesis that represents the trajectory of the ballerina jump as a production effect. Alternatively, if the image acquired by the pre-capture shooting is an image obtained by swinging the camera with a stationary object, select the number of compositing images according to the camera swing direction and the swing amount. Thus, it is possible to create a composition image with a fantastic effect.
あるいは、プリキャプチャー撮影によって取得された画像が揺らめいている旗を撮影した画像であるとする。この場合には、旗Fの形の変化量が一定間隔になるように複数の合成用画像が選択される。その結果、図6に示すように、演出効果として旗F1〜F3の揺らめきを表した合成用画像を作成することが可能となる。 Alternatively, it is assumed that the image acquired by the pre-capture shooting is an image obtained by shooting a waving flag. In this case, a plurality of compositing images are selected so that the amount of change in the shape of the flag F is a constant interval. As a result, as shown in FIG. 6, it is possible to create a composition image that represents the flickering of the flags F1 to F3 as a production effect.
その後、ステップS9へ進み、制御装置104は、ステップS7で選択したベストショット画像と、ステップS8で選択した合成用画像とに対して現像処理を施す。例えば、制御装置104は、ステップS7で選択したベストショット画像と、ステップS8で選択した合成用画像がRAWデータである場合には、公知の現像処理を施して、画像データを生成する。その後、ステップS10へ進み、制御装置104は、ステップS9で現像処理を行った後のベストショット画像(以下、「現像後ベストショット画像」と呼ぶ)をメモリカードに記録する。その後、ステップS11へ進む。
Thereafter, the process proceeds to step S9, and the
ステップS11では、制御装置104は、ステップS9で現像処理を行った後の合成用画像(以下、「現像後合成用画像」と呼ぶ)に対してゲイン補正を行う。このとき、制御装置104は、現像後合成用画像の枚数に応じて各現像後合成用画像にかけるゲイン補正量を決定してゲイン補正を行う。例えば、現像後合成用画像の枚数が4枚の場合には、各現像後合成用画像にかけるゲイン補正量を0.25として、ゲイン量の合計が1となるようにする。あるいは、合成画像の演出効果を高めるために、ベストショット画像の撮影タイミング(撮影時間)に近い合成用画像には、他に比べて高いゲインをかけて、少し明るめにゲイン補正を行うようにし、ベストショット画像から撮影時間が遠くなるほど、掛けるゲインを低くするようにしてもよい。その後、ステップS12へ進む。
In step S <b> 11, the
ステップS12では、制御装置104は、プリキャプチャー画像を撮影したときのカメラ100のスイング量が所定のスイング量以下であるか否か(スイング量が僅かであるか否か)を判断する。例えば、制御装置104は、プリキャプチャー撮影時の手触れを検出し、手触れ量が所定値以下のときに、ステップS12で肯定判断する。ステップS12で肯定判断した場合には、ステップS13へ進む。
In step S12, the
ステップS13では、制御装置104は、現像後ベストショット画像と複数の現像後合成用画像とを対象として、画像内の一部の領域でフレーム間の位置合わせを行う。例えば、制御装置104は、各画像の一部の領域の特徴点を重ね合わせるようにして位置合わせ量を決定し、それぞれの画像毎に位置合わせ処理(座標シフト)を行う。位置合わせに用いる特徴点としては、例えば、画像内で位置が変化しない背景から抽出した任意の点を用いればよい。具体的には、図6に示すような旗Fの揺らめきを表した合成用画像を作成する場合であれば、旗Fを支える支柱上の任意の点(たとえば図6では支柱P)等を用いることが考えられる。また、被写体が人物である場合には、顔認識処理によって検出した被写体の顔上の任意の点を用いるようにしてもよい。
In step S <b> 13, the
このように座標シフトをして複数の画像の位置合わせを行うと、画像の周辺画素では合成する全画像分データが揃わないので、制御装置104は、全画像分のデータが揃う最大の大きさとなるように各画像をクロップする。その後、ステップS14へ進む。これに対して、ステップS12で否定判断した場合には、そのままステップS14へ進む。 When the plurality of images are aligned by performing the coordinate shift in this way, the data for all the images to be synthesized are not prepared in the peripheral pixels of the image. Crop each image so that Then, it progresses to step S14. On the other hand, if a negative determination is made in step S12, the process proceeds directly to step S14.
ステップS14では、制御装置104は、現像後ベストショット画像とゲイン補正された現像後合成用画像とを合成する。このとき、制御装置104は、ステップS13で画像の位置合わせとクロップを行った場合には、クロップ後の画像を合成する。これによって演出効果を付した合成画像を作成することができる。
In step S <b> 14, the
その後、ステップS15へ進み、制御装置104は、ステップS14で作成した合成画像を、ステップS10で記録した現像後ベストショット画像に関連付けてメモリカードに記録して、処理を終了する。これによって、複数のプリキャプチャー画像の中から選択したベストショット画像と、ベストショット画像に演出効果を付した合成画像とを関連付けてメモリカードに記録することができる。
Thereafter, the process proceeds to step S15, and the
以上説明した本実施の形態によれば、以下のような作用効果を得ることができる。
(1)制御装置104は、プリキャプチャー撮影によって取得したプリキャプチャー画像の中からベストショット画像を選択し、プリキャプチャー画像の中から複数の合成用画像を抽出し、複数の合成用画像とベストショット画像とを合成するようにした。そして、ベストショット画像と合成画像とを関連付けて記録するようにした。これによって、ベストショット画像と、ベストショット画像に演出効果を付した合成画像とを関連付けて記録することができる。
According to the present embodiment described above, the following operational effects can be obtained.
(1) The
(2)制御装置104は、プリキャプチャー画像の中からベストショット画像選択処理における評価値が最も高い画像をベストショット画像として選択するようにした。これによって、プリキャプチャー画像の中か一般的に最も良いと評価される画像をベストショット画像として選択することができる。
(2) The
(3)制御装置104は、プリキャプチャー画像の中から撮影条件や被写体に基づいて複数の合成用画像を抽出するようにした。これによって、撮影条件や被写体に応じた最適な合成用画像を抽出することができる。
(3) The
(4)制御装置104は、撮影条件や被写体に基づいて、プリキャプチャー画像の中から抽出する合成用画像の数を決定するようにした。これによって、撮影条件や被写体に応じた最適な枚数の合成用画像を抽出することができる。
(4) The
(5)制御装置104は、現像後合成用画像に対してゲイン補正を行い、ゲイン補正を行った後の合成用画像を合成するようにした。これによって、演出効果を付与した合成画像を生成することができる。
(5) The
(6)制御装置104は、合成用画像の数に基づいて、各合成用画像かけるゲイン量を決定するようにした。これによって、合成用画像の数に応じた最適なゲイン量を決定することができる。
(6) The
(7)制御装置104は、ベストショット画像の撮影タイミング(撮影時間)に近い合成用画像には、他に比べて高いゲインをかけて、少し明るめにゲイン補正を行うようにし、ベストショット画像から撮影時間が遠くなるほど、掛けるゲインを低くするようにした。これによって、合成画像の演出効果をさらに高めることができる。
(7) The
(8)制御装置104は、プリキャプチャー撮影時の手振れ量が所定値以下のときは、ベストショット画像と合成用画像の画像内の一部の領域を用いて位置合わせを行うようにした。これによって、手ブレ量が微少であるときには、位置合わせを行った合成画像を作成することができる。
(8) When the amount of camera shake at the time of pre-capture photographing is equal to or less than a predetermined value, the
(9)制御装置104は、位置合わせをした後に、各画像をクロップするようにした。これによって、位置合わせによって画像の周辺画素において合成する全画像分データが揃わなくなる場合でも、全ての合成用画像の大きさが揃えて合成することができる。
(9) The
―変形例―
なお、上述した実施の形態のカメラは、以下のように変形することもできる。
(1)上述した実施の形態では、制御装置104は、公知のベストショット画像選択処理によって算出された評価値が最も高い画像をベストショット画像として選択する例について説明した。しかしながら、制御装置104が自動選択したベストショット画像を使用者が他の画像に変更できるようにしてもよい。例えば、制御装置104は、自動選択したベストショット画像と他のプリキャプチャー画像とをモニタ106に表示して使用者に提示し、使用者からのベストショット画像との変更を受け付けるようにしてもよい。そして、制御装置104は、使用者によってプリキャプチャー画像の中から制御装置104が自動選択した画像とは異なる画像がベストショット画像として選択された場合には、ベストショット画像を使用者によって選択された画像に選択し直す。これによって、使用者は、ベストショット画像を好みの画像に変更することができる。
-Modification-
The camera according to the above-described embodiment can be modified as follows.
(1) In the above-described embodiment, the
(2)上述した実施の形態では、制御装置104は、現像処理を行った後の合成用画像に対してゲイン補正を行ってから合成を行う例について説明した。しかしながら、制御装置104は、現像処理を行う前のRAWデータに対してゲイン補正を行ってから合成を行い、合成後のRAWデータを現像処理するようにしてもよい。また、現像処理を行ってからゲイン補正を行うか、現像処理前にゲイン補正を行うかを、主要被写体の種類、撮影シーンの種類、ISO感度、画質モード、現像処理にかかる演算時間の少なくとも1つに基づいて、切り替えるようにしてもよい。
(2) In the above-described embodiment, the example in which the
(3)制御装置104は、合成用画像を現像する際には、カメラのスイング方向、カメラのスイング量、主要被写体の種類、撮影シーンの種類、主要被写体の移動量、主要被写体のポーズや配置に基づいて、各合成用画像に適用する現像用パラメータを変更するようにしてもよい。ただし、ベストショット画像が基調となるよう、ベストショット画像の撮影タイミング付近の合成用画像は、デフォルトの現像用パラメータを施すのが好ましい。
(3) When developing the composition image, the
(4)上述した実施の形態では、制御装置104は、1枚のベストショット画像に対して1枚の合成用画像を作成し、それらを関連付けて記録する例について説明した。しかしながら、制御装置104は、1枚のベストショット画像に対して、演出効果が異なる複数枚の合成用画像を作成するようにしてもよい。この場合、合成画像の枚数は使用者が任意に設定できるようにしてもよいし、カメラ100があらかじめ準備されたアルゴリズムにより、自動的に設定するようにしてもよい。
(4) In the above-described embodiment, the
(5)上述した実施の形態では、制御装置104は、現像後合成用画像の枚数に応じて各現像後合成用画像にかけるゲイン補正量を決定してゲイン補正を行う例について説明した。しかしながら、制御装置104は、撮影条件や被写体に基づいて各現像後合成用画像にかけるゲイン補正量を決定するようにしてもよい。
(5) In the above-described embodiment, an example has been described in which the
(6)制御装置104は、合成画像の演出効果をさらに高めるために、以下のような処理を行ってもよい。例えば、合成画像に特徴ある演出効果を出すために、プリキャプチャー撮影時にショット毎にピントを合わせる距離を変えておいてもよい。その際、プリキャプチャー撮影の前に主要被写体の種類や撮影シーンの種類を判断し、この判断結果に応じてデフォーカス量を可変としても良い。また、レリーズボタン全押しのタイミングではデフォーカス量を最小としてもよい。あるいは、制御装置104は、合成画像を解析し、解析結果に応じた画像処理を施すようにしてもよい。例えば、制御装置104は、合成画像の階調を解析し、適応的に階調補正処理を行ってもよい。また、合成画像の雰囲気を解析し、適応的にデジタルフィルターをかけてぼかし処理を行うようにしてもよい。また、制御装置104は、合成画像の彩度を解析し、彩度強調処理を行うようにしてもよい。
(6) The
なお、本発明の特徴的な機能を損なわない限り、本発明は、上述した実施の形態における構成に何ら限定されない。また、上述の実施の形態と複数の変形例を組み合わせた構成としてもよい。 Note that the present invention is not limited to the configurations in the above-described embodiments as long as the characteristic functions of the present invention are not impaired. Moreover, it is good also as a structure which combined the above-mentioned embodiment and a some modification.
100 カメラ、101 操作部材、102 レンズ、103 撮像素子、104 制御装置、105 メモリカードスロット、106 モニタ 100 Camera, 101 Operation member, 102 Lens, 103 Image sensor, 104 Control device, 105 Memory card slot, 106 Monitor
Claims (15)
使用者による撮影動作を検出したときに、前記予備撮影手段によって取得された予備撮影画像データの中から特定の一枚の画像を選択する選択手段と、
前記予備撮影画像データの中から合成用画像を抽出し、抽出した前記合成用画像と前記特定の一枚の画像とを合成する合成手段と、
前記選択手段によって選択された前記特定の一枚の画像と、前記合成手段によって合成された合成画像とを記録する記録手段とを備えることを特徴とするカメラ。 Pre-shooting means for acquiring pre-shooting by acquiring image data input from the image sensor in time series when detecting a preparatory operation for shooting by a user;
A selection means for selecting a specific one image from the preliminary photographed image data acquired by the preliminary photographing means when detecting a photographing operation by the user;
Synthesizing means for extracting a synthesis image from the preliminary image data, and synthesizing the extracted synthesis image and the specific one image;
A camera comprising: a recording unit that records the one specific image selected by the selection unit and the synthesized image synthesized by the synthesis unit.
前記選択手段は、前記予備撮影画像データのそれぞれを解析して評価値を算出し、前記評価値が最も高い画像を前記特定の一枚の画像として選択することを特徴とするカメラ。 The camera of claim 1,
The selection unit analyzes each of the preliminary photographed image data, calculates an evaluation value, and selects an image having the highest evaluation value as the specific single image.
前記選択手段によって選択された前記特定の一枚の画像を、使用者からの指示に基づいて、前記予備撮影画像データの中から選択し直すことを特徴とするカメラ。 The camera according to claim 1 or 2,
The camera, wherein the one specific image selected by the selection means is reselected from the preliminary photographed image data based on an instruction from a user.
前記合成手段は、撮影条件や被写体に基づいて、前記予備撮影画像データの中から前記合成用画像を抽出することを特徴とするカメラ。 The camera according to any one of claims 1 to 3,
The camera characterized in that the synthesizing means extracts the synthesis image from the preliminary photographed image data based on photographing conditions and a subject.
前記合成手段は、撮影条件や被写体に基づいて、前記予備撮影画像データの中から抽出する前記合成用画像の数を決定することを特徴とするカメラ。 In the camera according to any one of claims 1 to 4,
The camera is characterized in that the synthesizing means determines the number of images for synthesis extracted from the preliminary photographed image data based on photographing conditions and subjects.
前記合成用画像にゲイン補正を施すゲイン補正手段をさらに備え、
前記合成手段は、前記ゲイン補正手段によってゲイン補正が施された後の前記合成用画像を合成することにより、演出効果を付与した前記合成画像を生成することを特徴とするカメラ。 In the camera according to any one of claims 1 to 5,
Further comprising gain correction means for performing gain correction on the image for synthesis;
The camera is characterized in that the synthesizing unit generates the synthesized image with a presentation effect by synthesizing the synthesis image after the gain correction is performed by the gain correction unit.
前記ゲイン補正手段は、前記合成用画像の数、撮影条件、被写体の少なくとも1つに基づいて、前記合成用画像に施すゲイン量を決定することを特徴とするカメラ。 The camera according to claim 6, wherein
The camera according to claim 1, wherein the gain correction unit determines a gain amount to be applied to the composition image based on at least one of the number of the composition images, photographing conditions, and a subject.
前記ゲイン補正手段は、前記合成用画像のうち、前記ベストショット画像に撮影時間が近いものには高いゲインを掛けて明るめにゲイン補正を行い、前記特定の一枚の画像から撮影時間が遠くなるほど、掛けるゲインを低くすることを特徴とするカメラ。 The camera according to claim 7, wherein
The gain correction means performs a gain correction to increase the brightness by multiplying the best shot image that is close to the shooting time among the images for synthesis, and the longer the shooting time is from the specific image. A camera characterized by lowering the gain to be applied.
前記合成手段は、演出効果が異なる複数の前記合成画像を生成することを特徴とするカメラ。 In the camera according to any one of claims 6 to 8,
The said synthetic | combination means produces | generates the said some synthesized image from which a production effect differs.
前記合成手段によって生成された前記合成画像に対して画像処理を施すことにより、演出効果をさらに高める画像処理手段をさらに備えることを特徴とするカメラ。 In the camera according to any one of claims 1 to 9,
A camera, further comprising: an image processing unit that further enhances an effect by performing image processing on the combined image generated by the combining unit.
前記画像処理手段は、前記合成画像に対して、階調補正処理、ぼかし処理、彩度強調処理のうちの少なくとも1つを施すことを特徴とするカメラ。 The camera of claim 10, wherein
The camera according to claim 1, wherein the image processing means performs at least one of gradation correction processing, blurring processing, and saturation enhancement processing on the composite image.
撮影時の手振れを検出する手振れ検出手段をさらに備え、
前記合成手段は、前記手振れ検出手段によって検出された手振れ量が所定値以下のときは、前記特定の一枚の画像と前記合成用画像の画像内の一部の領域を用いて前記合成用画像の位置合わせを行って合成を行うことを特徴とするカメラ。 The camera according to any one of claims 1 to 11,
The camera further includes camera shake detection means for detecting camera shake during shooting,
When the amount of camera shake detected by the camera shake detection unit is equal to or less than a predetermined value, the synthesizing unit uses the specific image and a part of the image in the image for synthesis to use the image for synthesis. A camera characterized by combining and performing position alignment.
前記合成手段は、位置合わせをした後に、全ての画像の大きさが揃うように、前記特定の一枚の画像と前記合成用画像とをクロップすることを特徴とするカメラ。 The camera according to claim 12, wherein
The composition unit crops the specific image and the composition image so that all the images have the same size after alignment.
前記記録手段は、前記特定の一枚の画像と前記合成画像とを関連付けて記録することを特徴とするカメラ。 The camera according to any one of claims 1 to 13,
The camera according to claim 1, wherein the recording means records the specific image and the composite image in association with each other.
前記予備撮影画像データの中から合成用画像を抽出し、抽出した前記合成用画像と前記特定の一枚の画像とを合成する合成手段と、
前記選択手段によって選択された前記特定の一枚の画像と、前記合成手段によって合成された合成画像とを記録する記録手段とを備えることを特徴とする画像処理装置。 A selection means for selecting one specific image from the preliminary image data;
Synthesizing means for extracting a synthesis image from the preliminary image data, and synthesizing the extracted synthesis image and the specific one image;
An image processing apparatus comprising: a recording unit that records the one specific image selected by the selection unit and the synthesized image synthesized by the synthesizing unit.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012044326A JP5948960B2 (en) | 2012-02-29 | 2012-02-29 | Camera, image processing apparatus and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012044326A JP5948960B2 (en) | 2012-02-29 | 2012-02-29 | Camera, image processing apparatus and program |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016115325A Division JP6213619B2 (en) | 2016-06-09 | 2016-06-09 | Camera and program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013183220A true JP2013183220A (en) | 2013-09-12 |
JP5948960B2 JP5948960B2 (en) | 2016-07-06 |
Family
ID=49273618
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012044326A Active JP5948960B2 (en) | 2012-02-29 | 2012-02-29 | Camera, image processing apparatus and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5948960B2 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6213619B2 (en) * | 2016-06-09 | 2017-10-18 | 株式会社ニコン | Camera and program |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008198062A (en) * | 2007-02-15 | 2008-08-28 | Sony Corp | Image processor and image processing method |
JP2010045421A (en) * | 2008-08-08 | 2010-02-25 | Casio Comput Co Ltd | Imaging apparatus, image processing method, and program |
JP2010233188A (en) * | 2009-03-30 | 2010-10-14 | Canon Inc | Imaging apparatus, control method thereof and program |
JP2010263423A (en) * | 2009-05-07 | 2010-11-18 | Canon Inc | Method and device for processing image |
JP2011176557A (en) * | 2010-02-24 | 2011-09-08 | Casio Computer Co Ltd | Image processor, and method and program thereof |
-
2012
- 2012-02-29 JP JP2012044326A patent/JP5948960B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008198062A (en) * | 2007-02-15 | 2008-08-28 | Sony Corp | Image processor and image processing method |
JP2010045421A (en) * | 2008-08-08 | 2010-02-25 | Casio Comput Co Ltd | Imaging apparatus, image processing method, and program |
JP2010233188A (en) * | 2009-03-30 | 2010-10-14 | Canon Inc | Imaging apparatus, control method thereof and program |
JP2010263423A (en) * | 2009-05-07 | 2010-11-18 | Canon Inc | Method and device for processing image |
JP2011176557A (en) * | 2010-02-24 | 2011-09-08 | Casio Computer Co Ltd | Image processor, and method and program thereof |
Also Published As
Publication number | Publication date |
---|---|
JP5948960B2 (en) | 2016-07-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101342477B1 (en) | Imaging apparatus and imaging method for taking moving image | |
US8106995B2 (en) | Image-taking method and apparatus | |
JP5186021B2 (en) | Imaging apparatus, image processing apparatus, and imaging method | |
JP2017220892A (en) | Image processing device and image processing method | |
JP2006033241A (en) | Image pickup device and image acquiring means | |
US9253406B2 (en) | Image capture apparatus that can display review image, image capture method, and storage medium | |
JP5400486B2 (en) | Imaging apparatus and imaging method | |
JP2006025311A (en) | Imaging apparatus and image acquisition method | |
JP2011239267A (en) | Imaging apparatus and image processing apparatus | |
JP4760496B2 (en) | Image data generation apparatus and image data generation method | |
JP6242428B2 (en) | Imaging apparatus and imaging method | |
JP5948960B2 (en) | Camera, image processing apparatus and program | |
JP6213619B2 (en) | Camera and program | |
JP2007028331A (en) | Image generating apparatus and program thereof | |
JP2011223399A (en) | Camera | |
JP6075829B2 (en) | IMAGING DEVICE, CAMERA SYSTEM, IMAGING DEVICE CONTROL METHOD, PROGRAM, AND STORAGE MEDIUM | |
JP5029765B2 (en) | Image data generation apparatus and image data generation method | |
JP5332668B2 (en) | Imaging apparatus and subject detection program | |
JP2018026838A (en) | Camera and image processing apparatus | |
JP2009071717A (en) | Image pickup apparatus and focusing condition displaying method | |
JP2019050591A (en) | Electronic equipment, program | |
JP2013162272A (en) | Imaging device | |
JP6013574B2 (en) | Imaging apparatus and imaging method | |
JP5816732B2 (en) | Imaging apparatus and imaging method | |
JP5816733B2 (en) | Imaging apparatus and imaging method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150225 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20151105 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20151110 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160112 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160209 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160411 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160510 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160523 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5948960 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |