JP6210147B2 - Imaging display device and control method of imaging display device - Google Patents
Imaging display device and control method of imaging display device Download PDFInfo
- Publication number
- JP6210147B2 JP6210147B2 JP2016223716A JP2016223716A JP6210147B2 JP 6210147 B2 JP6210147 B2 JP 6210147B2 JP 2016223716 A JP2016223716 A JP 2016223716A JP 2016223716 A JP2016223716 A JP 2016223716A JP 6210147 B2 JP6210147 B2 JP 6210147B2
- Authority
- JP
- Japan
- Prior art keywords
- display
- line
- frame
- period
- image data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Studio Devices (AREA)
- Controls And Circuits For Display Device (AREA)
Description
本発明は、撮影装置およびその制御方法に関し、特にライブビュー表示に関する。 The present invention relates to a photographing apparatus and a control method thereof, and more particularly to live view display.
従来、ライブビューを表示する撮影装置において、被写体の像が被写体から遅延して表示されることが知られている。特許文献1には、表示素子のフレームレートを撮像素子のフレームレートの整数分の1とし、撮像素子による撮像画像が表示素子に表示されるまでの遅延時間がほぼ一定になるように制御することが記載されている(0038〜0047段落)。また、当該遅延時間は、撮像素子のフレーム周期未満となるように制御することが記載されている(0037段落)。
Conventionally, it is known that an image of a subject is displayed with a delay from the subject in a photographing apparatus that displays a live view. In
表示部の表示画面には、撮影センサーの出力データに基づいて生成される被写体の像(ライブビュー)を表示したり、ライブビューを表示する領域とは別の領域に撮影条件等の情報を表示したりするなど、種々の表示対象が表示され得る。撮影センサーのアスペクト比と表示部の表示画面のアスペクト比とが同じであって、被写体の像を表示する領域以外の領域を表示画面に設けない場合、撮影センサーと表示部とを同期させる(撮影センサーのフレーム撮像周期と同じ長さの期間に1フレーム分の表示を行う)ことはそれほど困難でないと考えられる。しかし、ライブビューとライブビュー以外の情報等のように様々な表示対象を表示画面に表示させる場合は、撮影センサーと表示部とを同期させることは容易ではない。なお、特許文献1には、フレーム単位の遅延時間がほぼ一定になるように制御することは記載されているが、表示画面の構成については特に言及されていない。 本発明は、上記課題に鑑みてなされたもので、撮影センサーの出力データに基づいて生成される画像データと当該画像データ以外の情報とを撮影センサーのフレーム撮像周期と同じ長さの期間に表示させることを目的とする。 On the display screen of the display unit, an image of the subject (live view) generated based on the output data of the shooting sensor is displayed, and information such as shooting conditions is displayed in a different area from the area where the live view is displayed. For example, various display objects can be displayed. When the aspect ratio of the shooting sensor is the same as that of the display screen of the display unit and no area other than the area for displaying the subject image is provided on the display screen, the shooting sensor and the display unit are synchronized (shooting It is considered that it is not so difficult to display one frame during a period having the same length as the frame imaging cycle of the sensor. However, when various display objects such as live view and information other than the live view are displayed on the display screen, it is not easy to synchronize the imaging sensor and the display unit. Japanese Patent Application Laid-Open No. 2004-228561 describes that control is performed so that the delay time in units of frames is substantially constant, but the configuration of the display screen is not particularly mentioned. The present invention has been made in view of the above problems, and displays image data generated based on output data of a photographing sensor and information other than the image data in a period having the same length as the frame imaging cycle of the photographing sensor. The purpose is to let you.
上記目的を達成するための撮影装置は、画像データ生成部と、バッファーと、表示制御部と、を備える。画像データ生成部は、被写体を撮像する撮影センサーの出力データに基づいて前記被写体の像を示す画像データを表示部のラインごとに生成する。バッファーは、生成された画像データを複数ライン分蓄積する容量を有する。表示制御部は、第一表示領域と第二表示領域とから構成される表示部の表示画面の第一表示領域にバッファーに複数ライン分(1ライン以上)の画像データが蓄積された後に画像データを含む表示データをa以上b以下の長さのライン表示周期で表示させ、第二表示領域に画像データを含まない表示データをaの長さのライン表示周期で表示させる。aは、撮影センサーのフレームレートより表示能力としてのフレームレートが高い表示部のライン表示周期の最短の長さを指す。bは、撮影センサーのフレームレートで撮影センサーが動作している場合に1ライン分の画像データが生成される周期の最長の長さを指す。1ライン分の画像データを生成するのに要する時間はラインごとに変動しうる。bは変動しうる時間のうち最長の時間を指す。そして、a<bという関係にある。なお、第一表示領域は複数ラインで構成される領域であり幅(水平方向の長さ)は表示画面の幅(水平方向の長さ)と等しい。また、第二表示領域は複数ラインで構成される領域であり幅(水平方向の長さ)は表示画面の幅(水平方向の長さ)と等しい。なお、表示部における「表示能力としてのフレームレート」は、後述する「表示条件を満たすまで次の表示対象ラインの表示開始を待機する」ことをしない場合に、実際に1フレーム分の画像を表示することができるフレームレートを意味する。また、撮影センサーのフレームレートは、撮影センサーの出力データに基づいて生成された画像データを表示部に表示するいわゆるライブビュー表示を行う際の撮影センサーにおけるフレームレートを意味する。 An imaging device for achieving the above object includes an image data generation unit, a buffer, and a display control unit. The image data generation unit generates image data indicating an image of the subject for each line of the display unit based on output data of a photographing sensor that captures the subject. The buffer has a capacity for storing the generated image data for a plurality of lines. The display control unit stores image data for a plurality of lines (one line or more) in the buffer in the first display area of the display screen of the display unit configured by the first display area and the second display area. Is displayed in a line display cycle having a length of a to b, and display data not including image data is displayed in a second display region in a line display cycle of length a. a indicates the shortest length of the line display cycle of the display unit having a higher frame rate as the display capability than the frame rate of the imaging sensor. b indicates the longest length of the cycle in which image data for one line is generated when the image sensor is operating at the frame rate of the image sensor. The time required to generate image data for one line can vary from line to line. “b” indicates the longest time that can be varied. The relationship is a <b. The first display area is an area composed of a plurality of lines, and the width (the length in the horizontal direction) is equal to the width of the display screen (the length in the horizontal direction). The second display area is an area composed of a plurality of lines, and the width (horizontal length) is equal to the width of the display screen (horizontal length). Note that the “frame rate as display capability” in the display unit actually displays an image for one frame when “the display start of the next display target line is not waited until the display condition is satisfied” to be described later. Means the frame rate that can be. The frame rate of the imaging sensor means the frame rate of the imaging sensor when performing so-called live view display in which image data generated based on output data of the imaging sensor is displayed on the display unit.
バッファーに複数ライン分蓄積済みでない状態で第一表示領域の表示を開始する場合、画像データの生成が完了していないラインを表示しようとすると不具合が生じるため、例えば1ライン分の画像データの生成に要する最長の時間(b)を第一表示領域のライン表示周期として1ラインずつ表示することによって未生成のラインを表示しようとすることによる不具合を回避できる。しかし、そうすると、撮影センサーが1フレーム分の出力データを出力する期間よりも、第一表示領域の表示に要する期間を短縮することはできない。撮影センサーが1フレーム分の出力データを出力する期間よりも、第一表示領域の表示に要する期間を短縮することはできなければ、撮影センサーのフレーム撮像周期と同じ長さの期間内に、撮影センサーの出力データに基づいて生成される被写体の像を示す画像データに加えて当該画像データ以外の情報を表示するための十分な期間を設けることができない。 そこで本構成では、バッファーに複数ライン分の画像データの蓄積が完了した後に第一表示領域における表示を開始する。バッファーに蓄積済みの画像データはただちに表示させることができるため、表示部が許容する最短の長さaのライン表示周期で表示することができる。したがって例えば第一表示領域の全ラインをbの長さのライン表示周期で表示する構成と比較して、本構成の場合は第一表示領域の表示に要する期間を短縮できる(また、第一表示領域の各ラインにおける表示遅延を短縮することができる)。その結果、撮影センサーの出力データに基づいて生成される被写体の像を示す画像データを表示する期間に加えて、当該画像データ以外の情報を表示する期間を、撮影センサーのフレーム撮像周期と同じ長さの期間内に設けることができる。連続的に動画的に撮影センサーの出力データに基づいて生成される被写体の像を示す画像データ以外の情報(例えば、撮影条件を示す文字や図形、あるいは、静止画像)を表示する領域を第二表示領域と呼ぶ。 If the display of the first display area is started in a state where a plurality of lines have not been accumulated in the buffer, a problem occurs if an attempt is made to display a line for which generation of image data has not been completed. For example, generation of image data for one line By displaying the longest time (b) required for each line as the line display period of the first display area one line at a time, it is possible to avoid problems caused by trying to display ungenerated lines. However, in this case, it is not possible to shorten the period required for displaying the first display area, compared to the period in which the imaging sensor outputs output data for one frame. If the period required to display the first display area cannot be shortened compared to the period in which the image sensor outputs output data for one frame, the image can be captured within the same period as the frame image capturing period of the image sensor. It is not possible to provide a sufficient period for displaying information other than the image data in addition to the image data indicating the image of the subject generated based on the output data of the sensor. Therefore, in this configuration, display in the first display area is started after accumulation of image data for a plurality of lines in the buffer is completed. Since the image data already stored in the buffer can be displayed immediately, it can be displayed with the line display cycle of the shortest length a allowed by the display unit. Therefore, for example, in the case of this configuration, the period required for displaying the first display region can be shortened compared to a configuration in which all the lines of the first display region are displayed with a line display cycle of length b (and the first display region is also displayed). Display delay in each line of the area can be reduced). As a result, in addition to the period for displaying the image data indicating the image of the subject generated based on the output data of the imaging sensor, the period for displaying information other than the image data has the same length as the frame imaging cycle of the imaging sensor. It can be provided within this period. A second area for displaying information other than image data indicating an image of a subject generated continuously based on the output data of the imaging sensor in a moving image (for example, characters or figures indicating imaging conditions or a still image) is displayed. This is called a display area.
また本構成では、第二表示領域においては、全ラインをaの長さのライン表示周期で表示を行うため、全ラインをaより長いライン表示周期で表示を行う構成と比較すると第二表示領域の表示に要する時間を短縮できる。第二表示領域の表示に要する時間を短縮できることによって、撮影センサーのフレーム撮像周期と同じ長さの期間内に、第一表示領域への画像データの表示期間に加えて、第二表示領域の表示期間も含まれるようにするという目的の達成に寄与することができる。第二表示領域は、撮影センサーの出力データに基づいて生成された画像データを含まない表示データ(例えば撮影条件等を示す文字や図形)を表示する領域である。撮影条件等は、予め表示され得る情報が特定される。したがって、表示開始前にメモリに対して第二表示領域に表示する表示データを記録しておくことが可能であり、当該メモリに対する当該表示データの記録が完了すれば、当該メモリを参照して当該表示データを逐次取得することで表示部における表示が可能になる。このため、第二表示領域に表示データを表示する際に、例えば当該表示データの生成処理が完了するまでラインごとに待機するなどの待機期間を設ける必要はなく、表示部におけるライン表示周期の最短の長さaで表示することが可能である。 Further, in this configuration, in the second display area, all lines are displayed with a line display period of length a, so that the second display area is compared with a structure in which all lines are displayed with a line display period longer than a. The time required for displaying can be reduced. Since the time required for displaying the second display area can be shortened, the display of the second display area can be displayed in addition to the display period of the image data in the first display area within the same length as the frame imaging cycle of the image sensor. This can contribute to the achievement of the purpose of including the period. The second display area is an area for displaying display data that does not include image data generated based on the output data of the imaging sensor (for example, characters or graphics indicating imaging conditions). Information that can be displayed in advance is specified for the shooting conditions and the like. Therefore, display data to be displayed in the second display area can be recorded in the memory before the display is started. When recording of the display data in the memory is completed, the memory is referred to and the display data is displayed. By sequentially acquiring display data, display on the display unit becomes possible. For this reason, when displaying display data in the second display area, it is not necessary to provide a waiting period such as waiting for each line until the display data generation processing is completed, and the display unit has the shortest line display cycle. It is possible to display with the length a.
このように、バッファーに複数ライン分の画像データの蓄積が完了した後に第一表示領域に当該画像データに基づく表示を開始させることによって、第一表示領域の表示期間を撮影センサーが1フレーム分の出力データを出力する期間よりも短縮することができる。短縮することができることによって稼いだ時間を、第二表示領域の表示期間に充てることができる。また、第二表示領域においては最短の長さaのライン周期で表示させることができるため、撮影センサーのフレーム撮像周期と同じ長さの期間内に、第一表示領域の表示期間に加えて第二表示領域の表示期間も含まれるようにしやすい。したがって本構成の場合、撮影センサーのフレーム撮像周期と同じ長さの期間に、撮影センサーの出力データに基づいて生成される被写体の像を示す画像データ以外の情報も当該画像データに加えて表示することができる。すなわち、撮影センサーにおける1フレーム分の出力データの出力開始タイミングから所定の表示遅延時間を経て表示部の第一表示領域の表示が開始され、フレーム撮像周期とフレーム表示周期の長さが同等であるという同期が保たれた状態で撮影および表示を行うことができる。両者の同期が保たれない場合は表示遅延時間(撮影センサーの撮影から当該撮影に基づく画像データが表示されるまでの時間)もフレームごとに大きく異なってしまう可能性があり、被写体の動きが不自然に見えるためライブビューとしての使い勝手は悪い。しかし本構成の場合は、第一表示領域において被写体の動きを自然に見せることができるとともに、1フレーム内に第一表示領域に加えて第二表示領域も表示させることができる。 In this way, by starting display based on the image data in the first display area after the accumulation of the image data for a plurality of lines in the buffer is completed, the imaging sensor displays the display period of the first display area for one frame. This can be shorter than the period for outputting the output data. The time earned by being able to be shortened can be used for the display period of the second display area. In addition, since the second display area can be displayed with the line cycle of the shortest length a, the second display area has the same length as the frame imaging period of the imaging sensor in addition to the display period of the first display area. It is easy to include the display period of the two display areas. Therefore, in the case of this configuration, information other than the image data indicating the image of the subject generated based on the output data of the imaging sensor is also displayed in addition to the image data during a period having the same length as the frame imaging cycle of the imaging sensor. be able to. That is, display of the first display area of the display unit is started after a predetermined display delay time from the output start timing of output data for one frame in the imaging sensor, and the length of the frame imaging cycle is equal to the length of the frame display cycle. Thus, shooting and display can be performed in a state where synchronization is maintained. If the synchronization between the two cannot be maintained, the display delay time (the time from when the image sensor is captured until the image data based on the image is displayed) may also vary greatly from frame to frame, and the movement of the subject is inconsequential. Usability as a live view is bad because it looks natural. However, in the case of this configuration, the movement of the subject can be shown naturally in the first display area, and the second display area can be displayed in addition to the first display area in one frame.
さらに、上記目的を達成するための撮影装置において、表示制御部は、次の表示対象ラインを表示するための表示条件を満たすまで当該次の表示対象ラインの表示開始を待機し、当該表示条件を満たした後に当該次の表示対象ラインを表示させてもよい。 画像データの生成処理の処理時間はラインごとに変動しうる。そのため、第一表示領域においては、次の表示対象ラインを表示するための表示条件を満たすまで当該次の表示対象ラインの表示を待機し、表示条件を満たしてから表示する構成を採用する。その結果、どのラインについても一律に同じ長さのライン表示周期で表示を行う構成と比較すると、表示準備が整っているにも関わらずさらに無用に待機することや、表示準備が整っていないラインを表示することによる不具合の発生を防止することができる。また、どのラインに対しても一律に最長の長さbのライン表示周期で表示を行う構成と比較すると、本構成は第一表示領域の表示に要する期間を短縮することができる。 Further, in the photographing apparatus for achieving the above object, the display control unit waits for the display start of the next display target line until the display condition for displaying the next display target line is satisfied, and the display condition is set. The next display target line may be displayed after satisfying the condition. The processing time of the image data generation process can vary from line to line. Therefore, in the first display area, a configuration is adopted in which the display of the next display target line is waited until the display condition for displaying the next display target line is satisfied, and the display is satisfied after the display condition is satisfied. As a result, when compared with a configuration in which every line is displayed with the same line display cycle of the same length, it is possible to wait even more uselessly even though it is ready for display, or a line that is not ready for display. It is possible to prevent the occurrence of problems caused by displaying. Further, as compared with a configuration in which display is uniformly performed with a line display cycle of the longest length b for any line, this configuration can shorten the period required for displaying the first display region.
なお、次の表示対象ラインを表示するための表示条件は、当該次の表示対象ラインを表示する準備が整った(表示させても不具合を生じない)ことを示す条件であればよく、具体的には撮影装置の内部仕様に応じて様々な態様を採用可能である。また、表示条件を満たしたか否かを表示制御部が判断するための判断材料を取得する構成も、撮影装置の内部仕様に応じて様々な態様を採用可能である。他に、ラインごとに共通の長さの位相差を設ける場合(例えば特開2007−243615号公報には、同一モードにおいて各フレーム周期に対してΔTが与えられ、表示対象となる画像の全ライン周期について共通の位相差が与えられていることになる。
)、当該位相差に対応する時間が経過したことをもって表示条件が成立したとみなす構成としてもよい。他に、特開2009−159067号公報に開示されるように、ラインごとに共通の位相差を設ける場合、当該位相差に対応する時間が経過したことをもって表示条件が成立したとみなす構成としても良い。
The display condition for displaying the next display target line may be any condition that indicates that the next display target line is ready to be displayed (no problem occurs even if displayed). Various modes can be adopted depending on the internal specifications of the photographing apparatus. Also, the configuration for acquiring the determination material for the display control unit to determine whether or not the display condition is satisfied can adopt various modes according to the internal specifications of the photographing apparatus. In addition, in the case where a phase difference having a common length is provided for each line (for example, in Japanese Patent Application Laid-Open No. 2007-243615, ΔT is given to each frame period in the same mode, and all lines of an image to be displayed are displayed. A common phase difference is given for the period.
), The display condition may be considered to be satisfied when the time corresponding to the phase difference has elapsed. In addition, as disclosed in Japanese Patent Application Laid-Open No. 2009-159067, when a common phase difference is provided for each line, the display condition may be considered to be satisfied when the time corresponding to the phase difference has elapsed. good.
さらに、上記目的を達成するための撮影装置において、表示制御部は、第一表示領域において、次の表示対象ラインを表示するための表示条件を満たすまで当該次の表示対象ラインの表示開始を待機する必要がない場合は、現在の表示対象ラインをaの長さのライン表示周期で表示させる。 すなわち、待機する必要がない場合には最短の長さaのライン表示周期で現在の表示対象ラインを表示し終え、速やかに次の表示対象ラインを表示するためのライン表示周期に移行することができる。そのため、第一表示領域の表示に要する期間の短縮に寄与することができる。なお、表示条件を満たすまで待機し満たした後に表示対象ラインを表示する構成を備え、待機する必要のない場合は最短の長さaで表示させる構成を備えることにより、第一表示領域におけるライン表示周期はラインごとにa以上b以下の範囲で変動する(最長で長さb、または、長さbほど時間がかからなければbより短い長さ、最短で長さaに変動する)。 Furthermore, in the imaging device for achieving the above object, the display control unit waits for the display start of the next display target line until the display condition for displaying the next display target line is satisfied in the first display area. If there is no need to do this, the current display target line is displayed with a line display period of length a. That is, when there is no need to wait, the display of the current display target line is completed in the line display cycle of the shortest length a, and the process immediately shifts to the line display cycle for displaying the next display target line. it can. Therefore, it is possible to contribute to shortening the period required for displaying the first display area. In addition, it is equipped with the structure which displays a display object line after waiting until it satisfy | fills display conditions, and when it is not necessary to wait, it is equipped with the structure displayed by the shortest length a, By the line display in a 1st display area | region The period varies within a range from a to b for each line (maximum length b, or if the length b does not take as much time, the period is shorter than b and the minimum is length a).
さらに、上記目的を達成するための撮影装置において、画像データ生成部は、生成した画像データを順次バッファーに出力する。また、表示制御部は、第一表示領域が連続するmライン分(mは自然数)の領域である場合に、第一表示領域の1ライン目の画像データがバッファーへ蓄積開始されてからiライン目(iは1≦i≦mとなる自然数)までの画像データがバッファーに蓄積完了した後、バッファーに蓄積された画像データに基づいて前記第一表示領域の1ライン目からmライン目をa以上b以下の長さのライン表示周期で表示させる。 Furthermore, in the photographing apparatus for achieving the above object, the image data generation unit sequentially outputs the generated image data to a buffer. In addition, when the first display area is an area of continuous m lines (m is a natural number), the display control unit starts i lines after the image data of the first line of the first display area starts to be accumulated in the buffer. After image data up to the eye (i is a natural number satisfying 1 ≦ i ≦ m) has been accumulated in the buffer, the first to m-th lines in the first display area are a based on the image data accumulated in the buffer. The display is performed with a line display cycle having a length of b or less.
バッファーに1ライン目からiライン分(複数ライン分)の画像データが既に蓄積された状態で第一表示領域の表示を開始することにより、少なくとも1ライン目から(i−1)ライン目までの画像データはすぐに表示できる状態であるため最短の長さaのライン表示周期で表示することができる。そのため、第一表示領域の表示に要する期間の短縮に寄与することができる。 By starting the display of the first display area in a state where image data for the i-th line (for multiple lines) has already been accumulated from the first line in the buffer, at least the first line to the (i-1) -th line Since the image data can be displayed immediately, it can be displayed in the line display cycle of the shortest length a. Therefore, it is possible to contribute to shortening the period required for displaying the first display area.
また、上記目的を達成するための他の撮影装置は、次に述べるような画像データ生成部と、バッファーと、表示制御部と、を備えている。画像データ生成部は、被写体を撮像する撮影センサーの出力データに基づいて被写体の像を示す画像データを表示部のラインごとに生成する。バッファーは、生成された画像データを蓄積する。表示制御部は、表示部の表示画面の第一表示領域に前記画像データを含む表示データを表示させ、前記表示画面の第二表示領域に前記画像データを含まない表示データを表示させる。この構成において、表示部のライン表示周期は、前記撮影センサーのフレームレートで前記撮影センサーが動作している場合に1ライン分の前記画像データが生成される周期よりも短い。またこの構成において、表示制御部は、バッファーに複数ライン分前記画像データが蓄積された後において、撮影センサーのフレームレートより高い第一のフレームレートで画像データを表示可能な状態である表示部に、第一のフレームレートで、第一表示領域および第二表示領域の表示を行う。 In addition, another imaging apparatus for achieving the above object includes an image data generation unit, a buffer, and a display control unit as described below. The image data generation unit generates image data indicating an image of the subject for each line of the display unit based on output data of a photographing sensor that captures the subject. The buffer stores the generated image data. The display control unit displays the display data including the image data in the first display area of the display screen of the display unit, and displays the display data not including the image data in the second display area of the display screen. In this configuration, the line display cycle of the display unit is shorter than the cycle in which the image data for one line is generated when the imaging sensor is operating at the frame rate of the imaging sensor. Further, in this configuration, the display control unit is configured to display the image data at a first frame rate higher than the frame rate of the imaging sensor after the image data is accumulated for a plurality of lines in the buffer. The first display area and the second display area are displayed at the first frame rate.
また、上記目的を達成するための他の撮影装置において、表示制御部は、第一表示領域において、次の表示対象ラインを表示するための表示条件を満たすまで当該次の表示対象ラインの表示開始を待機し、当該表示条件を満たした後に当該次の表示対象ラインを表示させるよう構成される。また、表示制御部は、バッファーに複数ライン分画像データが蓄積されるまでは、第一のフレームレートより低い第二のフレームレートで、第一表示領域および第二表示領域の表示を行う。 In another imaging device for achieving the above object, the display control unit starts displaying the next display target line until a display condition for displaying the next display target line is satisfied in the first display area. And the next display target line is displayed after the display condition is satisfied. Further, the display control unit displays the first display area and the second display area at a second frame rate lower than the first frame rate until image data for a plurality of lines is accumulated in the buffer.
また、上記目的を達成するための他の撮影装置において、バッファーは、表示制御部が第二のフレームレートで、Nフレーム目の表示を行っている間に、(N+1)フレーム目の複数ライン分の画像データを蓄積する。 In another imaging device for achieving the above object, the buffer is provided for a plurality of lines of the (N + 1) th frame while the display control unit is displaying the Nth frame at the second frame rate. Image data is stored.
また、上記目的を達成するための他の撮影装置において、表示制御部は、バッファーに複数ライン分画像データが蓄積された後において、第一表示領域および第二表示領域の表示を行うように制御する。また、バッファーはその用途目的を達成できればよく、バッファーとしてVRAM(ビデオRAM)を利用して構成しても良い。 In another imaging device for achieving the above object, the display control unit controls the display of the first display area and the second display area after the image data for a plurality of lines is accumulated in the buffer. To do. The buffer only needs to achieve its intended purpose, and may be configured using VRAM (video RAM) as the buffer.
さらに、本発明のように、表示画面の第一表示領域に画像データを含む表示データをa以上b以下の長さのライン表示周期で表示させ、表示画面の第二表示領域に画像データを含まない表示データをaの長さのライン表示周期で表示させる手法は、プログラムや方法の発明としても成立する。また、以上のような装置、プログラム、方法は、単独の装置として実現される場合もあれば、複合的な機能を有する装置において共有の部品を利用して実現される場合もあり、各種の態様を含むものである。 Further, as in the present invention, display data including image data is displayed in the first display area of the display screen with a line display cycle having a length of a to b, and the image data is included in the second display area of the display screen. A method for displaying non-display data with a line display period of length a is also established as an invention of a program or method. In addition, the apparatus, program, and method as described above may be realized as a single apparatus, or may be realized using a shared component in an apparatus having multiple functions. Is included.
以下、本発明の実施の形態を添付図面を参照しながら説明する。尚、各図において対応する構成要素には同一の符号が付され、重複する説明は省略される。 1.第一実施形態1−1.撮影装置の構成 図1は本発明の一実施形態にかかる撮影装置1の構成を示すブロック図である。撮影装置1には、光学系10、撮影センサー15、ASIC200、タイミング制御部30、表示部40、CPU50、VRAM51、SD−RAM52、ROM53、RAM54、操作部55、が備えられている。CPU50は、VRAM51、SD−RAM52、RAM54を適宜利用してROM53に記録されたプログラムを実行可能であり、当該プログラムによりCPU50は、操作部55に対する操作に応じて撮影センサー15にて撮影された被写体を示す画像データを生成する機能を実行する。なお、操作部55はシャッターボタンと、モードを切り換えるためのモード切換手段としてのダイヤルスイッチと、絞りとシャッター速度を切り換えるためのダイヤルスイッチと、各種の設定メニューを操作するためのプッシュボタンとを備えており、利用者は当該操作部55に対する操作によって撮影装置1に対して各種の指示を与えることができる。
Hereinafter, embodiments of the present invention will be described with reference to the accompanying drawings. In addition, the same code | symbol is attached | subjected to the corresponding component in each figure, and the overlapping description is abbreviate | omitted. 1. First embodiment 1-1. Configuration of Imaging Device FIG. 1 is a block diagram showing a configuration of an
光学系10は、撮影センサー15に被写体画像を結像させるレンズ11、絞り12、シャッター13およびローパスフィルター14を備える。このうち、レンズ11と絞り12とは図示しない筐体に交換可能に取り付けられる。レンズ11は図1では簡略化して1枚のレンズで表しているが、光軸方向に並べられた複数枚のレンズを含み、各レンズは外縁部で支持される。ローパスフィルター14は、撮影光の撮影センサー15における空間的高周波数成分を遮断することにより、撮影した画像におけるモアレを防止する。絞り12は、開口径を変化させることのできる複数の遮光板で構成されている。シャッター13は機械式のフォーカルプレーン型シャッターである。
The
撮影センサー15としては、例えばベイヤー配列されたカラーフィルターと、光量に応じた電荷を光電変換によって画素ごとに蓄積する複数のフォトダイオードとを備えるCMOS(Complementary Metal Oxide Semiconductor)イメージセンサー、CCD(Charge Coupled Device)イメージセンサー等の固体撮像素子が用いられる。撮影センサー15の画素の位置は直交座標系における座標で規定され、一方の座標軸に平行な方向に並ぶ複数の画素によってラインが構成され、複数のラインが他方の座標軸に平行な方向に並ぶように構成されている。本明細書では、ラインに平行な方向を水平方向、ラインに垂直な方向を垂直方向と呼ぶ。撮影センサー15の全画素によって構成される1画面を1フレームと呼ぶ。
The
タイミング制御部30はセンサー制御部31と表示制御部32とを備える。本実施形態においては、撮影センサー15はタイミング制御部30のセンサー制御部31が出力する各種信号に同期した動作を行う。すなわち、センサー制御部31は、1フレーム分のフォトダイオードの検出結果を読み出すための期間を規定する垂直同期信号(SVsync)、1ライン分のフォトダイオードの検出結果を読み出すための期間を規定する水平同期信号(SHsync)、各画素の画像データの読み出しタイミング等を規定するドットクロック信号(SDotclock)を出力する。撮影センサー15は、垂直同期信号SVsyncに応じて1フレーム分の出力データの出力を開始し、水平同期信号SHsyncにて規定される期間内にドットクロック信号SDotclockに応じたタイミングで撮影センサー15の一部の画素に対応するフォトダイオードの検出結果を示す出力データ(SD)を逐次読み出す。
The
ASIC200は、SD−RAM52に予め確保された複数ライン分のラインバッファー52a〜52dを利用し、表示部40にて被写体の像を表示するための画像データをパイプライン処理によって生成する処理を行う回路によって構成される画像データ生成部20を備えている。なお、複数ライン分のラインバッファー52a〜52dは画像データ生成部20などに設けられていても良い。また、ASIC200は画像データ出力部21を備えており、画像データ出力部21は、後述する第一表示領域R1に属するラインの表示を行う際にはラインバッファー52dに記録された画像データ(DD)を表示部40に対して線順次に出力する。この結果、撮影センサー15で撮影された被写体の像が第一表示領域R1に表示される。また、画像データ出力部21は、第二表示領域R2に属するラインの表示を行う際にはVRAM51に記録されたOSDデータを画像データ(DD)として表示部40に対して線順次に出力する。この結果、撮影条件等の文字や図形が第二表示領域R2に表示される。利用者は、表示部40をEVFとして利用しながら被写体を確認することが可能である。
The
表示部40は、撮影対象となる被写体を示す画像を表示して利用者に撮影前の被写体の様子および撮影条件等の情報を把握させるEVF(Electronic View Finder)であり、本実施形態にかかる撮影装置1はEVFを備えたミラーレスデジタルカメラである。表示部40は、図示しないインターフェース回路、液晶パネルドライバー41、液晶パネル42、図示しない接眼レンズ等を備えている。本実施形態において液晶パネル42は、画素ごとに3色のカラーフィルターに対応する3つのサブピクセルを備える高温ポリシリコンTFT(Thin Film Transistor)であり、画素の位置は直交座標系における座標で規定される。また、一方の座標軸に平行な方向に並ぶ複数の画素によってラインが構成され、複数のラインが他方の座標軸に平行な方向に並ぶように構成されている。本明細書では、ラインに平行な方向を水平方向、ラインに垂直な方向を垂直方向と呼び、液晶パネル42の全画素によって構成される1画面を1フレームと呼ぶ。
The
液晶パネルドライバー41は、各サブピクセルに電圧を印加して液晶を駆動するための信号を液晶パネル42に対して出力する。液晶パネル42は、図示しないゲートドライバおよびソースドライバを備えており、液晶パネルドライバー41から出力される信号に応じてゲートドライバが各ラインの各画素における表示タイミ
ングを制御し、ソースドライバが表示タイミングとされているラインの各画素に対して各画素の画像データに対応した電圧を印加することによって表示を行う。すなわち、液晶パネルドライバー41は、液晶パネル42における表示を行うための各種信号、例えば、1フレーム分の表示を行うための期間を規定する垂直同期信号(DVsync)、1ライン分の表示を行うための期間を規定する水平同期信号(DHsync)、各ライン内での画像データの取り込み期間を規定するデータアクティブ信号(DDactive)、各画素の画像データの取り込みタイミング等を規定するドットクロック信号(DDotclock)、各画素の画像データ(DD)を出力するように構成されている。
The liquid
なお、上述の垂直同期信号DVsync、水平同期信号DHsync、データアクティブ信号DDactive、ドットクロック信号DDotclockはタイミング制御部30の表示制御部32によって生成される。なお、本実施形態において水平同期信号DHsyncの出力タイミングは可変であり、後述するように画像データ生成部20の処理結果に依存して出力タイミングが決定される。
Note that the above-described vertical synchronization signal DVsync, horizontal synchronization signal DHsync, data active signal DDactive, and dot clock signal DDotclock are generated by the
図2Aは、本実施形態における撮影センサー15のライブビューモード時の読み出し画素を示す模式図である。ライブビューモード時は、撮影センサー15が備える有効領域の全画素に対応するフォトダイオードの検出結果を読み出すことをせずに、水平方向および垂直方向に所定の方法で間引きした間引き読み出しが行われる。ライブビューモード時は、間引き読み出しされた結果、水平方向にk個、垂直方向にj個の合計k×j個の画素に対応する出力データが撮影センサー15から出力される(実際には、撮影センサー15からk×j個の出力データを出力するためには、有効画素の周囲に画像処理を行うためのリングピクセルが必要である。そのため図2Aの水平方向k画素のデータを出力するためにはkより大きいk+α画素を読込む必要があり、垂直方向のjラインのデータを出力するためにはjより大きいj+β画素を読込む必要がある。そして水平方向にα画素、垂直方向にβ画素の画素を切り捨てることでk×j画素の出力データが撮影センサー15から出力される。ここでは説明を簡単にするために便宜的に水平方向k画素、垂直方向j画素のデータが出力されるとして記載する。)。なお、アスペクト比k:jは、後述する第一表示領域R1のアスペクト比と異なる。また、ライン数jは後述する第一表示領域R1のライン数mよりも多い。
FIG. 2A is a schematic diagram showing readout pixels in the live view mode of the
図2Bは、本実施形態における液晶パネル42の表示画面のライブビューモード時の画面構成を示す模式図である。本実施形態において液晶パネル42は、水平方向にl個、垂直方向に(m+n)個の有効画素を備えたパネルであり、液晶パネルドライバー41が出力する画像データDDの内容および出力タイミングを調整することによって、任意の位置にDDに対応した階調の表示を行うことができる。本実施形態においては、液晶パネル42の先頭ラインからmライン分の領域である第一表示領域R1に撮影センサー15の出力データに基づいて被写体の画像を表示し、当該第一表示領域R1に続くnライン分の領域である第二表示領域R2に撮影条件等の情報を示す文字や図形を表示する構成となっている。すなわち、液晶パネル42には、被写体の画像とともに撮影条件等の情報を示す文字や図形がOSD(On Screen Display)表示される。表示部40の液晶パネル42の表示画面のアスペクト比l:(m+n)は例えば4:3である。第一表示領域R1のアスペクト比l:mは例えば3:2である。
FIG. 2B is a schematic diagram showing a screen configuration in the live view mode of the display screen of the
また、利用者が操作部55を操作して撮影指示を行った場合には、撮影指示に応じて撮影センサー15は、垂直同期信号SVsyncに応じて1フレーム分の出力データ出力を開始し、水平同期信号SHsyncにて規定される期間内にドットクロック信号SDotclockに応じたタイミングで撮影センサー15の全有効画素に対応するフォトダイオードの検出結果を示す出力データを逐次読み出す。そして画像データ生成部20は、SD−RAM52等を利用しJPEG等の形式の画像データを生成して図示しないリムーバブルメモリ等に記録される。すなわち、利用者は、被写体を示す画像データを生成することが可能である。
When the user operates the
1−2.ライブビュー表示 図3は、ライブビューモード時の撮影センサー15と表示部40の動作を示すタイミングチャートである。ライブビューモード時、撮影センサー15からは、垂直同期信号SVsyncで規定される垂直同期期間Tsv(フレーム撮像周期)に1フレーム分の出力データが出力される。さらに詳細には、垂直同期期間Tsv中に水平同期信号SHsyncにて規定される水平同期期間(ライン撮像周期)に撮影センサー15の1ライン分の出力データSDが出力される。出力データSDはラインバッファー52aに一時記録される。また、ライブビューモード時、表示部40においては、垂直同期信号DVsyncで規定される垂直同期期間Tdv(フレーム表示周期)に1フレーム分の表示が更新される。さらに詳細には、垂直同期期間Tdv中に水平同期信号DHsyncにて規定される水平同期期間(ライン表示周期)に表示部40の1ライン分の表示が更新される。
1-2. Live View Display FIG. 3 is a timing chart showing operations of the
撮影センサー15から出力された出力データSDに基づいて画像データDDが生成される手順を、図1を参照しながら説明する。撮影センサー15からラインバッファー52aに出力データSDが出力されると、画像データ生成部20は、撮影センサー15から出力された出力データSDをラインバッファー52aから取得する。画素補間部20aは、注目画素について当該注目画素の周辺画素の階調値を用いた補間処理を行うことにより、各画素に対応する光電変換素子に備えられたカラーフィルターの色とは異なる2チャネルの色の階調値を算出する。この結果、各画素について3チャネルの階調値が対応付けられたデータが生成される。色再現処理部20bは、画素補間が完了したデータの各画素の階調値に対して3×3の行列演算を行うことによってより正しい色を再現するための色変換処理を行う。
色変換処理によって生成されたデータはラインバッファー52bに一時記録される。
A procedure for generating the image data DD based on the output data SD output from the
Data generated by the color conversion process is temporarily recorded in the
フィルター処理部20cは、色再現処理が完了しラインバッファー52bに一時記録されているデータに対してシャープネス調整やノイズ除去処理などのフィルター処理を実行する。ガンマ補正部20dは、画像出力する際の階調特性を補正する処理を行う。すなわち撮影センサー15の出力データの階調値が示す色を、表示部40における色特性に応じたガンマ関数によって補正するガンマ補正を、フィルター処理が完了したデータに対して実行する。ガンマ補正処理後のデータはラインバッファー52cに一時記録される。リサイズ処理部20eはラインバッファー52cに一時記録されていくガンマ補正処理後のデータを逐次参照して、目標サイズへとリサイズする。本実施形態では図2Bに示す第一表示領域R1のサイズにリサイズする。リサイズ処理部20eにてリサイズが完了すると、ASIC200における各画像処理が完了された画像データDDが生成できる。リサイズ処理後に生成された画像データDDはラインバッファー52dに一時記録される。ラインバッファーは、FIFO形式のラインバッファーであり、先に記録された画像データの順に画像データがライン単位で読み出される。
The filter processing unit 20c performs filter processing such as sharpness adjustment and noise removal processing on the data that has been subjected to the color reproduction processing and is temporarily recorded in the
ところで、撮影センサー15から線順次に出力される出力データに基づいて遅延期間を最小化して液晶パネル42における表示を行うため、本実施形態においては、液晶パネル42の各ラインに対して表示を行うための表示条件を満たした後に当該ラインを表示するための水平同期信号DHsyncが出力されるように構成されている。具体的には、タイミング制御部30の表示制御部32は、リサイズ処理部20eから当該リサイズ処理部20eにおける画像データの生成処理が終了しラインバッファー52dに出力が完了したライン番号Ldを取得することが可能である。すなわちライン番号Ldは、Ldが示すライン番号以前のライン(1ライン目からLdライン目までのライン)は表示して良いということを意味している。画像データはライン順次に生成されるため、1フレーム内において当該ライン番号より小さい番号のラインの画像データは既に生成済みでありラインバッファー52dに出力済みであることを意味する。したがって次の表示対象ラインの番号LnがLd以下であれば次の表示対象ラインの表示を行うための表示条件を満たしていることになる。なおラインバッファー52dは少なくともmライン分の画像データを記録可能なサイズを有しているものとする。
By the way, in order to display on the
そこで、タイミング制御部30の表示制御部32が、各ラインについて表示条件を満たしたタイミングに同期して水平同期信号DHsyncを出力することにより、液晶パネル42において表示条件を満たしたラインの表示を開始させる構成とする。この構成によれば、画像データの準備が整う前に各ラインの表示を開始することはなく、各ラインの表示準備が整うと即座に各ラインの表示をすることが可能になる。
Therefore, the
なお、次の表示対象ラインの番号Lnの値は表示制御部32が1ライン表示するごとにカウントアップする。次の表示対象ラインの番号Lnの値の範囲は、1≦Ln≦(m+n)である。ライン番号Ldの値は、リサイズ処理部20eによってラインバッファー52dに1ラインずつ画像データの出力が完了するごとにカウントアップされ、表示制御部32に通知される。ライン番号Ldの値の範囲は0≦Ld≦mである。Ldの値が0の場合は、1フレーム内においてまだ1ラインも画像データがラインバッファー52dに出力されていないことを意味する。なお、Ldの値がm(Ld=m)になった時点でフレームデータ出力完了フラグLdfフラグがOnになり、Ldの値が0にリセットされる(Ld=0)。Ld=0であってもLdfフラグ=Onの期間は、第一表示領域R1の画像データが全てラインバッファー52dに出力済みであるという意味であるので、表示側は次の表示対象ラインの番号Lnを表示して良い。なお、Ldfフラグは、mライン目を表示完了したと判定された時点でリセットされ、Ldfフラグ=Offに戻る。
The value of the number Ln of the next display target line is counted up every time the
図3を参照しながら詳細に動作を説明する。図3において、タイミングp1にセンサー制御部31から垂直同期信号SVsyncが出力された後、所定の長さの期間Tsv0が経過したタイミングp2に、撮影センサー15の1ライン目の出力データを取得するための水平同期信号SHsyncがセンサー制御部31から出力される。撮影センサー15の1ライン目の出力データがラインバッファー52aに出力されると、上述したように画像データ生成部20によってパイプライン処理が行われライン順次にリサイズ処理後の画像データDDがラインバッファー52dに出力、蓄積される。ΔT1は、撮影センサー15において1フレーム分の出力データの出力期間の開始タイミングp2から表示部40の第一表示領域R1の1ライン目の表示開始までに少なくとも要する時間を意味する。ΔT1には画像データ生成部20によるパイプライン処理等が含まれる。
The operation will be described in detail with reference to FIG. In FIG. 3, after the vertical synchronization signal SVsync is output from the
図4Aは、図3に示す表示部40のフレームD1の垂直同期期間Tdvにおける表示タイミングを示すタイミングチャートである。ライブビューモードが開始して最初のフレームにあたるフレームD1においては、1ライン目の画像データの表示条件を満たすとそれ以上待機することなくすぐに1ライン目の画像データを表示させる。したがってライン番号Ldの値が次の表示対象ラインの番号Ln(=1)と等しくなったことを確認すると表示制御部32は、1ライン目を表示するための水平同期信号DHsyncを出力し(タイミングp3)、1ライン目の画像データDDを表示させる。以降も同様にして、表示条件を満たしたことを確認すると表示制御部32が水平同期信号DHsyncを出力し表示させる。ライン番号Ldの値が更新される周期の長さは、1ライン分の画像データの生成に要する時間の長さと等しい。1ライン分の画像データの生成に要する時間は変動するため、ライン番号Ldの値が更新される周期の長さも変動する。ライン番号L
dが更新される周期の最長の長さをbとする。例えば図4Aでは、ライン番号Ldの値が1である期間の長さがbであることを示しているが、これは、1ライン目の画像データの生成が完了しラインバッファー52dへの出力が完了したタイミングp3から、2ライン目の画像データの生成が完了しラインバッファー52dへの出力が完了したタイミングp3''までの時間が最長の長さであるbであることを意味する。表示制御部32は水平同期信号DHsyncの出力を、次の表示対象ラインの番号Ln≦ライン番号Ldとなるまで待機しLn≦Ldとなったタイミングに応じて出力するため、水平同期期間(ライン表示周期)の最長の長さもbとなる。 なお、ライン番号Ldの値が0から1に変化したことを表示制御部32が確認してから、フレームD1を開始するための垂直同期信号DVsyncを生成してもよい。
4A is a timing chart showing display timing in the vertical synchronization period Tdv of the frame D1 of the
Let b be the longest length of the period in which d is updated. For example, FIG. 4A shows that the length of the period in which the value of the line number Ld is 1 is b. This indicates that the generation of the image data for the first line is completed and the output to the
具体的には、表示制御部32はタイミングp3で水平同期信号DHsyncを出力してから図示しないドットクロック信号DDotclockに同期させて1画素ずつ1ライン分画像データを表示させる。タイミングp3から長さaの時間が経過したタイミングp3'においては既に1ライン分の画像データの表示は終えており、次の表示対象ラインの番号Lnの値は2となる。しかしタイミングp3'においてライン番号Ldの値はまだ1であるので、表示制御部32は現在の表示対象ラインである1ライン目のライン表示周期のフロントポーチ期間Tdh2の長さを延長することでLn≦Ldとなるまで次の表示対象ラインを表示させるための水平同期信号DHsyncの出力を待機する。具体的には例えば、ダミーのドットクロック信号DDotclockを生成させたり、ドットクロック信号DDotclockの周期を延長させたりすることによってフロントポーチ期間Tdh2の長さを延長する。なお、第一表示領域R1において次の表示対象ラインを表示するための表示条件を満たすまで待機する必要のない場合は、最短の長さaで現在の表示対象ラインのライン表示周期を終える。例えば、図4Aのmライン目を表示する周期においては、後述するように次の表示対象ラインである(m+1)ライン目の表示条件を満たすまで待機する必要がないため、現在の表示対象ラインであるmライン目のライン表示周期の長さは最短の長さaとなる。具体的には、図4Aのmライン目を表示する周期においては、フレームデータ出力完了フラグLdfフラグがOnになっている。Ldfフラグ=Onの期間は、第一表示領域R1の画像データが全てラインバッファー52dに出力完了済であるため、表示側は次の表示対象ラインの番号Lnを表示して良く、mライン目を表示する周期の長さは最短の長さaとなる。なお、後述するように(m+1)ライン〜(m+n)ラインの表示周期の長さも最短の長さaとなる。
Specifically, the
図2に示すように、撮影センサー15のjライン分の出力データがリサイズ処理部20eによってmライン分の画像データにリサイズされる。したがって図4Aに示すように、1ライン目の画像データを表示させる水平同期期間の開始タイミングp3から、mライン目の画像データを表示させる水平同期期間の終了タイミングp6までの期間Tdv1の間に、mライン分の画像データ、すなわち第一表示領域R1への表示が完了する。図4Aに示すように、1ライン分の表示データが生成されラインバッファー52dに出力されると当該ラインを表示するという動作が繰り返されると、図3に示すようにフレームD1における第一表示領域R1の表示期間Tdv1の長さは、1フレーム分の出力データ(jライン分の出力データ)を出力する期間Tsv1の長さとほぼ同等となる。
As shown in FIG. 2, the output data for j lines of the
第一表示領域R1への表示が完了した後m+1ライン目以降は第二表示領域R2への表示となる。ここで、表示部40の表示能力としてのフレームレートFdmaxは撮影センサー15のフレームレートFsより高い(Fdmax>Fs)。すなわち、表示条件を満たすまで水平同期信号DHsyncの出力を待機することをせずに、表示部40をフレームレートFdmaxで駆動する場合、表示部40の垂直同期期間(フレーム表示周期)は撮影センサー15の垂直同期期間(フレーム撮像周期)よりも短くなる。また、フレームレートFdmaxで表示部40を駆動する場合の水平同期期間の長さ(すなわち表示部40において許容されるライン表示周期の最短の長さ)aは、撮影センサー15をフレームレートFsで駆動する場合に1ライン分の画像データが生成される周期の最長の長さbよりも短い(a<b)。
After the display in the first display area R1 is completed, the display in the second display area R2 is performed after the (m + 1) th line. Here, the frame rate Fdmax as the display capability of the
第二表示領域R2に表示する撮影条件等の情報を示す文字や図形等のデータ(OSDデータ)やライブビューとは別の静止画は、撮影センサー15の動作によらず独立した情報であり予め作成しVRAM51に記録しておくことが可能である。あるいは、ライブビュー表示とは独立して随時OSDデータや静止画を作成しVRAM51に記録しておくことが可能である。そのため、OSDデータや静止画に基づく表示を短い水平同期期間によって実行したとしても、データ読み出しの追い越しを発生させることなく適正な表示を行うことが可能である。そこで、第二表示領域R2にOSDデータを表示する際には、bよりも短い長さであって表示部40において許容される最短の長さaのライン表示周期(水平同期期間)で第二表示領域R2の各ラインを表示する。
Character and graphic data (OSD data) indicating information such as shooting conditions displayed in the second display area R2 and still images other than the live view are independent information regardless of the operation of the
図4Aに示すように、表示制御部32は(m+1)ライン目〜(m+n)ライン目までは、aの長さのライン表示周期でDHsyncを出力し、aの長さのライン表示周期で1ラインずつOSDデータを表示させる。その結果、aより長いライン表示周期で(m+1)ライン目〜(m+n)ライン目を表示させる場合よりも短い長さの期間Tdv2で第二表示領域R2の表示を行うことができる。図3に示すように、タイミングp7で第二表示領域R2の表示期間Tdv2を終え、さらにフレームD1のフロントポーチ期間Tdv3が経過した後、表示制御部32は垂直同期信号DVsyncを出力する。図3に示すようにフレームD1の垂直同期期間Tdvは、バックポーチ期間Tdv0と第一表示領域R1の表示期間Tdv1と第二表示領域R2の表示期間Tdv2とフロントポーチ期間Tdv3とで構成される。撮影センサー15の垂直同期期間Tsvは、所定の長さの期間Tsv0と1フレーム分の出力期間Tsv1と所定の長さの期間Tsv2とで構成される。フレームS1の出力期間Tsv1の長さとフレームD1の第一表示領域R1の表示期間Tdv1の長さとがほぼ同等(センサーにはセンサー特有の余分の出力期間があるため厳密には等しくは無い。)であるにも関わらず、フレームD1ではまださらに第二表示領域R2を表示しなければならず、さらにはフロントポーチ期間Tdv3もフレームD1内に含めなければならない。しかし、撮影センサー15の垂直同期期間Tsvの残りの期間Tsv2の長さよりも、(期間Tdv2+期間Tdv3)の長さの方が長くなる。そのため、撮影センサー15の垂直同期期間Tsvの長さ(1/Fs)よりも、フレームD1においては表示部40の垂直同期期間Tdvの方が長くなる。
As shown in FIG. 4A, the
したがって、撮影センサー15の垂直同期期間Tsvの長さ(1/Fs)よりも表示部40の垂直同期期間Tdvの方が長くなったフレームD1の直後のフレームD2では、タイミングp5からΔT1経過したタイミングp8においてはまだ次のフレームの第一表示領域R1の表示を開始できる状況にない(図3においてタイミングp8はまだ前フレームD1の期間中である)。フレームD1においてはタイミングp2からΔT1経過したタイミングp3で第一表示領域R1の表示を開始することができたことと比較すると、第一表示領域R1の表示開始タイミングがフレームD1よりフレームD2はさらにΔT2遅れることになる。一方、フレームS2の出力期間Tsv1の開始タイミングp5からΔT1経過したタイミングp8後は1ライン目以降の画像データがラインバッファー52dに出力され始める。タイミングp8からタイミングp9までのΔT2の期間において1ライン目から複数ライン分(ここではiライン分とする。iは1≦i≦mの自然数。)の画像データがラインバッファー52dに出力済みとなる(すなわちΔT2は、1ライン目からiライン分の画像データをラインバッファー52dに蓄積するのに要する時間と言い換えることもできる)。そのため図4Bに示すようにタイミングp9においてライン番号Ldの値はiとなる。
Therefore, in the frame D2 immediately after the frame D1 in which the vertical synchronization period Tdv of the
図4Bに示すように、タイミングp9、すなわち次の表示対象ラインの番号Lnが1でありライン番号Ldの値がiであるタイミングp9においては、表示条件(Ln≦Ld)を満たすため、タイミングp9において表示制御部32は1ライン目を表示するためのDHsyncを出力し1ライン目を最短の長さaで表示させる。2ライン目以降も、ライン表示周期をaより長く延長させて表示条件(Ln≦Ld)を満たすまで待機する必要がない場合は水平同期信号DHsyncを最短の長さaの周期で出力する。ライン番号Ldの値が更新される周期はaより長いため、aの長さの周期で水平同期信号DHsyncを出力していくうちに表示条件を満たさない、すなわちLn>Ldとなるタイミングが発生しうる。例えば図4Bに示すタイミングp10で(m−1)ライン目を表示するための水平同期信号DHsyncを出力した後、aの長さの時間が経過したタイミングp11では次の表示対象ラインの番号Lnはmであるが、ライン番号Ldの値はまだ(m−1)であるためLn>Ldとなる。その場合は、Ln≦Ldとなるまで表示制御部32は水平同期信号DHsyncの出力を待機しLn≦Ldとなった後、水平同期信号DHsyncを出力する(タイミングp12)。
As shown in FIG. 4B, at the timing p9, that is, at the timing p9 where the number Ln of the next display target line is 1 and the value of the line number Ld is i, the timing p9 is satisfied to satisfy the display condition (Ln ≦ Ld). The
タイミングp12で第一表示領域R1の最終ラインを表示するための水平同期信号DHsyncを出力した後は、上述と同様に第二表示領域R2の表示を行う。すなわち、各ラインにつきaの長さの周期で表示を行う。 以上で説明したように、フレームD2の第一表示領域R1においては1ライン目の表示を開始する際に既にラインバッファー52dに1ライン目からiライン分の画像データが蓄積されており最短の長さaのライン表示周期で表示できるラインが少なくとも(i−1)ライン分ある。そのため、フレームD2の第一表示領域R1の表示期間Tdv1'の長さは、フレームD1のように1ライン目の表示を開始する際に1ライン目の画像データしかラインバッファー52dに蓄積されていない場合の第一表示領域R1の表示期間Tdv1の長さよりも短くなる(図3参照)。なお第二表示領域R2の表示期間Tsv2については、ライン数(nライン)も水平同期期間(長さa)も変化しないため、長さはどのフレームにおいても同じである。
After outputting the horizontal synchronization signal DHsync for displaying the last line of the first display region R1 at the timing p12, the display of the second display region R2 is performed in the same manner as described above. That is, display is performed with a period of length a for each line. As described above, in the first display region R1 of the frame D2, when the display of the first line is started, the image data for i lines from the first line is already stored in the
その結果、フレームD2の垂直同期期間Tdv'はフレームD1の垂直同期期間Tdvよりも短くなる。また、フレームD2において、次式(1)を満たせば、フレームD2の垂直同期期間Tdv'を撮影センサー15の垂直同期期間Tsvと同じ長さにすることができる。 表示期間Tdv1'の長さ≦(撮影センサー15の垂直同期期間Tsvの長さ)−(期間Tdv0 の長さ+期間Tdv2の長さ + 期間Tdv3の基準の長さ)…(1) 式(1)の左辺=式(1)の右辺、となる場合にフレームD2の垂直同期期間Tdv'が撮影センサー15の垂直同期期間Tsvと同じ長さになるのは自明である。 式(1)の左辺<式(1)の右辺、となる場合も、フレームD2のフロントポーチ期間Tdv3を予め決められた基準の長さよりも延長すること(例えばダミーの水平同期信号DHsyncを発生させたり、フロントポーチ期間Tdv3中において1以上の水平同期期間の長さを延長させたりする)により、フレームD2の垂直同期期間Tdv'を撮影センサー15の垂直同期期間Tsvと同じ長さにすることができる。
As a result, the vertical synchronization period Tdv ′ of the frame D2 is shorter than the vertical synchronization period Tdv of the frame D1. In the frame D2, if the following expression (1) is satisfied, the vertical synchronization period Tdv ′ of the frame D2 can be set to the same length as the vertical synchronization period Tsv of the
フレームD2の第一表示領域R1の表示期間Tdv1'の長さは、タイミングp9においてラインバッファー52dに蓄積済みとなっているライン数に影響を受ける。当該ライン数が、式(1)を満たす程度のライン数であればよい。このように、第一表示領域R1においてラインバッファー52dに蓄積済みのラインの画像データについては表示部40におけるライン表示周期の最短の長さaで表示させる(蓄積済みでないラインの画像データ
は表示条件を満たすまで待機し表示条件を満たした後に表示させる)ことにより、第一表示領域R1の表示期間を期間Tsv1より短縮することができる。また、第二表示領域R2においては最短の長さaで全ラインを表示させることにより、aより長い周期で全ラインを表示させる場合と比較して表示に要する時間を短縮することができる。その結果、撮影センサー15の垂直同期期間Tsvと同じ長さの期間に、撮影センサー15の出力データに基づく画像データ以外にOSD等の表示データを表示させることができ、撮影センサー15と表示部40とを同期させて動作させることができる。フレームD2の次のフレーム以降も、撮影センサー15の出力期間Tsv1の開始タイミングと表示部40の第一表示領域R1の表示期間Tdv1'の開始タイミングとの時間差(表示遅延時間)がΔT1+ΔT2の状態で、撮影センサー15と表示部40とを同期して動作させることができる。 なお、ライブビューモードが開始後最初のフレームから、撮影センサー15の出力期間Tsv1の開始タイミングと表示部40の第一表示領域R1の表示期間の開始タイミングとの時間差(表示遅延時間)がΔT1+ΔT2となるように表示部40の動作タイミングを制御してもよい。すなわち図3を用いた例では2フレーム以降から当該時間差がΔT1+ΔT2となるように制御されることを説明したが、1フレーム目から当該時間差がΔT1+ΔT2となるように制御されてももちろんよい。
The length of the display period Tdv1 ′ of the first display region R1 of the frame D2 is affected by the number of lines already accumulated in the
このように、位相差の変化(フレームS1とフレームD1ではΔT1であるのに対し、フレームS2とフレームD2ではΔT1+ΔT2である)に合わせて、フレーム表示周期の長さが変化する。フレーム表示周期を一時的に変化させることによってその後に続くフレームにおいて撮影センサー15と表示部40との同期化を実現することができる。
In this way, the length of the frame display period changes in accordance with the change in phase difference (ΔT1 in frames S1 and D1 but ΔT1 + ΔT2 in frames S2 and D2). By temporarily changing the frame display cycle, it is possible to realize synchronization between the
なお、フレームレートFdmaxが高いほど最短のライン表示周期の長さaも短くなるため、第二表示領域R2の表示期間の長さも短くすることができる。その結果、撮影センサー15と表示部40との位相差も小さくなり表示遅延時間も短くなる。また、位相差が小さくなることにより、次のフレームの第一表示領域R1の画像データを蓄積するバッファーの容量を少なくすることができる。また、ライン表示周期の最短の長さaが、1ライン分の画像データが生成される周期の最長の長さbよりも短いほど、表示遅延時間を短縮できる。第二表示領域R2のライン数が多いほど次フレームにおける表示遅延時間は長くなるが、ライン表示周期の最短の長さaが短いほど次フレームの第一表示領域R1の画像データを蓄積するためのバッファーの容量を少なくすることが可能であり、表示遅延時間も短縮することが可能である。
In addition, since the length a of the shortest line display cycle becomes shorter as the frame rate Fdmax is higher, the length of the display period of the second display region R2 can also be shortened. As a result, the phase difference between the
2.第二実施形態 図5は、第二実施形態にかかるライブビューモード時の撮影センサーと表示部の動作を示すタイミングチャートである。フレームDD1は、複数ライン分の画像データがラインバッファー52dに蓄積されるまで第一表示領域R1の表示を開始しないのではなく、第一表示領域R1の1ライン目の画像データがラインバッファー52dに出力されるとすぐに1ライン目の画像データを表示し、以後1ライン分の画像データがラインバッファー52dに出力されるたびに表示を行う。これは、第一実施形態における図3のフレームD1と同様の動作内容である。この結果、図3のフレームD1と同様に第二実施形態の図5のフレームDD1のフレーム表示周期(垂直同期期間)Tdvの長さは、撮影センサー15のフレーム撮像周期(垂直同期期間)Tsvよりも長くなる。すなわち、フレームDD1のフレーム表示周期Tdvの長さがこのまま続いた場合のフレームレート(第二のフレームレート)は、撮影センサー15のフレームレートより低い。
2. Second Embodiment FIG. 5 is a timing chart showing operations of the image sensor and the display unit in the live view mode according to the second embodiment. The frame DD1 does not start displaying the first display area R1 until the image data for a plurality of lines is accumulated in the
ここで、フレームDD1の第一表示領域R1の表示期間Tdv1と第二表示領域R2の表示期間Tdv2を終えた後、何らかの原因によりフレームDD2を開始するための垂直同期信号DVsyncが遅れて生成されたとする。すなわち、フレームDD1のフロントポーチ期間Tdv3が終了するタイミングq8より少し遅れたタイミングq9で垂直同期信号DVsyncが出力されたとする。フレームDD2を開始するための垂直同期信号DVsyncの出力が少し遅れたことにより、フレームDD2のバックポーチ期間Tdv0を経てフレームDD2の第一表示領域R1の表示期間Tdv1'の開始タイミングq10では、垂直同期信号DVsyncが遅れないでタイミングq8で生成された場合と比較すると多くのラインの画像データがラインバッファー52dに蓄積された状態となる。すなわち、フレームSS2の1フレーム分の出力データの出力を開始するタイミングq5からΔT1(先頭ラインの画像データを生成するのに要する期間)経過した後さらに期間ΔT3経過したタイミングq10で蓄積済みのライン数は、タイミングq5から期間ΔT1経過後さらに、ΔT3より短い期間経過した図示しないタイミングにおける蓄積済みのライン数より多くなる。
Here, after finishing the display period Tdv1 of the first display area R1 and the display period Tdv2 of the second display area R2 of the frame DD1, the vertical synchronization signal DVsync for starting the frame DD2 is generated with a delay for some reason. To do. That is, it is assumed that the vertical synchronization signal DVsync is output at a timing q9 slightly delayed from the timing q8 at which the front porch period Tdv3 of the frame DD1 ends. Due to a slight delay in the output of the vertical synchronization signal DVsync for starting the frame DD2, the vertical synchronization is performed at the start timing q10 of the display period Tdv1 ′ of the first display region R1 of the frame DD2 after the back porch period Tdv0 of the frame DD2. Compared with the case where the signal DVsync is generated at the timing q8 without delay, the image data of many lines is accumulated in the
したがって、垂直同期信号DVsyncが遅れないでタイミングq8で生成された場合と比較すると、最短の長さaのライン表示周期で表示可能なライン数が増えるため、フレームDD2における第一表示領域R1の表示期間Tdv1'の長さは短くなる。第二表示領域R2の表示期間Tdv2の長さはフレームDD1と同じである。フレームDD3を開始するための垂直同期信号DVsyncが遅れずにフロントポーチ期間Tdv3が経過したタイミングq11で生成されるとすると、フレームDD2のフレーム表示期間Tdv'の長さは撮影センサー15のフレーム撮像周期Tsvの長さより短くなる。すなわち、フレームDD2のフレーム表示周期Tdv'の長さがこのまま続いた場合のフレームレート(第一のフレームレート)は、撮影センサー15のフレームレートより高い。なお、フレームDD3以降で撮影センサー15のフレームレートと表示部40のフレームレートとは等しくなっていくことが可能であることは第一実施形態と同様のため説明を省略する。
Therefore, as compared with the case where the vertical synchronization signal DVsync is generated at the timing q8 without delay, the number of lines that can be displayed in the line display cycle of the shortest length a is increased, so that the display of the first display region R1 in the frame DD2 The length of the period Tdv1 ′ is shortened. The length of the display period Tdv2 of the second display region R2 is the same as that of the frame DD1. Assuming that the vertical synchronization signal DVsync for starting the frame DD3 is generated at the timing q11 when the front porch period Tdv3 has elapsed without delay, the length of the frame display period Tdv ′ of the frame DD2 is the frame imaging period of the
また、第二のフレームレートでフレームDD1(Nフレーム目)の表示を行っている期間内に、フレームDD2(N+1フレーム目)の複数ライン分の画像データを蓄積することができる。すなわち、フレームDD1のフレーム表示期間Tdvの期間内にフレームDD2の第一表示領域R1の複数ライン分の画像データを蓄積する期間ΔT3の一部が含まれている。 また、フレームDD2に示すように、複数ライン分の画像データが蓄積された後(期間ΔT3の後)に第一表示領域R1や第二表示領域R2の表示が行われる。 Further, the image data for a plurality of lines of the frame DD2 (N + 1 frame) can be accumulated within the period in which the frame DD1 (N frame) is displayed at the second frame rate. That is, a part of a period ΔT3 in which image data for a plurality of lines in the first display region R1 of the frame DD2 is accumulated is included in the frame display period Tdv of the frame DD1. Further, as shown in the frame DD2, the display of the first display area R1 and the second display area R2 is performed after the image data for a plurality of lines is accumulated (after the period ΔT3).
3.他の実施形態 尚、本発明の技術的範囲は、上述した実施例に限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々変更を加え得ることは勿論である。例えば上記実施形態では表示条件の判定に関して、表示制御部32はリサイズ処理部20eから画像データの生成処理が終了しラインバッファー52dに出力が完了したライン番号Ldを取得し、次の表示対象ラインLnとの関係が(Ln≦Ld)である場合に表示条件を満たすと判断する構成を採用したが、他にも様々な実施態様が考えられる。例えば、画像データ生成部は1ライン分の画像データの生成が完了し所定のバッファーに出力が完了したタイミングで表示制御部にパルス信号を出力し、表示制御部は1フレーム内においてパルス信号が出力された個数をカウントしておき、当該個数が示すライン番号が、次の表示対象ラインの番号以上であれば表示条件を満たすと判断してもよい。
3. Other Embodiments The technical scope of the present invention is not limited to the above-described embodiments, and it goes without saying that various modifications can be made without departing from the scope of the present invention. For example, in the above embodiment, regarding the determination of the display condition, the
また例えば、画像データ生成部はリサイズ処理部の処理が終了しNライン目の画像データが生成されたタイミングでカウンターをカウントアップしてカウンターの値をNにする。画像データ生成部はカウンターをカウントアップしたタイミングでパルス信号を表示制御部に出力しカウンターがカウントアップされたことを通知する。表示制御部は、パルス信号を取得したタイミングで、画像データの生成が完了したラインを示す(何ライン目まで生成が完了したかを示す)カウンターの値を取得する。表示制御部は、次の表示対象ラインの番号がカウンターの値以下であれば表示条件を満たすと判断してもよい。 For example, the image data generation unit counts up the counter at the timing when the processing of the resizing processing unit is completed and the image data of the Nth line is generated, and sets the value of the counter to N. The image data generation unit outputs a pulse signal to the display control unit at the timing when the counter is counted up to notify that the counter has been counted up. The display control unit acquires the value of the counter indicating the line for which generation of image data has been completed (indicating how many lines have been generated) at the timing when the pulse signal is acquired. The display control unit may determine that the display condition is satisfied if the number of the next display target line is equal to or less than the counter value.
なお、表示部40の画面構成については第一実施形態で採用された構成に限定されるものではない。例えば図6Aに示すように第一表示領域R1と第二表示領域R2とが第一実施形態と逆であってもよい。すなわち、表示画面の1ライン目からnライン分の領域がOSDデータを表示する第二表示領域R2であり、第二表示領域R2に続くmライン分の領域が撮影センサー15の出力データに基づいて生成された画像データを表示する第一表示領域R1であってもよい。この場合、第二表示領域R2を上記実施形態と同様に長さaのライン表示周期で表示させる。第二表示領域R2を表示している期間にラインバッファー52dに第一表示領域R1に表示させる数ライン分の画像データが蓄積されるため、第一表示領域R1はラインバッファー52dに蓄積済みのラインの画像データを長さaのライン表示周期で表示させることができ上記実施形態と同様に第一表示領域R1の表示期間を短縮することができる。その結果、撮影センサー15の垂直同期期間と同じ長さの期間に、撮影センサー15の出力データに基づく画像データ以外にOSD等の表示データを表示させることができ、撮影センサー15と表示部40とを同期させて動作させることができる。上記実施形態では、第一表示領域は複数ラインで構成される領域であり幅(水平方向の長さ)は表示画面の幅(水平方向の長さ)と等しかったが、表示画面の幅より短くても良い。
The screen configuration of the
また、第一実施形態や図6Aの例では、撮影センサー15の出力データに基づいて生成された画像データは表示画面の水平方向の幅全域にわたって表示されるが、図6Bのライブビュー画像表示領域101に示すように、撮影センサー15の出力データに基づいて生成された画像データが表示される領域の幅は、表示画面の幅より狭くてもよい。図6Bの例の場合、ライブビュー画像表示領域101を含むラインで構成される領域(幅は表示画面の幅と同じ)が第一表示領域R1(撮影センサー15の出力データに基づいて生成された画像データを含む表示データを表示する領域)であり、その他の領域(幅は表示画面の幅と同じ)が第二表示領域R2(撮影センサー15の出力データに基づいて生成された画像データを含まない表示データを表示する領域)である。ライブビュー画像表示領域101以外の領域(ヒストグラム1,2,3の表示領域や撮影情報等の表示領域やそれら以外の背景部)の表示データはVRAM51に作成され保存されている。画像データ出力部21は、ライブビュー画像表示領域101を表示する際はラインバッファー52dから画像データを取得し、それ以外の領域を表示する際はVRAM51からデータを取得して表示部40に出力する。第一表示領域R1はライブビュー画像表示領域101を含むため、ラインバッファー52dに複数ライン分画像データが蓄積されていれば最短の長さaで表示できるが、表示条件を満たさない場合は満たすまで表示を待機する必要がある。そのため第一表示領域R1は、a以上b以下の長さのライン表示周期で表示される。一方、第二表示領域R2はaの長さのライン表示周期で表示することができる。
In the first embodiment and the example of FIG. 6A, the image data generated based on the output data of the
なお、ライブビューモード中に、画面構成(レイアウト)が変更される場合(第一表示領域R1と第二表示領域R2の配置や比率が切り換えられる場合)であっても、上記実施形態で示したような構成(第一表示領域の画像データを複数ライン分蓄積するバッファーを備え、bより短いaの長さで蓄積済みの画像データや第二表示領域R2の表示データを表示する構成)を備えることにより、最短で1フレーム経過後には、撮影センサー15と表示部40とを同期させることができる。すなわち、ライブビューモード中に画面構成が切り換えられても、切り換えられてから最短で2フレーム以降は安定的に撮影センサー15と表示部40との同期化を実現することができる。
In addition, even when the screen configuration (layout) is changed during the live view mode (when the arrangement and ratio of the first display area R1 and the second display area R2 are switched), the above-described embodiment shows. A configuration (including a buffer for accumulating a plurality of lines of image data of the first display area and displaying image data that has been accumulated with a length a shorter than b and display data of the second display region R2) is provided. As a result, the
なお、第一実
施形態において、Fdmax>Fsでありa<bである場合に、撮影センサー15と表示部40とを同期させて動作させる実施例ついて説明したが、Fdmax=Fsの場合に撮影センサー15と表示部40とを同期させて動作させることはもちろん可能である。例えばラインバッファー52dに第一表示領域R1に表示させるmライン分の画像データの蓄積が完了した後に、第一表示領域R1の1ライン目から表示を開始すれば、第一表示領域R1に関して長さaのライン表示周期でmライン分の表示を行うことができる(どのラインについても表示条件を満たすまで待機する必要がないため)。なおこの場合、長さaは長さbより必ずしも短くなくてもよく例えばa=bであってもよい。また、第二表示領域R2に関しては第一実施形態と同様にVRAM51に記録されているOSDデータを用いて長さaのライン表示周期でnライン分の表示を行うことができる。このように長さaのライン表示周期で水平同期信号DHsyncを出力する場合の表示部40のフレームレートFdmaxが撮影センサー15の実フレームレートFsと同じであれば、垂直同期期間の長さが等しくなるため、撮影センサー15と表示部40との同期が可能であることはもちろんである。ただしこの例の場合、第一表示領域R1のmライン分の画像データがラインバッファー52dに蓄積された後に第一表示領域R1の1ライン目からの表示が開始されるため、撮影センサー15が1ライン目の出力データを出力してから第一表示領域R1の表示が開始されるまでの表示遅延時間は、第一実施形態よりも長くなる。したがって、表示遅延時間をなるべく短くしなおかつ撮影センサー15と表示部40とを同期させるためには、Fdmax>Fsでありa<bである第一実施形態が望ましい。
In the first embodiment, an example in which the
1…撮影装置、10…光学系、11…レンズ、13…シャッター、14…ローパスフィルター、15…撮影センサー、20…画像データ生成部、20…画像データ生成部、20a…画素補間部、20b…色再現処理部、20c…フィルター処理部、20d…ガンマ補正部、20e…リサイズ処理部、21…画像データ出力部、30…タイミング制御部、31…センサー制御部、32…表示制御部、40…表示部、41…液晶パネルドライバー、42…液晶パネル、50…CPU、51…VRAM、52…SD−RAM、52a〜52d…ラインバッファー、53…ROM、54…RAM、55…操作部、101…ライブビュー画像表示領域、R1…第一表示領域、R2…第二表示領域
DESCRIPTION OF
Claims (4)
前記第1のフレームレートより高い第2のフレームレートから前記第1のフレームレートより低い第3のフレームレートの間のフレームレートで、前記1フレーム分の撮像データに基づく表示を行う表示部を備え、 A display unit configured to perform display based on imaging data for one frame at a frame rate between a second frame rate higher than the first frame rate and a third frame rate lower than the first frame rate; ,
前記表示部は、 The display unit
前記撮影データに基づくライブビュー画像を表示する第1表示領域と、 A first display area for displaying a live view image based on the shooting data;
前記ライブビュー画像以外の情報を表示する第2表示領域と、 A second display area for displaying information other than the live view image;
前記第1表示領域と前記第2表示領域の表示を制御する表示制御部を備え、 A display control unit for controlling display of the first display area and the second display area;
前記表示制御部は、 The display control unit
前記表示部において、一のフレームを表示した際のフレームレートが、前記第1のフレームレートより低くなった場合、前記一のフレームの次のフレームにおいて、前記第1表示領域の少なくとも一部と前記第2表示領域を前記表示部の最短のライン表示周期で表示させる In the display unit, when a frame rate when one frame is displayed is lower than the first frame rate, at least a part of the first display area and the frame in the frame following the one frame The second display area is displayed with the shortest line display period of the display unit.
ことを特徴とする撮像表示装置。 An imaging display device characterized by that.
前記表示部において、一のフレームを表示した際のフレームレートが、前記第1のフレームレートより高くなる場合、当該一のフレームのフロントポーチ期間を延長して、当該一のフレームレートを前記第1のフレームレートにする In the display unit, when a frame rate when one frame is displayed is higher than the first frame rate, a front porch period of the one frame is extended to set the one frame rate to the first frame rate. Set the frame rate to
ことを特徴とする請求項1に記載の撮像表示装置。 The imaging display device according to claim 1.
前記第1のフレームレートより高い第2のフレームレートから前記第1のフレームレートより低い第3のフレームレートの間のフレームレートで、前記1フレーム分の撮像データに基づく表示を行う表示部を備え、 A display unit configured to perform display based on imaging data for one frame at a frame rate between a second frame rate higher than the first frame rate and a third frame rate lower than the first frame rate; ,
前記表示部は、 The display unit
前記撮影データに基づくライブビュー画像を表示する第1表示領域と、 A first display area for displaying a live view image based on the shooting data;
前記ライブビュー画像以外の情報を表示する第2表示領域と、 A second display area for displaying information other than the live view image;
前記第1表示領域と前記第2表示領域の表示を制御する表示制御部を備えた撮像表示装置の制御方法であって、 A method for controlling an imaging display device including a display control unit that controls display of the first display area and the second display area,
前記表示部において、一のフレームを表示した際のフレームレートが、前記第1のフレームレートより低くなった場合、前記一のフレームの次のフレームにおいて、前記第1表示領域の少なくとも一部と前記第2表示領域を前記表示部の最短のライン表示周期で表示させる In the display unit, when a frame rate when one frame is displayed is lower than the first frame rate, at least a part of the first display area and the frame in the frame following the one frame The second display area is displayed with the shortest line display period of the display unit.
ことを特徴とする撮像表示装置の制御方法。 A control method for an imaging display device.
ことを特徴とする請求項3に記載の撮像表示装置の制御方法。 The method for controlling an imaging display device according to claim 3.
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201261729123P | 2012-11-21 | 2012-11-21 | |
US61/729123 | 2012-11-21 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012273119A Division JP6044317B2 (en) | 2012-11-21 | 2012-12-14 | Image capturing apparatus and image capturing apparatus control method |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017175237A Division JP6521008B2 (en) | 2012-11-21 | 2017-09-12 | Imaging display device, control method of imaging display device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017034726A JP2017034726A (en) | 2017-02-09 |
JP6210147B2 true JP6210147B2 (en) | 2017-10-11 |
Family
ID=51025753
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012273119A Active JP6044317B2 (en) | 2012-11-21 | 2012-12-14 | Image capturing apparatus and image capturing apparatus control method |
JP2016223716A Active JP6210147B2 (en) | 2012-11-21 | 2016-11-17 | Imaging display device and control method of imaging display device |
JP2017175237A Active JP6521008B2 (en) | 2012-11-21 | 2017-09-12 | Imaging display device, control method of imaging display device |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012273119A Active JP6044317B2 (en) | 2012-11-21 | 2012-12-14 | Image capturing apparatus and image capturing apparatus control method |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017175237A Active JP6521008B2 (en) | 2012-11-21 | 2017-09-12 | Imaging display device, control method of imaging display device |
Country Status (1)
Country | Link |
---|---|
JP (3) | JP6044317B2 (en) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6365097B2 (en) * | 2014-08-08 | 2018-08-01 | セイコーエプソン株式会社 | Image processing method, imaging apparatus, image processing apparatus, and imaging display apparatus |
JP6582644B2 (en) * | 2014-08-11 | 2019-10-02 | セイコーエプソン株式会社 | Imaging device, imaging display device, and vehicle |
JP6582642B2 (en) | 2014-08-11 | 2019-10-02 | セイコーエプソン株式会社 | Vehicular imaging device, vehicular imaging display system, and vehicle |
JP7365184B2 (en) * | 2019-03-29 | 2023-10-19 | 株式会社ソニー・インタラクティブエンタテインメント | Image processing device, head-mounted display, and image display method |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11355709A (en) * | 1998-06-04 | 1999-12-24 | Minolta Co Ltd | Digital camera |
US8466924B2 (en) * | 2004-01-28 | 2013-06-18 | Entropic Communications, Inc. | Displaying on a matrix display |
JP4917345B2 (en) * | 2006-04-21 | 2012-04-18 | オリンパスイメージング株式会社 | Sync signal generating apparatus, digital camera, and sync signal generating method |
JP4860488B2 (en) * | 2007-01-04 | 2012-01-25 | ルネサスエレクトロニクス株式会社 | Image display control device |
JP5310647B2 (en) * | 2010-05-25 | 2013-10-09 | セイコーエプソン株式会社 | Imaging device |
JP5158165B2 (en) * | 2010-09-27 | 2013-03-06 | セイコーエプソン株式会社 | Imaging device, display timing control circuit |
JP5195818B2 (en) * | 2010-06-01 | 2013-05-15 | セイコーエプソン株式会社 | Display control device |
-
2012
- 2012-12-14 JP JP2012273119A patent/JP6044317B2/en active Active
-
2016
- 2016-11-17 JP JP2016223716A patent/JP6210147B2/en active Active
-
2017
- 2017-09-12 JP JP2017175237A patent/JP6521008B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2017034726A (en) | 2017-02-09 |
JP6521008B2 (en) | 2019-05-29 |
JP2014103647A (en) | 2014-06-05 |
JP6044317B2 (en) | 2016-12-14 |
JP2017219872A (en) | 2017-12-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5195818B2 (en) | Display control device | |
US8937673B2 (en) | Image-displaying device and display timing control circuit | |
JP5163728B2 (en) | Timing generator, photographing device, dot clock output method | |
JP5163702B2 (en) | Imaging apparatus and timing control circuit | |
JP5251926B2 (en) | Imaging apparatus and timing control circuit | |
JP2011254416A (en) | Photographing device | |
JP6210147B2 (en) | Imaging display device and control method of imaging display device | |
EP2690861B1 (en) | Apparatus and method to photograph an image | |
JP5029725B2 (en) | Imaging device | |
US10171766B2 (en) | Imaging device with reduced delay in display | |
JP5310647B2 (en) | Imaging device | |
US10070064B2 (en) | Display control device including display control section that causes display data to be displayed in first and second regions og display, and controlling method of image capturing sensor and display | |
JP2017163449A (en) | Imaging apparatus | |
JP5582229B2 (en) | Camera, display device and image processing device | |
JP5482475B2 (en) | Image processing apparatus, display apparatus, and photographing apparatus | |
JP5158165B2 (en) | Imaging device, display timing control circuit | |
JP6481701B2 (en) | Imaging display device, control method, control device, display device, and imaging device | |
JP6103106B2 (en) | Imaging display device, imaging control method thereof, control device, display device, and imaging device. | |
JP5924382B2 (en) | Imaging device, display device, and image processing device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20161215 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20161215 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170803 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170815 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170828 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6210147 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |