JP2021064836A - Imaging apparatus - Google Patents

Abstract

To provide a technology that achieves display frame rate switching without interrupting display and enables improved visibility of a video without increasing power consumption.SOLUTION: An imaging apparatus has imaging means for acquiring a captured image, setting means for specifying a display frame rate, synchronization signal generation means for generating a synchronization signal indicating a predetermined display frame rate in accordance with a setting of the setting means, image generation means for generating the first image from the captured image in accordance with the synchronization signal and the display frame rate, and display means for generating and displaying a display image from the first image according to the synchronization signal and the frame rate.SELECTED DRAWING: Figure 1

Description

本発明は、ファインダーの表示フレームレートが切替可能な撮像装置に関する。 The present invention relates to an image pickup apparatus in which the display frame rate of the finder can be switched.

近年、接眼ファインダーを光学式ファインダー（Ｏｐｔｉｃａｌ Ｖｉｅｗ Ｆｉｎｄｅｒ、以下、ＯＶＦと表記）から、電子式ファインダー（Ｅｌｅｃｔｒｏｎｉｃ Ｖｉｅｗ Ｆｉｎｄｅｒ、以下、ＥＶＦと表記）に置き換えた撮像装置が普及している。 In recent years, an imaging device in which the eyepiece finder is replaced with an electronic finder (Electronic View Finder, hereinafter referred to as EVF) from an optical finder (Optical View Finder, hereinafter referred to as OVF) has become widespread.

ＥＶＦを用いると、ＯＶＦでは視認ができない被写体、環境であっても、被写体の撮影が可能となるなどの利点がある。一方、ＥＶＦでの被写体視認には、ＯＶＦと異なり画像処理装置を動作させるために定常的な電力供給が必要であることから、撮像装置の消費電力が増加する課題も生じる。また、動く被写体をＥＶＦで視認するには、高速な表示フレームレート処理が必要になり、さらに撮像装置の消費電力が増加する。 Using the EVF has an advantage that the subject can be photographed even in a subject or environment that cannot be visually recognized by the OVF. On the other hand, in order to visually recognize a subject in the EVF, unlike the OVF, a steady power supply is required to operate the image processing device, so that there is a problem that the power consumption of the image pickup device increases. Further, in order to visually recognize a moving subject with the EVF, high-speed display frame rate processing is required, and the power consumption of the image pickup apparatus is further increased.

前述の課題に対して、シャッターボタンの操作状態に応じて、ＥＶＦに転送する画像データの転送レートを切り替える技術が提案されている（特許文献１参照）。また、カメラ無操作時間が所定時間経過後に動作クロック周波数を下げることで、画像処理フレームレートを下げる技術が提案されている（特許文献２参照）。前述の技術により、撮像装置の消費電力を削減することが可能となる。 In response to the above-mentioned problems, a technique for switching the transfer rate of image data to be transferred to the EVF according to the operation state of the shutter button has been proposed (see Patent Document 1). Further, a technique has been proposed in which the image processing frame rate is lowered by lowering the operating clock frequency after the camera non-operation time elapses for a predetermined time (see Patent Document 2). The above-mentioned technique makes it possible to reduce the power consumption of the image pickup apparatus.

特開２００７−１９５８３号公報Japanese Unexamined Patent Publication No. 2007-19583 特開２００７−９６４５６号公報JP-A-2007-96456

しかしながら、特許文献１に開示の技術では、撮影時に表示用フレームレートは変えずにデータ転送レートのみ速くするため、フレーム毎の表示解像度は向上するが、動画像としての視認性が向上するわけではない。 However, in the technique disclosed in Patent Document 1, since only the data transfer rate is increased without changing the display frame rate at the time of shooting, the display resolution for each frame is improved, but the visibility as a moving image is not improved. Absent.

また、特許文献２に開示の技術では、表示部の表示を途切れさせずに表示フレームレートの切り替えを実現するために、複数の動作クロック信号発振器を用いて動作クロック周波数を変更する必要がある。 Further, in the technique disclosed in Patent Document 2, it is necessary to change the operating clock frequency by using a plurality of operating clock signal oscillators in order to realize switching of the display frame rate without interrupting the display of the display unit.

上記課題を解決するために、本発明に係る撮像装置は、撮像画像を取得する撮像手段と、表示フレームレートを指定する設定手段と、前記設定手段の設定に応じて所定の表示フレームレートを示す同期信号を生成する同期信号生成手段と、前記同期信号と前記表示フレームレートに応じて前記撮像画像から第一の画像を生成する画像生成手段と、前記同期信号と前記フレームレートに応じて前記第一の画像から表示用画像を生成して表示する表示手段と、を有することを特徴とする。 In order to solve the above problems, the imaging apparatus according to the present invention exhibits an imaging means for acquiring an captured image, a setting means for designating a display frame rate, and a predetermined display frame rate according to the setting of the setting means. A synchronization signal generation means for generating a synchronization signal, an image generation means for generating a first image from the captured image according to the synchronization signal and the display frame rate, and the first image according to the synchronization signal and the frame rate. It is characterized by having a display means for generating and displaying a display image from one image.

本発明によれば、表示処理用途の動作クロック信号発振器１個の構成で、表示を途切れさせずに表示フレームレート切替を実現し、消費電力を上げることなく動画の視認性向上を可能とする。 According to the present invention, with the configuration of one operating clock signal oscillator for display processing, display frame rate switching can be realized without interrupting the display, and the visibility of moving images can be improved without increasing power consumption.

実施例１及び２に係る撮像装置の構成例を示すブロック図である。It is a block diagram which shows the structural example of the image pickup apparatus which concerns on Examples 1 and 2. 実施例１及び２に係る撮像装置の処理フロー例を示す図である。It is a figure which shows the processing flow example of the image pickup apparatus which concerns on Examples 1 and 2. 実施例１及び２に係る撮像装置のフレームレート切替の一例を示す図である。It is a figure which shows an example of frame rate switching of the image pickup apparatus which concerns on Examples 1 and 2. 実施例１に係る撮像装置の処理データの一例を示す図である。It is a figure which shows an example of the processing data of the image pickup apparatus which concerns on Example 1. FIG. 実施例２に係る撮像装置の処理データの一例を示す図である。It is a figure which shows an example of the processing data of the image pickup apparatus which concerns on Example 2. FIG.

以下に、本発明の好ましい実施の形態を、添付の図面に基づいて説明する。 Hereinafter, preferred embodiments of the present invention will be described with reference to the accompanying drawings.

図１は、本実施例に係る撮像装置１００の構成例を示すブロック図である。 FIG. 1 is a block diagram showing a configuration example of the image pickup apparatus 100 according to the present embodiment.

撮像装置１００は、光学系１０１、撮像センサ部１０２、撮像処理部１０３、画像処理部１０４、表示処理部１０５、第１表示部１０６、第２表示部１０７、同期信号生成部１０９を有する。さらに、撮像装置１００は、接眼検知センサ部１０８、撮像制御部１１０、ＣＰＵ１１１、記憶部１１２、操作部１１３も有する。 The image pickup apparatus 100 includes an optical system 101, an image pickup sensor section 102, an image pickup processing section 103, an image processing section 104, a display processing section 105, a first display section 106, a second display section 107, and a synchronization signal generation section 109. Further, the image pickup apparatus 100 also includes an eyepiece detection sensor unit 108, an image pickup control unit 110, a CPU 111, a storage unit 112, and an operation unit 113.

光学系１０１は、光学フィルタ、フォーカスレンズ、ズームレンズ、絞り、シャッタなどを備える。操作部１１３によって撮像の開始が指示されると、被写体光学像を撮像センサ部１０２の撮像面上に結像する。光学系１０１と撮像センサ部１０２は、カメラ制御部によって制御される。 The optical system 101 includes an optical filter, a focus lens, a zoom lens, an aperture, a shutter, and the like. When the operation unit 113 instructs the start of imaging, the subject optical image is imaged on the imaging surface of the imaging sensor unit 102. The optical system 101 and the image sensor unit 102 are controlled by the camera control unit.

撮像センサ部１０２は、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサであり、２次元配列された複数の画素を備える。複数の画素には、赤、緑、青（ＲＧＢ）のカラーフィルタが配置されており、撮像センサ部１０２は、同期信号生成部１０９が生成したタイミング信号に応じて、カラーフィルタを透過した光をアナログ電気信号に変換する光電変換処理を行う。なお、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）イメージセンサなど他の撮像素子を利用することも考えられる。 The image sensor unit 102 is a CMOS (Complementary Metal Oxide Sensor) image sensor, and includes a plurality of pixels arranged in two dimensions. Red, green, and blue (RGB) color filters are arranged on the plurality of pixels, and the image sensor unit 102 transmits the light transmitted through the color filters according to the timing signal generated by the synchronization signal generation unit 109. Performs photoelectric conversion processing to convert to an analog electric signal. It is also conceivable to use another image sensor such as a CCD (Charge Coupled Device) image sensor.

撮像処理部１０３は、光電変換処理によって得られたアナログ電気信号をデジタル電気信号からなる画像データに変換するＡＤ変換処理（アナログーデジタル変換処理）を行う。 The image pickup processing unit 103 performs an AD conversion process (analog-digital conversion process) for converting the analog electric signal obtained by the photoelectric conversion process into image data composed of a digital electric signal.

その後、撮像処理部１０３は、ＡＤ変換処理によって得られた画像データに対して修復処理を行う。例えば、撮像処理部１０３は、撮像センサ部１０２における欠落画素、画素値が最大（最小）で信頼性が低いと判断される画素に対し、修復対象の周辺の画素値を用いて画素値を補間する。また、撮像処理部１０３は、暗電流補正などの所定のオフセット値を減算する。撮像処理部１０３は、修復処理後の画像データを記憶部１１２に一旦格納する。 After that, the image pickup processing unit 103 performs a restoration process on the image data obtained by the AD conversion process. For example, the image pickup processing unit 103 interpolates the pixel values of the missing pixels in the image pickup sensor unit 102 and the pixels determined to have the maximum (minimum) pixel values and low reliability by using the pixel values around the restoration target. To do. Further, the image pickup processing unit 103 subtracts a predetermined offset value such as dark current correction. The image pickup processing unit 103 temporarily stores the image data after the restoration processing in the storage unit 112.

画像処理部１０４は、同期信号生成部１０９が生成したタイミング信号に応じて、記憶部１１２に格納された修復処理後の画像データを読み出す。そして、輝度と色差から成る色空間への変換、各データに含まれるノイズを除去、光学的な歪の補正等の画像を適正化するなどの現像処理を行う。その後、現像処理後の画像データに対して、画像処理パラメータに基づきホワイトバランス調整、ガンマ補正、シャープネス補正、輝度レベル補正、色相補正、彩度補正などの画像処理を行う。画像処理パラメータは、ホワイトバランス、ガンマ、シャープネス、輝度レベル、色相、彩度などの複数種類のパラメータを含む。画像処理部１０４は、画像処理後の画像データを記憶部１１２に一旦格納する。 The image processing unit 104 reads out the image data after the repair processing stored in the storage unit 112 in response to the timing signal generated by the synchronization signal generation unit 109. Then, development processing such as conversion to a color space composed of brightness and color difference, removal of noise contained in each data, correction of optical distortion, and other image optimization is performed. After that, the image data after the development processing is subjected to image processing such as white balance adjustment, gamma correction, sharpness correction, luminance level correction, hue correction, and saturation correction based on the image processing parameters. Image processing parameters include multiple types of parameters such as white balance, gamma, sharpness, brightness level, hue, and saturation. The image processing unit 104 temporarily stores the image data after image processing in the storage unit 112.

表示処理部１０５は、同期信号生成部１０９が生成したタイミング信号に応じて、記憶部１１２に格納された画像処理後の画像データを読み出す。そして、読み出した画像データを表示用にリサイズしてから、表文字やアイコンで構成される表示情報を重畳する。その後、表示用のガンマ処理、輝度レベル補正などの表示用画像処理を行い、同期信号生成部１０９が生成したタイミング信号（表示フレームレート）に応じて、第１表示部１０６および第２表示部１０７に画像を加工して送信する。 The display processing unit 105 reads out the image data after image processing stored in the storage unit 112 in response to the timing signal generated by the synchronization signal generation unit 109. Then, after resizing the read image data for display, display information composed of table characters and icons is superimposed. After that, display image processing such as gamma processing for display and brightness level correction is performed, and the first display unit 106 and the second display unit 107 are performed according to the timing signal (display frame rate) generated by the synchronization signal generation unit 109. Process the image and send it.

第１表示部１０６および第２表示部１０７は、画像処理部１０４で生成した現像画像の他、画像処理部１０４で画像処理された画像、メニュー画面、その他各種情報を表示するために用いられる。また、表示フレームレートに応じて、受信した画像から表示画像を生成する。 The first display unit 106 and the second display unit 107 are used to display the developed image generated by the image processing unit 104, the image processed by the image processing unit 104, the menu screen, and various other information. In addition, a display image is generated from the received image according to the display frame rate.

第１表示部１０６は、撮像装置１００の不図示の接眼部に配置された有機エレクトロルミネッセンス表示デバイスで構成されるＥＶＦであり、表示処理部１０５から取得した画像データに応じた画像表示を行う。 The first display unit 106 is an EVF composed of an organic electroluminescence display device arranged in an eyepiece (not shown) of the image pickup apparatus 100, and displays an image according to image data acquired from the display processing unit 105. ..

第２表示部１０７は、撮像装置１００の背面や側面に配置される液晶ディスプレイであり、表示処理部１０５から取得した画像データに応じた画像表示を行う。また、第２表示部１０７は、不図示のタッチパネルを有し、表示される機能アイコンを操作選択することにより、各種機能ボタンとして作用させた、後述の操作部１１３としての機能も有する。機能ボタンとしては、撮影開始、撮影モード選択、ホワイトバランス設定、ＩＳＯ感度設定、などを含む。 The second display unit 107 is a liquid crystal display arranged on the back surface or the side surface of the image pickup apparatus 100, and displays an image according to the image data acquired from the display processing unit 105. Further, the second display unit 107 has a touch panel (not shown), and also has a function as an operation unit 113, which will be described later, which acts as various function buttons by operating and selecting a displayed function icon. The function buttons include shooting start, shooting mode selection, white balance setting, ISO sensitivity setting, and the like.

接眼検知センサ部１０８は、撮像装置１００の接眼部に配置される。後述のＣＰＵ１１１は、接眼検知センサ部１０８の出力からユーザの顔が第１表示部１０６に近接していると判断すると、第１表示部１０６への表示を行い、そうではないときは第２表示部１０７の表示を行う。 The eyepiece detection sensor unit 108 is arranged in the eyepiece unit of the image pickup apparatus 100. When the CPU 111, which will be described later, determines from the output of the eyepiece detection sensor unit 108 that the user's face is close to the first display unit 106, the CPU 111 displays the user's face on the first display unit 106, and if not, the second display. The unit 107 is displayed.

同期信号生成部１０９は、撮像、画像処理、画像表示を行うために必要なタイミング信号の生成を行う。同期信号生成部１０９は、例えば垂直同期信号（Ｖｓｙｎｃ）や垂直ブランキング信号（Ｖｂｌａｎｋ）、水平同期信号（Ｈｓｙｎｃ）、データイネーブル信号（ＤＥ）等の補助同期信号を生成する。本実施例における詳細な処理については後述する。 The synchronization signal generation unit 109 generates timing signals necessary for performing imaging, image processing, and image display. The synchronization signal generation unit 109 generates auxiliary synchronization signals such as a vertical synchronization signal (Vsync), a vertical blanking signal (Vblank), a horizontal synchronization signal (Hsync), and a data enable signal (DE). The detailed processing in this embodiment will be described later.

撮像制御部１１０は、後述の操作部１１３を介して取得した、撮像装置１００に対するユーザ操作や、撮像装置１００の状態に応じて、露出（露出条件）やフォーカスを制御する。例えば、絞り、撮像素子の電荷蓄積時間などを制御することにより露出を制御し、フォーカスレンズの駆動量、駆動方向を制御することによりフォーカスを制御する。具体的には、撮像処理部１０３は、ユーザによって指定されたゲイン値、シャッタ速度、絞りに応じて、光学系１０１の状態、撮像センサ部１０２の処理等を制御する。また、ユーザ操作により、ＡＦ（オートフォーカス）撮影モードに遷移している場合、フォーカスレンズの所定位置における演算結果である出力信号を参照することによりコントラストの形状を算出する。コントラストが最も高くなるフォーカス位置を、撮像センサ部１０２で光束が合焦する位置としてＡＦ制御を行う。 The image pickup control unit 110 controls the exposure (exposure condition) and the focus according to the user operation on the image pickup device 100 acquired via the operation unit 113 described later and the state of the image pickup device 100. For example, the exposure is controlled by controlling the aperture, the charge accumulation time of the image sensor, and the focus is controlled by controlling the driving amount and the driving direction of the focus lens. Specifically, the image pickup processing unit 103 controls the state of the optical system 101, the processing of the image pickup sensor unit 102, and the like according to the gain value, the shutter speed, and the aperture specified by the user. Further, when the AF (autofocus) shooting mode is shifted by the user operation, the shape of the contrast is calculated by referring to the output signal which is the calculation result at the predetermined position of the focus lens. AF control is performed with the focus position where the contrast is highest as the position where the light flux is focused by the image sensor unit 102.

ＣＰＵ１１１は、撮像装置１００が有する他の機能ブロックに、不図示の内部バスを介して接続されている。ＣＰＵ１１１は、撮像装置１００の処理を制御する。 The CPU 111 is connected to another functional block of the image pickup apparatus 100 via an internal bus (not shown). The CPU 111 controls the processing of the image pickup apparatus 100.

記憶部１１２は、撮像装置１００が有する他の機能ブロックに、不図示の内部バスを介して接続されている。記憶部１１２は、ＣＰＵ１１１のワークエリア、種々のデータを一時的に記憶する一時記憶領域、ＣＰＵ１１１の処理に係るファームウェアや画像処理パラメータの格納場所として用いる。 The storage unit 112 is connected to another functional block of the image pickup apparatus 100 via an internal bus (not shown). The storage unit 112 is used as a work area of the CPU 111, a temporary storage area for temporarily storing various data, and a storage location of firmware and image processing parameters related to the processing of the CPU 111.

操作部１１３は、撮像装置１００内のＣＰＵ１１１と不図示の内部バスを介して接続されている。操作部１１３は、ユーザの操作を受け付ける入力部としての各種操作部材である。操作部１１３は、ユーザが、撮影指示を行うシャッターボタン、フォーカス動作のオートまたはマニュアル制御を切り替える切替スイッチ、フォーカス調整操作を行うフォーカスリングなどを含む。 The operation unit 113 is connected to the CPU 111 in the image pickup apparatus 100 via an internal bus (not shown). The operation unit 113 is various operation members as an input unit that accepts the user's operation. The operation unit 113 includes a shutter button for giving a shooting instruction, a changeover switch for switching between automatic and manual control of the focus operation, a focus ring for performing a focus adjustment operation, and the like.

本実施例では、不図示の水晶振動子から取得した基準クロック信号から動作クロック信号を生成している。 In this embodiment, an operating clock signal is generated from a reference clock signal acquired from a crystal oscillator (not shown).

次に、本実施例における撮像装置１００の表示フレームレート切替について、図２（Ａ）に記載のフローチャートを用いて説明する。この表示フレームレート切替は、ＣＰＵ１１１が、記憶部１１２に記憶されたプログラムを実行し、撮像装置１００を制御することにより実現される。 Next, the display frame rate switching of the image pickup apparatus 100 in this embodiment will be described with reference to the flowchart shown in FIG. 2 (A). This display frame rate switching is realized by the CPU 111 executing the program stored in the storage unit 112 and controlling the image pickup apparatus 100.

撮影開始時は、本実施例では同期信号生成部１０９が生成する表示同期信号はフレームレート６０Ｈｚとし、被写体の表示をＥＶＦに開始する（ステップＳ２０１）。 At the start of shooting, in this embodiment, the display synchronization signal generated by the synchronization signal generation unit 109 has a frame rate of 60 Hz, and the display of the subject is started in the EVF (step S201).

ステップＳ２０２で、ＣＰＵ１１１は、表示フレームレートの高速化設定が必要か判断する。動画の視認性向上のためにはフレームレートは高い方が有利であり、高速フレームレートが必要な状況は、被写体を的確にＥＶＦに表示するために高速なフレームレート処理が必要な状況であり、以下の場合が考えられる。被写体の動きが速い場合、オートフォーカス動作を実行中の場合、被写体を追尾する動作を実行中の場合、撮像装置のパンニングやチルトなどの撮像装置の動きが検知された場合、シャッターボタンが半押し操作された状態となった場合などである。高速フレームレート表示が不要の場合、ステップＳ２０１に戻り６０Ｈｚ表示を継続する。高速フレームレート表示が不要の場合（表示フレームレートの低速化設定が必要な場合）とは、例えば、撮像装置が所定の時間以上、操作されない状態となった場合である。高速フレームレート表示が必要な場合、ステップＳ２０３でフレームレート１２０Ｈｚに変更する設定をＣＰＵ１１１（設定手段）から同期信号生成部１０９、画像処理部１０４、表示処理部１０５、第１表示部１０６、第２表示部１０７の各処理部に指示を出す。 In step S202, the CPU 111 determines whether it is necessary to set the display frame rate to be faster. A high frame rate is advantageous for improving the visibility of moving images, and a situation where a high frame rate is required is a situation where high-speed frame rate processing is required to accurately display the subject on the EVF. The following cases can be considered. When the movement of the subject is fast, the autofocus operation is being executed, the operation of tracking the subject is being executed, or the movement of the imaging device such as panning or tilting of the imaging device is detected, the shutter button is pressed halfway. For example, when it is in an operated state. When the high-speed frame rate display is unnecessary, the process returns to step S201 and the 60 Hz display is continued. The case where the high-speed frame rate display is unnecessary (the case where the display frame rate slow-down setting is required) is, for example, the case where the image pickup apparatus is not operated for a predetermined time or longer. When high-speed frame rate display is required, the setting for changing the frame rate to 120 Hz in step S203 is changed from the CPU 111 (setting means) to the synchronization signal generation unit 109, the image processing unit 104, the display processing unit 105, the first display unit 106, and the second. An instruction is given to each processing unit of the display unit 107.

同期信号生成部１０９では、図３に示すフレームレート６０Ｈｚ状態から１２０Ｈｚ状態のフレーム周期同期信号、フレーム周期ブランキング信号に変更する。１フレームの時間は、フレームレート１２０Ｈｚは６０Ｈｚの半分の時間である。 The synchronization signal generation unit 109 changes the frame rate from the 60 Hz state shown in FIG. 3 to a frame cycle synchronization signal and a frame cycle blanking signal in the 120 Hz state. The time of one frame is half the time of 60 Hz at a frame rate of 120 Hz.

表示処理部（画像生成部）１０５では、図４に示す画像データの変換を行う。図４（Ａ）は表示処理部１０５の入力画像（撮像画像）を示しており、Ｎラインの画像である。表示処理部１０５では、フレーム毎に交互に図４（Ｂ）と図４（Ｃ）の画像を出力する。図４（Ｂ）は入力画像の奇数ライン画像のみを抜き出した画像であり、図４（Ｃ）は入力画像の偶数ライン画像のみを抜き出した画像である。すなわち、図４（Ｂ）及び図４（Ｃ）の画像のそれぞれ（第一の画像）は、図４（Ａ）の入力画像の垂直方向に画素を間引いて生成されており、図４（Ａ）の入力画像の半分のデータ量の画像データを出力することになる。 The display processing unit (image generation unit) 105 converts the image data shown in FIG. FIG. 4A shows an input image (captured image) of the display processing unit 105, which is an N-line image. The display processing unit 105 alternately outputs the images of FIGS. 4 (B) and 4 (C) for each frame. FIG. 4B is an image obtained by extracting only an odd-numbered line image of the input image, and FIG. 4C is an image obtained by extracting only an even-numbered line image of the input image. That is, each of the images of FIGS. 4 (B) and 4 (C) (first image) is generated by thinning out the pixels in the vertical direction of the input image of FIG. 4 (A), and is generated in FIG. 4 (A). The image data of half the amount of the input image of) will be output.

ステップＳ２０４で、フレームレート１２０Ｈｚ表示を開始する。第１表示部１０６と第２表示部１０７では、表示処理部１０５が出力する図４（Ｂ）、図４（Ｃ）に示す画像データからデータを補間し、図４（Ｄ）、図４（Ｅ）に示す表示用画像データを生成して表示する。図４（Ｄ）、図４（Ｅ）の斜線で示す画像ラインが補間データであり、線形補間、バイキュービック補間、ニアレストネイバー補間、オーバーサンプリング補間などで補間データを生成する。表示は、第１表示部１０６のみでも、第２表示部１０７のみでも可能である。 In step S204, the frame rate 120 Hz display is started. The first display unit 106 and the second display unit 107 interpolate data from the image data shown in FIGS. 4 (B) and 4 (C) output by the display processing unit 105, and perform data in FIGS. 4 (D) and 4 (D). The display image data shown in E) is generated and displayed. The image lines shown by the diagonal lines in FIGS. 4 (D) and 4 (E) are the interpolation data, and the interpolation data is generated by linear interpolation, bicubic interpolation, nearest neighbor interpolation, oversampling interpolation and the like. The display can be performed only by the first display unit 106 or only by the second display unit 107.

ステップＳ２０５で撮影終了するなら撮影を終了する。撮影終了しない場合、ステップＳ２０２に戻り、再度、高速フレームレート表示が必要か判断し、撮影を継続する。 If the shooting is finished in step S205, the shooting is finished. If the shooting is not completed, the process returns to step S202, determines whether high-speed frame rate display is necessary, and continues shooting.

本実施例では、フレームレート６０Ｈｚ動作とフレームレート１２０Ｈｚ動作では、画像処理部１０４や表示処理部１０５の単位時間当たりの処理データ量は変わらないため、動作クロック周波数を変更する必要は無い。動作クロック周波数の変更が無いため、フレームレート切替時の同期信号や画像データの乱れは発生せず、表示が途切れることもない。 In this embodiment, since the amount of processing data per unit time of the image processing unit 104 and the display processing unit 105 does not change between the operation at the frame rate of 60 Hz and the operation at the frame rate of 120 Hz, it is not necessary to change the operating clock frequency. Since the operating clock frequency is not changed, the synchronization signal and image data are not disturbed when the frame rate is switched, and the display is not interrupted.

以上述べたように、本実施例によれば、表示処理用途の動作クロック信号発振器１個の構成で、表示を途切れさせずに表示フレームレート切替を実現し、消費電力を上げることなく動画の視認性向上を可能とする。 As described above, according to the present embodiment, the display frame rate can be switched without interrupting the display by configuring one operating clock signal oscillator for display processing, and the moving image can be visually recognized without increasing the power consumption. Enables improvement of sex.

本発明の実施例１よりも高速なフレームレート表示が必要な場合を、以下、実施例２で説明する。 A case where a frame rate display faster than that of the first embodiment of the present invention is required will be described below in the second embodiment.

機能ブロック図は実施例１と同様、図１であるため詳細な説明は省略し、本実施例における撮像装置１００の表示フレームレート切替について、図２（Ｂ）に記載のフローチャートを用いて説明する。 Since the functional block diagram is the same as in the first embodiment, detailed description thereof will be omitted, and the display frame rate switching of the image pickup apparatus 100 in the present embodiment will be described using the flowchart shown in FIG. 2 (B). ..

撮影開始時は、本実施例では同期信号生成部１０９が生成する表示同期信号はフレームレート６０Ｈｚとし、被写体の表示をＥＶＦに開始する（ステップＳ３０１）。 At the start of shooting, in this embodiment, the display synchronization signal generated by the synchronization signal generation unit 109 has a frame rate of 60 Hz, and the display of the subject is started in the EVF (step S301).

ステップＳ３０２で、高速フレームレート表示が必要か判断する。動画の視認性向上のためにはフレームレートは高い方が有利であり、高速フレームレートが必要な状況は、被写体を的確にＥＶＦに表示するために高速なフレームレート処理が必要な状況であり、以下の場合が考えられる。被写体の動きが速い場合、オートフォーカスで合焦中の場合、被写体追尾している場合、撮像装置のパンニングやチルトなどの動きが生じた場合などである。高速フレームレート表示が不要の場合、ステップＳ３０１に戻り６０Ｈｚ表示を継続する。高速フレームレート表示が必要な場合、ステップＳ３０３でフレームレートを２４０Ｈｚに変更するか、または１２０Ｈｚに変更するかを選択する。被写体が鳥の羽ばたきや、高速で移動する物体などの場合、撮像装置のパンニング動作が速い場合など、フレームレートを２４０Ｈｚに高めると、ＥＶＦの動画視認性は向上する。２４０Ｈｚを選択した場合、ステップＳ３０４でフレームレート２４０Ｈｚに変更する設定をＣＰＵ１１１から同期信号生成部１０９、画像処理部１０４、表示処理部１０５、第１表示部１０６、第２表示部１０７の各処理部に指示を出す。 In step S302, it is determined whether high-speed frame rate display is necessary. A high frame rate is advantageous for improving the visibility of moving images, and a situation where a high frame rate is required is a situation where high-speed frame rate processing is required to accurately display the subject on the EVF. The following cases can be considered. The movement of the subject is fast, the subject is in focus by autofocus, the subject is being tracked, the image pickup device is panned or tilted, or the like. If the high-speed frame rate display is unnecessary, the process returns to step S301 to continue the 60 Hz display. When a high-speed frame rate display is required, the frame rate is selected to be changed to 240 Hz or 120 Hz in step S303. When the subject is a bird flapping, an object moving at high speed, or the panning operation of the image pickup device is fast, increasing the frame rate to 240 Hz improves the moving image visibility of the EVF. When 240Hz is selected, the setting for changing the frame rate to 240Hz in step S304 is set from the CPU 111 to the synchronization signal generation unit 109, the image processing unit 104, the display processing unit 105, the first display unit 106, and the second display unit 107. Give instructions to.

同期信号生成部１０９では、図３に示すフレームレート６０Ｈｚ状態から２４０Ｈｚ状態のフレーム周期同期信号、フレーム周期ブランキング信号に変更する。１フレームの時間は、フレームレート２４０Ｈｚは６０Ｈｚの４分の１の時間である。 The synchronization signal generation unit 109 changes from the frame rate 60Hz state shown in FIG. 3 to a frame period synchronization signal and a frame period blanking signal in the 240Hz state. The time of one frame is one-fourth of the time of 60Hz at a frame rate of 240Hz.

表示処理部１０５では、図５に示す画像データの変換を行う。図５（Ａ）は表示処理部１０５の入力画像を示しており、Ｎラインの画像である。表示処理部１０５では、４フレーム周期で図５（Ｂ）、図５（Ｃ）、図５（Ｄ）、図５（Ｅ）の画像を出力する。図５（Ｂ）は入力画像図５（Ａ）の１ライン目から抜き出し開始し、４ライン毎の画像のみを抜き出した画像であり、図５（Ｃ）は２ライン目から開始、図５（Ｄ）は３ライン目から開始、図５（Ｅ）は４ライン目から抜き出した画像である。１フレーム毎に図５（Ａ）入力画像の４分の１のデータ量の画像データを出力することになる。 The display processing unit 105 converts the image data shown in FIG. FIG. 5A shows an input image of the display processing unit 105, which is an N-line image. The display processing unit 105 outputs the images of FIGS. 5 (B), 5 (C), 5 (D), and 5 (E) at a cycle of 4 frames. FIG. 5 (B) is an image in which extraction is started from the first line of the input image FIG. 5 (A) and only the image of every four lines is extracted, and FIG. 5 (C) is an image starting from the second line. D) starts from the third line, and FIG. 5 (E) is an image extracted from the fourth line. Image data of a quarter of the data amount of the input image of FIG. 5 (A) is output for each frame.

ステップＳ３０５で、フレームレート２４０Ｈｚ表示を開始する。第１表示部１０６と第２表示部１０７では、表示処理部１０５が出力する図５（Ｂ）〜（Ｅ）に示す画像データからデータを補間し、図５（Ｆ）〜（Ｉ）に示す表示用画像データを生成して表示する。図５（Ｆ）〜（Ｉ）の斜線や縦線、網模様で示す画像ラインが補間データであり、線形補間、バイキュービック補間、ニアレストネイバー補間、オーバーサンプリング補間などで補間データを生成する。表示は、第１表示部１０６のみでも、第２表示部１０７のみでも可能である。 In step S305, the frame rate 240 Hz display is started. The first display unit 106 and the second display unit 107 interpolate the data from the image data shown in FIGS. 5 (B) to 5 (E) output by the display processing unit 105, and show them in FIGS. 5 (F) to 5 (I). Generates and displays image data for display. The diagonal lines, vertical lines, and image lines shown by the mesh pattern in FIGS. 5 (F) to 5 (I) are the interpolation data, and the interpolation data is generated by linear interpolation, bicubic interpolation, nearest neighbor interpolation, oversampling interpolation, or the like. The display can be performed only by the first display unit 106 or only by the second display unit 107.

ステップＳ３０３でフレームレートとして１２０Ｈｚを選択した場合、ステップＳ３０６でフレームレート１２０Ｈｚに変更する設定の指示をＣＰＵ１１１から各処理部に出す。なお、各処理部とは、同期信号生成部１０９、画像処理部１０４、表示処理部１０５、第１表示部１０６、第２表示部１０７のそれぞれのことである。 When 120 Hz is selected as the frame rate in step S303, the CPU 111 issues an instruction for setting the frame rate to 120 Hz in step S306 to each processing unit. Each processing unit is a synchronization signal generation unit 109, an image processing unit 104, a display processing unit 105, a first display unit 106, and a second display unit 107, respectively.

同期信号生成部１０９では、図３に示すフレームレート６０Ｈｚ状態から１２０Ｈｚ状態のＶＳＹＮＣ、ＶＢＬＡＮＫに変更する。１フレームの時間は、フレームレート１２０Ｈｚは６０Ｈｚの半分の時間である。 The synchronization signal generation unit 109 changes the frame rate from the 60 Hz state shown in FIG. 3 to VSYNC and VBLank in the 120 Hz state. The time of one frame is half the time of 60 Hz at a frame rate of 120 Hz.

表示処理部１０５では、図４に示す画像データの変換を行う。図４（Ａ）は表示処理部１０５の入力画像を示しており、Ｎラインの画像である。表示処理部１０５では、フレーム毎に交互に図４（Ｂ）と図４（Ｃ）の画像を出力する。図４（Ｂ）は入力画像図４（Ａ）の奇数ライン画像のみを抜き出した画像であり、図４（Ｃ）は入力画像図４（Ａ）の偶数ライン画像のみを抜き出した画像である。図４（Ａ）入力画像の半分のデータ量の画像データを出力することになる。 The display processing unit 105 converts the image data shown in FIG. FIG. 4A shows an input image of the display processing unit 105, which is an N-line image. The display processing unit 105 alternately outputs the images of FIGS. 4 (B) and 4 (C) for each frame. FIG. 4 (B) is an image obtained by extracting only the odd-numbered line image of the input image FIG. 4 (A), and FIG. 4 (C) is an image obtained by extracting only the even-numbered line image of the input image FIG. 4 (A). FIG. 4 (A) Image data having half the amount of data of the input image is output.

ステップＳ３０７で、フレームレート１２０Ｈｚ表示を開始する。第１表示部１０６と第２表示部１０７では、表示処理部１０５が出力する図４（Ｂ）、図４（Ｃ）に示す画像データからデータを補間し、図４（Ｄ）、図４（Ｅ）に示す表示用画像データを生成して表示する。図４（Ｄ）、図４（Ｅ）の斜線で示す画像ラインが補間データであり、線形補間、バイキュービック補間、ニアレストネイバー補間、オーバーサンプリング補間などで補間データを生成する。表示は、第１表示部１０６のみでも、第２表示部１０７のみでも可能である。 In step S307, the frame rate 120 Hz display is started. The first display unit 106 and the second display unit 107 interpolate data from the image data shown in FIGS. 4 (B) and 4 (C) output by the display processing unit 105, and perform data in FIGS. 4 (D) and 4 (D). The display image data shown in E) is generated and displayed. The image lines shown by the diagonal lines in FIGS. 4 (D) and 4 (E) are the interpolation data, and the interpolation data is generated by linear interpolation, bicubic interpolation, nearest neighbor interpolation, oversampling interpolation and the like. The display can be performed only by the first display unit 106 or only by the second display unit 107.

ステップＳ３０８で撮影終了するなら撮影を終了する。撮影終了しない場合、ステップＳ３０２に戻り、再度、高速フレームレート表示が必要か判断し、撮影を継続する。 If the shooting is finished in step S308, the shooting is finished. If the shooting is not completed, the process returns to step S302, determines again whether high-speed frame rate display is necessary, and continues shooting.

本実施例では、フレームレート６０Ｈｚ動作とフレームレート１２０Ｈｚ動作、フレームレート２４０Ｈｚ動作では、画像処理部１０４や表示処理部１０５の単位時間当たりの処理データ量は変わらないため、動作クロック周波数を変更する必要は無い。動作クロック周波数の変更が無いため、フレームレート切替時の同期信号や画像データの乱れは発生せず、表示が途切れることもない。 In this embodiment, since the amount of processing data per unit time of the image processing unit 104 and the display processing unit 105 does not change in the frame rate 60Hz operation, the frame rate 120Hz operation, and the frame rate 240Hz operation, it is necessary to change the operating clock frequency. There is no. Since the operating clock frequency is not changed, the synchronization signal and image data are not disturbed when the frame rate is switched, and the display is not interrupted.

以上述べたように、本実施例によれば、表示処理用途の動作クロック信号発振器１個の構成で、表示を途切れさせずに表示フレームレート切替を実現し、消費電力を上げることなく動画の視認性向上を可能とする。 As described above, according to the present embodiment, the display frame rate can be switched without interrupting the display by configuring one operating clock signal oscillator for display processing, and the moving image can be visually recognized without increasing the power consumption. Enables improvement of sex.

以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形および変更が可能である。 Although the preferred embodiments of the present invention have been described above, the present invention is not limited to these embodiments, and various modifications and modifications can be made within the scope of the gist thereof.

１００ 撮像装置
１０１ 撮像光学系
１０２ 撮像センサ部
１０３ 撮像処理部
１０４ 画像処理部
１０５ 表示処理部
１０６ 第１表示部
１０７ 第２表示部
１０８ 接眼検知センサ部
１０９ 同期信号生成部
１１０ 撮像制御部
１１１ ＣＰＵ
１１２ 記憶部
１１３ 操作部 100 Imaging device 101 Imaging optical system 102 Imaging sensor unit 103 Imaging processing unit 104 Image processing unit 105 Display processing unit 106 First display unit 107 Second display unit 108 Eyepiece detection sensor unit 109 Synchronous signal generation unit 110 Imaging control unit 111 CPU
112 Storage unit 113 Operation unit

Claims (8)

撮像画像を取得する撮像手段と、
表示フレームレートを指定する設定手段と、
前記設定手段の設定に応じて所定の表示フレームレートを示す同期信号を生成する同期信号生成手段と、
前記同期信号と前記表示フレームレートに応じて前記撮像画像から第一の画像を生成する画像生成手段と、
前記同期信号と前記フレームレートに応じて前記第一の画像から表示用画像を生成して表示する表示手段と、を有する
ことを特徴とする撮像装置。 An imaging means for acquiring an captured image and
Setting means to specify the display frame rate and
A synchronization signal generation means that generates a synchronization signal indicating a predetermined display frame rate according to the setting of the setting means, and
An image generation means that generates a first image from the captured image according to the synchronization signal and the display frame rate.
An image pickup apparatus comprising: a display means for generating and displaying a display image from the first image according to the synchronization signal and the frame rate. 前記設定手段は、撮像装置の動きを検知した場合、表示フレームレートを高速化設定する
ことを特徴とする請求項１に記載の撮像装置。 The imaging device according to claim 1, wherein the setting means sets the display frame rate at a high speed when the movement of the imaging device is detected. 前記設定手段は、前記撮像手段がオートフォーカス動作した場合、表示フレームレートを高速化設定する
ことを特徴とする請求項１又は２に記載の撮像装置。 The imaging device according to claim 1 or 2, wherein the setting means sets a high-speed display frame rate when the imaging unit operates in autofocus. 前記設定手段は、前記撮像手段が被写体を追尾する動作した場合、表示フレームレートを高速化設定する
ことを特徴とする請求項１〜３のいずれか１項に記載の撮像装置。 The imaging device according to any one of claims 1 to 3, wherein the setting means sets a high-speed display frame rate when the imaging unit operates to track a subject. 前記設定手段は、シャッターボタンが半押し操作された状態となった場合、表示フレームレートを高速化設定する
ことを特徴とする請求項１〜４のいずれか１項に記載の撮像装置。 The imaging device according to any one of claims 1 to 4, wherein the setting means sets the display frame rate at a high speed when the shutter button is half-pressed. 前記設定手段は、撮像装置が所定の時間以上、操作されていない状態となった場合、表示フレームレートを低速化設定する
ことを特徴とする請求項１〜５のいずれか１項に記載の撮像装置。 The imaging according to any one of claims 1 to 5, wherein the setting means sets a low display frame rate when the imaging device is not operated for a predetermined time or longer. apparatus. 前記第一画像は、前記同期信号と前記表示フレームレートに応じて、前記撮像画像の垂直方向に画素を間引いて生成される
ことを特徴とする請求項１〜６のいずれか１項に記載の撮像装置。 The first image according to any one of claims 1 to 6, wherein the first image is generated by thinning out pixels in the vertical direction of the captured image according to the synchronization signal and the display frame rate. Imaging device. 前記表示用画像は、前記同期信号と前記表示フレームレートに応じて、前記第一画像の垂直方向に画素を補間して生成される
ことを特徴とする請求項１〜７のいずれか１項に記載の撮像装置。
The display image is generated by interpolating pixels in the vertical direction of the first image according to the synchronization signal and the display frame rate, according to any one of claims 1 to 7. The imaging apparatus described.

Images