JP6140975B2 - Imaging device - Google Patents

Imaging device Download PDF

Info

Publication number
JP6140975B2
JP6140975B2 JP2012235511A JP2012235511A JP6140975B2 JP 6140975 B2 JP6140975 B2 JP 6140975B2 JP 2012235511 A JP2012235511 A JP 2012235511A JP 2012235511 A JP2012235511 A JP 2012235511A JP 6140975 B2 JP6140975 B2 JP 6140975B2
Authority
JP
Japan
Prior art keywords
focus adjustment
contrast value
operation member
display
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2012235511A
Other languages
Japanese (ja)
Other versions
JP2014086938A (en
Inventor
渡辺 洋二
洋二 渡辺
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Priority to JP2012235511A priority Critical patent/JP6140975B2/en
Publication of JP2014086938A publication Critical patent/JP2014086938A/en
Application granted granted Critical
Publication of JP6140975B2 publication Critical patent/JP6140975B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Studio Devices (AREA)

Description

本発明は、焦点調節操作部材を操作して焦点調節が可能な撮像装置に関する。   The present invention relates to an imaging apparatus capable of adjusting a focus by operating a focus adjustment operation member.

近年のデジタルカメラは、光学ファインダの代わりに液晶モニタを用いた電子ビューファインダ(ライブビュー表示機能等とも呼ばれる)を搭載しているものが多い。この場合、手動による焦点調節時には液晶モニタ上でピントの状態を確認しながら焦点調節を行うことになるが、液晶モニタに通常に表示される画像のみからピントの山を見つけるのは困難である。このため、液晶モニタ上に表示されている画像の一部を拡大することによってピントの山を見つけ易くする提案がなされている(例えば特許文献1)。また、焦点調節操作部材(マニュアルフォーカスリング)が操作されたことを検知し、この操作が検知された場合に上述したような拡大表示を行うようにした提案もなされている(例えば特許文献2)。   Many digital cameras in recent years are equipped with an electronic viewfinder (also called a live view display function) using a liquid crystal monitor instead of an optical viewfinder. In this case, during manual focus adjustment, focus adjustment is performed while confirming the focus state on the liquid crystal monitor. However, it is difficult to find a focus peak only from an image normally displayed on the liquid crystal monitor. For this reason, a proposal has been made to make it easy to find a focus peak by enlarging a part of an image displayed on a liquid crystal monitor (for example, Patent Document 1). There has also been a proposal that detects that a focus adjustment operation member (manual focus ring) has been operated, and performs the enlarged display as described above when this operation is detected (for example, Patent Document 2). .

特開平11−298791号公報Japanese Patent Laid-Open No. 11-298791 特開2001−251540号公報JP 2001-251540 A

ここで、特許文献2等の拡大表示の際、拡大表示する部分のピントが大きく外れていると、表示される画像も大きくぼけてしまう。このような表示では、拡大表示をしない場合よりもピントの山を見つけるのが困難となり、撮影者にとっての使い勝手がかえって悪くなるおそれがある。   Here, when the enlarged display of Patent Document 2 or the like is performed, if the portion of the enlarged display is out of focus, the displayed image will be greatly blurred. In such a display, it is more difficult to find a focus mountain than in the case of not enlarging the display, and the usability for the photographer may be deteriorated.

本発明は、上記の事情に鑑みてなされたもので、焦点調節操作部材の操作中に拡大表示を行うことが可能な撮像装置において、ユーザの使い勝手の向上を図ることが可能な撮像装置を提供することを目的とする。   The present invention has been made in view of the above circumstances, and provides an imaging apparatus capable of improving the usability of a user in an imaging apparatus capable of performing enlarged display during operation of a focus adjustment operation member. The purpose is to do.

上記の目的を達成するために、本発明の一態様の撮像装置は、焦点調節操作部材の操作に応じて焦点調節される撮影レンズと、上記撮影レンズを介して被写体を撮像し、該被写体に係る画像データを得る撮像部と、上記撮像部から繰り返し得られる画像データを動画像として表示する表示部と、上記動画像として表示された画像データの所定の領域におけるコントラスト値を算出する算出部と、上記焦点調節操作部材が操作されたことを検知する検知部と、上記焦点調節操作部材が操作された後に算出された上記コントラスト値が減少傾向にある場合に、上記焦点調節操作部材の操作に関するアドバイスをするアドバイス部と、上記焦点調節操作部材が操作された後に算出された上記コントラスト値が増加傾向にある場合に、上記表示部に動画像として表示されている画像データの一部を拡大表示するように制御する拡大表示制御部と、を具備することを特徴とする。 In order to achieve the above object, an imaging device according to one embodiment of the present invention images a subject through a photographing lens that is adjusted in focus according to an operation of a focus adjustment operation member, and the subject. An imaging unit that obtains such image data, a display unit that displays image data repeatedly obtained from the imaging unit as a moving image, and a calculation unit that calculates a contrast value in a predetermined region of the image data displayed as the moving image A detection unit that detects that the focus adjustment operation member has been operated, and operation of the focus adjustment operation member when the contrast value calculated after the focus adjustment operation member has been operated tends to decrease. when the advice unit for advice, the contrast value above focusing operating member is calculated after being operated is increasing, dynamic on the display unit Characterized by comprising an enlarged display control unit for controlling so as to enlarge a portion of the image data being displayed as an image, a.

本発明によれば、焦点調節操作部材の操作中に拡大表示を行うことが可能な撮像装置において、ユーザの使い勝手の向上を図ることが可能な撮像装置を提供することができる。   ADVANTAGE OF THE INVENTION According to this invention, in the imaging device which can perform an enlarged display during operation of a focus adjustment operation member, the imaging device which can aim at the improvement of a user's usability can be provided.

本発明の一実施形態に係るデジタルカメラの一例としての構成を示す図。1 is a diagram illustrating a configuration as an example of a digital camera according to an embodiment of the present invention. 本発明の一実施形態におけるデジタルカメラのメイン動作について示すフローチャート。6 is a flowchart illustrating a main operation of the digital camera according to the embodiment of the present invention. ライブビュー表示動作について示すフローチャート。The flowchart shown about live view display operation | movement. ライブビュー表示動作時の表示例を示す図。The figure which shows the example of a display at the time of live view display operation | movement. 焦点調節操作部材の操作に伴うコントラスト値の時間変化と拡大ライブビュー表示の実行タイミングとの関係を示す図。The figure which shows the relationship between the time change of the contrast value accompanying operation of a focus adjustment operation member, and the execution timing of an enlarged live view display.

以下、図面を参照して本発明の実施形態を説明する。
図1は、本発明の一実施形態に係る撮像装置の一例としてのデジタルカメラ(以下、カメラと称する)100の一例としての構成を示す図である。図1に示すカメラ100は、交換レンズ200とカメラボディ300とを有するレンズ交換可能なカメラを例示している。
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
FIG. 1 is a diagram illustrating a configuration as an example of a digital camera (hereinafter referred to as a camera) 100 as an example of an imaging apparatus according to an embodiment of the present invention. A camera 100 illustrated in FIG. 1 illustrates a lens-exchangeable camera having an interchangeable lens 200 and a camera body 300.

交換レンズ200は、撮影レンズ201と、焦点調節操作部材202と、絞り機構203とを有している。   The interchangeable lens 200 includes a photographing lens 201, a focus adjustment operation member 202, and a diaphragm mechanism 203.

撮影レンズ201は、図示しない被写体の光束を集光してカメラボディ300内の撮像素子311上に被写体像を結像させる。撮影レンズ201は、焦点調節レンズを含んでいる。焦点調節レンズをその光軸方向に沿って移動させることで、撮影レンズ201の焦点調節がなされる。   The photographing lens 201 collects a luminous flux of a subject (not shown) and forms a subject image on the image sensor 311 in the camera body 300. The taking lens 201 includes a focus adjustment lens. The focus adjustment of the photographing lens 201 is performed by moving the focus adjustment lens along the optical axis direction.

焦点調節操作部材202は、例えばフォーカスリング等であって、ユーザが撮影レンズ201に含まれる焦点調節レンズをその光軸方向に沿って手動で移動させるための焦点調節操作部材である。ここで、本実施形態における焦点調節操作部材202は、ユーザによる操作を検知するためのエンコーダを含む。例えば、焦点調節操作部材202が操作された場合には、その操作に応じたパルス信号(操作信号)をカメラボディ300内の操作信号ラッチ回路328に出力する。   The focus adjustment operation member 202 is, for example, a focus ring or the like, and is a focus adjustment operation member for the user to manually move the focus adjustment lens included in the photographing lens 201 along the optical axis direction. Here, the focus adjustment operation member 202 in the present embodiment includes an encoder for detecting an operation by the user. For example, when the focus adjustment operation member 202 is operated, a pulse signal (operation signal) corresponding to the operation is output to the operation signal latch circuit 328 in the camera body 300.

絞り機構203は、撮影レンズ201を介して撮像素子311に入射する光束の光量を調整する。   The diaphragm mechanism 203 adjusts the light amount of the light beam incident on the image sensor 311 via the photographing lens 201.

カメラボディ300は、撮像素子311と、撮像素子駆動回路312と、前処理回路313と、データバス314と、SDRAM制御回路315と、SDRAM316と、画像処理回路317と、ビデオ信号出力回路318と、液晶モニタ駆動回路319と、液晶モニタ320と、記録媒体制御回路321と、記録媒体322と、シーケンスコントローラ(ボディCPU)323と、フラッシュメモリ制御回路324と、フラッシュメモリ325と、各種スイッチ326と、スイッチ検知回路327、操作信号ラッチ回路328とを有している。   The camera body 300 includes an image sensor 311, an image sensor drive circuit 312, a preprocessing circuit 313, a data bus 314, an SDRAM control circuit 315, an SDRAM 316, an image processing circuit 317, a video signal output circuit 318, A liquid crystal monitor drive circuit 319, a liquid crystal monitor 320, a recording medium control circuit 321, a recording medium 322, a sequence controller (body CPU) 323, a flash memory control circuit 324, a flash memory 325, various switches 326, A switch detection circuit 327 and an operation signal latch circuit 328 are provided.

撮像素子311は、撮影レンズ201を介して結像された被写体像を光電変換によって電気信号(画像信号)に変換する。撮像素子駆動回路312は、ボディCPU323からの指示に従って撮像素子311を駆動制御するとともに、撮像素子311からの画像信号の読み出しを制御する。前処理回路313は、撮像素子駆動回路312を介して読み出される画像信号に対してノイズ除去や増幅等のアナログ処理を施し、さらにアナログ処理した画像信号をデジタル信号(画像データ)に変換する処理を行う。   The image sensor 311 converts the subject image formed through the photographing lens 201 into an electric signal (image signal) by photoelectric conversion. The image sensor drive circuit 312 controls driving of the image sensor 311 according to an instruction from the body CPU 323 and controls reading of an image signal from the image sensor 311. The pre-processing circuit 313 performs analog processing such as noise removal and amplification on the image signal read out through the image sensor driving circuit 312, and further converts the analog processed image signal into a digital signal (image data). Do.

データバス314は、前処理回路313において得られた画像データや画像処理回路317で処理される画像データ等の種々のデータを転送するための転送路である。SDRAM制御回路315は、SDRAM316へのデータの書き込み及び読み出しを制御する。SDRAM316は、前処理回路313において得られたデータ等を一時格納しておくためのバッファメモリである。   The data bus 314 is a transfer path for transferring various data such as image data obtained by the preprocessing circuit 313 and image data processed by the image processing circuit 317. The SDRAM control circuit 315 controls writing and reading of data to and from the SDRAM 316. The SDRAM 316 is a buffer memory for temporarily storing data obtained in the preprocessing circuit 313.

画像処理回路317は、前処理回路313において得られ、SDRAM316に格納されている画像データを読み出して各種の画像処理を施すことでライブビュー表示用の画像や記録用の画像を生成する。さらに、本実施形態において、画像処理回路317はライブビュー表示用の画像の一部を拡大する拡大処理も行う。   The image processing circuit 317 generates an image for live view display and an image for recording by reading the image data obtained in the preprocessing circuit 313 and storing the data in the SDRAM 316 and performing various image processing. Further, in the present embodiment, the image processing circuit 317 performs enlargement processing for enlarging a part of the image for live view display.

ビデオ信号出力回路318は、画像処理回路317による処理後の画像データをビデオ信号に変換して液晶モニタ駆動回路319に出力する。液晶モニタ駆動回路319は、ビデオ信号出力回路318から入力されたビデオ信号に従って液晶モニタ320を駆動する。液晶モニタ320はライブビュー表示用の画像等の各種の画像を表示する。この液晶モニタ320はアドバイス部の一例として機能する。   The video signal output circuit 318 converts the image data processed by the image processing circuit 317 into a video signal and outputs the video signal to the liquid crystal monitor drive circuit 319. The liquid crystal monitor driving circuit 319 drives the liquid crystal monitor 320 according to the video signal input from the video signal output circuit 318. The liquid crystal monitor 320 displays various images such as an image for live view display. The liquid crystal monitor 320 functions as an example of an advice unit.

記録媒体制御回路321は、記録媒体322へのデータの書き込み及び読み出しを制御する。記録媒体322は、例えばカメラボディ300に対して着脱自在に構成されたメモリカードであって画像処理回路317において得られた記録用の画像データを記録する。   The recording medium control circuit 321 controls writing and reading of data to and from the recording medium 322. The recording medium 322 is a memory card configured to be detachable from the camera body 300, for example, and records recording image data obtained by the image processing circuit 317.

ボディCPU323は、フラッシュメモリ325に記憶されている制御プログラムに従って、カメラボディ300内の各部の制御を行う制御部である。このボディCPU323は、算出部としての機能も有し、撮像素子311を介して得られた画像データからコントラスト値を算出することも行う。さらに、ボディCPU323は、画像処理回路317とともに拡大表示制御部としての機能も有し、ライブビュー表示中に、コントラスト値が所定の変化態様を示した場合に、ライブビュー表示されている画像の一部を拡大表示させるための処理を行う。   The body CPU 323 is a control unit that controls each part in the camera body 300 according to a control program stored in the flash memory 325. The body CPU 323 also has a function as a calculation unit, and also calculates a contrast value from image data obtained via the image sensor 311. Furthermore, the body CPU 323 also has a function as an enlarged display control unit together with the image processing circuit 317, and when the contrast value shows a predetermined change mode during the live view display, the body CPU 323 A process for enlarging and displaying the part is performed.

フラッシュメモリ制御回路324は、フラッシュメモリ325へのデータの書き込み及び読み出しを制御する。フラッシュメモリ325は、ボディCPU323によって読み出される制御プログラムやカメラボディ300の各種の設定値等を記憶する。   The flash memory control circuit 324 controls writing and reading of data to the flash memory 325. The flash memory 325 stores a control program read by the body CPU 323, various setting values of the camera body 300, and the like.

各種スイッチ326は、カメラボディ300を操作するための各種の操作部材に応答して状態が切り替わるスイッチである。この各種の操作部材としては、カメラボディ300の電源をオン又はオフさせるためのパワースイッチ、カメラに撮影実行の指示を与えるためのレリーズボタン、画像再生の指示を与えるための再生ボタン、メニュー画面表示の指示を与えるためのメニューボタン、カメラの各種設定を行うための入力キー、等が挙げられる。スイッチ検知回路327は、各種スイッチ326の操作状態を検知し、検知結果をボディCPU323に通知する回路である。スイッチ検知回路327を介して操作部材の操作が検知された場合に、ボディCPU323は、操作部材の操作内容に応じた制御を実行する。   The various switches 326 are switches that change states in response to various operation members for operating the camera body 300. The various operation members include a power switch for turning on / off the power of the camera body 300, a release button for giving a camera execution instruction, a playback button for giving an image reproduction instruction, and a menu screen display. Menu buttons for giving instructions, input keys for making various camera settings, and the like. The switch detection circuit 327 is a circuit that detects operation states of the various switches 326 and notifies the detection result to the body CPU 323. When the operation of the operation member is detected via the switch detection circuit 327, the body CPU 323 executes control according to the operation content of the operation member.

検知部としての操作信号ラッチ回路328は、交換レンズ200の焦点調節操作部材202の操作を検知する。この操作信号ラッチ回路328は、焦点調節操作部材202から操作信号が入力されたときに出力(ラッチ信号)をローレベル(L)からハイレベル(H)に変化させる。また、操作信号ラッチ回路328は、所定時間(例えば2秒間)の間、操作信号の入力がない場合、即ち焦点調節操作部材202の操作が終了したと考えられるタイミングで出力をハイレベル(H)からローレベル(L)に変化させる。   An operation signal latch circuit 328 as a detection unit detects an operation of the focus adjustment operation member 202 of the interchangeable lens 200. The operation signal latch circuit 328 changes the output (latch signal) from the low level (L) to the high level (H) when the operation signal is input from the focus adjustment operation member 202. Further, the operation signal latch circuit 328 outputs a high level (H) when there is no operation signal input for a predetermined time (for example, 2 seconds), that is, when the operation of the focus adjustment operation member 202 is considered to be completed. To low level (L).

以下、本実施形態におけるデジタルカメラの動作について図2を参照して説明する。図2は、本実施形態におけるカメラのメイン動作について示すフローチャートである。例えばカメラボディ300に図示しない電池が装填されたときに図2の処理が開始される。   The operation of the digital camera in this embodiment will be described below with reference to FIG. FIG. 2 is a flowchart showing the main operation of the camera in the present embodiment. For example, when a battery (not shown) is loaded in the camera body 300, the process of FIG.

ボディCPU323は、まず、スイッチ検知回路327の出力から、ユーザの操作によってパワースイッチがオンされたか否かを判定する(S1)。パワースイッチがオンされていない場合には本カメラの状態がスリープ状態となる。また、パワースイッチがオンである場合、若しくはスリープ状態においてパワースイッチがオンされた場合に、ボディCPU323はライブビュー表示動作を開始する(S2)。このライブビュー表示動作については後述する。   The body CPU 323 first determines from the output of the switch detection circuit 327 whether or not the power switch is turned on by a user operation (S1). When the power switch is not turned on, the camera is in a sleep state. When the power switch is on or when the power switch is turned on in the sleep state, the body CPU 323 starts the live view display operation (S2). This live view display operation will be described later.

ライブビュー表示動作によってライブビュー表示を行った後、ボディCPU323は、撮像素子311を介して得られる画像データの明るさから、撮影時の撮像素子311の露光量(絞り203の開放量、撮像素子311の露光時間)を算出する(S3)。その後、ボディCPU323は、ユーザの再生ボタンの操作によって再生スイッチがオンしたか否かを判定する(S4)。   After performing live view display by the live view display operation, the body CPU 323 determines the exposure amount of the image sensor 311 at the time of shooting (the opening amount of the aperture 203, the image sensor from the brightness of the image data obtained via the image sensor 311. 311 exposure time) is calculated (S3). Thereafter, the body CPU 323 determines whether or not the reproduction switch is turned on by the user's operation of the reproduction button (S4).

再生スイッチがオンした場合に、ボディCPU323は、画像データの再生動作を制御する(S5)。再生動作においては、液晶モニタ320に、記録媒体322に記録されている画像データの一覧が表示され、この一覧表示において、ユーザが所望の画像を選択すると、その選択された画像データが再生されて液晶モニタ320に画像表示がなされる。   When the reproduction switch is turned on, the body CPU 323 controls the reproduction operation of the image data (S5). In the reproduction operation, a list of image data recorded on the recording medium 322 is displayed on the liquid crystal monitor 320. When the user selects a desired image in the list display, the selected image data is reproduced. An image is displayed on the liquid crystal monitor 320.

S4又はS5の後、ボディCPU323は、ユーザのメニューボタンの操作によってメニュースイッチがオンしたか否かを判定する(S6)。メニュースイッチがオンした場合に、ボディCPU323は、メニュー設定動作を開始する(S7)。メニュー設定動作においては、例えば、液晶モニタ駆動回路319を制御して液晶モニタ320にメニュー画面を表示させ、このメニュー画面において、ユーザが所望の項目を選択すると、その項目に対応したカメラ100の設定が行われる。   After S4 or S5, the body CPU 323 determines whether or not the menu switch is turned on by the user operating the menu button (S6). When the menu switch is turned on, the body CPU 323 starts a menu setting operation (S7). In the menu setting operation, for example, the liquid crystal monitor driving circuit 319 is controlled to display a menu screen on the liquid crystal monitor 320. When the user selects a desired item on the menu screen, the setting of the camera 100 corresponding to the item is performed. Is done.

S6又はS7の後、ボディCPU323は、ユーザのレリーズボタンの操作によってレリーズスイッチがオンしたか否かを判定する(S8)。レリーズスイッチがオンした場合に、ボディCPU323は、撮影動作を開始する(S9)。撮影動作においては、S3において算出された露光量に従って絞り203の開放量及び撮像素子311の露光時間を制御することによって、撮像素子311の露光量を制御して撮像素子311による撮像を行う。そして、撮像によって得られた画像データを、画像処理回路317において処理した後、記録媒体322に記録する。   After S6 or S7, the body CPU 323 determines whether or not the release switch is turned on by the user operating the release button (S8). When the release switch is turned on, the body CPU 323 starts a photographing operation (S9). In the photographing operation, by controlling the opening amount of the diaphragm 203 and the exposure time of the image sensor 311 according to the exposure amount calculated in S3, the exposure amount of the image sensor 311 is controlled to perform imaging by the image sensor 311. Then, the image data obtained by imaging is processed by the image processing circuit 317 and then recorded on the recording medium 322.

S8又はS9の後、ボディCPU323は、パワースイッチがオンしているか否かを判定する(S10)。パワースイッチがオンのままである場合には処理がS2に移行する。パワースイッチがオフである場合に、ボディCPU323は、交換レンズ200への電源供給を停止した後、カメラボディ300の状態をスリープ状態に移行させる。   After S8 or S9, the body CPU 323 determines whether or not the power switch is on (S10). If the power switch remains on, the process proceeds to S2. When the power switch is off, the body CPU 323 stops the power supply to the interchangeable lens 200 and then shifts the state of the camera body 300 to the sleep state.

図3は、ライブビュー表示動作について示すフローチャートである。ライブビュー表示動作の開始時に、ボディCPU323は、撮像素子駆動回路312を制御して撮像素子311を介して得られる画像データをSDRAM316に取り込む(S21)。   FIG. 3 is a flowchart showing the live view display operation. At the start of the live view display operation, the body CPU 323 controls the image sensor drive circuit 312 to capture image data obtained via the image sensor 311 into the SDRAM 316 (S21).

続いて、ボディCPU323は、操作信号ラッチ回路328の出力(ラッチ信号)がハイレベル(H)であるか否かを判定する(S22)。ラッチ信号がハイレベル(H)である場合に、ボディCPU323は、現在、拡大表示中であるか否かを判定する(S23)。現在、拡大表示中である場合には、処理がS27に移行して拡大表示が継続される。   Subsequently, the body CPU 323 determines whether or not the output (latch signal) of the operation signal latch circuit 328 is at a high level (H) (S22). When the latch signal is at the high level (H), the body CPU 323 determines whether or not the enlarged display is currently being performed (S23). If the enlarged display is currently being performed, the process proceeds to S27 and the enlarged display is continued.

現在、拡大表示中でない場合に、ボディCPU323は、撮像素子311から取り込んだ画像データから、画像のコントラストを評価するためのコントラスト値を算出する(S24)。ここで、コントラスト値は、例えばユーザによって指定された領域や中央の領域のコントラスト値を算出する。続いて、ボディCPU323は、現在のコントラスト値の算出が3回目であるか否かを判定する(S25)。現在のコントラスト値の算出が3回目である場合に、ボディCPU323は、3回目までのコントラスト値が増加傾向であるか否かを判定する(S26)。S26においては、1回目のコントラスト値をC1、2回目のコントラスト値をC2、3回目のコントラスト値をC3としたとき、C1<C2<C3である場合に、コントラスト値が増加傾向であると判定する。   When the enlarged display is not currently being performed, the body CPU 323 calculates a contrast value for evaluating the contrast of the image from the image data captured from the image sensor 311 (S24). Here, as the contrast value, for example, the contrast value of the region designated by the user or the central region is calculated. Subsequently, the body CPU 323 determines whether or not the current contrast value is calculated for the third time (S25). When the current contrast value is calculated for the third time, the body CPU 323 determines whether or not the contrast value up to the third time is increasing (S26). In S26, when the first contrast value is C1, the second contrast value is C2, and the third contrast value is C3, it is determined that the contrast value tends to increase when C1 <C2 <C3. To do.

3回目までのコントラスト値が増加傾向である場合に、ボディCPU323は、拡大表示を行う(S27)。その後に、ボディCPU323は、図3の処理を終了させて図2のS3以後の処理を実行する。S27の拡大表示においては、ボディCPU323は、S21の取り込みによってSDRAM316に記憶された画像データのうちの所定の領域を抽出し、抽出した領域の画像データを画像処理回路317において画像処理することによって表示用の画像データを生成する。なお、ここでの所定の領域は、S24においてコントラスト値を算出した領域である。また、ここでの画像処理は、抽出した領域の拡大処理を含む。その他、画像表示に必要となる、ホワイトバランス補正や階調補正等を含む。画像処理の後、ボディCPU323は、液晶モニタ駆動回路319に画像表示の実行を指示する。これを受けて、液晶モニタ駆動回路319は、ビデオ信号出力回路318を介して画像処理回路317で処理された画像データをSDRAM316から取り込み、取り込んだ画像データを液晶モニタ320に出力し、図4(a)に示すように、液晶モニタ320による拡大表示を実行する。ユーザは、この拡大表示を見ながら焦点調節操作部材を操作することで、後述の全画面表示のときよりも所望の被写体に対する細かな焦点調節を行うことが可能である。   When the contrast value up to the third time tends to increase, the body CPU 323 performs enlarged display (S27). Thereafter, the body CPU 323 ends the process of FIG. 3 and executes the processes after S3 of FIG. In the enlarged display in S27, the body CPU 323 extracts a predetermined area from the image data stored in the SDRAM 316 by taking in S21, and the image processing circuit 317 performs image processing on the image data in the extracted area. Image data is generated. The predetermined area here is an area where the contrast value is calculated in S24. Further, the image processing here includes enlargement processing of the extracted region. In addition, white balance correction, gradation correction, and the like necessary for image display are included. After image processing, the body CPU 323 instructs the liquid crystal monitor drive circuit 319 to execute image display. In response to this, the liquid crystal monitor drive circuit 319 takes in the image data processed by the image processing circuit 317 via the video signal output circuit 318 from the SDRAM 316, and outputs the taken image data to the liquid crystal monitor 320. FIG. As shown to a), the enlarged display by the liquid crystal monitor 320 is performed. The user can perform fine focus adjustment on a desired subject by operating the focus adjustment operation member while viewing the enlarged display, compared to the case of full-screen display described later.

ここで、図4(a)で示すように、拡大表示の際には、拡大表示中であることを示す指標302aを表示させることが望ましい。このような指標302aを表示させることにより、ユーザは、全画面表示から拡大表示に移行したこと及び拡大表示から全画面表示に移行したことを容易に認識することが可能である。図4(a)の例では、画面の四隅に三角形状のマークを表示させている。しかしながら、指標302aの形状は、図4(a)で示したものに限るものではない。また、拡大表示中であることを示す文字等を表示させても良い。   Here, as shown in FIG. 4A, in the enlarged display, it is desirable to display an indicator 302a indicating that the enlarged display is being performed. By displaying such an index 302a, the user can easily recognize that the transition from the full screen display to the enlarged display and the transition from the enlarged display to the full screen display are made. In the example of FIG. 4A, triangular marks are displayed at the four corners of the screen. However, the shape of the indicator 302a is not limited to that shown in FIG. Moreover, you may display the character etc. which show that it is in enlarged display.

3回目までのコントラスト値が増加傾向でない場合に、ボディCPU323は、3回目までのコントラスト値が減少傾向であるか否かを判定する(S28)。S28においては、1回目のコントラスト値をC1、2回目のコントラスト値をC2、3回目のコントラスト値をC3としたとき、C1>C2>C3である場合に、コントラスト値が減少傾向であると判定する。   When the contrast value up to the third time is not increasing, the body CPU 323 determines whether or not the contrast value up to the third time is decreasing (S28). In S28, it is determined that the contrast value tends to decrease when C1> C2> C3, where C1 is the first contrast value, C2 is the second contrast value, and C3 is the third contrast value. To do.

3回目までのコントラスト値が減少傾向である場合に、ボディCPU323は、焦点調節操作部材202の操作方向のアドバイス表示付きの全画面表示を行う(S29)。その後に、ボディCPU323は、図3の処理を終了させて図2のS3以後の処理を実行する。全画面表示においては、ボディCPU323は、S21の取り込みによってSDRAM316に記憶された画像データの全体を画像処理回路317において画像処理することによって表示用の画像データを生成する。ここでの画像処理は、画像表示に必要となる、ホワイトバランス補正や階調補正等を含む。画像処理の後、ボディCPU323は、液晶モニタ駆動回路319に画像表示の実行を指示する。これを受けて、液晶モニタ駆動回路319は、ビデオ信号出力回路318を介して画像処理回路317で処理された画像データをSDRAM316から取り込み、取り込んだ画像データを液晶モニタ320に出力し、図4(b)に示すように、液晶モニタ320による全画面表示を実行する。さらに、ボディCPU323は、焦点調節操作部材202の操作方向を示すアドバイス表示を行う。コントラスト値が減少傾向にある場合、ユーザによる焦点調節操作部材202の操作方向が逆方向であることを示す。したがって、ユーザに、焦点調節操作部材202の操作方向が逆方向である旨をアドバイスする。アドバイス表示の例としては、図4(b)に示すように、焦点調節操作部材202の操作方向を示す指標302bが考えられる。この他、文字表示によってアドバイスしても良い。さらには、表示を用いることなく、例えばビープ音を鳴らしたり、音声によってアドバイスしても良い。   When the contrast value up to the third time tends to decrease, the body CPU 323 performs full-screen display with advice display of the operation direction of the focus adjustment operation member 202 (S29). Thereafter, the body CPU 323 ends the process of FIG. 3 and executes the processes after S3 of FIG. In the full screen display, the body CPU 323 generates image data for display by performing image processing on the entire image data stored in the SDRAM 316 by the capture of S21 in the image processing circuit 317. The image processing here includes white balance correction, gradation correction, and the like necessary for image display. After image processing, the body CPU 323 instructs the liquid crystal monitor drive circuit 319 to execute image display. In response to this, the liquid crystal monitor drive circuit 319 takes in the image data processed by the image processing circuit 317 via the video signal output circuit 318 from the SDRAM 316, and outputs the taken image data to the liquid crystal monitor 320. FIG. As shown in b), full-screen display by the liquid crystal monitor 320 is executed. Further, the body CPU 323 displays an advice indicating the operation direction of the focus adjustment operation member 202. When the contrast value tends to decrease, it indicates that the operation direction of the focus adjustment operation member 202 by the user is the reverse direction. Therefore, the user is advised that the operation direction of the focus adjustment operation member 202 is the reverse direction. As an example of the advice display, as shown in FIG. 4B, an index 302b indicating the operation direction of the focus adjustment operation member 202 can be considered. In addition, advice may be given by character display. Further, without using the display, for example, a beep sound may be generated or advice may be given by voice.

3回目までのコントラスト値が減少傾向でない場合に、ボディCPU323は、3回目までのコントラスト値の変化が小さいか否かを判定する(S30)。S30においては、1回目のコントラスト値をC1、2回目のコントラスト値をC2、3回目のコントラスト値をC3としたとき、|C1−C2|及び|C2−C3|の何れもが所定値Ccよりも小さい場合に、コントラスト値の変化が小さいと判定する。   When the contrast value up to the third time does not tend to decrease, the body CPU 323 determines whether or not the change in the contrast value up to the third time is small (S30). In S30, when the first contrast value is C1, the second contrast value is C2, and the third contrast value is C3, both | C1-C2 | and | C2-C3 | Is also small, it is determined that the change in contrast value is small.

コントラスト値の変化が小さい場合には、処理がS27に移行して拡大表示が行われる。コントラスト値の変化が小さい場合とは、コントラスト値のピーク値付近であることが考えられるので、拡大表示を行うことで細かな焦点調節を可能とする。   If the change in contrast value is small, the process proceeds to S27, and enlarged display is performed. The case where the change in the contrast value is small is considered to be near the peak value of the contrast value, so that fine focus adjustment can be performed by performing enlarged display.

ラッチ信号がローレベル(L)の場合、今回がコントラスト値の取得の3回目でない場合、3回目までのコントラスト値が増加傾向でも減少傾向でもなく且つコントラスト値の変化が大きい場合に、ボディCPU323は、図4(c)に示すような、アドバイス表示を伴わない全画面表示を行う(S31)。その後に、ボディCPU323は、図3の処理を終了させて図2のS3以後の処理を実行する。ラッチ信号がローレベル(L)の場合とは、焦点調節操作部材202の操作が終了している状態である。また、今回がコントラスト値の取得の3回目でない場合及びコントラスト値の変化が大きい場合は、焦点調節操作部材202の操作方向が逆方向であるか否かが判別されていない状態である。これらの状態のときには、全画面表示を行う。   When the latch signal is at a low level (L), this time is not the third acquisition of the contrast value, when the contrast value up to the third time is neither increasing nor decreasing, and the change in the contrast value is large, the body CPU 323 As shown in FIG. 4C, full screen display without advice display is performed (S31). Thereafter, the body CPU 323 ends the process of FIG. 3 and executes the processes after S3 of FIG. The case where the latch signal is at the low level (L) is a state in which the operation of the focus adjustment operation member 202 is finished. If the current time is not the third acquisition of the contrast value and the change in the contrast value is large, it is not determined whether or not the operation direction of the focus adjustment operation member 202 is the reverse direction. In these states, full screen display is performed.

図5は、焦点調節操作部材の操作に伴うコントラスト値の時間変化と拡大ライブビュー表示の実行タイミングとの関係を示す図である。ここで、図5(a)はコントラスト値が増加傾向となっている例を示し、図5(b)はコントラスト値が減少傾向となっている例を示す。   FIG. 5 is a diagram illustrating the relationship between the temporal change of the contrast value accompanying the operation of the focus adjustment operation member and the execution timing of the enlarged live view display. Here, FIG. 5A shows an example in which the contrast value tends to increase, and FIG. 5B shows an example in which the contrast value tends to decrease.

まず、図5(a)の例から説明する。本実施形態のようにコントラスト方式を用いて焦点状態を検出する場合において、コントラスト値が増加傾向となるのは、焦点調節レンズがピント位置に近づくように移動しているときである。例えば、焦点調節レンズが初期位置(通常は無限遠位置)にあるときに焦点調節操作部材202が操作されると、図5(a)に示すようにコントラスト値が増加する。そのまま同方向に焦点調節操作部材202が操作されると、コントラスト値は時間とともに増加する。   First, the example of FIG. 5A will be described. In the case where the focus state is detected using the contrast method as in the present embodiment, the contrast value tends to increase when the focus adjustment lens moves so as to approach the focus position. For example, when the focus adjustment operation member 202 is operated when the focus adjustment lens is at the initial position (usually at infinity), the contrast value increases as shown in FIG. When the focus adjustment operation member 202 is operated in the same direction as it is, the contrast value increases with time.

本実施形態では、焦点調節操作部材202の操作が継続されてラッチ信号がハイレベル(H)となっている期間中に、ボディCPU323は、コントラスト値の算出を行い、コントラスト値が増加傾向にあるときに拡大表示を行う。この条件を満足する場合、焦点調節操作部材202の操作方向が正しいことを示す。したがって、この場合に拡大表示をすることで、ぼけの少ない拡大表示となることが期待される。これにより、ユーザは、拡大表示を見ながら焦点調節操作部材202を操作して容易に所望の被写体にピントを合わせることができる。   In the present embodiment, during the period in which the operation of the focus adjustment operation member 202 is continued and the latch signal is at a high level (H), the body CPU 323 calculates the contrast value and the contrast value tends to increase. Sometimes zoom in. When this condition is satisfied, it indicates that the operation direction of the focus adjustment operation member 202 is correct. Therefore, it is expected that an enlarged display with less blur is obtained by performing an enlarged display in this case. Accordingly, the user can easily focus on a desired subject by operating the focus adjustment operation member 202 while viewing the enlarged display.

次に、図5(b)の例を説明する。図5(a)の例とは逆方向に焦点調節操作部材202が操作されると、図5(b)に示すようにコントラスト値が減少する。コントラスト値が低い状態の画像を拡大表示したとしても、ユーザは、焦点調節操作部材202を何れの方向に操作すれば表示中の画像のぼけが改善されるか、即ち焦点調節操作部材202の操作方向が正しいかを判別できない可能性が高い。   Next, an example of FIG. 5B will be described. When the focus adjustment operation member 202 is operated in the opposite direction to the example of FIG. 5A, the contrast value decreases as shown in FIG. 5B. Even if an image with a low contrast value is enlarged and displayed, the user can operate the focus adjustment operation member 202 in any direction to improve the blurring of the displayed image, that is, the operation of the focus adjustment operation member 202. There is a high probability that the direction is not correct.

そこで、本実施形態では、コントラスト値が減少方向にある場合には拡大表示は行わずに焦点調節操作部材202の操作方向に関するアドバイスを行う。このアドバイスに従ってユーザは、コントラスト値が増加するように焦点調節操作部材202を操作することができる。   Therefore, in this embodiment, when the contrast value is in the decreasing direction, advice regarding the operation direction of the focus adjustment operation member 202 is performed without performing enlarged display. In accordance with this advice, the user can operate the focus adjustment operation member 202 so that the contrast value increases.

以上説明したように、本実施形態においては、焦点調節操作部材202の操作中にコントラスト値を算出し、この算出したコントラスト値の変化の傾向に応じて拡大表示をするか否かを決定する。これにより、ユーザは、大きくぼけた拡大表示を見ながら焦点調節操作部材202を操作する必要がなく、結果としてユーザの使い勝手の向上を図ることが可能である。   As described above, in the present embodiment, a contrast value is calculated during the operation of the focus adjustment operation member 202, and it is determined whether or not to perform enlarged display according to the tendency of the calculated contrast value change. This eliminates the need for the user to operate the focus adjustment operating member 202 while viewing a greatly blurred enlarged display, and as a result, it is possible to improve user convenience.

また、本実施形態においては、コントラスト値が減少方向にある場合には焦点調節操作部材202の操作方向に関するアドバイスを行うようにしている。これにより、ユーザは、ぼけた画像を見ながらであっても焦点調節操作部材202の操作方向を正しく理解することが可能である。   In this embodiment, when the contrast value is in the decreasing direction, advice regarding the operation direction of the focus adjustment operation member 202 is given. Accordingly, the user can correctly understand the operation direction of the focus adjustment operation member 202 even while viewing a blurred image.

また、本実施形態では、焦点調節操作部材202の操作が終了してから所定時間(例えば2秒間)の経過後にラッチ信号がローレベル(L)となる。即ち、拡大表示が行われていた場合には全画面表示に移行する。これにより、必要のないタイミングでいきなり拡大表示が行われることを防止し、ユーザの使い勝手をさらに向上させることが可能である。   Further, in the present embodiment, the latch signal becomes a low level (L) after a predetermined time (for example, 2 seconds) has elapsed since the operation of the focus adjustment operation member 202 is completed. That is, when the enlarged display has been performed, the display shifts to the full screen display. Thereby, it is possible to prevent the enlarged display from being suddenly performed at an unnecessary timing, and to further improve the user-friendliness.

ここで、上述の例では、3回目までのコントラスト値から、その変化の傾向を判定している。しかしながら、実際には4回目以降のコントラスト値をも用いて判定を行うようにしても良い。   Here, in the above-mentioned example, the tendency of the change is determined from the contrast values up to the third time. However, in actuality, the determination may be made using the fourth and subsequent contrast values.

また、上述の例では、手動焦点調節に係る構成のみを図示しているが、自動焦点調節(AF)に係る構成を持たせるようにしても良いことは言うまでもない。   In the above example, only the configuration related to manual focus adjustment is illustrated, but it goes without saying that the configuration related to automatic focus adjustment (AF) may be provided.

以上実施形態に基づいて本発明を説明したが、本発明は上述した実施形態に限定されるものではなく、本発明の要旨の範囲内で種々の変形や応用が可能なことは勿論である。   Although the present invention has been described above based on the embodiments, the present invention is not limited to the above-described embodiments, and various modifications and applications are naturally possible within the scope of the gist of the present invention.

さらに、上記した実施形態には種々の段階の発明が含まれており、開示される複数の構成要件の適当な組合せにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件からいくつかの構成要件が削除されても、上述したような課題を解決でき、上述したような効果が得られる場合には、この構成要件が削除された構成も発明として抽出され得る。   Further, the above-described embodiments include various stages of the invention, and various inventions can be extracted by appropriately combining a plurality of disclosed constituent elements. For example, even if some configuration requirements are deleted from all the configuration requirements shown in the embodiment, the above-described problem can be solved, and this configuration requirement is deleted when the above-described effects can be obtained. The configuration can also be extracted as an invention.

100…デジタルカメラ(カメラ)、200…交換レンズ、201…撮影レンズ、202…焦点調節操作部材、203…絞り機構、300…カメラボディ、311…撮像素子、312…撮像素子駆動回路、313…前処理回路、314…データバス、315…SDRAM制御回路、316…SDRAM、317…画像処理回路、318…ビデオ信号出力回路、319…液晶モニタ駆動回路、320…液晶モニタ、321…記録媒体制御回路、322…記録媒体、323…シーケンスコントローラ(ボディCPU)、324…フラッシュメモリ制御回路、325…フラッシュメモリ、326…各種スイッチ、327…スイッチ検知回路、328…操作信号ラッチ回路   DESCRIPTION OF SYMBOLS 100 ... Digital camera (camera), 200 ... Interchangeable lens, 201 ... Shooting lens, 202 ... Focus adjustment operation member, 203 ... Aperture mechanism, 300 ... Camera body, 311 ... Image sensor, 312 ... Image sensor drive circuit, 313 ... Previous Processing circuit 314 Data bus 315 SDRAM control circuit 316 SDRAM 317 Image processing circuit 318 Video signal output circuit 319 Liquid crystal monitor drive circuit 320 Liquid crystal monitor 321 Recording medium control circuit 322: Recording medium, 323: Sequence controller (body CPU), 324 ... Flash memory control circuit, 325 ... Flash memory, 326 ... Various switches, 327 ... Switch detection circuit, 328 ... Operation signal latch circuit

Claims (2)

焦点調節操作部材の操作に応じて焦点調節される撮影レンズと、
上記撮影レンズを介して被写体を撮像し、該被写体に係る画像データを得る撮像部と、
上記撮像部から繰り返し得られる画像データを動画像として表示する表示部と、
上記動画像として表示された画像データの所定の領域におけるコントラスト値を算出する算出部と、
上記焦点調節操作部材が操作されたことを検知する検知部と、
上記焦点調節操作部材が操作された後に算出された上記コントラスト値が減少傾向にある場合に、上記焦点調節操作部材の操作に関するアドバイスをするアドバイス部と、
上記焦点調節操作部材が操作された後に算出された上記コントラスト値が増加傾向にある場合に、上記表示部に動画像として表示されている画像データの一部を拡大表示するように制御する拡大表示制御部と、
を具備することを特徴とする撮像装置。
A photographic lens whose focus is adjusted according to the operation of the focus adjustment operation member;
An imaging unit that captures an image of a subject through the photographing lens and obtains image data related to the subject;
A display unit that displays image data repeatedly obtained from the imaging unit as a moving image;
A calculation unit for calculating a contrast value in a predetermined region of the image data displayed as the moving image;
A detection unit for detecting that the focus adjustment operation member has been operated;
When the contrast value calculated after the focus adjustment operation member is operated tends to decrease, an advice unit that gives advice on the operation of the focus adjustment operation member;
When the contrast value calculated after the focus adjusting operation member is operated tends to increase, an enlarged display that controls to enlarge and display a part of the image data displayed as a moving image on the display unit A control unit;
An imaging apparatus comprising:
上記焦点調節操作部材の操作に関するアドバイスは、上記コントラスト値を増加させるために必要な上記焦点調節操作部材の操作方向に関するアドバイスであることを特徴とする請求項に記載の撮像装置。 The imaging apparatus according to claim 1 , wherein the advice related to the operation of the focus adjustment operation member is an advice related to an operation direction of the focus adjustment operation member necessary for increasing the contrast value.
JP2012235511A 2012-10-25 2012-10-25 Imaging device Active JP6140975B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2012235511A JP6140975B2 (en) 2012-10-25 2012-10-25 Imaging device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012235511A JP6140975B2 (en) 2012-10-25 2012-10-25 Imaging device

Publications (2)

Publication Number Publication Date
JP2014086938A JP2014086938A (en) 2014-05-12
JP6140975B2 true JP6140975B2 (en) 2017-06-07

Family

ID=50789609

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012235511A Active JP6140975B2 (en) 2012-10-25 2012-10-25 Imaging device

Country Status (1)

Country Link
JP (1) JP6140975B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11233945B2 (en) 2018-09-04 2022-01-25 Hitachi Kokusai Electric Inc. Imaging apparatus

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008164993A (en) * 2006-12-28 2008-07-17 Nikon Corp Focusing information display device and method
JP5100685B2 (en) * 2009-02-25 2012-12-19 株式会社コシナ Interchangeable lens digital camera
JP5457924B2 (en) * 2010-04-15 2014-04-02 オリンパスイメージング株式会社 Digital camera
JP2012008307A (en) * 2010-06-24 2012-01-12 Olympus Imaging Corp Imaging apparatus and display method

Also Published As

Publication number Publication date
JP2014086938A (en) 2014-05-12

Similar Documents

Publication Publication Date Title
JP4884417B2 (en) Portable electronic device and control method thereof
JP4657960B2 (en) Imaging method and apparatus
JP2009225072A (en) Imaging apparatus
JP2008054177A (en) Imaging apparatus
JP2010054730A (en) Focusing position detecting device, imaging apparatus, and focusing position detecting method
JP2012217168A (en) Imaging apparatus
JP2009175255A (en) Image pickup apparatus and control method therefor
JP5457924B2 (en) Digital camera
JP4941141B2 (en) Imaging device
JP2009081810A (en) Photographing device and photographing method
JP5629456B2 (en) Imaging apparatus and control method thereof
JP6140975B2 (en) Imaging device
JP2009086036A (en) Imaging device and control method for imaging device
JP5455485B2 (en) Imaging device
JP2009267893A (en) Imaging apparatus
JP2007049407A (en) Photographic device
JP2014085580A (en) Imaging device
JP2009088679A (en) Photography device and its control method
JP2015055775A (en) Imaging device and imaging device control method
JP2006203707A (en) Imaging apparatus and method for controlling imaging apparatus
JP2010190913A (en) Imaging device with automatic focus function
JP2012231362A (en) Digital camera
JP2019075653A (en) Imaging apparatus
WO2015182021A1 (en) Image pickup control apparatus, image pickup apparatus, and image pickup control method
JP5484958B2 (en) Digital camera and control method thereof

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20150423

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150827

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160609

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160802

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160930

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170207

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170317

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170404

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170502

R151 Written notification of patent or utility model registration

Ref document number: 6140975

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250