WO2015104969A1 - 映像信号処理装置、映像信号処理方法およびカメラ装置 - Google Patents

映像信号処理装置、映像信号処理方法およびカメラ装置 Download PDF

Info

Publication number
WO2015104969A1
WO2015104969A1 PCT/JP2014/083487 JP2014083487W WO2015104969A1 WO 2015104969 A1 WO2015104969 A1 WO 2015104969A1 JP 2014083487 W JP2014083487 W JP 2014083487W WO 2015104969 A1 WO2015104969 A1 WO 2015104969A1
Authority
WO
WIPO (PCT)
Prior art keywords
signal
edge
frame
frame rate
edge signal
Prior art date
Application number
PCT/JP2014/083487
Other languages
English (en)
French (fr)
Inventor
浩二 神谷
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to JP2015556756A priority Critical patent/JP6443346B2/ja
Priority to EP14877618.0A priority patent/EP3094079B1/en
Priority to US15/107,526 priority patent/US10469729B2/en
Publication of WO2015104969A1 publication Critical patent/WO2015104969A1/ja
Priority to US16/550,619 priority patent/US10778881B2/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95Computational photography systems, e.g. light-field imaging systems
    • H04N23/951Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/142Edging; Contouring
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0127Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level by changing the field or frame frequency of the incoming video signal, e.g. frame rate converter

Definitions

  • the present technology relates to a video signal processing device, a video signal processing method, and a camera device, and more particularly, to a video signal processing device that processes a high frame rate video signal.
  • a camera device capable of high frame rate imaging has been proposed (for example, see Patent Document 1).
  • a high frame rate video signal is converted into a standard frame rate video signal (standard speed video signal) to obtain a video signal for viewfinder display.
  • an edge signal high frequency component extracted from a video signal for viewfinder display is highlighted as an index (marker) for assisting the operation.
  • Functions PAKING function, VF-DETAIL function, etc.
  • the change (edge) of the signal level is steep in the focused portion, it is possible to confirm whether the focus is achieved by looking at the highlighted edge.
  • the purpose of this technology is to make it easy to check whether the moving part is in focus.
  • the concept of this technology is An edge signal for detecting an edge signal by subjecting a video signal having a second frame rate N times the first frame rate (N is an integer equal to or greater than 2) to high-pass filtering in the horizontal direction and the vertical direction for each frame.
  • the video signal processing procedure includes an edge signal generation unit that generates an edge signal corresponding to each frame of the first frame rate based on the edge signal of each frame detected by the edge signal detection unit.
  • the edge signal detection unit performs high-pass filter processing in a horizontal direction and a vertical direction for each frame on a video signal having a second frame rate that is N times the first frame rate (N is an integer of 2 or more). And an edge signal is detected. Then, the edge signal generation unit generates an edge signal corresponding to each frame of the first frame rate based on the edge signal of each frame detected by the edge signal detection unit.
  • the second frame rate may be 200 Hz or higher.
  • the edge signal generation unit performs an arithmetic process for obtaining the absolute value of the difference between the edge signals for each frame using the edge signal of each frame detected by the edge signal detection unit.
  • the edge signal for one frame may be generated for every N frames from the absolute value of the difference between the edge signals of some or all of the frames.
  • the edge signal generation unit generates an edge signal for one frame from the edge signal of a part or all of the frames for every N frames, using the edge signal of each frame detected by the edge signal detection unit. You may be like.
  • the edge corresponding to each frame of the first frame rate (normal frame rate) based on the edge signal detected in each frame of the video signal of the second frame rate (high frame rate).
  • a signal is generated. Therefore, for example, the influence of moving image blur can be suppressed, and an edge signal corresponding to the edge of the moving part can be favorably obtained as the edge signal corresponding to each frame of the first frame rate.
  • a color conversion unit that converts the edge signal of each frame generated by the edge signal generation unit into a color signal of a predetermined color and outputs the color signal may be further provided.
  • the edge emphasis display using the edge signal can be performed in a predetermined color.
  • a frame rate converter that obtains a video signal of the first frame rate from an imaged video signal of a second frame rate that is N times the first frame rate (N is an integer equal to or greater than 2);
  • An edge signal detection unit for detecting an edge signal by performing horizontal and vertical high-pass filtering on the captured video signal of the second frame rate for each frame;
  • An edge signal generation unit that generates an edge signal corresponding to each frame of the first frame rate based on an edge signal of each frame detected by the edge signal detection unit;
  • the video signal having the first frame rate obtained by the frame rate conversion unit is combined with the edge signal corresponding to each frame having the first frame rate generated by the edge signal generation unit, and the first signal is generated.
  • a camera apparatus includes a signal synthesis unit that obtains a video signal for frame rate viewfinder display.
  • the frame rate conversion unit obtains a video signal having the first frame rate from the captured video signal having the second frame rate that is N times the first frame rate (N is an integer of 2 or more).
  • N is an integer of 2 or more.
  • the second frame rate may be 200 Hz or higher.
  • the edge signal detection unit detects the edge signal by performing high-pass filter processing in the horizontal direction and the vertical direction for each frame on the imaged video signal of the second frame rate.
  • the edge signal generation unit generates an edge signal corresponding to each frame of the first frame rate based on the edge signal of each frame detected by the edge signal detection unit.
  • the edge signal generation unit performs an arithmetic process for obtaining an absolute difference value of the edge signal between adjacent frames for each frame using the edge signal of each frame detected by the edge signal detection unit, and N
  • an edge signal for one frame may be generated from an absolute difference value of edge signals of some or all of the frames.
  • the edge signal generation unit generates an edge signal for one frame from the edge signal of a part or all of the frames for every N frames, using the edge signal of each frame detected by the edge signal detection unit. You may be like.
  • An edge signal corresponding to each frame of the first frame rate generated by the edge signal generation unit is combined with the video signal of the first frame rate obtained by the frame rate conversion unit by the signal synthesis unit, A video signal for viewfinder display at a frame rate of 1 is obtained.
  • the edge corresponding to each frame of the first frame rate (normal frame rate) based on the edge signal detected in each frame of the video signal of the second frame rate (high frame rate).
  • a signal is generated, and this edge signal is combined with a video signal of a first frame rate to obtain a video signal for viewfinder display. Therefore, for example, the influence of moving image blur can be suppressed, the edge signal of the moving part can be obtained well as the edge signal corresponding to each frame of the first frame rate, and the edge emphasis display by the edge signal is also applied to the moving part. Can be performed satisfactorily.
  • the present technology further includes, for example, a color conversion unit that converts the edge signal of each frame generated by the edge signal generation unit into a color signal of a predetermined color and outputs the signal
  • the signal synthesis unit is a frame rate conversion unit.
  • the viewfinder display of the first frame rate by combining the obtained video signal of the first frame rate with a color signal of a predetermined color corresponding to each frame of the first frame rate output from the color converter.
  • the video signal may be obtained.
  • the color conversion unit may determine the predetermined color based on a selection signal from the user operation unit.
  • the edge information display by the edge signal can be performed with a predetermined color selected by the user, for example.
  • a frame rate converter that obtains a video signal of the first frame rate from an imaged video signal of a second frame rate that is N times the first frame rate (N is an integer equal to or greater than 2);
  • a first edge signal detection unit for detecting an edge signal by performing horizontal and vertical high-pass filtering on the captured video signal of the second frame rate for each frame;
  • An edge signal generation unit that generates a first edge signal corresponding to each frame of the first frame rate based on an edge signal of each frame detected by the first edge signal detection unit;
  • the video signal having the first frame rate obtained by the frame rate conversion unit is subjected to high-pass filter processing in the horizontal direction and the vertical direction for each frame, and the second corresponding to each frame having the first frame rate.
  • a second edge signal detector for detecting the edge signal of The video signal having the first frame rate obtained by the frame rate converter is added to the first edge signal generated by the edge signal generator and the second edge signal detected by the second edge signal detector.
  • Signal processing for outputting a video signal for viewfinder display at the first frame rate by combining two edge signals or a third edge signal obtained by combining the first edge signal and the second edge signal It is in a camera device comprising a unit.
  • the frame rate conversion unit obtains a video signal having the first frame rate from the captured video signal having the second frame rate that is N times the first frame rate (N is an integer of 2 or more).
  • N is an integer of 2 or more.
  • the second frame rate may be 200 Hz or higher.
  • the first edge signal detection unit detects the edge signal by performing high-pass filter processing in the horizontal direction and the vertical direction for each frame on the captured video signal at the second frame rate.
  • the edge signal generation unit generates a first edge signal corresponding to each frame of the first frame rate based on the edge signal of each frame detected by the first edge signal detection unit.
  • the second edge signal detection unit performs high-pass filter processing in the horizontal direction and the vertical direction for each frame on the video signal having the first frame rate obtained by the frame rate conversion unit. A second edge signal corresponding to each frame is detected.
  • the signal processing unit adds the first edge signal, the second edge signal, or the first edge signal and the second edge signal to the video signal of the first frame rate obtained by the frame rate conversion unit.
  • the signal processing unit may selectively output one of the first edge signal, the second edge signal, and the third edge signal based on the selection signal from the user operation unit. Good.
  • a video signal for viewfinder display at the first frame rate is output. Therefore, it is possible to display on the viewfinder an image in which edge enhancement display using an edge signal is performed only on the moving part, only the stationary part, or both the moving part and the stationary part.
  • FIG. 1 shows a configuration example of a camera device 100 as an embodiment.
  • the camera device 100 includes a control unit 101, a user operation unit 102, an imaging unit 103, a frame rate conversion unit 104, an edge signal detection unit 105, an edge signal detection unit 106, an edge signal generation unit 107, and a VF.
  • a signal processing unit 108 is included.
  • Control unit (camera CPU) 101 controls the operation of each unit of camera device 100.
  • the user operation unit 102 is connected to the control unit 101 and constitutes a user interface for the user to perform various operations.
  • the imaging unit 103 has an image sensor such as a CMOS (Complementary Metal-Oxide Semiconductor) or a CCD (Charge Coupled Devices), and outputs an HFR video signal (high frame rate video signal).
  • the HFR video signal is sent to the main line signal processing unit.
  • the frame rate of the HFR video signal is N times (N is an integer of 2 or more) the frame rate of the standard speed video signal (standard frame rate video signal). In this embodiment, it is assumed that the frame rate of the standard speed video signal is 60 Hz and the frame rate of the HFR video signal is 240 Hz, which is four times as high.
  • the frame rate conversion unit 104 is composed of, for example, a frame memory, and obtains a standard speed video signal with a frame rate of 60 Hz from an HFR video signal with a frame rate of 240 Hz. In this case, the frame rate conversion unit 104 adds 4 frames of video signals for every 4 frames of the HFR video signal to generate one frame of the standard speed video signal. It should be noted that every four frames of the HFR video signal do not use all the four frames of video signals to obtain one frame of standard speed video signals, but use three frames, two frames, or one frame of video signals. It is also conceivable to obtain one frame of a standard speed video signal.
  • FIG. 2 (a1) to (a4) show an example of an image for four frames by the HFR video signal output from the imaging unit 103.
  • FIG. In this figure, “person” constitutes a moving part, and “cylinder” constitutes a stationary part.
  • FIG. 2B shows an example of an image for one frame based on the standard speed video signal obtained by the frame rate conversion unit 104. In this example, four frames of video signals are added every four frames of the HFR video signal to generate one frame of a standard speed video signal.
  • the edge signal detection unit 105 performs a high-pass filter process in the horizontal direction and the vertical direction for each frame on the standard-speed video signal having a frame rate of 60 Hz obtained by the frame rate conversion unit 104 to obtain a frame rate of 60 Hz.
  • the edge signal corresponding to each frame is detected.
  • FIG. 3A shows an example of an edge signal for one frame detected by the edge signal detection unit 105.
  • This example shows a case where the focus point is in the vicinity of the stationary portion of the “cylinder” on the near side, and an edge signal corresponding to the edge of this “cylinder” is detected (see arrow P1). However, since “person” is a moving part, moving image blur occurs, and an edge signal corresponding to the edge of this “person” is not detected.
  • the edge signal detection unit 106 performs high-pass filter processing in the horizontal direction and the vertical direction for each frame on the HFR video signal output from the imaging unit 103 and having a frame rate of 240 Hz, so that each frame having a frame rate of 240 Hz is obtained.
  • the edge signal corresponding to is detected.
  • FIGS. 3B1 to 3B4 show an example of edge signals for four frames detected by the edge signal detector 106.
  • FIG. 4A shows a state in which edge signals for four frames detected by the edge signal detector 106 shown in FIGS. 3B1 to 3B4 are added. 3 (a), (b1) to (b4), and FIG. 4 (a), “cylinder” and “person” are represented for reference of the detection position of the edge signal (difference absolute value). Has been.
  • the edge signal generation unit 107 uses the edge signal of each frame detected by the edge signal detection unit 106 to perform calculation processing for obtaining an absolute difference value of the edge signal between adjacent frames for each frame. By taking the difference absolute value in this way, the edge signal corresponding to the edge of the stationary portion can be canceled and removed.
  • FIGS. 4 (b1) to 4 (b4) show an example of absolute difference values for four frames generated by the edge signal generation unit 107.
  • FIG. As shown in the figure, the edge signal corresponding to the edge of the “cylindrical” that is the stationary part is removed, and only the edge signal corresponding to the edge of the “person” that is the moving part remains (arrows Q1 ′, Q2 ′, Q3 ′). reference).
  • FIGS. 4B1 to 4B4 “cylinder” and “person” are shown for reference of the detection position of the edge signal (difference absolute value).
  • the edge signal generation unit 107 adds an absolute value of the difference of 4 frames every 4 frames, and generates an edge signal corresponding to each frame of a frame rate of 60 Hz. Instead of generating an edge signal for one frame by using all the absolute difference values of four frames every four frames, the absolute value of the difference of three frames, two frames, or one frame is used for one frame. It is also conceivable to generate an edge signal.
  • the VF signal processing unit 108 synthesizes an edge signal corresponding to each frame of the 60 Hz frame rate generated by the edge signal generation unit 107 with the standard speed video signal of the 60 Hz frame rate obtained by the frame rate conversion unit 104. Then, a first video signal for viewfinder display is generated. In this case, the VF signal processing unit 108 synthesizes the edge signal with the video signal so that the edge is highlighted (for example, high luminance display, predetermined color display including white).
  • the VF signal processing unit 108 converts the edge signal into a color signal of a predetermined color, and then synthesizes the image signal.
  • the VF signal processing unit 108 determines a predetermined color based on the selection signal from the user operation unit 102. In other words, the user can set the predetermined color to a desired color by operating the user operation unit 102.
  • the VF signal processing unit 108 adds the edge signal corresponding to each frame of the 60 Hz frame rate detected by the edge signal detection unit 105 to the standard speed video signal of the 60 Hz frame rate obtained by the frame rate conversion unit 104. Are combined to generate a second video signal for viewfinder display. In this case, the VF signal processing unit 108 synthesizes the edge signal with the video signal so that the edge is highlighted (for example, high luminance display, predetermined color display including white).
  • the VF signal processing unit 108 adds the edge signal corresponding to each frame of the 60 Hz frame rate generated by the edge signal generation unit 107 to the standard speed video signal of the 60 Hz frame rate obtained by the frame rate conversion unit 104.
  • the first edge signal and the edge signal (second edge signal) corresponding to each frame of the frame rate of 60 Hz detected by the edge signal detection unit 105 are combined to generate a viewfinder display first image. 3 video signals are generated.
  • the VF signal processing unit 108 synthesizes the edge signal with the video signal so that the edge is highlighted (for example, high luminance display, predetermined color display including white). For example, when displaying edges in a predetermined color, the VF signal processing unit 108 can distinguish between edge enhancement display using the first edge signal and edge enhancement display using the second edge signal by changing the hue. .
  • the VF signal processing unit 108 outputs any of the first video signal, the second video signal, and the third video signal described above, and sends them to the VF display unit (viewfinder).
  • the VF signal processing unit 108 determines a video signal for viewfinder display to be output based on the selection signal from the user operation unit 102. That is, the user can set a video signal for viewfinder display to be sent to the VF display unit (viewfinder) by operating the user operation unit 102.
  • An HFR video signal having a frame rate of 240 Hz is obtained from the imaging unit 103 (see FIGS. 2 (a1) to (a4)).
  • the HFR video signal is sent to the main line signal processing unit and is also supplied to the frame rate conversion unit 104 and the edge signal detection unit 106.
  • the frame rate conversion unit 104 performs a frame rate conversion process, and obtains a standard speed video signal with a frame rate of 60 Hz from an HFR video signal with a frame rate of 240 Hz (see FIG. 2B). This standard speed video signal is supplied to the edge signal detection unit 105 and the VF signal processing unit 108.
  • the edge signal detection unit 105 performs high-pass filter processing in the horizontal direction and the vertical direction for each frame on the standard-speed video signal with a frame rate of 60 Hz, and an edge signal corresponding to each frame with a frame rate of 60 Hz is generated. It is detected (see FIG. 3A). This edge signal is supplied to the VF signal processing unit 108.
  • the edge signal detection unit 106 performs high-pass filter processing in the horizontal direction and the vertical direction for each frame on the HFR video signal having a frame rate of 240 Hz, and detects an edge signal corresponding to each frame having a frame rate of 240 Hz. (See FIG. 3 (b1) to (b4)). This edge signal is supplied to the edge signal generation unit 107.
  • the edge signal generation unit 107 the edge signal of each frame is used, and the absolute value of the difference between the edge signals is calculated for each frame (see FIGS. 4 (b1) to (b4)). Then, the edge signal generation unit 107 adds the difference absolute value of 4 frames every 4 frames, and generates an edge signal corresponding to each frame at a frame rate of 60 Hz. This edge signal is supplied to the VF signal processing unit 108.
  • an edge signal corresponding to each frame having a frame rate of 60 Hz generated by the edge signal generation unit 107 is synthesized with the standard-speed video signal having a frame rate of 60 Hz obtained by the frame rate conversion unit 104.
  • a first video signal for viewfinder display is generated.
  • the edge signal is combined with the video signal so that the edge is highlighted (for example, high luminance display, predetermined color display including white, etc.).
  • an edge signal corresponding to each frame having a frame rate of 60 Hz detected by the edge signal detection unit 105 is added to the standard-speed video signal having a frame rate of 60 Hz obtained by the frame rate conversion unit 104.
  • the edge signal is combined with the video signal so that the edge is highlighted (for example, high luminance display, predetermined color display including white, etc.).
  • the edge signal corresponding to each frame of the 60 Hz frame rate generated by the edge signal generation unit 107 is added to the standard speed video signal of the 60 Hz frame rate obtained by the frame rate conversion unit 104.
  • Both the (first edge signal) and the edge signal (second edge signal) corresponding to each frame of the frame rate of 60 Hz detected by the edge signal detection unit 105 are combined to generate a viewfinder display first. 3 video signals are generated. In this case, the edge signal is combined with the video signal so that the edge is highlighted (for example, high luminance display, predetermined color display including white, etc.).
  • the VF signal processing unit 108 for example, one of the first video signal, the second video signal, and the third video signal is selectively output in accordance with a user's selection operation.
  • the video signal for viewfinder display output from the VF signal processing unit 108 is sent to the VF display unit (viewfinder).
  • FIG. 5A shows an example of an image for one frame displayed on the viewfinder by the first video signal for viewfinder display.
  • the focus point is in the vicinity of the stationary part of the “cylinder” on the near side.
  • the edge of the “person” that is the moving part is highlighted (see arrow R1).
  • FIG. 5B shows an example of an image for one frame displayed on the viewfinder by the second video signal for viewfinder display.
  • the focus point is in the vicinity of the stationary part of the “cylinder” on the near side.
  • the edge of the “cylinder” that is a stationary part is highlighted (see arrow R2).
  • FIG. 5C shows an example of an image for one frame displayed on the viewfinder by the third video signal for viewfinder display.
  • the focus point is in the vicinity of the stationary part of the “cylinder” on the near side.
  • both the edge of the “person” as the moving part and the edge of the “cylindrical” as the stationary part are highlighted (see arrows R1 and R2).
  • an edge signal corresponding to each frame having a frame rate of 60 Hz is generated based on the edge signal detected in each frame of the HFR video signal having a frame rate of 240 Hz.
  • a standard-speed video signal having a frame rate of 60 Hz to obtain a video signal (first video signal) for viewfinder display. Therefore, for example, the influence of moving image blur can be suppressed, the edge signal of the moving part can be obtained well as the edge signal corresponding to each frame of the frame rate of 60 Hz, and the edge emphasis display by the edge signal is also displayed on the moving part. Can be done.
  • the edge signal difference absolute value between adjacent frames for each frame using the edge signal detected in each frame of the HFR video signal having a frame rate of 240 Hz. Is obtained every 4 frames from the absolute value of the difference between the edge signals of some or all of the frames. Therefore, for example, it is possible to perform edge emphasis display corresponding to only the edge of the moving part.
  • the VF signal processing unit 108 generates first, second, and third video signals as viewfinder video signals and selectively outputs one of them. It is. For this reason, for example, it is possible to display an image in which edge emphasis display using an edge signal is performed only on a moving part, only a stationary part, or both a moving part and a stationary part on the viewfinder.
  • the edge signal generation unit 107 uses the edge signal detected in each frame of the HFR video signal having a frame rate of 240 Hz to generate an edge signal between adjacent frames for each frame. After obtaining the difference absolute value, an edge signal for one frame is generated from the difference absolute value of the edge signal of a part or all of the frames every four frames. However, the edge signal generation unit 107 uses the edge signal detected in each frame of the HFR video signal having a frame rate of 240 Hz to make one frame from the absolute value of the edge signal of some or all frames every four frames. It is also conceivable that the edge signal of the minute is generated.
  • the generated edge signal includes an edge signal corresponding to the edge of the stationary part in addition to the edge signal corresponding to the edge of the moving part (see FIG. 4A). Therefore, in this case, each of the frame rate of 60 Hz generated by the edge signal generation unit 107 is added to the standard speed video signal of the frame rate of 60 Hz obtained by the frame rate conversion unit 104 and generated by the VF signal processing unit 108.
  • the first video signal for viewfinder display obtained by combining the edge signals corresponding to the frames is the same as the third video signal described above.
  • the standard frame rate is 60 Hz
  • the standard frame rate to which the present technology is applied is not limited to 60 Hz, and may be 59.94 Hz, 50 Hz, or the like.
  • this technique can also take the following structures.
  • An edge signal is detected by performing high-pass filter processing in the horizontal and vertical directions for each frame on a video signal having a second frame rate that is N times the first frame rate (N is an integer equal to or greater than 2).
  • a video signal processing procedure comprising: an edge signal generation unit that generates an edge signal corresponding to each frame of the first frame rate based on an edge signal of each frame detected by the edge signal detection unit.
  • the edge signal generator is Using the edge signal of each frame detected by the edge signal detection unit, for each frame, performing an arithmetic process to obtain the absolute value of the difference between the edge signals between adjacent frames,
  • the video signal processing apparatus according to (1), wherein an edge signal for one frame is generated from an absolute difference value of the edge signals of a part or all of the frames every N frames.
  • the edge signal generator is The edge signal for each frame is generated from the edge signals of some or all of the frames for every N frames using the edge signals of each frame detected by the edge signal detection unit.
  • Video signal processing device is Using the edge signal of each frame detected by the edge signal detection unit, for each frame, performing an arithmetic process to obtain the absolute value of the difference between the edge signals between adjacent frames.
  • An edge signal detection step for detecting the edge signal A video signal processing method comprising: an edge signal generation step of generating an edge signal corresponding to each frame of the first frame rate based on the edge signal of each frame detected in the edge signal detection step. (7) a frame rate conversion unit that obtains the video signal of the first frame rate from the captured video signal of the second frame rate that is N times the first frame rate (N is an integer equal to or greater than 2); An edge signal detection unit for detecting an edge signal by performing horizontal and vertical high-pass filtering on the captured video signal of the second frame rate for each frame; An edge signal generation unit that generates an edge signal corresponding to each frame of the first frame rate based on an edge signal of each frame detected by the edge signal detection unit; The video signal having the first frame rate obtained by the frame rate conversion unit is combined with the edge signal corresponding to each frame having the first frame rate generated by the edge signal generation unit, and the first signal is generated.
  • a camera apparatus comprising a signal synthesis unit for obtaining a video signal for frame rate viewfinder display.
  • the edge signal generator is Using the edge signal of each frame detected by the edge signal detection unit, for each frame, performing an arithmetic process to obtain the absolute value of the difference between the edge signals between adjacent frames, The camera device according to (7), wherein an edge signal for one frame is generated from a difference absolute value of the edge signal of a part or all of the frames every N frames.
  • the edge signal generator is The edge signal of each frame generated by the edge signal detection unit is used to generate an edge signal for one frame from the edge signals of some or all of the frames every N frames. Camera device.
  • (10) a color conversion unit that converts the edge signal of each frame generated by the edge signal generation unit into a color signal of a predetermined color and outputs the color signal;
  • the signal synthesizer The video signal of the first frame rate obtained by the frame rate conversion unit is combined with the color signal of the predetermined color corresponding to each frame of the first frame rate output from the color conversion unit.
  • the camera device according to any one of (7) to (9), wherein a video signal for viewfinder display at the first frame rate is obtained.
  • the color conversion unit The camera device according to (10), wherein the predetermined color is determined based on a selection signal from a user operation unit.
  • (12) The camera device according to any one of (7) to (11), wherein the second frame rate is 200 Hz or more.
  • a frame rate conversion step of obtaining a video signal of the first frame rate from an imaged video signal of a second frame rate that is N times the first frame rate (N is an integer equal to or greater than 2);
  • An edge signal detection step of detecting an edge signal by performing a high-pass filter process in a horizontal direction and a vertical direction for each frame on the imaged video signal of the second frame rate using a high-pass filter;
  • An edge signal generation step for generating an edge signal corresponding to each frame of the first frame rate based on the edge signal of each frame detected in the edge signal detection step;
  • the video signal having the first frame rate obtained in the frame rate converting step is combined with the edge signal corresponding to each frame having the first frame rate generated in the edge signal generating step.
  • a video signal processing method comprising a signal synthesis step of obtaining a video signal for frame rate viewfinder display.
  • a frame rate conversion unit that obtains the video signal of the first frame rate from the captured video signal of the second frame rate that is N times the first frame rate (N is an integer equal to or greater than 2);
  • a first edge signal detection unit for detecting an edge signal by performing horizontal and vertical high-pass filtering on the captured video signal of the second frame rate for each frame;
  • An edge signal generation unit that generates a first edge signal corresponding to each frame of the first frame rate based on an edge signal of each frame detected by the first edge signal detection unit;
  • the video signal having the first frame rate obtained by the frame rate conversion unit is subjected to high-pass filter processing in the horizontal direction and the vertical direction for each frame, and the second corresponding to each frame having the first frame rate.
  • a second edge signal detector for detecting the edge signal of The video signal having the first frame rate obtained by the frame rate converter is added to the first edge signal generated by the edge signal generator and the second edge signal detected by the second edge signal detector.
  • Signal processing for outputting a video signal for viewfinder display at the first frame rate by combining two edge signals or a third edge signal obtained by combining the first edge signal and the second edge signal A camera device comprising a unit.
  • the signal processing unit The camera device according to (14), wherein one of the first edge signal, the second edge signal, and the third edge signal is selectively output based on a selection signal from a user operation unit.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Indication In Cameras, And Counting Of Exposures (AREA)
  • Color Television Image Signal Generators (AREA)

Abstract

 動き部分にピントが合っているかを容易に確認可能とする。 第1のフレームレートのN倍(Nは2以上の整数)の第2のフレームレートの撮像映像信号から第1のフレームレートの映像信号を得る。第2のフレームレートの撮像映像信号に対してフレーム毎に水平方向および垂直方向のハイパスフィルタ処理を行ってエッジ信号を検出する。そして、各フレームのエッジ信号に基づいて第1のフレームレートの各フレームに対応したエッジ信号を生成する。第1のフレームレートの映像信号に、生成されたエッジ信号を合成してビューファインダ表示用の映像信号を得る。

Description

映像信号処理装置、映像信号処理方法およびカメラ装置
 本技術は、映像信号処理装置、映像信号処理方法およびカメラ装置に関し、特に、ハイフレームレート映像信号を処理する映像信号処理装置に関する。
 従来、ハイフレームレート撮像を可能とするカメラ装置が提案されている(例えば、特許文献1参照)。このカメラ装置では、ハイフレームレート映像信号を標準フレームレート映像信号(標準速映像信号)に変換してビューファインダ表示用の映像信号を得ることが行われている。
 また、従来、ビューファインダを用いてフォーカスのマニュアル操作を行う際、操作を補助するための指標(マーカ)として、ビューファインダ表示用の映像信号から抽出されるエッジ信号(高周波成分)を強調表示する機能(PEAKING機能、VF-DETAIL機能など)が知られている(例えば、特許文献2参照)。この場合、ピントがあった部分は信号レベルの変化(エッジ)が急峻となることから、強調表示されたエッジを見ることでピントがあっているかを確認することが可能となる。
特開2010-268354号公報 特開2007-060328号公報
 画面上で早く動いている部分に関しては、動画像ボケが発生し、ビューファインダ表示用の映像信号においてエッジ信号(高周波成分)が失われることから、エッジ信号(高周波成分)を検出し、その強調表示によりピントがあっているかを確認することが困難であった。なお、ハイフレームレート撮像を可能とするカメラ装置では、速い動きの部分をスロー映像で見せるために使われるので、動いている箇所にこそ、ピントを合わせたいという要望がある。
 本技術の目的は、動き部分にピントが合っているかを容易に確認可能とすることにある。
 本技術の概念は、
 第1のフレームレートのN倍(Nは2以上の整数)の第2のフレームレートの映像信号に対してフレーム毎に水平方向および垂直方向のハイパスフィルタ処理を行ってエッジ信号を検出するエッジ信号検出部と、
 上記エッジ信号検出部で検出された各フレームのエッジ信号に基づいて上記第1のフレームレートの各フレームに対応したエッジ信号を生成するエッジ信号生成部を備える
 映像信号処理処置にある。
 本技術において、エッジ信号検出部により、第1のフレームレートのN倍(Nは2以上の整数)の第2のフレームレートの映像信号に対してフレーム毎に水平方向および垂直方向のハイパスフィルタ処理が行われてエッジ信号が検出される。そして、エッジ信号生成部により、エッジ信号検出部で検出された各フレームのエッジ信号に基づいて第1のフレームレートの各フレームに対応したエッジ信号が生成される。例えば、第2のフレームレートは、200Hz以上である、ようにされてもよい。
 また、例えば、エッジ信号生成部は、エッジ信号検出部で検出された各フレームのエッジ信号を用いて、フレーム毎に、隣接するフレームとの間でエッジ信号の差分絶対値を求める演算処理を行い、Nフレーム毎に、一部または全部のフレームのエッジ信号の差分絶対値から1フレーム分のエッジ信号を生成する、ようにされてもよい。また、例えば、エッジ信号生成部は、エッジ信号検出部で検出された各フレームのエッジ信号を用いて、Nフレーム毎に、一部または全部のフレームのエッジ信号から1フレーム分のエッジ信号を生成する、ようにされてもよい。
 このように本技術においては、第2のフレームレート(ハイフレームレート)の映像信号の各フレームで検出されたエッジ信号に基づいて第1のフレームレート(通常フレームレート)の各フレームに対応したエッジ信号を生成するものである。そのため、例えば、動画像ボケの影響を抑制でき、第1のフレームレートの各フレームに対応したエッジ信号として動き部分のエッジに対応したエッジ信号を良好に得ることが可能となる。
 なお、本技術において、エッジ信号生成部で生成された各フレームのエッジ信号を所定色の色信号に変換して出力する色変換部をさらに備える、ようにされてもよい。この場合、エッジ信号によるエッジ強調表示を所定色で行うことが可能となる。
 また、本技術の他の概念は、
 第1のフレームレートのN倍(Nは2以上の整数)の第2のフレームレートの撮像映像信号から上記第1のフレームレートの映像信号を得るフレームレート変換部と、
 上記第2のフレームレートの撮像映像信号に対してフレーム毎に水平方向および垂直方向のハイパスフィルタ処理を行ってエッジ信号を検出するエッジ信号検出部と、
 上記エッジ信号検出部で検出された各フレームのエッジ信号に基づいて上記第1のフレームレートの各フレームに対応したエッジ信号を生成するエッジ信号生成部と、
 上記フレームレート変換部で得られた上記第1のフレームレートの映像信号に上記エッジ信号生成部で生成された上記第1のフレームレートの各フレームに対応したエッジ信号を合成して上記第1のフレームレートのビューファインダ表示用の映像信号を得る信号合成部を備える
 カメラ装置にある。
 本技術において、フレームレート変換部により、第1のフレームレートのN倍(Nは2以上の整数)の第2のフレームレートの撮像映像信号から第1のフレームレートの映像信号が得られる。例えば、第2のフレームレートは、200Hz以上である、ようにされてもよい。
 エッジ信号検出部により、第2のフレームレートの撮像映像信号に対してフレーム毎に水平方向および垂直方向のハイパスフィルタ処理が行われてエッジ信号が検出される。エッジ信号生成部により、エッジ信号検出部で検出された各フレームのエッジ信号に基づいて第1のフレームレートの各フレームに対応したエッジ信号が生成される。
 例えば、エッジ信号生成部は、エッジ信号検出部で検出された各フレームのエッジ信号を用いて、フレーム毎に、隣接するフレームとの間でエッジ信号の差分絶対値を求める演算処理を行い、Nフレーム毎に、一部または全部のフレームのエッジ信号の差分絶対値から1フレーム分のエッジ信号を生成する、ようにされてもよい。また、例えば、エッジ信号生成部は、エッジ信号検出部で検出された各フレームのエッジ信号を用いて、Nフレーム毎に、一部または全部のフレームのエッジ信号から1フレーム分のエッジ信号を生成する、ようにされてもよい。
 信号合成部により、フレームレート変換部で得られた第1のフレームレートの映像信号に、エッジ信号生成部で生成された第1のフレームレートの各フレームに対応したエッジ信号が合成されて、第1のフレームレートのビューファインダ表示用の映像信号が得られる。
 このように本技術においては、第2のフレームレート(ハイフレームレート)の映像信号の各フレームで検出されたエッジ信号に基づいて第1のフレームレート(通常フレームレート)の各フレームに対応したエッジ信号を生成し、このエッジ信号を第1のフレームレートの映像信号に合成してビューファインダ表示用の映像信号を得るものである。そのため、例えば、動画像ボケの影響を抑制でき、第1のフレームレートの各フレームに対応したエッジ信号として動き部分のエッジ信号を良好に得ることができ、動き部分にもエッジ信号によるエッジ強調表示を良好に行うことが可能となる。
 なお、本技術において、例えば、エッジ信号生成部で生成された各フレームのエッジ信号を所定色の色信号に変換して出力する色変換部をさらに備え、信号合成部は、フレームレート変換部で得られた第1のフレームレートの映像信号に、色変換部から出力される第1のフレームレートの各フレームに対応した所定色の色信号を合成して第1のフレームレートのビューファインダ表示用の映像信号を得る、ようにされてもよい。この場合、例えば、色変換部は、所定色をユーザ操作部からの選択信号に基づいて決定する、ようにされてもよい。エッジ信号によるエッジ情報表示を、例えばユーザにより選択された所定色で行うことが可能となる。
 また、本技術の他の概念は、
 第1のフレームレートのN倍(Nは2以上の整数)の第2のフレームレートの撮像映像信号から上記第1のフレームレートの映像信号を得るフレームレート変換部と、
 上記第2のフレームレートの撮像映像信号に対してフレーム毎に水平方向および垂直方向のハイパスフィルタ処理を行ってエッジ信号を検出する第1のエッジ信号検出部と、
 上記第1のエッジ信号検出部で検出された各フレームのエッジ信号に基づいて上記第1のフレームレートの各フレームに対応した第1のエッジ信号を生成するエッジ信号生成部と、
 上記フレームレート変換部で得られた上記第1のフレームレートの映像信号に対してフレーム毎に水平方向および垂直方向のハイパスフィルタ処理を行って上記第1のフレームレートの各フレームに対応した第2のエッジ信号を検出する第2のエッジ信号検出部と、
 上記フレームレート変換部で得られた上記第1のフレームレートの映像信号に、上記エッジ信号生成部で生成された上記第1のエッジ信号、上記第2のエッジ信号検出部で検出された上記第2のエッジ信号、あるいは該第1のエッジ信号および該第2のエッジ信号を合わせた第3のエッジ信号を合成した、上記第1のフレームレートのビューファインダ表示用の映像信号を出力する信号処理部を備える
 カメラ装置にある。
 本技術において、フレームレート変換部により、第1のフレームレートのN倍(Nは2以上の整数)の第2のフレームレートの撮像映像信号から第1のフレームレートの映像信号が得られる。例えば、第2のフレームレートは、200Hz以上である、ようにされてもよい。第1のエッジ信号検出部により、第2のフレームレートの撮像映像信号に対してフレーム毎に水平方向および垂直方向のハイパスフィルタ処理が行われてエッジ信号が検出される。
 エッジ信号生成部により、第1のエッジ信号検出部で検出された各フレームのエッジ信号に基づいて第1のフレームレートの各フレームに対応した第1のエッジ信号が生成される。第2のエッジ信号検出部により、フレームレート変換部で得られた第1のフレームレートの映像信号に対してフレーム毎に水平方向および垂直方向のハイパスフィルタ処理が行われて第1のフレームレートの各フレームに対応した第2のエッジ信号が検出される。
 そして、信号処理部により、フレームレート変換部で得られた第1のフレームレートの映像信号に、第1のエッジ信号、第2のエッジ信号、あるいは第1のエッジ信号および第2のエッジ信号を合わせた第3のエッジ信号が合成された、第1のフレームレートのビューファインダ表示用の映像信号が出力される。例えば、信号処理部は、ユーザ操作部からの選択信号に基づいて、第1のエッジ信号、第2のエッジ信号、第3のエッジ信号のいずれかを選択的に出力する、ようにされてもよい。
 このように本技術においては、第1のフレームレートの映像信号に、第1のエッジ信号、第2のエッジ信号、あるいは第1のエッジ信号および第2のエッジ信号を合わせた第3のエッジ信号を合成した、第1のフレームレートのビューファインダ表示用の映像信号を出力するものである。そのため、ビューファインダに、エッジ信号によるエッジ強調表示を、動き部分のみ、静止部分のみ、あるいは動き部分よび静止部分の双方に行った画像を表示することが可能となる。
 本技術によれば、動き部分にピントが合っているかを容易に確認可能となる。なお、本明細書に記載された効果はあくまで例示であって限定されるものではなく、また付加的な効果があってもよい。
実施の形態としてのカメラ装置の構成例を示すブロック図である。 HFR映像信号および標準速映像信号を説明するための図である。 エッジ信号の検出、生成の処理を説明するための図である。 エッジ信号の検出、生成の処理を説明するための図である。 ビューファインダの画像の一例を示す図である。
 以下、発明を実施するための形態(以下、「実施の形態」とする)について説明する。なお、説明を以下の順序で行う。
 1.実施の形態
 2.変形例
 <1.実施の形態>
 [カメラ装置の構成例]
 図1は、実施の形態としてのカメラ装置100の構成例を示している。このカメラ装置100は、制御部101と、ユーザ操作部102と、撮像部103と、フレームレート変換部104と、エッジ信号検出部105と、エッジ信号検出部106と、エッジ信号生成部107とVF信号処理部108を有している。
 制御部(カメラCPU)101は、カメラ装置100の各部の動作を制御する。ユーザ操作部102は、制御部101に接続されており、ユーザが種々の操作を行うためのユーザインタフェースを構成する。
 撮像部103は、CMOS(Complementary Metal-Oxide Semiconductor)、CCD(Charge Coupled Devices)などのイメージセンサを持ち、HFR映像信号(ハイフレームレート映像信号)を出力する。このHFR映像信号は、本線信号処理部に送られる。このHFR映像信号のフレームレートは、標準速映像信号(標準フレームレート映像信号)のフレームレートのN倍(Nは2以上の整数)である。この実施の形態では、標準速映像信号のフレームレートが60Hzであり、HFR映像信号のフレームレートがその4倍の240Hzであるとする。
 フレームレート変換部104は、例えば、フレームメモリにより構成され、240HzのフレームレートのHFR映像信号から60Hzのフレームレートの標準速映像信号を得る。この場合、フレームレート変換部104は、HFR映像信号の4フレーム毎に、4フレームの映像信号を加算して、標準速映像信号の1フレームの映像信号を生成する。なお、HFR映像信号の4フレーム毎に、4フレームの映像信号の全てを用いて標準速映像信号の1フレームの映像信号を得るのではなく、3フレーム、2フレームあるいは1フレームの映像信号を用いて標準速映像信号の1フレームの映像信号を得ることも考えられる。
 図2(a1)~(a4)は、撮像部103から出力されるHFR映像信号による4フレーム分の画像の一例を示している。この図において、「人物」は動き部分を構成しており、「円柱」は静止部分を構成している。図2(b)は、フレームレート変換部104で得られる標準速映像信号による1フレーム分の画像の一例を示している。この例は、HFR映像信号の4フレーム毎に、4フレームの映像信号を加算して、標準速映像信号の1フレームの映像信号を生成する場合を示している。
 エッジ信号検出部105は、フレームレート変換部104で得られた60Hzのフレームレートの標準速映像信号に対して、フレーム毎に、水平方向および垂直方向のハイパスフィルタ処理を行って、60Hzのフレームレートの各フレームに対応したエッジ信号を検出する。図3(a)は、エッジ信号検出部105で検出される1フレーム分のエッジ信号の一例を示している。
 この例は、フォーカスポイントが手前側の「円柱」の静止部分の近辺にある場合を示しており、この「円柱」のエッジに対応したエッジ信号が検出される(矢印P1参照)。しかし、「人物」は動き部分であるので、動画像ボケが発生しており、この「人物」のエッジに対応したエッジ信号は検出されない。
 エッジ信号検出部106は、撮像部103から出力された240HzのフレームレートのHFR映像信号に対して、フレーム毎に、水平方向および垂直方向のハイパスフィルタ処理を行って、240Hzのフレームレートの各フレームに対応したエッジ信号を検出する。図3(b1)~(b4)は、エッジ信号検出部106で検出される4フレーム分のエッジ信号の一例を示している。
 この例は、フォーカスポイントが手前側の「円柱」の静止部分の近辺にある場合を示しており、この「円柱」のエッジに対応したエッジ信号が検出される(矢印P1参照)と共に、フレームレートが高いので動画像ボケが少なく、「人物」のエッジに対応したエッジ信号も検出される(矢印Q1,Q2,Q3参照)。図4(a)は、図3(b1)~(b4)に示すエッジ信号検出部106で検出される4フレーム分のエッジ信号を加算した状態を示している。なお、図3(a),(b1)~(b4)、図4(a)において、「円柱」や「人物」は、エッジ信号(差分絶対値)の検出位置の参考とするために表わされている。
 エッジ信号生成部107は、エッジ信号検出部106で検出された各フレームのエッジ信号を用いて、フレーム毎に隣接するフレームとの間でエッジ信号の差分絶対値を求める演算処理を行う。このように差分絶対値を取ることで、静止部分のエッジに対応したエッジ信号を相殺して除去することができる。
 図4(b1)~(b4)は、エッジ信号生成部107で生成される4フレーム分の差分絶対値の一例を示している。図示のように、静止部分である「円柱」のエッジに対応したエッジ信号は除去され、動き部分である「人物」のエッジに対応したエッジ信号のみが残る(矢印Q1´,Q2´,Q3´参照)。なお、図4(b1)~(b4)において、「円柱」や「人物」は、エッジ信号(差分絶対値)の検出位置の参考とするために表わされている。
 また、エッジ信号生成部107は、4フレーム毎に、4フレームの差分絶対値を加算して、60Hzのフレームレートの各フレームに対応したエッジ信号を生成する。なお、4フレーム毎に、4フレームの差分絶対値の全てを用いて1フレーム分のエッジ信号を生成するのではなく、3フレーム、2フレームあるいは1フレームの差分絶対値を用いて1フレーム分のエッジ信号を生成することも考えられる。
 VF信号処理部108は、フレームレート変換部104で得られた60Hzのフレームレートの標準速映像信号に、エッジ信号生成部107で生成された60Hzのフレームレートの各フレームに対応したエッジ信号を合成して、ビューファインダ表示用の第1の映像信号を生成する。この場合、VF信号処理部108は、エッジが強調表示(例えば、高輝度表示、白色を含む所定色表示など)されるように、エッジ信号を映像信号に合成する。
 例えば、エッジを所定色で表示する場合、VF信号処理部108は、エッジ信号を所定色の色信号に変換した後に、映像信号に合成する。この場合、VF信号処理部108は、ユーザ操作部102からの選択信号に基づいて、所定色を決定する。つまり、ユーザは、ユーザ操作部102を操作することで、所定色を自身が望む色に設定することが可能とされている。
 また、VF信号処理部108は、フレームレート変換部104で得られた60Hzのフレームレートの標準速映像信号に、エッジ信号検出部105で検出された60Hzのフレームレートの各フレームに対応したエッジ信号を合成して、ビューファインダ表示用の第2の映像信号を生成する。この場合、VF信号処理部108は、エッジが強調表示(例えば、高輝度表示、白色を含む所定色表示など)されるように、エッジ信号を映像信号に合成する。
 また、VF信号処理部108は、フレームレート変換部104で得られた60Hzのフレームレートの標準速映像信号に、エッジ信号生成部107で生成された60Hzのフレームレートの各フレームに対応したエッジ信号(第1のエッジ信号)と、エッジ信号検出部105で検出された60Hzのフレームレートの各フレームに対応したエッジ信号(第2のエッジ信号)の双方を合成して、ビューファインダ表示用の第3の映像信号を生成する。
 この場合、VF信号処理部108は、エッジが強調表示(例えば、高輝度表示、白色を含む所定色表示など)されるように、エッジ信号を映像信号に合成する。例えば、エッジを所定色で表示する場合、VF信号処理部108は、色相を違えることで、第1のエッジ信号によるエッジ強調表示と第2のエッジ信号によるエッジ強調表示との区別が可能となる。
 そして、VF信号処理部108は、上述の第1映像信号、第2の映像信号、第3の映像信号のいずれかを出力し、VF表示部(ビューファインダ)に送る。この場合、VF信号処理部108は、ユーザ操作部102からの選択信号に基づいて、出力すべきビューファインダ表示用の映像信号を決定する。つまり、ユーザは、ユーザ操作部102を操作することで、VF表示部(ビューファインダ)に送るビューファインダ表示用の映像信号を設定することが可能とされている。
 図1に示すカメラ装置100の動作を簡単に説明する。撮像部103からは、240HzのフレームレートのHFR映像信号が得られる(図2(a1)~(a4)参照)。このHFR映像信号は、本線信号処理部に送られると共に、フレームレート変換部104およびエッジ信号検出部106に供給される。
 フレームレート変換部104では、フレームレートの変換処理が行われ、240HzのフレームレートのHFR映像信号から60Hzのフレームレートの標準速映像信号が得られる(図2(b)参照)。この標準速映像信号は、エッジ信号検出部105およびVF信号処理部108に供給される。
 エッジ信号検出部105では、60Hzのフレームレートの標準速映像信号に対して、フレーム毎に、水平方向および垂直方向のハイパスフィルタ処理が行われ、60Hzのフレームレートの各フレームに対応したエッジ信号が検出される(図3(a)参照)。このエッジ信号は、VF信号処理部108に供給される。
 エッジ信号検出部106では、240HzのフレームレートのHFR映像信号に対して、フレーム毎に、水平方向および垂直方向のハイパスフィルタ処理が行われ、240Hzのフレームレートの各フレームに対応したエッジ信号が検出される(図3(b1)~(b4)参照)。このエッジ信号は、エッジ信号生成部107に供給される。
 エッジ信号生成部107では、各フレームのエッジ信号が用いられて、フレーム毎に、隣接するフレームとの間でエッジ信号の差分絶対値が求められる(図4(b1)~(b4)参照)。そして、このエッジ信号生成部107では、4フレーム毎に、4フレームの差分絶対値が加算されて、60Hzのフレームレートの各フレームに対応したエッジ信号が生成される。このエッジ信号は、VF信号処理部108に供給される。
 VF信号処理部108では、フレームレート変換部104で得られた60Hzのフレームレートの標準速映像信号に、エッジ信号生成部107で生成された60Hzのフレームレートの各フレームに対応したエッジ信号が合成されて、ビューファインダ表示用の第1の映像信号が生成される。この場合、エッジが強調表示(例えば、高輝度表示、白色を含む所定色表示など)されるように、エッジ信号が映像信号に合成される。
 また、VF信号処理部108では、フレームレート変換部104で得られた60Hzのフレームレートの標準速映像信号に、エッジ信号検出部105で検出された60Hzのフレームレートの各フレームに対応したエッジ信号が合成されて、ビューファインダ表示用の第2の映像信号が生成される。この場合、エッジが強調表示(例えば、高輝度表示、白色を含む所定色表示など)されるように、エッジ信号が映像信号に合成される。
 また、VF信号処理部108では、フレームレート変換部104で得られた60Hzのフレームレートの標準速映像信号に、エッジ信号生成部107で生成された60Hzのフレームレートの各フレームに対応したエッジ信号(第1のエッジ信号)と、エッジ信号検出部105で検出された60Hzのフレームレートの各フレームに対応したエッジ信号(第2のエッジ信号)の双方が合成されて、ビューファインダ表示用の第3の映像信号が生成される。この場合、エッジが強調表示(例えば、高輝度表示、白色を含む所定色表示など)されるように、エッジ信号が映像信号に合成される。
 そして、VF信号処理部108からは、例えば、ユーザの選択操作に応じて、第1の映像信号、第2の映像信号、第3の映像信号のいずれかが選択的に出力される。このようにVF信号処理部108から出力されるビューファインダ表示用の映像信号は、VF表示部(ビューファインダ)に送られる。
 図5(a)は、ビューファインダ表示用の第1の映像信号によりビューファインダに表示される1フレーム分の画像の一例を示している。この例は、フォーカスポイントが手前側の「円柱」の静止部分の近辺にある場合を示している。図示のように、動き部分である「人物」のエッジのみが強調表示されたものとなる(矢印R1参照)。
 また、図5(b)は、ビューファインダ表示用の第2の映像信号によりビューファインダに表示される1フレーム分の画像の一例を示している。この例は、フォーカスポイントが手前側の「円柱」の静止部分の近辺にある場合を示している。図示のように、静止部分である「円柱」のエッジのみが強調表示されたものとなる(矢印R2参照)。
 また、図5(c)は、ビューファインダ表示用の第3の映像信号によりビューファインダに表示される1フレーム分の画像の一例を示している。この例は、フォーカスポイントが手前側の「円柱」の静止部分の近辺にある場合を示している。図示のように、動き部分である「人物」のエッジと、静止部分である「円柱」のエッジの双方が強調表示されたものとなる(矢印R1,R2参照)。
 図1に示すカメラ装置100においては、240HzのフレームレートのHFR映像信号の各フレームで検出されたエッジ信号に基づいて、60Hzのフレームレートの各フレームに対応したエッジ信号を生成し、このエッジ信号を、60Hzのフレームレートの標準速映像信号に合成してビューファインダ表示用の映像信号(第1の映像信号)を得るものである。そのため、例えば、動画像ボケの影響を抑制でき、60Hzのフレームレートの各フレームに対応したエッジ信号として動き部分のエッジ信号を良好に得ることができ、動き部分にもエッジ信号によるエッジ強調表示を行うことが可能となる。
 また、図1に示すカメラ装置100においては、240HzのフレームレートのHFR映像信号の各フレームで検出されたエッジ信号を用いて、フレーム毎に、隣接するフレームとの間でエッジ信号の差分絶対値を求めた後、4フレーム毎に、一部または全部のフレームのエッジ信号の差分絶対値から1フレーム分のエッジ信号を生成するものである。そのため、例えば、動き部分のエッジにのみ対応したエッジ強調表示を行うことが可能となる。
 また、図1に示すカメラ装置100においては、VF信号処理部108は、ビューファインダ用の映像信号として第1、第2、第3の映像信号を生成し、いずれかを選択的に出力するものである。そのため、例えば、ビューファインダに、エッジ信号によるエッジ強調表示を、動き部分のみ、静止部分のみ、あるいは動き部分および静止部分の双方に行った画像を表示することが可能となる。
 <2.変形例>
 なお、上述実施の形態において、エッジ信号生成部107は、240HzのフレームレートのHFR映像信号の各フレームで検出されたエッジ信号を用いて、フレーム毎に、隣接するフレームとの間でエッジ信号の差分絶対値を求めた後、4フレーム毎に、一部または全部のフレームのエッジ信号の差分絶対値から1フレーム分のエッジ信号を生成するものであった。しかし、エッジ信号生成部107は、240HzのフレームレートのHFR映像信号の各フレームで検出されたエッジ信号を用いて、4フレーム毎に、一部または全部のフレームのエッジ信号の絶対値から1フレーム分のエッジ信号を生成する構成とすることも考えられる。
 この場合、生成されるエッジ信号には、動き部分のエッジに対応したエッジ信号の他に、静止部分のエッジに対応したエッジ信号も含まれる(図4(a)参照)。そのため、この場合、VF信号処理部108で生成される、フレームレート変換部104で得られた60Hzのフレームレートの標準速映像信号に、エッジ信号生成部107で生成された60Hzのフレームレートの各フレームに対応したエッジ信号を合成して得られるビューファインダ表示用の第1の映像信号は、上述の第3の映像信号と同様のものとなる。
 また、上述実施の形態においては、説明を簡単にするため、標準フレームレートが60Hzである例を示した。しかし、本技術が適用される標準フレームレートは、60Hzに限定されるものではなく、59.94Hz、50Hzなどであってもよい。
 また、本技術は、以下のような構成を取ることもできる。
 (1)第1のフレームレートのN倍(Nは2以上の整数)の第2のフレームレートの映像信号対してフレーム毎に水平方向および垂直方向のハイパスフィルタ処理を行ってエッジ信号を検出するエッジ信号検出部と、
 上記エッジ信号検出部で検出された各フレームのエッジ信号に基づいて上記第1のフレームレートの各フレームに対応したエッジ信号を生成するエッジ信号生成部を備える
 映像信号処理処置。
 (2)上記エッジ信号生成部は、
 上記エッジ信号検出部で検出された各フレームのエッジ信号を用いて、フレーム毎に、隣接するフレームとの間で上記エッジ信号の差分絶対値を求める演算処理を行い、
 Nフレーム毎に、一部または全部のフレームの上記エッジ信号の差分絶対値から1フレーム分のエッジ信号を生成する
 前記(1)に記載の映像信号処理装置。
 (3)上記エッジ信号生成部は、
 上記エッジ信号検出部で検出された各フレームのエッジ信号を用いて、Nフレーム毎に、一部または全部のフレームの上記エッジ信号から1フレーム分のエッジ信号を生成する
 前記(1)に記載の映像信号処理装置。
 (4)上記エッジ信号生成部で生成された各フレームのエッジ信号を所定色の色信号に変換して出力する色変換部をさらに備える
 前記(1)から(3)のいずれかに記載の映像信号処理装置。
 (5)上記第2のフレームレートは、200Hz以上である
 前記(1)から(4)のいずれかに記載の映像信号処理装置。
 (6)ハイパスフィルタを用いて第1のフレームレートのN倍(Nは2以上の整数)の第2のフレームレートの映像信号に対してフレーム毎に水平方向および垂直方向のハイパスフィルタ処理を行ってエッジ信号を検出するエッジ信号検出ステップと、
 上記エッジ信号検出ステップで検出された各フレームのエッジ信号に基づいて上記第1のフレームレートの各フレームに対応したエッジ信号を生成するエッジ信号生成ステップを有する
 映像信号処理方法。
 (7)第1のフレームレートのN倍(Nは2以上の整数)の第2のフレームレートの撮像映像信号から上記第1のフレームレートの映像信号を得るフレームレート変換部と、
 上記第2のフレームレートの撮像映像信号に対してフレーム毎に水平方向および垂直方向のハイパスフィルタ処理を行ってエッジ信号を検出するエッジ信号検出部と、
 上記エッジ信号検出部で検出された各フレームのエッジ信号に基づいて上記第1のフレームレートの各フレームに対応したエッジ信号を生成するエッジ信号生成部と、
 上記フレームレート変換部で得られた上記第1のフレームレートの映像信号に上記エッジ信号生成部で生成された上記第1のフレームレートの各フレームに対応したエッジ信号を合成して上記第1のフレームレートのビューファインダ表示用の映像信号を得る信号合成部を備える
 カメラ装置。
 (8)上記エッジ信号生成部は、
 上記エッジ信号検出部で検出された各フレームのエッジ信号を用いて、フレーム毎に、隣接するフレームとの間で上記エッジ信号の差分絶対値を求める演算処理を行い、
 Nフレーム毎に、一部または全部のフレームの上記エッジ信号の差分絶対値から1フレーム分のエッジ信号を生成する
 前記(7)に記載のカメラ装置。
 (9)上記エッジ信号生成部は、
 上記エッジ信号検出部で検出された各フレームのエッジ信号を用いて、Nフレーム毎に、一部または全部のフレームの上記エッジ信号から1フレーム分のエッジ信号を生成する
 前記(7)に記載のカメラ装置。
 (10)上記エッジ信号生成部で生成された各フレームのエッジ信号を所定色の色信号に変換して出力する色変換部をさらに備え、
 上記信号合成部は、
 上記フレームレート変換部で得られた上記第1のフレームレートの映像信号に、上記色変換部から出力される上記第1のフレームレートの各フレームに対応した上記所定色の色信号を合成して上記第1のフレームレートのビューファインダ表示用の映像信号を得る
 前記(7)から(9)のいずれかに記載のカメラ装置。
 (11)上記色変換部は、
 上記所定色をユーザ操作部からの選択信号に基づいて決定する
 前記(10)に記載のカメラ装置。
 (12)上記第2のフレームレートは、200Hz以上である
 前記(7)から(11)のいずれかに記載のカメラ装置。
 (13)第1のフレームレートのN倍(Nは2以上の整数)の第2のフレームレートの撮像映像信号から上記第1のフレームレートの映像信号を得るフレームレート変換ステップと、
 ハイパスフィルタを用いて上記第2のフレームレートの撮像映像信号に対してフレーム毎に水平方向および垂直方向のハイパスフィルタ処理を行ってエッジ信号を検出するエッジ信号検出ステップと、
 上記エッジ信号検出ステップで検出された各フレームのエッジ信号に基づいて上記第1のフレームレートの各フレームに対応したエッジ信号を生成するエッジ信号生成ステップと、
 上記フレームレート変換ステップで得られた上記第1のフレームレートの映像信号に上記エッジ信号生成ステップで生成された上記第1のフレームレートの各フレームに対応したエッジ信号を合成して上記第1のフレームレートのビューファインダ表示用の映像信号を得る信号合成ステップを備える
 映像信号処理方法。
 (14)第1のフレームレートのN倍(Nは2以上の整数)の第2のフレームレートの撮像映像信号から上記第1のフレームレートの映像信号を得るフレームレート変換部と、
 上記第2のフレームレートの撮像映像信号に対してフレーム毎に水平方向および垂直方向のハイパスフィルタ処理を行ってエッジ信号を検出する第1のエッジ信号検出部と、
 上記第1のエッジ信号検出部で検出された各フレームのエッジ信号に基づいて上記第1のフレームレートの各フレームに対応した第1のエッジ信号を生成するエッジ信号生成部と、
 上記フレームレート変換部で得られた上記第1のフレームレートの映像信号に対してフレーム毎に水平方向および垂直方向のハイパスフィルタ処理を行って上記第1のフレームレートの各フレームに対応した第2のエッジ信号を検出する第2のエッジ信号検出部と、
 上記フレームレート変換部で得られた上記第1のフレームレートの映像信号に、上記エッジ信号生成部で生成された上記第1のエッジ信号、上記第2のエッジ信号検出部で検出された上記第2のエッジ信号、あるいは該第1のエッジ信号および該第2のエッジ信号を合わせた第3のエッジ信号を合成した、上記第1のフレームレートのビューファインダ表示用の映像信号を出力する信号処理部を備える
 カメラ装置。
 (15)上記信号処理部は、
 ユーザ操作部からの選択信号に基づいて、上記第1のエッジ信号、上記第2のエッジ信号、上記第3のエッジ信号のいずれかを選択的に出力する
 前記(14)に記載のカメラ装置。
 100・・・カメラ装置
 101・・・制御部
 102・・・ユーザ操作部
 103・・・撮像部
 104・・・フレームレート変換部
 105,106・・・エッジ信号検出部
 107・・・エッジ信号生成部
 108・・・VF信号処理部

Claims (15)

  1.  第1のフレームレートのN倍(Nは2以上の整数)の第2のフレームレートの映像信号対してフレーム毎に水平方向および垂直方向のハイパスフィルタ処理を行ってエッジ信号を検出するエッジ信号検出部と、
     上記エッジ信号検出部で検出された各フレームのエッジ信号に基づいて上記第1のフレームレートの各フレームに対応したエッジ信号を生成するエッジ信号生成部を備える
     映像信号処理処置。
  2.  上記エッジ信号生成部は、
     上記エッジ信号検出部で検出された各フレームのエッジ信号を用いて、フレーム毎に、隣接するフレームとの間で上記エッジ信号の差分絶対値を求める演算処理を行い、
     Nフレーム毎に、一部または全部のフレームの上記エッジ信号の差分絶対値から1フレーム分のエッジ信号を生成する
     請求項1に記載の映像信号処理装置。
  3.  上記エッジ信号生成部は、
     上記エッジ信号検出部で検出された各フレームのエッジ信号を用いて、Nフレーム毎に、一部または全部のフレームの上記エッジ信号から1フレーム分のエッジ信号を生成する
     請求項1に記載の映像信号処理装置。
  4.  上記エッジ信号生成部で生成された各フレームのエッジ信号を所定色の色信号に変換して出力する色変換部をさらに備える
     請求項1に記載の映像信号処理装置。
  5.  上記第2のフレームレートは、200Hz以上である
     請求項1に記載の映像信号処理装置。
  6.  ハイパスフィルタを用いて第1のフレームレートのN倍(Nは2以上の整数)の第2のフレームレートの映像信号に対してフレーム毎に水平方向および垂直方向のハイパスフィルタ処理を行ってエッジ信号を検出するエッジ信号検出ステップと、
     上記エッジ信号検出ステップで検出された各フレームのエッジ信号に基づいて上記第1のフレームレートの各フレームに対応したエッジ信号を生成するエッジ信号生成ステップを有する
     映像信号処理方法。
  7.  第1のフレームレートのN倍(Nは2以上の整数)の第2のフレームレートの撮像映像信号から上記第1のフレームレートの映像信号を得るフレームレート変換部と、
     上記第2のフレームレートの撮像映像信号に対してフレーム毎に水平方向および垂直方向のハイパスフィルタ処理を行ってエッジ信号を検出するエッジ信号検出部と、
     上記エッジ信号検出部で検出された各フレームのエッジ信号に基づいて上記第1のフレームレートの各フレームに対応したエッジ信号を生成するエッジ信号生成部と、
     上記フレームレート変換部で得られた上記第1のフレームレートの映像信号に上記エッジ信号生成部で生成された上記第1のフレームレートの各フレームに対応したエッジ信号を合成して上記第1のフレームレートのビューファインダ表示用の映像信号を得る信号合成部を備える
     カメラ装置。
  8.  上記エッジ信号生成部は、
     上記エッジ信号検出部で検出された各フレームのエッジ信号を用いて、フレーム毎に、隣接するフレームとの間で上記エッジ信号の差分絶対値を求める演算処理を行い、
     Nフレーム毎に、一部または全部のフレームの上記エッジ信号の差分絶対値から1フレーム分のエッジ信号を生成する
     請求項7に記載のカメラ装置。
  9.  上記エッジ信号生成部は、
     上記エッジ信号検出部で検出された各フレームのエッジ信号を用いて、Nフレーム毎に、一部または全部のフレームの上記エッジ信号から1フレーム分のエッジ信号を生成する
     請求項7に記載のカメラ装置。
  10.  上記エッジ信号生成部で生成された各フレームのエッジ信号を所定色の色信号に変換して出力する色変換部をさらに備え、
     上記信号合成部は、
     上記フレームレート変換部で得られた上記第1のフレームレートの映像信号に、上記色変換部から出力される上記第1のフレームレートの各フレームに対応した上記所定色の色信号を合成して上記第1のフレームレートのビューファインダ表示用の映像信号を得る
     請求項7に記載のカメラ装置。
  11.  上記色変換部は、
     上記所定色をユーザ操作部からの選択信号に基づいて決定する
     請求項10に記載のカメラ装置。
  12.  上記第2のフレームレートは、200Hz以上である
     請求項7に記載のカメラ装置。
  13.  第1のフレームレートのN倍(Nは2以上の整数)の第2のフレームレートの撮像映像信号から上記第1のフレームレートの映像信号を得るフレームレート変換ステップと、
     ハイパスフィルタを用いて上記第2のフレームレートの撮像映像信号に対してフレーム毎に水平方向および垂直方向のハイパスフィルタ処理を行ってエッジ信号を検出するエッジ信号検出ステップと、
     上記エッジ信号検出ステップで検出された各フレームのエッジ信号に基づいて上記第1のフレームレートの各フレームに対応したエッジ信号を生成するエッジ信号生成ステップと、
     上記フレームレート変換ステップで得られた上記第1のフレームレートの映像信号に上記エッジ信号生成ステップで生成された上記第1のフレームレートの各フレームに対応したエッジ信号を合成して上記第1のフレームレートのビューファインダ表示用の映像信号を得る信号合成ステップを備える
     映像信号処理方法。
  14.  第1のフレームレートのN倍(Nは2以上の整数)の第2のフレームレートの撮像映像信号から上記第1のフレームレートの映像信号を得るフレームレート変換部と、
     上記第2のフレームレートの撮像映像信号に対してフレーム毎に水平方向および垂直方向のハイパスフィルタ処理を行ってエッジ信号を検出する第1のエッジ信号検出部と、
     上記第1のエッジ信号検出部で検出された各フレームのエッジ信号に基づいて上記第1のフレームレートの各フレームに対応した第1のエッジ信号を生成するエッジ信号生成部と、
     上記フレームレート変換部で得られた上記第1のフレームレートの映像信号に対してフレーム毎に水平方向および垂直方向のハイパスフィルタ処理を行って上記第1のフレームレートの各フレームに対応した第2のエッジ信号を検出する第2のエッジ信号検出部と、
     上記フレームレート変換部で得られた上記第1のフレームレートの映像信号に、上記エッジ信号生成部で生成された上記第1のエッジ信号、上記第2のエッジ信号検出部で検出された上記第2のエッジ信号、あるいは該第1のエッジ信号および該第2のエッジ信号を合わせた第3のエッジ信号を合成した、上記第1のフレームレートのビューファインダ表示用の映像信号を出力する信号処理部を備える
     カメラ装置。
  15.  上記信号処理部は、
     ユーザ操作部からの選択信号に基づいて、上記第1のエッジ信号、上記第2のエッジ信号、上記第3のエッジ信号のいずれかを選択的に出力する
     請求項14に記載のカメラ装置。
PCT/JP2014/083487 2014-01-09 2014-12-17 映像信号処理装置、映像信号処理方法およびカメラ装置 WO2015104969A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2015556756A JP6443346B2 (ja) 2014-01-09 2014-12-17 映像信号処理装置、映像信号処理方法およびカメラ装置
EP14877618.0A EP3094079B1 (en) 2014-01-09 2014-12-17 Video signal processing device, video signal processing method, and camera device
US15/107,526 US10469729B2 (en) 2014-01-09 2014-12-17 Video signal processing device, video signal processing method, and camera device
US16/550,619 US10778881B2 (en) 2014-01-09 2019-08-26 Video signal processing device, video signal processing method, and camera device

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2014-002202 2014-01-09
JP2014002202 2014-01-09

Related Child Applications (2)

Application Number Title Priority Date Filing Date
US15/107,526 A-371-Of-International US10469729B2 (en) 2014-01-09 2014-12-17 Video signal processing device, video signal processing method, and camera device
US16/550,619 Continuation US10778881B2 (en) 2014-01-09 2019-08-26 Video signal processing device, video signal processing method, and camera device

Publications (1)

Publication Number Publication Date
WO2015104969A1 true WO2015104969A1 (ja) 2015-07-16

Family

ID=53523807

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2014/083487 WO2015104969A1 (ja) 2014-01-09 2014-12-17 映像信号処理装置、映像信号処理方法およびカメラ装置

Country Status (4)

Country Link
US (2) US10469729B2 (ja)
EP (1) EP3094079B1 (ja)
JP (2) JP6443346B2 (ja)
WO (1) WO2015104969A1 (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6443346B2 (ja) * 2014-01-09 2018-12-26 ソニー株式会社 映像信号処理装置、映像信号処理方法およびカメラ装置
US10598972B2 (en) * 2017-12-25 2020-03-24 Huizhou China Star Optoelectronics Technology Co., Ltd. Liquid crystal panel protective cover and liquid crystal panel packaging component
TWI808970B (zh) * 2018-04-30 2023-07-21 圓剛科技股份有限公司 影像訊號轉換裝置
WO2020195246A1 (ja) * 2019-03-28 2020-10-01 ソニー株式会社 撮像装置、撮像方法、及びプログラム
US20230088882A1 (en) * 2021-09-22 2023-03-23 Samsung Electronics Co., Ltd. Judder detection for dynamic frame rate conversion

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005006283A (ja) * 2003-05-20 2005-01-06 Nissan Motor Co Ltd 撮像装置
JP2006285358A (ja) * 2005-03-31 2006-10-19 Advanced Telecommunication Research Institute International エッジトラッキング方法及びそのコンピュータプログラム
JP2007060328A (ja) 2005-08-25 2007-03-08 Sony Corp 撮像装置および表示制御方法
JP2007295525A (ja) * 2006-03-27 2007-11-08 Seiko Epson Corp 撮像装置、撮像システム及び撮像方法
JP2008295022A (ja) * 2007-04-27 2008-12-04 Sharp Corp 画像処理装置及び方法、画像表示装置及び方法
JP2010268354A (ja) 2009-05-18 2010-11-25 Olympus Corp イメージセンサ及びそのイメージセンサを備える撮像装置

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5496106A (en) 1994-12-13 1996-03-05 Apple Computer, Inc. System and method for generating a contrast overlay as a focus assist for an imaging device
JP4031122B2 (ja) * 1998-09-30 2008-01-09 本田技研工業株式会社 差分画像を用いた被写体の検出装置
EP1223549B1 (en) * 1999-10-04 2009-05-06 Hamamatsu Photonics K.K. Camera system for high-speed image processing
JP5062968B2 (ja) * 2004-08-11 2012-10-31 ソニー株式会社 画像処理装置および方法、記録媒体、並びにプログラム
JP4982997B2 (ja) * 2005-10-28 2012-07-25 株式会社ニコン 画像処理装置
JP2008283442A (ja) * 2007-05-10 2008-11-20 Olympus Corp 撮像装置
JP4869218B2 (ja) * 2007-12-28 2012-02-08 オリンパス株式会社 撮像表示装置
JP4730412B2 (ja) * 2008-08-12 2011-07-20 ソニー株式会社 画像処理装置及び画像処理方法
JP4620163B2 (ja) * 2009-06-30 2011-01-26 株式会社東芝 静止字幕検出装置、静止字幕を含む画像を表示する映像機器、および静止字幕を含んだ画像の処理方法
WO2011047214A2 (en) * 2009-10-14 2011-04-21 Optimum Technologies, Inc. Portable retinal camera and image acquisition method
KR101630303B1 (ko) * 2010-02-02 2016-06-14 삼성전자주식회사 디지털 영상 처리 장치 및 그 제어 방법
US9013584B2 (en) * 2010-03-01 2015-04-21 Stmicroelectronics, Inc. Border handling for motion compensated temporal interpolator using camera model
JP5799690B2 (ja) * 2011-09-07 2015-10-28 株式会社リコー 撮像装置及びその制御方法
JP2013072923A (ja) * 2011-09-27 2013-04-22 Sanyo Electric Co Ltd 撮像装置
JP6443346B2 (ja) * 2014-01-09 2018-12-26 ソニー株式会社 映像信号処理装置、映像信号処理方法およびカメラ装置
WO2015124892A1 (en) 2014-02-21 2015-08-27 Taleris Global Llp Method for predicting a fault in a cabin temperature control system of an aircraft

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005006283A (ja) * 2003-05-20 2005-01-06 Nissan Motor Co Ltd 撮像装置
JP2006285358A (ja) * 2005-03-31 2006-10-19 Advanced Telecommunication Research Institute International エッジトラッキング方法及びそのコンピュータプログラム
JP2007060328A (ja) 2005-08-25 2007-03-08 Sony Corp 撮像装置および表示制御方法
JP2007295525A (ja) * 2006-03-27 2007-11-08 Seiko Epson Corp 撮像装置、撮像システム及び撮像方法
JP2008295022A (ja) * 2007-04-27 2008-12-04 Sharp Corp 画像処理装置及び方法、画像表示装置及び方法
JP2010268354A (ja) 2009-05-18 2010-11-25 Olympus Corp イメージセンサ及びそのイメージセンサを備える撮像装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3094079A4

Also Published As

Publication number Publication date
US10469729B2 (en) 2019-11-05
JP6665918B2 (ja) 2020-03-13
JP6443346B2 (ja) 2018-12-26
EP3094079B1 (en) 2023-03-29
JPWO2015104969A1 (ja) 2017-03-23
JP2019071619A (ja) 2019-05-09
EP3094079A1 (en) 2016-11-16
EP3094079A4 (en) 2017-08-16
US20190379820A1 (en) 2019-12-12
US10778881B2 (en) 2020-09-15
US20160323500A1 (en) 2016-11-03

Similar Documents

Publication Publication Date Title
JP6665918B2 (ja) 映像信号処理装置、映像信号処理方法およびカメラ装置
JP2016012336A5 (ja)
JP2016208307A (ja) 画像処理装置、その制御方法及びプログラム
JP2016018309A5 (ja)
JP2012186593A5 (ja)
JP2016195378A5 (ja) 撮像システムおよび撮像方法
JP2015034869A5 (ja)
JP2016195379A5 (ja)
JP2009206654A5 (ja)
JP2015043495A5 (ja)
JP2013219684A5 (ja) 画像処理装置およびその制御方法
JP6305194B2 (ja) 画像処理装置、撮像装置および画像処理方法
JP2017143504A5 (ja)
JP2017143504A (ja) 撮像装置
JP2012235198A (ja) 撮像装置
JP5900273B2 (ja) 合焦評価値生成装置、合焦評価値生成方法、及び、合焦評価値生成プログラム
JP5482589B2 (ja) 画像処理装置、画像処理方法および画像処理用プログラム
JP6212717B2 (ja) 撮像装置
JP2012109899A (ja) 画像処理装置
JP5014277B2 (ja) フォーカス補助信号処理装置
JP2015135448A (ja) フォーカス制御装置、フォーカス制御方法、カメラ装置およびカメラ装置におけるフォーカス制御方法
JP2017005373A5 (ja)
JP2006229702A (ja) 撮像装置及びフォーカス制御方法
JP2019029952A5 (ja)
JP2008076878A5 (ja)

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14877618

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2015556756

Country of ref document: JP

Kind code of ref document: A

REEP Request for entry into the european phase

Ref document number: 2014877618

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 2014877618

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 15107526

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE