JP2021118394A - 画像処理装置、画像処理装置の制御方法、プログラムおよび記憶媒体 - Google Patents
画像処理装置、画像処理装置の制御方法、プログラムおよび記憶媒体 Download PDFInfo
- Publication number
- JP2021118394A JP2021118394A JP2020009115A JP2020009115A JP2021118394A JP 2021118394 A JP2021118394 A JP 2021118394A JP 2020009115 A JP2020009115 A JP 2020009115A JP 2020009115 A JP2020009115 A JP 2020009115A JP 2021118394 A JP2021118394 A JP 2021118394A
- Authority
- JP
- Japan
- Prior art keywords
- image
- frame
- image processing
- processing apparatus
- image data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims abstract description 93
- 238000000034 method Methods 0.000 title claims description 88
- 230000008569 process Effects 0.000 claims description 84
- 238000003384 imaging method Methods 0.000 claims description 10
- 230000006870 function Effects 0.000 claims description 9
- 230000006835 compression Effects 0.000 description 12
- 238000007906 compression Methods 0.000 description 12
- 239000004973 liquid crystal related substance Substances 0.000 description 9
- 238000010586 diagram Methods 0.000 description 7
- 230000009467 reduction Effects 0.000 description 6
- 238000004891 communication Methods 0.000 description 2
- 125000004122 cyclic group Chemical group 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 102220492222 Replication stress response regulator SDE2_K60P_mutation Human genes 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000009990 desizing Methods 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
- H04N7/0117—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal
- H04N7/0122—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal the input and the output signals having different aspect ratios
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/80—Geometric correction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/61—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/765—Interface circuits between an apparatus for recording and another apparatus
- H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
- H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/91—Television signal processing therefor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/55—Optical parts specially adapted for electronic image sensors; Mounting thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Graphics (AREA)
- Human Computer Interaction (AREA)
- Studio Devices (AREA)
- Geometry (AREA)
Abstract
Description
撮像された1フレーム分の画像をNフレーム目の画像として取得する取得手段と、
前記Nフレーム目の画像を取得して記録する期間において、
前記Nフレーム目の画像をメモリに記録し、
前記メモリに記録されたNフレーム目よりも前のフレームの画像における所定のアスペクト比の領域を、水平方向に拡大して表示する、
ように制御する制御手段と、
を有することを特徴とする画像処理装置である。
<撮像装置100の構成図>
図1は、本実施形態に係る撮像装置100(画像処理装置)の構成図である。
る。具体的には、OSD生成回路106は、各種設定メニューやタイトル、時間などのOSDデータを生成する。OSD生成回路106は、生成したOSDデータをRAM111に格納する。OSDデータは、RAM111に格納された表示用画像データと合成され、表示部である液晶パネル107に表示されたり、後述の外部出力部115を介して外部装置に出力されたりする。
K60P等の規格の信号(表示用画像データ)を出力することができる。
図2は、撮像装置100における画像データの生成過程の一例を示す図である。ここで、レンズユニット101は、縦横の圧縮比が1:2のアナモフィックレンズであるものとする。
ナモフィックレンズで撮影された画像から、使用したアナモフィックレンズのスクイーズ倍率に応じて横方向に1.33倍、または2倍(デスクイーズ倍率)にデスクイーズ(伸張)処理することにより、シネマスコープ画像を得ることができる。
図3は、本実施形態に係る第1のデスクイーズ処理の一例を示す図である。画像データ301は、表示用リサイズ回路104に入力されるYUV形式の画像データを示す。表示用リサイズ回路104は、画像データ301のうち左端から1/4〜3/4の領域(領域302)を横方向に2倍に伸張することによって表示用画像データ(画像データ303)を生成する。すなわち、表示用リサイズ回路104は、デスクイーズ処理によって、レンズユニット101で圧縮され画像を、縦横の圧縮比1:1の画像にしている。なお、デスクイーズ処理は、画像のアスペクト比を変更する処理であると捉えることもできる。
クイーズ処理が行えなくなるおそれがある。
図4は、撮像装置100における画像データの生成過程の一例を示す図である。ここで、レンズユニット101は、縦横の圧縮比が1:2のアナモフィックレンズであるものとする。なお、図4において、図2と同じ処理を行う箇所については、同じ番号を付して説明を省略する。
図5Aは、表示用リサイズ回路104によって行われる第2のデスクイーズ処理の一例を示す図である。表示用リサイズ回路104は、RAM111から取得される1フレーム前の巡回NR用の画像データ(画像データ501)を取得する。そして、表示用リサイズ回路104は、1フレーム前の巡回NR用の画像データのうち、表示に用いる領域(領域502)のみを切り出して、横方向に伸張(拡大)することで、表示用画像データ(画像データ503)を生成する。第2のデスクイーズ処理の際に、1フレーム前の巡回NR用の画像データのすべてがRAM111に格納済みであるため、表示用リサイズ回路104は、当該画像データの一部(領域502)をRAM111から直ちに読み出すことができる。このため、時間Tの間にデスクイーズ処理を行えばよく、第1のデスクイーズ処理に
掛かる時間(時間T/2)の2倍の時間をかけて表示用画像データを生成すればよいことになる。なお、第2のデスクイーズ処理は、メモリに記録されたNフレーム目よりも前のフレームの画像における所定のアスペクト比の領域を、水平方向に拡大する処理であると捉えることもできる。
図5Bは、表示用リサイズ回路104によって行われる第3のデスクイーズ処理の一例を示す図である。表示用リサイズ回路104は、画像処理部103によって出力されたYUV形式の画像データ(画像データ511)の全ての領域を用いて、縦方向に1/2に圧縮することで、表示用画像データ(画像データ512)を生成する。なお、表示用リサイズ回路104は、レンズユニット101で圧縮され画像の縦横比を1:1に戻した表示用画像データを生成していると捉えることもできる。第3のデスクイーズ処理では、画像データ511の全体を使って表示用画像データを生成している。そのため、第3のデスクイーズ処理では、第1のデスクイーズ処理に掛かる時間(時間T/2)の2倍の時間(時間T)をかけて表示用画像データを生成すればよいことになる。なお、第3のデスクイーズ処理は、Nフレーム目の画像を垂直方向に縮小する処理であると捉えることもできる。
次に、図6に示すフローチャートを用いて、本実施形態に係る表示処理の例を説明する。このフローチャートにおける各処理は、システム制御部108が、ROM110に格納されたプログラムをRAM111に展開して実行することにより実現される。また撮像装置100では、動画の記録フレームレートを24[fps(Frames Per Second)]、30[fps]、60[fps]、120[fps]、240[fps]のいずれかに設定できるものとする。そして、図6の処理は、24[fps]、30[fps]、60[fps]、120[fps]、240[fps]のいずれで動画の記録を行っている場合にも実行可能であるものとする。
り設定したものである。デスクイーズ設定がONである場合はS605に進み、そうでない場合(OFFの場合)はS610に進む。
ータから、N+1フレーム目の画像データに切り替える。その後、S601に進み、N+1フレーム目の画像データに対する処理が行われる。
上述のように、第2のデスクイーズ処理によって、デスクイーズ処理に用いることができる時間が短い場合(例えば、フレームレートが高い場合)に、1ラインの入力時間である時間Tで、表示画像データを生成することができる。
上述の実施形態では、第2のデスクイーズ処理を行う場合に、N−1フレーム目の巡回NR用の画像データを用いる例について説明したが、用いるフレームは上記に限定されない。例えば、N−2フレーム目以前のフレームの画像データを巡回NR用の画像データとして用いてもよい。
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
Claims (17)
- 撮像された1フレーム分の画像をNフレーム目の画像として取得する取得手段と、
前記Nフレーム目の画像を取得して記録する期間において、
前記Nフレーム目の画像をメモリに記録し、
前記メモリに記録されたNフレーム目よりも前のフレームの画像における所定のアスペクト比の領域を水平方向に拡大して表示する、
ように制御する制御手段と、
を有することを特徴とする画像処理装置。 - 前記制御手段は、前記所定のアスペクト比の領域を水平方向に拡大して表示する処理において、前記Nフレーム目よりも前のフレームの画像における前記所定のアスペクト比の領域以外の領域は使用しないように制御する、
ことを特徴とする請求項1に記載の画像処理装置。 - 前記制御手段は、前記所定のアスペクト比の領域を水平方向に拡大して表示する処理において、前記Nフレーム目よりも前のフレームの画像における前記所定のアスペクト比の領域を垂直方向には拡大しないように制御する、
ことを特徴とする請求項1または2に記載の画像処理装置。 - 前記Nフレーム目よりも前のフレームの画像は、N−1フレーム目の画像である、
ことを特徴とする請求項1から3のいずれか一項に記載の画像処理装置。 - 前記メモリは、DRAMである、
ことを特徴とする請求項1から4のいずれか一項に記載の画像処理装置。 - 前記制御手段は、前記Nフレーム目の画像を取得して記録する期間において、前記Nフレーム目の画像をメモリに記録するとともに、前記Nフレーム目の画像を動画ファイルに記録するように制御する、
ことを特徴とする請求項1から5のいずれか一項に記載の画像処理装置。 - 前記Nフレーム目の画像を取得する期間は、前記Nフレーム目の1フレーム分の画像を取得する期間である、
ことを特徴とする請求項1から6のいずれか一項に記載の画像処理装置。 - 前記制御手段は、前記Nフレーム目の画像を取得して記録する期間において、
表示モードが撮像から表示までの遅延を抑制する第1のモードである場合に、前記Nフレーム目よりも前のフレームの画像における所定のアスペクト比の領域を水平方向に拡大する代わりに、前記Nフレーム目の画像を垂直方向に縮小して表示し、
表示モードが前記遅延を抑制する前記第1のモードと異なる第2のモードの場合に、前記Nフレーム目よりも前のフレームの画像における所定のアスペクト比の領域を水平方向に拡大して表示する、
ように制御する、
ことを特徴とする請求項1から7のいずれか一項に記載の画像処理装置。 - 前記制御手段は、前記第1のモードである場合に、縮小された画像における前記所定のアスペクト比の領域以外の領域をマスクするように制御する、
ことを特徴とする請求項8に記載の画像処理装置。 - 前記取得手段によって取得される画像は、アナモフィックレンズを用いて撮像された画
像であって、デスクイーズされていない画像である、
ことを特徴とする請求項1から9のいずれか一項に記載の画像処理装置。 - 前記制御手段は、フレームレートが第1のフレームレートである場合に、前記Nフレーム目の画像を取得して記録する期間において、前記メモリに記録されたNフレーム目よりも前のフレームの画像における前記所定のアスペクト比の領域を水平方向に拡大して表示するように制御する、
ことを特徴とする請求項1から10のいずれか一項に記載の画像処理装置。 - 前記第1のフレームレートは、60fps、120fps、240fpsのいずれかである、
ことを特徴とする請求項11に記載の画像処理装置。 - 前記制御手段は、フレームレートが前記第1のフレームレートと異なる第2のフレームレートである場合に、前記Nフレーム目の画像を取得して記録する期間において、前記Nフレーム目よりも前のフレームの画像ではなく、前記Nフレーム目の画像における前記所定のアスペクト比の領域を水平方向に拡大して表示するように制御する、
ことを特徴とする請求項11または12に記載の画像処理装置。 - 前記第2のフレームレートは、24fps、30fpsのいずれかである、
ことを特徴とする請求項13に記載の画像処理装置。 - 撮像された1フレーム分の画像をNフレーム目の画像として取得するステップと、
前記Nフレーム目の画像を取得して記録する期間において、
前記Nフレーム目の画像をメモリに記録するステップと、
前記メモリに記録されたNフレーム目よりも前のフレームの画像における所定のアスペクト比の領域を、水平方向に拡大して表示するステップと、
を有することを特徴とする画像処理装置の制御方法。 - コンピュータを、請求項1から14のいずれか一項に記載された画像処理装置の各手段として機能させるためのプログラム。
- コンピュータを、請求項1から14のいずれか一項に記載された画像処理装置の各手段として機能させるためのプログラムを格納したコンピュータが読み取り可能な記憶媒体。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020009115A JP7463114B2 (ja) | 2020-01-23 | 2020-01-23 | 画像処理装置、画像処理装置の制御方法、プログラムおよび記憶媒体 |
US17/152,172 US11729348B2 (en) | 2020-01-23 | 2021-01-19 | Image processing apparatus allowing display control of de-squeezed image, and control method of image processing apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020009115A JP7463114B2 (ja) | 2020-01-23 | 2020-01-23 | 画像処理装置、画像処理装置の制御方法、プログラムおよび記憶媒体 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021118394A true JP2021118394A (ja) | 2021-08-10 |
JP7463114B2 JP7463114B2 (ja) | 2024-04-08 |
Family
ID=76970410
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020009115A Active JP7463114B2 (ja) | 2020-01-23 | 2020-01-23 | 画像処理装置、画像処理装置の制御方法、プログラムおよび記憶媒体 |
Country Status (2)
Country | Link |
---|---|
US (1) | US11729348B2 (ja) |
JP (1) | JP7463114B2 (ja) |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3722205B2 (ja) | 2000-06-16 | 2005-11-30 | シャープ株式会社 | 投影型画像表示装置 |
JP4173457B2 (ja) * | 2004-03-12 | 2008-10-29 | 富士フイルム株式会社 | 撮影装置及びその制御方法 |
JP6489802B2 (ja) * | 2014-11-13 | 2019-03-27 | キヤノン株式会社 | 撮像装置およびその制御方法、プログラム、並びに記憶媒体 |
JP6677593B2 (ja) | 2016-06-30 | 2020-04-08 | キヤノン株式会社 | 画像処理装置及びその制御方法 |
JP6727989B2 (ja) | 2016-08-31 | 2020-07-22 | キヤノン株式会社 | 画像処理装置およびその制御方法 |
JP6513126B2 (ja) * | 2017-05-16 | 2019-05-15 | キヤノン株式会社 | 表示制御装置とその制御方法及びプログラム |
-
2020
- 2020-01-23 JP JP2020009115A patent/JP7463114B2/ja active Active
-
2021
- 2021-01-19 US US17/152,172 patent/US11729348B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP7463114B2 (ja) | 2024-04-08 |
US11729348B2 (en) | 2023-08-15 |
US20210235039A1 (en) | 2021-07-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6727989B2 (ja) | 画像処理装置およびその制御方法 | |
US9918062B2 (en) | Image capturing apparatus, control method of image capturing apparatus, and image processing method | |
KR101989152B1 (ko) | 동영상 촬영 또는 재생 중, 정지 영상을 캡쳐하는 장치 및 방법 | |
US9894270B2 (en) | Image processing apparatus and image processing method for handling a raw image, of a moving image or a still image | |
US9723169B2 (en) | Imaging apparatus and imaging apparatus control method | |
JP2010103676A (ja) | 撮像装置、撮像領域表示方法および撮像領域表示プログラム | |
JP2017175319A (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP4696614B2 (ja) | 画像表示制御装置及びプログラム | |
CN112422782B (zh) | 显示控制设备及其控制方法和计算机可读存储介质 | |
JP2017046160A (ja) | 画像処理装置、その制御方法、および制御プログラム、並びに記憶媒体 | |
JP7463114B2 (ja) | 画像処理装置、画像処理装置の制御方法、プログラムおよび記憶媒体 | |
US10015362B2 (en) | Image capturing apparatus for resizing raw image data and control method thereof | |
JP7463111B2 (ja) | 電子機器、電子機器の制御方法、プログラムおよび記憶媒体 | |
JP4987800B2 (ja) | 撮像装置 | |
US11310442B2 (en) | Display control apparatus for displaying image with/without a frame and control method thereof | |
JP5003803B2 (ja) | 画像出力装置、および、プログラム | |
JP2021124546A (ja) | 表示制御装置、制御方法、プログラムおよび記憶媒体 | |
JP2021061571A (ja) | 電子機器およびその制御方法、プログラム、並びに記憶媒体 | |
JP6280402B2 (ja) | 画像記録装置および画像記録方法、プログラム、並びに記憶媒体 | |
JP5115523B2 (ja) | 撮像装置、撮影範囲調整方法及びプログラム | |
JP2009265583A (ja) | 撮影装置 | |
JP2019110372A (ja) | カメラ | |
JP2017168984A (ja) | 撮像装置及び撮像装置の制御方法 | |
JP2009267533A (ja) | 撮像装置及びそのプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230110 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20231110 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231121 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240112 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240227 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240327 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7463114 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |