JP2019533957A - 端末のための撮影方法及び端末 - Google Patents
端末のための撮影方法及び端末 Download PDFInfo
- Publication number
- JP2019533957A JP2019533957A JP2019522768A JP2019522768A JP2019533957A JP 2019533957 A JP2019533957 A JP 2019533957A JP 2019522768 A JP2019522768 A JP 2019522768A JP 2019522768 A JP2019522768 A JP 2019522768A JP 2019533957 A JP2019533957 A JP 2019533957A
- Authority
- JP
- Japan
- Prior art keywords
- image
- color
- monochrome
- cropping
- camera lens
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 78
- 230000004927 fusion Effects 0.000 claims abstract description 28
- 230000003287 optical effect Effects 0.000 claims description 27
- 238000003384 imaging method Methods 0.000 claims description 10
- 230000003068 static effect Effects 0.000 claims description 8
- 239000003086 colorant Substances 0.000 claims description 5
- 230000000694 effects Effects 0.000 abstract description 36
- 238000004364 calculation method Methods 0.000 description 22
- 238000010586 diagram Methods 0.000 description 18
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000011514 reflex Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 230000005669 field effect Effects 0.000 description 2
- 230000007613 environmental effect Effects 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 238000011022 operating instruction Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4053—Scaling of whole images or parts thereof, e.g. expanding or contracting based on super-resolution, i.e. the output image resolution being higher than the sensor resolution
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/695—Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B19/00—Cameras
- G03B19/02—Still-picture cameras
- G03B19/04—Roll-film cameras
- G03B19/07—Roll-film cameras having more than one objective
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/73—Deblurring; Sharpening
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/194—Segmentation; Edge detection involving foreground-background segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/55—Depth or shape recovery from multiple images
- G06T7/593—Depth or shape recovery from multiple images from stereo images
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/02—Constructional features of telephone sets
- H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
- H04M1/026—Details of the structure or mounting of specific components
- H04M1/0264—Details of the structure or mounting of specific components for a camera module assembly
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/239—Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/25—Image signal generators using stereoscopic image cameras using two or more image sensors with different characteristics other than in their location or field of view, e.g. having different resolutions or colour pickup characteristics; using image signals from one sensor to control the characteristics of another sensor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/257—Colour aspects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/95—Computational photography systems, e.g. light-field imaging systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/95—Computational photography systems, e.g. light-field imaging systems
- H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
- H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
- H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
- H04N25/133—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements including elements passing panchromatic light, e.g. filters passing white light
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/2224—Studio circuitry; Studio devices; Studio equipment related to virtual studio applications
- H04N5/2226—Determination of depth image, e.g. for foreground/background separation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
- G06T2207/10012—Stereo images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20112—Image segmentation details
- G06T2207/20132—Image cropping
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20221—Image fusion; Image merging
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N2013/0074—Stereoscopic image analysis
- H04N2013/0081—Depth or disparity estimation from stereoscopic image signals
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computing Systems (AREA)
- Human Computer Interaction (AREA)
- Computer Networks & Wireless Communication (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Studio Devices (AREA)
- Image Processing (AREA)
- Studio Circuits (AREA)
Abstract
Description
ターゲット・シーンの深度情報に基づいて、取得したカラー・ズーム画像に背景ブラーリング処理を実行するステップを含む。
ジャイロ・センサーにより収集された情報に基づいて、撮影環境が相対的に静的な状態にあるか否かを決定するステップを含み、その場合において、画像のコントラスト情報は、鮮明度、詳細表現、及び画像のグレースケール・レベル表現に関連し、モノクロ画像のより大きなコントラスト情報は、画像のより明らかな詳細表現及びグレースケール・レベル表現を示し、及びカラー・画像のより大きなコントラスト情報はより鮮明でより人目を引く画像及びより明るい色を示す。
少なくとも2つのカメラ・レンズであって、1つのレンズはモノクロ・カメラ・レンズであり、他のレンズはカラー・カメラ・レンズであり、モノクロ・カメラ・レンズはモノクロ画像を撮影するように構成され、カラー・カメラ・レンズはカラー画像を撮影するように構成され、モノクロ・カメラ・レンズの解像度はカラー・カメラ・レンズの解像度より高く、及びモノクロ・カメラ・レンズの光軸はカラー・カメラ・レンズのものと平行である、少なくとも2つのカメラ・レンズ;
ターゲット・シーンのモノクロ画像とカラー画像とを同時に撮影するように構成される撮影モジュールであって、モノクロ画像の解像度はカラー画像のものより高く、及び少なくとも1つのモノクロ画像と少なくとも1つのカラー・画像とが存在する、撮影モジュール;
ターゲット・ズーム比率を決定するように構成される第1決定モジュール;
ターゲット・ズーム比率に基づいてモノクロ画像とカラー画像とを相応にクロッピングするように構成されるクロッピング・モジュールであって、クロッピングにより取得されたモノクロ画像に対応する視野は、クロッピングにより取得されたカラー画像に対応する視野と同じである、クロッピング・モジュール;及び
カラー・ズーム画像を取得するために、クロッピングにより取得されたモノクロ画像とクロッピングにより取得されたカラー画像とにフュージョンを実行するように構成されるフュージョン・モジュールを含む。
ターゲット・シーンの深度情報に基づいてカラー・ズーム画像に背景ブラーリングを実行するように構成されるブラーリング・モジュールを含む。
少なくとも2つのブラック画像及び/又は少なくとも2つのカラー・画像が存在する場合に、クロッピングにより取得されたモノクロ画像及びクロッピングにより取得されたカラー画像から、高い画像品質を有する1つのターゲット・モノクロ画像と高い画像品質を有する1つのターゲット・カラー画像とを、ジャイロ・センサーにより収集された情報と、モノクロ画像のコントラスト情報と、カラー画像のコントラスト情報とに基づいて決定するように構成される第2決定モジュール;及び
深度情報を取得するために、ターゲット・モノクロ画像及びターゲット・カラー画像に深度計算を実行するように構成される計算モジュールを含む。
プロセッサと、メモリと、少なくとも2つのカメラ・レンズとを含み、1つのレンズはモノクロ・カメラ・レンズであり、他のレンズはカラー・カメラ・レンズであり、モノクロ・カメラ・レンズはモノクロ画像を撮影するように構成され、カラー・カメラ・レンズはカラー画像を撮影するように構成され、モノクロ・カメラ・レンズの解像度はカラー・カメラ・レンズの解像度より高く、及びモノクロ・カメラ・レンズの光軸はカラー・カメラ・レンズのものと平行であり、
プロセッサは、メモリに保存される動作命令を起動することにより:
ターゲット・シーンのモノクロ画像とカラー画像とを同時に撮影するステップであって、モノクロ画像の解像度はカラー画像のものより高く、及び少なくとも1つのモノクロ画像と少なくとも1つのカラー・画像とが存在する、ステップ;
ターゲット・ズーム比率を決定するステップ;
ターゲット・ズーム比率に基づいてモノクロ画像とカラー画像とを相応にクロッピングするステップであって、クロッピングにより取得されたモノクロ画像に対応する視野は、クロッピングにより取得されたカラー画像に対応する視野と同じである、ステップ;及び
カラー・ズーム画像を取得するために、クロッピングにより取得されたモノクロ画像とクロッピングにより取得されたカラー画像とにフュージョンを実行するステップを実行するように構成される。
ターゲット・シーンの深度情報に基づいてカラー・ズーム画像に背景ブラーリングを実行するステップを実行するように更に構成される。
少なくとも2つのブラック画像及び/又は少なくとも2つのカラー・画像が存在する場合に、クロッピングにより取得されたモノクロ画像及びクロッピングにより取得されたカラー画像から、高い画像品質を有する1つのターゲット・モノクロ画像と高い画像品質を有する1つのターゲット・カラー画像とを、ジャイロ・センサーにより収集された情報と、モノクロ画像のコントラスト情報と、カラー画像のコントラスト情報とに基づいて決定するステップ;及び
深度情報を取得するために、ターゲット・モノクロ画像及びターゲット・カラー画像に深度計算を実行するステップを実行するように更に構成される。
2つのカメラ・レンズであって、1つのレンズはモノクロ・カメラ・レンズであり、他のレンズはカラー・カメラ・レンズであり、モノクロ・カメラ・レンズはモノクロ画像を撮影するように構成され、カラー・カメラ・レンズはカラー画像を撮影するように構成され、モノクロ・カメラ・レンズの解像度はカラー・カメラ・レンズの解像度より高く、及びモノクロ・カメラ・レンズの光軸はカラー・カメラ・レンズのものと平行である、2つのカメラ・レンズ;
ターゲット・シーンのモノクロ画像とカラー画像とを同時に撮影するように構成される撮影モジュール1401であって、モノクロ画像の解像度はカラー画像のものより高く、及び少なくとも1つのモノクロ画像と少なくとも1つのカラー・画像とが存在する、撮影モジュール;
ターゲット・ズーム比率を決定するように構成される第1決定モジュール1402;
ターゲット・ズーム比率に基づいてモノクロ画像とカラー画像とを相応にクロッピングするように構成されるクロッピング・モジュール1403であって、クロッピングにより取得されたモノクロ画像に対応する視野は、クロッピングにより取得されたカラー画像に対応する視野と同じである、クロッピング・モジュール;及び
カラー・ズーム画像を取得するために、クロッピングにより取得されたモノクロ画像とクロッピングにより取得されたカラー画像とにフュージョンを実行するように構成されるフュージョン・モジュール1404を含む。
少なくとも2つのブラック画像及び/又は少なくとも2つのカラー・画像が存在する場合に、クロッピングにより取得されたモノクロ画像及びクロッピングにより取得されたカラー画像から、高い画像品質を有する1つのターゲット・モノクロ画像と高い画像品質を有する1つのターゲット・カラー画像とを、ジャイロ・センサーにより収集された情報と、モノクロ画像のコントラスト情報と、カラー画像のコントラスト情報とに基づいて決定するように構成される第2決定モジュール1505;
深度情報を取得するために、ターゲット・モノクロ画像及びターゲット・カラー画像に深度計算を実行するように構成される計算モジュール1506;及び
少なくとも2つのブラック画像及び/又は少なくとも2つのカラー・画像が存在する場合に、ターゲット・シーンに対応する深度情報に基づいてカラー・ズーム画像に背景ブラーリングを実行するように構成される背景ブラーリング・モジュール1507を含む。
入力デバイス1610と、出力デバイス1620と、プロセッサ1630と、メモリ1640と、バス1650とを含む。
様々なオペレーション命令を含み、及び様々なオペレーションを実現するために使用されるオペレーション命令;及び
様々なシステム・プログラムを含み、及び様々な基本サービスを実現し、及びハードウェアに基づくタスクを処理するために使用されるオペレーティング・システム。
ターゲット・シーンのモノクロ画像とカラー画像とを同時に撮影するステップであって、モノクロ画像の解像度はカラー画像のものより高く、及び少なくとも1つのモノクロ画像と少なくとも1つのカラー・画像とが存在する、ステップ;
ターゲット・ズーム比率を決定するステップ;
ターゲット・ズーム比率に基づいてモノクロ画像とカラー画像とを相応にクロッピングするステップであって、クロッピングにより取得されたモノクロ画像に対応する視野は、クロッピングにより取得されたカラー画像に対応する視野と同じである、ステップ;及び
カラー・ズーム画像を取得するために、クロッピングにより取得されたモノクロ画像とクロッピングにより取得されたカラー画像とにフュージョンを実行するステップのために構成される。
Claims (9)
- 端末のための撮影方法であって、前記端末は少なくとも2つのカメラ・レンズを含み、1つのレンズはモノクロ・カメラ・レンズであり、他のレンズはカラー・カメラ・レンズであり、前記モノクロ・カメラ・レンズは静的又は動的なモノクロ画像を撮影するように構成され、前記カラー・カメラ・レンズは静的又は動的なカラー画像を撮影するように構成され、前記モノクロ・カメラ・レンズの解像度は前記カラー・カメラ・レンズの解像度より高く、前記モノクロ・カメラ・レンズの光軸は前記カラー・カメラ・レンズのものと平行であり、及び前記撮影方法は:
ターゲット・ズーム比率を取得するステップ;
前記ターゲット・ズーム比率に基づいてターゲット・シーンのモノクロ画像とカラー画像とを同時に撮影するステップであって、前記モノクロ画像の解像度は前記カラー画像のものより高く、及び少なくとも1つのモノクロ画像と少なくとも1つのカラー・画像とが存在する、ステップ;
前記ターゲット・ズーム比率に基づいて前記モノクロ画像と前記カラー画像とを相応にクロッピングするステップであって、クロッピングにより取得されたモノクロ画像に対応する視野は、クロッピングにより取得されたカラー画像に対応する視野と同じである、ステップ;及び
カラー・ズーム画像を取得するために、クロッピングにより取得された前記モノクロ画像とクロッピングにより取得された前記カラー画像とにフュージョンを実行するステップ;
を含む方法。 - クロッピングにより取得された前記モノクロ画像に対応する前記視野が、クロッピングにより取得された前記カラー画像に対応する前記視野と同じである場合に、クロッピングにより取得された前記モノクロ画像の解像度は、クロッピングにより取得された前記カラー画像の解像度の少なくとも1.6倍である、請求項1に記載の方法。
- 前記ターゲット・ズーム比率は3×であり、及び前記モノクロ・カメラ・レンズと前記カラー・カメラ・レンズとの等価焦点距離は75mmと85mmとの間にある、請求項1に記載の方法。
- 前記カラー・ズーム画像が取得された後に、前記撮影方法は:
前記カラー・ズーム画像において関心領域ROIを識別するステップ;及び
前記カラー・ズーム画像における前記関心領域以外の領域にブラーリング処理を実行するステップ;
を更に含む、請求項1に記載の方法。 - 前記カラー・ズーム画像における前記関心領域以外の領域にブラーリング処理を実行する前記ステップは、具体的に:
両眼立体視原理に従って前記カラー・ズーム画像のシーン深度情報を計算するステップ;及び
前記カラー・ズーム画像のフォアグラウンド情報と、前記モノクロ・カメラ・レンズ及び前記カラー・カメラ・レンズ各々の絞り値FUMと、前記シーン深度情報とに基づいて、前記カラー・ズーム画像における前記関心領域以外の領域にブラーリング処理を実行するステップ;
である、請求項4に記載の方法。 - 少なくとも2つのブラック画像及び/又は少なくとも2つのカラー・画像が存在する場合に、両眼立体視原理に従って前記カラー・ズーム画像のシーン深度情報を計算する前記ステップは、具体的に:
前記モノクロ画像及び前記カラー画像から、前記モノクロ画像のコントラスト情報と、前記カラー画像のコントラスト情報と、前記端末のジャイロスコープにより収集された情報とに基づいて、最小のジッタ情報及び/又は最大のコントラスト情報を有する1つのモノクロ画像と1つのカラー画像とを選択し、及び、選択された前記モノクロ画像と、選択された前記カラー画像と、両眼立体視原理とに基づいて前記カラー・ズーム画像の前記シーン深度情報を計算するステップ;
である、請求項5に記載の方法。 - 少なくとも2つのカメラ・レンズであって、1つのレンズはモノクロ・カメラ・レンズであり、他のレンズはカラー・カメラ・レンズであり、前記モノクロ・カメラ・レンズは静的又は動的なモノクロ画像を撮影するように構成され、前記カラー・カメラ・レンズは静的又は動的なカラー画像を撮影するように構成され、前記モノクロ・カメラ・レンズの解像度は前記カラー・カメラ・レンズの解像度より高く、及び前記モノクロ・カメラ・レンズの光軸は前記カラー・カメラ・レンズのものと平行である、少なくとも2つのカメラ・レンズ;
ターゲット・ズーム比率を取得するように構成される取得モジュール;
前記ターゲット・ズーム比率に基づいてターゲット・シーンのモノクロ画像とカラー画像とを同時に撮影するように構成される撮影モジュールであって、前記モノクロ画像の解像度は前記カラー画像のものより高く、及び少なくとも1つのモノクロ画像と少なくとも1つのカラー・画像とが存在する、撮影モジュール;
前記ターゲット・ズーム比率に基づいて前記モノクロ画像と前記カラー画像とを相応にクロッピングするように構成されるクロッピング・モジュールであって、クロッピングにより取得されたモノクロ画像に対応する視野は、クロッピングにより取得されたカラー画像に対応する視野と同じである、クロッピング・モジュール;及び
カラー・ズーム画像を取得するために、クロッピングにより取得された前記モノクロ画像とクロッピングにより取得された前記カラー画像とにフュージョンを実行するように構成されるフュージョン・モジュール;
を含む端末。 - 前記端末は、更に:
前記カラー・ズーム画像において関心領域ROIを識別するように構成される識別モジュール;及び
前記カラー・ズーム画像における前記関心領域以外の領域にブラーリング処理を実行するように構成されるブラーリング・モジュール;
を含む請求項7に記載の端末。 - プロセッサと、メモリと、少なくとも2つのカメラ・レンズとを含む端末であって、1つのレンズはモノクロ・カメラ・レンズであり、他のレンズはカラー・カメラ・レンズであり、前記モノクロ・カメラ・レンズは静的又は動的なモノクロ画像を撮影するように構成され、前記カラー・カメラ・レンズは静的又は動的なカラー画像を撮影するように構成され、前記モノクロ・カメラ・レンズの解像度は前記カラー・カメラ・レンズの解像度より高く、及び前記モノクロ・カメラ・レンズの光軸は前記カラー・カメラ・レンズのものと平行であり、
前記プロセッサは、前記メモリに保存される動作命令を起動することにより:
ターゲット・ズーム比率を取得するステップ;
前記ターゲット・ズーム比率に基づいてターゲット・シーンのモノクロ画像とカラー画像とを同時に撮影するステップであって、前記モノクロ画像の解像度は前記カラー画像のものより高く、及び少なくとも1つのモノクロ画像と少なくとも1つのカラー・画像とが存在する、ステップ;
前記ターゲット・ズーム比率に基づいて前記モノクロ画像と前記カラー画像とを相応にクロッピングするステップであって、クロッピングにより取得されたモノクロ画像に対応する視野は、クロッピングにより取得されたカラー画像に対応する視野と同じである、ステップ;及び
カラー・ズーム画像を取得するために、クロッピングにより取得された前記モノクロ画像とクロッピングにより取得された前記カラー画像とにフュージョンを実行するステップ;
を実行するように構成される、端末。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610964290 | 2016-10-28 | ||
CN201610964290.0 | 2016-10-28 | ||
CNPCT/CN2016/108271 | 2016-12-01 | ||
CN2016108271 | 2016-12-01 | ||
PCT/CN2016/108606 WO2018076460A1 (zh) | 2016-10-28 | 2016-12-05 | 一种终端的拍照方法和终端 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019533957A true JP2019533957A (ja) | 2019-11-21 |
JP6802372B2 JP6802372B2 (ja) | 2020-12-16 |
Family
ID=62023014
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019522768A Active JP6802372B2 (ja) | 2016-10-28 | 2016-12-05 | 端末のための撮影方法及び端末 |
Country Status (6)
Country | Link |
---|---|
US (1) | US10827107B2 (ja) |
EP (1) | EP3525447B1 (ja) |
JP (1) | JP6802372B2 (ja) |
KR (1) | KR102229811B1 (ja) |
CN (1) | CN109906599B (ja) |
WO (1) | WO2018076460A1 (ja) |
Families Citing this family (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3787274A4 (en) * | 2018-05-30 | 2021-06-16 | Ningbo Sunny Opotech Co., Ltd. | CAMERA MODULARRAY AND METHOD OF ASSEMBLING THEREOF |
CN111951199A (zh) * | 2019-05-16 | 2020-11-17 | 武汉Tcl集团工业研究院有限公司 | 一种图像融合方法及设备 |
US11212543B2 (en) * | 2019-10-10 | 2021-12-28 | Lg Electronics | Method and apparatus for compressing or restoring image |
US11297286B1 (en) * | 2019-11-13 | 2022-04-05 | Facebook Technologies, Llc | Monochrome cameras with sparsely arranged clusters of color filters for coloration of content |
CN111294517B (zh) * | 2020-03-03 | 2021-12-17 | 荣耀终端有限公司 | 一种图像处理的方法及移动终端 |
CN111429350B (zh) * | 2020-03-24 | 2023-02-24 | 安徽工业大学 | 一种手机拍照快速超分辨处理方法 |
CN113660456A (zh) * | 2021-07-12 | 2021-11-16 | 无锡安科迪智能技术有限公司 | 可变焦阵列摄像机协同获取不同分辨率多目标视频方法 |
JP2023106862A (ja) * | 2022-01-21 | 2023-08-02 | 株式会社リコー | 撮像装置、撮像方法、プログラム、および撮像システム |
US11727537B1 (en) * | 2022-03-24 | 2023-08-15 | Qualcomm Incorporated | Bokeh effect in variable aperture (VA) camera systems |
CN116630220B (zh) * | 2023-07-25 | 2023-11-21 | 江苏美克医学技术有限公司 | 一种荧光图像景深融合成像方法、装置及存储介质 |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0946730A (ja) * | 1995-07-28 | 1997-02-14 | Canon Inc | 立体形状抽出装置 |
JP2001506812A (ja) * | 1996-09-30 | 2001-05-22 | ハネウエル・インコーポレーテッド | 低コスト高解像度カラーカメラ |
US20110169921A1 (en) * | 2010-01-12 | 2011-07-14 | Samsung Electronics Co., Ltd. | Method for performing out-focus using depth information and camera using the same |
JP2011146873A (ja) * | 2010-01-13 | 2011-07-28 | Sharp Corp | 撮像画像処理システム、撮像画像処理システムの制御方法、プログラムおよび記録媒体 |
JP2012015620A (ja) * | 2010-06-29 | 2012-01-19 | Fujifilm Corp | 立体撮像装置 |
JP2013026672A (ja) * | 2011-07-15 | 2013-02-04 | Toshiba Corp | 固体撮像装置及びカメラモジュール |
JP2013162291A (ja) * | 2012-02-03 | 2013-08-19 | Toshiba Corp | カメラモジュール |
JP2013546238A (ja) * | 2010-10-22 | 2013-12-26 | ユニバーシティ オブ ニュー ブランズウィック | カメラ撮像システムおよび方法 |
EP2852150A1 (en) * | 2013-09-18 | 2015-03-25 | BlackBerry Limited | Using narrow field of view monochrome camera for enhancing a zoomed colour image |
JP2015159357A (ja) * | 2014-02-21 | 2015-09-03 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
JP2015197745A (ja) * | 2014-03-31 | 2015-11-09 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理方法及びプログラム |
US20160117829A1 (en) * | 2014-10-23 | 2016-04-28 | Samsung Electronics Co., Ltd. | Electronic device and method for processing image |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101150731B (zh) * | 2006-09-22 | 2012-05-23 | 罗罡 | 用于数字成像的彩色滤波阵列及其成像方法 |
US7924312B2 (en) | 2008-08-22 | 2011-04-12 | Fluke Corporation | Infrared and visible-light image registration |
WO2010116367A1 (en) * | 2009-04-07 | 2010-10-14 | Nextvision Stabilized Systems Ltd | Continuous electronic zoom for an imaging system with multiple imaging devices having different fixed fov |
KR101792641B1 (ko) * | 2011-10-07 | 2017-11-02 | 엘지전자 주식회사 | 이동 단말기 및 그의 아웃 포커싱 이미지 생성방법 |
CN103546730A (zh) | 2012-07-11 | 2014-01-29 | 北京博雅华录视听技术研究院有限公司 | 基于多摄像头的图像感光度增强方法 |
KR20140035000A (ko) * | 2012-09-11 | 2014-03-21 | 삼성전자주식회사 | 영상 촬영 장치 및 그 제어 방법 |
CN113472989A (zh) | 2012-11-28 | 2021-10-01 | 核心光电有限公司 | 多孔径成像***以及通过多孔径成像***获取图像的方法 |
KR101389865B1 (ko) * | 2013-02-28 | 2014-04-29 | 주식회사 펀진 | 이미지 인식 시스템 및 그를 이용한 이미지 인식 방법 |
US20140320611A1 (en) | 2013-04-29 | 2014-10-30 | nanoLambda Korea | Multispectral Multi-Camera Display Unit for Accurate Color, Multispectral, or 3D Images |
CN104424640B (zh) * | 2013-09-06 | 2017-06-20 | 格科微电子(上海)有限公司 | 对图像进行虚化处理的方法和装置 |
CN103856719A (zh) * | 2014-03-26 | 2014-06-11 | 深圳市金立通信设备有限公司 | 一种拍照方法及终端 |
CN103986867B (zh) | 2014-04-24 | 2017-04-05 | 宇龙计算机通信科技(深圳)有限公司 | 一种图像拍摄终端和图像拍摄方法 |
CN104363375B (zh) | 2014-11-28 | 2018-03-27 | 广东欧珀移动通信有限公司 | 一种照片降噪的方法、装置及终端 |
CN105847660A (zh) | 2015-06-01 | 2016-08-10 | 维沃移动通信有限公司 | 一种动态变焦方法、装置及智能终端 |
CN105049718A (zh) * | 2015-07-06 | 2015-11-11 | 深圳市金立通信设备有限公司 | 一种图像处理方法及终端 |
KR102603426B1 (ko) * | 2016-06-27 | 2023-11-20 | 삼성전자주식회사 | 이미지 처리장치 및 방법 |
CN106060412A (zh) | 2016-08-02 | 2016-10-26 | 乐视控股(北京)有限公司 | 拍照处理方法和装置 |
US10142543B1 (en) * | 2017-05-12 | 2018-11-27 | Mediatek Inc. | Power reduction in a multi-sensor camera device by on-demand sensors activation |
-
2016
- 2016-12-05 KR KR1020197015018A patent/KR102229811B1/ko active IP Right Grant
- 2016-12-05 JP JP2019522768A patent/JP6802372B2/ja active Active
- 2016-12-05 US US16/345,603 patent/US10827107B2/en active Active
- 2016-12-05 WO PCT/CN2016/108606 patent/WO2018076460A1/zh unknown
- 2016-12-05 CN CN201680090508.2A patent/CN109906599B/zh active Active
- 2016-12-05 EP EP16919998.1A patent/EP3525447B1/en active Active
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0946730A (ja) * | 1995-07-28 | 1997-02-14 | Canon Inc | 立体形状抽出装置 |
JP2001506812A (ja) * | 1996-09-30 | 2001-05-22 | ハネウエル・インコーポレーテッド | 低コスト高解像度カラーカメラ |
US20110169921A1 (en) * | 2010-01-12 | 2011-07-14 | Samsung Electronics Co., Ltd. | Method for performing out-focus using depth information and camera using the same |
JP2011146873A (ja) * | 2010-01-13 | 2011-07-28 | Sharp Corp | 撮像画像処理システム、撮像画像処理システムの制御方法、プログラムおよび記録媒体 |
JP2012015620A (ja) * | 2010-06-29 | 2012-01-19 | Fujifilm Corp | 立体撮像装置 |
JP2013546238A (ja) * | 2010-10-22 | 2013-12-26 | ユニバーシティ オブ ニュー ブランズウィック | カメラ撮像システムおよび方法 |
JP2013026672A (ja) * | 2011-07-15 | 2013-02-04 | Toshiba Corp | 固体撮像装置及びカメラモジュール |
JP2013162291A (ja) * | 2012-02-03 | 2013-08-19 | Toshiba Corp | カメラモジュール |
EP2852150A1 (en) * | 2013-09-18 | 2015-03-25 | BlackBerry Limited | Using narrow field of view monochrome camera for enhancing a zoomed colour image |
JP2015159357A (ja) * | 2014-02-21 | 2015-09-03 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
JP2015197745A (ja) * | 2014-03-31 | 2015-11-09 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理方法及びプログラム |
US20160117829A1 (en) * | 2014-10-23 | 2016-04-28 | Samsung Electronics Co., Ltd. | Electronic device and method for processing image |
Also Published As
Publication number | Publication date |
---|---|
US20190253593A1 (en) | 2019-08-15 |
EP3525447A1 (en) | 2019-08-14 |
EP3525447B1 (en) | 2023-10-25 |
CN109906599A (zh) | 2019-06-18 |
CN109906599B (zh) | 2020-09-18 |
KR102229811B1 (ko) | 2021-03-18 |
JP6802372B2 (ja) | 2020-12-16 |
KR20190068618A (ko) | 2019-06-18 |
WO2018076460A1 (zh) | 2018-05-03 |
US10827107B2 (en) | 2020-11-03 |
EP3525447A4 (en) | 2019-12-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6802372B2 (ja) | 端末のための撮影方法及び端末 | |
CN107948519B (zh) | 图像处理方法、装置及设备 | |
KR102279436B1 (ko) | 이미지 처리 방법, 장치 및 기기 | |
KR102293443B1 (ko) | 듀얼 카메라를 이용한 이미지 처리 방법 및 이동 단말기 | |
KR102306283B1 (ko) | 이미지 처리 방법 및 장치 | |
JP7145208B2 (ja) | デュアルカメラベースの撮像のための方法および装置ならびに記憶媒体 | |
US10009540B2 (en) | Image processing device, image capturing device, and image processing method for setting a combination parameter for combining a plurality of image data | |
WO2017045558A1 (zh) | 景深调节方法、装置及终端 | |
CN110324532B (zh) | 一种图像虚化方法、装置、存储介质及电子设备 | |
KR20200031169A (ko) | 이미지 처리 방법 및 장치 | |
CN108024058B (zh) | 图像虚化处理方法、装置、移动终端和存储介质 | |
CN112866549B (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 | |
CN109409147A (zh) | 一种条码识别方法和装置 | |
CN112019734B (zh) | 图像采集方法、装置、电子设备和计算机可读存储介质 | |
CN112991245A (zh) | 双摄虚化处理方法、装置、电子设备和可读存储介质 | |
US20160292842A1 (en) | Method and Apparatus for Enhanced Digital Imaging | |
CN112104796B (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 | |
CN112866554B (zh) | 对焦方法和装置、电子设备、计算机可读存储介质 | |
CN104811602A (zh) | 移动终端的自拍方法及其装置 | |
CN115086558B (zh) | 对焦方法、摄像设备、终端设备及存储介质 | |
JP7458723B2 (ja) | 画像処理装置、撮像装置、制御方法、およびプログラム | |
CN111835968B (zh) | 图像清晰度还原方法及装置、图像拍摄方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190531 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190531 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200311 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200331 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200626 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20201104 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201126 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6802372 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |