JP7185434B2 - 複数のカメラを用いて映像を取得するための電子装置及びこれを用いた映像処理方法 - Google Patents

複数のカメラを用いて映像を取得するための電子装置及びこれを用いた映像処理方法 Download PDF

Info

Publication number
JP7185434B2
JP7185434B2 JP2018141098A JP2018141098A JP7185434B2 JP 7185434 B2 JP7185434 B2 JP 7185434B2 JP 2018141098 A JP2018141098 A JP 2018141098A JP 2018141098 A JP2018141098 A JP 2018141098A JP 7185434 B2 JP7185434 B2 JP 7185434B2
Authority
JP
Japan
Prior art keywords
image
camera
external object
processor
electronic device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018141098A
Other languages
English (en)
Other versions
JP2019030007A (ja
Inventor
知 學 金
東 禹 李
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of JP2019030007A publication Critical patent/JP2019030007A/ja
Application granted granted Critical
Publication of JP7185434B2 publication Critical patent/JP7185434B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681—Motion detection
    • H04N23/6812—Motion detection based on additional sensors, e.g. acceleration sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/22—Matching criteria, e.g. proximity measures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4023—Scaling of whole images or parts thereof, e.g. expanding or contracting based on decimating pixels or lines of pixels; based on inserting pixels or lines of pixels
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/11—Region-based segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/97—Determining parameters from multiple pictures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/62—Control of parameters via user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682—Vibration or motion blur correction
    • H04N23/683—Vibration or motion blur correction performed by a processor, e.g. controlling the readout of an image memory
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682—Vibration or motion blur correction
    • H04N23/684—Vibration or motion blur correction performed by controlling the image sensor readout, e.g. by controlling the integration time
    • H04N23/6845—Vibration or motion blur correction performed by controlling the image sensor readout, e.g. by controlling the integration time by combination of a plurality of images sequentially taken
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682—Vibration or motion blur correction
    • H04N23/685—Vibration or motion blur correction performed by mechanical compensation
    • H04N23/687—Vibration or motion blur correction performed by mechanical compensation by shifting the lens or sensor position
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20092—Interactive image processing based on input by user
    • G06T2207/20104—Interactive definition of region of interest [ROI]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Data Mining & Analysis (AREA)
  • Evolutionary Computation (AREA)
  • Evolutionary Biology (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • General Engineering & Computer Science (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Adjustment Of Camera Lenses (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Exposure Control For Cameras (AREA)

Description

本発明は、映像を撮影する電子装置に関し、特に、複数のカメラを用いて映像を取得するための電子装置及びこれを用いた映像処理方法に関する。
一般的に、電子装置は外部オブジェクトを撮影してイメージ又は動画を生成及び記憶するようにカメラ機能を提供している。
近年、電子装置は、近距離の外部オブジェクトだけではなく遠距離の外部オブジェクトに対してもデジタルズームを介して高画質の写真又は映像を取得することができる複数のカメラ（例えば、デュアルカメラ）を備えることができる。
複数のカメラそれぞれは画角が相違する可能性がある。
近年、電子装置は映像を拡大して撮影しようとする場合、画角が相違する複数のカメラから取得されたイメージを合成してズームを具現する技術が開発されてきている。
しかし、前述の画角が相違する複数のカメラから取得されたイメージを合成してズームを具現する方法を用いる場合、中間画角ズームでのイメージ画質が低下するという問題がある。
特開２００４－２９７５１６号公報
本発明は上記従来の映像を撮影する電子装置における問題点に鑑みてなされたものであって、本発明の目的は、複数のカメラを用いて映像を取得するための電子装置及びこれを用いた映像処理方法を提供することにある。
本発明の多様な実施形態によれば、電子装置は画角が相違する複数のカメラのうちの第１カメラから取得された外部オブジェクトに対するイメージと、第２カメラから取得された第２カメラレンズ部の移動により設定された角度に対応する外部オブジェクトに対する複数のイメージを合成し、前記外部オブジェクトに対するイメージを生成することができる。
上記目的を達成するためになされた本発明による電子装置は、電子装置であって、第１カメラと、レンズ部と、前記レンズ部の角度を調節して前記レンズ部の光軸の方向を変更することができる駆動部と、を含む第２カメラと、プロセッサと、を有し、前記プロセッサは、外部オブジェクト（ｏｂｊｅｃｔ）に対する撮影信号を受信し、前記受信した撮影信号に基づいて前記外部オブジェクトに対するイメージを撮影し、前記撮影する動作の一部として、前記第１カメラを用いて前記外部オブジェクトに対する第１イメージを取得し、前記第２カメラの前記レンズ部を第１方向に設定して前記第１方向に対応する前記外部オブジェクトの少なくとも一部に対する第２イメージを取得し、前記第２カメラの前記レンズ部を第２方向に設定して前記第２方向に対応する前記外部オブジェクトの少なくとも他の一部に対する第３イメージを取得し、前記第１イメージの少なくとも一部と前記第２イメージの少なくとも一部を合成し、前記第１イメージの少なくとも他の一部と前記第３イメージの少なくとも一部を合成して前記外部オブジェクトに対するイメージを生成し、前記第２カメラの前記レンズ部は、前記第２カメラのイメージセンサーのリードアウト時間の間、前記第１方向から前記第２方向に移動するように設定されることを特徴とする。
上記目的を達成するためになされた本発明による電子装置の映像処理方法は、複数のカメラを用いて映像を取得するための電子装置の映像処理方法であって、外部オブジェクトに対する撮影信号が受信されたことに応答し、第１カメラを用い、前記外部オブジェクトに対する第１イメージを取得する段階と、第２カメラを用い、前記第２カメラに含まれた駆動部を介して前記第２カメラのレンズ部を第１方向に設定して前記第１方向に対応する前記外部オブジェクトの少なくとも一部に対する第２イメージを取得し、前記第２カメラの前記レンズ部を第２方向に設定して前記第２方向に対応する前記外部オブジェクトの少なくとも他の一部に対する第３イメージを取得する段階と、前記第１イメージの少なくとも一部と前記第２イメージの少なくとも一部を合成し、前記第１イメージの少なくとも他の一部と前記第３イメージの少なくとも一部を合成して前記外部オブジェクトに対するイメージを生成する段階と、を有し、前記第２カメラの前記レンズ部は、前記第２カメラのイメージセンサーのリードアウト時間の間、前記第１方向から前記第２方向に移動するように設定されることを特徴とする。
本発明に係る複数のカメラを用いて映像を取得するための電子装置及びこれを用いた映像処理方法によれば、電子装置はイメージを拡大して撮影しようとする場合、画角が相違する複数のカメラのうちの第１カメラから取得された外部オブジェクトに対するイメージと第２カメラから取得された第２カメラレンズ部の移動によって設定された角度に対応する外部オブジェクトに対する複数のイメージを合成する動作を介して、中間画角ズームでも向上した画質のイメージを提供することができる、という効果がある。
本発明の一実施形態によるネットワーク環境内の複数のカメラを用いて映像を取得するための電子装置の構成を示すブロック図である。 多様な実施形態による複数のカメラを用いて映像を取得するためのカメラモジュールの概略構成を示すブロック図である。 本発明の一実施形態による複数のカメラを用いて映像を取得するための電子装置の概略構成を示すブロック図である。 本発明の一実施形態による複数のカメラを用いて映像を取得するためのカメラモジュールの概略構成を示すブロック図である。 本発明の一実施形態による映像処理方法を説明するためのフローチャートである。 本発明の一実施形態による映像処理方法を説明するためのフローチャートである。 本発明の一実施形態による外部オブジェクトの位置による第２カメラレンズ部の方向を調整する方法を説明するための図である。 本発明の多様な実施形態による外部オブジェクトに対するイメージを取得する速度を設定する方法を説明するための図である。 本発明の一実施形態による第２カメラを介して取得された複数のイメージを整合及びステッチングする方法を説明するための図である。 本発明の一実施形態による映像処理方法を説明するための図である。 本発明の一実施形態による映像処理方法を説明するためのフローチャートである。 本発明の一実施形態による映像処理方法を説明するための図である。
図１は、本発明の一実施形態によるネットワーク環境１００内の複数のカメラを用いて映像を取得するための電子装置１０１の構成を示すブロック図である。
図１を参照すると、ネットワーク環境１００において電子装置１０１は、第１ネットワーク１９８（例えば、近距離無線通信）を介して電子装置１０２と通信するか、又は第２ネットワーク１９９（例えば、遠距離無線通信）を介して電子装置１０４又はサーバー１０８と通信することができる。
一実施形態によれば、電子装置１０１は、サーバー１０８を介して電子装置１０４と通信することができる。
一実施形態によれば、電子装置１０１は、プロセッサ１２０、メモリー１３０、入力装置１５０、音響出力装置１５５、表示装置１６０、オーディオモジュール１７０、センサーモジュール１７６、インターフェース１７７、ハプティックモジュール１７９、カメラモジュール１８０、電力管理モジュール１８８、バッテリー１８９、通信モジュール１９０、加入者識別モジュール１９６、及びアンテナモジュール１９７を含む。
他の実施形態では、電子装置１０１において、これら構成要素のうちの少なくとも一つ（例えば、表示装置１６０又はカメラモジュール１８０）を省略したり、他の構成要素を追加することもできる。
また、他の実施形態では、例えば、表示装置１６０（例えば、ディスプレイ）にエンベッディングされたセンサーモジュール１７６（例えば、指紋センサー、虹彩センサー、又は照度センサー）の場合のように一部の構成要素が統合されて具現することもできる。
プロセッサ１２０は、例えば、ソフトウェア（例えば、プログラム１４０）を駆動してプロセッサ１２０に接続された電子装置１０１の少なくとも一つの他の構成要素（例えば、ハードウェア又はソフトウェア構成要素）を制御することができ、多様なデータ処理及び演算を行う。
プロセッサ１２０は、他の構成要素（例えば、センサーモジュール１７６又は通信モジュール１９０）から受信した命令又はデータを揮発性メモリー１３２にロードして処理し、結果データを非揮発性メモリー１３４に記憶する。
一実施形態によれば、プロセッサ１２０は、メインプロセッサ１２１（例えば、中央処理装置又はアプリケーションプロセッサ）、及びこれとは独立的に操作され、追加的又は概略的に、メインプロセッサ１２１より低電力を使用したり、又は指定された機能に特化された補助プロセッサ１２３（例えば、グラフィック処理装置、イメージシグナルプロセッサ、センサーハーブプロセッサ、又はコミュニケーションプロセッサ）を含む。
ここで、補助プロセッサ１２３は、メインプロセッサ１２１とは別個で、又はエンベッディングされて操作することができる。
このような場合、補助プロセッサ１２３は、例えば、メインプロセッサ１２１がインアクティブ（例えば、スリップ）状態にあるうちにメインプロセッサ１２１の代わり、又はメインプロセッサ１２１がアクティブ（例えば、アプリケーション実行）状態にあるうちにメインプロセッサ１２１と共に、電子装置１０１の構成要素のうちの少なくとも一つの構成要素（例えば、表示装置１６０、センサーモジュール１７６、又は通信モジュール１９０）に係る機能又は状態の少なくとも一部を制御することができる。
一実施形態によれば、補助プロセッサ１２３（例えば、イメージシグナルプロセッサ又はコミュニケーションプロセッサ）は、機能的に関連する他の構成要素（例えば、カメラモジュール１８０又は通信モジュール１９０）の一部構成要素として具現させることができる。
メモリー１３０は、電子装置１０１の少なくとも一つの構成要素（例えば、プロセッサ１２０又はセンサーモジュール１７６）によって用いられる多様なデータ、例えば、ソフトウェア（例えば、プログラム１４０）及び、これに関連する命令に対する入力データ又は出力データを記憶する。
メモリー１３０は、揮発性メモリー１３２又は非揮発性メモリー１３４を含むことができる。
プログラム１４０は、メモリー１３０に記憶されるソフトウェアであり、例えば、オペレーティングシステム１４２、ミドルウェア１４４、又はアプリケーション１４６を含む。
入力装置１５０は、電子装置１０１の構成要素（例えば、プロセッサ１２０）に用いられる命令又はデータを電子装置１０１の外部（例えば、ユーザ）から受信するための装置として、例えば、マイク、マウス、又はキーボードを含む。
音響出力装置１５５は、音響信号を電子装置１０１の外部で出力するための装置として、例えば、マルチメディア再生又は録音再生のように一般的な用途で用いられるスピーカーと電話受信専用で用いられるレシーバーを含む。
一実施形態によれば、レシーバーは、スピーカーと一体又は別途で形成することができる。
表示装置１６０は、電子装置１０１のユーザに情報を視覚的に提供するための装置として、例えば、ディスプレイ、ホログラム装置、又はプロジェクタ、及び当該装置を制御するための制御回路を含む。
一実施形態によれば、表示装置１６０は、タッチ回路（ｔｏｕｃｈ ｃｉｒｃｕｉｔｒｙ）又はタッチに対する圧力の強度を測定することができる圧力センサーを含むことができる。
オーディオモジュール１７０は、音と電気信号を双方向で変換させる。
一実施形態によれば、オーディオモジュール１７０は、入力装置１５０を介して音を取得したり、音響出力装置１５５、又は電子装置１０１と有線又は無線で接続された外部電子装置（例えば、電子装置１０２（例えば、スピーカー又はヘッドフォン））を介して音を出力する。
センサーモジュール１７６は、電子装置１０１の内部の動作状態（例えば、電力又は温度）、又は外部の環境状態に対応する電気信号又はデータ値を生成する。
センサーモジュール１７６は、例えば、ジェスチャーセンサー、ジャイロセンサー、気圧センサー、マグネチックセンサー、加速度センサー、グリップセンサー、近接センサー、カラーセンサー、ＩＲ（ｉｎｆｒａｒｅｄ）センサー、生体センサー、温度センサー、湿度センサー、又は照度センサーを含むことができる。
インターフェース１７７は、外部電子装置（例えば、電子装置１０２）と有線又は無線で接続することができる指定されたプロトコルをサポートする。
一実施形態によれば、インターフェース１７７は、ＨＤＭＩ（登録商標）（ｈｉｇｈ ｄｅｆｉｎｉｔｉｏｎ ｍｕｌｔｉｍｅｄｉａ ｉｎｔｅｒｆａｃｅ）、ＵＳＢ（ｕｎｉｖｅｒｓａｌ ｓｅｒｉａｌ ｂｕｓ）インターフェース、ＳＤカードインターフェース、又はオーディオインターフェースなどを含むことができる。
接続端子１７８は、電子装置１０１と外部電子装置（例えば、電子装置１０２）を物理的に接続させることができるコネクター、例えば、ＨＤＭＩ（登録商標）コネクター、ＵＳＢコネクター、ＳＤカードコネクター、又はオーディオコネクター（例えば、ヘッドフォンコネクター）などを含む。
ハプティックモジュール１７９は、電気的信号をユーザが触覚又は運動感覚を介して認知することができる機械的な刺激（例えば、振動又は動き）又は電気的な刺激に変換する。
ハプティックモジュール１７９は、例えば、モーター、圧電素子、又は電気刺激装置を含むことができる。
カメラモジュール１８０は、静止画像及び動画を撮影する。
一実施形態によれば、カメラモジュール１８０は、一つ以上のレンズ、イメージセンサー、イメージシグナルプロセッサ、又はフラッシュを含むことができる。
電力管理モジュール１８８は、電子装置１０１に供給される電力を管理するためのモジュールであり、例えば、ＰＭＩＣ（ｐｏｗｅｒ ｍａｎａｇｅｍｅｎｔ ｉｎｔｅｇｒａｔｅｄ ｃｉｒｃｕｉｔ）の少なくとも一部として構成される。
バッテリー１８９は、電子装置１０１の少なくとも一つの構成要素に電力を供給するための装置として、例えば、再充電不可能な１次電池、再充電可能な２次電池、又は燃料電池を含むことができる。
通信モジュール１９０は、電子装置１０１と外部電子装置（例えば、電子装置１０２、電子装置１０４）、又はサーバー１０８）の間の有線又は無線通信チャンネルの確立、及び確立された通信チャンネルを通じる通信実行をサポートする。
通信モジュール１９０は、プロセッサ１２０（例えば、アプリケーションプロセッサ）と独立的に操作される、有線通信又は無線通信をサポートする一つ以上のコミュニケーションプロセッサを含むことができる。
一実施形態によれば、通信モジュール１９０は、無線通信モジュール１９２（例えば、セルラー通信モジュール、近距離無線通信モジュール、又はＧＮＳＳ（ｇｌｏｂａｌ ｎａｖｉｇａｔｉｏｎ ｓａｔｅｌｌｉｔｅ ｓｙｓｔｅｍ）通信モジュール）又は有線通信モジュール１９４（例えば、ＬＡＮ（ｌｏｃａｌ ａｒｅａ ｎｅｔｗｏｒｋ）通信モジュール、又は電力線通信モジュール）を含み、その中に該当する通信モジュールを用いて第１ネットワーク１９８（例えば、ブルートゥース（登録商標）、ＷｉＦｉｄｉｒｅｃｔ、又はＩｒＤＡ（ｉｎｆｒａｒｅｄ ｄａｔａ ａｓｓｏｃｉａｔｉｏｎ）のような近距離通信ネットワーク）又は第２ネットワーク１９９（例えば、セルラネットワーク、インターネット、又はコンピューターネットワーク（例えば、ＬＡＮ又はＷＡＮ）のような遠距離通信ネットワーク）を介して外部電子装置と通信する。
上述した多くの種類の通信モジュール１９０は、一つのチップで具現したり、又はそれぞれ別途のチップで具現することができる。
一実施形態によれば、無線通信モジュール１９２は、加入者識別モジュール１９６に記憶されたユーザ情報を用いて通信ネットワーク内で電子装置１０１を区別及び認証することができる。
アンテナモジュール１９７は、信号又は電力を外部に送信したり外部から受信するための一つ以上のアンテナを含む。
一実施形態によれば、通信モジュール１９０（例えば、無線通信モジュール１９２）は、通信方式に適合したアンテナを介して信号を外部電子装置に送信したり、外部電子装置から受信することができる。
上記構成要素の内の一部構成要素は、周辺機器との間の通信方式（例えば、バス、ＧＰＩＯ（ｇｅｎｅｒａｌ ｐｕｒｐｏｓｅ ｉｎｐｕｔ／ｏｕｔｐｕｔ）、ＳＰＩ（ｓｅｒｉａｌ ｐｅｒｉｐｈｅｒａｌ ｉｎｔｅｒｆａｃｅ）、又はＭＩＰＩ（ｍｏｂｉｌｅ ｉｎｄｕｓｔｒｙ ｐｒｏｃｅｓｓｏｒ ｉｎｔｅｒｆａｃｅ））を介して互いに接続されて信号（例えば、命令又はデータ）を相互間に交換することができる。
一実施形態によれば、命令又はデータは、第２ネットワーク１９９に接続されたサーバー１０８）を介して電子装置１０１と外部の電子装置１０４との間で送信又は受信する。
電子装置（１０２、１０４）それぞれは、電子装置１０１と同一又は他の種類の装置であっても良い。
一実施形態によれば、電子装置１０１で実行される動作の全部又は一部は、他の一つ又は複数の外部電子装置で実行することができる。
一実施形態によれば、電子装置１０１が、ある機能やサービスを自動で又はリクエストにより実行しなければならない場合に、電子装置１０１は、機能又はサービスを自身で実行させる代りに、又は追加的にそれと関連した少なくとも一部機能を外部電子装置にリクエストすることができる。
リクエストを受信した外部電子装置は、リクエストされた機能又は追加機能を行い、その結果を電子装置１０１へ伝達することができる。
電子装置１０１は、受信された結果をそのまま、又は追加的に処理してリクエストされた機能やサービスを提供する。
このために、例えば、クラウドコンピューティング、分散コンピューティング、又はクライアント－サーバーコンピューティング技術を用いることもできる。
図２は、本発明の一実施形態による複数のカメラを用いて映像を取得するためのカメラモジュール１８０の概略構成を示すブロック図（符号２００）である。
図２を参照すると、カメラモジュール１８０は、レンズアセンブリ２１０、フラッシュ２２０、イメージセンサー２３０、イメージスタビライザー２４０、メモリー２５０（例えば、バッファーメモリー）、イメージシグナルプロセッサ２６０を含むことができる。
レンズアセンブリ２１０は、イメージ撮影の対象である被写体（オブジェクト：ｏｂｊｅｃｔ）から放出される光を収集する。
レンズアセンブリ２１０は、一つ又はその以上のレンズを含むことができる。
一実施形態によれば、カメラモジュール１８０は、複数のレンズアセンブリ２１０を含む。
このような場合、カメラモジュール１８０は、例えば、デュアルカメラ、３６０度カメラ、又は球形カメラ（ｓｐｈｅｒｉｃａｌ ｃａｍｅｒａ）であれば良い。
複数のレンズアセンブリ２１０は、同一のレンズ属性（例えば、画角、焦点距離、自動焦点、ｆナンバー（ｆ ｎｕｍｂｅｒ）、又は光学ズームを持つか、又は少なくとも一つのレンズアセンブリは他のレンズアセンブリと少なくとも一つの異なるレンズ属性を持つことができる。
レンズアセンブリ２１０は、例えば、広角レンズ又は望遠レンズを含むことができる。
フラッシュ２２０は、被写体から放出される光を強化するために用いられる光源を放出する。
フラッシュ２２０は、一つ以上の発光ダイオード（例えば、ＲＧＢ（ｒｅｄ－ｇｒｅｅｎ－ｂｌｕｅ）ＬＥＤ、ｗｈｉｔｅ ＬＥＤ、ｉｎｆｒａｒｅｄ ＬＥＤ、又はｕｌｔｒａ ｖｉｏｌｅｔ ＬＥＤ）、又はｘｅｎｏｎ ｌａｍｐを含むことができる。
イメージセンサー２３０は、被写体からレンズアセンブリ２１０を介して伝達した光を電気的な信号に変換することによって、被写体に対応するイメージを取得する。
一実施形態によれば、イメージセンサー２３０は、例えば、ＲＧＢセンサー、ＢＷ（ｂｌａｃｋ ａｎｄ ｗｈｉｔｅ）センサー、ＩＲセンサー、又はＵＶセンサーのように属性が異なるイメージセンサーのうちから選択された一つのイメージセンサー、同一属性を持つ複数のイメージセンサー、又は他の属性を持つ複数のイメージセンサーを含むことができる。
イメージセンサー２３０に含まれたそれぞれのイメージセンサーは、例えば、ＣＣＤ（ｃｈａｒｇｅｄ ｃｏｕｐｌｅｄ ｄｅｖｉｃｅ）センサー又はＣＭＯＳ（ｃｏｍｐｌｅｍｅｎｔａｒｙ ｍｅｔａｌ ｏｘｉｄｅ ｓｅｍｉｃｏｎｄｕｃｔｏｒ）センサーで具現することができる。
イメージスタビライザー２４０は、カメラモジュール１８０又はこれを含む電子装置１０１の動きに反応し、撮影されるイメージに対する動きによる否定的な影響（例えば、イメージ振れ）を少なくとも一部補うためにレンズアセンブリ２１０に含まれた少なくとも一つのレンズ又はイメージセンサー２３０を特定の方向に動かすか、制御（例えば、リードアウト（ｒｅａｄ－ｏｕｔ）タイミングを調整など）する。
一実施形態によれば、イメージスタビライザー２４０は、例えば、光学式イメージスタビライザーで具現することができ、カメラモジュール１８０の内部又は外部に配置されたジャイロセンサー（図示せず）又は加速度センサー（図示せず）を用いて動きを検出することができる。
メモリー２５０は、イメージセンサー２３０を介して取得されたイメージの少なくとも一部を次のイメージ処理作業のために少なくとも一時記憶する。
例えば、シャッターによるイメージ取得が遅延したり、又は複数のイメージが高速に取得される場合、取得された原本（ｏｒｉｇｉｎａｌ）イメージ（例えば、高い解像度のイメージ）はメモリー２５０に記憶され、それに対応する写本（ｔｈｕｍｂｎａｉｌ）イメージ（例えば、低い解像度のイメージ）は表示装置１６０を介してプレビューすることができる。
以後、指定された条件が満足されると（例えば、ユーザ入力又はシステム命令）メモリー２５０に記憶された原本イメージの少なくとも一部が、例えば、イメージシグナルプロセッサ２６０により取得されて処理される。
一実施形態によれば、メモリー２５０は、メモリー１３０の少なくとも一部でもあり、又はこれとは独立的に操作される別途のメモリーから構成することもできる。
イメージシグナルプロセッサ２６０は、イメージセンサー２３０を介して取得されたイメージ又はメモリー２５０に記憶されたイメージに対してイメージ処理（例えば、デプスマップ（ｄｅｐｔｈ ｍａｐ）生成、３次元モデリング、パノラマ生成、特徴点抽出、イメージ合成、又はイメージ補償（例えば、ノイズ減少、解像度調整、明るさ調整、ブラーリング（ｂｌｕｒｒｉｎｇ）、シャープニング（ｓｈａｒｐｅｎｉｎｇ）、又はソフテニング（ｓｏｆｔｅｎｉｎｇ））を実行する。
追加的又は概略的に、イメージシグナルプロセッサ２６０は、カメラモジュール１８０に含まれた構成要素のうちので少なくとも一つ（例えば、イメージセンサー２３０）に対する制御（例えば、露出時間制御、又はリードアウトタイミング制御など）を実行することができる。
イメージシグナルプロセッサ２６０によって処理されたイメージは、追加処理のためにメモリー２５０にさらに記憶されたり、カメラモジュール１８０の外部構成要素（例えば、メモリー１３０、表示装置１６０、電子装置１０２、電子装置１０４、又はサーバー１０８）で伝達され得る。
一実施形態によれば、イメージシグナルプロセッサ２６０は、プロセッサ１２０の少なくとも一部より構成したり、プロセッサ１２０と独立的に操作される別途のプロセッサで構成することができる。
別途のプロセッサで構成された場合、イメージシグナルプロセッサ２６０によって処理されたイメージは、プロセッサ１２０によってそのまま又は追加のイメージ処理を経た後、表示装置１６０を介して表示される。
一実施形態によれば、電子装置１０１は、それぞれ異なる属性又は機能を有する２つ以上のカメラモジュール１８０を含み得る。
このような場合、例えば、少なくとも一つのカメラモジュール１８０は、広角カメラ又は全面カメラであり、少なくとも一つの他のカメラモジュールは望遠カメラ又は後面カメラであり得る。
図３は、本発明の一実施形態による複数のカメラを用いて映像を取得するための電子装置の概略構成を示すブロック図である。
図３を参照すると、電子装置３００（例えば、図１の電子装置１０１）は、無線通信回路３１０（例えば、図１の通信モジュール１９０）、メモリー３２０（例えば、図１のメモリー１３０）、タッチスクリーンディスプレイ３３０（例えば、図１の表示装置１６０）、カメラモジュール３４０（例えば、図１のカメラモジュール１８０）、及びプロセッサ３５０（例えば、図１のプロセッサ１２０）を含む。
本発明の一実施形態によれば、無線通信回路３１０（例えば、図１の通信モジュール１９０）は、電子装置３００（例えば、図１の電子装置１０１）と外部電子装置（例えば、図１の電子装置１０２）、電子装置１０４又はサーバー（例えば、図１のサーバー１０８）との間の通信を接続する。
本発明の一実施形態によれば、メモリー３２０（例えば、図１のメモリー１３０）は、カメラモジュール３４０の動作プログラム及び本発明の実施形態によるプログラム、カメラモジュール３４０から撮影されるイメージを記憶する。
本発明の一実施形態によれば、タッチスクリーンディスプレイ３３０（例えば、図１の表示装置１６０）は、表示部３３１とタッチパネル３３３を含む一体型から構成することができる。
本発明の一実施形態によれば、タッチスクリーンディスプレイ３３０は、カメラモジュール３４０から受信した映像をプレビュー画面で表示することができる。
一実施形態によれば、タッチスクリーンディスプレイ３３０は、プロセッサ３５０の制御下で、第１カメラ３４１から取得した外部オブジェクト（被写体）に対する第１イメージの少なくとも一部と第２カメラ３４３から取得した第２カメラレンズ部の第１方向に対応する外部オブジェクトに対する第２イメージの少なくとも一部が合成され、第１イメージの少なくとも他の一部と第２カメラレンズ部の第２方向に対応する外部オブジェクトに対する第３イメージの少なくとも一部が合成された外部オブジェクトに対するイメージを表示することができる。
本発明の一実施形態によれば、カメラモジュール３４０（例えば、図１のカメラモジュール１８０）は、収集した映像をプレビュー画面として表示部３３１に伝達してユーザがカメラモジュール３４０を介して映し出される映像を確認する。
カメラモジュール３４０は、撮影をリクエストする入力に応答し、撮影をリクエストする入力が発生した時点に収集された映像を撮影してイメージデータを生成する。
一実施形態によれば、第１カメラ３４１を用いた撮影及び第２カメラ３４３を用いた撮影は同時に実行される。
一実施形態によれば、第１カメラ３４１は、第２カメラ３４３と比べてより広い範囲を示すイメージを撮影することができる。
例えば、第１カメラ３４１は、第２カメラ３４３と比べてより広い画角を提供することができる。
本発明の一実施形態によれば、プロセッサ３５０（例えば、図１のプロセッサ１２０）は、電子装置３００の全般的な動作及び電子装置３００の内部構成の間の信号流れを制御し、データ処理を実行し、バッテリーからの内部構成への電源供給を制御する。
本発明の一実施形態によれば、プロセッサ３５０は、カメラモジュール３４０から受信した外部オブジェクトを含むプレビュー画面が表示されているうちに外部オブジェクトに対する撮影信号を受信する。
プロセッサ３５０は、外部オブジェクトに対する撮影をリクエストする入力を受信したことに応答し、第１カメラ３４１から外部オブジェクトに対する第１イメージを取得する。
例えば、第１カメラは広角レンズを含むことができ、第１イメージは広角レンズを介して取得された広い画角を持つ外部オブジェクトに対するイメージであり得る。
一実施形態によれば、プロセッサ３５０は、第２カメラ３４３から駆動部によって調節された角度に対応する外部オブジェクトに対する複数のイメージを取得する。
例えば、プロセッサ３５０は、駆動部によって調節された第２カメラレンズ部の第１方向に対応する外部オブジェクトに対する第２イメージを取得する。
また、プロセッサ３５０は、第２カメラ３４３から駆動部によって調節された第２カメラレンズ部の第２方向に対応する外部オブジェクトに対する第３イメージを取得する。
一実施形態によれば、第２カメラ３４３は、望遠レンズを含むことができる。
取得された第２イメージ及び第３イメージは、望遠レンズを介して取得した第１カメラ３４１より狭い画角を持つ外部オブジェクトの第２カメラレンズ部の第１方向及び第２方向に対するイメージであり得る。
一実施形態によれば、プロセッサ３５０は、第１カメラ３４１から取得した第１イメージで第２カメラ３４３から取得した第２イメージの少なくとも一部又は第３イメージの少なくとも一部に対応する領域を決定する。
プロセッサ３５０は、第２イメージの少なくとも一部又は第３イメージの少なくとも一部の解像度を調整する。
プロセッサ３５０は、決定された第２イメージの少なくとも一部又は第３イメージの少なくとも一部に対応する第１イメージの領域に解像度が調整された第２イメージの少なくとも一部又は第３イメージの少なくとも一部を合成して外部オブジェクトに対するイメージを生成する。
一実施形態によれば、プロセッサ３５０は、外部オブジェクトを含むプレビュー画面でＲＯＩ（ｒｅｇｉｏｎ ｏｆ ｉｎｔｅｒｅｓｔ）を設定する。
例えば、ＲＯＩは、自動で認識されたり、又はユーザにより選択される。
一実施形態によれば、ＲＯＩが設定された場合、前述の第２イメージ及び第３イメージを取得する動作は、駆動部によって調節された第２カメラレンズ部の第１方向及び第２方向に対応するＲＯＩに対するイメージであり得る。
また、ＲＯＩが設定された場合、前述の第１イメージの領域で第２イメージの少なくとも一部又は第３イメージの少なくとも一部を合成する動作は、第１イメージの領域でＲＯＩに対する第２イメージの少なくとも一部又は第３イメージの少なくとも一部を合成する動作であり得る。
図４は、本発明の一実施形態による複数のカメラを用いて映像を取得するためのカメラモジュールの概略構成を示すブロック図である。
図４を参照すると、プロセッサ（例えば、図２のイメージシグナルプロセッサ２６０又は図３のプロセッサ３５０）は、外部オブジェクトの撮影をリクエストする入力に応答し、第１カメラ４１０（例えば、図３の第１カメラ３４１）から外部オブジェクトに対するイメージを取得する。
例えば、第１カメラ４１０は、レンズ４１１（例えば、広角レンズ）を介して受光センサー４１３）に受信される光源の量に基づいて外部オブジェクトに対するイメージを取得する。
一実施形態によれば、プロセッサは、外部オブジェクトの撮影をリクエストする入力に応答し、第２カメラ４２０（例えば、図３の第２カメラ３４３）から第２カメラレンズ部４２１（例えば、望遠レンズ）の移動によって設定された角度に対応する外部オブジェクトに対するイメージを取得する。
一実施形態によれば、角度計算部４２５は、入力される外部オブジェクトの位置とズームレベル４２３に基づいて第２カメラ４２０の位置を計算する。
角度計算部４２５は、計算された第２カメラ４２０の位置を操作部４２９に伝達する。
一実施形態によれば、時間計算部４２７は、イメージセンサー（例えば、図２のイメージセンサー２３０）のリードアウト（ｒｅａｄ－ｏｕｔ）時間の間に第２カメラレンズ部４２１が移動するように時間を計算する。
例えば、第２カメラレンズ部４２１が移動する動作は、第２カメラレンズ部４２１の光軸の方向が変更されるように角度を調節する動作であり得る。
時間計算部４２７は、計算された第２カメラレンズ部４２１の移動時間を操作部４２９に伝達する。
一実施形態によれば、操作部４２９は、位置センサー４３１から受信した第２カメラ４２０の角度での振れ位置を補正し、これに基づいて駆動部４３３を制御する。
また、操作部４２９は、時間計算部４２７から受信した第２カメラレンズ部４２１の移動時間に基づいて第２カメラレンズ部４２１を移動させるように駆動部４３３を制御する。
一実施形態によれば、駆動部４３３は、操作部４２９の制御下で第２カメラレンズ部４２１の方向及び位置を調整する。
例えば、駆動部４３３は、第２カメラレンズ部４２１を移動、例えば、上下左右方向に移動させる。
第２カメラ４２０は、第２カメラレンズ部４２１（例えば、望遠レンズ）を介して受光センサー４３５で受信される光源の量に基づいて駆動部４３３によって移動された第２カメラレンズ部４２１の上下左右方向のそれぞれに対応する外部オブジェクトに対するイメージを取得する。
一実施形態によれば、駆動部４３３は、調整された第２カメラレンズ部４２１の方向及び位置に基づいて取得された外部オブジェクトに対するイメージ４３７をメモリー４４１（例えば、図２のメモリー２５０）に記憶する。
外部オブジェクトに対するイメージ４３７は、調整された第２カメラレンズ部４２１の方向及び位置に対応する外部オブジェクトに対する複数のイメージを含む。
一実施形態によれば、駆動部４３３は、光学式イメージスタビライザー（ｏｐｔｉｃａｌ ｉｍａｇｅ ｓｔａｂｉｌｉｚｅｒ：ＯＩＳ）（例えば、図２のイメージスタビライザー２４０）を含むことができる。
例えば、プロセッサは、光学式イメージスタビライザーを少なくとも用いて第２カメラレンズ部４２１の角度を調節して第２カメラレンズ部４２１の光軸の方向を変更する。
一実施形態によれば、イメージ位置計算部４４３は、イメージ４３７の位置を計算する。
例えば、イメージ位置計算部４４３は、第１カメラ４１０から取得したイメージの領域で第２カメラ４２０から取得したイメージ４３７の位置を決定する。
例えば、図３で説明したように、第１カメラ４１０から取得した外部オブジェクトに対するイメージは、外部オブジェクトを含む広角映像であり得、第２カメラ４２０から取得した外部オブジェクトに対するイメージは、外部オブジェクトをズームした望遠映像であり得る。
イメージ位置計算部４４３は、外部オブジェクトを含む広角映像での外部オブジェクトをズームした望遠映像の位置を決定する。
一実施形態によれば、イメージ整合部４４５は、第２カメラ４２０から取得したイメージ４３７のサイズを縮小（ｓｃａｌｅ ｄｏｗｎ）し、イメージ位置計算部４４３によって決定された位置に基づいて整合する。
一実施形態によれば、イメージステッチング部（ｓｔｉｔｃｈｉｎｇ）４４７は、整合されたイメージを接合して一つのイメージに生成する。
一実施形態によれば、イメージ合成部４４９は、第１カメラ４１０から取得したイメージとイメージステッチング部４４７によって接合されたイメージを合成する。
一実施形態によれば、フィルターリング部４５１は、イメージ合成部４４９によって合成されたイメージをフィルターリングを介して境界部分などの不自然な部分及びノイズを除去し、外部オブジェクトの動き又は手ぶれによるブラー（ｂｌｕｒ）を補正する。
図５は、本発明の一実施形態による映像処理方法を説明するためのフローチャートである。
図５を参照すると、プロセッサ（例えば、図２のイメージシグナルプロセッサ２６０又は図３のプロセッサ３５０）は、カメラモジュール（例えば、図３のカメラモジュール３４０）から受信した外部オブジェクトを含む映像をプレビュー画面として表示する。
一実施形態によれば、プロセッサは、Ｓ５０１段階で、外部オブジェクトに対する撮影信号を受信する。
一実施形態によれば、プロセッサは、Ｓ５０１段階の外部オブジェクトに対する撮影をリクエストする入力を受信し、ズームレベルの入力をさらに受信する。
一実施形態によれば、プロセッサは、受信した撮影信号に応答し、外部オブジェクトに対するイメージを撮影する。
一実施形態によれば、プロセッサは、Ｓ５０３段階で、第１カメラ（例えば、図４の第１カメラ４１０）を用いて外部オブジェクトに対する第１イメージを取得する。
一実施形態によれば、第１カメラは広角レンズを含むことができ、広角レンズを介して広い画角を持つ外部オブジェクトに対する第１イメージを取得する。
一実施形態によれば、プロセッサは、Ｓ５０５段階で、第２カメラのレンズ部（例えば、図４の第２カメラレンズ部４２１）を駆動部（例えば、図４の駆動部４３３）を介して第１方向に設定して外部オブジェクトに対する第２イメージを取得し、第２カメラのレンズ部を駆動部を介して第２方向に設定して外部オブジェクトに対する第３イメージを取得する。
一実施形態によれば、駆動部は、イメージスタビライザー（例えば、図２のイメージスタビライザー２４０）を含むことができる。
プロセッサは、イメージスタビライザーを用いて第２カメラレンズ部の角度を調節することができる。
一実施形態によれば、第２カメラ（例えば、図４の第２カメラ４２０）は、望遠レンズを含む。
プロセッサは、望遠レンズを介して第１カメラより狭い画角を持つ外部オブジェクトに対するイメージを取得する。
例えば、プロセッサは、第２カメラのレンズ部の第１方向に対応する外部オブジェクトに対する第２イメージ及び第２カメラのレンズ部の第２方向に対応する外部オブジェクトに対する第３イメージを取得する。
一実施形態によれば、受信した撮影信号に応答して、Ｓ５０３段階の第１カメラから第１イメージを取得する動作、及びＳ５０５段階の第２カメラから第２イメージ及び第３イメージを取得する動作は、同時に実行する。
上述のＳ５０５段階は、後述する図７及び図８で、詳しく説明する。
一実施形態によれば、プロセッサは、Ｓ５０７段階で、第１イメージの少なくとも一部と、第２イメージの一部を合成して第１イメージの少なくとも他の一部と第３イメージの一部を合成し、外部オブジェクトに対するイメージを生成する。
上述のＳ５０７段階は、後述する図６、図９、及び図１０で、詳しく説明する。
図６は、本発明の一実施形態による映像処理方法を説明するためのフローチャートである
図６は、上述の図５でのＳ５０７段階の第１カメラ（例えば、図４の第１カメラ４１０）から取得したイメージと第２カメラ（例えば、図４の第２カメラ４２０）から取得したイメージを合成する動作を詳しく説明するためのフローチャートである。
図６を参照すると、プロセッサ（例えば、図２のイメージシグナルプロセッサ２６０又は図３のプロセッサ３５０）は、Ｓ６０１段階で、第１カメラを用いて取得した第１イメージで第２カメラを用いて取得した第２イメージの少なくとも一部又は第３イメージの少なくとも一部に対応する領域を決定する。
一実施形態によれば、プロセッサは、Ｓ６０３段階で、第２イメージの少なくとも一部又は第３イメージの少なくとも一部の解像度を調整する。
一実施形態によれば、プロセッサは、Ｓ６０５段階で、Ｓ６０１段階で決定された第２イメージの少なくとも一部又は第３イメージの少なくとも一部に対応する第１イメージの領域にＳ６０３段階で解像度が調整された第２イメージの少なくとも一部又は第３イメージの少なくとも一部を合成する。
一実施形態によれば、プロセッサは、第１イメージのサイズを拡大（ｓｃａｌｅ ｕｐ）し、第２イメージ及び第３イメージのサイズを縮小することができる。
プロセッサは、拡大された第１イメージの少なくとも一部と縮小された第２イメージの少なくとも一部を合成し、拡大された第１イメージの少なくとも他の一部と縮小された第３イメージの少なくとも一部を合成することができる。
図７は、本発明の一実施形態による外部オブジェクトの位置による第２カメラレンズ部の方向を調整する方法を説明するための図である。
図７を参照すると、符号＜７１０＞に示すようにプロセッサ（例えば、図２のイメージシグナルプロセッサ２６０又は図３のプロセッサ３５０）は、第１カメラ（例えば、図４の第１カメラ４１０）から外部オブジェクト７１５に対する第１イメージ７１１を取得する。
プロセッサは、第１イメージ７１１でズームレベルと外部オブジェクト７１５の位置（例えば、第１カメラと外部オブジェクト７１５）の間の距離情報）に基づいて第２カメラ（例えば、図４の第２カメラ４２０）から取得した少なくとも一つのイメージ、例えば、第２イメージ７１３のピクセル（ｐｉｘｅｌ）移動値を計算する。
例えば、ピクセル移動値は、外部オブジェクト７１５の同一部分に対応する第１イメージ７１１及び第２イメージ７１３内のピクセルの間の距離を示すことができる。
一実施形態によれば、プロセッサは、ピクセル移動値に基づいて第２カメラレンズ部（例えば、図４の第２カメラレンズ部４２１）の角度を計算する。
プロセッサは、計算された角度に基づいて符号＜７２０＞に示すように第２カメラ７２１レンズ部の第１角度７２３を符号＜７３０＞に示すように第２角度７３１で調節する。
一実施形態によれば、プロセッサは、計算された第２カメラレンズ部の角度で位置センサー（例えば、図４の位置センサー４３１）から受信した振れ（例えば、手ぶれ）位置角を補正する。
例えば、プロセッサは、撮影される外部オブジェクトに対する動きを少なくとも一部補うためにイメージセンサーを特定方向に動かすか、リードアウトタイミングを調整することができる。
図８は、本発明の一実施形態による外部オブジェクトに対するイメージを取得する速度を設定する方法を説明するための図である。
本発明の一実施形態によれば、プロセッサ（例えば、図２のイメージシグナルプロセッサ２６０又は図３のプロセッサ３５０）は、外部オブジェクトの撮影をリクエストする信号に応答し、第１カメラ（例えば、図４の第１カメラ４１０）から外部オブジェクトに対する第１イメージを取得する。
また、プロセッサは、外部オブジェクトの撮影をリクエストする信号に応答し、第２カメラ（例えば、図４の第２カメラ４２０）から外部オブジェクトに対する複数のイメージを取得する。
例えば、プロセッサは、第２カメラの駆動部（例えば、図４の駆動部４３３）によって調節された第２カメラレンズ部（例えば、図４の第２カメラレンズ部４２１）の角度に対応する外部オブジェクトに対する複数のイメージを第２カメラから取得する。
一実施形態によれば、プロセッサは、外部オブジェクトの撮影をリクエストする信号に応答し、第１カメラから外部オブジェクトに対する一つのイメージを取得する間に第２カメラから調節された第２カメラレンズ部の角度に対応する外部オブジェクトに対する複数のイメージを取得する。
一実施形態によれば、プロセッサは、イメージセンサー（例えば、図２のイメージセンサー２３０）のリードアウト時間が早い時間内に行われるように提供することができ、露出時間とイメージセンサーのリードアウト時間の間に第２カメラレンズ部の移動を実行することができる。
例えば、図８を参照すると、符号＜８１０＞は、第１カメラから外部オブジェクトに対するイメージを取得する動作を説明するための図であり、符号＜８２０＞は、第２カメラから第２カメラレンズ部の移動によって設定された角度に基づいて外部オブジェクトに対する複数のイメージを取得する動作を説明するための図である。
一実施形態によれば、符号＜８１０＞に示すようにプロセッサは、外部オブジェクトの撮影をリクエストする信号に応答し、露出時間の間（符号８１１）の第１カメラから外部オブジェクトに対する第１イメージを取得する。
例えば、第１イメージは、外部オブジェクトを含む広角映像であり得る。
一実施形態によれば、符号＜８２０＞に示すようにプロセッサは、外部オブジェクトの撮影をリクエストする信号に応答し、第２カメラレンズ部を移動（符号８２１）させて第１角度で制御する。
プロセッサは、第１露出時間の間（符号８２３）の第２カメラから第１角度に対応する外部オブジェクトに対する第２イメージを取得する。
プロセッサは、第２カメラレンズ部を移動（符号８２５）させて第２角度で制御する。
プロセッサは、第２露出時間の間（符号８２７）の第２カメラから第２角度に対応する外部オブジェクトに対する第３イメージを取得する。
プロセッサは、第２カメラレンズ部を移動（符号８２９）させて第３角度で制御する。
プロセッサは、第３露出時間の間（符号８３１）の第２カメラから第３角度に対応する外部オブジェクトに対する第４イメージを取得する。
プロセッサは、第２カメラレンズ部を移動（符号８３３）させて第４角度で制御する。
プロセッサは、第４露出時間の間（符号８３５）の第２カメラから第４角度に対応する外部オブジェクトに対する第５イメージを取得する。
例えば、第２イメージ乃至第５イメージは、第１角度乃至第４角度に対応する外部オブジェクトをズームした望遠映像であり得る。
一実施形態によれば、本発明は、符号＜８１０＞に示すように第１カメラから外部オブジェクトに対する一つのイメージ（例えば、第１イメージ）を取得する時間ｔ１（符号８４１）間、符号＜８２０＞に示すように第２カメラから第２カメラレンズ部の移動によって設定された角度に対応する外部オブジェクトに対する複数のイメージ（例えば、第２イメージ乃至第５イメージ）を取得する。
一実施形態によれば、プロセッサは、第１カメラから第１イメージを取得する時間ｔ１（符号８４１）間で第２カメラから第２イメージ乃至第５イメージを取得するように、第２イメージ乃至第５イメージを取得する時間を短縮させることができる。
例えば、プロセッサは、第２イメージ乃至第５イメージを取得する露出時間（例えば、符号８２３、８２７、８３１、８３５）を予め定義された露出時間より短く調節することができる。
一実施形態によれば、プロセッサは、第２カメラから第２イメージ乃至第５イメージを取得する露出時間を調節することによって、第１カメラから第１イメージを取得する時間と第２カメラから第２イメージ乃至第５イメージを取得する時間の間に差が大きくなることを防止することができる。
さらに、第２カメラから第２イメージ乃至第５イメージを取得する露出時間を調節することによって第１カメラから第１イメージを取得する時間の間で第２カメラから第２イメージ乃至第５イメージを取得することができ、時間遅延（ｔｉｍｅ ｄｅｌａｙ）によるイメージの画質が劣化されることを防止することができる。
一実施形態によれば、プロセッサは、第２カメラから第２イメージ乃至第５イメージが取得されるそれぞれの露出時間（例えば、符号８２３、８２７、８３１、８３５）に第１カメラから外部オブジェクトに対する連続撮影で４個のイメージを取得するように第１カメラを制御することもできる。
一実施形態によれば、プロセッサは、第１カメラから連続撮影された外部オブジェクトに対する４個のイメージに対してマルチフレームノイズリダクション（ｍｕｌｔｉ ｆｒａｍｅ ｎｏｉｓｅ ｒｅｄｕｃｔｉｏｎ）を実行することができる。
これにより、プロセッサは、ノイズが減少された外部オブジェクトに対するイメージを取得することができる。
一実施形態によれば、プロセッサは、第１カメラから取得した外部オブジェクトに対する４個のイメージ（又は、マルチフレームノイズリダクション実行で合成された一つのイメージ）と第２カメラから取得した第２カメラレンズ部の角度に対応する外部オブジェクトに対する第２イメージ乃至第５イメージを合成することができる。
一実施形態によれば、プロセッサは、第２カメラから第２イメージ乃至第５イメージが取得されるそれぞれの露出時間（例えば、符号８２３、８２７、８３１、８３５）に第１カメラから外部オブジェクトに対する４個のイメージを取得するように第１カメラを制御することによって、第１カメラからイメージを取得する時間と第２カメラからイメージを取得する時間の間に差が大きくなることを防止することができる。
図９は、本発明の一実施形態による第２カメラを介して取得された複数のイメージを整合及びステッチングする方法を説明するための図である。
図９を参照すると、符号＜９１０＞に示すようにプロセッサは、第２カメラを介して第２カメラレンズ部の移動によって設定された角度、例えば、第１角度乃至第４角度に対応する外部オブジェクトに対する第１イメージ乃至第４イメージ（９１１、９１３、９１５、９１７）を取得する。
一実施形態によれば、プロセッサは、第１カメラ（例えば、図４の第１カメラ４１０）から取得した外部オブジェクトに対するイメージの領域で第２カメラから取得した第１イメージ乃至第４イメージ（９１１、９１３、９１５、９１７）に対する位置を決定する。
プロセッサは、第１カメラから取得したイメージ領域でのｘ、ｙ座標に基づいて第２カメラから取得した第１イメージ乃至第４イメージ（９１１、９１３、９１５、９１７）との差を算出する。
算出された差が小さいほど第１カメラから取得したイメージでの第２カメラから取得した第１イメージ乃至第４イメージ（９１１、９１３、９１５、９１７）の位置が正確であり得る。
例えば、符号＜９２０＞に示すように、プロセッサは第１カメラから取得したイメージ領域でｘ、ｙ座標の移動によって符号９２１のように第２カメラから取得した第１イメージ９１１の位置を決定する。
前述の方法でプロセッサは、第１カメラから取得したイメージ領域での第２イメージ乃至第４イメージ（９１３、９１５、９１７）に対する位置を、符号＜９３０＞に示すように符号（９３３、９３５、９３７）として決定する。
一実施形態によれば、プロセッサは、第１カメラから取得したイメージで第２カメラから取得した第１イメージ乃至第４イメージに対する位置（座標）が決定（９２１、９３３、９３５、９３７）されると、第１イメージ乃至第４イメージ（９２１、９３３、９３５、９３７）が重なる領域と空いている領域に対するイメージを処理する動作、例えば、整合する動作を実行する。
例えば、符号＜９３０＞に示すように、プロセッサは、第１イメージ乃至第４イメージ（９２１、９３３、９３５、９３７）が重なる領域（例えば、左上側方向から右下側方向への斜線及び右上側方向から左下側方向への斜線領域）を有する場合、重なる領域を有する複数のイメージのうちのいずれか１つイメージを除いた残りイメージで重なる領域を切り出すイメージ処理動作を行う。
プロセッサは、第１カメラから取得されたイメージ９３９での第１イメージ乃至第４イメージ（９２１、９３３、９３５、９３７）が存在しない領域、すなわち、空いている領域（例えば、左上側方向から右下側方向への斜線領域）に対してイメージ９３９で補正するイメージ処理動作を行う。
一実施形態によれば、プロセッサは、第１イメージ乃至第４イメージ（９２１、９３３、９３５、９３７）を整合した後、符号＜９４０＞に示すように整合された第１イメージ乃至第４イメージ（９２１、９３３、９３５、９３７）を接合するステッチング動作を行って、一つのイメージを生成する。
一実施形態によれば、プロセッサは、第１カメラから取得したイメージ９３９とステッチング動作によって接合した符号＜９４０＞のステッチドイメージを合成する。
例えば、プロセッサは、イメージ９３９の少なくとも一部（例えば、イメージ９３９の第１領域）と第１イメージ９２１の少なくとも一部を合成、イメージ９３９の少なくとも他の一部（例えば、イメージ９３９の第２領域）と第２イメージ９３３の少なくとも一部を合成、イメージ９３９の少なくとも他の一部（例えば、イメージ９３９の第３領域）と第３イメージ９３５の少なくとも一部を合成、イメージ９３９の少なくとも他の一部（例えば、イメージ９３９の第４領域）と第４イメージ９３７の少なくとも一部を合成する。
一実施形態によれば、プロセッサは、合成されたイメージで境界部分などの不自然な部分をフィルターリング工程を介してアーチファクト（ａｒｔｉｆａｃｔ）を除去する。
図１０は、本発明の一実施形態による映像処理方法を説明するための図である
図１０を参照すると、符号＜１０１０＞に示すようにプロセッサ（例えば、図２のイメージシグナルプロセッサ２６０又は図３のプロセッサ３５０）は、第２カメラ（例えば、図４の第２カメラ４２０）から第２カメラレンズ部（例えば、図４の第２カメラレンズ部４２１）の移動によって設定された角度に対応する外部オブジェクトに対する複数のイメージ（１０１１、１０１３、１０１５、１０１７、１０１９）を取得する。
例えば、複数のイメージ（１０１１、１０１３、１０１５、１０１７、１０１９）は、角度に対応する外部オブジェクトをズームした望遠映像であり得る。
一実施形態によれば、プロセッサは、取得した複数のイメージ（１０１１、１０１３、１０１５、１０１７、１０１９）を接合するステッチング動作を実行して一つのイメージ１０２０を生成する。
一実施形態によれば、プロセッサは、生成したイメージ１０２０と第１カメラ（例えば、図４の第１カメラ４１０）から取得した外部オブジェクトに対するイメージ１０３０を合成して外部オブジェクトに対するイメージ１０４０を生成する。
前述のステッチング動作及び合成する動作に関連して、図９で説明したので詳細な説明は略する。
前述したように、本発明は、イメージを拡大して撮影しようとする場合、中間画角のカメラを使用せず第１カメラから取得した広角イメージと第２カメラから取得した第２カメラレンズ部の移動によって設定された角度に対応する複数の望遠イメージを合成する動作によって、中間画角のカメラを介して取得したイメージと同一の画質のズームを具現することができる。
後述する図１１及び図１２は、カメラモジュール（例えば、図３のカメラモジュール３４０）から取得されるイメージの全体領域ではない設定されたＲＯＩ（ｒｅｇｉｏｎ ｏｆ ｉｎｔｅｒｅｓｔ）に対応する領域に対して向上した画質を具現することができる方法を説明するためのフローチャート及び図である。
図１１は、本発明の一実施形態による映像処理方法を説明するためのフローチャートである。
図１１を参照すると、プロセッサ（例えば、図２のイメージシグナルプロセッサ２６０又は図３のプロセッサ３５０）は、カメラモジュールから受信した外部オブジェクトを含む映像をプレビュー画面として表示する。
一実施形態によれば、プロセッサは、Ｓ１１０１段階で、外部オブジェクトを含むプレビュー画面でＲＯＩを設定する。
例えば、外部オブジェクトが人の場合、顔又は手を認識してＲＯＩが自動で設定され得る。
又は、プロセッサは、プレビュー画面でＲＯＩを設定するためのユーザ入力に応答し、ＲＯＩを設定することができる。
一実施形態によれば、プロセッサは、Ｓ１１０３段階で、外部オブジェクトに対する撮影信号を受信する。
一実施形態によれば、プロセッサは、Ｓ１１０３段階の外部オブジェクトに対する撮影をリクエストする入力を受信し、ズームレベルの入力をさらに受信することができる。
一実施形態によれば、プロセッサは、Ｓ１１０７段階で、受信した撮影信号に応答して第１カメラ（例えば、図４の第１カメラ４１０）を用いて外部オブジェクトに対する第１イメージを取得する。
一実施形態によれば、プロセッサは、Ｓ１１０９段階で、第２カメラ（例えば、図４の第２カメラ４２０）から駆動部（例えば、図４の駆動部４３３）によって調節された第２カメラレンズ部（例えば、図４の第２カメラレンズ部４２１）の第１方向に対応する設定されたＲＯＩに対する第２イメージを取得し、第２カメラのレンズ部の第２方向に対応する設定されたＲＯＩに対する第３イメージを取得する。
一実施形態によれば、Ｓ１１０７段階の第１カメラから第１イメージを取得する動作及びＳ１１０９段階の第２カメラから第２イメージ及び第３イメージを取得する動作は同時に実行することができる。
一実施形態によれば、プロセッサは、Ｓ１１１１段階で、第１カメラを用いて取得した第１イメージで第２カメラを用いて取得した第２イメージの少なくとも一部又は第３イメージの少なくとも一部に対応する領域を決定する。
一実施形態によれば、プロセッサは、Ｓ１１１３段階で、第２イメージの少なくとも一部又は第３イメージの少なくとも一部の解像度を調整する。
プロセッサは、Ｓ１１１５段階で、Ｓ１１１１段階で第１イメージで決定された第２イメージの少なくとも一部又は第３イメージの少なくとも一部に対応する領域に、Ｓ１１１３段階で解像度が調整された第２イメージの少なくとも一部又は第３イメージの少なくとも一部を合成して外部オブジェクトに対するイメージを生成する。
図１２は、本発明の一実施形態による映像処理方法を説明するための図である。
図１２を参照すると、プロセッサ（例えば、図２のイメージシグナルプロセッサ２６０又は図３のプロセッサ３５０）は、外部オブジェクトを含むプレビュー画面１２０１でＲＯＩを設定する。
ＲＯＩは自動で認識したり、又はユーザによって選択することができる。
図１２で、ＲＯＩは、特定オブジェクト１２１１と仮定して説明する。
例えば、プロセッサは、設定されたＲＯＩ（特定オブジェクト１２１１）に対するイメージを取得するために第２カメラ（例えば、図４の第２カメラ４２０）の駆動部（例えば、図４の駆動部４３３）を介して第２カメラレンズ部（例えば、図４の第２カメラレンズ部４２１）の第１角度１２１３を第２角度１２１５に調節する。
プロセッサは、第２カメラから駆動部によって調節された第２角度１２１５に対応するＲＯＩに対する少なくても一つのイメージを取得する。
プロセッサは、ＲＯＩに対する少なくても一つのイメージと第１カメラ（例えば、図４の第１カメラ４１０）から取得した外部オブジェクトに対するイメージを合成する。
前述したように、本発明は、イメージを拡大して撮影しようとする場合、第１カメラから取得された広角イメージと第２カメラから取得された第２カメラレンズ部の移動によって設定された角度に対応するＲＯＩに対する少なくても一つの望遠イメージを合成する動作を介してＲＯＩに対して向上した画質のズームを具現することができる。
本明細書で開示した多様な実施形態による電子装置は、多様な形態の装置となることができる。
電子装置は、例えば、ポータブル通信装置（例えば、スマートフォン）、コンピューター装置、ポータブルマルチメディア装置、ポータブル医療機器、カメラ、ウェアラブル装置、又は家電装置の内の少なくとも一つを含むことができる。
本明細書の実施形態による電子装置は前述した機器で限定されない。
本明細書の実施形態及びここに用いられた用語は、本明細書に記載した技術を特定の実施形態に対して限定しようとするものではなく、当該実施形態の多様な変更、均等物、及び／又は代替物を含むことで理解されなければならない。
図面の説明と関連して類似の構成要素に対しては類似の参照符号が用いる。
単数の表現は文脈上、明白に意図しない限り、複数の表現を含むことができる。
本明細書において、“Ａ又はＢ”、“Ａ及び／又はＢのうちの少なくとも一つ”、“Ａ、Ｂ又はＣ”又は“Ａ、Ｂ及び／又はＣのうちの少なくとも一つ”などの表現は、共に羅列された項目のすべての可能な組み合わせを含むことができる。
“第１”、“第２”、“一番目”又は“二番目”などの表現は当該構成要素を、順序又は重要度に構わずに修飾することができ、一構成要素を他の構成要素と区分するために用いられるだけ当該構成要素を限定しない。
どんな（例えば、第１）構成要素が異なる（例えば、第２）構成要素に“（機能的又は通信的に）接続し”たり“接続して”いると言及された時には、前記どんな構成要素が前記他の構成要素に直接的に接続したり、他の構成要素（例えば、第３構成要素）を介して接続することができる。
本明細書で用いられる用語“モジュール”は、ハードウェア、ソフトウェア又はファームウエアから構成されたユニットを含み、例えば、ロジック、論理ブロック、部品、又は回路などの用語と相互互換的に用いられることができる。
モジュールは、一体から構成された部品又は一つ又はその以上の機能を実行する最小単位又はその一部となることができる。例えば、モジュールはＡＳＩＣ（ａｐｐｌｉｃａｔｉｏｎ－ｓｐｅｃｉｆｉｃ ｉｎｔｅｇｒａｔｅｄ ｃｉｒｃｕｉｔ）から構成されることができる。
本明細書の多様な実施形態は、機器（ｍａｃｈｉｎｅ）（例えば、コンピュータ）で読み取り可能な記憶媒体（ｍａｃｈｉｎｅ－ｒｅａｄａｂｌｅ ｓｔｏｒａｇｅ ｍｅｄｉａ）（例えば、内装メモリー１３６）又は外装メモリー１３８）に記憶された命令語を含むソフトウェア（例えば、プログラム１４０）で具現することができる。
機器は、記憶媒体から記憶された命令語を呼び出し、呼び出しされた命令語によって動作が可能な装置として、開示した実施形態による電子装置（例えば、電子装置１０１）を含むことができる。
命令がプロセッサ（例えば、プロセッサ１２０）によって実行される場合、プロセッサが直接、又はプロセッサの制御下に他の構成要素を用いて命令に該当する機能を行うことができる。
命令は、コンパイラー又はインタプリターによって生成又は実行されるコードを含むことができる。機器で読み取り可能な記憶媒体は、非一時的（ｎｏｎ－ｔｒａｎｓｉｔｏｒｙ）記憶媒体の形態で提供されることができる。ここで、‘非一時的’は記憶媒体が信号（ｓｉｇｎａｌ）を含ませず実在（ｔａｎｇｉｂｌｅ）するということを意味するだけ、データが記憶媒体に半永久的又は臨時的に記憶されることを区分しない。
一実施形態によれば、本明細書に開示した多様な実施形態による方法は、コンピュータープログラム製品（ｃｏｍｐｕｔｅｒ ｐｒｏｇｒａｍ ｐｒｏｄｕｃｔ）に含まれて提供することができる。
コンピュータープログラム製品は、商品として販売者及び購買者の間に取り引きされることができる。
コンピュータープログラム製品は、機器で読み取り可能な記憶媒体（例えば、ｃｏｍｐａｃｔ ｄｉｓｃ ｒｅａｄ ｏｎｌｙ ｍｅｍｏｒｙ（ＣＤ－ＲＯＭ））の形態で、又はアプリケーションストア（例えば、プレイストア（登録商標））を介してオンラインで配布することができる。
オンライン配布の場合に、コンピュータープログラム製品の少なくとも一部は製造社のサーバー、アプリケーションストアのサーバー、又は中継サーバーのメモリーのような記憶媒体に少なくとも一時記憶されたり、臨時的に生成することができる。
本発明の実施形態による構成要素（例えば、モジュール又はプログラム）それぞれは、単数又は複数の個体から構成することができ、前述の当該サブ構成要素のうちの一部サブ構成要素を省略したり、又は他のサブ構成要素を多様な実施形態にさらに含ませることができる。
概略的又は追加的に、一部構成要素（例えば、モジュール又はプログラム）は、一つの個体に統合され、統合される以前のそれぞれの当該構成要素により行われる機能を同一又は類似に行うことができる。
本発明の実施形態による、モジュール、プログラム又は他の構成要素によって行われる動作は、順次、並列的、繰り返し的、又はヒューリスティックするように実行したり、少なくとも一部動作が他の手順で実行したり、省略したり、又は他の動作が追加することができる。
尚、本発明は、上述の実施形態に限られるものではない。本発明の技術的範囲から逸脱しない範囲内で多様に変更実施することが可能である。
１０１、１０２、１０４ 電子装置
１０８ サーバー
１２０ プロセッサ
１２１ メインプロセッサ
１２３ 補助プロセッサ
１３０、２５０、４４１ メモリー
１３２ 揮発性メモリー
１３４ 非揮発性メモリー
１３６ 内装メモリー
１３８ 外装メモリー
１４０ プログラム
１４２ オペレーティングシステム
１４４ ミドルウェア
１４６ アプリケーション
１５０ 入力装置
１５５ 音響出力装置
１６０ 表示装置
１７０ オーディオモジュール
１７６ センサーモジュール
１７７ インターフェース
１７８ 接続端子
１７９ ハプティックモジュール
１８０、３４０ カメラモジュール
１８８ 電力管理モジュール
１８９ バッテリー
１９０ 通信モジュール
１９２ 無線通信モジュール
１９４ 有線通信モジュール
１９６ 加入者識別モジュール
１９７ アンテナモジュール
１９８ 第１ネットワーク
１９９ 第２ネットワーク
２１０ レンズアセンブリ
２２０ フラッシュ
２３０ イメージセンサー
２４０ イメージスタビライザー
２６０ イメージシグナルプロセッサ
３１０ 無線通信回路
３２０ メモリー
３３０ タッチスクリーンディスプレイ
３３１ 表示部
３３３ タッチパネル
３４１、４１０ 第１カメラ
３４３、４２０ 第２カメラ
３５０ プロセッサ
４１１ レンズ
４１３、４３５ 受光センサー
４２１ 第２カメラレンズ部
４２３ 入力される外部オブジェクトの位置とズームレベル
４２５ 角度計算部
４２７ 時間計算部
４２９ 操作部
４３１ 位置センサー
４３３ 駆動部
４３７ イメージ
４４３ イメージ位置計算部
４４５ イメージ整合部
４４７ イメージステッチング部
４４９ イメージ合成部
４５１ フィルターリング部

Claims (15)

  1. 電子装置であって、
    第１カメラと、
    レンズ部と、前記レンズ部の角度を調節して前記レンズ部の光軸の方向を変更することができる駆動部と、を含む第２カメラと、
    プロセッサと、を有し、
    前記プロセッサは、外部オブジェクト（ｏｂｊｅｃｔ）に対する撮影信号を受信し、
    前記受信した撮影信号に基づいて前記外部オブジェクトに対するイメージを撮影し、
    前記撮影する動作の一部として、前記第１カメラを用いて前記外部オブジェクトに対する第１イメージを取得し、前記第２カメラの前記レンズ部を第１方向に設定して前記第１方向に対応する前記外部オブジェクトの少なくとも一部に対する第２イメージを取得し、前記第２カメラの前記レンズ部を第２方向に設定して前記第２方向に対応する前記外部オブジェクトの少なくとも他の一部に対する第３イメージを取得し、
    前記第１イメージの少なくとも一部と前記第２イメージの少なくとも一部を合成し、前記第１イメージの少なくとも他の一部と前記第３イメージの少なくとも一部を合成して前記外部オブジェクトに対するイメージを生成し、
    前記第２カメラの前記レンズ部は、前記第２カメラのイメージセンサーのリードアウト時間の間、前記第１方向から前記第２方向に移動するように設定されることを特徴とする電子装置。
  2. 前記第２カメラの画角特性は、前記第１カメラの画角特性より狭いことを特徴とする請求項１記載の電子装置。
  3. 前記プロセッサは、前記イメージを生成する動作の一部として、前記第１イメージで、前記第２イメージの少なくとも一部又は前記第３イメージの少なくとも一部に対応する領域を決定し、
    前記第２イメージの少なくとも一部又は前記第３イメージの少なくとも一部の解像度を調整し、
    前記決定された領域に前記解像度が調整された前記第２イメージの少なくとも一部又は前記第３イメージの少なくとも一部を合成するように設定されることを特徴とする請求項１記載の電子装置。
  4. 前記プロセッサは、前記第１イメージのサイズを拡大し、前記第２イメージ又は前記第３イメージのサイズを縮小し、
    前記縮小された第２イメージの少なくとも一部又は第３イメージの少なくとも一部を整合し、
    前記整合された第２イメージの少なくとも一部又は第３イメージの少なくとも一部をステッチング（ｓｔｉｔｃｈｉｎｇ）して第４イメージを生成し、
    前記第４イメージと前記第１イメージの少なくとも一部を合成するように設定されることを特徴とする請求項３記載の電子装置。
  5. 前記プロセッサは、予め設定された時間の間、前記第１カメラを用いて前記第１イメージを取得し、前記第２カメラを用いて前記第２イメージ及び前記第３イメージを取得するように設定されることを特徴とする請求項１記載の電子装置。
  6. 前記プロセッサは、前記第２カメラを用いて前記第２イメージ及び前記第３イメージを取得する露出時間を予め定義された露出時間より短く調節して前記予め設定された時間の間に前記第１イメージ乃至前記第３イメージを取得するように前記第１カメラ及び前記第２カメラを制御するか、
    前記第２カメラを用いて第２イメージ及び第３イメージを取得するそれぞれの露出時間に前記第１カメラを用いて前記外部オブジェクトに対するイメージを取得するように設定されることを特徴とする請求項５記載の電子装置。
  7. 前記駆動部は、イメージスタビライザーを含み、
    前記プロセッサは、前記イメージスタビライザーを少なくとも用い、前記第２カメラを前記第１方向又は前記第２方向に調整するように設定されることを特徴とする請求項１記載の電子装置。
  8. 前記プロセッサは、前記第１イメージに基づいて前記第１カメラと前記外部オブジェクトとの距離情報を取得し、前記取得された距離情報に基づいて前記第２カメラの前記レンズ部の角度を調節するように前記駆動部を制御するように設定されることを特徴とする請求項１記載の電子装置。
  9. 前記プロセッサは、ＲＯＩ（ｒｅｇｉｏｎ ｏｆ ｉｎｔｅｒｅｓｔ）を設定するための入力を受信し、前記受信した入力により設定されたＲＯＩに少なくとも基づいて前記第２カメラを制御し、
    前記駆動部によって調節された第２カメラのレンズ部の前記第１方向及び前記第２方向に対応する前記設定されたＲＯＩに対する第２イメージ及び第３イメージを取得するように設定されることを特徴とする請求項１記載の電子装置。
  10. 複数のカメラを用いて映像を取得するための電子装置の映像処理方法であって、
    外部オブジェクトに対する撮影信号が受信されたことに応答し、第１カメラを用い、前記外部オブジェクトに対する第１イメージを取得する段階と、
    第２カメラを用い、前記第２カメラに含まれた駆動部を介して前記第２カメラのレンズ部を第１方向に設定して前記第１方向に対応する前記外部オブジェクトの少なくとも一部に対する第２イメージを取得し、前記第２カメラの前記レンズ部を第２方向に設定して前記第２方向に対応する前記外部オブジェクトの少なくとも他の一部に対する第３イメージを取得する段階と、
    前記第１イメージの少なくとも一部と前記第２イメージの少なくとも一部を合成し、前記第１イメージの少なくとも他の一部と前記第３イメージの少なくとも一部を合成して前記外部オブジェクトに対するイメージを生成する段階と、を有し、
    前記第２カメラの前記レンズ部は、前記第２カメラのイメージセンサーのリードアウト時間の間、前記第１方向から前記第２方向に移動するように設定されることを特徴とする電子装置の映像処理方法。
  11. 前記外部オブジェクトに対するイメージを生成する段階は、前記第１イメージで、前記第２イメージの少なくとも一部又は前記第３イメージの少なくとも一部に対応する領域を決定する段階と、
    前記第２イメージの少なくとも一部又は前記第３イメージの少なくとも一部の解像度を調整する段階と、
    前記決定された領域に前記解像度が調整された前記第２イメージの少なくとも一部又は前記第３イメージの少なくとも一部を合成する段階と、を含むことを特徴とする請求項１０記載の電子装置の映像処理方法。
  12. 前記解像度を調整する段階は、前記第１イメージのサイズを拡大し、前記第２イメージ又は前記第３イメージのサイズを縮小する段階と、
    前記縮小された第２イメージの少なくとも一部又は第３イメージの少なくとも一部を整合する段階と、
    前記整合された第２イメージの少なくとも一部又は第３イメージの少なくとも一部をステッチング（ｓｔｉｔｃｈｉｎｇ）して第４イメージを生成する段階と、
    前記第４イメージと前記第１イメージの少なくとも一部を合成する段階と、を含むことを特徴とする請求項１１記載の電子装置の映像処理方法。
  13. 前記第３イメージを取得する段階は、予め設定された時間の間、前記第１カメラを用いて前記第１イメージを取得し、前記第２カメラを用いて前記第２イメージ及び前記第３イメージを取得する段階を含み、
    前記第２イメージ及び前記第３イメージを段階する段階は、前記第２カメラを用いて前記第２イメージ及び前記第３イメージを取得する露出時間を予め定義された露出時間より短く調節し、前記予め設定された時間の間の前記第１イメージ乃至前記第３イメージを取得するように前記第１カメラ及び前記第２カメラを制御する段階と、
    前記第２カメラを用いて第２イメージ及び第３イメージを取得するそれぞれの露出時間に前記第１カメラを用いて前記外部オブジェクトに対するイメージを取得する段階の内の少なくとも一つを含むことを特徴とする請求項１０に記載の電子装置の映像処理方法。
  14. 前記取得された第１イメージに基づいて前記第１カメラと前記外部オブジェクトとの距離情報を取得する段階をさらに有し、
    前記第３イメージを取得する動作は、前記取得された距離情報に基づいて前記駆動部を介して前記第２カメラのレンズ部を前記第１方向に設定して前記外部オブジェクトに対する第２イメージを取得し、前記第２カメラの前記レンズ部を前記第２方向に設定して前記外部オブジェクトに対する第３イメージを取得する段階を含むことを特徴とする請求項１０記載の電子装置の映像処理方法。
  15. ＲＯＩ（ｒｅｇｉｏｎ ｏｆ ｉｎｔｅｒｅｓｔ）を設定するための入力を受信する段階と、
    前記受信した入力により設定されたＲＯＩに少なくとも基づいて前記第２カメラを制御する段階をさらに有し、
    前記第３イメージを取得する動作は、前記駆動部によって調節された第２カメラのレンズ部の前記第１方向及び前記第２方向に対応する前記設定されたＲＯＩに対する第２イメージ及び第３イメージを取得する段階を含むことを特徴とする請求項１０記載の電子装置の映像処理方法。
JP2018141098A 2017-07-27 2018-07-27 複数のカメラを用いて映像を取得するための電子装置及びこれを用いた映像処理方法 Active JP7185434B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2017-0095468 2017-07-27
KR1020170095468A KR102328539B1 (ko) 2017-07-27 2017-07-27 복수의 카메라를 이용하여 영상을 획득하기 위한 전자 장치 및 이를 이용한 영상 처리 방법

Publications (2)

Publication Number Publication Date
JP2019030007A JP2019030007A (ja) 2019-02-21
JP7185434B2 true JP7185434B2 (ja) 2022-12-07

Family

ID=63207501

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018141098A Active JP7185434B2 (ja) 2017-07-27 2018-07-27 複数のカメラを用いて映像を取得するための電子装置及びこれを用いた映像処理方法

Country Status (5)

Country Link
US (1) US10956774B2 (ja)
EP (1) EP3435655B1 (ja)
JP (1) JP7185434B2 (ja)
KR (1) KR102328539B1 (ja)
CN (1) CN109309796B (ja)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200101180A (ko) * 2019-02-19 2020-08-27 삼성전자주식회사 이미지 안정화를 위한 전자 장치 및 그의 동작 방법
KR20200117695A (ko) 2019-04-05 2020-10-14 삼성전자주식회사 외부 전자 장치를 이용하여 카메라를 제어하는 전자 장치 및 방법
US11886642B2 (en) * 2019-04-24 2024-01-30 Hubbell Incorporated System and method for integrated surveillance and communication into lighting equipment
CN110278360B (zh) * 2019-06-28 2021-03-23 Oppo广东移动通信有限公司 图像处理方法和装置、电子设备、计算机可读存储介质
US11606504B2 (en) 2019-09-10 2023-03-14 Samsung Electronics Co., Ltd. Method and electronic device for capturing ROI
CN111556219A (zh) * 2020-01-21 2020-08-18 神盾股份有限公司 图像扫描装置及图像扫描方法
CN111405087B (zh) * 2020-03-05 2022-12-09 维沃移动通信有限公司 一种电子产品及其摄像方法
CN114095641A (zh) * 2020-07-21 2022-02-25 珠海格力电器股份有限公司 一种图像的显示方法和装置
CN113973171B (zh) * 2020-07-23 2023-10-10 宁波舜宇光电信息有限公司 多摄摄像模组、摄像***、电子设备和成像方法
CN114697658A (zh) * 2020-12-31 2022-07-01 华为技术有限公司 编解码方法、电子设备、通信***以及存储介质
CN117880628A (zh) * 2021-08-11 2024-04-12 荣耀终端有限公司 拍摄方法及其相关设备
KR102350853B1 (ko) * 2021-10-18 2022-01-13 주식회사 스튜디오레논 투명 디스플레이 장치를 이용한 영상 표시 시스템 및 이를 이용한 영상 표시 방법
KR20230071408A (ko) * 2021-11-16 2023-05-23 삼성전자주식회사 프리뷰 이미지를 제공하는 방법 및 그 전자 장치
CN116170693B (zh) * 2023-04-25 2023-07-21 山西乐宸科技有限公司 一种安防监控***控制方法、装置、电子设备及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003134375A (ja) 2001-10-26 2003-05-09 Matsushita Electric Works Ltd 画像撮影システム
JP2005303694A (ja) 2004-04-13 2005-10-27 Konica Minolta Holdings Inc 複眼撮像装置
WO2012001755A1 (ja) 2010-07-02 2012-01-05 株式会社ソニー・コンピュータエンタテインメント 情報処理システム、情報処理装置および情報処理方法
WO2015016002A1 (ja) 2013-08-01 2015-02-05 富士フイルム株式会社 撮像モジュール及び電子機器

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5962841A (ja) 1982-10-01 1984-04-10 Minolta Camera Co Ltd フレ−ミング用ミラ−を有する薄型偏平形状カメラ
US4560261A (en) 1982-05-07 1985-12-24 Minolta Camera Kabushiki Kaisha Flat camera with self photograph framing mirror
JP2000059606A (ja) 1998-08-12 2000-02-25 Minolta Co Ltd 高精細画像作成システム
US6727954B1 (en) 1998-08-12 2004-04-27 Minolta Co., Ltd. Electronic camera and image processing system
JP4587166B2 (ja) * 2004-09-14 2010-11-24 キヤノン株式会社 移動体追跡システム、撮影装置及び撮影方法
CN101127829A (zh) 2006-08-15 2008-02-20 沈洪 多场景摄像装置
US8199212B2 (en) 2008-05-03 2012-06-12 Olympus Imaging Corp. Image recording and playback device, and image recording and playback method
JP2009272840A (ja) 2008-05-03 2009-11-19 Olympus Imaging Corp 画像記録再生装置、画像記録再生方法、画像処理装置、および画像処理方法
JP4513905B2 (ja) * 2008-06-27 2010-07-28 ソニー株式会社 信号処理装置、信号処理方法、プログラム及び記録媒体
US20120075489A1 (en) 2010-09-24 2012-03-29 Nishihara H Keith Zoom camera image blending technique
JP2012133185A (ja) * 2010-12-22 2012-07-12 Olympus Corp 撮像装置
JP5843751B2 (ja) * 2012-12-27 2016-01-13 株式会社ソニー・コンピュータエンタテインメント 情報処理装置、情報処理システム、および情報処理方法
EP2979445A4 (en) 2013-03-27 2016-08-10 Bae Sys Inf & Elect Sys Integ ELECTROOPTICAL FUSION ZOOM CAMERA WITH SEVERAL VIEW FIELDS AND MULTIPLE SENSORS
US20150131924A1 (en) * 2013-11-13 2015-05-14 Microsoft Corporation Creation of Rectangular Images from Input Images
US20180157885A1 (en) * 2014-04-23 2018-06-07 Suleyman Ataullah Gurzumar Digital image capturing method and electronic device for digital image capturing
KR102157675B1 (ko) * 2014-07-25 2020-09-18 삼성전자주식회사 촬영 장치 및 그 촬영 방법
JP6600163B2 (ja) * 2014-08-19 2019-10-30 キヤノン株式会社 像振れ補正装置及びその制御方法
US9426362B2 (en) 2015-01-16 2016-08-23 Mems Drive, Inc. Three-axis OIS for super-resolution imaging
CN106161922B (zh) * 2015-04-22 2019-05-14 北京智谷睿拓技术服务有限公司 图像采集控制方法和装置
US10291842B2 (en) * 2015-06-23 2019-05-14 Samsung Electronics Co., Ltd. Digital photographing apparatus and method of operating the same
WO2017010440A1 (ja) * 2015-07-10 2017-01-19 株式会社ニコン 撮像装置、撮像光学系、撮像装置の製造方法および撮像方法
WO2017092804A1 (en) * 2015-12-02 2017-06-08 Telefonaktiebolaget Lm Ericsson (Publ) Electronic device and method for controlling cameras thereof
US9674504B1 (en) * 2015-12-22 2017-06-06 Aquifi, Inc. Depth perceptive trinocular camera system

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003134375A (ja) 2001-10-26 2003-05-09 Matsushita Electric Works Ltd 画像撮影システム
JP2005303694A (ja) 2004-04-13 2005-10-27 Konica Minolta Holdings Inc 複眼撮像装置
WO2012001755A1 (ja) 2010-07-02 2012-01-05 株式会社ソニー・コンピュータエンタテインメント 情報処理システム、情報処理装置および情報処理方法
WO2015016002A1 (ja) 2013-08-01 2015-02-05 富士フイルム株式会社 撮像モジュール及び電子機器

Also Published As

Publication number Publication date
US10956774B2 (en) 2021-03-23
EP3435655A1 (en) 2019-01-30
CN109309796B (zh) 2021-07-27
KR20190012465A (ko) 2019-02-11
KR102328539B1 (ko) 2021-11-18
JP2019030007A (ja) 2019-02-21
CN109309796A (zh) 2019-02-05
US20190034756A1 (en) 2019-01-31
EP3435655B1 (en) 2023-02-22

Similar Documents

Publication Publication Date Title
JP7185434B2 (ja) 複数のカメラを用いて映像を取得するための電子装置及びこれを用いた映像処理方法
KR102338576B1 (ko) 이미지를 이용하여 획득된 깊이 정보의 속성에 따라 이미지와 연관하여 깊이 정보를 저장하는 전자 장치 및 전자 장치 제어 방법
KR102385360B1 (ko) 이미지 보정을 수행하는 전자 장치 및 그 동작 방법
US11461910B2 (en) Electronic device for blurring image obtained by combining plural images based on depth information and method for driving the electronic device
KR102318013B1 (ko) 복수의 이미지들을 합성하는 전자장치 및 방법
KR102386385B1 (ko) 전자 장치 및 전자 장치의 이미지 압축 방법
US11582391B2 (en) Electronic device capable of controlling image display effect, and method for displaying image
KR102383134B1 (ko) 우선 순위에 기반하여 이미지를 처리하는 전자 장치 및 그 동작 방법
CN109413399B (zh) 使用深度图合成对象的装置及其方法
KR102382871B1 (ko) 렌즈의 포커스를 제어하기 위한 전자 장치 및 전자 장치 제어 방법
US11509815B2 (en) Electronic device and method for processing image having human object and providing indicator indicating a ratio for the human object
US11626447B2 (en) Electronic device comprising image sensor for identifying an operation setting and an external environmental condition and method of operation thereof
KR102330264B1 (ko) 움직임 정보에 기반하여 동영상을 재생하기 위한 장치 및 그의 동작 방법
KR102650217B1 (ko) 이미지를 제공하기 위한 방법 및 이를 지원하는 전자 장치
US10911687B2 (en) Electronic device and method for controlling display of images
EP3675477B1 (en) Electronic device for providing function by using rgb image and ir image acquired through one image sensor
CN114096984A (zh) 从通过拼接部分图像而创建的全向图像中去除图像捕获装置
KR102457559B1 (ko) 이미지에 포함된 오브젝트에 기반하여 이미지를 보정하기 위한 전자 장치 및 방법
KR102301940B1 (ko) 이미지 합성 방법 및 장치
CN108476290B (zh) 用于提供全景图像的电子装置及其控制方法
KR20190065736A (ko) 3d 이미지를 생성하기 위한 전자 장치 및 방법
RU2782312C1 (ru) Способ обработки изображения и устройство отображения, устанавливаемое на голове
KR20210140945A (ko) 멀티 카메라를 이용하여 화질 개선하는 전자 장치 및 방법

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210622

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220713

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220726

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221024

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221115

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221125

R150 Certificate of patent or registration of utility model

Ref document number: 7185434

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150