JP2011182328A - Compound-eye imaging apparatus - Google Patents

Compound-eye imaging apparatus Download PDF

Info

Publication number
JP2011182328A
JP2011182328A JP2010046874A JP2010046874A JP2011182328A JP 2011182328 A JP2011182328 A JP 2011182328A JP 2010046874 A JP2010046874 A JP 2010046874A JP 2010046874 A JP2010046874 A JP 2010046874A JP 2011182328 A JP2011182328 A JP 2011182328A
Authority
JP
Japan
Prior art keywords
eye imaging
lens
compound
image
imaging apparatus
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2010046874A
Other languages
Japanese (ja)
Inventor
Takeyoshi Utsumaki
武慶 宇津巻
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2010046874A priority Critical patent/JP2011182328A/en
Publication of JP2011182328A publication Critical patent/JP2011182328A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Structure And Mechanism Of Cameras (AREA)
  • Indication In Cameras, And Counting Of Exposures (AREA)
  • Studio Devices (AREA)
  • Exposure Control For Cameras (AREA)
  • Details Of Cameras Including Film Mechanisms (AREA)
  • Cameras In General (AREA)
  • Stereoscopic And Panoramic Photography (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a compound-eye imaging apparatus facilitating change of a degree of overlapping two images. <P>SOLUTION: A compound-eye imaging apparatus includes: a housing comprised of a first partial housing 1 and a second partial housing 2; a turning shaft 3 hinge-connecting the first partial housing 1 and the second partial housing 3; a first imaging lens 4 whose center is arranged on a centerline of the rotary shaft 3 of the first partial housing 1; and a second imaging lens 5 whose lens center is arranged on a centerline of the rotary shaft 3 of the second partial housing 2. <P>COPYRIGHT: (C)2011,JPO&INPIT

Description

本発明は、１つの手持ち可能な筐体内に複数の撮像装置を収納した複眼撮像装置に関する。   The present invention relates to a compound eye imaging device in which a plurality of imaging devices are housed in a single hand-held housing.

２つの撮像装置を用い、２つの撮像装置の撮影方向を可変とすることで、様々な撮影効果を得ることができる。例えば下記の特許文献１記載の複眼撮像装置は、被写体の立体画像を撮影したり、パノラマ画像を撮影する様になっている。   Various imaging effects can be obtained by using two imaging devices and making the imaging directions of the two imaging devices variable. For example, the compound eye imaging device described in Patent Document 1 below is configured to capture a stereoscopic image of a subject or a panoramic image.

しかし、この従来の複眼撮像装置は、２つの撮像装置の撮影方向を個別に変更する機構となっているため、両撮影方向の成す角度を瞬時に変更して撮影するのが困難であり、シャッタチャンスを逃す虞がある。   However, since this conventional compound-eye imaging device has a mechanism that individually changes the shooting directions of the two imaging devices, it is difficult to instantaneously change the angle formed by the two shooting directions, and the shutter is difficult. There is a risk of missing a chance.

特開２００５―２２３８１２号公報Japanese Patent Laid-Open No. 2005-223812

本発明の目的は、複数の撮像装置の撮影方向のなす角度を瞬時に変更してパノラマ撮影やステレオ撮影を行うことが可能な複眼撮像装置を提供することにある。   An object of the present invention is to provide a compound eye imaging apparatus capable of performing panoramic photography and stereo photography by instantaneously changing the angle formed by the imaging directions of a plurality of imaging apparatuses.

本発明の複眼撮像装置は、第１部分筐体及び第２部分筐体でなる筐体と、前記第１部分筐体と前記第２部分筐体とをヒンジ連結する回動軸と、前記第１部分筐体の前記回転軸の中心線上にレンズ中心が配置された第１撮影レンズと、前記第２部分筐体の前記回転軸の中心線上にレンズ中心が配置された第２撮影レンズとを備えることを特徴とする。   The compound-eye imaging device of the present invention includes a housing formed of a first partial housing and a second partial housing, a rotation shaft that hinge-connects the first partial housing and the second partial housing, and the first A first photographing lens having a lens center disposed on a center line of the rotation axis of the one-part housing; and a second photographing lens having a lens center disposed on the center line of the rotation shaft of the second partial housing. It is characterized by providing.

本発明によれば、ヒンジ連結の回動角度を手持つ操作で調整するだけで、重なり程度の異なるパノラマ画像を撮影することができる。   According to the present invention, panoramic images with different degrees of overlap can be taken simply by adjusting the rotation angle of the hinge connection by hand.

本発明の一実施形態に係る複眼撮像装置の筐体の上面図（ａ）と正面図（ｂ）と背面図（ｃ）である。It is the top view (a), front view (b), and back view (c) of the housing | casing of the compound-eye imaging device which concern on one Embodiment of this invention. 図１に示す複眼撮像装置のヒンジ角度を変えたときの画角変化を示す図である。It is a figure which shows a view angle change when changing the hinge angle of the compound-eye imaging device shown in FIG. 図１に示す複眼撮像装置の内部の機能ブロック図である。It is a functional block diagram inside the compound eye imaging device shown in FIG. 図３に示す複眼撮像装置で行われるパノラマ合成処理手順を示すフローチャートである。It is a flowchart which shows the panorama synthetic | combination processing procedure performed with the compound-eye imaging device shown in FIG. 図１に示す複眼撮像装置でパノラマ撮影を行うときの説明図である。It is explanatory drawing when performing panoramic photography with the compound eye imaging device shown in FIG. 図１に示す複眼撮像装置でパノラマ撮影を行うときの説明図である。It is explanatory drawing when performing panoramic photography with the compound eye imaging device shown in FIG. 図１に示す複眼撮像装置で撮影モードを自動設定する処理手順を示すフローチャートである。3 is a flowchart showing a processing procedure for automatically setting a photographing mode in the compound eye imaging apparatus shown in FIG. 1. 図１に示す複眼撮像装置で撮影モードを自動設定する別実施形態に係る処理手順を示すフローチャートである。It is a flowchart which shows the process sequence which concerns on another embodiment which sets an imaging | photography mode automatically with the compound-eye imaging device shown in FIG. 図１に示す複眼撮像装置で撮影モードを自動設定する更に別実施形態に係る処理手順を示すフローチャートである。It is a flowchart which shows the process sequence which concerns on another embodiment which sets an imaging | photography mode automatically with the compound-eye imaging device shown in FIG. 本発明の別実施形態に係る複眼撮像装置の説明図である。It is explanatory drawing of the compound eye imaging device which concerns on another embodiment of this invention.

以下、本発明の一実施形態について、図面を参照して説明する。   Hereinafter, an embodiment of the present invention will be described with reference to the drawings.

図１は、本発明の実施形態に係る複眼撮像装置の上面図（ａ）と正面図（ｂ）と背面図（ｃ）である。本実施形態の複眼撮像装置１００は、連結された第１部分筐体１と第２部分筐体２を備える。   FIG. 1 is a top view (a), a front view (b), and a rear view (c) of a compound eye imaging device according to an embodiment of the present invention. The compound-eye imaging apparatus 100 of this embodiment includes a first partial housing 1 and a second partial housing 2 that are connected.

筐体１の本体部分は矩形形状を成し、正面視したとき（図１（ｂ））、左側から下半分が側方に突出する突部１ａが設けられている。筐体２の本体部分も筐体１と同一形状の矩形形状を成し、正面視したとき、右側から上半分が側方に突出する突部２ａが設けられている。   The main body portion of the housing 1 has a rectangular shape, and when viewed from the front (FIG. 1 (b)), a protrusion 1a is provided in which the lower half projects sideways from the left side. The main body portion of the housing 2 also has a rectangular shape that is the same shape as the housing 1, and is provided with a protrusion 2a whose upper half projects sideways from the right side when viewed from the front.

筐体１の左側部（正面視）と筐体２の右側部（正面視）とを突き合わせる様に両者を接触させた状態にすると、突部１ａと突部２ａとは互いに干渉せずに上下方向に整列し、この状態で、突部１ａと突部２ａとは回動軸（回転軸）３によりヒンジ接合される。   When the left side portion (front view) of the housing 1 and the right side portion (front view) of the housing 2 are brought into contact with each other, the protrusion 1a and the protrusion 2a do not interfere with each other. Aligned in the vertical direction, in this state, the protrusion 1a and the protrusion 2a are hinge-joined by a rotating shaft (rotating shaft) 3.

回動軸３は、突部１ａ，２ａの内部まで貫通はしておらず、突部１ａ内には第１の撮影レンズ４が、突部２ａ内には第２の撮影レンズ５が収納される。第１，第２の撮影レンズ４，５は同一構成のレンズであり、単レンズでも複合レンズでも良いが、レンズ中心が、ヒンジ接合（ヒンジ連結）の回転軸中心上に来るように各突部１ａ，２ａ内に取り付けられる。ここで、レンズ中心とは、レンズの節点（ノーダルポイント）のことをいうものとする。   The rotating shaft 3 does not penetrate into the protrusions 1a and 2a, and the first photographing lens 4 is accommodated in the protrusion 1a and the second photographing lens 5 is accommodated in the protrusion 2a. The The first and second photographic lenses 4 and 5 are lenses having the same configuration, and may be either a single lens or a compound lens, but each protrusion is positioned so that the center of the lens is on the center of the rotation axis of the hinge joint (hinge connection). It is attached in 1a, 2a. Here, the lens center means a nodal point of the lens.

筐体１，２の背面側には、夫々、表示画面６，７が設けられる。同一面積，同一構成の表示画面６，７は、例えば液晶表示部で構成され、撮影レンズ４で撮影された画像が表示画面６に表示され、撮影レンズ５で撮影された画像が表示画面７に表示される。   Display screens 6 and 7 are provided on the rear sides of the housings 1 and 2, respectively. The display screens 6 and 7 having the same area and the same configuration are configured by, for example, a liquid crystal display unit, an image photographed by the photographing lens 4 is displayed on the display screen 6, and an image photographed by the photographing lens 5 is displayed on the display screen 7. Is displayed.

図示する複眼撮像装置１００では、筐体１の上面右側に、シャッタボタン８や電源スイッチ９が設けられている。   In the illustrated compound eye imaging device 100, a shutter button 8 and a power switch 9 are provided on the upper right side of the housing 1.

図２は、図１で説明した複眼撮像装置１００の撮影画角の説明図である。図２（ａ）に示す様に、筐体１と筐体２とを１８０度開き、上下に並ぶ撮影レンズ４，５の撮影方向を一致させると、各撮影レンズ４，５の左右方向の画角４ａ，５ａは同じになり（即ち、水平方向では視差は生じない。）、被写体を撮影したとき、両方の撮影画像は一致することになる。近景の被写体を撮影する場合には、撮影レンズ４，５が上下に離間して並ぶため上下方向で両撮影画像に若干の差は生じるが、左右方向（水平方向）では一致する。   FIG. 2 is an explanatory diagram of a shooting angle of view of the compound eye imaging apparatus 100 described in FIG. As shown in FIG. 2A, when the housing 1 and the housing 2 are opened 180 degrees and the photographing directions of the photographing lenses 4 and 5 aligned vertically are matched, the left and right images of the photographing lenses 4 and 5 are aligned. The corners 4a and 5a are the same (that is, no parallax occurs in the horizontal direction), and when the subject is photographed, both photographed images match. When shooting an object in the foreground, the shooting lenses 4 and 5 are arranged apart from each other in the vertical direction, so that there is a slight difference between the two shot images in the vertical direction, but they match in the horizontal direction (horizontal direction).

このため、図２（ｂ）に示す様に、撮影レンズ４の撮影方向が左側となるように、撮影レンズ５の撮影方向が右側となるように、更に夫々の画角４ａ，５ａが中央で若干重なる様に筐体１，２を１８０度より開くと、撮影レンズ４，５のレンズ中心（実施形態の構成では、水平方向のレンズの節点）が回動軸上にあるため、画角４ａ，５ａの重なり部分の両撮影画像は一致することになる。   For this reason, as shown in FIG. 2B, the field angles 4a and 5a are further centered so that the photographing direction of the photographing lens 4 is on the left side and the photographing direction of the photographing lens 5 is on the right side. When the casings 1 and 2 are opened from 180 degrees so as to be slightly overlapped, the lens center of the photographing lenses 4 and 5 (in the configuration of the embodiment, the horizontal lens node) is on the rotation axis. , 5a are coincident with each other.

従って、両方の撮影画像を貼り合わせることで、被写体画像が遠近混在の画像であっても、遠近での合成ズレがない高品質なパノラマ画像を得ることができる。また、図１（ｂ）に示す複眼撮像装置１００を、撮影レンズ４，５が左右に並ぶ様に縦位置にして被写体画像を撮影すれば、立体写真を撮ることが可能となる。   Therefore, by combining both photographed images, a high-quality panoramic image can be obtained without a composition shift in the perspective even if the subject image is a mixed perspective image. If the subject image is taken with the compound-eye imaging device 100 shown in FIG. 1B in a vertical position so that the photographing lenses 4 and 5 are arranged side by side, a stereoscopic photograph can be taken.

この様に、複眼撮像装置１００を横位置にして更に筐体１，２間の開く角度を調整したり、複眼撮像装置１００を縦位置にして撮影する場合、本実施形態の複眼撮像装置１００は手持ちで操作可能なため、シャッタチャンスを逃すことなく瞬時に対応可能となる。   As described above, when the compound eye imaging apparatus 100 is set to the horizontal position and the opening angle between the housings 1 and 2 is further adjusted, or when the compound eye imaging apparatus 100 is set to the vertical position, the compound eye imaging apparatus 100 of the present embodiment is used. Since it can be operated by hand, it can respond instantly without missing a photo opportunity.

図３は、図１，図２で説明した複眼撮像装置１００の内部の機能ブロック図である。撮影レンズ４，５のレンズ中心はヒンジ回転軸上に設置され、レンズ駆動部１１の制御によってフォーカス位置が制御される。各撮影レンズ４，５の背部には絞り１２，１３が設けられ、これらは絞り駆動部１４によって開口量が制御される。   FIG. 3 is a functional block diagram of the inside of the compound eye imaging apparatus 100 described with reference to FIGS. The lens centers of the photographing lenses 4 and 5 are installed on the hinge rotation axis, and the focus position is controlled by the control of the lens driving unit 11. Diaphragms 12 and 13 are provided on the backs of the photographing lenses 4 and 5, and the aperture amount of these diaphragms is controlled by a diaphragm driving unit 14.

絞り１２，１３の背部には、例えばＣＣＤ型の固体撮像素子１５，１６が配置され、撮像素子駆動部１７によって撮像素子１５，１６の動作が制御される。   For example, CCD type solid-state image sensors 15 and 16 are disposed on the backs of the apertures 12 and 13, and the operation of the image sensors 15 and 16 is controlled by the image sensor driving unit 17.

撮影レンズ４，絞り１２，固体撮像素子１５が図１の突部１ａ内に収納され、撮影レンズ５，絞り１３，固体撮像素子１６が突部２ａ内に収納される。また、本実施形態では、撮影レンズ４，５間の回動軸周りの相対角度を検出する図示省略のセンサが取り付けられており、このセンサの検出データは後述のＣＰＵ２１に送られる。   The photographing lens 4, the diaphragm 12, and the solid-state image sensor 15 are accommodated in the protrusion 1a of FIG. 1, and the photographing lens 5, the diaphragm 13, and the solid-state image sensor 16 are accommodated in the protrusion 2a. In this embodiment, a sensor (not shown) that detects a relative angle around the rotation axis between the photographing lenses 4 and 5 is attached, and detection data of this sensor is sent to a CPU 21 described later.

固体撮像素子１５の出力は、アナログ信号処理部１７にて処理（相関二重サンプリング処理や利得制御処理等）され、Ａ／Ｄ変換器１８でデジタルの撮像画像信号に変換され、データバス２５に出力される。   The output of the solid-state imaging device 15 is processed (correlated double sampling processing, gain control processing, etc.) by the analog signal processing unit 17, converted into a digital captured image signal by the A / D converter 18, and sent to the data bus 25. Is output.

固体撮像素子１６の出力は、アナログ信号処理部１９にて処理（相関二重サンプリング処理や利得制御処理等）され、Ａ／Ｄ変換器２０でデジタルの撮像画像信号に変換され、データバス２５に出力される。   The output of the solid-state imaging device 16 is processed by the analog signal processing unit 19 (correlated double sampling processing, gain control processing, etc.), converted into a digital captured image signal by the A / D converter 20, and is sent to the data bus 25. Is output.

複眼撮像装置１００の全体を統括制御するＣＰＵ２１は、制御指令を制御バス２６に出力すると共に、アナログ信号処理部１７，１９やＡ／Ｄ変換器１８，２０を制御すると共に、レンズ駆動部１１，絞り駆動部１４を制御する。このＣＰＵ２１には、ユーザからの指示を取り込む操作部２２が接続されている。操作部２２は、図１（ａ）で説明した電源ボタン９やシャッタボタン１０を含む。   The CPU 21 that performs overall control of the entire compound-eye imaging apparatus 100 outputs a control command to the control bus 26, controls the analog signal processing units 17, 19 and the A / D converters 18, 20, and controls the lens driving unit 11, The aperture driving unit 14 is controlled. The CPU 21 is connected to an operation unit 22 that captures instructions from the user. The operation unit 22 includes the power button 9 and the shutter button 10 described with reference to FIG.

制御バス２６及びデータバス２５には、メモリ制御部２８と、外部メモリ制御部２９と、画像データ演算処理部３０が接続され、更に、制御バス２６にはレンズ相対角度情報取得部４１が接続され、データバス２５には図１（ｃ）に示す液晶表示部６，７が接続される。メモリ制御部２８にはメインメモリ４２が接続され、外部メモリ制御部２９には着脱自在のメモリカード等の記憶媒体４３が接続される。   A memory control unit 28, an external memory control unit 29, and an image data calculation processing unit 30 are connected to the control bus 26 and the data bus 25, and a lens relative angle information acquisition unit 41 is connected to the control bus 26. The data bus 25 is connected to the liquid crystal display units 6 and 7 shown in FIG. A main memory 42 is connected to the memory control unit 28, and a storage medium 43 such as a removable memory card is connected to the external memory control unit 29.

画像データ演算処理部３０は、通常のデジタルカメラと同様に、データバス２５に送られてくるデジタルの撮像画像信号を取り込んでオフセット処理やホワイトバランス補正，ガンマ補正処理，ＲＧＢ／ＹＣ変換処理，同時化処理，輪郭補正処理等を行ってからＪＰＥＧ画像データに圧縮したり、データバス２５に送られてくる撮像画像信号からＬＣＤ表示部６，７にスルー画像を表示させる処理を行う他に、本実施形態では、パノラマ処理を行うための機能を搭載している。   Similar to a normal digital camera, the image data calculation processing unit 30 takes in a digital captured image signal sent to the data bus 25 and performs offset processing, white balance correction, gamma correction processing, RGB / YC conversion processing, and simultaneous processing. In addition to performing compression processing, contour correction processing, etc. and then compressing to JPEG image data, or displaying through images on the LCD display units 6 and 7 from the captured image signal sent to the data bus 25, In the embodiment, a function for performing panorama processing is installed.

即ち、本実施形態の画像データ演算処理部３０は、特徴点検出演算部３１と、パノラマ接合領域演算部３２と、パノラマ合成画像処理部３３と、パノラマ接合領域画像差分取得部３４と、差分量判定演算部３５とを備える。   That is, the image data calculation processing unit 30 of the present embodiment includes a feature point detection calculation unit 31, a panorama joint region calculation unit 32, a panorama composite image processing unit 33, a panorama joint region image difference acquisition unit 34, and a difference amount. And a determination calculation unit 35.

パノラマ接合領域演算部３２は、図２（ｂ）で説明した両撮影レンズ４，５間の回動軸周りの相対角度情報をレンズ相対角度情報取得部４１から取り込み、両撮影レンズ４，５の各画角４ａ，５ａ間の重なり領域（パノラマ接合領域）を演算して求め、得られた結果を、特徴点検出演算部３１とパノラマ接合領域画像差分取得部３４に出力する。   The panoramic junction area calculation unit 32 takes in the relative angle information about the rotation axis between the two photographing lenses 4 and 5 described in FIG. 2B from the lens relative angle information acquisition unit 41, and The overlap area (panorama joint area) between the respective view angles 4a and 5a is calculated and obtained, and the obtained result is output to the feature point detection calculation unit 31 and the panorama joint area image difference acquisition unit 34.

特徴点検出演算部３１は、パノラマ接合領域のデータから特徴点を検出し、得られた特徴点を用いてパノラマ合成画像処理部３３は撮影レンズ４，５を通して得られた２枚の画像をパノラマ合成し、合成したＪＰＥＧデータを記憶媒体４３に保存する。なお、パノラマ合成精度を高めるために、特徴点の他に上記の相対角度情報を用いて合成する構成としても良い。   The feature point detection calculation unit 31 detects feature points from the data of the panorama joint region, and using the obtained feature points, the panorama composite image processing unit 33 panoramas two images obtained through the photographing lenses 4 and 5. The synthesized JPEG data is stored in the storage medium 43. In addition, in order to improve the panorama synthesis accuracy, the composition may be performed by using the relative angle information in addition to the feature points.

パノラマ接合領域画像差分取得部３４は、パノラマ接合領域演算部３２から取得したパノラマ接合領域の情報と、特徴点検出演算部３１から取得した特徴点データとを用いて接合領域の画像差分を取得し、これを差分量判定部３５に送り、差分量判定部３５は、差分量が予め設定した量より大きい場合（接合領域が広い場合）に、左右の画像を表示するＬＣＤ表示部６，７に警告マークを表示したり、アラーム音を出力する様になっている。   The panorama joint area image difference acquisition unit 34 acquires the image difference of the joint area using the information of the panorama joint area acquired from the panorama joint area calculation unit 32 and the feature point data acquired from the feature point detection calculation unit 31. This is sent to the difference amount determination unit 35, and the difference amount determination unit 35 displays the left and right images on the LCD display units 6 and 7 when the difference amount is larger than the preset amount (when the joining area is wide). A warning mark is displayed and an alarm sound is output.

図４は、図３の複眼撮像装置１００の動作手順を示すフローチャートである。先ず、ステップＳ１で、撮影モード選択でパノラマ撮影モードが選択されたか否かを判定する。パノラマ撮影モードでない場合（判定結果がＮｏ）には、ステップＳ２に進んで、その他の撮影メニューに従う処理を実行し、ステップＳ１５に進み、電源スイッチがＯＦＦにされたか否かを判定する。電源スイッチがＯＦＦの場合（判定結果がＹｅｓ）には、電源ＯＦＦを実行しこのプログラムを終了する。ステップＳ１５の判定の結果、電源スイッチがＯＦＦでない場合には、ステップＳ１に戻る。   FIG. 4 is a flowchart showing an operation procedure of the compound eye imaging apparatus 100 of FIG. First, in step S1, it is determined whether or not the panorama shooting mode is selected in the shooting mode selection. When the panorama shooting mode is not selected (determination result is No), the process proceeds to step S2 to execute processing according to other shooting menus, and then proceeds to step S15 to determine whether or not the power switch is turned off. When the power switch is OFF (judgment result is Yes), the power is turned off and the program is terminated. If the result of determination in step S15 is that the power switch is not OFF, processing returns to step S1.

ステップＳ１の判定の結果、撮影モードがパノラマ撮影モードの場合には、ステップＳ３に進み、測光処理を実行して露出を決め、次ぎにステップＳ４で合焦処理を実行して焦点レンズの位置合わせを行う。このステップＳ３，Ｓ４は、２つの固体撮像素子１５，１６のうち片側（例えば撮影レンズ４を搭載した側）でのみ行い、測定結果を両方の撮像系に共通に適用する。   If the result of determination in step S1 is that the shooting mode is panoramic shooting mode, the process proceeds to step S3 where exposure is determined by performing photometric processing, and then focusing processing is performed by performing focusing processing in step S4. I do. Steps S3 and S4 are performed only on one side (for example, the side on which the photographing lens 4 is mounted) of the two solid-state imaging devices 15 and 16, and the measurement result is applied to both imaging systems in common.

次のステップＳ５では、両方の撮像系で被写体画像を撮像すると共に、両撮影レンズ４，５の撮影方向のなす角度（図５（ａ）に示す筐体１，２間の角度をθとしたとき〔１８０度−θ〕）の情報を保持しておく。そして、ステップＳ６で、得られた２枚の画像から公知の技術により特徴点を抽出し、次のステップＳ７で、特徴点の一致精度が十分であるか否かを判定する。   In the next step S5, the subject image is picked up by both image pickup systems, and the angle formed by the shooting directions of the two shooting lenses 4 and 5 (the angle between the casings 1 and 2 shown in FIG. 5A is θ). Time [180 degrees−θ]). In step S6, feature points are extracted from the obtained two images by a known technique, and in the next step S7, it is determined whether or not the matching accuracy of the feature points is sufficient.

特徴点の一致精度が所定閾値以上でない場合（判定結果がＮｏ）には、ステップＳ７からステップＳ８に進み、ステップＳ５で保持しているレンズの角度情報を用いて２枚の画像の接合領域を設定する。そして、次のステップＳ９で、２枚の画像の接合領域内の特徴点を抽出し、ステップＳ１０で特徴点の一致精度が十分であるか否かを判定する。このステップＳ９は、接合領域内に限定して特徴点検出を行うため、高速処理が可能である。   If the matching accuracy of the feature points is not equal to or greater than the predetermined threshold (determination result is No), the process proceeds from step S7 to step S8, and the joint area between the two images is determined using the lens angle information held in step S5. Set. Then, in the next step S9, feature points in the joining region of the two images are extracted, and in step S10, it is determined whether or not the feature point matching accuracy is sufficient. Since step S9 performs feature point detection only within the joint region, high-speed processing is possible.

ステップＳ１０の判定の結果、特徴点の一致精度が不十分な場合には、ステップＳ１１に進み、両撮影レンズ４，５間のレンズ角度情報から得られる図５（ａ）の重なり領域５１に対応する画像上の接合領域５１ａを決定し、ステップＳ１２に進む。撮影画像が変化の乏しく空間周波数が低周波の画像の場合には、特徴点を見つけ辛いが、本実施形態では、レンズ角度情報から接合領域５１ａを決定できるため、精度の高いパノラマ合成が可能となる。   As a result of the determination in step S10, if the matching accuracy of the feature points is insufficient, the process proceeds to step S11 and corresponds to the overlapping region 51 in FIG. 5A obtained from the lens angle information between the two photographing lenses 4 and 5. The joining area 51a on the image to be determined is determined, and the process proceeds to step S12. In the case where the photographed image is an image with little change and the spatial frequency is low, it is difficult to find a feature point. However, in the present embodiment, since the joining region 51a can be determined from the lens angle information, it is possible to perform panoramic synthesis with high accuracy. Become.

ステップＳ１０の判定の結果、ステップＳ７の判定の結果、特徴点の一致精度が十分な場合、ステップＳ１２に進む。   As a result of the determination in step S10, if the result of determination in step S7 is that the feature point matching accuracy is sufficient, the process proceeds to step S12.

ステップＳ１２では、２枚の画像のパノラマ合成を行う。即ち、図５（ｃ）に示す接合領域５１ａが重なる様に、２枚の画像データ５２，５３のパノラマ合成を行う。そして、パノラマ合成した画像データを記憶媒体４３に保存し、上述したステップＳ１５に進む。   In step S12, panoramic synthesis of two images is performed. That is, the panorama composition of the two pieces of image data 52 and 53 is performed so that the joining area 51a shown in FIG. Then, the panoramic image data is stored in the storage medium 43, and the process proceeds to step S15 described above.

撮影している最中は、図５（ｃ）に示す画像５２は図５（ｂ）の液晶表示部７に表示され、画像５３は液晶表示部８に表示されているが、このパノラマ合成を行う場合、接合領域５１ａの表示色を他の領域の表示色より変えて表示することにより、ユーザは、接合領域５１ａを容易に認識可能となる。   During shooting, an image 52 shown in FIG. 5C is displayed on the liquid crystal display unit 7 in FIG. 5B, and an image 53 is displayed on the liquid crystal display unit 8. When performing, by changing the display color of the joining area | region 51a from the display color of another area | region, it becomes possible for the user to recognize the joining area | region 51a easily.

図６は、この接合領域５１ａの表示形態の説明図である。図６（ａ）に示す様に、両方の液晶表示部に夫々撮像画像５２，５３を夫々表示し、このとき、撮影レンズ４，５の角度情報から接合エリア５１ａは計算して求めることができるため、この接合エリア５１ａを、元の画像に対して色つけするなどして接合エリア５１外の画像と区別化して表示する。   FIG. 6 is an explanatory diagram of a display form of the bonding region 51a. As shown in FIG. 6A, the picked-up images 52 and 53 are respectively displayed on both liquid crystal display units, and at this time, the joint area 51a can be calculated and obtained from the angle information of the photographing lenses 4 and 5. For this reason, the joint area 51a is displayed separately from the image outside the joint area 51 by coloring the original image.

これにより、ユーザは画像のどの部分が合成箇所となるか容易に判断可能となり、パノラマ合成した後の画像を推測することができる。   Thus, the user can easily determine which part of the image is the synthesis part, and can estimate the image after panoramic synthesis.

そして、複眼撮像装置１００は、接合エリア５１ａの画像差分から、この画像差分が所定値より大きいか否かを判定する。画像差分が大きい場合、遠景被写体と近景被写体が同時に画面内に入っていたとき遠景被写体画像のパノラマ合成ズレと近景被写体画像のパノラマ合成ズレとの間にズレ（遠近ズレ）が発生すると判断でき、マーク５５等を液晶表示部７，８に表示してユーザに警告を行う。この遠近ズレは、本実施形態の複眼撮像装置１００では、撮影レンズ４と撮影レンズ５とが垂直方向に離間して並ぶため、垂直方向に発生する。   Then, the compound eye imaging apparatus 100 determines whether or not the image difference is larger than a predetermined value from the image difference of the joint area 51a. When the image difference is large, it can be determined that a disparity (perspective displacement) occurs between the panorama composition shift of the distant subject image and the panorama composition shift of the foreground subject image when the distant subject and the foreground subject are simultaneously in the screen, A mark 55 or the like is displayed on the liquid crystal display units 7 and 8 to warn the user. This perspective shift occurs in the vertical direction in the compound-eye imaging device 100 of the present embodiment, because the photographing lens 4 and the photographing lens 5 are arranged apart from each other in the vertical direction.

この警告を受けたユーザは、直ちに複眼撮像装置１００の筐体１と筐体２との成す角度を調整して図５（ａ）に示す重なり領域５１を狭くすることができ、良好なパノラマ画像を撮影することが可能となる。   The user who has received this warning can immediately adjust the angle formed by the housing 1 and the housing 2 of the compound-eye imaging apparatus 100 to narrow the overlapping area 51 shown in FIG. Can be taken.

図７は、図１で説明した本実施形態に係る複眼撮像装置１００の撮影モードを自動設定する処理手順を示すフローチャートである。撮影モードは、ユーザがメニュー画面にて選択することも可能であるが、本実施形態での複眼撮像装置では、「撮影モード自動設定モード」を選択しておけば、次の様にして撮影モードを複眼撮像装置１００が自動で設定する。   FIG. 7 is a flowchart showing a processing procedure for automatically setting the photographing mode of the compound eye imaging apparatus 100 according to the present embodiment described with reference to FIG. The shooting mode can be selected by the user on the menu screen. However, in the compound eye imaging apparatus of the present embodiment, if the “shooting mode automatic setting mode” is selected, the shooting mode is as follows. Is automatically set by the compound-eye imaging apparatus 100.

図７に示すプログラムは、電源オンでスタートし、先ずステップＳ２０で、撮影レンズ４，５間の相対角度情報を取得する。図２（ａ）に示す様に、筐体１，２が１８０度開いている状態すなわちヒンジ角度「なし」の状態では、撮影レンズ４を用いて撮影した被写体画像と、撮影レンズ５を用いて撮影した被写体画像とは全く同一となる。この場合には、ステップＳ２１に進み、通常撮影モードに自動設定して撮影を行う。   The program shown in FIG. 7 starts when the power is turned on. First, in step S20, information on the relative angle between the photographing lenses 4 and 5 is acquired. As shown in FIG. 2A, in a state where the casings 1 and 2 are opened 180 degrees, that is, in a state where the hinge angle is “none”, a subject image photographed using the photographing lens 4 and a photographing lens 5 are used. The photographed subject image is exactly the same. In this case, the process proceeds to step S21, and shooting is performed automatically in the normal shooting mode.

ステップＳ２０の判定の結果、ヒンジ角度「あり」の状態すなわち図２（ｂ）の状態の場合には、ステップＳ２０からステップＳ２２に進み、パノラマ撮影モードに自動設定して撮影を行う。   If the result of determination in step S20 is that the hinge angle is “present”, that is, the state of FIG. 2B, the process proceeds from step S20 to step S22, and the panorama shooting mode is automatically set and shooting is performed.

ステップＳ２１又はステップＳ２２の後、ステップＳ２３に進み、電源スイッチがＯＦＦにされたか否かを判定し、ＯＦＦでない場合にはステップＳ２０に戻り、ＯＦＦの場合には電源を実際にＯＦＦにしてこのプログラムを終了する。   After step S21 or step S22, the process proceeds to step S23, where it is determined whether or not the power switch has been turned off. If not, the process returns to step S20. Exit.

この様に複眼撮像装置１００を使用するときの形状によって撮影モードを自動設定するため、一々メニュー画面で撮影モードを選択する必要がなくなり、シャッタチャンスを逃すこともなくなる。   As described above, since the shooting mode is automatically set according to the shape when using the compound-eye imaging device 100, it is not necessary to select the shooting mode on the menu screen one by one, and a photo opportunity is not missed.

図８は、別実施形態に係る撮影モードの自動設定処理手順を示すフローチャートである。図７の実施形態に比べて、本実施形態では、撮影モードとして「３Ｄ（立体）撮影モード」が加わっている。即ち、ステップＳ２１の通常撮影モードとステップＳ２２のパノラマ撮影モードに並列に３Ｄ撮影モードを行うステップＳ２５が設けられている。   FIG. 8 is a flowchart illustrating a procedure for automatically setting the shooting mode according to another embodiment. Compared with the embodiment of FIG. 7, in this embodiment, “3D (stereoscopic) shooting mode” is added as a shooting mode. That is, step S25 for performing the 3D shooting mode in parallel with the normal shooting mode of step S21 and the panoramic shooting mode of step S22 is provided.

そして、ステップＳ２０でヒンジ角度「なし」すなわち図１（ａ）に示す様に、筐体１と筐体２とが１８０度開いた状態のとき、ステップＳ２０からステップＳ２４に進み、複眼撮像装置（カメラ）１００の傾き情報を取得して複眼撮像装置１００が９０度傾いているか傾いていないかが判定される。   In step S20, when the hinge angle is “none”, that is, as shown in FIG. 1A, the case 1 and the case 2 are opened 180 degrees, the process proceeds from step S20 to step S24, and the compound-eye imaging device ( Camera) 100 tilt information is acquired, and it is determined whether the compound eye imaging apparatus 100 is tilted 90 degrees or not.

複眼撮像装置１００が傾いてない場合にはステップＳ２１に進んで通常撮影モードの撮影を行い、複眼撮像装置１００が９０度傾いている場合には、撮影レンズ４，５が水平方向に並んだ状態で左右の視差が発生しているため、ステップＳ２５に進み、３Ｄ撮影モードで撮影を行い、ステップＳ２３に進む。   When the compound-eye imaging device 100 is not tilted, the process proceeds to step S21 and photographing in the normal shooting mode is performed. When the compound-eye imaging device 100 is tilted 90 degrees, the photographing lenses 4 and 5 are aligned in the horizontal direction. Since left and right parallax have occurred in step S25, the process proceeds to step S25, where shooting is performed in 3D shooting mode, and the process proceeds to step S23.

この様に、複眼撮像装置１００が９０度傾いているか否かで３Ｄ撮影モードが自動設定されるため、ユーザは面倒な操作を行うことなく、立体画像を撮影することが可能となる。なお、カメラの傾き情報は、例えばカメラ内に重力方向を感知するセンサを設けておけば、容易に認識可能となる。あるいは、スルー画像を取得している最中に水平線や地平線の方向を識別しておき、この水平線等と撮像画像との相対関係で、カメラが９０度傾いているか否かを判断することも可能である。   In this way, since the 3D shooting mode is automatically set depending on whether or not the compound-eye imaging device 100 is tilted by 90 degrees, the user can take a stereoscopic image without performing a troublesome operation. The camera tilt information can be easily recognized if a sensor for detecting the direction of gravity is provided in the camera, for example. Alternatively, it is possible to identify the direction of the horizon or the horizon while acquiring a through image, and determine whether the camera is tilted by 90 degrees based on the relative relationship between the horizon and the captured image. It is.

図９は、更に別実施形態に係る撮影モードの自動設定処理手順を示すフローチャートである。図８の実施形態に比べて、パノラマ撮影モードが水平パノラマ撮影モードと垂直パノラマ撮影モードの２つある点が異なる。図８のパノラマ撮影モードは図９の水平パノラマ撮影モードのことであり、図９では、図８に比べて垂直パノラマ撮影モードが加わっている。   FIG. 9 is a flowchart showing a procedure for automatically setting the shooting mode according to another embodiment. Compared to the embodiment of FIG. 8, there is a difference in that there are two panorama shooting modes, a horizontal panorama shooting mode and a vertical panorama shooting mode. The panorama shooting mode of FIG. 8 is the horizontal panorama shooting mode of FIG. 9. In FIG. 9, a vertical panorama shooting mode is added as compared to FIG.

垂直パノラマ撮影モードとは、撮影レンズ４を通して撮影した画像と、撮影レンズ５を通して撮影した画像とを垂直方向に２枚貼り合わせ合成する撮影モードであり、複眼撮像装置１００を９０度傾けた状態かつヒンジ角度が「ある」状態（図２（ｂ）の状態）で撮影される。   The vertical panorama shooting mode is a shooting mode in which an image shot through the shooting lens 4 and an image shot through the shooting lens 5 are bonded and combined in the vertical direction, and the compound-eye imaging device 100 is tilted 90 degrees. The image is taken in a state where the hinge angle is “present” (the state shown in FIG. 2B).

そこで、ステップＳ２０でヒンジ角度「あり」と判定されたときステップＳ６に進み、複眼撮像装置が９０度傾いているか否かを判定し、傾いているときはステップＳ２７の垂直パノラマ撮影モードに自動的に設定し、傾いていないときはステップＳ２２の水平パノラマ撮影モードに自動的に設定している。   Therefore, when it is determined in step S20 that the hinge angle is “present”, the process proceeds to step S6, where it is determined whether or not the compound-eye imaging device is tilted by 90 degrees, and when tilted, the vertical panorama shooting mode in step S27 is automatically set. When it is not tilted, it is automatically set to the horizontal panorama shooting mode in step S22.

図１０は、本発明の別実施形態に係る複眼撮像装置２００の説明図である。本実施形態の複眼撮像装置２００では、図１０（ａ）に示す様に、筐体２の右側突部に２個の撮影レンズ６１，６２を垂直方向に離間して設け、筐体１の左側突部にも２個の撮影レンズ６３，６４を垂直方向に離間して設けている。各撮影レンズ６１，６２，６３，６４は等間隔となるように、かつ回動軸３上に夫々の撮影レンズのレンズ中心が来るように収納される。   FIG. 10 is an explanatory diagram of a compound eye imaging apparatus 200 according to another embodiment of the present invention. In the compound eye imaging apparatus 200 of the present embodiment, as shown in FIG. 10A, two photographing lenses 61 and 62 are provided on the right side protruding portion of the housing 2 so as to be separated from each other in the vertical direction. Two photographing lenses 63 and 64 are also provided on the protrusion so as to be separated in the vertical direction. The photographing lenses 61, 62, 63, 64 are accommodated so as to be equidistant and so that the center of each photographing lens is located on the rotation shaft 3.

そして、図１０（ｂ）に示す様に、撮影レンズ６１，６２の撮影方向は最初から所要角度だけずらし、撮影レンズ６１，６２でパノラマ画像が撮影できるように夫々の画角６１ａ，６２ａが若干重なる様に突部２ａに取り付けられている。   Then, as shown in FIG. 10B, the photographing directions of the photographing lenses 61 and 62 are shifted by a required angle from the beginning, and the respective viewing angles 61a and 62a are slightly set so that panoramic images can be photographed by the photographing lenses 61 and 62. It is attached to the protrusion 2a so that it may overlap.

撮影レンズ６３，６４も撮影レンズ６１，６２と同様に取り付けられ、筐体１と筐体２とを１８０度開いた状態で、撮影レンズ６１の画角６１ａと撮影レンズ６３の画角６３ａが重なり、撮影レンズ６２の画角６２ａと撮影レンズ６４の画角６４ａが重なるように製造されている。   The photographic lenses 63 and 64 are also attached in the same manner as the photographic lenses 61 and 62, and the angle of view 61a of the photographic lens 61 and the angle of view 63a of the photographic lens 63 overlap with the housing 1 and the housing 2 opened by 180 degrees. The field angle 62a of the photographing lens 62 and the field angle 64a of the photographing lens 64 are manufactured so as to overlap each other.

これにより、筐体１と筐体２とを図１０（ｃ）に示す様に開くと、４つの撮影レンズ６１，６２，６３，６４により４枚の画像を合成して超広域のパノラマ画像を撮影することが可能となる。また、各レンズ間の間隔を図１の実施形態より狭く出来るため、遠近ズレが小さく目立たないパノラマ画像を得ることが可能となる。   As a result, when the housing 1 and the housing 2 are opened as shown in FIG. 10C, four images are synthesized by the four photographing lenses 61, 62, 63, and 64 to form an ultra wide panoramic image. It becomes possible to shoot. In addition, since the distance between the lenses can be narrower than that in the embodiment of FIG. 1, it is possible to obtain a panoramic image with a small perspective shift and inconspicuousness.

以上述べた様に、実施形態の複眼撮像装置は、第１部分筐体及び第２部分筐体でなる筐体と、前記第１部分筐体と前記第２部分筐体とをヒンジ連結する回転軸と、前記第１部分筐体の前記回転軸の中心線上にレンズ中心が配置された第１撮影レンズと、前記第２部分筐体の前記回転軸の中心線上にレンズ中心が配置された第２撮影レンズとを備えることを特徴とする。   As described above, the compound-eye imaging device according to the embodiment includes a housing composed of the first partial housing and the second partial housing, and a rotation that hinges the first partial housing and the second partial housing. A first photographing lens in which a lens center is disposed on a center line of the rotation axis of the first partial housing, and a lens center in which a lens center is disposed on the center line of the rotational shaft of the second partial housing. And 2 photographing lenses.

また、実施形態の複眼撮像装置は、前記第１部分筐体に設けられ前記第１撮影レンズを通して撮像された被写体画像を表示する第１表示部と、前記第２部分筐体に設けられ前記第２撮影レンズを通して撮像された被写体画像を表示する第２表示部とを備えることを特徴とする。   In addition, the compound-eye imaging device of the embodiment includes a first display unit that is provided in the first partial housing and displays a subject image captured through the first photographing lens, and the second partial housing that is provided in the second partial housing. And a second display unit that displays a subject image picked up through the photographing lens.

また、実施形態の複眼撮像装置の前記筐体内には、前記第１撮影レンズ，前記第２撮影レンズを通して得られた被写体光像を夫々電気信号に変換する第１，第２の撮像素子と、各撮像素子の出力信号を画像処理する画像処理手段と、前記撮像素子及び前記画像処理手段を制御する制御手段が収納されることを特徴とする。   Further, in the housing of the compound-eye imaging device of the embodiment, first and second imaging elements that convert subject optical images obtained through the first photographing lens and the second photographing lens into electric signals, respectively, An image processing unit that performs image processing on an output signal of each imaging device and a control unit that controls the imaging device and the image processing unit are housed.

また、実施形態の複眼撮像装置の前記制御手段は、前記第１撮影レンズを通して得られた被写体画像と前記第２撮影レンズを通して得られた被写体画像をパノラマ合成する撮影モードのとき前記第１表示部に表示する被写体画像と前記第２表示部に表示する被写体画像との重なり領域の画像部分を該重なり領域の外側の画像部分と区別化して表示することを特徴とする。   Further, the control means of the compound eye imaging device according to the embodiment is configured such that the first display unit is in a shooting mode in which a subject image obtained through the first photographing lens and a subject image obtained through the second photographing lens are panorama synthesized. The image portion in the overlapping area of the subject image displayed on the second display section and the subject image displayed on the second display section is displayed separately from the image portion outside the overlapping area.

また、実施形態の複眼撮像装置の前記制御手段は、前記重なり領域を特徴点検出で識別することを特徴とする。   Further, the control means of the compound eye imaging device of the embodiment is characterized in that the overlapping area is identified by feature point detection.

また、実施形態の複眼撮像装置の前記制御手段は、前記重なり領域を前記第１撮影レンズと前記第２撮影レンズの各撮影方向の相対角度情報から算出することを特徴とする。   Further, the control means of the compound eye imaging device of the embodiment is characterized in that the overlapping region is calculated from relative angle information in each shooting direction of the first shooting lens and the second shooting lens.

また、実施形態の複眼撮像装置の前記制御手段は、前記重なり領域を特徴点検出と前記相対角度情報とから算出することを特徴とする。   Further, the control means of the compound eye imaging device of the embodiment is characterized in that the overlapping area is calculated from feature point detection and the relative angle information.

また、実施形態の複眼撮像装置は、前記特徴点検出を前記相対角度情報で求めた重なり領域内で行うことを特徴とする。   In addition, the compound eye imaging apparatus according to the embodiment is characterized in that the feature point detection is performed in an overlapping region obtained from the relative angle information.

また、実施形態の複眼撮像装置の前記制御手段は、前記重なり領域の画像差分量が所定の閾値以上あるときユーザに警告することを特徴とする。   In addition, the control unit of the compound-eye imaging device according to the embodiment is characterized in that the user is warned when the image difference amount of the overlapping area is equal to or greater than a predetermined threshold value.

また、実施形態の複眼撮像装置の前記制御手段は、前記第１撮影レンズと前記第２撮影レンズの各撮影方向の相対角度情報に基づいてパノラマ撮影モードで撮影を行うか、通常撮影モードで撮影を行うかを自動的選択することを特徴とする。   In addition, the control unit of the compound-eye imaging device of the embodiment performs shooting in a panoramic shooting mode based on relative angle information of each shooting direction of the first shooting lens and the second shooting lens, or shooting in a normal shooting mode. It is characterized by automatically selecting whether or not to perform.

また、実施形態の複眼撮像装置の前記制御手段は、前記第１撮影レンズと前記第２撮影レンズの各撮影方向の相対角度情報と前記筐体の傾き情報とに基づいてパノラマ撮影モードで撮影を行うか、通常撮影モードで撮影を行うか、立体画像撮影モードで撮影を行うかを自動的選択することを特徴とする。   In addition, the control unit of the compound-eye imaging device according to the embodiment performs shooting in a panoramic shooting mode based on relative angle information of each shooting direction of the first shooting lens and the second shooting lens and tilt information of the housing. It is characterized by automatically selecting whether to perform shooting, normal shooting mode, or stereoscopic image shooting mode.

また、実施形態の複眼撮像装置の前記パノラマ撮影モードは前記傾き情報に基づき水平パノラマ撮影モードと垂直パノラマ撮影モードの自動選択を行うことを特徴とする。   The panorama shooting mode of the compound-eye imaging device of the embodiment is characterized in that a horizontal panorama shooting mode and a vertical panorama shooting mode are automatically selected based on the tilt information.

また、実施形態の複眼撮像装置は、前記第１部分筐体の前記回転軸の中心線上にレンズ中心が配置された第３撮影レンズと、前記第２部分筐体の前記回転軸の中心線上にレンズ中心が配置された第４撮影レンズとを備えることを特徴とする。   Further, the compound-eye imaging device of the embodiment includes a third photographing lens in which a lens center is arranged on a center line of the rotation axis of the first partial housing, and a center line of the rotation shaft of the second partial housing. And a fourth photographic lens having a lens center.

以上述べた実施形態によれば、手持ち操作でヒンジ回動を調整するだけで、重なり程度の異なるパノラマ撮影を容易に行うことが可能となり、使い勝手が優れパノラマ合成ズレ，遠近ズレの小さな高品質のパノラマ画像を撮影することができる。   According to the embodiment described above, it is possible to easily perform panoramic photography with different overlapping levels by simply adjusting the hinge rotation by hand-held operation, and it is excellent in usability and has high quality with small panorama composition shift and perspective shift. Panorama images can be taken.

本発明に係る複眼撮像装置は、手持ち撮影により複数カメラの撮影レンズの画角相互の関連性を即座に変更可能なため、パノラマ撮影に適した複眼撮像装置として有用である。   The compound-eye imaging apparatus according to the present invention is useful as a compound-eye imaging apparatus suitable for panoramic photography because the relationship between the angles of view of the photographing lenses of a plurality of cameras can be changed immediately by hand-held photography.

１ 第１筐体
１ａ 突部
２ 第２筐体
２ａ 突部
３ 回動軸（ヒンジ軸）
４，５，６１〜６４ 撮影レンズ
４ａ，５ａ，６１ａ〜６４ａ 画角
６，７ 表示部
１５，１６ 撮像素子
２１ ＣＰＵ
３０ 画像データ演算処理部
４１ レンズ相対角度情報取得部
５１ 重なり領域
５１ａ パノラマ画像の接合領域
５２，５３ 撮像画像
５５ 警告マーク
１００，２００ 複眼撮像装置 DESCRIPTION OF SYMBOLS 1 1st housing | casing 1a Protrusion 2 2nd housing | casing 2a Protrusion 3 Rotating shaft (hinge shaft)
4, 5, 61 to 64 Shooting lenses 4a, 5a, 61a to 64a Angles of view 6, 7 Display units 15 and 16 Image sensor 21 CPU
30 Image data calculation processing unit 41 Lens relative angle information acquisition unit 51 Overlapping region 51a Joining region 52, 53 of panoramic image Captured image 55 Warning mark 100, 200 Compound eye imaging device

Claims (13)

第１部分筐体及び第２部分筐体でなる筐体と、前記第１部分筐体と前記第２部分筐体とをヒンジ連結する回転軸と、前記第１部分筐体の前記回転軸の中心線上にレンズ中心が配置された第１撮影レンズと、前記第２部分筐体の前記回転軸の中心線上にレンズ中心が配置された第２撮影レンズとを備える複眼撮像装置。   A housing composed of a first partial housing and a second partial housing, a rotation shaft for hinge-connecting the first partial housing and the second partial housing, and the rotation shaft of the first partial housing. A compound eye imaging apparatus comprising: a first photographing lens having a lens center disposed on a center line; and a second photographing lens having a lens center disposed on a center line of the rotation axis of the second partial housing. 請求項１に記載の複眼撮像装置であって、前記第１部分筐体に設けられ前記第１撮影レンズを通して撮像された被写体画像を表示する第１表示部と、前記第２部分筐体に設けられ前記第２撮影レンズを通して撮像された被写体画像を表示する第２表示部とを備える複眼撮像装置。   2. The compound eye imaging device according to claim 1, wherein the first display unit is provided in the first partial housing and displays a subject image captured through the first photographing lens, and is provided in the second partial housing. And a second display unit that displays a subject image captured through the second photographic lens. 請求項１又は請求項２に記載の複眼撮像装置であって、前記筐体内には、前記第１撮影レンズ，前記第２撮影レンズを通して得られた被写体光像を夫々電気信号に変換する第１，第２の撮像素子と、各撮像素子の出力信号を画像処理する画像処理手段と、前記撮像素子及び前記画像処理手段を制御する制御手段が収納される複眼撮像装置。   3. The compound-eye imaging device according to claim 1, wherein in the housing, a subject light image obtained through the first photographing lens and the second photographing lens is converted into an electrical signal, respectively. , A second image sensor, an image processing unit that performs image processing on an output signal of each image sensor, and a control unit that controls the image sensor and the image processing unit. 請求項３に記載の複眼撮像装置であって、前記制御手段は、前記第１撮影レンズを通して得られた被写体画像と前記第２撮影レンズを通して得られた被写体画像をパノラマ合成する撮影モードのとき前記第１表示部に表示する被写体画像と前記第２表示部に表示する被写体画像との重なり領域の画像部分を該重なり領域の外側の画像部分と区別化して表示する複眼撮像装置。   4. The compound eye imaging apparatus according to claim 3, wherein the control unit is in a shooting mode in which a subject image obtained through the first photographing lens and a subject image obtained through the second photographing lens are panorama synthesized. A compound-eye imaging apparatus that displays an image portion of an overlapping area between a subject image displayed on a first display section and a subject image displayed on the second display section, distinguishing it from an image portion outside the overlapping area. 請求項４に記載の複眼撮像装置であって、前記制御手段は、前記重なり領域を特徴点検出で識別する複眼撮像装置。   5. The compound eye imaging apparatus according to claim 4, wherein the control unit identifies the overlapping region by feature point detection. 請求項４に記載の複眼撮像装置であって、前記制御手段は、前記重なり領域を前記第１撮影レンズと前記第２撮影レンズの各撮影方向の相対角度情報から算出する複眼撮像装置。   5. The compound eye imaging apparatus according to claim 4, wherein the control unit calculates the overlapping region from relative angle information of each imaging direction of the first imaging lens and the second imaging lens. 請求項５に記載の複眼撮像装置であって、前記制御手段は、前記重なり領域を特徴点検出と前記相対角度情報とから算出する複眼撮像装置。   6. The compound eye imaging apparatus according to claim 5, wherein the control unit calculates the overlapping area from feature point detection and the relative angle information. 請求項７に記載の複眼撮像装置であって、前記特徴点検出は前記相対角度情報で求めた重なり領域内で行う複眼撮像装置。   The compound eye imaging apparatus according to claim 7, wherein the feature point detection is performed in an overlapping region obtained from the relative angle information. 請求項４に記載の複眼撮像装置であって、前記制御手段は、前記重なり領域の画像差分量が所定の閾値以上あるときユーザに警告する複眼撮像装置。   5. The compound eye imaging apparatus according to claim 4, wherein the control unit warns a user when an image difference amount of the overlapping region is equal to or greater than a predetermined threshold value. 請求項３に記載の複眼撮像装置であって、前記制御手段は、前記第１撮影レンズと前記第２撮影レンズの各撮影方向の相対角度情報に基づいてパノラマ撮影モードで撮影を行うか、通常撮影モードで撮影を行うかを自動的選択する複眼撮像装置。   4. The compound eye imaging apparatus according to claim 3, wherein the control unit performs photographing in a panoramic photographing mode based on relative angle information of each photographing direction of the first photographing lens and the second photographing lens, or is normal. A compound eye imaging device that automatically selects whether to shoot in the shooting mode. 請求項３に記載の複眼撮像装置であって、前記制御手段は、前記第１撮影レンズと前記第２撮影レンズの各撮影方向の相対角度情報と前記筐体の傾き情報とに基づいてパノラマ撮影モードで撮影を行うか、通常撮影モードで撮影を行うか、立体画像撮影モードで撮影を行うかを自動的選択する複眼撮像装置。   4. The compound eye imaging apparatus according to claim 3, wherein the control unit is configured to take a panoramic image based on relative angle information of each imaging direction of the first imaging lens and the second imaging lens and tilt information of the housing. A compound-eye imaging device that automatically selects whether shooting is performed in a mode, normal shooting mode, or stereoscopic image shooting mode. 請求項１１に記載の複眼撮像装置であって、前記パノラマ撮影モードは前記傾き情報に基づき水平パノラマ撮影モードと垂直パノラマ撮影モードの自動選択を行う複眼撮像装置。   12. The compound-eye imaging apparatus according to claim 11, wherein the panorama shooting mode automatically selects a horizontal panorama shooting mode and a vertical panorama shooting mode based on the tilt information. 請求項１に記載の複眼撮像装置であって、前記第１部分筐体の前記回転軸の中心線上にレンズ中心が配置された第３撮影レンズと、前記第２部分筐体の前記回転軸の中心線上にレンズ中心が配置された第４撮影レンズとを備える複眼撮像装置。   2. The compound eye imaging device according to claim 1, wherein a third photographing lens having a lens center disposed on a center line of the rotation axis of the first partial housing, and the rotation shaft of the second partial housing. 3. A compound eye imaging apparatus comprising: a fourth photographing lens having a lens center disposed on a center line.
JP2010046874A 2010-03-03 2010-03-03 Compound-eye imaging apparatus Pending JP2011182328A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010046874A JP2011182328A (en) 2010-03-03 2010-03-03 Compound-eye imaging apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010046874A JP2011182328A (en) 2010-03-03 2010-03-03 Compound-eye imaging apparatus

Publications (1)

Publication Number Publication Date
JP2011182328A true JP2011182328A (en) 2011-09-15

Family

ID=44693344

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010046874A Pending JP2011182328A (en) 2010-03-03 2010-03-03 Compound-eye imaging apparatus

Country Status (1)

Country Link
JP (1) JP2011182328A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018061882A1 (en) * 2016-09-28 2018-04-05 京セラ株式会社 Camera module, selector, controller, camera monitoring system, and moving body
JP2021519954A (en) * 2018-04-26 2021-08-12 テンエントゥ カンパニー，リミテッド Wide-angle video provision method

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018061882A1 (en) * 2016-09-28 2018-04-05 京セラ株式会社 Camera module, selector, controller, camera monitoring system, and moving body
CN109792482A (en) * 2016-09-28 2019-05-21 京瓷株式会社 Camara module, selector, controller, camera surveillance system and moving body
JPWO2018061882A1 (en) * 2016-09-28 2019-06-24 京セラ株式会社 Camera module, selector, controller, camera monitor system and moving body
US20200036903A1 (en) * 2016-09-28 2020-01-30 Kyocera Corporation Camera module, selector, controller, camera monitoring system, and moveable body
US10893208B2 (en) 2016-09-28 2021-01-12 Kyocera Corporation Camera module, selector, controller, camera monitoring system, and moveable body
CN109792482B (en) * 2016-09-28 2021-07-23 京瓷株式会社 Camera module, selector, controller, camera monitoring system, and moving object
JP2021519954A (en) * 2018-04-26 2021-08-12 テンエントゥ カンパニー，リミテッド Wide-angle video provision method
JP7231281B2 (en) 2018-04-26 2023-03-01 テンエントゥ カンパニー，リミテッド Wide-angle image provision method

Similar Documents

Publication Publication Date Title
EP2590421B1 (en) Single-lens stereoscopic image capture device
KR101784176B1 (en) Image photographing device and control method thereof
JP4957759B2 (en) Imaging apparatus and imaging method
JP4356621B2 (en) Imaging apparatus and imaging method
JP5371845B2 (en) Imaging apparatus, display control method thereof, and three-dimensional information acquisition apparatus
JP5705883B2 (en) Lens device
JPH11341522A (en) Stereoscopic image photographing device
JP2007201539A (en) Digital camera
JP2011259168A (en) Stereoscopic panoramic image capturing device
JP5716130B2 (en) Imaging apparatus and imaging support method
JP2008205569A (en) Imaging apparatus and method
JP2009094724A (en) Imaging apparatus
JP2011166756A (en) Photographing apparatus and photographing system
JP2012222471A (en) Multi-eye imaging apparatus and multi-eye imaging method, and mobile information terminal device
JP2008061259A (en) Photographing apparatus
JP2009077090A (en) Imaging apparatus, imaging system, and image reading system
WO2013035427A1 (en) Stereoscopic image capture device and method
JP2011035642A (en) Multiple eye photographing device, and adjustment method and program thereof
JP2002218506A (en) Image pickup device
JP2011182328A (en) Compound-eye imaging apparatus
KR100716179B1 (en) Outfocusing image photographing system and method in two camera phone
JP4516221B2 (en) Imaging device
JP2011091750A (en) Stereoscopic image pick-up apparatus and method of controlling the same
JP2006148701A (en) System and method of calibrating position of digital camera
JP2014155126A (en) Display device, display method, and program

Legal Events

Date Code Title Description
RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20111216