JP2001189847A - Device and method for correcting picture tilt, and recording medium storing picture tilt correcting program - Google Patents

Abstract

PROBLEM TO BE SOLVED: To properly correct the distortion of a picture caused by the tilt of a photographing object surface with respect to plural divided pictures obtained by dividing and photographing. SOLUTION: When the surface of an original is tilted with respect to a camera, a photographing range is divided into two parts and photographed with the camera fixed and with only a photographing direction (CCD surface) varied, thereby a photographic picture shown by (a) is obtained. The second picture is photographed in a state where the CCD surface and the surface of the original directly face with each other, but the first picture is photographed in a state where the CCD surface and the surface of the original are tilted by the sum of the tilt of the surface of the original and that of the photographing direction. Thus, though picture distortion does not occur in the second picture, marked rapid distortion occurs in the first picture. This picture is enlarged and corrected in the (y) direction with position of L0 as reference considering the tilt of the CCD surface and the surface of the original (b), and enlarged and corrected in the (x) direction (c). Thus, the picture distortion caused by the tilt of the original is corrected to obtain a corrected picture where the first and the second pictures have the same magnification.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【０００１】[0001]

【発明の属する技術分野】本発明は画像傾き補正装置、
画像傾き補正方法および画像傾き補正プログラムを記録
した記録媒体に関し、特に、撮影対象となる面を分割撮
影した際の複数の分割画像に対して、撮影対象となる面
の傾きを考慮した適切な傾き補正を行なうことを目的と
する画像傾き補正装置、画像傾き補正方法および画像傾
き補正プログラムを記録した記録媒体に関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an image inclination correcting device,
The present invention relates to a recording medium on which an image inclination correction method and an image inclination correction program are recorded, and in particular, for a plurality of divided images obtained by dividing and photographing a surface to be photographed, an appropriate inclination in consideration of the inclination of the surface to be photographed. The present invention relates to an image skew correction device, an image skew correction method, and a recording medium on which an image skew correction program is recorded for performing correction.

【０００２】[0002]

【従来の技術】デジタルカメラ等に用いられるエリアセ
ンサの解像度は、近年飛躍的に向上しているが、文書画
像の入力という用途に対しては未だ不十分なレベルであ
る。そこで、従来から、解像度不足を補い比較的容易に
高解像度化を実現すべく、文書画像を複数に分割して撮
影し、そこで得られた分割画像を貼り合せて合成画像を
生成するという技術が提案されている。2. Description of the Related Art Although the resolution of an area sensor used in a digital camera or the like has been dramatically improved in recent years, it is still insufficient for a purpose of inputting a document image. In order to compensate for the lack of resolution and achieve relatively high resolution relatively easily, a technique has been conventionally used in which a document image is divided into a plurality of pieces and photographed, and the obtained divided images are combined to generate a composite image. Proposed.

【０００３】特開平１１−１９５１０４にも、そのよう
な分割画像を貼り合せて高解像度の合成画像を生成する
という技術が開示されている。そこでは、特に、合成画
像を生成するに際し、分割画像に対する撮影方向（撮像
面の法線方向）が画面中心からずれていることにより生
じる画像の歪みを解決するための補正方法について開示
されている。Japanese Patent Application Laid-Open No. H11-195104 discloses a technique of generating a high-resolution composite image by combining such divided images. In this regard, there is disclosed a correction method for solving a distortion of an image caused by a shift of a shooting direction (normal direction of an imaging surface) with respect to a divided image from a center of a screen when a composite image is generated. .

【０００４】図１３は、撮影方向が画面中心からずれて
いることにより生じる画像歪みの補正を説明するための
図である。図１３（ａ）は、原稿を左右に２分割して撮
影した際に得られる画像（第１画像および第２画像）を
示しており、図１３（ｂ）は、その際の撮影状況（原稿
面と撮影方向との関係）を示している。なお、ここで
は、第１画像を撮影する際の光軸方向を第１撮影方向、
第２画像を撮影する際の光軸方向を第２撮影方向として
いる。また、実際には貼り合せの対応点を検索するため
に中央部が重なるように撮影方向が設定されるが、ここ
では省略している（以下、図５、図１４等においても同
じ）。FIG. 13 is a diagram for explaining correction of image distortion caused by a shift of the photographing direction from the center of the screen. FIG. 13A shows an image (first image and second image) obtained when an original is divided into two parts and photographed, and FIG. 13B shows the photographing state (original state) at that time. (Relationship between plane and shooting direction). Note that, here, the optical axis direction at the time of shooting the first image is the first shooting direction,
The optical axis direction at the time of capturing the second image is defined as a second capturing direction. In addition, in actuality, the photographing direction is set so that the center portions are overlapped in order to search for a corresponding point of bonding, but this is omitted here (the same applies to FIGS. 5 and 14 and the like).

【０００５】原稿面に対して撮影方向に傾きがなけれ
ば、即ち、図１３（ｂ）の原稿面Ｕと撮像面Ｖに正対す
る面Ｗとの角度差が０であれば、撮影画像としては、長
方形の画像が得られるはずである。しかし、第１撮影方
向および第２撮影方向とも、原稿面Ｕと撮像面Ｖに正対
する面Ｗとの角度差がθ／２の傾きを有している。した
がって、これらの撮影方向において撮影される画像は、
図１３（ａ）に示すように、第１画像および第２画像と
も、中心から離れるに従って縮小したような歪んだ画像
となる。If there is no inclination in the photographing direction with respect to the original surface, that is, if the angle difference between the original surface U and the surface W directly facing the imaging surface V in FIG. Should give a rectangular image. However, in both the first imaging direction and the second imaging direction, the angle difference between the document surface U and the surface W directly facing the imaging surface V has an inclination of θ / 2. Therefore, images shot in these shooting directions are:
As shown in FIG. 13A, both the first image and the second image are distorted images that are reduced as they move away from the center.

【０００６】特開平１１−１９５１０４に示される技術
では、このような画像歪みを是正すべく、第１および第
２の各画像データに撮影方向の傾き（θ／２）を考慮し
た補正を行なう。そして、最終的に歪みの生じない状態
において両画像を合成することにより高解像度の画像生
成を可能としている。In the technique disclosed in Japanese Patent Application Laid-Open No. H11-195104, in order to correct such image distortion, the first and second image data are corrected in consideration of the inclination (θ / 2) of the photographing direction. Finally, by combining both images in a state where no distortion occurs, a high-resolution image can be generated.

【０００７】しかしながら、この特開平１１−１９５１
０４に示される技術では、上述したように撮影方向の傾
きが考慮され、これにより生じる画像歪みは補正される
が、カメラ方向と原稿面との傾きについては考慮されて
いない。However, Japanese Patent Application Laid-Open No. 11-951
In the technique shown in FIG. 04, the inclination of the photographing direction is considered as described above, and the image distortion caused by this is corrected, but the inclination between the camera direction and the document surface is not considered.

【０００８】通常、デジタルカメラ等は操作者が手持ち
で撮影するため、原稿とカメラとを正対させることは非
常に難しい。また、会議の場においてホワイトボードに
記された内容を撮影する際などは、操作者の席とホワイ
トボードとの位置関係により斜めから撮影しなければな
らない場合もある。したがって、現実には、原稿面はカ
メラ方向に対して傾いていることが多く、特開平１１−
１９５１０４の技術によっては、この傾きから生じる画
像歪みを補正することはできない。[0008] Normally, a digital camera or the like is hand-held by an operator, so it is very difficult to directly face a document and the camera. Further, when photographing the content written on the whiteboard in a meeting place, it may be necessary to take a picture obliquely depending on the positional relationship between the operator's seat and the whiteboard. Therefore, in reality, the document surface is often inclined with respect to the camera direction.
With the technique of 195104, it is not possible to correct the image distortion resulting from this inclination.

【０００９】一方、原稿面とカメラ方向の傾きにより生
じる画像歪みを補正する技術については、特開平１０−
１３７３３等に開示されている。そこには、撮影画面中
央の撮影倍率を基準として、全画面がその倍率に一致す
るように各部を拡大または縮小するという技術が記載さ
れている。つまり、画面中央の撮影倍率に基づいた補正
を行なうことにより、原稿面とカメラ方向の傾きから生
じる画像歪みを補正することを可能としている。On the other hand, Japanese Patent Application Laid-Open No.
13733 and the like. The document describes a technique of enlarging or reducing each unit so that the entire screen matches the magnification based on the imaging magnification at the center of the imaging screen. That is, by performing the correction based on the photographing magnification at the center of the screen, it is possible to correct the image distortion caused by the inclination of the document surface and the camera direction.

【００１０】[0010]

【発明が解決しようとする課題】しかしながら、いずれ
の先行技術にも、原稿傾きと撮影方向の傾きの影響が混
在した画像に対してどのように補正すればよいかは示さ
れていない。However, none of the prior arts discloses how to correct an image in which the influence of the original inclination and the inclination of the photographing direction are mixed.

【００１１】また、それぞれの分割画像に対して、特開
平１０−１３７３３に示される技術を利用して補正を行
なうと、以下に示すような不都合が生じることになる。
図１４および図１５を用いて、このような撮影画面中央
を撮影倍率の基準とした場合の不具合を説明する。Further, when the respective divided images are corrected using the technique disclosed in Japanese Patent Application Laid-Open No. 10-13733, the following inconveniences occur.
With reference to FIGS. 14 and 15, a description will be given of a problem in the case where the center of the shooting screen is used as a reference for the shooting magnification.

【００１２】図１４は、原稿がカメラに対してθａ傾い
た状態で撮影された際の補正前の分割画像およびその撮
影状況を説明するための図である。図１４（ａ）は、原
稿を左右に２分割して撮影した際に得られる画像（第１
画像および第２画像）を示しており、図１４（ｂ）は、
その際の撮影状況（原稿面と撮影方向との関係）を示し
ている。なお、図１３と同様に、第１画像および第２画
像を撮影する方向をそれぞれ第１撮影方向および第２撮
影方向としている。FIG. 14 is a diagram for explaining a divided image before correction and a photographing state thereof when a document is photographed in a state of being inclined by θa with respect to the camera. FIG. 14A shows an image (first image) obtained when a document is photographed by dividing the document into two right and left parts.
FIG. 14B shows an image and a second image).
The photographing state (the relationship between the document surface and the photographing direction) at that time is shown. Note that, similarly to FIG. 13, directions in which the first image and the second image are captured are referred to as a first capturing direction and a second capturing direction, respectively.

【００１３】図１４（ｂ）において、矢印Ａはカメラ正
面方向を示している。そして、原稿Ｕはカメラに対して
（カメラ正面方向に垂直な面に対して）θａの傾きを有
している。以下、原稿面Ｕとカメラ正面方向に垂直な面
とのなす角を、「原稿傾斜角」という。なお、便宜上、
ここでは、θａ＝θ／２の場合について考える。In FIG. 14B, the arrow A indicates the front direction of the camera. The original U has an inclination of θa with respect to the camera (with respect to a plane perpendicular to the front direction of the camera). Hereinafter, the angle between the document surface U and a surface perpendicular to the camera front direction is referred to as a “document tilt angle”. For convenience,
Here, the case where θa = θ / 2 is considered.

【００１４】第２撮影方向は、原稿面Ｕに対して傾きが
ない（原稿面Ｕと撮像面Ｖと正対する面Ｗとの角度差が
０）。したがって、この状況で撮影された画像は、図１
４（ａ）の右側に示されるように、歪みのない長方形の
画像が得られる（第２画像）。The second photographing direction is not inclined with respect to the document surface U (the angle difference between the document surface U and the surface W facing the image pickup surface V is 0). Therefore, the image taken in this situation is shown in FIG.
4 (a), a rectangular image without distortion is obtained (second image).

【００１５】これに対して、第１撮影方向は、図１４
（ｂ）に示すように、原稿面Ｕに対してθ（θ＝θ／２
＋θａ）の傾きを有している。これは、撮影方向のカメ
ラ正面方向（矢印Ａ）に対する傾きθ／２（以下、「撮
影方向傾斜角」という）に加えて、原稿傾斜角θａが考
慮されることになるからである。On the other hand, the first photographing direction is shown in FIG.
As shown in (b), the original surface U is θ (θ = θ / 2
+ Θa). This is because the document inclination angle θa is considered in addition to the inclination θ / 2 (hereinafter referred to as “imaging direction inclination angle”) of the imaging direction with respect to the camera front direction (arrow A).

【００１６】このため、図１４（ａ）に示すように、第
１画像は、図１３（ａ）に示す第１画像よりも急激に、
中心から離れるに従って縮小したような歪んだ画像とな
っている。For this reason, as shown in FIG. 14A, the first image is sharper than the first image shown in FIG.
The image is distorted as if it were reduced as it moved away from the center.

【００１７】図１５は、図１４に示す撮影状況のもとで
撮影された各画像に特開平１０−１３７３３の技術を用
いて補正を行なった場合の図である。ここで図１５
（ａ）は図１４（ａ）と同じ補正前の撮影画像であり、
図１５（ｂ）は補正後の撮影画像である。特開平１０−
１３７３３の技術によると、画面中央の倍率に合せて補
正が行なわれる。したがって、この例の各分割画像の補
正に利用しようとすると、第１画像は基準倍率がＬ_Lと
なり、第２画像は基準倍率がＬ_Rとなる。撮影倍率Ｌ _Lと
Ｌ_Rとは異なるため、図１５（ｂ）に示すように、補正
後の画像は、左右で異なる倍率の画像が得られる。した
がって、この状態ではこれらの分割画像を貼り合せ、合
成することができない。FIG. 15 shows the situation under the photographing condition shown in FIG.
Using the technology of JP-A-10-13733 for each captured image
FIG. 7 is a diagram in the case where correction has been performed. Here, FIG.
(A) is a photographed image before the same correction as in FIG.
FIG. 15B is a photographed image after the correction. JP-A-10-
According to the technology of 13733, the compensation is made according to the magnification at the center of the screen.
Positive is done. Therefore, the complement of each divided image in this example is
To use the image exactly, the first image has a reference magnification of L_LWhen
And the reference magnification of the second image is L_RBecomes Shooting magnification L _LWhen
L_RTherefore, as shown in FIG.
As for the subsequent image, images of different magnifications are obtained on the left and right. did
Therefore, in this state, these divided images are pasted together and
Cannot be achieved.

【００１８】このように、カメラと原稿が傾いている場
合には、撮影された複数の分割画像の中央の倍率がそれ
ぞれ異なるため、補正後の画像の倍率もそれぞれ異なる
ものとなり、適正な画像が得られないという不都合が生
じていた。As described above, when the camera and the original are tilted, the magnifications at the center of the plurality of captured divided images are different from each other, and the magnifications of the corrected images are also different from each other. The inconvenience that it cannot be obtained has occurred.

【００１９】本発明はかかる実状に鑑み考え出されたも
のであり、その目的は、分割撮影された複数の分割画像
に対して、撮影対象面の傾きから生じる画像歪みを適切
に補正することのできる画像傾き補正装置および画像傾
き補正方法を提供することである。SUMMARY OF THE INVENTION The present invention has been made in view of the above circumstances, and an object of the present invention is to appropriately correct an image distortion caused by a tilt of a photographing target surface for a plurality of divided images photographed in a divided manner. It is an object of the present invention to provide an image skew correction device and an image skew correction method that can be performed.

【００２０】[0020]

【課題を解決するための手段】上記目的を達成するた
め、本発明のある局面に従うと、画像傾き補正装置は、
撮影対象となる面を分割撮影した際の複数の分割画像を
取得する画像取得部と、基準方向に対する撮影対象とな
る面の傾きを取得する対象面傾き取得部と、基準方向に
対する複数の分割画像それぞれの撮影方向の傾きを取得
する撮影方向傾き取得部と、取得された撮影対象となる
面の傾きおよび撮影方向の傾きに応じて、取得された複
数の分割画像それぞれを補正する補正部とを備える。In order to achieve the above object, according to one aspect of the present invention, an image skew correction apparatus comprises:
An image acquisition unit that acquires a plurality of divided images when a surface to be photographed is dividedly photographed, a target surface inclination acquisition unit that acquires the inclination of a surface to be photographed with respect to a reference direction, and a plurality of divided images with respect to the reference direction A photographing direction inclination acquiring unit that acquires the inclination of each photographing direction, and a correcting unit that corrects each of the acquired plurality of divided images according to the acquired inclination of the surface to be photographed and the inclination of the photographing direction. Prepare.

【００２１】この発明に従うと、基準方向に対する撮影
対象となる面の傾きおよび複数の分割画像それぞれの撮
影方向の傾きが取得され、これらに応じて、取得された
複数の分割画像それぞれが補正される。したがって、分
割撮影された複数の分割画像に対して、撮影対象面の傾
きから生じる画像歪みを適切に補正することのできる画
像傾き補正装置を提供することが可能となる。According to the present invention, the inclination of the surface to be photographed with respect to the reference direction and the inclination of each of the plurality of divided images in the photographing direction are acquired, and each of the acquired plurality of divided images is corrected accordingly. . Therefore, it is possible to provide an image tilt correction apparatus that can appropriately correct image distortion resulting from the tilt of the shooting target surface for a plurality of split images that have been shot.

【００２２】好ましくは、前記取得された複数の分割画
像は、撮影方向をそれぞれ変化させて撮影された画像を
含む。[0022] Preferably, the plurality of acquired divided images include images photographed by respectively changing photographing directions.

【００２３】これによると、複数の分割画像は撮影方向
を変化させることにより撮影されたものが含まれる。こ
のため、撮像素子部の数を増加させることなく簡易な構
成でもって複数の分割画像が撮影され、容易に複数の分
割画像を取得することが可能となる。According to this, the plurality of divided images include those captured by changing the capturing direction. For this reason, a plurality of divided images can be photographed with a simple configuration without increasing the number of imaging elements, and a plurality of divided images can be easily obtained.

【００２４】また、好ましくは、前記補正部は、同じ基
準点に基づいて、複数の分割画像それぞれを補正するこ
とを特徴とする。Preferably, the correction section corrects each of the plurality of divided images based on the same reference point.

【００２５】これによると、画像取得部により取得され
た複数の分割画像は、同じ基準点に基づいて補正され
る。したがって、それぞれの分割画像データが同じ倍率
となるように、撮影対象面の傾きから生じる画像歪みが
適切に補正されることになる。According to this, the plurality of divided images acquired by the image acquiring section are corrected based on the same reference point. Therefore, the image distortion resulting from the inclination of the imaging target surface is appropriately corrected so that each divided image data has the same magnification.

【００２６】本発明の別の局面に従うと、画像傾き補正
装置は、撮影対象となる面を分割撮影した際の複数の分
割画像を取得する画像取得部と、基準方向に対する撮影
対象となる面の傾きを取得する対象面傾き取得部と、取
得された撮影対象となる面の傾きを考慮して、取得され
た複数の分割画像それぞれを補正する補正部とを備え、
補正部は、同じ基準点に基づいて、複数の分割画像それ
ぞれを補正することを特徴とする。According to another aspect of the present invention, an image tilt correction apparatus includes: an image acquisition unit that acquires a plurality of divided images when a surface to be photographed is divided and photographed; A target surface inclination obtaining unit that obtains an inclination, and a correction unit that corrects each of the obtained plurality of divided images in consideration of the inclination of the obtained imaging target surface,
The correction unit corrects each of the plurality of divided images based on the same reference point.

【００２７】この発明に従うと、基準方向に対する撮影
対象となる面の傾きが取得され、その傾きを考慮して、
同じ基準点に基づいて複数の分割画像それぞれが補正さ
れる。したがって、それぞれの分割画像が同じ倍率とな
るように、撮影対象面の傾きから生じる画像歪みを適切
に補正することのできる画像傾き補正装置を提供するこ
とが可能となる。According to the present invention, the inclination of the surface to be photographed with respect to the reference direction is obtained, and taking into account the inclination,
Each of the plurality of divided images is corrected based on the same reference point. Therefore, it is possible to provide an image inclination correction device that can appropriately correct image distortion caused by the inclination of the imaging target surface so that each divided image has the same magnification.

【００２８】本発明のさらに別の局面に従うと、画像傾
き補正装置は、撮影対象となる面を分割撮影した際の複
数の分割画像を取得する画像取得部と、基準方向に対す
る撮影対象となる面の傾きを取得する対象面傾き取得部
と、取得された撮影対象となる面の傾きを考慮して、取
得された複数の分割画像それぞれを補正する補正部とを
備え、補正部は、同じ倍率になるように複数の分割画像
それぞれを補正することを特徴とする。According to still another aspect of the present invention, an image inclination correcting apparatus includes: an image acquiring unit for acquiring a plurality of divided images when a surface to be photographed is dividedly photographed; and a surface to be photographed with respect to a reference direction. And a correction unit that corrects each of the acquired plurality of divided images in consideration of the obtained tilt of the target surface, and the correction unit has the same magnification. It is characterized in that each of the plurality of divided images is corrected so that

【００２９】この発明に従うと、基準方向に対する撮影
対象となる面の傾きが取得され、その傾きを考慮して、
同じ倍率になるように複数の分割画像それぞれが補正さ
れる。したがって、その後の分割画像の張り合わせ処理
が容易となり、撮影対象面の傾きから生じる画像歪みを
適切に補正することのできる画像傾き補正装置を提供す
ることが可能となる。According to the present invention, the inclination of the surface to be photographed with respect to the reference direction is obtained, and taking into account the inclination,
Each of the plurality of divided images is corrected so as to have the same magnification. Therefore, the subsequent process of joining the divided images is facilitated, and it is possible to provide an image tilt correction device that can appropriately correct the image distortion caused by the tilt of the imaging target surface.

【００３０】また、好ましくは、前記対象面傾き取得部
は、測距センサにより測定された撮影対象となる面上の
複数の点までの距離に基づいて取得することを特徴とす
る。Preferably, the object plane inclination acquiring section acquires the object plane inclination based on distances to a plurality of points on a plane to be photographed measured by a distance measuring sensor.

【００３１】これによると、基準方向に対する撮影対象
となる面の傾きは、測距センサにより測定された複数の
点までの距離に基づいて取得される。このため容易に、
対象となる面の傾きを取得することが可能となる。According to this, the inclination of the surface to be photographed with respect to the reference direction is obtained based on the distance to a plurality of points measured by the distance measuring sensor. Because of this,
It is possible to acquire the inclination of the target surface.

【００３２】本発明のさらに別の局面に従うと、画像傾
き補正方法は、撮影対象となる面を分割撮影した際の複
数の分割画像を取得する画像取得ステップと、基準方向
に対する撮影対象となる面の傾きを取得する対象面傾き
取得ステップと、基準方向に対する複数の分割画像それ
ぞれの撮影方向の傾きを取得する撮影方向傾き取得ステ
ップと、取得された撮影対象となる面の傾きおよび撮影
方向の傾きに応じて、取得された複数の分割画像それぞ
れを補正する補正ステップとを備える。According to still another aspect of the present invention, an image inclination correcting method includes an image acquiring step of acquiring a plurality of divided images when a surface to be photographed is dividedly photographed, and a surface to be photographed with respect to a reference direction. Acquiring the inclination of the object plane, acquiring the inclination of the photographing direction of each of the plurality of divided images with respect to the reference direction, acquiring the inclination of the acquired photographing target plane, and acquiring the inclination of the photographing direction. And a correction step of correcting each of the plurality of acquired divided images according to

【００３３】この発明に従うと、基準方向に対する撮影
対象となる面の傾きおよび各分割画像の撮影方向の傾き
が取得され、これらに応じて、取得された複数の分割画
像それぞれが補正される。したがって、分割撮影された
複数の分割画像に対して、撮影対象面の傾きから生じる
画像歪みを適切に補正することのできる画像傾き補正方
法を提供することができる。According to the present invention, the inclination of the surface to be photographed with respect to the reference direction and the inclination of the photographing direction of each divided image are acquired, and each of the acquired plurality of divided images is corrected accordingly. Therefore, it is possible to provide an image tilt correction method capable of appropriately correcting image distortion caused by tilt of a shooting target surface for a plurality of split images obtained by split shooting.

【００３４】好ましくは、取得された複数の分割画像
は、撮影方向をそれぞれ変化させて撮影された画像を含
む。Preferably, the plurality of obtained divided images include images photographed by changing photographing directions.

【００３５】これによると、複数の分割画像は撮影方向
を変化させることにより撮影されたものが含まれる。こ
のため、撮像素子部の数を増加させることなく簡易な構
成でもって複数の分割画像が撮影され、容易に複数の分
割画像を取得することが可能となる。According to this, the plurality of divided images include those captured by changing the capturing direction. For this reason, a plurality of divided images can be photographed with a simple configuration without increasing the number of imaging elements, and a plurality of divided images can be easily obtained.

【００３６】また、好ましくは、前記補正ステップは、
同じ基準点に基づいて、複数の分割画像それぞれを補正
することを特徴とする。Preferably, the correcting step includes:
It is characterized in that each of the plurality of divided images is corrected based on the same reference point.

【００３７】これによると、画像取得ステップにより取
得された複数の分割画像は、同じ基準点に基づいて補正
される。したがって、それぞれの分割画像が同じ倍率と
なるように、撮影対象面の傾きから生じる画像歪みが適
切に補正されることになる。According to this, the plurality of divided images obtained in the image obtaining step are corrected based on the same reference point. Therefore, the image distortion resulting from the inclination of the imaging target surface is appropriately corrected so that each divided image has the same magnification.

【００３８】また、本発明のさらに別の局面に従うと、
画像傾き補正方法は、撮影対象となる面を分割撮影した
際の複数の分割画像を取得する画像取得ステップと、基
準方向に対する撮影対象となる面の傾きを取得する対象
面傾き取得ステップと、取得された撮影対象となる面の
傾きを考慮して、取得された複数の分割画像それぞれを
補正する補正ステップとを備え、補正ステップは、同じ
基準点に基づいて、複数の分割画像それぞれを補正する
ことを特徴とする。According to still another aspect of the present invention,
The image tilt correction method includes: an image obtaining step of obtaining a plurality of divided images when a shooting target surface is split and shot; a target surface tilt obtaining step of obtaining a tilt of the shooting target surface with respect to a reference direction; Correcting each of the plurality of acquired divided images in consideration of the obtained inclination of the surface to be photographed. The correcting step corrects each of the plurality of divided images based on the same reference point. It is characterized by the following.

【００３９】この発明に従うと、基準方向に対する撮影
対象となる面の傾きが取得され、その傾きを考慮して、
同じ基準点に基づいて複数の分割画像それぞれが補正さ
れる。したがって、それぞれの分割画像が同じ倍率とな
るように、撮影対象面の傾きから生じる画像歪みを適切
に補正することのできる画像傾き補正方法を提供するこ
とが可能となる。According to the present invention, the inclination of the surface to be photographed with respect to the reference direction is obtained, and the inclination is taken into consideration.
Each of the plurality of divided images is corrected based on the same reference point. Therefore, it is possible to provide an image tilt correction method that can appropriately correct image distortion resulting from the tilt of the imaging target surface so that each divided image has the same magnification.

【００４０】本発明のさらに別の局面に従うと、画像傾
き補正方法は、撮影対象となる面を分割撮影した際の複
数の分割画像を取得する画像取得ステップと、基準方向
に対する撮影対象となる面の傾きを取得する対象面傾き
取得ステップと、取得された撮影対象となる面の傾きを
考慮して、取得された複数の分割画像それぞれを補正す
る補正ステップとを備え、補正ステップは、同じ倍率に
なるように複数の分割画像それぞれを補正することを特
徴とする。According to still another aspect of the present invention, an image inclination correcting method includes an image acquiring step of acquiring a plurality of divided images when a surface to be photographed is divided and photographed, and a surface to be photographed with respect to a reference direction. And a correction step of correcting each of the obtained plurality of divided images in consideration of the tilt of the obtained imaging target surface, wherein the correction step includes the same magnification. It is characterized in that each of the plurality of divided images is corrected so that

【００４１】この発明に従うと、基準方向に対する撮影
対象となる面の傾きが取得され、その傾きを考慮して、
同じ倍率になるように複数の分割画像それぞれが補正さ
れる。したがって、その後の分割画像の張り合わせ処理
が容易となり、撮影対象面の傾きから生じる画像歪みを
適切に補正することのできる画像傾き補正方法を提供す
ることが可能となる。According to the present invention, the inclination of the surface to be photographed with respect to the reference direction is obtained, and taking into account the inclination,
Each of the plurality of divided images is corrected so as to have the same magnification. Therefore, the subsequent process of joining the divided images is facilitated, and it is possible to provide an image tilt correction method that can appropriately correct image distortion resulting from the tilt of the imaging target surface.

【００４２】好ましくは、前記対象面傾き取得ステップ
は、測距センサにより測定された撮影対象となる面上の
複数の点までの距離に基づいて取得することを特徴とす
る。Preferably, in the object plane inclination acquiring step, the object plane inclination is acquired based on distances to a plurality of points on a surface to be photographed measured by a distance measuring sensor.

【００４３】これによると、基準方向に対する撮影対象
となる面の傾きは、測距センサにより測定された複数の
点までの距離に基づいて取得される。このため容易に、
対象となる面の傾きを取得することが可能となる。According to this, the inclination of the surface to be photographed with respect to the reference direction is obtained based on the distance to a plurality of points measured by the distance measuring sensor. Because of this,
It is possible to acquire the inclination of the target surface.

【００４４】本発明のさらに別の局面に従うと、画像傾
き補正プログラムを記録した記録媒体は、撮影対象とな
る面を分割撮影した際の複数の分割画像を取得する画像
取得ステップと、基準方向に対する撮影対象となる面の
傾きを取得する対象面傾き取得ステップと、基準方向に
対する複数の分割画像それぞれの撮影方向の傾きを取得
する撮影方向傾き取得ステップと、取得された撮影対象
となる面の傾きおよび撮影方向の傾きに応じて、取得さ
れた複数の分割画像それぞれを補正する補正ステップと
をコンピュータに実行させるための画像傾き補正プログ
ラムを記録する。According to still another aspect of the present invention, a recording medium on which an image inclination correction program is recorded includes: an image acquiring step of acquiring a plurality of divided images when a surface to be photographed is divided and photographed; A target surface tilt obtaining step of obtaining a tilt of a surface to be captured; a shooting direction tilt obtaining step of obtaining a tilt of each of a plurality of divided images with respect to a reference direction; and a tilt of the obtained target surface And a correction step of correcting each of the plurality of acquired divided images in accordance with the tilt of the shooting direction.

【００４５】この発明に従うと、基準方向に対する撮影
対象となる面の傾きおよび各分割画像の撮影方向の傾き
が取得され、これらに応じて、取得された複数の分割画
像それぞれが補正される。したがって、分割撮影された
複数の分割画像に対して、撮影対象面の傾きから生じる
画像歪みを適切に補正することのできる画像傾き補正プ
ログラムを記録した記録媒体を提供することができる。According to the present invention, the inclination of the surface to be photographed with respect to the reference direction and the inclination of the photographing direction of each divided image are acquired, and each of the acquired plurality of divided images is corrected accordingly. Therefore, it is possible to provide a recording medium that stores an image inclination correction program that can appropriately correct image distortion caused by the inclination of the imaging target surface with respect to a plurality of divided images obtained by divisional imaging.

【００４６】好ましくは、前記取得された複数の分割画
像は、撮影方向をそれぞれ変化させて撮影された画像を
含む。Preferably, the plurality of acquired divided images include images photographed by changing photographing directions.

【００４７】これによると、複数の分割画像は撮影方向
を変化させることにより撮影されたものが含まれる。こ
のため、撮像素子部の数を増加させることなく簡易な構
成でもって複数の分割画像が撮影され、容易に複数の分
割画像を取得することが可能となる。According to this, the plurality of divided images include those captured by changing the capturing direction. For this reason, a plurality of divided images can be photographed with a simple configuration without increasing the number of imaging elements, and a plurality of divided images can be easily obtained.

【００４８】また、好ましくは、前記補正ステップは、
同じ基準点に基づいて、複数の分割画像それぞれを補正
することを特徴とする。Preferably, the correcting step includes:
It is characterized in that each of the plurality of divided images is corrected based on the same reference point.

【００４９】これによると、画像取得ステップにより取
得された複数の分割画像は、同じ基準点に基づいて補正
される。したがって、それぞれの分割画像が同じ倍率と
なるように、撮影対象面の傾きから生じる画像歪みが適
切に補正されることになる。According to this, the plurality of divided images obtained in the image obtaining step are corrected based on the same reference point. Therefore, the image distortion resulting from the inclination of the imaging target surface is appropriately corrected so that each divided image has the same magnification.

【００５０】また、本発明のさらに別の局面に従うと、
画像傾き補正プログラムを記録した記録媒体は、撮影対
象となる面を分割撮影した際の複数の分割画像を取得す
る画像取得ステップと、基準方向に対する撮影対象とな
る面の傾きを取得する対象面傾き取得ステップと、取得
された撮影対象となる面の傾きを考慮して、取得された
複数の分割画像それぞれを補正する補正ステップとを、
コンピュータに実行させるための画像傾き補正プログラ
ムを記録し、補正ステップは、同じ基準点に基づいて、
複数の分割画像それぞれを補正することを特徴とする。According to still another aspect of the present invention,
The recording medium on which the image tilt correction program is recorded has an image obtaining step of obtaining a plurality of divided images when the surface to be captured is dividedly captured, and a target surface tilt for obtaining the tilt of the surface to be captured with respect to the reference direction. Acquisition step, and a correction step of correcting each of the acquired plurality of divided images in consideration of the inclination of the acquired imaging target surface,
The image inclination correction program to be executed by the computer is recorded, and the correction step is performed based on the same reference point.
It is characterized in that each of the plurality of divided images is corrected.

【００５１】この発明に従うと、基準方向に対する撮影
対象となる面の傾きが取得され、その傾きを考慮して、
同じ基準点に基づいて複数の分割画像それぞれが補正さ
れる。したがって、それぞれの分割画像が同じ倍率とな
るように、撮影対象面の傾きから生じる画像歪みを適切
に補正することのできる画像傾き補正プログラムを記録
した記録媒体を提供することが可能となる。According to the present invention, the inclination of the surface to be photographed with respect to the reference direction is obtained, and taking into account the inclination,
Each of the plurality of divided images is corrected based on the same reference point. Therefore, it is possible to provide a recording medium that stores an image inclination correction program that can appropriately correct image distortion resulting from the inclination of the imaging target surface so that each divided image has the same magnification.

【００５２】本発明のさらに別の局面に従うと、画像傾
き補正プログラムを記録した記録媒体は、撮影対象とな
る面を分割撮影した際の複数の分割画像を取得する画像
取得ステップと、基準方向に対する撮影対象となる面の
傾きを取得する対象面傾き取得ステップと、取得された
撮影対象となる面の傾きを考慮して、取得された複数の
分割画像それぞれを補正する補正ステップとを、コンピ
ュータに実行させるための画像傾き補正プログラムを記
録し、補正ステップは、同じ倍率になるように複数の分
割画像それぞれを補正することを特徴とする。According to still another aspect of the present invention, a recording medium on which an image inclination correction program is recorded includes: an image acquiring step of acquiring a plurality of divided images when a surface to be photographed is divided and photographed; A target surface tilt obtaining step of obtaining the tilt of the surface to be captured, and a correction step of correcting each of the plurality of obtained divided images in consideration of the obtained tilt of the target surface, An image inclination correction program to be executed is recorded, and the correction step corrects each of the plurality of divided images so as to have the same magnification.

【００５３】この発明に従うと、基準方向に対する撮影
対象となる面の傾きが取得され、その傾きを考慮して、
同じ倍率になるように複数の分割画像それぞれが補正さ
れる。したがって、その後の分割画像の張り合わせ処理
が容易となり、撮影対象面の傾きから生じる画像歪みを
適切に補正することのできる画像傾き補正プログラムを
記録した記録媒体を提供することが可能となる。According to the present invention, the inclination of the surface to be photographed with respect to the reference direction is obtained, and the inclination is taken into consideration.
Each of the plurality of divided images is corrected so as to have the same magnification. Therefore, it is possible to easily perform the subsequent laminating process of the divided images, and it is possible to provide a recording medium that records an image tilt correction program that can appropriately correct image distortion caused by tilt of the imaging target surface.

【００５４】好ましくは、前記対象面傾き取得ステップ
は、測距センサにより測定された撮影対象となる面上の
複数の点までの距離に基づいて取得することを特徴とす
る。Preferably, the object plane inclination acquiring step acquires the object plane inclination based on distances to a plurality of points on a plane to be photographed measured by a distance measuring sensor.

【００５５】これによると、基準方向に対する撮影対象
となる面の傾きは、測距センサにより測定された複数の
点までの距離に基づいて取得される。このため容易に、
対象となる面の傾きを取得することが可能となる。According to this, the inclination of the surface to be photographed with respect to the reference direction is obtained based on the distances to a plurality of points measured by the distance measuring sensor. Because of this,
It is possible to acquire the inclination of the target surface.

【００５６】[0056]

【発明の実施の形態】次に、本発明の実施の形態を図面
に基づいて説明する。図１は、本発明の実施の形態にお
けるデジタルカメラ１０の概略を示す透視図である。図
１を参照して、デジタルカメラ１０は、ユーザ操作によ
り撮影開始を行なうためのレリーズスイッチ１２と、各
分割撮影領域の略中央等に位置する被写体までの距離を
計測するための多点測距装置１３と、カメラ本体１１の
裏面に設けられた表示部１４と、大略、眼を模した撮像
ユニット１５と、撮像ユニット１５を走査させるための
走査駆動ユニット１６とを備えている。Next, an embodiment of the present invention will be described with reference to the drawings. FIG. 1 is a perspective view schematically showing a digital camera 10 according to an embodiment of the present invention. Referring to FIG. 1, a digital camera 10 includes a release switch 12 for starting shooting by a user operation, and a multi-point ranging for measuring a distance to a subject located substantially at the center or the like of each divided shooting area. The apparatus includes a device 13, a display unit 14 provided on the back surface of the camera body 11, an imaging unit 15 simulating an eye, and a scanning drive unit 16 for scanning the imaging unit 15.

【００５７】表示部１４は、液晶パネルを含み、警告表
示や撮影画像の表示が可能となっている。なお、カメラ
本体１１の裏面には、表示部１４の他に、不図示の文書
／風景モードを切り替えるモード切替スイッチ、電源ス
イッチ等も設けられている。The display section 14 includes a liquid crystal panel, and is capable of displaying a warning and displaying a captured image. In addition, on the back of the camera body 11, in addition to the display unit 14, a mode changeover switch for switching between a document / landscape mode (not shown), a power switch, and the like are provided.

【００５８】図２は、撮像ユニット１５と走査駆動ユニ
ット１６の詳細を説明するための斜視図である。図２を
参照して、撮像ユニット１５は、被写体像の撮影倍率を
変化させるためのズームレンズ２１と、ズームレンズ２
１を駆動させるためのズームモータ２３と、被写体像の
光信号を電気信号に変換するための撮像素子（ＣＣＤ）
２２とを備えていいる。FIG. 2 is a perspective view for explaining details of the image pickup unit 15 and the scan drive unit 16. Referring to FIG. 2, an imaging unit 15 includes a zoom lens 21 for changing a photographing magnification of a subject image and a zoom lens 2.
And an image pickup device (CCD) for converting a light signal of a subject image into an electric signal
22.

【００５９】ズームレンズ２１は、ズームモータ２３の
駆動によって撮影倍率を変化させることが可能となって
おり、入射する被写体像の光を撮像素子２２上に結像さ
せる。なお、撮影倍率は、撮影領域の分割数に応じて、
撮影領域の全体画像から各部分領域の分割画像までを撮
像素子２２に結像できる範囲を備えている。The zoom lens 21 can change the photographing magnification by driving the zoom motor 23, and forms the light of the incident subject image on the image sensor 22. Note that the shooting magnification depends on the number of divisions of the shooting area,
There is a range in which an image from the entire image of the shooting area to the divided image of each partial area can be formed on the image sensor 22.

【００６０】走査駆動ユニット１６は、Ｕ字状ガイド２
４と、Ｕ字状ガイド２４の下部を回転自在に支持する回
転軸２５と、Ｕ字状ガイド２４の上部に回転自在に支持
され、かつ撮像ユニット１５を回転自在に支持する回転
軸２６と、各回転軸２５、２６にそれぞれ結合されたモ
ータおよび角度センサ２７、２８とで構成されている。
このため、撮像ユニット１５の撮影方向をＸ、Ｙ方向に
任意に制御することができる。The scanning drive unit 16 is provided with the U-shaped guide 2
4, a rotating shaft 25 rotatably supporting a lower portion of the U-shaped guide 24, a rotating shaft 26 rotatably supported on the upper portion of the U-shaped guide 24, and rotatably supporting the imaging unit 15. It comprises a motor and angle sensors 27 and 28 coupled to the respective rotating shafts 25 and 26, respectively.
Therefore, the imaging direction of the imaging unit 15 can be arbitrarily controlled in the X and Y directions.

【００６１】図３は、デジタルカメラ１０の全体構成を
示す制御ブロック図である。図３を参照して、デジタル
カメラ１０は、装置全体を制御するＣＰＵ３１と、多点
測距装置１３と、ユーザによる種々の操作が行なわれる
操作部３２と、撮影画像のプレビュー画像表示等を行な
うための表示部１４と、撮影倍率の変化のためにズーム
モータ２３の駆動を制御するズーム制御部３３と、焦点
調整を行なうための焦点調整装置３４と、走査駆動ユニ
ット１６を駆動させて撮影方向を制御するための撮影方
向制御部３５とを備えている。FIG. 3 is a control block diagram showing the entire configuration of the digital camera 10. Referring to FIG. 3, digital camera 10 performs a CPU 31 for controlling the entire apparatus, a multi-point distance measuring apparatus 13, an operation section 32 on which various operations are performed by a user, a preview image display of a captured image, and the like. Display unit 14, a zoom control unit 33 for controlling driving of the zoom motor 23 for changing the photographing magnification, a focus adjusting device 34 for performing focus adjustment, and a photographing direction by driving the scanning drive unit 16 And a photographing direction control unit 35 for controlling the imaging direction.

【００６２】ここで、操作部３２は、レリーズスイッチ
１２、電源スイッチおよびモード切替スイッチ等を含
む。Here, the operation unit 32 includes the release switch 12, a power switch, a mode changeover switch, and the like.

【００６３】デジタルカメラ１０は、さらに、撮像素子
であるＣＣＤ２２と、ＣＣＤを駆動させるためのＣＣＤ
駆動部３６と、ＣＣＤ２２により取得された画像データ
を記憶するためのメモリ３７と、メモリ３７に記憶され
た画像データに傾き補正を行なうための傾き補正部３８
と、傾き補正後の分割画像データを貼り合せるための貼
合せ処理部３９と、貼合せ処理部３９により貼り合わさ
れた後の合成画像を記録するための記録部４０とを備え
ている。The digital camera 10 further includes a CCD 22 serving as an image pickup device and a CCD for driving the CCD.
A driving unit 36, a memory 37 for storing image data obtained by the CCD 22, and a tilt correction unit 38 for performing tilt correction on the image data stored in the memory 37
And a combining unit 39 for combining the divided image data after the inclination correction, and a recording unit 40 for recording the combined image after the combining by the combining unit 39.

【００６４】傾き補正部３８は、多点測距装置１３から
測定された複数点の距離に基づいて原稿面（被写体面）
の傾きを求める。そして、その値、および、撮影分割数
に応じて予め設定されている撮影方向の傾きに応じて、
撮影された分割画像データ各々の傾き補正を行なう。The inclination correcting unit 38 is configured to calculate the document surface (subject surface) based on the distance between a plurality of points measured by the multipoint distance measuring device 13.
Find the slope of Then, according to the value and the inclination of the photographing direction set in advance according to the number of photographing divisions,
The inclination of each of the photographed divided image data is corrected.

【００６５】この傾き補正部３８における具体的な補正
方法について、図４および図５を用いて説明する。図４
は、全撮影範囲を左右に２分割した場合の撮影画像（第
１画像および第２画像）を示す図である。ここで、Ｌ₀
は傾き補正をする際の画像上の基準点である。なお、撮
影条件は、図１４において説明した際の条件と同じであ
る。A specific correction method in the tilt correction unit 38 will be described with reference to FIGS. FIG.
FIG. 3 is a diagram showing captured images (first image and second image) when the entire capturing range is divided into two right and left parts. Here, L ₀
Is a reference point on the image when the inclination is corrected. Note that the shooting conditions are the same as the conditions described with reference to FIG.

【００６６】したがって、第２画像に対する撮影条件
は、ＣＣＤ２２面と原稿面とが正対しているが、第１画
像に対する撮影条件は、原稿傾斜角がθａかつ撮影方向
傾斜角がθ／２となっている。即ち、カメラ方向に対し
て原稿面はθａ傾いており、かつ撮影方向はθ／２傾い
ている。このため、図４（ａ）に示すように、第２画像
には歪みは生じていないが、第１画像には図１４（ａ）
と同様に急激な画像歪みが生じている。Therefore, the photographing condition for the second image is that the surface of the CCD 22 is directly opposite to the surface of the document, but the photographing condition for the first image is that the document inclination angle is θa and the photographing direction inclination angle is θ / 2. ing. That is, the document surface is inclined by θa with respect to the camera direction, and the photographing direction is inclined by θ / 2. For this reason, as shown in FIG. 4A, no distortion occurs in the second image, but FIG. 14A shows the first image.
As in the case of, sharp image distortion occurs.

【００６７】なお、図４（ｂ）は、図４（ａ）の画像を
Ｌ₀の倍率を基準としてｙ方向に拡大補正した場合を示
しており、図４（ｃ）は、この図４（ｂ）の画像をＬ₀
の倍率を基準としてｘ方向に拡大補正した場合を示して
いる。[0067] Incidentally, FIG. 4 (b), an image shown in FIG. 4 (a) shows the case of expansion correction in y-direction relative to the magnification of the L _0, Fig. 4 (c), FIG. 4 ( The image of b) is replaced by L ₀
2 shows a case where the magnification is corrected in the x direction based on the magnification of.

【００６８】図５は、図４に示す第１画像を撮影する際
の、撮像素子（ＣＣＤ）２２と原稿との位置関係を説明
するための図である。ここでは、第１撮影方向を紙面上
下方向（ＯＲ方向）に合わせている。このためカメラ正
面方向は、少し傾斜したＯＬ ₀方向となっている。前述
したように、原稿傾斜角はθａであり（デジタルカメラ
１０に正対する面Ｖと原稿面Ｕとのなす角がθａ）、撮
影方向傾斜角はθ／２である（カメラ正面方向ＯＬ₀と
第１撮影方向ＯＲとのなす角がθ／２）。FIG. 5 is a view showing a state in which the first image shown in FIG. 4 is photographed.
Of the positional relationship between the image sensor (CCD) 22 and the original
FIG. Here, the first shooting direction is on the paper.
It is aligned in the downward direction (OR direction). For this reason, the camera
OL direction slightly inclined ₀Direction. Above
As described above, the document inclination angle is θa (digital camera
The angle between the surface V facing the document 10 and the original surface U is θa).
The shadow direction inclination angle is θ / 2 (the camera front direction OL).₀When
The angle formed by the first imaging direction OR is θ / 2).

【００６９】本図を参照して、ＣＣＤ２２面において得
られる任意の画素ｉの傾き補正を行なう場合について考
える。画素ｉは、原稿面Ｕ上の画像Ｘｉの光像がＣＣＤ
２２面上に結像したものであるが、Ｌ₀を基準とした補
正を行なうために、Ｌ₀を通りＣＣＤ２２面と正対する
面Ｗ上の画像ＡｉにＸｉがある場合の結像画素であるこ
とが要求される。したがって、まず、画素ｉにおける倍
率を、画像Ｘｉに対する倍率Ｄ／ＤｉからＡｉの位置に
ある場合の倍率Ｄ／Ｄ_Aに拡大させる必要がある。この
場合の拡大率βｉは、Ｄｉ／Ｄ_Aである（∵Ｄ／Ｄｉ×
βｉ＝Ｄ／Ｄ_A）。With reference to this figure, a case where the inclination of an arbitrary pixel i obtained on the surface of the CCD 22 is corrected will be considered. Pixel i is a light image of image Xi on document surface U
While on 22 surface is obtained by imaging, in order to perform the correction relative to the L _0, is an imaging pixel in the case where there is Xi the L ₀ to the image Ai on street CCD22 surface and directly faces the surface W Is required. Therefore, first, a magnification of the pixel i, it is necessary to expand the ratio D / D _A where there from magnification D / Di for image Xi the position of Ai. Magnification βi in this case is _{Di / D A (∵D / Di} ×
βi = D / D _A ).

【００７０】ここで、カメラ正面方向ＯＬ₀と原稿面Ｕ
上の画像Ｘｉの位置方向（ＯＸｉ）とのなす角をαｉと
すると、Ｄｉは、Ｄｉ＝Ｄ_A＋Ｄｉ・ｔａｎ（αｉ−θ
／２）・ｔａｎ（θｔ）＋Ｄ_A・ｔａｎ（θ／２）・ｔ
ａｎ（θｔ）で表わされる（∵Ｄｉ＝Ｄ_A＋ＴＳ＋Ｓ
Ｒ，ＴＳ＝ＴＸｉ・ｔａｎ（θｔ），ＳＲ＝ＲＬ₀・ｔ
ａｎ（θｔ））。したがって、拡大率βｉは、（１）式
で表わされることになる。Here, the camera front direction OL ₀ and the document surface U
When the angle between the positional direction of the image Xi above (Oxi) and .alpha.i, Di _{is, Di = D A + Di ·} tan (αi-θ
/ 2) · tan (θt) + D _A · tan (θ / 2) · t
(∵Di = D _A + TS + S)
R, TS = TXi · tan (θt), SR = RL ₀ · t
an (θt)). Therefore, the enlargement ratio βi is represented by the equation (1).

【００７１】[0071]

【数１】 (Equation 1)

【００７２】なお、θｔは、撮影方向傾斜角θ／２と、
原稿傾斜角θａとの和である（θｔ＝θ／２＋θａ）。Here, θt is the inclination angle θ / 2 of the photographing direction,
This is the sum with the document inclination angle θa (θt = θ / 2 + θa).

【００７３】この拡大率βｉを用いて、まず、図４
（ｂ）に示すｙ方向の拡大補正が行なわれる。ここで
は、特開平１０−１３７３３に示されるように、撮影画
像（補正前）を構成する各画素データを、原画像を倍率
βｉで拡大した画像を撮影した場合の撮影画像を構成す
る各画素データに置換するという処理が行なわれる。Using this enlargement ratio βi, first, FIG.
The enlargement correction in the y direction shown in FIG. Here, as shown in Japanese Patent Application Laid-Open No. 10-13733, each pixel data forming a captured image (before correction) is converted into each pixel data forming a captured image obtained by capturing an image obtained by enlarging an original image at a magnification βi. Is performed.

【００７４】また、ｘ方向に関しては、あおり（原稿傾
き）を考慮した補正係数（１／ｃｏｓ（θｔ））と拡大
率βｉとの積、すなわち、βｉ’＝βｉ／ｃｏｓ（θ
ｔ）が拡大率として用いられる。そして、図４（ｃ）に
示すｘ方向の拡大補正が、同様の方法で行なわれる。In the x direction, the product of the correction coefficient (1 / cos (θt)) taking the tilt (original inclination) into account and the enlargement ratio βi, ie, βi ′ = βi / cos (θ
t) is used as the magnification. Then, the magnification correction in the x direction shown in FIG. 4C is performed in a similar manner.

【００７５】なお、今回の例では関係ないが、原稿Ｕの
傾きが逆で縮小補正をする場合も、拡大処理と同様の考
え方で縮小率が求められ、縮小処理が行なわれる。Although not relevant in the present example, even when the original U is tilted and the reduction correction is performed, the reduction ratio is obtained in the same way as the enlargement processing, and the reduction processing is performed.

【００７６】以上のようにして、（１）式で表わされる
拡大率βｉ（または、βｉ’）を用いることにより、カ
メラ方向に対する撮影方向の傾きのみならず、原稿面の
傾きをも考慮に入れた画像の拡大補正を行なうことが可
能となる。As described above, by using the enlargement ratio βi (or βi ′) expressed by the equation (1), not only the inclination of the image pickup direction with respect to the camera direction but also the inclination of the document surface is taken into consideration. It is possible to perform enlargement correction of the image.

【００７７】また、この拡大補正（傾き補正）に際して
は、第１画像および第２画像とも、同一の点Ｌ₀が基準
となるため、両者とも同じ倍率の補正画像が得られるこ
とになる。したがって、これらの画像は容易に貼り合せ
て合成画像を作成することが可能となる。[0077] Further, when the expansion correction (inclination correction) is both the first image and the second image, since the same point L ₀ is a reference, so that both the corrected image of the same magnification is obtained. Therefore, it is possible to easily combine these images to create a composite image.

【００７８】因みに第２画像に関しては、撮影方向傾斜
角（−θ／２）と原稿傾斜角（θａ＝θ／２）との和で
あるθｔが０になるため、ｙ方向の拡大率βｉおよびｘ
方向の拡大率βｉ’とも１になり、補正前後の画像は変
化しない。Incidentally, for the second image, θt, which is the sum of the photographing direction inclination angle (−θ / 2) and the document inclination angle (θa = θ / 2), becomes 0, so that the enlargement ratio βi in the y direction and x
The enlargement ratio βi ′ in the direction becomes 1, and the image before and after the correction does not change.

【００７９】なお、この例では、説明のために第２撮影
方向が原稿と正対する場合を説明したが、通常は、第２
画像についても補正が必要となる。In this example, the case where the second photographing direction is directly opposite to the original has been described for the sake of explanation.
Correction is also required for images.

【００８０】次に、図３で示したデジタルカメラ１０を
用いて撮影をする際の処理の流れについて説明する。図
６は、デジタルカメラ１０のメインの制御フローを示し
たフローチャートである。Next, a description will be given of the flow of processing when shooting using the digital camera 10 shown in FIG. FIG. 6 is a flowchart showing a main control flow of the digital camera 10.

【００８１】図６を参照して、ユーザにより操作部３２
の電源がＯＮされると、まず、ステップＳ６０１におい
て、デジタルカメラ１０の各部のイニシャライズが行な
われる。その際、ズーム制御部３３により、ズームはワ
イドに設定され、撮影方向制御部３５により、撮影方向
は中央に設定される。Referring to FIG. 6, the operation unit 32 is operated by the user.
Is turned on, first, in step S601, each unit of the digital camera 10 is initialized. At this time, the zoom is set to wide by the zoom control unit 33, and the shooting direction is set to the center by the shooting direction control unit 35.

【００８２】次に、ステップＳ６０２において、ズーム
をワイドにした状態で撮影が行なわれる。したがって、
ここでまず、撮影範囲全体が撮影されることになる。こ
の撮影された全体画像は、ステップＳ６０３において、
表示部１４にプレビュー表示される。Next, in step S602, shooting is performed with the zoom set to wide. Therefore,
Here, first, the entire photographing range is photographed. In step S603, the captured entire image is
The preview is displayed on the display unit 14.

【００８３】そして、ユーザにより操作部１２内のモー
ド切替スイッチが押下されると、ステップＳ６０５にお
いて、文書モードと風景モードとが切り換えられる。な
お、モード切替スイッチが操作されない場合は、そのま
まの状態で、ステップＳ６０６の処理に移行する。When the user presses the mode switch in the operation unit 12, the mode is switched between the document mode and the landscape mode in step S605. If the mode switch is not operated, the process proceeds to step S606 without any change.

【００８４】ステップＳ６０６においては、多点測距装
置１３により、被写***置までの多点測距が行なわれる
とともに、焦点調節装置３４により焦点調節が行なわれ
る。なお、この時点では、撮影画面全体の中央に対して
焦点が合うように調節される。In step S606, multi-point distance measurement to the subject position is performed by the multi-point distance measurement device 13, and focus adjustment is performed by the focus adjustment device 34. At this point, adjustment is made so that the center of the entire shooting screen is in focus.

【００８５】また、ここで行なわれる多点測距は、以下
に示すような測定点が選ばれる。図７は、撮影範囲Ａを
左右に２分割して撮影する際の多点測距方法を説明する
ための図である。ここでは、ホワイトボードＷに対し
て、斜め横から撮影を行なう場合を想定している。撮影
範囲Ａは、ホワイトボードＷ上の適当な範囲が選ばれて
いる。In the multipoint ranging performed here, the following measurement points are selected. FIG. 7 is a diagram for explaining a multi-point distance measuring method when photographing is performed by dividing the photographing range A into two right and left parts. Here, it is assumed that the white board W is photographed obliquely from the side. As the shooting range A, an appropriate range on the whiteboard W is selected.

【００８６】多点測距装置１３により、全撮影範囲Ａの
略中央に位置するホワイトボードＷ上の点Ｌ₀、各分割
撮影範囲内に位置するホワイトボード上の点Ｐ₁および
点Ｐ₂の３点の距離がそれぞれ測定される。The multi-point distance measuring device 13 determines a point L ₀ on the white board W located substantially at the center of the entire photographing range A, a point P ₁ and a point P ₂ on the white board located in each divided photographing range. The distance of each of the three points is measured.

【００８７】このようにして、ステップＳ６０６におい
て多点測距が行なわれた後は、現時点のモードが文書モ
ードの場合は（ステップＳ６０７で”Ｙ”）、ステップ
Ｓ６０８において被写体の平面性をチェックするための
エラーチェックが行なわれる。つまり、ステップＳ６０
６において測定された測距結果に基づいて、被写体が平
面であるか否かが判定される。After multi-point ranging is performed in step S606, if the current mode is the document mode (“Y” in step S607), the flatness of the subject is checked in step S608. Error check is performed. That is, step S60
Based on the distance measurement result measured in 6, it is determined whether or not the subject is flat.

【００８８】ステップＳ６０９において、エラーの場
合、即ち被写体が平面でないと判断された場合は、ステ
ップＳ６１０において、表示部１４に警告表示が行なわ
れ、ステップＳ６０２の処理に戻る。本実施の形態で
は、エラーの場合にはレリーズできない構成になってい
る。If an error is detected in step S609, that is, if it is determined that the subject is not flat, a warning is displayed on the display unit 14 in step S610, and the process returns to step S602. In the present embodiment, the configuration is such that release cannot be performed in the case of an error.

【００８９】ステップＳ６０９において、エラーでない
場合、または、ステップＳ６０７において、文書モード
でない場合は、ステップＳ６１１の処理に進み、レリー
ズスイッチ１２がＯＮされたか否かが判断される。レリ
ーズスイッチ１２がＯＮされた場合は、ステップＳ６１
２において撮影処理が行なわれ、ＯＮされない場合は、
再びステップＳ６０２の処理に戻る。If there is no error in step S609, or if the document mode is not set in step S607, the flow advances to step S611 to determine whether or not the release switch 12 has been turned ON. If the release switch 12 is turned on, the process proceeds to step S61.
If the photographing process is performed in step 2 and it is not turned on,
The process returns to step S602 again.

【００９０】ステップＳ６１２において撮影処理が終了
し、電源がＯＦＦされた場合（ステップＳ６１３で”Ｙ
ＥＳ”）は、デジタルカメラ１０による撮影が終了す
る。一方、撮影処理の終了後も電源がＯＦＦされず（ス
テップＳ６１３で”ＮＯ”）、再度撮影が行なわれる場
合は、ステップＳ６０２の処理に戻り同様の処理が繰り
返される。When the photographing process ends in step S612 and the power is turned off ("Y" in step S613)
ES "), the photographing by the digital camera 10 ends. On the other hand, if the power is not turned off even after the photographing process ends (" NO "in step S613) and photographing is performed again, the process returns to step S602. A similar process is repeated.

【００９１】図８は、図６の撮影処理（ステップＳ６１
２）のサブルーチンを示したフローチャートである。図
８を参照して、まず、ステップＳ８０１において、第１
画面が撮影範囲に一致するようにズーム制御部３３によ
りズームアップが行なわれる。その状態で、ステップＳ
８０２において、第１画面の撮影が行なわれる。続い
て、ステップＳ８０３において、撮影方向制御部３５に
より撮影方向が変更される。そして、ステップＳ８０４
において、第２画面の撮影が行なわれる。FIG. 8 shows the photographing process of FIG. 6 (step S61).
It is a flowchart which showed the subroutine of 2). Referring to FIG. 8, first, in step S801, the first
The zoom control unit 33 performs zoom-up so that the screen matches the shooting range. In that state, step S
At 802, shooting of the first screen is performed. Subsequently, in step S803, the shooting direction is changed by the shooting direction control unit 35. Then, step S804
In, shooting of the second screen is performed.

【００９２】次に、ステップＳ８０５において、現時点
の撮影モードが文書モードであるか否かが判断される。
そして、文書モードであると判断された場合は、ステッ
プＳ８０６において傾き補正処理が行なわれる。一方、
文書モードではないと判断された場合、即ち風景モード
の場合は、傾き補正は不要であるためステップＳ８０６
の処理をスキップする。Next, in step S805, it is determined whether the current shooting mode is the document mode.
If it is determined that the mode is the document mode, a tilt correction process is performed in step S806. on the other hand,
When it is determined that the mode is not the document mode, that is, in the case of the landscape mode, since the inclination correction is not required, step S806 is performed.
Skip the process.

【００９３】そして、ステップＳ８０７において、貼合
わせ処理部３９により分割撮影画像の貼り合せ処理が行
なわれる。文書モードの場合は補正後の分割撮影画像が
貼り合わされ、写真モードの場合は、無補正の分割撮影
画像が貼り合わされる。この貼り合せた結果の合成画像
は、ステップＳ８０８において、記録部４０に記憶され
る。Then, in step S807, the lamination processing section 39 performs lamination processing of the divided photographed images. In the document mode, the corrected divided photographed images are combined, and in the photo mode, the uncorrected divided photographed images are combined. The combined image resulting from the combination is stored in the recording unit 40 in step S808.

【００９４】その後、ズームおよび撮影方向を初期位置
に戻すべく、ステップＳ８０９において、ズーム制御部
３３によりズームダウンが行なわれ、ステップＳ８１０
において、撮影方向制御部３５により撮影方向が中央方
向に戻される。そして、サブルーチンは終了し、図６の
メインルーチンへと戻る。Then, in step S809, the zoom control unit 33 performs zoom-down to return the zooming and photographing directions to the initial positions.
In, the shooting direction is returned to the center direction by the shooting direction control unit. Then, the subroutine ends and returns to the main routine of FIG.

【００９５】図９は、図８の傾き補正処理（ステップＳ
８０６）のサブルーチンを示したフローチャートであ
る。図９を参照して、まず、ステップＳ９０１におい
て、原稿の傾き、即ち、図５で示す原稿傾斜角θａが算
出される。これは、図６のステップＳ６０６で行なわれ
た多点測距結果を利用して算出されるものである。FIG. 9 shows the inclination correction processing (step S
806) is a flowchart illustrating a subroutine. Referring to FIG. 9, first, in step S901, the inclination of the document, that is, the document inclination angle θa shown in FIG. 5, is calculated. This is calculated using the result of the multi-point distance measurement performed in step S606 in FIG.

【００９６】次に、ステップＳ９０２において、第１画
像（第１画面）の補正が行なわれ、ステップＳ９０３に
おいて、第２画像（第２画面）の補正が行なわれる。す
なわち、ここで、図４および図５の説明の際に述べた拡
大率βｉおよびβｉ’を用いて適切な拡大処理、または
縮小処理が行なわれる。Next, in step S902, the first image (first screen) is corrected, and in step S903, the second image (second screen) is corrected. That is, here, appropriate enlargement processing or reduction processing is performed using the enlargement ratios βi and βi ′ described in the description of FIGS. 4 and 5.

【００９７】具体的には、ステップＳ９０１で算出され
た原稿の傾きθａおよび、分割撮影の際に撮影方向制御
部３５により制御された撮影方向の値（θ／２）を用い
て、各画素に対する拡大率βｉ（あるいは縮小率）が算
出され、その拡大率βｉ（あるいは縮小率）を用いて、
適切に濃度レベル等を考慮した画素配置が行なわれる。More specifically, using the inclination θa of the document calculated in step S901 and the value (θ / 2) of the photographing direction controlled by the photographing direction control unit 35 at the time of divided photographing, the pixel The enlargement ratio βi (or reduction ratio) is calculated, and using the enlargement ratio βi (or reduction ratio),
Pixel arrangement is appropriately performed in consideration of the density level and the like.

【００９８】そして、第１画像補正および第２画像補正
が完了すると、サブルーチンは終了し、図８の貼り合せ
処理（ステップＳ８０７）に移行する。When the first image correction and the second image correction are completed, the subroutine ends, and the flow shifts to the bonding process in FIG. 8 (step S807).

【００９９】以上説明したように、本実施の形態によれ
ば、分割撮影画像を補正する際に、撮影方向の傾き（θ
／２）だけでなく、撮影対象面（原稿面）のデジタルカ
メラ１０に対するの傾き（θａ）までもが考慮される。
このため、各分割撮影画像は、適切に変倍処理が行なわ
れることになる。As described above, according to the present embodiment, when correcting a divided photographed image, the inclination of the photographing direction (θ
/ 2) as well as the inclination (θa) of the imaging target surface (original surface) with respect to the digital camera 10 is considered.
Therefore, each divided photographed image is appropriately subjected to the scaling process.

【０１００】特に、変倍処理を行なう際の倍率は、同一
の基準点Ｌ₀に基づいて算出されるため、補正後の分割
撮影画像は、いずれも同じ倍率の画像となる。したがっ
て、その後これらを容易に貼り合せることが可能とな
り、最終的に歪みのない高解像度の画像の取得が実現で
きる。In particular, since the magnification at the time of performing the scaling process is calculated based on the same reference point L ₀ , the divided photographed images after correction are all images having the same magnification. Therefore, these can be easily pasted together, and finally a high-resolution image without distortion can be obtained.

【０１０１】＜変形例＞次に、本発明の実施の形態にお
けるデジタルカメラ１０の変形例について説明する。図
１０は、全撮影範囲を４分割にした場合に本発明を適用
する際の例を示すための図である。この変形例では、図
１０（ａ）に示すように、全撮影範囲Ａを４分割にし、
各分割画像を前述した手法と同様の手法でもって傾き補
正を行ない、貼り合せるというものである。<Modification> Next, a modification of the digital camera 10 according to the embodiment of the present invention will be described. FIG. 10 is a diagram showing an example when the present invention is applied when the entire photographing range is divided into four. In this modified example, as shown in FIG.
The tilt correction is performed on each of the divided images by the same method as described above, and the images are combined.

【０１０２】この場合、多点測距を行なう際の測距点
は、全撮影範囲Ａの略中央に位置する点Ｌ₀、各分割撮
影範囲の略中央に位置する点Ｐ₁、Ｐ₂、Ｐ₃、Ｐ₄が選ば
れている。たとえば、図１０（ｂ）に示すように、原稿
台Ｂ上に置かれた原稿Ｃを撮影する場合などは、原稿Ｃ
または原稿台Ｂ上の点Ｌ₀、Ｐ₁〜Ｐ₄までの距離がそれ
ぞれ測定される。そして、この測距結果に基づいてカメ
ラに対する被写体（原稿面）の傾きθａが算出される。In this case, the distance measuring points at the time of performing multi-point distance measuring are a point L ₀ located substantially at the center of the entire photographing range A, points P ₁ and P ₂ located substantially at the center of each divided photographing range, and so on. P ₃ and P ₄ are selected. For example, as shown in FIG. 10B, when photographing a document C placed on a document table B, the document C
Alternatively, the distances to points L ₀ and P _{1 to} P ₄ on the document table B are measured. Then, the inclination θa of the subject (original surface) with respect to the camera is calculated based on the distance measurement result.

【０１０３】また、これらの分割画像の倍率は同一の基
準点Ｌ₀における倍率に基づいて補正される。したがっ
て、４つの分割画像とも、同じ倍率の撮影画像が得られ
ることになり、貼り合せ処理も容易となる。[0103] Further, the magnification of these divided images are corrected based on the magnification at the same reference point L _0. Therefore, photographed images of the same magnification are obtained for all four divided images, and the joining process is also facilitated.

【０１０４】なお、図１１に示すように、全撮影範囲を
一列に４分割するような場合にも本発明を適用すること
ができる。このような場合には、第１画像〜第４画像と
も、全撮影範囲の略中央点であるＬ₀を基準として、補
正処理を行なうようにすればよい。これにより、いずれ
の画像も同じ倍率に補正されることになる。As shown in FIG. 11, the present invention can be applied to a case where the entire photographing range is divided into four lines. In such a case, both the first image to fourth image, based on the L ₀ is a substantially central point of the entire photographing range, it is sufficient to perform the correction process. As a result, both images are corrected to the same magnification.

【０１０５】なお、図４、図１０および図１１において
は、演算の容易性から補正する際の基準位置を全撮影範
囲の略中央点Ｌ₀としているが、これに限定されるもの
ではない。したがって、任意の位置を基準にすることが
できる。[0105] In FIG. 4, 10 and 11, the reference position at the time of correcting the ease of operation is substantially the center point L ₀ of the total imaging range, but is not limited thereto. Therefore, an arbitrary position can be used as a reference.

【０１０６】また、図１および図２では、撮像素子２２
とズームレンズ２１等が一体として撮像ユニット１５を
構成し、全体が一体となって回転することにより撮影方
向が変更されるようになっている。しかし、この方法に
は限られず、たとえば、撮像素子２２は移動させずに、
結像の光路中に回転ミラーを設けて撮影方向を変更させ
るようにしてもよい。In FIGS. 1 and 2, the image pickup device 22
The imaging unit 15 is integrally formed with the zoom lens 21 and the like, and the imaging direction is changed by integrally rotating the imaging unit 15. However, the method is not limited to this method. For example, without moving the image sensor 22,
A rotating mirror may be provided in the optical path of the image to change the shooting direction.

【０１０７】また、撮影方向を変更させるのではなく、
予め固定された複数の撮像素子を備え、これにより異な
る方向（または同方向）の分割撮影を行なうようにして
もよい。Also, instead of changing the shooting direction,
A plurality of imaging elements fixed in advance may be provided so that divided imaging in different directions (or in the same direction) may be performed.

【０１０８】ここで、図１５で説明した倍率不一致の問
題は、図１２に示すように、撮影方向が同じである複数
の撮像素子で分割撮影した場合にも生じる。図１２
（ａ）は撮影方向が同じ２個の撮像素子２２で原稿を左
右に２分割して撮影した際に得られる補正前の画像（第
１画像および第２画像）を示しており、図１２（ｂ）
は、その際の撮影状況（原稿面Ｕと撮影方向との関係）
を示している。Here, the problem of magnification mismatch described with reference to FIG. 15 also occurs, as shown in FIG. 12, in a case where divided image capturing is performed by a plurality of image sensors having the same image capturing direction. FIG.
FIG. 12A shows an image (first image and second image) before correction obtained when an original is divided into two parts and photographed by the two image sensors 22 having the same photographing direction. b)
Indicates the shooting situation at that time (the relationship between the original surface U and the shooting direction)
Is shown.

【０１０９】このような撮像部の構成の場合でも、各分
割画像を共通のＬ₀を基準として傾き補正を行なえば、
左右いずれも同じ倍率となり、貼り合せが容易となる。Even in the case of such a configuration of the image pickup section, if the inclination correction is performed on each divided image with reference to the common L ₀ ,
Both the right and left sides have the same magnification, and the lamination becomes easy.

【０１１０】なお、図１２では、撮像素子２２を並べて
図示しているが、実際には、プリズムやハーフミラーに
より光路分割が行なわれ、異なる場所に配置される。ま
た、貼り合せ部分はややオーバーラップするように配置
される。In FIG. 12, the image pickup devices 22 are shown side by side. However, in practice, the optical path is divided by a prism or a half mirror, and they are arranged at different places. Also, the bonded portions are arranged so as to slightly overlap.

【０１１１】なお、複数の撮像素子の代わりに、単一の
撮像素子を平行移動させて実現してもよいし、受光光学
系を平行移動させて単一の撮像素子に異なる領域を結像
させるようにして実現してもよい。Note that, instead of a plurality of image sensors, a single image sensor may be moved in parallel, or a light receiving optical system may be moved in parallel to form different areas on a single image sensor. You may implement | achieve in this way.

【０１１２】また、今回示した実施の形態においては、
ズーム機能はプレビュー撮影時（図６のステップＳ６０
２）と、分割撮影時（図６のステップＳ６１２）の切替
の時にのみ利用しているが、他の場合に利用してもよ
い。すなわち、撮影範囲を手動で変更させ、この際にズ
ーム機能を利用するようにしてもよい。なお、ズームに
応じて撮影方向も変更されるため、これに伴って、傾き
補正時に使用される撮影方向傾斜角θ／２の値も適宜変
更される。In the embodiment shown this time,
The zoom function is used during preview shooting (step S60 in FIG. 6).
It is used only at the time of switching between 2) and divided shooting (step S612 in FIG. 6), but may be used in other cases. That is, the shooting range may be manually changed, and the zoom function may be used at this time. Since the shooting direction is changed in accordance with the zoom, the value of the shooting direction tilt angle θ / 2 used for tilt correction is also changed accordingly.

【０１１３】さらに、撮影対象面（原稿面）の傾きθａ
は、多点測距装置１３による測定結果により求めている
が、この際の測定点は今回示した位置に限定されない。
また、多点測距装置１３を用いずに、手動等の他の方法
により原稿面の傾きを入力するようにしてもよい。Further, the inclination θa of the surface to be photographed (original surface)
Is obtained from the measurement result by the multipoint distance measuring device 13, but the measurement point at this time is not limited to the position shown this time.
Further, the inclination of the document surface may be input by another method such as manual operation without using the multi-point distance measuring device 13.

【０１１４】なお、撮影範囲の分割パターンは、図７、
図１０および図１１に示されるような２分割、４分割に
限られるものではなく、他の分割パターンを適用しても
よい。そして、１台のカメラにおいて複数の分割パター
ンでの撮影を可能とする場合は、その分割パターンに応
じた撮影方向傾斜角に使用するθの値を予め保持してお
き必要に応じて読み出すようにしてもよいし、その都度
角度センサ等により検知させるようにしてもよい。The division pattern of the photographing range is shown in FIG.
It is not limited to two divisions and four divisions as shown in FIGS. 10 and 11, and other division patterns may be applied. When a single camera can shoot in a plurality of divided patterns, the value of θ used for the shooting direction tilt angle corresponding to the divided pattern is stored in advance and read out as necessary. Alternatively, it may be detected each time by an angle sensor or the like.

【０１１５】さらに、ここで示した実施の形態において
は、傾き補正部３８、貼り合せ処理部３９および記録部
４０をデジタルカメラ１０内に設けて、デジタルカメラ
１０内でこれらの処理を全て行なうようにしているが、
このような形態には限られない。したがって、これらの
処理の一部あるいは全部をパソコンにおいて行なうよう
にしてもよい。Further, in the embodiment shown here, the inclination correction unit 38, the bonding unit 39, and the recording unit 40 are provided in the digital camera 10, and all of these processes are performed in the digital camera 10. But
It is not limited to such a form. Therefore, some or all of these processes may be performed by a personal computer.

【０１１６】即ち、たとえば撮影された分割画像の傾き
補正までをデジタルカメラ内で行ない、その後の貼り合
せ処理をパソコンで行なうようにしてもよい。また、分
割画像が撮影されると、分割画像データおよび傾き補正
に必要なデータ（撮影方向の傾きθ、原稿面の傾きθａ
等）をパソコンに入力し、傾き補正および貼り合せ処理
ともパソコン上のソフトで行なうようにしてもよい。な
お、この場合は、ソフトウェアは、記憶媒体で供給さ
れ、パソコンに読み込んで実行される。That is, for example, it is also possible to perform up to the inclination correction of the photographed divided image in the digital camera, and to perform the subsequent laminating process on the personal computer. When the divided image is photographed, the divided image data and the data necessary for the inclination correction (the inclination θ of the photographing direction, the inclination θa of the document surface)
) May be input to a personal computer, and both the inclination correction and the bonding process may be performed by software on the personal computer. In this case, the software is supplied from a storage medium, and is read and executed by a personal computer.

【０１１７】また、図４および図５の説明においては、
拡大処理（または縮小処理）は、特開平１０−１３７３
３に示すような方法を用いているが、この方法には限ら
れない。したがって、たとえば、いわゆる画像水増し法
等による拡大補正や、いわゆる画素間引き法等による縮
小補正を行なうようにしてもよい。In the description of FIGS. 4 and 5,
The enlargement processing (or reduction processing) is described in Japanese Patent Laid-Open No. 10-1373.
Although the method shown in FIG. 3 is used, it is not limited to this method. Therefore, for example, enlargement correction by a so-called image inflating method or reduction correction by a so-called pixel thinning method may be performed.

【０１１８】なお、今回示した実施の形態においては、
手持ち可能なデジタルカメラの形態を例として説明した
が、これに限らず、撮像部がスタンドに固定され、原稿
を上方より撮影する卓上スキャナの形態であっても適用
可能である。In the embodiment shown this time,
Although the form of the handheld digital camera has been described as an example, the present invention is not limited to this, and the present invention is also applicable to a form of a desk-top scanner in which an imaging unit is fixed to a stand and a document is photographed from above.

【０１１９】卓上スキャナの場合、スタンドの角度によ
り原稿と正対するように構成することも可能であるが、
装置の小型化などの理由により斜め上方から撮影するよ
うに構成せざるを得ない場合があり、このような場合に
は、今回示した実施の形態と同様に原稿の傾き補正が必
要となる。なお、この場合には、撮像部に対する原稿の
傾き量はスタンドの構成により予め決まるので、予め原
稿傾き量を固定値として記憶しておくことができる。In the case of a desk-top scanner, it is possible to arrange the scanner so as to face the original in accordance with the angle of the stand.
In some cases, it is inevitable to take a picture obliquely from above for reasons such as a reduction in the size of the apparatus. In such a case, it is necessary to correct the inclination of the document as in the present embodiment. In this case, since the amount of inclination of the document with respect to the imaging unit is determined in advance by the configuration of the stand, the amount of document inclination can be stored in advance as a fixed value.

【０１２０】今回開示された実施の形態はすべての点で
例示であって、制限的なものではないと考えるべきであ
る。本発明の範囲は、上記した説明ではなく特許請求の
範囲によって示され、特許請求の範囲と均等の意味及び
範囲内ですべての変更が含まれることが意図される。The embodiment disclosed this time is an example in all respects, and should not be considered as limiting. The scope of the present invention is defined by the terms of the claims, rather than the description above, and is intended to include any modifications within the scope and meaning equivalent to the terms of the claims.

【図面の簡単な説明】[Brief description of the drawings]

【図１】 本発明の実施の形態におけるデジタルカメラ
１０の概略を示す透視図である。FIG. 1 is a perspective view schematically showing a digital camera 10 according to an embodiment of the present invention.

【図２】 撮像ユニット１５と走査駆動ユニット１６の
詳細を説明するための斜視図である。FIG. 2 is a perspective view for explaining details of an imaging unit 15 and a scanning drive unit 16.

【図３】 デジタルカメラ１０の全体構成を示す制御ブ
ロック図である。FIG. 3 is a control block diagram illustrating an overall configuration of the digital camera 10.

【図４】 全撮影範囲を左右に２分割した場合の撮影画
像（第１画像および第２画像）を示す図である。FIG. 4 is a diagram illustrating captured images (first image and second image) when the entire capturing range is divided into two right and left parts.

【図５】 図４に示す第１画像を撮影する際の、撮像素
子（ＣＣＤ）２２と原稿との位置関係を説明するための
図である。5 is a diagram for explaining a positional relationship between an image sensor (CCD) 22 and a document when the first image shown in FIG. 4 is photographed.

【図６】 デジタルカメラ１０のメインの制御フローを
示したフローチャートである。FIG. 6 is a flowchart showing a main control flow of the digital camera 10.

【図７】 撮影範囲Ａを左右に２分割して撮影する際の
多点測距方法を説明するための図である。FIG. 7 is a diagram for explaining a multi-point distance measuring method when photographing is performed by dividing the photographing range A into two right and left parts.

【図８】 図６の撮影処理（ステップＳ６１２）のサブ
ルーチンを示したフローチャートである。FIG. 8 is a flowchart showing a subroutine of a photographing process (step S612) of FIG. 6;

【図９】 図８の傾き補正処理（ステップＳ８０６）の
サブルーチンを示したフローチャートである。FIG. 9 is a flowchart showing a subroutine of a tilt correction process (step S806) of FIG. 8;

【図１０】 全撮影範囲を４分割にした場合に本発明を
適用する際の例を示すための図である。FIG. 10 is a diagram showing an example when the present invention is applied when the entire photographing range is divided into four parts.

【図１１】 全撮影範囲を一列に４分割した場合の本発
明の適用例を説明するための図である。FIG. 11 is a diagram for describing an application example of the present invention when the entire photographing range is divided into four in one line.

【図１２】 撮影方向が同じである複数の撮像素子で分
割撮影した場合を説明するための図である。FIG. 12 is a diagram for explaining a case where divided image capturing is performed by a plurality of image sensors having the same image capturing direction.

【図１３】 撮影方向が画面中心からずれていることに
より生じる画像歪みの補正を説明するための図である。FIG. 13 is a diagram for explaining correction of image distortion caused by a shift in a shooting direction from the center of the screen.

【図１４】 原稿がカメラに対してθａ傾いた状態で撮
影された際の補正前の分割画像およびその撮影状況を説
明するための図である。FIG. 14 is a diagram for explaining a divided image before correction and a photographing state thereof when a document is photographed in a state of being inclined by θa with respect to a camera.

【図１５】 図１４に示す撮影状況のもとで撮影された
画像に特開平１０−１３７３３の技術を用いて補正を行
なった場合の図である。FIG. 15 is a diagram showing a case where an image photographed under the photographing situation shown in FIG. 14 is corrected by using the technique of JP-A-10-13733.

【符号の説明】[Explanation of symbols]

１０ デジタルカメラ、１１ カメラ本体、１２ レリ
ーズスイッチ、１３多点測距装置、１４ 表示部、１５
撮像ユニット、１６ 走査駆動ユニット、２１ ズー
ムレンズ、２２ 撮像素子（ＣＣＤ）、２３ ズームモ
ータ、２４Ｕ字状ガイド、２５，２６ 回転軸、２７，
２８ モータおよび角度センサ、３１ ＣＰＵ、３２
操作部、３３ ズーム制御部、３４ 焦点調節装置、３
５撮影方向制御部、３６ ＣＣＤ駆動部、３７ メモ
リ、３８ 傾き補正部、３９貼合せ処理部、４０ 記録
部。Reference Signs List 10 digital camera, 11 camera body, 12 release switch, 13 multi-point distance measuring device, 14 display unit, 15
Imaging unit, 16 scanning drive unit, 21 zoom lens, 22 imaging device (CCD), 23 zoom motor, 24 U-shaped guide, 25, 26 rotation axis, 27,
28 motor and angle sensor, 31 CPU, 32
Operation unit, 33 Zoom control unit, 34 Focus adjustment device, 3
5 shooting direction control unit, 36 CCD drive unit, 37 memory, 38 tilt correction unit, 39 bonding processing unit, 40 recording unit.

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.⁷ 識別記号 ＦＩ テーマコート゛(参考） Ｈ０４Ｎ 5/225 Ｈ０４Ｎ 101:00 5/262 Ｇ０６Ｆ 15/64 ３４０Ｚ // Ｈ０４Ｎ 101:00 15/66 ３６０ (72)発明者 上山 雅之 大阪市中央区安土町二丁目３番13号大阪国 際ビル ミノルタ株式会社内 (72)発明者 小坂 明 大阪市中央区安土町二丁目３番13号大阪国 際ビル ミノルタ株式会社内 (72)発明者 笠井 一郎 大阪市中央区安土町二丁目３番13号大阪国 際ビル ミノルタ株式会社内 Ｆターム(参考） 5B047 AA01 BA02 BB04 BB06 CB09 CB10 CB23 5B057 AA11 BA11 CA12 CA16 CB12 CB16 CD05 CD07 CD12 5C022 AA00 AB51 AC00 AC01 AC69 CA07 5C023 AA10 AA11 AA31 AA37 BA02 BA11 CA02 DA04 EA03 5C076 AA21 AA22 AA23 AA36 AA40 BA06 BB03 BB06 CB05 ──────────────────────────────────────────────────続 き Continued on the front page (51) Int.Cl. ⁷ Identification symbol FI Theme coat ゛ (Reference) H04N 5/225 H04N 101: 00 5/262 G06F 15/64 340Z // H04N 101: 00 15/66 360 ( 72) Inventor Masayuki Ueyama 2-3-13 Azuchicho, Chuo-ku, Osaka City Inside Osaka International Building Minolta Co., Ltd. (72) Inventor Ichiro Kasai 2-13-13 Azuchicho, Chuo-ku, Osaka City International Building Minolta Co., Ltd. F-term (reference) 5B047 AA01 BA02 BB04 BB06 CB09 CB10 CB23 5B057 AA11 BA11 CA12 CA16 CB12 CB16 CD05 CD07 CD12 5C022 AA00 AB51 AC00 AC01 AC69 CA07 5C023 AA10 AA11 AA31 AA37 BA02 BA11 CA02 DA04 EA03 5C076 AA21 AA22 AA23 AA36 AA40 BA06 BB03 BB06 CB05

Claims (18)

【特許請求の範囲】[Claims] 【請求項１】 撮影対象となる面を分割撮影した際の複
数の分割画像を取得する画像取得手段と、 基準方向に対する前記撮影対象となる面の傾きを取得す
る対象面傾き取得手段と、 前記基準方向に対する前記複数の分割画像それぞれの撮
影方向の傾きを取得する撮影方向傾き取得手段と、 前記取得された撮影対象となる面の傾きおよび撮影方向
の傾きに応じて、前記取得された複数の分割画像それぞ
れを補正する補正手段とを備えた、画像傾き補正装置。An image acquisition unit that acquires a plurality of divided images when a surface to be photographed is dividedly photographed; a target surface inclination acquisition unit that acquires a tilt of the surface to be photographed with respect to a reference direction; A photographing direction inclination acquiring unit for acquiring the inclination of the photographing direction of each of the plurality of divided images with respect to a reference direction; and the acquired plurality of acquired An image inclination correction device comprising: a correction unit that corrects each of the divided images. 【請求項２】 前記取得された複数の分割画像は、前記
撮影方向をそれぞれ変化させて撮影された画像を含む、
請求項１に記載の画像傾き補正装置。2. The acquired plurality of divided images include images photographed by changing the photographing directions, respectively.
The image inclination correction device according to claim 1. 【請求項３】 前記補正手段は、同じ基準点に基づい
て、前記複数の分割画像それぞれを補正することを特徴
とする、請求項１または２に記載の画像傾き補正装置。3. The image inclination correction device according to claim 1, wherein the correction unit corrects each of the plurality of divided images based on the same reference point. 【請求項４】 撮影対象となる面を分割撮影した際の複
数の分割画像を取得する画像取得手段と、 基準方向に対する前記撮影対象となる面の傾きを取得す
る対象面傾き取得手段と、 前記取得された撮影対象となる面の傾きを考慮して、前
記取得された複数の分割画像それぞれを補正する補正手
段とを備え、 前記補正手段は、同じ基準点に基づいて、前記複数の分
割画像それぞれを補正することを特徴とする、画像傾き
補正装置。4. An image acquisition unit for acquiring a plurality of divided images when a surface to be photographed is dividedly photographed, a target surface inclination acquisition unit for acquiring the inclination of the surface to be photographed with respect to a reference direction, Correcting means for correcting each of the acquired plurality of divided images in consideration of the inclination of the acquired imaging target surface, wherein the correcting means is configured to correct the plurality of divided images based on the same reference point. An image skew correction device for correcting each of them. 【請求項５】 撮影対象となる面を分割撮影した際の複
数の分割画像を取得する画像取得手段と、 基準方向に対する前記撮影対象となる面の傾きを取得す
る対象面傾き取得手段と、 前記取得された撮影対象となる面の傾きを考慮して、前
記取得された複数の分割画像それぞれを補正する補正手
段とを備え、 前記補正手段は、同じ倍率になるように、前記複数の分
割画像それぞれを補正することを特徴とする、画像傾き
補正装置。5. An image acquisition unit for acquiring a plurality of divided images when a surface to be photographed is dividedly photographed, a target surface inclination acquisition unit for acquiring the inclination of the surface to be photographed with respect to a reference direction, Correcting means for correcting each of the plurality of acquired divided images in consideration of the inclination of the acquired image capturing target surface, wherein the correcting means comprises: An image skew correction device for correcting each of them. 【請求項６】 前記対象面傾き取得手段は、測距センサ
により測定された前記撮影対象となる面上の複数の点ま
での距離に基づいて取得することを特徴とする、請求項
１〜５のいずれかに記載の画像傾き補正装置。6. The apparatus according to claim 1, wherein the object plane inclination acquiring means acquires the distance based on distances to a plurality of points on the surface to be photographed measured by a distance measuring sensor. The image inclination correction device according to any one of the above. 【請求項７】 撮影対象となる面を分割撮影した際の複
数の分割画像を取得する画像取得ステップと、 基準方向に対する前記撮影対象となる面の傾きを取得す
る対象面傾き取得ステップと、 前記基準方向に対する前記複数の分割画像それぞれの撮
影方向の傾きを取得する撮影方向傾き取得ステップと、 前記取得された撮影対象となる面の傾きおよび撮影方向
の傾きに応じて、前記取得された複数の分割画像それぞ
れを補正する補正ステップとを備えた、画像傾き補正方
法。7. An image acquisition step for acquiring a plurality of divided images when a plane to be imaged is dividedly photographed, a target plane inclination acquisition step for acquiring an inclination of the plane to be photographed with respect to a reference direction, A photographing direction inclination acquiring step of acquiring the inclination of the photographing direction of each of the plurality of divided images with respect to a reference direction, and the acquired plurality of acquired A correction step of correcting each of the divided images. 【請求項８】 前記取得された複数の分割画像は、前記
撮影方向をそれぞれ変化させて撮影された画像を含む、
請求項７に記載の画像傾き補正方法。8. The acquired plurality of divided images include images photographed by respectively changing the photographing directions.
An image inclination correction method according to claim 7. 【請求項９】 前記補正ステップは、同じ基準点に基づ
いて、前記複数の分割画像それぞれを補正することを特
徴とする、請求項７または８に記載の画像傾き補正方
法。9. The image inclination correction method according to claim 7, wherein the correcting step corrects each of the plurality of divided images based on the same reference point. 【請求項１０】 撮影対象となる面を分割撮影した際の
複数の分割画像を取得する画像取得ステップと、 基準方向に対する前記撮影対象となる面の傾きを取得す
る対象面傾き取得ステップと、 前記取得された撮影対象となる面の傾きを考慮して、前
記取得された複数の分割画像それぞれを補正する補正ス
テップとを備え、 前記補正ステップは、同じ基準点に基づいて、前記複数
の分割画像それぞれを補正することを特徴とする、画像
傾き補正方法。10. An image acquiring step of acquiring a plurality of divided images when a surface to be photographed is dividedly photographed, a target surface inclination acquiring step of acquiring the inclination of the surface to be photographed with respect to a reference direction, A correcting step of correcting each of the obtained plurality of divided images in consideration of the inclination of the acquired image capturing target surface, wherein the correcting step is performed based on the same reference point. An image skew correction method comprising correcting each of them. 【請求項１１】 撮影対象となる面を分割撮影した際の
複数の分割画像を取得する画像取得ステップと、 基準方向に対する前記撮影対象となる面の傾きを取得す
る対象面傾き取得ステップと、 前記取得された撮影対象となる面の傾きを考慮して、前
記取得された複数の分割画像それぞれを補正する補正ス
テップとを備え、 前記補正ステップは、同じ倍率になるように、前記複数
の分割画像それぞれを補正することを特徴とする、画像
傾き補正方法。11. An image acquisition step of acquiring a plurality of divided images when a plane to be photographed is dividedly photographed, a target plane inclination acquisition step of acquiring the inclination of the plane to be photographed with respect to a reference direction, A correcting step of correcting each of the plurality of acquired divided images in consideration of the inclination of the acquired imaging target surface, wherein the correcting step comprises: An image skew correction method comprising correcting each of them. 【請求項１２】 前記対象面傾き取得ステップは、測距
センサにより測定された前記撮影対象となる面上の複数
の点までの距離に基づいて取得することを特徴とする、
請求項７〜１１のいずれかに記載の画像傾き補正方法。12. The object plane inclination acquiring step is characterized in that the object plane inclination is acquired based on distances to a plurality of points on the surface to be photographed measured by a distance measuring sensor.
The image inclination correction method according to claim 7. 【請求項１３】 撮影対象となる面を分割撮影した際の
複数の分割画像を取得する画像取得ステップと、 基準方向に対する前記撮影対象となる面の傾きを取得す
る対象面傾き取得ステップと、 前記基準方向に対する前記複数の分割画像それぞれの撮
影方向の傾きを取得する撮影方向傾き取得ステップと、 前記取得された撮影対象となる面の傾きおよび撮影方向
の傾きに応じて、前記取得された複数の分割画像それぞ
れを補正する補正ステップとを、コンピュータに実行さ
せる画像傾き補正プログラムを記録した記録媒体。13. An image acquiring step for acquiring a plurality of divided images when a surface to be photographed is dividedly photographed, a target surface inclination acquiring step for acquiring the inclination of the surface to be photographed with respect to a reference direction, A photographing direction inclination acquiring step of acquiring the inclination of the photographing direction of each of the plurality of divided images with respect to a reference direction, and the acquired plurality of acquired A recording medium storing an image inclination correction program for causing a computer to execute a correction step of correcting each of the divided images. 【請求項１４】 前記取得された複数の分割画像は、前
記撮影方向をそれぞれ変化させて撮影された画像を含
む、請求項１３に記載の画像傾き補正プログラムを記録
した記録媒体。14. The recording medium according to claim 13, wherein said plurality of acquired divided images include images photographed by respectively changing said photographing directions. 【請求項１５】 前記補正ステップは、同じ基準点に基
づいて、前記複数の分割画像それぞれを補正することを
特徴とする、請求項１３または１４に記載の画像傾き補
正プログラムを記録した記録媒体。15. The recording medium according to claim 13, wherein the correcting step corrects each of the plurality of divided images based on the same reference point. 【請求項１６】 撮影対象となる面を分割撮影した際の
複数の分割画像を取得する画像取得ステップと、 基準方向に対する前記撮影対象となる面の傾きを取得す
る対象面傾き取得ステップと、 前記取得された撮影対象となる面の傾きを考慮して、前
記取得された複数の分割画像それぞれを補正する補正ス
テップとを、コンピュータに実行させる画像傾き補正プ
ログラムを記録した記録媒体であって、 前記補正ステップは、同じ基準点に基づいて、前記複数
の分割画像それぞれを補正することを特徴とする、画像
傾き補正プログラムを記録した記録媒体。16. An image acquisition step of acquiring a plurality of divided images when a plane to be photographed is dividedly photographed, a target plane inclination acquisition step of acquiring the inclination of the plane to be photographed with respect to a reference direction, A correction step of correcting each of the plurality of acquired divided images in consideration of the inclination of the acquired imaging target surface, and a recording medium recording an image inclination correction program for causing a computer to execute, The correction step corrects each of the plurality of divided images based on the same reference point, wherein the recording medium stores an image tilt correction program. 【請求項１７】 撮影対象となる面を分割撮影した際の
複数の分割画像を取得する画像取得ステップと、 基準方向に対する前記撮影対象となる面の傾きを取得す
る対象面傾き取得ステップと、 前記取得された撮影対象となる面の傾きを考慮して、前
記取得された複数の分割画像それぞれを補正する補正ス
テップとを、コンピュータに実行させる画像傾き補正プ
ログラムを記録した記録媒体であって、 前記補正ステップは、同じ倍率になるように、前記複数
の分割画像それぞれを補正することを特徴とする、画像
傾き補正プログラムを記録した記録媒体。17. An image acquiring step for acquiring a plurality of divided images when a plane to be photographed is dividedly photographed, a target plane inclination acquiring step for acquiring a slope of the plane to be photographed with respect to a reference direction, A correction step of correcting each of the plurality of acquired divided images in consideration of the inclination of the acquired imaging target surface, and a recording medium recording an image inclination correction program for causing a computer to execute, The correction step corrects each of the plurality of divided images so as to have the same magnification. A recording medium storing an image tilt correction program. 【請求項１８】 前記対象面傾き取得ステップは、測距
センサにより測定された前記撮影対象となる面上の複数
の点までの距離に基づいて取得することを特徴とする、
請求項１３〜１７のいずれかに記載の画像傾き補正プロ
グラムを記録した記録媒体。18. The object plane inclination acquiring step is characterized in that the object plane inclination is acquired based on distances to a plurality of points on the surface to be photographed measured by a distance measuring sensor.
A recording medium on which the image inclination correction program according to claim 13 is recorded.