JP6596872B2 - Projector and control method - Google Patents

Projector and control method Download PDF

Info

Publication number
JP6596872B2
JP6596872B2 JP2015067245A JP2015067245A JP6596872B2 JP 6596872 B2 JP6596872 B2 JP 6596872B2 JP 2015067245 A JP2015067245 A JP 2015067245A JP 2015067245 A JP2015067245 A JP 2015067245A JP 6596872 B2 JP6596872 B2 JP 6596872B2
Authority
JP
Japan
Prior art keywords
imaging
unit
image
projection
projector
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2015067245A
Other languages
Japanese (ja)
Other versions
JP2016187145A5 (en
JP2016187145A (en
Inventor
美孝 中進
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Priority to JP2015067245A priority Critical patent/JP6596872B2/en
Publication of JP2016187145A publication Critical patent/JP2016187145A/en
Publication of JP2016187145A5 publication Critical patent/JP2016187145A5/ja
Application granted granted Critical
Publication of JP6596872B2 publication Critical patent/JP6596872B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Projection Apparatus (AREA)
  • Transforming Electric Information Into Light Information (AREA)

Description

この発明は、プロジェクター、及び制御方法に関する。   The present invention relates to a projector and a control method.

画像を投写し、投写された当該画像を撮像部により撮像し、撮像された撮像画像に基づいて各種機能の設定を行うプロジェクターが研究・開発されている。ここで、各種機能とは、例えば、画質調整機能や、スクリーンフィット（枠補正）機能、自動台形補正機能、インタラクティブ機能等を示す。   A projector that projects an image, captures the projected image with an imaging unit, and sets various functions based on the captured image has been researched and developed. Here, the various functions indicate, for example, an image quality adjustment function, a screen fit (frame correction) function, an automatic trapezoid correction function, an interactive function, and the like.

これに関し、投写画像を投写する際の投写条件に応じて撮像部の撮像条件を変更するプロジェクターが知られている（特許文献１参照）。   In this regard, a projector that changes the imaging condition of the imaging unit in accordance with the projection condition when projecting a projection image is known (see Patent Document 1).

また、ユーザーのジェスチャーを撮像する複数の撮像部を備え、自装置の姿勢に応じた撮像部を選択するプロジェクターが知られている（特許文献２参照）。   There is also known a projector that includes a plurality of imaging units that capture user's gestures and selects an imaging unit according to the posture of the own device (see Patent Document 2).

特開２００５−１１５１８５号公報JP 2005-115185 A 特開２００９−２０６７２６号公報JP 2009-206726 A

しかしながら、従来のプロジェクターでは、自装置が備える撮像部によって、投写した投写画像の全体を撮像することができなくなる場合があった。そのような場合とは、例えば、プロジェクターがレンズシフト機能を有する場合である。以下では、説明の便宜上、プロジェクターが投写画像を投写するために備えるレンズを投写レンズと称して説明する。レンズシフト機能とは、投写レンズを光軸に垂直な方向に移動（シフト）させる機能のことである。プロジェクターから投写される投写画像は、レンズシフト機能により投写レンズを移動した結果として、投写される位置（投写される領域）がずれる。なお、投写画像が投写される位置とは、例えば、投写された投写画像の中心の位置によって表される。   However, in the conventional projector, there is a case where the entire projected image cannot be captured by the imaging unit included in the own apparatus. Such a case is, for example, a case where the projector has a lens shift function. Hereinafter, for convenience of explanation, a lens provided for the projector to project a projected image will be referred to as a projection lens. The lens shift function is a function for moving (shifting) the projection lens in a direction perpendicular to the optical axis. The projected image projected from the projector shifts its projected position (projected area) as a result of moving the projection lens by the lens shift function. The position at which the projected image is projected is represented by, for example, the center position of the projected image.

ここで、プロジェクターがレンズシフト機能を有する場合の一例を、図２８を参照して説明する。図２８は、レンズシフト機能を有するプロジェクターＸが使用される様子の一例を示す図である。図２８において、テーブルの上に設置されたプロジェクターＸは、スクリーンＳＣＸに投写画像Ｐを投写している。プロジェクターＸは、ユーザーから受け付けた操作に基づいて投写レンズを移動させることにより、投写画像Ｐが投写される位置を移動させる。投写画像Ｐが投写される領域が移動できる範囲は、投写レンズの可動範囲によって規定される。以下では、説明の便宜上、投写レンズの移動によって投写画像Ｐを投写させることが可能な領域を、投写可能領域と称して説明する。すなわち、プロジェクターＸは、投写画像Ｐが投写される領域を投写可能領域ＰＡＸ内において移動させることができる。   Here, an example where the projector has a lens shift function will be described with reference to FIG. FIG. 28 is a diagram illustrating an example of a state in which the projector X having a lens shift function is used. In FIG. 28, the projector X installed on the table projects the projection image P on the screen SCX. The projector X moves the position where the projection image P is projected by moving the projection lens based on the operation received from the user. The range in which the area where the projected image P is projected can be moved is defined by the movable range of the projection lens. Hereinafter, for convenience of explanation, an area where the projection image P can be projected by moving the projection lens will be referred to as a projectable area. That is, the projector X can move the area where the projection image P is projected within the projectable area PAX.

図２８では、一例として、プロジェクターＸが、投写画像Ｐを投写可能領域ＰＡＸ内における基準となる位置から左に投写画像Ｐの横幅の１０％分の幅、右に投写画像Ｐの横幅の１０％分の幅、上に投写画像Ｐの縦幅の５０％分の幅、下に投写画像Ｐの縦幅の５０％分の幅だけそれぞれ移動させることができる場合を示した。   In FIG. 28, as an example, the projector X has a width corresponding to 10% of the horizontal width of the projection image P to the left from the position serving as the reference in the projectable area PAX, and 10% of the horizontal width of the projection image P to the right. The case where the width can be moved by 50% of the vertical width of the projected image P and the width by 50% of the vertical width of the projected image P is shown below.

また、図２８において、プロジェクターＸは、撮像部Ｘ１０を備える。撮像部Ｘ１０が投写可能領域ＰＡＸの一部を撮像可能な挟角レンズを備えている場合、プロジェクターＸでは、投写可能領域ＰＡＸ内においてレンズシフト機能により投写画像Ｐの位置がずらされると、撮像部Ｘ１０の撮像可能な領域内から投写画像Ｐがはみ出してしまうことがある。   In FIG. 28, the projector X includes an imaging unit X10. In the case where the imaging unit X10 includes a narrow-angle lens that can capture a part of the projectable area PAX, in the projector X, when the position of the projected image P is shifted by the lens shift function in the projectable area PAX, the imaging unit The projected image P may protrude from the area where X10 can be imaged.

一方、撮像部Ｘ１０が投写可能領域ＰＡＸの全体を撮像可能な広角レンズを備えている場合、プロジェクターＸは、投写可能領域ＰＡＸ内における任意の位置に投写された投写画像Ｐの全体を撮像することができる。しかし、撮像された撮像画像上の投写画像Ｐの像は、例えば、図２９に示したように、撮像画像ＣＰ内の４隅において歪んでしまう場合がある。図２９は、投写可能領域ＰＡＸの全体を撮像可能な広角レンズを備えた撮像部Ｘ１０により撮像された撮像画像ＣＰの一例を示す図である。なお、この例では、撮像画像ＣＰ内の４隅とは、図２９において撮像画像ＣＰ内の円ＰＣ１〜ＰＣ４のそれぞれによって囲まれた領域のことを示す。   On the other hand, when the imaging unit X10 includes a wide-angle lens that can capture the entire projectable area PAX, the projector X captures the entire projected image P projected at an arbitrary position in the projectable area PAX. Can do. However, the projected image P on the captured image may be distorted at four corners in the captured image CP as shown in FIG. 29, for example. FIG. 29 is a diagram illustrating an example of a captured image CP captured by the imaging unit X10 including a wide-angle lens that can capture the entire projectable area PAX. In this example, the four corners in the captured image CP indicate regions surrounded by the circles PC1 to PC4 in the captured image CP in FIG.

また、投写可能領域ＰＡＸの全体を撮像可能な広角レンズを備える撮像部Ｘ１０により撮像された撮像画像ＣＰ上の投写画像Ｐの像が歪まない場合であっても、プロジェクターＸは、撮像部Ｘ１０が撮像可能な領域が投写画像Ｐに対して大き過ぎる場合、撮像画像ＣＰから投写画像Ｐを検出する処理に時間を要してしまう場合がある。また、撮像部Ｘ１０が撮像可能な領域が投写画像Ｐに対して大き過ぎる場合、撮像画像に含まれる投写画像Ｐのサイズが小さくなるため、処理に必要な解像度が得られず、処理の精度へ影響する場合がある。   Further, even when the image of the projection image P on the captured image CP captured by the imaging unit X10 including the wide-angle lens that can capture the entire projectable area PAX is not distorted, the projector X has the imaging unit X10. If the imageable area is too large for the projected image P, it may take time to detect the projected image P from the captured image CP. In addition, when the area that can be imaged by the imaging unit X10 is too large for the projection image P, the size of the projection image P included in the captured image becomes small, so that the resolution necessary for the processing cannot be obtained, and the processing accuracy is increased. May affect.

そこで本発明は、上記従来技術の問題に鑑みてなされたものであり、投写画像の状態に応じて適した画像に基づく処理を行うことができるプロジェクター、及び制御方法を提供する。   Accordingly, the present invention has been made in view of the above-described problems of the prior art, and provides a projector and a control method capable of performing processing based on an image suitable for the state of a projected image.

本発明の一態様は、投写面に投写画像を投写する投写部と、前記投写面の少なくとも一部を含む領域を撮像する撮像部と、前記撮像部の撮像中心を移動する移動部と、前記移動部により前記撮像中心を移動させながら前記撮像部に撮像画像を撮像させ、前記撮像画像に占める前記投写画像の割合が所定条件を満たすように前記移動部を制御する制御部と、前記投写画像の前記割合が前記所定条件を満たす状態で撮像された前記撮像画像に基づいて処理を行う処理部と、を備えたプロジェクターである。
この構成により、プロジェクターは、投写面に投写画像を投写し、移動部により撮像中心を移動させながら撮像部に投写面の少なくとも一部を含む撮像画像を撮像させ、撮像画像に占める投写画像の割合が所定条件を満たすように移動部を制御し、撮像画像に占める投写画像の割合が所定条件を満たす状態で撮像された撮像画像に基づいて処理を行う。これにより、プロジェクターは、投写画像の状態に応じて適した画像に基づく処理を行うことができる。 One aspect of the present invention includes a projection unit that projects a projection image on a projection surface, an imaging unit that captures an area including at least a part of the projection surface, a moving unit that moves an imaging center of the imaging unit, A control unit configured to cause the imaging unit to capture a captured image while moving the imaging center by a moving unit, and to control the moving unit so that a ratio of the projected image in the captured image satisfies a predetermined condition; and the projected image And a processing unit that performs processing based on the captured image captured in a state where the ratio satisfies the predetermined condition.
With this configuration, the projector projects a projected image on the projection surface, causes the imaging unit to capture a captured image including at least a part of the projection surface while moving the imaging center by the moving unit, and the ratio of the projected image in the captured image Is controlled so as to satisfy a predetermined condition, and processing is performed based on a captured image captured in a state where the ratio of the projected image in the captured image satisfies the predetermined condition. Thereby, the projector can perform processing based on an image suitable for the state of the projected image.

また、本発明の他の態様は、プロジェクターにおいて、前記移動部は、前記撮像部の向きを変えることにより前記撮像中心を移動する、構成が用いられてもよい。
この構成により、プロジェクターは、撮像部の向きを変えることにより撮像中心を移動する。これにより、プロジェクターは、撮像部の向きを変えることによって撮像部により撮像可能な領域を移動させることができる。 According to another aspect of the present invention, in the projector, a configuration in which the moving unit moves the imaging center by changing a direction of the imaging unit may be used.
With this configuration, the projector moves the imaging center by changing the orientation of the imaging unit. As a result, the projector can move the area that can be imaged by the imaging unit by changing the orientation of the imaging unit.

また、本発明の他の態様は、プロジェクターにおいて、前記撮像部は、レンズと、前記レンズの光軸と中心軸がずれている光検出部とを備え、前記移動部は、前記光検出部に対する前記レンズの相対位置を変化させることにより前記撮像中心を移動させる、構成が用いられてもよい。
この構成により、プロジェクターは、光検出部に対するレンズの相対位置を変化させることにより撮像中心を移動させる。これにより、プロジェクターは、光検出部に対するレンズの相対位置を変化させることによって撮像部により撮像可能な領域を移動させることができる。 According to another aspect of the present invention, in the projector, the imaging unit includes a lens, and a light detection unit whose center axis is shifted from an optical axis of the lens, and the moving unit is connected to the light detection unit. A configuration in which the imaging center is moved by changing a relative position of the lens may be used.
With this configuration, the projector moves the imaging center by changing the relative position of the lens with respect to the light detection unit. Accordingly, the projector can move the region that can be imaged by the imaging unit by changing the relative position of the lens with respect to the light detection unit.

また、本発明の他の態様は、プロジェクターにおいて、前記制御部は、複数の所定の図形を含むパターン画像を前記投写部が投写しているときに、前記移動部により前記撮像中心を移動させながら前記撮像部に撮像画像を撮像させ、前記撮像画像に含まれる前記図形の数が所定条件を満たすように前記移動部を制御する、構成が用いられてもよい。
この構成により、プロジェクターは、前記制御部は、複数の所定の図形を含むパターン画像を投写部が投写しているときに、移動部により撮像中心を移動させながら撮像部に撮像画像を撮像させ、撮像画像に含まれる図形の数が所定条件を満たすように移動部を制御する。これにより、プロジェクターは、撮像画像に含まれる図形の数に基づいて、撮像部により撮像可能な領域を移動させることができる。 According to another aspect of the present invention, in the projector, the control unit moves the imaging center by the moving unit when the projection unit is projecting a pattern image including a plurality of predetermined figures. A configuration may be used in which the imaging unit is caused to capture a captured image, and the moving unit is controlled so that the number of the graphics included in the captured image satisfies a predetermined condition.
With this configuration, the projector causes the imaging unit to capture a captured image while moving the imaging center by the moving unit when the control unit is projecting a pattern image including a plurality of predetermined figures. The moving unit is controlled so that the number of figures included in the captured image satisfies a predetermined condition. Thereby, the projector can move the area which can be imaged by the imaging unit based on the number of figures included in the captured image.

また、本発明の他の態様は、プロジェクターにおいて、前記制御部は、前記投写画像の前記割合が前記所定条件を満たすか否かをパターンマッチングによって判定する、構成が用いられてもよい。
この構成により、プロジェクターは、撮像画像に占める投写画像の割合が所定条件を満たすか否かをパターンマッチングによって判定する。これにより、プロジェクターは、パターンマッチングのマッチング結果に基づいて、撮像部により撮像可能な領域を移動させることができる。 According to another aspect of the present invention, in the projector, the control unit may determine whether the ratio of the projection image satisfies the predetermined condition by pattern matching.
With this configuration, the projector determines by pattern matching whether or not the ratio of the projected image to the captured image satisfies a predetermined condition. Accordingly, the projector can move the area that can be imaged by the imaging unit based on the pattern matching matching result.

また、本発明の他の態様は、プロジェクターにおいて、前記投写部による投写条件を取得する取得部を備え、前記制御部は、前記取得部が取得した前記投写条件に基づいて、前記移動部に移動させる前記撮像中心の位置を決定する、構成が用いられてもよい。
この構成により、プロジェクターは、取得した投写条件に基づいて、移動部に移動させる撮像中心の位置を決定する。これにより、プロジェクターは、撮像画像に占める投写画像の割合が小さくなる方向に撮像中心を移動させてしまうことを抑制することができる。 According to another aspect of the present invention, in the projector, the projector includes an acquisition unit that acquires a projection condition by the projection unit, and the control unit moves to the moving unit based on the projection condition acquired by the acquisition unit. A configuration for determining the position of the imaging center to be performed may be used.
With this configuration, the projector determines the position of the imaging center to be moved by the moving unit based on the acquired projection conditions. Thereby, the projector can suppress moving the imaging center in a direction in which the proportion of the projected image in the captured image decreases.

また、本発明の他の態様は、プロジェクターにおいて、前記制御部は、前記取得部が取得した前記投写条件に基づいて、初期的に前記移動部が撮像中心を移動する方向を決定する、構成が用いられてもよい。
この構成により、プロジェクターは、取得した投写条件に基づいて、初期的に移動部が撮像中心を移動する方向を決定する。これにより、プロジェクターは、撮像中心を移動させているにも拘わらず、撮像画像に投写画像の全体が含まれない状態が続いてしまうことを抑制することができる。 According to another aspect of the present invention, in the projector, the control unit initially determines a direction in which the moving unit moves the imaging center based on the projection condition acquired by the acquiring unit. May be used.
With this configuration, the projector initially determines the direction in which the moving unit moves the imaging center based on the acquired projection conditions. As a result, the projector can prevent the state in which the entire projected image is not included in the captured image from continuing even though the imaging center is moved.

また、本発明の他の態様は、プロジェクターにおいて、前記撮像部は、複数あり、前記制御部は、前記投写画像の前記割合に基づいて撮像に用いる前記撮像部を選択する、構成が用いられてもよい。
この構成により、プロジェクターは、撮像画像に占める投写画像の割合に基づいて撮像に用いる撮像部を選択する。これにより、プロジェクターは、複数の撮像部の中から適した撮像部を選択することができる。 In another aspect of the invention, the projector includes a plurality of the imaging units, and the control unit selects the imaging unit to be used for imaging based on the ratio of the projection image. Also good.
With this configuration, the projector selects the imaging unit used for imaging based on the ratio of the projected image to the captured image. Thereby, the projector can select a suitable imaging unit from among a plurality of imaging units.

また、本発明の他の態様は、投写面に投写画像を投写し、前記投写面の少なくとも一部を含む領域を撮像部により撮像し、前記撮像部の撮像中心を移動部により移動し、前記移動部により前記撮像中心を移動させながら前記撮像部に撮像画像を撮像させ、前記撮像画像に占める前記投写画像の割合が所定条件を満たすように前記移動部を制御し、前記投写画像の前記割合が前記所定条件を満たす状態で撮像された前記撮像画像に基づいて処理を行う、制御方法である。
この構成により、制御方法は、投写面に投写画像を投写し、投写面の少なくとも一部を含む領域を撮像部により撮像し、撮像部の撮像中心を移動部により移動し、移動部により撮像中心を移動させながら撮像部に撮像画像を撮像させ、撮像画像に占める投写画像の割合が所定条件を満たすように移動部を制御し、撮像画像に占める投写画像の割合が所定条件を満たす状態で撮像された撮像画像に基づいて処理を行う。これにより、制御方法は、投写画像の状態に応じて適した画像に基づく処理を行うことができる。
また、本発明の他の態様は、プロジェクターであって、投写面に投写画像を投写する投写部と、前記投写面の少なくとも一部を含む領域を撮像する撮像部と、前記撮像部の撮像中心を移動する移動部と、前記移動部により前記撮像中心を移動させながら前記撮像部に撮像画像を撮像させ、前記撮像画像に占める前記投写画像の割合が所定条件を満たすように前記移動部を制御する制御部と、を備え、前記投写画像の前記割合が前記所定条件を満たす状態で撮像された前記撮像画像に基づいて処理を行う、プロジェクターである。
また、本発明の他の態様は、プロジェクターにおいて、前記撮像部は、レンズと、光検出部とを備え、前記移動部は、前記光検出部に対する前記レンズの相対位置を変化させることにより前記撮像中心を移動させる、構成が用いられてもよい。
また、本発明の他の態様は、プロジェクターにおいて、前記制御部は、前記投写部の投写条件を取得し、取得した前記投写条件に基づいて、前記移動部に移動させる前記撮像中心の位置を決定する、構成が用いられてもよい。
また、本発明の他の態様は、プロジェクターにおいて、前記制御部は、取得した前記投写条件に基づいて、初期的に前記移動部が前記撮像中心を移動する方向を決定する、構成が用いられてもよい。
また、本発明の他の態様は、プロジェクターであって、投写面にパターン画像を投写する投写部と、前記投写面の少なくとも一部を含む領域を撮像する撮像部と、前記撮像部の撮像中心を移動する移動部と、前記撮像部が撮像する撮像画像に占める前記パターン画像の割合を表す値である評価値を検出する評価値検出部と、前記評価値検出部が検出する前記評価値が所定条件を満たすまで、繰り返し前記撮像中心を移動可能な複数の位置の一部又は全部のそれぞれに移動させ、前記評価値が前記所定条件を満たすように前記移動部を制御する制御部と、を備え、前記パターン画像の前記評価値が前記所定条件を満たす状態で撮像された前記撮像画像に基づいて処理を行う、プロジェクターである。
また、本発明の他の態様は、プロジェクターであって、投写面に投写画像を投写する投写部と、前記投写面の少なくとも一部を含む領域を撮像する撮像部と、前記撮像部の撮像中心を移動する移動部と、複数の所定の図形を含むパターン画像を前記投写部が投写しているときに、前記移動部により前記撮像中心を移動させながら前記撮像部に撮像画像を撮像させ、前記撮像画像に含まれる前記図形の数が所定条件を満たすように前記移動部を制御する制御部と、を備え、前記所定条件を満たす状態で撮像された前記撮像画像に基づいて処理を行う、プロジェクターである。
また、本発明の他の態様は、プロジェクターであって、投写面に投写画像を投写する投写部と、前記投写面の少なくとも一部を含む領域を撮像する撮像部と、前記撮像部の撮像中心を移動する移動部と、前記移動部により前記撮像中心を移動させながら前記撮像部に撮像画像を撮像させ、前記撮像画像に占める前記投写画像の割合が所定条件を満たすように前記移動部を制御し、前記投写画像の前記割合が前記所定条件を満たすか否かをパターンマッチングによって判定する制御部と、を備え、前記所定条件を満たす状態で撮像された前記撮像画像に基づいて処理を行う、プロジェクターである。
また、本発明の他の態様は、プロジェクターであって、投写面に投写画像を投写する投写部と、前記投写面の少なくとも一部を含む領域を撮像する複数の撮像部と、前記撮像部の撮像中心を移動する移動部と、前記移動部により前記撮像中心を移動させながら前記撮像部に撮像画像を撮像させ、前記撮像画像に占める前記投写画像の割合が所定条件を満たすように前記移動部を制御し、前記投写画像の前記割合に基づいて撮像に用いる前記撮像部を選択する制御部と、を備え、前記所定条件を満たす状態で、選択された前記撮像部により撮像された前記撮像画像に基づいて処理を行う、プロジェクターである。
また、本発明の他の態様は、投写面にパターン画像を投写部により投写し、前記投写面の少なくとも一部を含む領域を撮像部により撮像し、前記撮像部の撮像中心を移動部により移動し、前記撮像部が撮像する撮像画像に占める前記パターン画像の割合を表す値である評価値を検出し、前記評価値が所定条件を満たすまで、繰り返し前記撮像中心を移動可能な複数の位置の一部又は全部のそれぞれに移動させ、前記評価値が前記所定条件を満たすように前記移動部を制御し、前記パターン画像の前記評価値が前記所定条件を満たす状態で撮像された前記撮像画像に基づいて処理を行う、制御方法である。
また、本発明の他の態様は、投写面に投写画像を投写部により投写し、前記投写面の少なくとも一部を含む領域を撮像部により撮像し、前記撮像部の撮像中心を移動部により移動し、複数の所定の図形を含むパターン画像を投写部が投写しているときに、前記移動部により前記撮像中心を移動させながら前記撮像部に撮像画像を撮像させ、前記撮像画像に含まれる前記図形の数が所定条件を満たすように前記移動部を制御し、前記所定条件を満たす状態で撮像された前記撮像画像に基づいて処理を行う、制御方法である。
また、本発明の他の態様は、投写面に投写画像を投写部により投写し、前記投写面の少なくとも一部を含む領域を撮像部により撮像し、前記撮像部の撮像中心を移動部により移動し、前記移動部により前記撮像中心を移動させながら前記撮像部に撮像画像を撮像させ、前記撮像画像に占める前記投写画像の割合が所定条件を満たすように前記移動部を制御し、前記投写画像の前記割合が前記所定条件を満たすか否かをパターンマッチングによって判定し、前記所定条件を満たす状態で撮像された前記撮像画像に基づいて処理を行う、制御方法である。
また、本発明の他の態様は、投写面に投写画像を投写部により投写し、前記投写面の少なくとも一部を含む領域を複数の撮像部により撮像し、前記撮像部の撮像中心を移動部により移動し、前記移動部により前記撮像中心を移動させながら前記撮像部に撮像画像を撮像させ、前記撮像画像に占める前記投写画像の割合が所定条件を満たすように前記移動部を制御し、前記投写画像の前記割合に基づいて撮像に用いる前記撮像部を選択し、前記所定条件を満たす状態で、選択された前記撮像部により撮像された前記撮像画像に基づいて処理を行う、制御方法である。
According to another aspect of the present invention, a projection image is projected onto a projection plane, an area including at least a part of the projection plane is captured by an imaging unit, an imaging center of the imaging unit is moved by a moving unit, The moving unit controls the moving unit so that a ratio of the projected image in the captured image satisfies a predetermined condition by moving the imaging center while moving the imaging center, and the ratio of the projected image Is a control method for performing processing based on the captured image captured in a state satisfying the predetermined condition.
With this configuration, the control method projects a projection image on the projection surface, images an area including at least a part of the projection surface by the imaging unit, moves the imaging center of the imaging unit by the moving unit, and moves the imaging center by the moving unit. The image capturing unit captures a captured image while moving the image, and controls the moving unit so that the ratio of the projected image in the captured image satisfies a predetermined condition, and the image is captured in a state in which the ratio of the projected image in the captured image satisfies the predetermined condition. Processing is performed based on the captured image. Thereby, the control method can perform processing based on an image suitable for the state of the projected image.
According to another aspect of the present invention, there is provided a projector, the projection unit that projects a projection image on a projection surface, the imaging unit that captures an area including at least a part of the projection surface, and the imaging center of the imaging unit. A moving unit that moves the imaging center while moving the imaging center by the moving unit, and controls the moving unit so that a ratio of the projected image in the captured image satisfies a predetermined condition. A projector that performs processing based on the captured image that is captured in a state in which the ratio of the projected image satisfies the predetermined condition.
According to another aspect of the present invention, in the projector, the imaging unit includes a lens and a light detection unit, and the moving unit changes the relative position of the lens with respect to the light detection unit. A configuration that moves the center may be used.
According to another aspect of the present invention, in the projector, the control unit acquires a projection condition of the projection unit, and determines a position of the imaging center to be moved to the moving unit based on the acquired projection condition. A configuration may be used.
According to another aspect of the present invention, in the projector, the control unit is configured to initially determine a direction in which the moving unit moves the imaging center based on the acquired projection condition. Also good.
According to another aspect of the present invention, there is provided a projector that projects a pattern image on a projection surface, an imaging unit that captures an area including at least a part of the projection surface, and an imaging center of the imaging unit. An evaluation value detecting unit that detects an evaluation value that is a value representing a ratio of the pattern image to a captured image captured by the imaging unit, and the evaluation value detected by the evaluation value detecting unit includes: A control unit that repeatedly moves the imaging center to some or all of a plurality of movable positions until a predetermined condition is satisfied, and controls the moving unit so that the evaluation value satisfies the predetermined condition; A projector that performs processing based on the captured image captured in a state where the evaluation value of the pattern image satisfies the predetermined condition.
According to another aspect of the present invention, there is provided a projector, the projection unit that projects a projection image on a projection surface, the imaging unit that captures an area including at least a part of the projection surface, and the imaging center of the imaging unit. And when the projection unit is projecting a pattern image including a plurality of predetermined figures, the imaging unit captures a captured image while moving the imaging center by the moving unit, and A control unit that controls the moving unit so that the number of figures included in the captured image satisfies a predetermined condition, and performs processing based on the captured image captured in a state that satisfies the predetermined condition It is.
According to another aspect of the present invention, there is provided a projector, the projection unit that projects a projection image on a projection surface, the imaging unit that captures an area including at least a part of the projection surface, and the imaging center of the imaging unit. A moving unit that moves the imaging center while moving the imaging center by the moving unit, and controls the moving unit so that a ratio of the projected image in the captured image satisfies a predetermined condition. And a control unit that determines by pattern matching whether or not the ratio of the projected image satisfies the predetermined condition, and performs processing based on the captured image captured in a state that satisfies the predetermined condition. It is a projector.
According to another aspect of the present invention, there is provided a projector, the projection unit that projects a projection image on a projection surface, a plurality of imaging units that capture an area including at least a part of the projection surface, and the imaging unit. A moving unit that moves the imaging center; and the moving unit that causes the imaging unit to capture a captured image while moving the imaging center by the moving unit, and that a ratio of the projected image in the captured image satisfies a predetermined condition. And a control unit that selects the imaging unit used for imaging based on the ratio of the projected image, and the captured image captured by the selected imaging unit in a state satisfying the predetermined condition This is a projector that performs processing based on the above.
According to another aspect of the present invention, a pattern image is projected on a projection plane by a projection unit, an area including at least a part of the projection plane is captured by an imaging unit, and the imaging center of the imaging unit is moved by a moving unit. And detecting an evaluation value that is a value representing a ratio of the pattern image in a captured image captured by the imaging unit, and repeatedly measuring the plurality of positions that can move the imaging center until the evaluation value satisfies a predetermined condition. part or moved to each of all, the evaluation value controls the moving part to the predetermined condition is satisfied, the imaging said evaluation value of said path terpolymer down image is captured at the predetermined condition is satisfied condition A control method that performs processing based on an image.
According to another aspect of the present invention, a projection image is projected onto a projection plane by a projection unit, an area including at least a part of the projection plane is captured by an imaging unit, and an imaging center of the imaging unit is moved by a moving unit. Then, when the projection unit is projecting a pattern image including a plurality of predetermined figures, the image pickup unit picks up a picked-up image while moving the image pickup center by the moving unit, and the image included in the picked-up image In the control method, the moving unit is controlled so that the number of figures satisfies a predetermined condition, and processing is performed based on the captured image captured in a state where the predetermined condition is satisfied.
According to another aspect of the present invention, a projection image is projected onto a projection plane by a projection unit, an area including at least a part of the projection plane is captured by an imaging unit, and an imaging center of the imaging unit is moved by a moving unit. The moving unit controls the moving unit so that the imaged unit captures a captured image while moving the imaging center, and the ratio of the projected image in the captured image satisfies a predetermined condition. In the control method, it is determined by pattern matching whether or not the ratio satisfies the predetermined condition, and processing is performed based on the captured image captured in a state satisfying the predetermined condition.
According to another aspect of the present invention, a projection image is projected onto a projection plane by a projection unit, a region including at least a part of the projection plane is captured by a plurality of imaging units, and an imaging center of the imaging unit is moved. And moving the imaging center while moving the imaging center by the moving unit, and controlling the moving unit so that a ratio of the projected image in the captured image satisfies a predetermined condition. In the control method, the imaging unit used for imaging is selected based on the ratio of the projected image, and processing is performed based on the captured image captured by the selected imaging unit in a state where the predetermined condition is satisfied. .

以上により、プロジェクター、及び制御方法は、投写面に投写画像を投写し、移動部により撮像中心を移動させながら撮像部に投写面の少なくとも一部を含む撮像画像を撮像させ、撮像画像に占める投写画像の割合が所定条件を満たすように移動部を制御し、撮像画像に占める投写画像の割合が所定条件を満たす状態で撮像された撮像画像に基づいて処理を行う。これにより、プロジェクター、及び制御方法は、投写画像の状態に応じて適した画像に基づく処理を行うことができる。   As described above, the projector and the control method project a projected image on the projection surface, cause the imaging unit to capture a captured image including at least a part of the projection surface while moving the imaging center by the moving unit, and occupy the projected image. The moving unit is controlled so that the ratio of the image satisfies the predetermined condition, and processing is performed based on the captured image captured in a state where the ratio of the projected image in the captured image satisfies the predetermined condition. Thereby, the projector and the control method can perform processing based on an image suitable for the state of the projected image.

第１実施形態の例１に係るプロジェクター１の使用状況の一例を示す図である。It is a figure which shows an example of the usage condition of the projector 1 which concerns on Example 1 of 1st Embodiment. 移動機構により撮像部１０が移動する様子の一例を示す図である。It is a figure which shows an example of a mode that the imaging part 10 moves by a moving mechanism. スクリーンＳＣ上において投写画像Ｐ１が撮像可能領域ＣＡからはみ出している様子の一例を示す図である。It is a figure which shows an example of a mode that the projection image P1 protrudes from the imaging possible area | region CA on the screen SC. 第１実施形態の例１に係るプロジェクター１の構成例を示す図である。It is a figure which shows the structural example of the projector 1 which concerns on Example 1 of 1st Embodiment. 制御部１６が行う撮像位置設定処理の流れの一例を示すフローチャートである。6 is a flowchart illustrating an example of a flow of an imaging position setting process performed by a control unit. 所定条件のバリエーションの一例において制御部１６が行う評価値反復検出処理の流れの一例を示すフローチャートである。It is a flowchart which shows an example of the flow of the evaluation value repetition detection process which the control part 16 performs in an example of the variation of predetermined conditions. 所定条件のバリエーションの他の例において制御部１６が行う評価値反復検出処理の流れの一例を示すフローチャートである。It is a flowchart which shows an example of the flow of the evaluation value repetition detection process which the control part 16 performs in the other example of the variation of predetermined conditions. 所定条件のバリエーションの更に他の例において制御部１６が行う評価値反復検出処理の流れの一例を示すフローチャートである。It is a flowchart which shows an example of the flow of the evaluation value repetition detection process which the control part 16 performs in the further another example of the predetermined condition. 第１実施形態の例２に係るプロジェクター１の構成例を示す図である。It is a figure which shows the structural example of the projector 1 which concerns on Example 2 of 1st Embodiment. 制御部１６ａが所定選択条件を満たす撮像部１０を用いて行う評価値反復検出処理の流れの一例を示す図である。It is a figure which shows an example of the flow of the evaluation value iterative detection process which the control part 16a performs using the imaging part 10 which satisfy | fills predetermined selection conditions. 撮像レンズＬ１と撮像素子Ｓ１の相対的な位置関係と、撮像素子Ｓ１により撮像された撮像画像とを例示する図である。It is a figure which illustrates the relative positional relationship of imaging lens L1 and image sensor S1, and the picked-up image imaged by image sensor S1. 撮像レンズＬ１と撮像素子Ｓ１の相対的な位置関係と、撮像素子Ｓ１により撮像された撮像画像との他の例を示す図である。It is a figure which shows the other example of the relative positional relationship of the imaging lens L1 and image pick-up element S1, and the picked-up image imaged by image pick-up element S1. 撮像レンズＬ１の光軸Ｃ３と撮像素子Ｓ１の中心軸Ｃ４が一致していない場合における撮像レンズＬ１と撮像素子Ｓ１との相対的な位置関係の一例を示す図である。It is a figure which shows an example of the relative positional relationship of the imaging lens L1 and image pick-up element S1 in case the optical axis C3 of image pick-up lens L1 and the center axis C4 of image pick-up element S1 do not correspond. 撮像レンズＬ１の光軸Ｃ３と撮像素子Ｓ１の中心軸Ｃ４を一致させず、且つ撮像レンズＬ１を部材ＧＬとともに撮像素子Ｓ１の中心軸Ｃ４の周りで回転させることができる構成の一例を示す図である。FIG. 6 is a diagram illustrating an example of a configuration in which the optical axis C3 of the imaging lens L1 and the central axis C4 of the imaging element S1 are not aligned and the imaging lens L1 can be rotated around the central axis C4 of the imaging element S1 together with the member GL. is there. 撮像レンズＬ１の光軸Ｃ３と撮像素子Ｓ１の中心軸Ｃ４を一致させず、且つ撮像レンズＬ１を部材ＧＬとともに撮像素子Ｓ１の中心軸Ｃ４の周りで回転させることができる構成の他の例を示す図である。Another example of a configuration in which the optical axis C3 of the imaging lens L1 and the central axis C4 of the imaging device S1 are not aligned and the imaging lens L1 can be rotated around the central axis C4 of the imaging device S1 together with the member GL is shown. FIG. 撮像レンズＬ１の光軸Ｃ３と撮像素子Ｓ１の中心軸Ｃ４を一致させず、且つ撮像レンズＬ１を部材ＧＬとともに撮像素子Ｓ１の中心軸Ｃ４の周りで回転させることができる構成の更に他の例を示す図である。Still another example of a configuration in which the optical axis C3 of the imaging lens L1 and the central axis C4 of the imaging device S1 are not aligned and the imaging lens L1 can be rotated around the central axis C4 of the imaging device S1 together with the member GL. FIG. 撮像レンズＬ１を撮像素子Ｓ１ととともに回転させることにより撮像中心が移動する構成の他の例を示す図である。It is a figure which shows the other example of a structure to which an imaging center moves by rotating the imaging lens L1 with image pick-up element S1. 第１実施形態の例３−１、例３−２に係るプロジェクター１が備える制御部１６が行う撮像位置設定処理の流れの一例を示すフローチャートである。6 is a flowchart illustrating an example of a flow of an imaging position setting process performed by a control unit 16 included in the projector 1 according to Example 3-1 and Example 3-2 of the first embodiment. 第１実施形態の例３−１、例３−２に係るプロジェクター１が備える制御部１６が行う撮像位置設定処理の流れの他の例を示すフローチャートである。12 is a flowchart illustrating another example of the flow of an imaging position setting process performed by the control unit 16 included in the projector 1 according to Example 3-1 and Example 3-2 of the first embodiment. 第２実施形態に係るプロジェクター１の構成例を示す図である。It is a figure which shows the structural example of the projector 1 which concerns on 2nd Embodiment. 第２実施形態に係るプロジェクター１により投写画像が投写されたスクリーンＳＣの一例を示す図である。It is a figure which shows an example of the screen SC with which the projection image was projected by the projector 1 which concerns on 2nd Embodiment. 制御部１６ｃが第２撮像部を選択する処理の流れの一例を示すフローチャートである。It is a flowchart which shows an example of the flow of a process in which the control part 16c selects a 2nd imaging part. 第３実施形態に係るプロジェクター１により投写画像Ｐ２が投写されているスクリーンＳＣの一例を示す図である。It is a figure which shows an example of the screen SC where the projection image P2 is projected by the projector 1 which concerns on 3rd Embodiment. 撮像部１００により撮像された撮像画像Ｐ３の一例を示す図である。3 is a diagram illustrating an example of a captured image P3 captured by the imaging unit 100. FIG. プロジェクター１が取得する処理領域画像の一例を示す図である。It is a figure which shows an example of the process area image which the projector 1 acquires. 第３実施形態に係るプロジェクター１の構成例を示す図である。It is a figure which shows the structural example of the projector 1 which concerns on 3rd Embodiment. 制御部１６ｄが処理領域画像を取得する処理の流れの一例を示すフローチャートである。It is a flowchart which shows an example of the flow of a process in which the control part 16d acquires a process area image. レンズシフト機能を有するプロジェクターＸが使用される様子の一例を示す図である。It is a figure which shows an example of a mode that the projector X which has a lens shift function is used. 投写可能領域ＰＡＸを含む領域の全体を撮像可能な広角レンズを備えた撮像部Ｘ１０により撮像された撮像画像ＣＰの一例を示す図である。It is a figure which shows an example of picked-up image CP imaged by the imaging part X10 provided with the wide angle lens which can image the whole area | region including the projectable area | region PAX.

＜第１実施形態＞
以下、本発明の第１実施形態について、図面を参照して説明する。第１実施形態に係るプロジェクター１は、撮像部を備える。プロジェクター１は、後述する撮像中心を移動させることにより、当該撮像部により撮像可能な領域を移動させる。第１実施形態では、この撮像中心を移動させる方法について、いくつかの例を説明する。 <First Embodiment>
Hereinafter, a first embodiment of the present invention will be described with reference to the drawings. The projector 1 according to the first embodiment includes an imaging unit. The projector 1 moves an area that can be imaged by the imaging unit by moving an imaging center described later. In the first embodiment, several examples of the method for moving the imaging center will be described.

＜第１実施形態の例１＞
図１は、第１実施形態の例１に係るプロジェクター１の使用状況の一例を示す図である。第１実施形態の例１では、プロジェクター１が１台の撮像部１０を備える場合について説明する。この一例におけるプロジェクター１は、図１に示すようにテーブルＴＢ上に設置される。なお、プロジェクター１は、テーブルＴＢに代えて、天井や床面、壁面等のプロジェクター１を設置可能な他の場所に設置されてもよい。 <Example 1 of the first embodiment>
FIG. 1 is a diagram illustrating an example of a usage state of the projector 1 according to Example 1 of the first embodiment. In Example 1 of the first embodiment, a case where the projector 1 includes one imaging unit 10 will be described. The projector 1 in this example is installed on a table TB as shown in FIG. The projector 1 may be installed in another place where the projector 1 can be installed, such as a ceiling, a floor, or a wall surface, instead of the table TB.

プロジェクター１は、投写レンズから投写画像を投写する。また、プロジェクター１は、スクリーンＳＣに投写画像を投写する。スクリーンＳＣは、プロジェクター１が投写画像を投写するために用いられる。なお、プロジェクター１は、投写画像をスクリーンＳＣに投写する構成に代えて、壁面や床面、テーブルの面上等の他の面に投写画像を投写する構成であってもよい。また、プロジェクター１は、凹凸を有する物体の表面に投写画像を投写する構成であってもよい。   The projector 1 projects a projection image from the projection lens. Further, the projector 1 projects a projected image on the screen SC. The screen SC is used for the projector 1 to project a projected image. Note that the projector 1 may be configured to project a projection image on another surface such as a wall surface, a floor surface, or a table surface, instead of the configuration for projecting the projection image onto the screen SC. Further, the projector 1 may be configured to project a projected image on the surface of an object having irregularities.

また、プロジェクター１は、レンズシフト機能を有する。レンズシフト機能とは、プロジェクター１が投写画像を投写するために備えるレンズを光軸に垂直な方向に移動する機能である。以下では、説明の便宜上、プロジェクター１が投写画像を投写するために備えるレンズを、投写レンズと称して説明する。投写レンズを移動するとは、この一例において、投写レンズの中心の位置を変更することを示す。   The projector 1 has a lens shift function. The lens shift function is a function of moving a lens provided for the projector 1 to project a projected image in a direction perpendicular to the optical axis. Hereinafter, for convenience of description, a lens provided for the projector 1 to project a projected image will be referred to as a projection lens. In this example, moving the projection lens means changing the position of the center of the projection lens.

投写レンズが移動すると、プロジェクター１が投写レンズから投写した投写画像の位置がずれる。すなわち、プロジェクター１は、ユーザーから受け付けた操作に基づいてレンズシフト機能により投写レンズを移動し、その結果として、スクリーンＳＣに投写した投写画像の位置をずらす。この一例において、何らかの画像Ｚの位置とは、画像Ｚの中心の位置を示す。例えば、投写画像の位置とは、投写画像の中心の位置を示す。なお、画像Ｚの位置は、これに代えて、画像Ｚ内の他の位置であってもよい。   When the projection lens moves, the position of the projected image projected by the projector 1 from the projection lens is shifted. That is, the projector 1 moves the projection lens by the lens shift function based on the operation received from the user, and as a result, shifts the position of the projection image projected on the screen SC. In this example, the position of some image Z indicates the position of the center of the image Z. For example, the position of the projected image indicates the position of the center of the projected image. Note that the position of the image Z may be another position in the image Z instead of this.

以下では、説明の便宜上、プロジェクター１がレンズシフト機能により投写画像を投写することが可能な領域の全体を、投写可能領域ＰＡと称して説明する。   Hereinafter, for convenience of explanation, the entire area in which the projector 1 can project a projected image by the lens shift function will be described as a projectable area PA.

図１において、プロジェクター１は、スクリーンＳＣに投写画像Ｐ１を投写している。また、プロジェクター１は、ユーザーから受け付けた操作に基づいてレンズシフト機能により、投写可能領域ＰＡ内におけるユーザーが所望する位置に投写画像Ｐ１を投写している。なお、投写可能領域ＰＡは、投写面の一例である。   In FIG. 1, the projector 1 projects a projection image P1 on the screen SC. Further, the projector 1 projects the projected image P1 at a position desired by the user in the projectable area PA by a lens shift function based on an operation received from the user. The projectable area PA is an example of a projection surface.

また、プロジェクター１は、この一例において、１台の撮像部１０を備える。プロジェクター１は、投写可能領域ＰＡの少なくとも一部を含む領域を撮像部１０により撮像する。以下では、説明の便宜上、撮像部１０が撮像可能な当該領域を撮像可能領域ＣＡと称して説明する。   In addition, the projector 1 includes one imaging unit 10 in this example. The projector 1 images an area including at least a part of the projectable area PA by the imaging unit 10. Hereinafter, for convenience of description, the area that can be imaged by the imaging unit 10 will be referred to as an imageable area CA.

撮像部１０は、撮像中心を移動させるための移動機構を備える。撮像中心とは、この一例において、撮像部１０の撮像可能範囲ＣＡの中心を示す。以下では、説明の便宜上、撮像部１０が備えるレンズを撮像レンズと称して説明する。移動機構は、この一例において、撮像部１０の位置や姿勢を変化させることによって撮像中心を移動する。移動機構が撮像中心を移動することにより、撮像可能領域ＣＡが変更される。   The imaging unit 10 includes a moving mechanism for moving the imaging center. In this example, the imaging center indicates the center of the imageable range CA of the imaging unit 10. Hereinafter, for convenience of explanation, the lens included in the imaging unit 10 will be referred to as an imaging lens. In this example, the moving mechanism moves the imaging center by changing the position and orientation of the imaging unit 10. As the moving mechanism moves in the imaging center, the imageable area CA is changed.

なお、撮像部１０の姿勢は、３つの座標軸それぞれの方向によって表され、撮像部１０の位置は、それら座標軸の原点の位置によって表される。この一例において、当該座標軸のうちのＺ軸の方向は、スクリーンＳＣに垂直な方向とする。また、当該座標軸のうちのＸ軸の方向は、当該Ｚ軸に直交する方向であり、例えば、水平方向とする。また、当該座標軸のうちのＹ軸の方向は、当該Ｚ軸及びＸ軸の両方に直交する方向であり、例えば、鉛直方向とする。   Note that the orientation of the imaging unit 10 is represented by the directions of the three coordinate axes, and the position of the imaging unit 10 is represented by the position of the origin of these coordinate axes. In this example, the Z-axis direction among the coordinate axes is a direction perpendicular to the screen SC. Further, the X-axis direction of the coordinate axes is a direction orthogonal to the Z-axis, for example, a horizontal direction. Further, the direction of the Y axis among the coordinate axes is a direction orthogonal to both the Z axis and the X axis, for example, a vertical direction.

本実施形態では、撮像部１０が備える移動機構が、撮像部１０を移動させることによって撮像中心を移動する場合について説明する。撮像部１０を移動させるとは、撮像部１０の位置や姿勢（向き）を変更することを示す。なお、撮像部１０が備える移動機構は、他の方法によって撮像中心を移動させる構成であってもよい。   In the present embodiment, a case will be described in which the moving mechanism included in the imaging unit 10 moves the imaging center by moving the imaging unit 10. Moving the imaging unit 10 indicates changing the position and orientation (orientation) of the imaging unit 10. Note that the moving mechanism provided in the imaging unit 10 may be configured to move the imaging center by another method.

以下では、投写された投写画像がレンズシフト機能等によって撮像可能領域ＣＡから一部又は全部がはみ出している場合において、プロジェクター１が撮像可能領域ＣＡに投写画像の全体が含まれるように撮像可能領域ＣＡを移動する構成及び方法の一例について詳しく説明する。   In the following description, when the projected image is partially or entirely projected from the imageable area CA by the lens shift function or the like, the imageable area where the projector 1 includes the entire projected image is included in the imageable area CA. An example of a configuration and method for moving the CA will be described in detail.

概略的には、プロジェクター１は、投写可能領域ＰＡにパターン画像を投写する。プロジェクター１は、投写したパターン画像を、移動機構１０１により撮像中心を移動しながら撮像部１０により撮像可能領域ＣＡを撮像する。この際、プロジェクター１は、撮像部１０が撮像した撮像画像に占めるパターン画像の割合が所定条件を満たすように移動機構１０１により撮像中心を移動する。そして、プロジェクター１は、例えば、投写可能領域ＰＡに投写画像Ｐ１を投写し、当該割合が所定条件を満たす状態で撮像部１０により撮像された投写画像Ｐ１を含む撮像画像に基づいて処理を行う。   Schematically, the projector 1 projects a pattern image on the projectable area PA. The projector 1 captures the imageable area CA by the imaging unit 10 while moving the imaging center of the projected pattern image by the moving mechanism 101. At this time, the projector 1 moves the imaging center by the moving mechanism 101 so that the ratio of the pattern image to the captured image captured by the imaging unit 10 satisfies the predetermined condition. For example, the projector 1 projects the projection image P1 onto the projectable area PA, and performs processing based on the captured image including the projection image P1 captured by the imaging unit 10 in a state where the ratio satisfies the predetermined condition.

これにより、プロジェクター１は、投写画像Ｐ１の状態に応じて適した撮像画像に基づく処理を行うことができる。なお、投写画像Ｐ１の状態は、投写画像Ｐ１の全体が撮像可能領域ＣＡの内側に含まれている状態と、投写画像Ｐ１の全体が撮像可能領域ＣＡの内側に含まれていない状態のいずれかによって表される。また、適した撮像画像とは、この一例において、投写画像Ｐ１の全体が含まれた撮像画像を示す。また、投写画像Ｐ１の状態に応じて適した画像に基づく処理とは、例えば、画質調整や、スクリーンフィット（枠補正）、自動台形補正、インタラクティブ操作に係る処理等である。インタラクティブ操作に係る処理とは、例えば、撮像画像からの指示体の位置の検出等である。なお、上記の所定条件については、後述する。   Thereby, the projector 1 can perform the process based on the captured image suitable for the state of the projection image P1. The state of the projected image P1 is either a state where the entire projected image P1 is included inside the imageable area CA or a state where the entire projected image P1 is not included inside the imageable area CA. Represented by In addition, in this example, a suitable captured image indicates a captured image including the entire projection image P1. Further, the processing based on the image suitable for the state of the projected image P1 includes, for example, image quality adjustment, screen fit (frame correction), automatic keystone correction, processing related to interactive operation, and the like. The process related to the interactive operation is, for example, detection of the position of the indicator from the captured image. The predetermined condition will be described later.

ここで、パターン画像とは、例えば、ドットパターンが描画された画像を示す。なお、パターン画像は、これに代えて、チェッカーパターン等の図形や模様が所定間隔で繰り返し描画された画像であってもよい。また、パターン画像は、図形や模様が所定間隔で繰り返し描画された画像に代えて、白色画像等の単一色が描画された画像であってもよい。   Here, the pattern image indicates, for example, an image in which a dot pattern is drawn. Instead of this, the pattern image may be an image in which figures and patterns such as a checker pattern are repeatedly drawn at predetermined intervals. The pattern image may be an image in which a single color such as a white image is drawn instead of an image in which figures and patterns are repeatedly drawn at predetermined intervals.

ここで、図２を参照して、移動機構による撮像部１０の移動について説明する。図２は、移動機構により撮像部１０が移動する様子の一例を示す図である。図２に示したように、この一例におけるプロジェクター１には、十字型の穴部が設けられている。なお、当該穴部の形状は、十字型に代えて、円形型や多角形型等の他の形状であってもよい。撮像部１０は、当該穴部の内部から投写可能領域ＰＡの少なくとも一部を含む領域が撮像可能領域ＣＡとなる位置に設けられている。   Here, with reference to FIG. 2, the movement of the imaging part 10 by a moving mechanism is demonstrated. FIG. 2 is a diagram illustrating an example of a state in which the imaging unit 10 is moved by the moving mechanism. As shown in FIG. 2, the projector 1 in this example is provided with a cross-shaped hole. Note that the shape of the hole may be another shape such as a circular shape or a polygonal shape instead of the cross shape. The imaging unit 10 is provided at a position where an area including at least a part of the projectable area PA from the inside of the hole is an imageable area CA.

また、移動機構は、図２に示した矢印が示す方向に撮像部１０を傾けることによって、撮像可能領域ＣＡを移動する。なお、穴部の形状が他の形状であった場合も、移動機構は、穴部の形状に応じた方向に撮像部１０を傾ける。例えば、穴部の形状が円形型であった場合、移動機構は、当該円形型の内部において移動可能なすべての方向に撮像部１０を傾ける。移動機構により撮像部１０が傾いた場合、撮像部１０の傾きに伴って撮像中心が移動するため、図２に示した撮像中心を通る光軸を表す線ＣＬが延びる方向が変化する。すなわち、移動機構は、撮像部１０の向き（姿勢）を変化させることにより撮像中心を移動し、その結果、撮像可能領域ＣＡを移動する。   The moving mechanism moves the imageable area CA by tilting the imaging unit 10 in the direction indicated by the arrow shown in FIG. In addition, also when the shape of a hole part is another shape, a moving mechanism inclines the imaging part 10 to the direction according to the shape of a hole part. For example, when the shape of the hole is a circular shape, the moving mechanism tilts the imaging unit 10 in all directions that can move within the circular shape. When the imaging unit 10 is tilted by the moving mechanism, the imaging center moves in accordance with the tilt of the imaging unit 10, and thus the direction in which the line CL representing the optical axis passing through the imaging center shown in FIG. That is, the moving mechanism moves the imaging center by changing the orientation (posture) of the imaging unit 10, and as a result, moves the imaging area CA.

ここで、図３を参照して、撮像中心が移動することによる撮像可能領域ＣＡの移動について説明する。図３は、スクリーンＳＣ上において投写画像Ｐ１が撮像可能領域ＣＡからはみ出している様子の一例を示す図である。図３において、撮像可能領域ＣＡは、スクリーンＳＣ内における点線で囲まれた領域により表される。また、投写可能領域ＰＡは、スクリーンＳＣ内における実線で囲まれた領域により表される。また、二点鎖線の円Ｃ１は、撮像可能領域ＣＡの中心（撮像中心）の位置を示す。   Here, with reference to FIG. 3, the movement of the imageable area CA due to the movement of the imaging center will be described. FIG. 3 is a diagram illustrating an example of a state in which the projected image P1 protrudes from the imageable area CA on the screen SC. In FIG. 3, the imageable area CA is represented by an area surrounded by a dotted line in the screen SC. Further, the projectable area PA is represented by an area surrounded by a solid line in the screen SC. A two-dot chain circle C1 indicates the position of the center (imaging center) of the imageable area CA.

図３に示したように、投写画像Ｐ１が撮像可能領域ＣＡからはみ出している場合、プロジェクター１は、撮像可能領域ＣＡの内側に投写画像Ｐ１の全体が含まれる状態になるまで移動機構によって撮像部１０の撮像中心を移動する。例えば、プロジェクター１は、撮像可能領域ＣＡを、図３に示した二点鎖線で囲まれた領域ＣＡ１まで移動する。以下では、説明の便宜上、領域ＣＡ１を撮像中心移動後の撮像可能領域ＣＡ１と称して説明する。   As shown in FIG. 3, when the projected image P1 protrudes from the imageable area CA, the projector 1 uses the moving mechanism until the entire projected image P1 is included inside the imageable area CA. 10 imaging centers are moved. For example, the projector 1 moves the imageable area CA to an area CA1 surrounded by a two-dot chain line shown in FIG. Hereinafter, for convenience of explanation, the area CA1 will be referred to as an imageable area CA1 after moving the imaging center.

すなわち、プロジェクター１は、撮像中心を移動することにより、撮像可能領域ＣＡの位置を、撮像中心移動後の撮像可能領域ＣＡ１の位置まで移動する。なお、二点鎖線の円Ｃ２は、撮像中心移動後の撮像可能領域ＣＡ１の中心（撮像中心）の位置を示す。これにより、プロジェクター１は、投写画像Ｐ１を撮像中心移動後の撮像可能領域ＣＡ１の内側に含めることができ、その結果、投写画像Ｐ１の全体を撮像部１０により撮像することができる。   That is, the projector 1 moves the position of the imageable area CA to the position of the imageable area CA1 after the movement of the image pickup center by moving the image pickup center. A two-dot chain line circle C2 indicates the position of the center (imaging center) of the imageable area CA1 after moving the imaging center. Thereby, the projector 1 can include the projection image P1 inside the imageable area CA1 after moving the imaging center, and as a result, the entire projection image P1 can be imaged by the imaging unit 10.

次に、図４を参照して、第１実施形態の例１に係るプロジェクター１の構成について説明する。図４は、第１実施形態の例１に係るプロジェクター１の構成例を示す図である。プロジェクター１は、撮像部１０と、記憶部１２と、入力受付部１３と、制御部１６と、光源制御部１７と、光源１８と、光変調装置１９と、レンズ部２０と、画像入力部２１と、画像処理部２２と、ＯＳＤ（On Screen Display）処理部２３と、光変調装置駆動部２４と、加速度センサー２５を備える。   Next, the configuration of the projector 1 according to Example 1 of the first embodiment will be described with reference to FIG. FIG. 4 is a diagram illustrating a configuration example of the projector 1 according to Example 1 of the first embodiment. The projector 1 includes an imaging unit 10, a storage unit 12, an input receiving unit 13, a control unit 16, a light source control unit 17, a light source 18, a light modulation device 19, a lens unit 20, and an image input unit 21. An image processing unit 22, an OSD (On Screen Display) processing unit 23, a light modulation device driving unit 24, and an acceleration sensor 25.

撮像部１０は、例えば、集光された光を電気信号に変換する撮像素子であるＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）等を備えたカメラである。また、撮像部１０は、移動機構１０１を内蔵する。
移動機構１０１は、制御部１６からの要求に応じて、撮像部１０を移動することにより、撮像中心を移動する。なお、移動機構１０１は、撮像部１０に内蔵される構成に代えて、撮像部１０の外部に備えられる構成であってもよい。移動機構１０１は、移動部の一例である。
記憶部１２は、例えば、ＲＡＭ（Random Access Memory）やレジスター、ＲＯＭ（Read Only Memory）、あるいは、ＨＤＤ（Hard Disk Drive）やＳＳＤ（Solid State Drive）等を含む。記憶部１２は、プロジェクター１が処理する各種情報やプログラム等を格納する。 The imaging unit 10 is a camera including, for example, a CCD (Charge Coupled Device), a CMOS (Complementary Metal Oxide Semiconductor), or the like, which is an imaging element that converts collected light into an electrical signal. In addition, the imaging unit 10 includes a moving mechanism 101.
The moving mechanism 101 moves the imaging center by moving the imaging unit 10 in response to a request from the control unit 16. Note that the moving mechanism 101 may be configured to be provided outside the imaging unit 10 in place of the configuration built in the imaging unit 10. The moving mechanism 101 is an example of a moving unit.
The storage unit 12 includes, for example, a RAM (Random Access Memory), a register, a ROM (Read Only Memory), an HDD (Hard Disk Drive), an SSD (Solid State Drive), or the like. The storage unit 12 stores various information, programs, and the like that are processed by the projector 1.

入力受付部１３は、ユーザーからの指示等を受け付ける各種操作ボタンや操作キー、タッチパネル等である。なお、入力受付部１３は、プロジェクター１に備えられた（内蔵された）ものに限らず、ユーザーからの入力を受け付ける各種操作ボタンや操作キー、タッチパネル等を備えてユーザーから受け付けた入力を表す情報を無線又は有線で送信するリモートコントローラー等であってもよい。その場合、プロジェクター１は、リモートコントローラーから送信された情報を受信する受信部を備えるものとする。   The input reception unit 13 includes various operation buttons, operation keys, a touch panel, and the like that receive instructions from the user. Note that the input receiving unit 13 is not limited to the one provided (built in) in the projector 1 but includes various operation buttons, operation keys, a touch panel, and the like that receive input from the user and represents information received from the user. It may be a remote controller or the like that transmits wirelessly or by wire. In this case, the projector 1 includes a receiving unit that receives information transmitted from the remote controller.

制御部１６は、プロジェクター１の全体を制御する。また、制御部１６は、入力受付部１３から受け付けられたユーザーからの操作に基づいて記憶部１２から画像を読み込み、読み込んだ画像を投写画像として画像処理部２２に出力する。また、制御部１６は、入力受付部１３から受け付けられたユーザーからの操作に基づいて、投写画像に重畳するメニュー画像やメッセージ画像等のＯＳＤ画像を投写画像に重畳させた画像情報を生成させる。また、制御部１６は、撮像部１０が撮像した撮像画像を撮像部１０から取得する。   The control unit 16 controls the entire projector 1. In addition, the control unit 16 reads an image from the storage unit 12 based on an operation from the user received from the input reception unit 13 and outputs the read image to the image processing unit 22 as a projection image. Further, the control unit 16 generates image information in which an OSD image such as a menu image or a message image to be superimposed on the projection image is superimposed on the projection image based on a user operation received from the input reception unit 13. In addition, the control unit 16 acquires a captured image captured by the imaging unit 10 from the imaging unit 10.

また、制御部１６は、撮像制御部１６１と、撮像中心移動制御部１６３と、評価値検出部１６５と、判定部１６７を備える。制御部１６が備える機能部のうち一部又は全部は、図示しないＦＰＧＡ（Field-Programmable Gate Array）を用いて構成されているが、これに代えて、図示しないＣＰＵ（Central Processing Unit）が制御部１６により記憶される各種プログラムを読み込み、読み込んだプログラムを実行することで構成されてもよい。また、制御部１６が備える機能部のうち一部又は全部は、ＬＳＩ（Large Scale Integration）やＡＳＩＣ（Application Specific Integrated Circuit）等のハードウェア機能部であってもよい。   The control unit 16 includes an imaging control unit 161, an imaging center movement control unit 163, an evaluation value detection unit 165, and a determination unit 167. Some or all of the functional units included in the control unit 16 are configured by using a field-programmable gate array (FPGA) (not shown). Instead, a CPU (Central Processing Unit) (not shown) controls the control unit. 16 may be configured by reading various programs stored in 16 and executing the read programs. Also, some or all of the functional units included in the control unit 16 may be hardware functional units such as LSI (Large Scale Integration) and ASIC (Application Specific Integrated Circuit).

制御部１６が備える撮像制御部１６１と、撮像中心移動制御部１６３と、評価値検出部１６５と、判定部１６７は、連携して撮像位置設定処理を行う。
撮像制御部１６１は、撮像部１０に撮像可能領域ＣＡを撮像させる。また、撮像制御部１６１は、プロジェクター１が動いた際の加速度を加速度センサー２５が検出した場合、加速度センサー２５から当該加速度を示す情報を取得する。なお、撮像制御部１６１は、取得した加速度が所定閾値を超えた場合、当該加速度を示す情報を取得したことをトリガーとして撮像部１０に撮像可能領域ＣＡを撮像させるようにしてもよい。この場合、プロジェクター１は、プロジェクター１が動かされたことをトリガーとして例えば、自動台形補正等の処理を行う。 The imaging control unit 161, the imaging center movement control unit 163, the evaluation value detection unit 165, and the determination unit 167 included in the control unit 16 perform an imaging position setting process in cooperation.
The imaging control unit 161 causes the imaging unit 10 to image the imageable area CA. Further, when the acceleration sensor 25 detects the acceleration when the projector 1 moves, the imaging control unit 161 acquires information indicating the acceleration from the acceleration sensor 25. Note that when the acquired acceleration exceeds a predetermined threshold value, the imaging control unit 161 may cause the imaging unit 10 to image the imageable area CA using the acquisition of information indicating the acceleration as a trigger. In this case, the projector 1 performs processing such as automatic keystone correction, for example, using the movement of the projector 1 as a trigger.

撮像中心移動制御部１６３は、移動機構１０１に撮像中心を移動させる。また、撮像中心移動制御部１６３は、移動機構１０１に撮像中心を設定（固定）する。撮像中心を設定するとは、移動機構１０１が撮像中心を移動させないようにすることを示す。   The imaging center movement control unit 163 causes the moving mechanism 101 to move the imaging center. The imaging center movement control unit 163 sets (fixes) the imaging center in the moving mechanism 101. Setting the imaging center indicates that the moving mechanism 101 does not move the imaging center.

評価値検出部１６５は、撮像部１０から取得した撮像画像に基づいて評価値を検出する。評価値とは、撮像画像に占めるパターン画像の割合を表す値である。
判定部１６７は、撮像画像に占めるパターン画像の割合が所定条件を満たすか否かを判定する。 The evaluation value detection unit 165 detects an evaluation value based on the captured image acquired from the imaging unit 10. The evaluation value is a value that represents the ratio of the pattern image to the captured image.
The determination unit 167 determines whether or not the ratio of the pattern image to the captured image satisfies a predetermined condition.

光源制御部１７は、光源１８を発光させる。
光源１８は、例えば、超高圧水銀ランプやメタルハライドランプ等からなる放電型の光源ランプである。光源１８は、さらに、光源ランプが放射した光を光変調装置１９側に反射するリフレクターを含んでいる。なお、光源１８は、光源ランプに限られず、ＬＥＤ（Light Emitting Diode）光源やレーザー光源等を用いてもよい。 The light source control unit 17 causes the light source 18 to emit light.
The light source 18 is, for example, a discharge-type light source lamp composed of an ultrahigh pressure mercury lamp, a metal halide lamp, or the like. The light source 18 further includes a reflector that reflects the light emitted from the light source lamp to the light modulation device 19 side. The light source 18 is not limited to a light source lamp, and an LED (Light Emitting Diode) light source, a laser light source, or the like may be used.

光変調装置１９は、一対の透明基板間に液晶が封入された、光の三原色であるＲＧＢ（Red、Green、Blue）それぞれに対応した透過型の液晶パネルである。なお、光変調装置１９は、透過型の液晶パネルに限らず、反射型の液晶パネルでもよく、又は、液晶に限らず、ＤＭＤ（Digital Mirror Device）等であってもよい。
レンズ部２０は、液晶ライトバルブ１４から入射した画像を映し出す光を、スクリーンＳＣ等に拡大投写するための投写光学系としてのレンズを含む。レンズ部２０に含まれる当該レンズは、上述の投写レンズを示す。 The light modulation device 19 is a transmissive liquid crystal panel corresponding to each of RGB (Red, Green, Blue), which are three primary colors of light, in which liquid crystal is sealed between a pair of transparent substrates. The light modulation device 19 is not limited to a transmissive liquid crystal panel, but may be a reflective liquid crystal panel, or may be a liquid crystal panel (DMD) or the like.
The lens unit 20 includes a lens as a projection optical system for enlarging and projecting light that projects an image incident from the liquid crystal light valve 14 onto the screen SC or the like. The said lens contained in the lens part 20 shows the above-mentioned projection lens.

画像入力部２１は、各種画像再生装置から接続されるケーブルの各規格に対応した複数の画像入力端子を含み、画像入力端子から入力された画像情報を画像処理部２２に出力する。
画像処理部２２は、画像入力部２１から入力された画像情報を、ＲＧＢ毎に、光変調装置１９の各画素の階調を表す画像情報に変換する。そして、画像処理部２２は、変換した画像情報を、ＯＳＤ処理部２３に出力する。 The image input unit 21 includes a plurality of image input terminals corresponding to the standards of cables connected from various image reproduction apparatuses, and outputs image information input from the image input terminals to the image processing unit 22.
The image processing unit 22 converts the image information input from the image input unit 21 into image information representing the gradation of each pixel of the light modulation device 19 for each RGB. Then, the image processing unit 22 outputs the converted image information to the OSD processing unit 23.

ＯＳＤ処理部２３は、制御部１６からの要求があった場合に、画像処理部２２から入力される画像情報に、メニュー画像やメッセージ画像等のＯＳＤ画像を重畳して表示するための処理を行う。ＯＳＤ処理部２３は、図示しないＯＳＤメモリーを備えており、ＯＳＤ画像を生成するための図形やフォント等を表すＯＳＤ画像情報を記憶している。ＯＳＤ処理部２３は、ＯＳＤ画像を重畳した画像情報を、光変調装置駆動部２４に出力し、レンズ部２０からスクリーンＳＣに投写させる。   The OSD processing unit 23 performs processing for superimposing and displaying an OSD image such as a menu image or a message image on the image information input from the image processing unit 22 when there is a request from the control unit 16. . The OSD processing unit 23 includes an OSD memory (not shown), and stores OSD image information representing graphics, fonts, and the like for generating an OSD image. The OSD processing unit 23 outputs the image information on which the OSD image is superimposed to the light modulation device driving unit 24 and causes the lens unit 20 to project the image information onto the screen SC.

光変調装置駆動部２４は、ＯＳＤ処理部２３から入力される画像情報に応じた駆動電圧を、光変調装置１９の各画素に印加（駆動）する。この印加によって、光変調装置駆動部２４は、光源１８から光変調装置１９へ入射した光を、画像情報に応じた画像を映し出す光として、光変調装置１９に形成させる。
加速度センサー２５は、プロジェクター１が動いた際に発生する加速度を検出する。加速度センサー２５は、当該加速度を検出した場合、当該加速度を示す情報を撮像制御部１６１に出力する。 The light modulation device drive unit 24 applies (drives) a drive voltage corresponding to the image information input from the OSD processing unit 23 to each pixel of the light modulation device 19. By this application, the light modulation device driving unit 24 causes the light modulation device 19 to form the light incident on the light modulation device 19 from the light source 18 as light that displays an image according to the image information.
The acceleration sensor 25 detects the acceleration that occurs when the projector 1 moves. When the acceleration sensor 25 detects the acceleration, the acceleration sensor 25 outputs information indicating the acceleration to the imaging control unit 161.

次に、図５を参照して、制御部１６が行う撮像位置設定処理について説明する。図５は、制御部１６が行う撮像位置設定処理の流れの一例を示すフローチャートである。
まず、プロジェクター１は、入力受付部１３から受け付けられたユーザーからの操作に基づいて、スクリーンＳＣ上の投写可能領域ＰＡ内のユーザーが所望する位置にパターン画像を投写する（ステップＳ１００）。以下では、ユーザーが所望する位置に投写されたパターン画像が、ステップＳ１００の時点における撮像可能領域ＣＡからはみ出ている場合について説明する。 Next, the imaging position setting process performed by the control unit 16 will be described with reference to FIG. FIG. 5 is a flowchart illustrating an example of the flow of the imaging position setting process performed by the control unit 16.
First, the projector 1 projects a pattern image at a position desired by the user in the projectable area PA on the screen SC based on an operation from the user received from the input receiving unit 13 (step S100). Hereinafter, a case where the pattern image projected at a position desired by the user protrudes from the imageable area CA at the time of step S100 will be described.

次に、撮像制御部１６１は、撮像部１０に撮像可能領域ＣＡを撮像させる（ステップＳ１１０）。そして、制御部１６は、撮像部１０から撮像画像を取得する。次に、判定部１６７は、ステップＳ１１０において撮像部１０から取得した撮像画像にパターン画像の少なくとも一部が撮像されているか否かを判定する（ステップＳ１２０）。なお、判定部１６７は、パターンマッチングによってこの判定を行うとするが、これに代えて、他の手法によってこの判定を行う構成であってもよい。   Next, the imaging control unit 161 causes the imaging unit 10 to capture an imageable area CA (step S110). Then, the control unit 16 acquires a captured image from the imaging unit 10. Next, the determination unit 167 determines whether or not at least a part of the pattern image is captured in the captured image acquired from the imaging unit 10 in Step S110 (Step S120). In addition, although the determination part 167 performs this determination by pattern matching, it may replace with this and the structure which performs this determination by another method may be sufficient.

撮像画像にパターン画像の少なくとも一部が撮像されていないと判定部１６７が判定した場合（ステップＳ１２０−Ｎｏ）、撮像中心移動制御部１６３は、移動機構１０１により撮像中心を所定方向に所定移動量だけ移動させる（ステップＳ１３０）。その後、撮像制御部１６１は、ステップＳ１１０に遷移して再び撮像可能領域ＣＡを撮像部１０に撮像させる。   When the determination unit 167 determines that at least a part of the pattern image is not captured in the captured image (step S120—No), the imaging center movement control unit 163 uses the movement mechanism 101 to move the imaging center in a predetermined direction by a predetermined amount of movement. (Step S130). Thereafter, the imaging control unit 161 makes a transition to Step S110 and causes the imaging unit 10 to capture the imageable area CA again.

所定方向は、例えば、スクリーンＳＣに向かって右方向であるが、これに代えて、左方向であってもよく、上方向であってもよく、下方向であってもよい。このようなステップＳ１１０からステップＳ１３０までの処理は、撮像画像にパターン画像が撮像されていない場合に、撮像可能領域ＣＡにパターン画像の少なくとも一部が含まれるように撮像中心を移動させる処理である。   The predetermined direction is, for example, the right direction toward the screen SC, but may instead be the left direction, the upper direction, or the lower direction. Such processing from step S110 to step S130 is processing for moving the imaging center so that at least part of the pattern image is included in the imageable area CA when the pattern image is not captured in the captured image. .

従って、撮像中心移動制御部１６３は、移動機構１０１により撮像中心を所定方向の移動可能な限界点にまで移動させてもパターン画像の一部が撮像されない場合、移動機構１０１により撮像中心を所定方向とは異なる他の方向に移動させる。このような移動と撮像を繰り返すことにより、制御部１６は、撮像画像にパターン画像の一部が撮像されるまで撮像中心を移動させる。   Accordingly, if a part of the pattern image is not captured even when the moving center 101 moves the imaging center to a limit point that can move in a predetermined direction, the imaging center movement control unit 163 sets the imaging center in the predetermined direction. Move in a different direction. By repeating such movement and imaging, the control unit 16 moves the imaging center until a part of the pattern image is captured in the captured image.

一方、撮像画像にパターン画像の少なくとも一部が撮像されていると判定部１６７が判定した場合（ステップＳ１２０−Ｙｅｓ）、制御部１６は、ステップＳ１４０からステップＳ１７０までの処理によって、評価値検出部１６５が検出する評価値が所定条件を満たすまで、繰り返し撮像中心を移動可能な複数の位置の一部又は全部のそれぞれに移動させる。制御部１６は、移動させた当該複数の位置毎に撮像可能領域ＣＡを撮像部１０に撮像させる。そして、制御部１６は、撮像部１０が撮像した撮像画像から評価値を検出する。以下では、説明の便宜上、これらの評価値を繰り返し検出する処理を、評価値反復検出処理と称して説明する。   On the other hand, when the determination unit 167 determines that at least a part of the pattern image is captured in the captured image (step S120—Yes), the control unit 16 performs the evaluation value detection unit by the processing from step S140 to step S170. Until the evaluation value detected by 165 satisfies a predetermined condition, the imaging center is repeatedly moved to some or all of a plurality of movable positions. The control unit 16 causes the imaging unit 10 to image the imageable area CA for each of the plurality of moved positions. Then, the control unit 16 detects an evaluation value from the captured image captured by the imaging unit 10. Hereinafter, for convenience of explanation, the process of repeatedly detecting these evaluation values will be referred to as an evaluation value repetition detection process.

すなわち、所定条件とは、評価値反復検出処理を終了させるための条件である。所定条件は、制御部１６が評価値反復検出処理をどのように行うかによって様々なバリエーションが存在する。そのため、図５では、所定条件についての具体例を挙げず、評価値反復検出処理の全体像を説明する。その後、図６〜図８において、所定条件のバリエーション毎の制御部１６による評価値反復検出処理について説明する。   That is, the predetermined condition is a condition for ending the evaluation value repetition detection process. There are various variations of the predetermined condition depending on how the control unit 16 performs the evaluation value iterative detection process. Therefore, in FIG. 5, a specific example of the predetermined condition will not be given, and an overall image of the evaluation value repetition detection process will be described. Then, the evaluation value repetition detection process by the control part 16 for every variation of a predetermined condition is demonstrated in FIGS.

ステップＳ１２０において、撮像画像にパターン画像の少なくとも一部が撮像されていると判定部１６７が判定した場合、評価値検出部１６５は、ステップＳ１１０において撮像部１０から取得した撮像画像に基づいて評価値を検出する（ステップＳ１４０）。   If the determination unit 167 determines in step S120 that at least a part of the pattern image is captured in the captured image, the evaluation value detection unit 165 evaluates the evaluation value based on the captured image acquired from the imaging unit 10 in step S110. Is detected (step S140).

ここで、評価値検出部１６５による評価値の検出処理について説明する。この一例において、パターン画像にはドットパターンが描画されている。この場合、評価値は、撮像画像に含まれるパターン画像のドットの数である。評価値を検出するため、評価値検出部１６５は、撮像画像に撮像されたパターン画像内に含まれるドットを検出する。また、評価値検出部１６５は、検出したドットの数を評価値として検出する。   Here, the evaluation value detection processing by the evaluation value detection unit 165 will be described. In this example, a dot pattern is drawn on the pattern image. In this case, the evaluation value is the number of dots in the pattern image included in the captured image. In order to detect the evaluation value, the evaluation value detection unit 165 detects dots included in the pattern image captured in the captured image. Further, the evaluation value detection unit 165 detects the number of detected dots as an evaluation value.

なお、撮像画像に含まれるドットの数がゼロの場合、評価値は、撮像画像に占めるパターン画像の割合がゼロであることを表す。また、撮像画像に含まれるドットの数が、パターン画像に描画された全ドット数であった場合、評価値は、撮像画像に占めるパターン画像の割合が１００％であることを表す。すなわち、評価値は、撮像画像に占めるパターン画像の割合を表す指標である。なお、パターン画像が単一色画像の場合、評価値は、例えば、撮像画像に撮像されたパターン画像の画素毎の輝度値や明度、彩度等の合計である。また、評価値検出部１６５は、ドットの数を評価値として検出する構成に代えて、検出したドットの数に基づいて撮像画像に占めるパターン画像の割合を算出する構成であってもよい。   When the number of dots included in the captured image is zero, the evaluation value indicates that the ratio of the pattern image to the captured image is zero. When the number of dots included in the captured image is the total number of dots drawn in the pattern image, the evaluation value indicates that the ratio of the pattern image to the captured image is 100%. That is, the evaluation value is an index that represents the ratio of the pattern image to the captured image. When the pattern image is a single color image, the evaluation value is, for example, the sum of the luminance value, brightness, and saturation for each pixel of the pattern image captured in the captured image. Further, the evaluation value detection unit 165 may be configured to calculate the ratio of the pattern image to the captured image based on the detected number of dots instead of the configuration that detects the number of dots as the evaluation value.

次に、判定部１６７は、ステップＳ１４０において評価値検出部１６５が検出した評価値が所定条件を満たすか否かを判定する（ステップＳ１５０）。評価値が所定条件を満たさないと判定した場合（ステップＳ１５０−Ｎｏ）、撮像中心移動制御部１６３は、移動機構１０１に撮像中心を移動させる（ステップＳ１６０）。以下では、説明の便宜上、撮像中心移動制御部１６３が移動機構１０１に撮像中心を移動させることを、撮像中心移動制御部１６３が撮像中心を移動させると称して説明する。   Next, the determination unit 167 determines whether or not the evaluation value detected by the evaluation value detection unit 165 in step S140 satisfies a predetermined condition (step S150). When it is determined that the evaluation value does not satisfy the predetermined condition (No at Step S150), the imaging center movement control unit 163 moves the imaging center to the moving mechanism 101 (Step S160). Hereinafter, for convenience of explanation, the movement of the imaging center movement control unit 163 by the moving mechanism 101 is referred to as the imaging center movement control unit 163 moving the imaging center.

ここで、撮像中心移動制御部１６３は、ステップＳ１４０において評価値検出部１６５が検出したドットに基づいて、撮像中心を移動させる方向を決定する。例えば、撮像中心移動制御部１６３は、撮像画像の中心から、撮像画像の４つの辺のうち、ドットが接している数が最も多い辺に向かう方向を、撮像中心を移動させる方向として決定する。なお、撮像中心移動制御部１６３は、これに代えて、他の方法によって撮像中心を移動させる方向を決定してもよい。   Here, the imaging center movement control unit 163 determines a direction in which the imaging center is moved based on the dots detected by the evaluation value detection unit 165 in step S140. For example, the imaging center movement control unit 163 determines the direction from the center of the captured image toward the side having the largest number of dots in contact with the four sides of the captured image as the direction for moving the imaging center. Instead of this, the imaging center movement control unit 163 may determine the direction in which the imaging center is moved by another method.

撮像中心移動制御部１６３は、決定した方向に所定距離だけ撮像中心を移動させる。なお、所定距離は、撮像中心移動制御部１６３に予め記憶されているものとする。これにより、撮像中心移動制御部１６３は、撮像可能領域ＣＡから更にパターン画像がはみ出してしまう方向に撮像中心を移動させてしまうことを抑制することができる。なお、ステップＳ１６０において、撮像中心移動制御部１６３は、予め決められた方向に撮像中心を移動させる構成であってもよい。また、ステップＳ１６０において決定された方向に撮像中心を移動させることができる限界位置に達している場合、撮像中心移動制御部１６３は、他の方向に撮像中心を移動させる。   The imaging center movement control unit 163 moves the imaging center by a predetermined distance in the determined direction. It is assumed that the predetermined distance is stored in advance in the imaging center movement control unit 163. Thereby, the imaging center movement control unit 163 can suppress moving the imaging center in a direction in which the pattern image further protrudes from the imageable area CA. In step S160, the imaging center movement control unit 163 may be configured to move the imaging center in a predetermined direction. If the limit position where the imaging center can be moved in the direction determined in step S160 has been reached, the imaging center movement control unit 163 moves the imaging center in another direction.

ステップＳ１６０の処理において撮像中心を移動させた後、撮像制御部１６１は、撮像可能領域ＣＡを撮像部１０に撮像させる（ステップＳ１７０）。そして、制御部１６は、撮像部１０から撮像画像を取得する。ステップＳ１７０における処理の後、評価値検出部１６５は、ステップＳ１４０に遷移し、ステップＳ１７０において撮像部１０から取得した撮像画像に基づいて評価値を再び検出する。 After moving the imaging center in the process of step S160, the imaging control unit 161 causes the imaging unit 10 to image the imageable area CA (step S170 ). Then, the control unit 16 acquires a captured image from the imaging unit 10. After the processing in step S170, the evaluation value detection unit 165 transitions to step S140, and detects the evaluation value again based on the captured image acquired from the imaging unit 10 in step S170.

一方、評価値が所定条件を満たすと判定部１６７が判定した場合（ステップＳ１５０−Ｙｅｓ）、制御部１６は、ステップＳ１４０からステップＳ１７０までの評価値反復検出処理を終了し、ステップＳ１８０に遷移する。評価値が所定条件を満たすと判定部１６７が判定した場合、撮像中心移動制御部１６３は、ステップＳ１４０において評価値検出部１６５が検出した１以上の評価値に基づいて、撮像中心を設定する位置を決定する。そして、撮像中心移動制御部１６３は、決定した位置に撮像中心を設定するように移動機構１０１を制御する（ステップＳ１８０）。撮像中心移動制御部１６３がステップＳ１８０において撮像中心が設定された撮像部１０によって撮像した撮像画像は、すなわち、撮像画像に占めるパターン画像の割合が所定条件を満たす状態で撮像された撮像画像である。   On the other hand, when the determination unit 167 determines that the evaluation value satisfies the predetermined condition (step S150—Yes), the control unit 16 ends the evaluation value iterative detection process from step S140 to step S170, and transitions to step S180. . When the determination unit 167 determines that the evaluation value satisfies the predetermined condition, the imaging center movement control unit 163 sets the imaging center based on one or more evaluation values detected by the evaluation value detection unit 165 in step S140. To decide. Then, the imaging center movement control unit 163 controls the moving mechanism 101 so as to set the imaging center at the determined position (step S180). The captured image captured by the imaging center 10 in which the imaging center movement control unit 163 has set the imaging center in step S180 is a captured image captured in a state where the ratio of the pattern image to the captured image satisfies a predetermined condition. .

ここで、撮像中心移動制御部１６３が撮像中心を設定する位置を決定する処理について説明する。撮像中心移動制御部１６３は、ステップＳ１４０において評価値検出部１６５が検出した１以上の評価値に基づいて、撮像画像に占めるパターン画像の割合が所定値以上となる撮像画像が撮像された撮像中心の位置を特定する。そして、撮像中心移動制御部１６３は、特定した撮像中心の位置を、撮像中心を設定する位置として決定する。所定値は、撮像画像に占めるパターン画像の割合が所定値以上の場合に、パターン画像や投写画像Ｐ１等のプロジェクター１により投写された投写画像の全体が撮像可能領域ＣＡに含まれるように予め決められる。なお、所定値についての具体例は、所定条件のバリエーション毎に異なるため、所定条件と同様に図６〜図８において説明する。   Here, processing for determining a position where the imaging center movement control unit 163 sets the imaging center will be described. Based on the one or more evaluation values detected by the evaluation value detection unit 165 in step S140, the imaging center movement control unit 163 captures an imaging center in which a captured image in which the ratio of the pattern image to the captured image is equal to or greater than a predetermined value is captured. Specify the position of. Then, the imaging center movement control unit 163 determines the position of the specified imaging center as a position for setting the imaging center. The predetermined value is determined in advance such that when the ratio of the pattern image to the captured image is equal to or greater than the predetermined value, the entire projected image projected by the projector 1 such as the pattern image or the projected image P1 is included in the imageable area CA. It is done. A specific example of the predetermined value is different for each variation of the predetermined condition, and will be described with reference to FIGS.

このようにステップＳ１００からステップＳ１８０までの処理によって、プロジェクター１は、評価値反復検出処理により検出された１以上の評価値に基づいて撮像画像に占めるパターン画像の割合が所定条件を満たす状態を実現することができる。当該処理の後、プロジェクター１は、例えば、投写画像Ｐ１をパターン画像に代えて投写する。そして、プロジェクター１は、撮像部１０により撮像可能領域ＣＡを撮像することにより、撮像画像に占める投写画像Ｐ１の割合を、所定条件を満たす状態にすることができる。プロジェクター１は、撮像された投写画像Ｐ１に基づいて、投写画像Ｐ１の状態に応じて適した画像に基づく処理を行うことができる。   As described above, by the processing from step S100 to step S180, the projector 1 realizes a state where the ratio of the pattern image to the captured image satisfies the predetermined condition based on one or more evaluation values detected by the evaluation value repetition detection processing. can do. After the processing, the projector 1 projects, for example, the projection image P1 instead of the pattern image. And the projector 1 can make the ratio of the projection image P1 which occupies for a captured image the state which satisfy | fills predetermined conditions by imaging the imaging area CA by the imaging part 10. FIG. The projector 1 can perform processing based on an image suitable for the state of the projection image P1 based on the captured projection image P1.

次に、図６を参照して、所定条件のバリエーションの一例において制御部１６が行う評価値反復検出処理について説明する。図６は、所定条件のバリエーションの一例において制御部１６が行う評価値反復検出処理の流れの一例を示すフローチャートである。なお、図６におけるステップＳ１００からステップＳ１４０までの処理は、図５に示したステップＳ１００からステップＳ１４０までの処理と同様の処理であるため説明を省略する。また、図６におけるステップＳ１６０からステップＳ１７０までの処理は、図５に示したステップＳ１６０からステップＳ１７０までの処理と同様の処理であるため説明を省略する。   Next, with reference to FIG. 6, the evaluation value repetition detection process performed by the control unit 16 in an example of a variation of the predetermined condition will be described. FIG. 6 is a flowchart illustrating an example of a flow of evaluation value repetition detection processing performed by the control unit 16 in an example of variations of the predetermined condition. Note that the processing from step S100 to step S140 in FIG. 6 is the same as the processing from step S100 to step S140 shown in FIG. Also, the processing from step S160 to step S170 in FIG. 6 is the same as the processing from step S160 to step S170 shown in FIG.

図６に示した例において、所定条件は、ステップＳ１４０において評価値検出部１６５が検出した評価値が所定閾値以上であることである。
すなわち、ステップＳ１４０の処理の後、判定部１６７は、ステップＳ１４０において評価値検出部１６５が検出した評価値が所定閾値以上であるか否かを判定する（ステップＳ２５０）。所定閾値とは、例えば、パターン画像に含まれる全ドット数であるが、これに代えて、当該全ドット数以下であり、１以上の整数である他の整数であってもよい。なお、評価値がドットの数ではなく、例えば、輝度値や明度等であった場合、所定閾値は、評価値が取り得る最大値以下の任意の実数でもよい。また、例えば、評価値が割合であった場合、所定閾値は、１００％以下の任意の割合でもよい。以下では、一例として、所定閾値が評価値の取り得る最大値である場合について説明する。この場合、プロジェクター１は、評価値反復検出処理により検出された１以上の評価値に基づいて、パターン画像の全体を撮像可能領域ＣＡの内側に含めることができる。 In the example shown in FIG. 6, the predetermined condition is that the evaluation value detected by the evaluation value detection unit 165 in step S140 is equal to or greater than a predetermined threshold.
That is, after the process of step S140, the determination unit 167 determines whether or not the evaluation value detected by the evaluation value detection unit 165 in step S140 is equal to or greater than a predetermined threshold (step S250). The predetermined threshold is, for example, the total number of dots included in the pattern image, but may instead be another whole number that is equal to or smaller than the total number of dots and is an integer of 1 or more. Note that when the evaluation value is not the number of dots but, for example, a luminance value, brightness, or the like, the predetermined threshold value may be an arbitrary real number equal to or less than the maximum value that the evaluation value can take. For example, when the evaluation value is a ratio, the predetermined threshold may be an arbitrary ratio of 100% or less. Hereinafter, as an example, a case where the predetermined threshold is the maximum value that the evaluation value can take will be described. In this case, the projector 1 can include the entire pattern image inside the imageable area CA based on one or more evaluation values detected by the evaluation value iterative detection process.

評価値が所定閾値以上ではないと判定部１６７が判定した場合（ステップＳ２５０−Ｎｏ）、撮像中心移動制御部１６３は、ステップＳ１６０に遷移し、移動機構１０１に撮像中心を移動させる。一方、評価値が所定閾値以上であると判定部１６７が判定した場合（ステップＳ２５０−Ｙｅｓ）、撮像中心移動制御部１６３は、現在の撮像中心の位置を、撮像画像に占めるパターン画像の割合が所定値以上となる撮像画像が撮像された撮像中心の位置として特定する。撮像中心移動制御部１６３は、特定した撮像中心の位置を、撮像中心を設定する位置として決定し、決定した位置に撮像中心を設定する（ステップＳ２８０）。   When the determination unit 167 determines that the evaluation value is not equal to or greater than the predetermined threshold value (step S250—No), the imaging center movement control unit 163 proceeds to step S160, and causes the moving mechanism 101 to move the imaging center. On the other hand, when the determination unit 167 determines that the evaluation value is equal to or greater than the predetermined threshold (step S250—Yes), the imaging center movement control unit 163 uses the current position of the imaging center as a ratio of the pattern image to the captured image. It is specified as the position of the imaging center where the captured image that is equal to or greater than the predetermined value is captured. The imaging center movement control unit 163 determines the position of the identified imaging center as a position for setting the imaging center, and sets the imaging center at the determined position (step S280).

なお、図６に示した例では、撮像中心移動制御部１６３がステップＳ１４０において評価値検出部１６５が検出した１以上の評価値に基づいて、撮像画像に占めるパターン画像の割合が所定値以上であるか否かを判定していない。これは、判定部１６７がステップＳ２５０においてすでに同様の判定を行っているためである。すなわち、図６に示した例において、当該所定値とは、ステップＳ２５０における判定に用いられた所定閾値を示す。   In the example illustrated in FIG. 6, the ratio of the pattern image to the captured image is greater than or equal to a predetermined value based on the one or more evaluation values detected by the evaluation value detection unit 165 in step S <b> 140 by the imaging center movement control unit 163. It is not determined whether or not there is. This is because the determination unit 167 has already performed the same determination in step S250. That is, in the example shown in FIG. 6, the predetermined value indicates the predetermined threshold value used for the determination in step S250.

次に、図７を参照して、所定条件のバリエーションの他の例において制御部１６が行う評価値反復検出処理について説明する。図７は、所定条件のバリエーションの他の例において制御部１６が行う評価値反復検出処理の流れの一例を示すフローチャートである。なお、図７におけるステップＳ１００からステップＳ１４０までの処理は、図５に示したステップＳ１００からステップＳ１４０までの処理と同様の処理であるため説明を省略する。また、図７におけるステップＳ１６０からステップＳ１７０までの処理は、図５に示したステップＳ１６０からステップＳ１７０までの処理と同様の処理であるため説明を省略する。   Next, with reference to FIG. 7, the evaluation value iterative detection process performed by the control unit 16 in another example of the predetermined condition variation will be described. FIG. 7 is a flowchart illustrating an example of the evaluation value iteration detection process performed by the control unit 16 in another example of variations of the predetermined condition. Note that the processing from step S100 to step S140 in FIG. 7 is the same as the processing from step S100 to step S140 shown in FIG. Further, the processing from step S160 to step S170 in FIG. 7 is the same as the processing from step S160 to step S170 shown in FIG.

図７に示した例において、所定条件は、ステップＳ１４０において評価値検出部１６５が検出した１以上の評価値の数が、移動機構１０１により撮像中心が移動可能な位置の数と一致することである。換言すると、所定条件は、移動機構１０１により撮像中心が移動可能な全ての位置において撮像部１０が撮像画像を撮像し、撮像された撮像画像に基づいて評価値検出部１６５が評価値を検出したことである。   In the example illustrated in FIG. 7, the predetermined condition is that the number of one or more evaluation values detected by the evaluation value detection unit 165 in step S <b> 140 matches the number of positions at which the imaging center can be moved by the moving mechanism 101. is there. In other words, the predetermined condition is that the imaging unit 10 captures a captured image at every position where the imaging center can be moved by the moving mechanism 101, and the evaluation value detection unit 165 detects the evaluation value based on the captured image. That is.

すなわち、ステップＳ１４０の処理の後、判定部１６７は、ステップＳ１４０において評価値検出部１６５が検出した１以上の評価値の数が、移動機構１０１により撮像中心が移動可能な位置の数と一致するか否かを判定する（ステップＳ３５０）。ステップＳ１４０において評価値検出部１６５が検出した１以上の評価値の数が、移動機構１０１により撮像中心が移動可能な位置の数と一致しないと判定部１６７が判定した場合（ステップＳ３５０−Ｎｏ）、撮像中心移動制御部１６３は、ステップＳ１６０に遷移し、撮像中心を移動させる。   That is, after the process of step S140, the determination unit 167 matches the number of one or more evaluation values detected by the evaluation value detection unit 165 in step S140 with the number of positions where the moving center 101 can move the imaging center. Is determined (step S350). When the determination unit 167 determines that the number of one or more evaluation values detected by the evaluation value detection unit 165 in step S140 does not match the number of positions at which the imaging center can be moved by the moving mechanism 101 (step S350—No) The imaging center movement control unit 163 moves to step S160 and moves the imaging center.

一方、ステップＳ１４０において評価値検出部１６５が検出した１以上の評価値の数が、移動機構１０１により撮像中心が移動可能な位置の数と一致すると判定部１６７が判定した場合（ステップＳ３５０−Ｙｅｓ）、撮像中心移動制御部１６３は、ステップＳ１４０において評価値検出部１６５が検出した１以上の評価値のうち、最も大きな評価値を特定する。撮像中心移動制御部１６３は、特定した評価値が検出された撮像画像を特定する。撮像中心移動制御部１６３は、特定した撮像画像を撮像した撮像中心の位置を特定する。撮像中心移動制御部１６３は、特定した撮像中心の位置を、撮像中心を設定する位置として決定し、決定した位置に撮像中心を設定する（ステップＳ３８０）。   On the other hand, when the determination unit 167 determines that the number of one or more evaluation values detected by the evaluation value detection unit 165 in step S140 matches the number of positions where the imaging center can move by the moving mechanism 101 (step S350—Yes). ) The imaging center movement control unit 163 specifies the largest evaluation value among the one or more evaluation values detected by the evaluation value detection unit 165 in step S140. The imaging center movement control unit 163 specifies a captured image in which the specified evaluation value is detected. The imaging center movement control unit 163 identifies the position of the imaging center where the identified captured image is captured. The imaging center movement control unit 163 determines the position of the identified imaging center as a position for setting the imaging center, and sets the imaging center at the determined position (step S380).

なお、図７に示した例では、撮像中心移動制御部１６３がステップＳ１４０において評価値検出部１６５が検出した１以上の評価値に基づいて、最も大きな評価値を特定している。すなわち、図７に示した例において、撮像画像に占めるパターン画像の割合が所定値以上であるか否かを判定する際の当該所定値とは、評価値が取り得る最大値を示す。   In the example illustrated in FIG. 7, the imaging center movement control unit 163 specifies the largest evaluation value based on one or more evaluation values detected by the evaluation value detection unit 165 in step S140. That is, in the example illustrated in FIG. 7, the predetermined value when determining whether or not the ratio of the pattern image to the captured image is equal to or greater than the predetermined value indicates the maximum value that the evaluation value can take.

次に、図８を参照して、所定条件のバリエーションの更に他の例において制御部１６が行う評価値反復検出処理について説明する。図８は、所定条件のバリエーションの更に他の例において制御部１６が行う評価値反復検出処理の流れの一例を示すフローチャートである。なお、図８におけるステップＳ１００からステップＳ１４０までの処理は、図５に示したステップＳ１００からステップＳ１４０までの処理と同様の処理であるため説明を省略する。また、図８におけるステップＳ１６０からステップＳ１７０までの処理は、図５に示したステップＳ１６０からステップＳ１７０までの処理と同様の処理であるため説明を省略する。   Next, with reference to FIG. 8, the evaluation value repetition detection process performed by the control unit 16 in still another example of the variation of the predetermined condition will be described. FIG. 8 is a flowchart illustrating an example of a flow of evaluation value repetition detection processing performed by the control unit 16 in still another example of the variation of the predetermined condition. Note that the processing from step S100 to step S140 in FIG. 8 is the same as the processing from step S100 to step S140 shown in FIG. Further, the processing from step S160 to step S170 in FIG. 8 is the same as the processing from step S160 to step S170 shown in FIG.

図８に示した例において、所定条件は、今回のステップＳ１４０において評価値検出部１６５が検出した評価値が、前回のステップＳ１４０において評価値検出部１６５が検出した評価値未満であることである。   In the example shown in FIG. 8, the predetermined condition is that the evaluation value detected by the evaluation value detection unit 165 in the current step S140 is less than the evaluation value detected by the evaluation value detection unit 165 in the previous step S140. .

すなわち、ステップＳ１４０の処理の後、判定部１６７は、今回のステップＳ１４０において評価値検出部１６５が検出した評価値が、前回のステップＳ１４０において評価値検出部１６５が検出した評価値未満であるか否かを判定する（ステップＳ４５０）。今回のステップＳ１４０において評価値検出部１６５が検出した評価値が、前回のステップＳ１４０において評価値検出部１６５が検出した評価値以上であると判定部１６７が判定した場合（ステップＳ４５０−Ｎｏ）、撮像中心移動制御部１６３は、ステップＳ１６０に遷移し、移動機構１０１に撮像中心を移動させる。   That is, after the process of step S140, the determination unit 167 determines whether the evaluation value detected by the evaluation value detection unit 165 in the current step S140 is less than the evaluation value detected by the evaluation value detection unit 165 in the previous step S140. It is determined whether or not (step S450). When the determination unit 167 determines that the evaluation value detected by the evaluation value detection unit 165 in the current step S140 is greater than or equal to the evaluation value detected by the evaluation value detection unit 165 in the previous step S140 (step S450-No). The imaging center movement control unit 163 proceeds to step S160 and causes the moving mechanism 101 to move the imaging center.

一方、今回のステップＳ１４０において評価値検出部１６５が検出した評価値が、前回のステップＳ１４０において評価値検出部１６５が検出した評価値未満であると判定部１６７が判定した場合（ステップＳ４５０−Ｙｅｓ）、撮像中心移動制御部１６３は、ステップＳ１４０において評価値検出部１６５が検出した１以上の評価値のうち、前回のステップＳ１４０において評価値検出部１６５が検出した評価値を特定する。撮像中心移動制御部１６３は、特定した評価値が検出された撮像画像を特定する。撮像中心移動制御部１６３は、特定した撮像画像を撮像した撮像中心の位置を特定する。撮像中心移動制御部１６３は、特定した撮像中心の位置を、撮像中心を設定する位置として決定し、決定した位置に撮像中心を設定する（ステップＳ４８０）。   On the other hand, when the determination unit 167 determines that the evaluation value detected by the evaluation value detection unit 165 in the current step S140 is less than the evaluation value detected by the evaluation value detection unit 165 in the previous step S140 (step S450-Yes) ) The imaging center movement control unit 163 identifies the evaluation value detected by the evaluation value detection unit 165 in the previous step S140 among the one or more evaluation values detected by the evaluation value detection unit 165 in step S140. The imaging center movement control unit 163 specifies a captured image in which the specified evaluation value is detected. The imaging center movement control unit 163 identifies the position of the imaging center where the identified captured image is captured. The imaging center movement control unit 163 determines the position of the identified imaging center as a position for setting the imaging center, and sets the imaging center at the determined position (step S480).

なお、図８に示した例では、撮像中心移動制御部１６３がステップＳ１４０において評価値検出部１６５が検出した１以上の評価値に基づいて、前回のステップＳ１４０において評価値検出部１６５が検出した評価値を特定している。すなわち、図８に示した例において、撮像画像に占めるパターン画像の割合が所定値以上であるか否かを判定する際の当該所定値とは、前回のステップＳ１４０において評価値検出部１６５が検出した評価値を示す。
In the example shown in FIG. 8, the imaging center movement control unit 163 detects the evaluation value detection unit 165 in the previous step S140 based on one or more evaluation values detected by the evaluation value detection unit 165 in step S140. The evaluation value is specified. That is, in the example shown in FIG. 8, the said predetermined value when the ratio of the pattern image occupying the captured image to determine whether it is greater than a predetermined value, the evaluation value detecting unit 165 in the previous step S 140 Indicates the detected evaluation value.

なお、撮像中心移動制御部１６３は、撮像中心の位置毎に撮像部１０が撮像した撮像画像のそれぞれからパターンマッチングによって、各撮像画像に占めるパターン画像の割合を検出し、検出した当該割合が所定値以上である撮像画像を検出する構成であってもよい。この場合、撮像中心移動制御部１６３は、検出した撮像画像を撮像した撮像中心の位置を特定する。そして、撮像中心移動制御部１６３は、特定した撮像中心の位置を、撮像中心を設定する位置として決定し、決定した位置に撮像中心を設定する。   The imaging center movement control unit 163 detects the ratio of the pattern image in each captured image by pattern matching from each of the captured images captured by the imaging unit 10 for each position of the imaging center, and the detected ratio is predetermined. The configuration may be such that a captured image that is greater than or equal to the value is detected. In this case, the imaging center movement control unit 163 specifies the position of the imaging center where the detected captured image is captured. Then, the imaging center movement control unit 163 determines the position of the identified imaging center as a position for setting the imaging center, and sets the imaging center at the determined position.

以上、説明したように、実施形態に係るプロジェクター１は、撮像中心を移動させるために移動機構１０１によって撮像部１０を移動させる。そして、プロジェクター１は、移動機構１０１により撮像中心を移動させながら撮像部１０に撮像画像を撮像させ、撮像画像に占めるパターン画像の割合が所定条件を満たすように移動機構１０１により撮像部１０を移動させる。プロジェクター１は、撮像画像に占めるパターン画像の割合が所定条件を満たす状態で撮像された撮像画像に基づいて処理を行う。これにより、投写画像の状態に応じて適した画像に基づく処理を行うことができる。   As described above, the projector 1 according to the embodiment moves the imaging unit 10 by the moving mechanism 101 in order to move the imaging center. Then, the projector 1 causes the imaging unit 10 to capture the captured image while moving the imaging center by the movement mechanism 101, and moves the imaging unit 10 by the movement mechanism 101 so that the ratio of the pattern image to the captured image satisfies a predetermined condition. Let The projector 1 performs processing based on a captured image that is captured in a state where the ratio of the pattern image to the captured image satisfies a predetermined condition. Thereby, processing based on an image suitable for the state of the projected image can be performed.

また、プロジェクター１は、複数の所定の図形（例えば、ドットパターン）を含むパターン画像を投写しているときに、移動機構１０１により撮像中心を移動させながら撮像部１０に撮像画像を撮像させ、撮像画像に含まれる当該図形の数が所定条件を満たすように移動機構１０１を制御する。これにより、プロジェクター１は、撮像画像に含まれる図形の数に基づいて、撮像部１０により撮像可能な領域を移動させることができる。   In addition, when projecting a pattern image including a plurality of predetermined figures (for example, dot patterns), the projector 1 causes the imaging unit 10 to capture a captured image while moving the imaging center by the moving mechanism 101. The moving mechanism 101 is controlled so that the number of the figures included in the image satisfies a predetermined condition. Thereby, the projector 1 can move an area that can be imaged by the imaging unit 10 based on the number of figures included in the captured image.

また、プロジェクター１は、撮像画像に占めるパターン画像の割合を、撮像画像に含まれるパターン画像に描画されたドットの数によって算出する。これにより、プロジェクター１は、ドットパターンが描画されたパターン画像の状態に応じて適した画像に基づく処理を行う。   Further, the projector 1 calculates the ratio of the pattern image in the captured image based on the number of dots drawn in the pattern image included in the captured image. Thereby, the projector 1 performs processing based on an image suitable for the state of the pattern image on which the dot pattern is drawn.

また、プロジェクター１は、撮像画像に占める単一色画像の割合を、撮像画像に含まれる明るさを示す情報（輝度値や明度値等）の合計によって算出する。これにより、プロジェクター１は、単一色画像の状態に応じて適した画像に基づく処理を行う。   Further, the projector 1 calculates the ratio of the single color image in the captured image by the total of information (luminance value, brightness value, etc.) indicating the brightness included in the captured image. Thereby, the projector 1 performs a process based on an image suitable for the state of the single color image.

また、プロジェクター１は、撮像画像に占めるパターン画像の割合が所定値以上になったか否かをパターンマッチングによって判定する。これにより、プロジェクター１は、パターンマッチングを用いて、パターン画像の状態に応じて適した画像に基づく処理を行うことができる。   Further, the projector 1 determines by pattern matching whether or not the ratio of the pattern image to the captured image has reached a predetermined value or more. Thereby, the projector 1 can perform the process based on the image suitable for the state of the pattern image using the pattern matching.

＜第１実施形態の例２＞
以下、本発明の第１実施形態の例２について説明する。第１実施形態の例２では、プロジェクター１がＮ台の撮像部１０を備える場合について説明する。図９は、第１実施形態の例２に係るプロジェクター１の構成例を示す図である。第１実施形態の例２に係るプロジェクター１は、Ｎ台の撮像部１０と、記憶部１２と、入力受付部１３と、制御部１６ａと、光源制御部１７と、光源１８と、光変調装置１９と、レンズ部２０と、画像入力部２１と、画像処理部２２と、ＯＳＤ処理部２３と、光変調装置駆動部２４と、加速度センサー２５を備える。ここで、Ｎは、２以上の整数である。なお、第１実施形態の例２では、第１実施形態の例１と同様な構成部には、同じ符号を付して説明を省略する。 <Example 2 of the first embodiment>
Hereinafter, Example 2 of the first embodiment of the present invention will be described. In Example 2 of the first embodiment, a case where the projector 1 includes N imaging units 10 will be described. FIG. 9 is a diagram illustrating a configuration example of the projector 1 according to Example 2 of the first embodiment. The projector 1 according to Example 2 of the first embodiment includes N imaging units 10, a storage unit 12, an input receiving unit 13, a control unit 16a, a light source control unit 17, a light source 18, and a light modulation device. 19, a lens unit 20, an image input unit 21, an image processing unit 22, an OSD processing unit 23, a light modulation device driving unit 24, and an acceleration sensor 25. Here, N is an integer of 2 or more. In Example 2 of the first embodiment, the same components as those in Example 1 of the first embodiment are denoted by the same reference numerals, and description thereof is omitted.

Ｎ台の撮像部１０はそれぞれ、移動機構１０１を備える。なお、Ｎ台の撮像部１０のうちの一部又は全部は、互いにレンズ特性（レンズサイズ、画角、フォーカス範囲、Ｆ値、透過率等）の異なる撮像レンズを備えていてもよく、互いにレンズ特性の同じ撮像レンズを備えていてもよい。また、Ｎ台の撮像部１０のうちの一部又は全部は、互いに形状や大きさが異なっていてもよく、互いに形状や大きさが同じであってもよい。また、Ｎ台の撮像部１００のうちの一部又は全部は、互いにセンサー特性（センサーサイズ、解像度、カラーフィルター等）の異なる撮像素子を備えていてもよく、互いにセンサー特性の同じ撮像素子を備えていてもよい。   Each of the N imaging units 10 includes a moving mechanism 101. Note that some or all of the N imaging units 10 may include imaging lenses having different lens characteristics (lens size, angle of view, focus range, F value, transmittance, etc.). You may provide the imaging lens with the same characteristic. Also, some or all of the N imaging units 10 may have different shapes and sizes, or may have the same shape and size. In addition, some or all of the N imaging units 100 may include image sensors having different sensor characteristics (sensor size, resolution, color filter, etc.), and include image sensors having the same sensor characteristics. It may be.

この一例において、Ｎ台の撮像部１０のそれぞれは、撮像中心を移動させることにより撮像可能な領域の全体が完全には重ならないようにプロジェクター１に設けられている場合について説明する。すなわち、移動機構１０１が撮像中心を移動した場合であっても、例えば、ある撮像部１０の撮像可能領域ＣＡと、他の撮像部１０の撮像可能領域ＣＡとは、一部又は全部が重ならない。   In this example, a case will be described in which each of the N imaging units 10 is provided in the projector 1 so that the entire imageable area does not completely overlap by moving the imaging center. That is, even when the moving mechanism 101 moves in the imaging center, for example, the imageable area CA of one imaging unit 10 and the imageable area CA of another imaging unit 10 do not partially or completely overlap. .

このようにすることで、ある撮像部１０の撮像可能領域ＣＡに投写画像Ｐ１の一部すらも含まれていない場合、プロジェクター１は、撮像可能領域ＣＡに投写画像Ｐ１の一部が含まれている他の撮像部１０を選択し、選択した撮像部１０によって第１実施形態の例１において説明した処理と同様の処理を行うことができる。その結果、第１実施形態の例２に係るプロジェクター１は、第１実施形態の例１に係るプロジェクター１と同様の効果を得ることができる。   By doing in this way, when even a part of the projected image P1 is not included in the imageable area CA of a certain imaging unit 10, the projector 1 includes a part of the projected image P1 in the imageable area CA. The other imaging unit 10 is selected, and the selected imaging unit 10 can perform processing similar to the processing described in Example 1 of the first embodiment. As a result, the projector 1 according to Example 2 of the first embodiment can obtain the same effects as the projector 1 according to Example 1 of the first embodiment.

制御部１６ａは、撮像制御部１６１と、撮像部選択部１６２と、撮像中心移動制御部１６３と、評価値検出部１６５と、判定部１６７を備える。
撮像部選択部１６２は、評価値検出部１６５が検出した評価値に基づいて、Ｎ台の撮像部１０から所定選択条件を満たす撮像部１０を選択する。所定選択条件とは、例えば、評価値が最も高いことである。なお、所定選択条件は、これに代えて、他の条件であってもよい。 The control unit 16a includes an imaging control unit 161, an imaging unit selection unit 162, an imaging center movement control unit 163, an evaluation value detection unit 165, and a determination unit 167.
The imaging unit selection unit 162 selects the imaging unit 10 satisfying a predetermined selection condition from the N imaging units 10 based on the evaluation value detected by the evaluation value detection unit 165. The predetermined selection condition is, for example, that the evaluation value is the highest. The predetermined selection condition may be other conditions instead of this.

ここで、図１０を参照して、制御部１６ａがＮ台の撮像部１０のうちから所定選択条件を満たす撮像部１０を選択する処理について説明する。図１０は、制御部１６ａが所定選択条件を満たす撮像部１０を用いて行う評価値反復検出処理の流れの一例を示す図である。なお、図１０におけるステップＳ１４０からステップＳ１８０までの処理は、図５に示したステップＳ１４０の処理及びステップＳ１８０までの処理と同様の処理であるため説明を省略する。   Here, with reference to FIG. 10, a process in which the control unit 16a selects the imaging unit 10 satisfying a predetermined selection condition from the N imaging units 10 will be described. FIG. 10 is a diagram illustrating an example of the evaluation value iteration detection process performed by the control unit 16a using the imaging unit 10 that satisfies the predetermined selection condition. Note that the processing from step S140 to step S180 in FIG. 10 is the same as the processing in step S140 and the processing up to step S180 shown in FIG.

プロジェクター１は、入力受付部１３から受け付けたユーザーからの操作に基づいて、投写可能領域ＰＡ内におけるユーザーが所望する位置にパターン画像を投写する（ステップＳ５００）。次に、制御部１６ａは、Ｎ台の撮像部１０から１台ずつ撮像部１０を選択し、選択した撮像部１０を用いてステップＳ５２０からステップＳ５３０までの処理を繰り返し行う（ステップＳ５１０）。   The projector 1 projects the pattern image at a position desired by the user in the projectable area PA based on the operation from the user received from the input receiving unit 13 (step S500). Next, the control unit 16a selects the imaging units 10 one by one from the N imaging units 10, and repeatedly performs the processing from step S520 to step S530 using the selected imaging unit 10 (step S510).

撮像制御部１６１は、ステップＳ５１０において選択された撮像部１０の撮像中心を所定の基準位置（例えば、可動範囲内の中央）に設定し、撮像可能領域ＣＡを撮像させる（ステップＳ５２０）。そして、制御部１６ａは、撮像部１０から撮像画像を取得する。次に、評価値検出部１６５は、ステップＳ５２０において取得した撮像画像に基づいて評価値を検出する（ステップＳ５３０）。
このように、ステップＳ５２０からステップＳ５３０までの処理を繰り返すことにより、制御部１６ａは、Ｎ台の撮像部１０毎に、現在の撮像中心の位置において撮像した撮像画像を撮像部１０から取得することができる。 The imaging control unit 161 sets the imaging center of the imaging unit 10 selected in step S510 to a predetermined reference position (for example, the center within the movable range), and images the imageable area CA (step S520). Then, the control unit 16a acquires a captured image from the imaging unit 10. Next, the evaluation value detection unit 165 detects an evaluation value based on the captured image acquired in step S520 (step S530).
In this way, by repeating the processing from step S520 to step S530, the control unit 16a acquires, from the imaging unit 10, the captured image captured at the current imaging center position for each of the N imaging units 10. Can do.

ステップＳ５２０からステップＳ５３０までの繰り返し処理が終了した後、撮像部選択部１６２は、Ｎ台の撮像部１０から所定選択条件を満たす撮像部１０を選択する（ステップＳ５４０）。ここで、所定選択条件とは、撮像部１０により撮像された撮像画像に基づいて検出された評価値が最大であることである。   After the iterative process from step S520 to step S530 is completed, the imaging unit selection unit 162 selects the imaging unit 10 that satisfies the predetermined selection condition from the N imaging units 10 (step S540). Here, the predetermined selection condition is that the evaluation value detected based on the captured image captured by the imaging unit 10 is the maximum.

すなわち、撮像部選択部１６２は、ステップＳ５３０において検出された１以上の評価値から、最大の評価値を特定する。撮像部選択部１６２は、特定した評価値が検出された撮像画像を特定する。そして、撮像部選択部１６２は、特定した撮像画像を撮像した撮像部１０を特定する。撮像部選択部１６２は、特定した撮像部１０を、所定選択条件を満たす撮像部１０として選択する。この選択された撮像部１０は、ステップＳ１４０からステップＳ１８０までの処理において用いる撮像部１０として選択する（ステップＳ５４０）。   In other words, the imaging unit selection unit 162 specifies the maximum evaluation value from one or more evaluation values detected in step S530. The imaging unit selection unit 162 specifies a captured image in which the specified evaluation value is detected. Then, the imaging unit selection unit 162 identifies the imaging unit 10 that captured the identified captured image. The imaging unit selection unit 162 selects the identified imaging unit 10 as the imaging unit 10 that satisfies a predetermined selection condition. The selected imaging unit 10 is selected as the imaging unit 10 used in the processing from step S140 to step S180 (step S540).

以上、説明したように、第１実施形態の例２に係るプロジェクター１は、複数の撮像部１０を備える。プロジェクター１は、これら複数の撮像部１０の中から、所定選択条件を満たす撮像部１０を選択する。そして、プロジェクター１は、選択された撮像部１０を用いて評価値反復検出処理を行う。これにより、プロジェクター１は、第１実施形態の例１と同様の効果を得ることができる。   As described above, the projector 1 according to Example 2 of the first embodiment includes the plurality of imaging units 10. The projector 1 selects the imaging unit 10 that satisfies a predetermined selection condition from the plurality of imaging units 10. Then, the projector 1 performs an evaluation value iterative detection process using the selected imaging unit 10. Thereby, the projector 1 can obtain the same effects as those of Example 1 of the first embodiment.

＜第１実施形態の例３−１＞
以下、本発明の第１実施形態の例３−１について図面を参照して説明する。第１実施形態の例３−１では、プロジェクター１が、撮像部１０が備える撮像レンズを移動させることにより、撮像中心を移動させる場合の一例について説明する。より具体的には、第１実施形態の例３−１では、撮像中心移動制御部１６３が、撮像部１０を移動させることにより撮像中心を移動させる構成に代えて、撮像部１０が備える撮像レンズと、撮像部１０が備える撮像素子との相対的な位置関係を変化（移動）させることにより撮像中心を移動させる。これにより、プロジェクター１は、撮像可能領域ＣＡを移動することができる。 <Example 3-1 of First Embodiment>
Hereinafter, Example 3-1 of the first embodiment of the present invention will be described with reference to the drawings. In Example 3-1 of the first embodiment, an example will be described in which the projector 1 moves the imaging center by moving the imaging lens included in the imaging unit 10. More specifically, in the example 3-1 of the first embodiment, the imaging center movement control unit 163 replaces the configuration in which the imaging center is moved by moving the imaging unit 10, and the imaging lens provided in the imaging unit 10 is provided. Then, the imaging center is moved by changing (moving) the relative positional relationship with the imaging device included in the imaging unit 10. Accordingly, the projector 1 can move in the imageable area CA.

ここで、図１１及び図１２を参照して、この一例においてプロジェクター１が撮像可能領域ＣＡを移動する原理について説明する。なお、以下では、説明の便宜上、撮像部１０が備える撮像レンズを撮像レンズＬ１と称して説明する。また、以下では、撮像部１０が備える撮像素子を撮像素子Ｓ１と称して説明する。図１１は、撮像レンズＬ１と撮像素子Ｓ１の相対的な位置関係と、撮像素子Ｓ１により撮像された撮像画像とを例示する図である。   Here, with reference to FIG. 11 and FIG. 12, the principle of the projector 1 moving in the imageable area CA in this example will be described. Hereinafter, for convenience of explanation, the imaging lens included in the imaging unit 10 will be referred to as an imaging lens L1. Hereinafter, the image sensor provided in the imaging unit 10 will be referred to as an image sensor S1. FIG. 11 is a diagram illustrating a relative positional relationship between the imaging lens L1 and the imaging element S1 and a captured image captured by the imaging element S1.

以下では、一例として、撮像レンズＬ１の形状が、光軸上から撮像レンズＬ１を見た場合に、光軸周りの回転に対して対称な円形状である凸型レンズの場合について説明する。また、以下では、撮像素子Ｓ１は、光を受光して電気信号に変換する複数の受光素子を含み、当該受光素子が長方形の枠内に格子状に並べて設けられている場合について説明する。   Hereinafter, as an example, a case where the shape of the imaging lens L1 is a convex lens having a circular shape symmetric with respect to rotation around the optical axis when the imaging lens L1 is viewed from the optical axis will be described. In the following description, the imaging element S1 includes a plurality of light receiving elements that receive light and convert it into an electrical signal, and the case where the light receiving elements are arranged in a grid in a rectangular frame will be described.

図１１（Ａ）には、撮像レンズＬ１と撮像素子Ｓ１の相対的な位置関係の一例を示した。図１１（Ａ）において、一点鎖線Ｃ３は、撮像レンズＬ１の中心を通る光軸Ｃ３を示す。また、一点鎖線Ｃ４は、撮像素子Ｓ１の中心を通り、撮像素子Ｓ１の撮像面に対して直交する撮像素子Ｓ１の中心軸Ｃ４を示す。図１１（Ａ）に示したように、撮像レンズの光軸Ｃ３は、撮像素子の中心軸Ｃ４と一致している。   FIG. 11A shows an example of the relative positional relationship between the imaging lens L1 and the imaging element S1. In FIG. 11A, an alternate long and short dash line C3 indicates an optical axis C3 passing through the center of the imaging lens L1. An alternate long and short dash line C4 indicates the central axis C4 of the imaging element S1 that passes through the center of the imaging element S1 and is orthogonal to the imaging surface of the imaging element S1. As shown in FIG. 11A, the optical axis C3 of the imaging lens coincides with the central axis C4 of the imaging element.

光軸Ｃ３と中心軸Ｃ４が一致している状況下において、プロジェクター１が投写画像Ｘ１を投写可能領域ＰＡに投写した場合を例に挙げて説明する。投写画像Ｘ１は、図１１（Ａ）において、矢印Ｘ１によって表される。また、図１１（Ａ）に示した点線の矢印Ｙ１は、矢印Ｘ１の先端の位置、又は後述する矢印Ｘ２の後端の位置から反射された光が撮像レンズＬ１を通過した際の模式的な光路Ｙ１を示す。また、図１１（Ａ）に示した点線の矢印Ｙ２は、矢印Ｘ２の先端の位置から反射された光が撮像レンズＬ１を通過した際の模式的な光路Ｙ２を示す。   An example will be described in which the projector 1 projects the projection image X1 onto the projectable area PA in a situation where the optical axis C3 and the central axis C4 coincide. The projected image X1 is represented by an arrow X1 in FIG. Also, a dotted arrow Y1 shown in FIG. 11A is a schematic diagram when light reflected from the position of the tip of the arrow X1 or the position of the rear end of the arrow X2 described later passes through the imaging lens L1. The optical path Y1 is shown. A dotted arrow Y2 shown in FIG. 11A indicates a schematic optical path Y2 when light reflected from the position of the tip of the arrow X2 passes through the imaging lens L1.

図１１（Ａ）に示したように、矢印Ｘ１の先端の位置から反射された光は、光路Ｙ１を通って撮像素子Ｓ１の撮像面に到達し、受光される。また、矢印Ｘ１の後端の位置から反射された光は、光軸Ｃ３に沿った光路を通って撮像素子Ｓ１の撮像面に到達し、受光される。   As shown in FIG. 11A, the light reflected from the position of the tip of the arrow X1 reaches the imaging surface of the imaging device S1 through the optical path Y1, and is received. Further, the light reflected from the position of the rear end of the arrow X1 reaches the imaging surface of the imaging device S1 through the optical path along the optical axis C3 and is received.

すなわち、矢印Ｘ１は、撮像素子Ｓ１により図１１（Ｂ）に示したように撮像される。図１１（Ｂ）には、矢印Ｘ１が撮像素子Ｓ１によって撮像された撮像画像Ｐ３の一例を示した。図１１（Ｂ）において、一点鎖線Ｃ５は、撮像画像Ｐ３の中心を通る中心線Ｃ５を示す。図１１（Ｂ）に示したように、撮像画像Ｐ３には、矢印Ｘ１が矢印ＰＸ１として撮像される。また、撮像画像Ｐ３には、矢印ＰＸ１の全体が含まれている。   That is, the arrow X1 is imaged as shown in FIG. 11B by the image sensor S1. FIG. 11B illustrates an example of a captured image P3 in which the arrow X1 is captured by the image sensor S1. In FIG. 11B, an alternate long and short dash line C5 indicates a center line C5 passing through the center of the captured image P3. As shown in FIG. 11B, the arrow X1 is captured as the arrow PX1 in the captured image P3. The captured image P3 includes the entire arrow PX1.

ここで、プロジェクター１がレンズシフト機能によって投写画像の位置を移動した場合を考える。図１１（Ａ）において、矢印Ｘ２は、レンズシフト機能によって位置が移動した後の矢印Ｘ１を示す。図１１（Ａ）に示したように、矢印Ｘ２の先端の位置から反射された光は、光路Ｙ２を通るため、撮像素子Ｓ１の撮像面に到達せず、受光されない。一方、矢印Ｘ２の後端の位置から反射された光は、矢印Ｘ１の先端の位置から反射された光と同様に、光路Ｙ１を通って撮像素子Ｓ１の撮像面に到達して受光される。   Here, consider a case where the projector 1 moves the position of the projected image by the lens shift function. In FIG. 11A, an arrow X2 indicates the arrow X1 after the position is moved by the lens shift function. As shown in FIG. 11A, the light reflected from the position of the tip of the arrow X2 passes through the optical path Y2, and therefore does not reach the imaging surface of the imaging device S1 and is not received. On the other hand, the light reflected from the position at the rear end of the arrow X2 reaches the image pickup surface of the image pickup device S1 through the optical path Y1 and is received similarly to the light reflected from the position at the front end of the arrow X1.

すなわち、矢印Ｘ２は、撮像素子Ｓ１により図１１（Ｃ）に示したように撮像される。図１１（Ｃ）には、矢印Ｘ２が撮像素子Ｓ１によって撮像された撮像画像Ｐ４の一例を示した。図１１（Ｃ）において、一点鎖線Ｃ６は、撮像画像Ｐ４の中心を通る中心線Ｃ６を示す。図１１（Ｃ）に示したように、撮像画像Ｐ４には、矢印Ｘ２が矢印ＰＸ２として撮像される。また、撮像画像Ｐ４には、矢印ＰＸ２の全体が含まれず、矢印ＰＸ２の一部が含まれる。   That is, the arrow X2 is imaged as shown in FIG. 11C by the image sensor S1. FIG. 11C illustrates an example of a captured image P4 in which the arrow X2 is captured by the image sensor S1. In FIG. 11C, an alternate long and short dash line C6 indicates a center line C6 passing through the center of the captured image P4. As illustrated in FIG. 11C, the arrow X2 is captured as the arrow PX2 in the captured image P4. Further, the captured image P4 does not include the entire arrow PX2, but includes a part of the arrow PX2.

従って、図１１（Ａ）に示した撮像レンズＬ１と撮像素子Ｓ１との相対的な位置関係では、レンズシフト機能によって位置が移動した後の投写画像である矢印Ｘ２の全体を撮像することができない。これは、撮像レンズＬ１と撮像素子Ｓ１との相対的な位置関係が図１１（Ａ）に示した位置関係の場合、レンズシフト機能によって位置が移動した後の投写画像である矢印Ｘ２の全体は、撮像可能領域ＣＡの内側に含まれないことを示す。   Therefore, in the relative positional relationship between the imaging lens L1 and the imaging element S1 shown in FIG. 11A, it is impossible to capture the entire arrow X2 that is a projection image after the position is moved by the lens shift function. . This is because, when the relative positional relationship between the imaging lens L1 and the imaging device S1 is the positional relationship shown in FIG. 11A, the entire arrow X2 that is a projection image after the position is moved by the lens shift function is , It is not included inside the imageable area CA.

ここで、図１１に示した撮像レンズＬ１と撮像素子Ｓ１との相対的な位置関係を、図１２に示した撮像レンズＬ１と撮像素子Ｓ１との相対的な位置関係に変化させた場合を考える。図１２は、撮像レンズＬ１と撮像素子Ｓ１の相対的な位置関係と、撮像素子Ｓ１により撮像された撮像画像との他の例を示す図である。図１２（Ａ）には、撮像レンズＬ１と撮像素子Ｓ１の相対的な位置関係の他の例を示した。図１２（Ａ）において、矢印Ｙ３は、矢印Ｘ１の後端の位置から反射された光が撮像レンズＬ１を通過した際の模式的な光路Ｙ３を示す。   Here, a case is considered in which the relative positional relationship between the imaging lens L1 and the imaging device S1 illustrated in FIG. 11 is changed to the relative positional relationship between the imaging lens L1 and the imaging device S1 illustrated in FIG. . FIG. 12 is a diagram illustrating another example of the relative positional relationship between the imaging lens L1 and the imaging element S1 and a captured image captured by the imaging element S1. FIG. 12A shows another example of the relative positional relationship between the imaging lens L1 and the imaging element S1. In FIG. 12A, an arrow Y3 indicates a schematic optical path Y3 when the light reflected from the position of the rear end of the arrow X1 passes through the imaging lens L1.

図１２（Ａ）に示した撮像レンズＬ１と撮像素子Ｓ１との相対的な位置関係は、図１１（Ａ）に示した撮像レンズＬ１と撮像素子Ｓ１との相対的な位置関係から変化させたものである。図１２（Ａ）において、撮像レンズＬ１は、撮像レンズＬ１の光軸Ｃ３が撮像素子Ｓ１の中心軸Ｃ４と一致しないように、撮像素子Ｓ１に対して光軸Ｃ３と直交する方向へ相対的に移動されている。図１２（Ａ）において、二点鎖線ＶＬ１は、図１１に示した撮像レンズＬ１と撮像素子Ｓ１との相対的な位置関係を変化させる前の撮像レンズＬ１の位置を示す。   The relative positional relationship between the imaging lens L1 and the imaging device S1 illustrated in FIG. 12A is changed from the relative positional relationship between the imaging lens L1 and the imaging device S1 illustrated in FIG. Is. In FIG. 12A, the imaging lens L1 is relatively relative to the imaging element S1 in a direction orthogonal to the optical axis C3 so that the optical axis C3 of the imaging lens L1 does not coincide with the central axis C4 of the imaging element S1. Has been moved. In FIG. 12A, a two-dot chain line VL1 indicates the position of the imaging lens L1 before changing the relative positional relationship between the imaging lens L1 and the imaging element S1 illustrated in FIG.

ここで、図１２（Ａ）に示したように、矢印Ｘ１の先端の位置から反射された光は、光路Ｙ１を通って撮像レンズＬ１から撮像素子Ｓ１の撮像面に到達し、受光される。また、矢印Ｘ１の後端の位置から反射された光は、光路Ｙ３を通って撮像レンズＬ１から撮像素子Ｓ１の撮像面に到達し、受光される。   Here, as shown in FIG. 12A, the light reflected from the position of the tip of the arrow X1 reaches the imaging surface of the imaging device S1 from the imaging lens L1 through the optical path Y1, and is received. The light reflected from the position of the rear end of the arrow X1 reaches the imaging surface of the imaging device S1 from the imaging lens L1 through the optical path Y3 and is received.

すなわち、矢印Ｘ１は、撮像素子Ｓ１により図１２（Ｂ）に示したように撮像される。図１２（Ｂ）には、矢印Ｘ１が撮像素子Ｓ１によって撮像された撮像画像Ｐ５の一例を示した。図１２（Ｂ）において、一点鎖線Ｃ７は、撮像画像Ｐ５の中心を通る中心線Ｃ７を示す。図１２（Ｂ）に示したように、撮像画像Ｐ５には、矢印Ｘ１が矢印ＰＸ３として撮像される。また、撮像画像Ｐ５には、矢印ＰＸ３の全体が含まれている。   That is, the arrow X1 is imaged as shown in FIG. 12B by the image sensor S1. FIG. 12B shows an example of a captured image P5 in which the arrow X1 is captured by the image sensor S1. In FIG. 12B, an alternate long and short dash line C7 indicates a center line C7 passing through the center of the captured image P5. As illustrated in FIG. 12B, the arrow X1 is captured as the arrow PX3 in the captured image P5. The captured image P5 includes the entire arrow PX3.

一方、図１２（Ａ）に示したように、矢印Ｘ２の先端の位置から反射された光は、光路Ｙ２を通って撮像レンズＬ１から撮像素子Ｓ１の撮像面に到達し、受光される。また、矢印Ｘ２の後端の位置から反射された光は、光路Ｙ１を通って撮像レンズＬ１から撮像素子Ｓ１の撮像面に到達し、受光される。   On the other hand, as shown in FIG. 12A, the light reflected from the position of the tip of the arrow X2 reaches the imaging surface of the imaging device S1 from the imaging lens L1 through the optical path Y2, and is received. Further, the light reflected from the position of the rear end of the arrow X2 passes through the optical path Y1, reaches the imaging surface of the imaging device S1 from the imaging lens L1, and is received.

すなわち、矢印Ｘ２は、撮像素子Ｓ１により図１２（Ｃ）に示したように撮像される。図１２（Ｃ）には、矢印Ｘ２が撮像素子Ｓ１によって撮像された撮像画像Ｐ６の一例を示した。図１２（Ｃ）において、一点鎖線Ｃ８は、撮像画像Ｐ６の中心を通る中心線Ｃ８を示す。図１２（Ｃ）に示したように、撮像画像Ｐ６には、矢印Ｘ２が矢印ＰＸ４として撮像される。また、撮像画像Ｐ６には、矢印ＰＸ４の全体が含まれている。   That is, the arrow X2 is imaged as shown in FIG. 12C by the image sensor S1. FIG. 12C illustrates an example of a captured image P6 in which the arrow X2 is captured by the image sensor S1. In FIG. 12C, an alternate long and short dash line C8 indicates a center line C8 passing through the center of the captured image P6. As shown in FIG. 12C, the arrow X2 is captured as the arrow PX4 in the captured image P6. The captured image P6 includes the entire arrow PX4.

従って、図１２（Ａ）に示した撮像レンズＬ１と撮像素子Ｓ１との相対的な位置関係では、レンズシフト機能によって位置が移動した後の投写画像である矢印Ｘ２の全体を撮像することができる。これは、撮像レンズＬ１と撮像素子Ｓ１との相対的な位置関係が図１２（Ａ）に示した位置関係の場合、レンズシフト機能によって位置が移動した後の投写画像である矢印Ｘ２の全体は、撮像可能領域ＣＡの内側に含まれることを示す。すなわち、プロジェクター１は、投写画像の一部又は全部が撮像可能領域ＣＡに含まれていない場合であっても、撮像レンズＬ１と撮像素子Ｓ１との相対的な位置関係を変化させることにより、投写画像の全体を撮像可能領域ＣＡの内側に含めることができる。   Therefore, in the relative positional relationship between the imaging lens L1 and the imaging device S1 shown in FIG. 12A, the entire arrow X2 that is a projection image after the position is moved by the lens shift function can be captured. . This is because when the relative positional relationship between the imaging lens L1 and the imaging device S1 is the positional relationship shown in FIG. 12A, the entire arrow X2 that is a projection image after the position is moved by the lens shift function is , It is included inside the imageable area CA. In other words, the projector 1 projects the projection image by changing the relative positional relationship between the imaging lens L1 and the imaging element S1 even when part or all of the projected image is not included in the imageable area CA. The entire image can be included inside the imageable area CA.

また、撮像レンズＬ１と撮像素子Ｓ１との相対的な位置関係を変化させた場合、図１２（Ａ）に示したように、撮像レンズＬ１の光軸Ｃ３と、撮像素子Ｓ１の中心軸Ｃ４との間の相対的な位置関係が変化する。すなわち、この一例において、撮像中心を移動させるとは、撮像レンズＬ１の光軸Ｃ３の位置を、撮像素子Ｓ１の中心軸Ｃ４の位置に対して相対的に変化させることを示す。   Further, when the relative positional relationship between the imaging lens L1 and the imaging element S1 is changed, as shown in FIG. 12A, the optical axis C3 of the imaging lens L1 and the central axis C4 of the imaging element S1 The relative positional relationship between changes. That is, in this example, moving the imaging center indicates that the position of the optical axis C3 of the imaging lens L1 is changed relative to the position of the central axis C4 of the imaging element S1.

以下、図１３及び図１４を参照して、撮像レンズＬ１と撮像素子Ｓ１との相対的な位置関係を変化させることが可能な撮像レンズＬ１と撮像素子Ｓ１の構成について説明する。例えば、撮像レンズＬ１と撮像素子Ｓ１との相対的な位置関係は、撮像レンズＬ１の光軸Ｃ３と撮像素子Ｓ１の中心軸Ｃ４が一致していない場合に、撮像レンズＬ１を中心軸Ｃ４の周りで回転させることにより変化させることができる。   Hereinafter, the configuration of the imaging lens L1 and the imaging device S1 that can change the relative positional relationship between the imaging lens L1 and the imaging device S1 will be described with reference to FIGS. For example, the relative positional relationship between the imaging lens L1 and the imaging element S1 is such that when the optical axis C3 of the imaging lens L1 and the central axis C4 of the imaging element S1 do not match, the imaging lens L1 is around the central axis C4. It can be changed by rotating with.

図１３は、撮像レンズＬ１の光軸Ｃ３と撮像素子Ｓ１の中心軸Ｃ４が一致していない場合における撮像レンズＬ１と撮像素子Ｓ１との相対的な位置関係の一例を示す図である。図１３に示した円Ｃ１３は、撮像レンズＬ１を正面から見た場合に光軸Ｃ３が撮像レンズＬ１を通る位置Ｃ１３（すなわち、撮像レンズＬ１の中心の位置Ｃ１３）を示す。撮像レンズＬ１の正面とは、撮像レンズＬ１の光軸Ｃ３上から撮像素子Ｓ１の撮像面を見た際に見える撮像レンズＬ１の曲面を示す。また、図１３に示した円Ｃ１４は、撮像素子Ｓ１の撮像面上における中心軸Ｃ４が通る位置Ｃ１４（すなわち、撮像レンズＬ１の中心の位置Ｃ１４）を示す。   FIG. 13 is a diagram illustrating an example of a relative positional relationship between the imaging lens L1 and the imaging element S1 when the optical axis C3 of the imaging lens L1 and the central axis C4 of the imaging element S1 do not coincide with each other. A circle C13 illustrated in FIG. 13 indicates a position C13 where the optical axis C3 passes through the imaging lens L1 when the imaging lens L1 is viewed from the front (that is, the center position C13 of the imaging lens L1). The front surface of the imaging lens L1 indicates a curved surface of the imaging lens L1 that is visible when the imaging surface of the imaging element S1 is viewed from the optical axis C3 of the imaging lens L1. A circle C14 illustrated in FIG. 13 indicates a position C14 through which the central axis C4 passes on the imaging surface of the image sensor S1 (that is, the center position C14 of the imaging lens L1).

図１３に示した例において、撮像レンズＬ１は、リング状の部材ＧＬと位置ＢＰにおいて接着されている。また、部材ＧＬの中心の位置は、光軸Ｃ３上から撮像レンズＬ１の正面を見た場合に、撮像素子Ｓ１の中心の位置Ｃ１４と一致する。この場合、部材ＧＬを図１３に示した矢印Ａ３が示す方向に撮像素子Ｓ１の中心軸の周りに回転させると、撮像レンズＬ１は、回転する部材ＧＬとともに撮像素子Ｓ１の中心軸Ｃ４の周りで回転する。二点鎖線Ｖ１は、部材ＧＬとともに撮像素子Ｓ１の中心軸Ｃ４の周りで回転した後の撮像レンズＬ１の位置を示す。また、円ＶＣ３は、部材ＧＬとともに撮像素子Ｓ１の中心軸Ｃ４の周りで回転した後の撮像レンズＬ１の中心の位置を示す。   In the example illustrated in FIG. 13, the imaging lens L1 is bonded to the ring-shaped member GL at the position BP. Further, the center position of the member GL coincides with the center position C14 of the imaging element S1 when the front surface of the imaging lens L1 is viewed from the optical axis C3. In this case, when the member GL is rotated around the central axis of the imaging element S1 in the direction indicated by the arrow A3 shown in FIG. 13, the imaging lens L1 is rotated around the central axis C4 of the imaging element S1 together with the rotating member GL. Rotate. A two-dot chain line V1 indicates the position of the imaging lens L1 after rotating around the central axis C4 of the imaging element S1 together with the member GL. A circle VC3 indicates the position of the center of the imaging lens L1 after rotating around the central axis C4 of the imaging element S1 together with the member GL.

このように、撮像レンズＬ１の光軸Ｃ３と撮像素子Ｓ１の中心軸Ｃ４が一致していない場合に、撮像レンズＬ１を撮像素子Ｓ１の中心軸Ｃ４の周りで回転させると、撮像レンズＬ１の光軸Ｃ３の位置は、撮像素子Ｓ１の中心軸Ｃ４の位置に対して相対的に変化し、この結果、撮像中心が移動する。このように撮像中心を移動することは、例えば、図１４に示した構成を用いることにより実現することができる。図１４は、撮像レンズＬ１の光軸Ｃ３と撮像素子Ｓ１の中心軸Ｃ４を一致させず、且つ撮像レンズＬ１を部材ＧＬとともに撮像素子Ｓ１の中心軸Ｃ４の周りで回転させることができる構成の一例を示す図である。   As described above, when the optical axis C3 of the imaging lens L1 and the central axis C4 of the imaging device S1 do not coincide with each other, if the imaging lens L1 is rotated around the central axis C4 of the imaging device S1, the light of the imaging lens L1 is obtained. The position of the axis C3 changes relative to the position of the central axis C4 of the image sensor S1, and as a result, the imaging center moves. Moving the imaging center in this way can be realized by using, for example, the configuration shown in FIG. FIG. 14 shows an example of a configuration in which the optical axis C3 of the imaging lens L1 and the central axis C4 of the imaging device S1 are not aligned, and the imaging lens L1 can be rotated around the central axis C4 of the imaging device S1 together with the member GL. FIG.

図１４（Ａ）には、撮像レンズＬ１の正面から見た正面図を示す。また、図１４（Ｂ）には、図１４（Ａ）を側面から見た側面図を示す。図１４において、部材ＧＬの外周には、歯車の歯が設けられている。以下では、説明の便宜上、当該歯車を部材ＧＬの歯と称して説明する。部材ＧＬの歯は、歯車Ｇ１の歯とかみ合っている。そのため、部材ＧＬは、歯車Ｇ１の矢印Ａ４が示す方向への回転に伴って矢印Ａ５が示す方向に回転する。   FIG. 14A shows a front view seen from the front of the imaging lens L1. FIG. 14B is a side view of FIG. 14A viewed from the side. In FIG. 14, gear teeth are provided on the outer periphery of the member GL. Hereinafter, for convenience of explanation, the gear is referred to as a tooth of the member GL. The teeth of the member GL mesh with the teeth of the gear G1. Therefore, the member GL rotates in the direction indicated by the arrow A5 as the gear G1 rotates in the direction indicated by the arrow A4.

また、歯車Ｇ１には、モーターＭの回転軸部材ＭＡが接合されている。なお、歯車Ｇ１の中心を通る回転軸と、モーターＭの回転軸部材ＭＡの回転軸とは一致している。一点鎖線Ｃ１１は、当該回転軸Ｃ１１を示す。そのため、歯車Ｇ１は、モーターＭの回転軸部材ＭＡを回転させることにより回転させることができる。なお、撮像素子Ｓ１は、支持部材ＳＢによって支持される。   Further, the rotation shaft member MA of the motor M is joined to the gear G1. The rotation axis passing through the center of the gear G1 coincides with the rotation axis of the rotation shaft member MA of the motor M. An alternate long and short dash line C11 indicates the rotation axis C11. Therefore, the gear G1 can be rotated by rotating the rotating shaft member MA of the motor M. Note that the imaging element S1 is supported by the support member SB.

撮像部１０が備える撮像レンズＬ１と撮像素子Ｓ１を図１４に示したように構成することにより、プロジェクター１は、撮像レンズＬ１を撮像素子Ｓ１の中心軸Ｃ４の周りで回転することができ、その結果、撮像中心を移動させることができる。なお、図１４では、撮像中心を移動させる構成として、撮像素子Ｓ１の中心軸Ｃ４の周りで回転するリング状の部材ＧＬによって撮像レンズＬ１の位置を撮像素子Ｓ１の位置に対して変化させる場合について説明した。次に、図１５を参照して、撮像レンズＬ１の光軸Ｃ３と撮像素子Ｓ１の中心軸Ｃ４を一致させず、且つ撮像レンズＬ１を部材ＧＬとともに撮像素子Ｓ１の中心軸Ｃ４の周りで回転させることができる構成の他の例を説明する。   By configuring the imaging lens L1 and the imaging element S1 included in the imaging unit 10 as illustrated in FIG. 14, the projector 1 can rotate the imaging lens L1 around the central axis C4 of the imaging element S1. As a result, the imaging center can be moved. In FIG. 14, as a configuration for moving the imaging center, the position of the imaging lens L1 is changed with respect to the position of the imaging element S1 by the ring-shaped member GL that rotates around the central axis C4 of the imaging element S1. explained. Next, referring to FIG. 15, the optical axis C3 of the imaging lens L1 and the central axis C4 of the imaging device S1 are not aligned, and the imaging lens L1 is rotated around the central axis C4 of the imaging device S1 together with the member GL. Other examples of possible configurations will be described.

図１５は、撮像レンズＬ１の光軸Ｃ３と撮像素子Ｓ１の中心軸Ｃ４を一致させず、且つ撮像レンズＬ１を部材ＧＬとともに撮像素子Ｓ１の中心軸Ｃ４の周りで回転させることができる構成の他の例を示す図である。図１５（Ａ）には、撮像レンズＬ１の正面から見た正面図を示す。また、図１５（Ｂ）には、図１５（Ａ）を側面から見た側面図を示す。   FIG. 15 shows another configuration in which the optical axis C3 of the imaging lens L1 and the central axis C4 of the imaging device S1 are not aligned, and the imaging lens L1 can be rotated together with the member GL around the central axis C4 of the imaging device S1. It is a figure which shows the example of. FIG. 15A shows a front view seen from the front of the imaging lens L1. FIG. 15B is a side view of FIG. 15A viewed from the side.

図１５において、部材ＧＭは、撮像レンズＬ１を嵌め込んで接着することができる穴部Ｈを有する。部材ＧＭには、撮像レンズＬ１が穴部Ｈに嵌め込まれて接着されているとする。また、部材ＧＭは、図１５（Ｂ）に示すように、撮像素子Ｓ１が設けられた支持部材ＳＢを迂回できるようにコの字型に成形されている。また、部材ＧＭには、図１５に示したように、モーターＭの回転軸部材ＭＡの回転とともに、穴部Ｈに嵌め込まれた撮像レンズＬ１が中心軸Ｃ４の周りで矢印Ａ６が示す方向に回転するように、回転軸部材ＭＡが接合されている。   In FIG. 15, the member GM has a hole H into which the imaging lens L1 can be fitted and bonded. It is assumed that the imaging lens L1 is fitted in the hole H and bonded to the member GM. Further, as shown in FIG. 15B, the member GM is formed in a U-shape so as to be able to bypass the support member SB provided with the imaging element S1. In addition, as shown in FIG. 15, the imaging lens L1 fitted in the hole H rotates around the central axis C4 in the direction indicated by the arrow A6, as shown in FIG. Thus, the rotary shaft member MA is joined.

すなわち、図１５に示した例は、図１４に示したようなモーターＭの回転軸部材ＭＡの回転運動によって歯車Ｇ１を回転させ、回転した歯車Ｇ１によって部材ＧＬを回転させる構成に代えて、部材ＧＭをモーターＭの回転軸部材ＭＡに直接接合させ、回転軸部材ＭＡとともに部材ＧＭを回転させることにより撮像レンズＬ１を回転させる構成の例となっている。なお、図１５に示した例の場合、部材ＧＭが支持部材ＳＢと干渉してしまうため、撮像レンズＬ１を中心軸Ｃ４の周りで３６０度回転させることはできない。   That is, the example shown in FIG. 15 is replaced with a configuration in which the gear G1 is rotated by the rotary motion of the rotary shaft member MA of the motor M and the member GL is rotated by the rotated gear G1 as shown in FIG. In this example, the imaging lens L1 is rotated by directly joining the GM to the rotating shaft member MA of the motor M and rotating the member GM together with the rotating shaft member MA. In the case of the example shown in FIG. 15, the member GM interferes with the support member SB, and therefore the imaging lens L1 cannot be rotated 360 degrees around the central axis C4.

なお、この一例では、撮像中心移動制御部１６３が撮像レンズＬ１を撮像素子Ｓ１に対して回転させることによって撮像中心を移動させる例について説明したが、これに代えて、撮像中心移動制御部１６３が撮像レンズＬ１を撮像素子Ｓ１に対して光軸Ｃ３と直交する方向に並進移動させることによって撮像中心を移動させる構成等の他の構成であってもよい。この場合も、撮像レンズＬ１の位置は、撮像素子Ｓの位置に対して相対的に変化するため、プロジェクター１は、撮像中心を移動することができ、その結果、撮像可能領域ＣＡを移動することができる。撮像部１０が備える撮像素子Ｓ１は、光検出部の一例である。   In this example, the example in which the imaging center movement control unit 163 moves the imaging center by rotating the imaging lens L1 with respect to the imaging element S1 has been described. Instead, the imaging center movement control unit 163 includes the imaging center movement control unit 163. Other configurations such as a configuration in which the imaging center is moved by translating the imaging lens L1 in a direction orthogonal to the optical axis C3 with respect to the imaging element S1 may be used. Also in this case, since the position of the imaging lens L1 changes relative to the position of the imaging element S, the projector 1 can move the imaging center, and as a result, move in the imageable area CA. Can do. Image sensor S1 with which imaging part 10 is provided is an example of a photodetection part.

以上のように、この一例におけるプロジェクター１は、撮像素子Ｓ１に対する撮像レンズＬ１の相対位置を変化させる。これにより、プロジェクター１は、撮像素子Ｓ１に対する撮像レンズＬ１の相対位置を変化させることによって撮像部１０により撮像可能領域ＣＡを移動させることができる。   As described above, the projector 1 in this example changes the relative position of the imaging lens L1 with respect to the imaging element S1. Thereby, the projector 1 can move the imageable area CA by the imaging unit 10 by changing the relative position of the imaging lens L1 with respect to the imaging element S1.

＜第１実施形態の例３−２＞
以下、本発明の第１実施形態の例３−２について図面を参照して説明する。第１実施形態の例３−２では、プロジェクター１が、撮像部１０が備える撮像レンズを移動させることにより、撮像中心を移動させる場合の他の例について説明する。より具体的には、第１実施形態の例３−２では、撮像中心移動制御部１６３が、撮像レンズＬ１の位置を撮像素子Ｓ１の位置に対して相対的に変化させることにより撮像中心を移動させる構成に代えて、撮像レンズＬ１の位置と撮像素子Ｓ１の位置との相対的な位置関係を固定したまま撮像レンズＬ１を回転させることによって撮像中心を移動させる。これにより、プロジェクター１は、撮像可能領域ＣＡを移動することができる。 <Example 3-2 of First Embodiment>
Hereinafter, Example 3-2 of the first embodiment of the present invention will be described with reference to the drawings. In Example 3-2 of the first embodiment, another example in which the projector 1 moves the imaging center by moving the imaging lens included in the imaging unit 10 will be described. More specifically, in Example 3-2 of the first embodiment, the imaging center movement control unit 163 moves the imaging center by changing the position of the imaging lens L1 relative to the position of the imaging element S1. Instead of the configuration, the imaging center is moved by rotating the imaging lens L1 while fixing the relative positional relationship between the position of the imaging lens L1 and the position of the imaging element S1. Accordingly, the projector 1 can move in the imageable area CA.

図１６は、撮像レンズＬ１の光軸Ｃ３と撮像素子Ｓ１の中心軸Ｃ４を一致させず、且つ撮像レンズＬ１を部材ＧＬ２とともに撮像素子Ｓ１の中心軸Ｃ４の周りで回転させることができる構成の更に他の例を示す図である。図１６に示した例は、図１５に示した構成のうち、撮像素子Ｓ１が支持部材ＳＢに支持されている構成に代えて、撮像素子Ｓ１が部材ＧＬ２に支持されて（設けられて）いる構成の例である。なお、撮像素子Ｓ１は、部材ＧＬ２に設けられる際、回転軸Ｃ１１が撮像素子Ｓ１の中心を通るように設けられる。   FIG. 16 shows a configuration in which the optical axis C3 of the imaging lens L1 and the central axis C4 of the imaging device S1 are not aligned, and the imaging lens L1 can be rotated together with the member GL2 around the central axis C4 of the imaging device S1. It is a figure which shows another example. In the example illustrated in FIG. 16, the imaging element S <b> 1 is supported (provided) by the member GL <b> 2 instead of the configuration in which the imaging element S <b> 1 is supported by the support member SB in the configuration illustrated in FIG. 15. It is an example of a structure. Note that when the image pickup element S1 is provided on the member GL2, the rotation axis C11 is provided so as to pass through the center of the image pickup element S1.

図１６に示した例では、撮像レンズＬ１の位置が撮像素子Ｓ１の位置との相対的な位置関係を保持したまま、撮像レンズＬ１が撮像素子Ｓ１とともに回転する。この際、撮像レンズＬ１の光軸Ｃ３と撮像素子Ｓ１の中心軸Ｃ４とがずれているため、撮像可能領域ＣＡの位置が変化する。すなわち、この一例において、撮像中心移動制御部１６３は、撮像レンズＬ１を撮像素子Ｓ１ととともに回転させることにより撮像中心を移動させる。   In the example shown in FIG. 16, the imaging lens L1 rotates together with the imaging element S1 while maintaining the relative positional relationship between the position of the imaging lens L1 and the position of the imaging element S1. At this time, since the optical axis C3 of the imaging lens L1 and the central axis C4 of the imaging element S1 are displaced, the position of the imageable area CA changes. That is, in this example, the imaging center movement control unit 163 moves the imaging center by rotating the imaging lens L1 together with the imaging element S1.

図１７は、撮像レンズＬ１を撮像素子Ｓ１ととともに回転させることにより撮像中心が移動する構成の他の例を示す図である。図１７において、撮像素子Ｓ１は、支持部材ＳＢ１に支持されている。支持部材ＳＢ１は、回転軸Ｃ１１に直交する直交面部と、回転軸Ｃ１１に対して角度θだけ傾いた傾斜面部とを有する。直交面部は、モーターＭの回転軸部材ＭＡに接合されている。これにより、撮像中心移動制御部１６３は、モーターＭの回転軸部材ＭＡを回転させることにより、支持部材ＳＢ１の全体を回転軸Ｃ１１周りに回転させることができる。   FIG. 17 is a diagram illustrating another example of a configuration in which the imaging center moves by rotating the imaging lens L1 together with the imaging element S1. In FIG. 17, the image sensor S1 is supported by the support member SB1. The support member SB1 has an orthogonal surface portion orthogonal to the rotation axis C11 and an inclined surface portion inclined by an angle θ with respect to the rotation axis C11. The orthogonal surface portion is joined to the rotation shaft member MA of the motor M. Accordingly, the imaging center movement control unit 163 can rotate the entire support member SB1 around the rotation axis C11 by rotating the rotation shaft member MA of the motor M.

また、傾斜面部は、直交面部の端部に設けられており、傾斜面部の面のうちモーターＭとは反対側の面上に撮像レンズＬ１と撮像素子Ｓ１が一体となって設けられている。この場合、図１７に示したように、光軸Ｃ３は、中心軸Ｃ４と一致する。しかし、光軸Ｃ３及び中心軸Ｃ４は、回転軸Ｃ１１に対して角度θだけ傾く。なお、この角度θは、回転軸Ｃ１１を二次元ＸＹ平面上のＸ軸とした場合に、光軸Ｃ３及び中心軸Ｃ４が第２象限から第４象限へ向かう方向に回転軸Ｃ１１と交わる際の、光軸Ｃ３及び中心軸Ｃ４と、回転軸Ｃ１１との間の角度を示す。このような構成により、撮像中心移動制御部１６３は、モーターＭの回転軸部材ＭＡを回転させると、撮像レンズＬ１と撮像素子Ｓ１の全体が回転軸Ｃ１１回りに回転するため、撮像素子Ｓ１に撮像される領域の位置が変化する。すなわち、撮像中心移動制御部１６３は、撮像レンズＬ１と撮像素子Ｓ１の全体を回転させることにより、撮像中心を移動させることができる。   The inclined surface portion is provided at the end of the orthogonal surface portion, and the imaging lens L1 and the imaging element S1 are integrally provided on the surface of the inclined surface portion opposite to the motor M. In this case, as shown in FIG. 17, the optical axis C3 coincides with the central axis C4. However, the optical axis C3 and the central axis C4 are inclined by an angle θ with respect to the rotation axis C11. This angle θ is obtained when the optical axis C3 and the central axis C4 intersect the rotational axis C11 in the direction from the second quadrant to the fourth quadrant when the rotational axis C11 is the X axis on the two-dimensional XY plane. The angle between the optical axis C3 and the central axis C4 and the rotation axis C11 is shown. With such a configuration, when the imaging center movement control unit 163 rotates the rotation shaft member MA of the motor M, the entire imaging lens L1 and the imaging element S1 rotate around the rotation axis C11. The position of the area to be changed changes. That is, the imaging center movement control unit 163 can move the imaging center by rotating the entire imaging lens L1 and the imaging element S1.

以上、説明したように、第１実施形態の例３−２に係るプロジェクター１は、撮像レンズＬ１の位置と撮像素子Ｓ１の位置の相対的な位置関係を保持したまま、撮像レンズＬ１を回転させることによって撮像中心を移動させる。これにより、プロジェクター１は、第１実施形態の例１と同様の効果を得ることができる。   As described above, the projector 1 according to Example 3-2 of the first embodiment rotates the imaging lens L1 while maintaining the relative positional relationship between the position of the imaging lens L1 and the position of the imaging element S1. Thus, the imaging center is moved. Thereby, the projector 1 can obtain the same effects as those of Example 1 of the first embodiment.

＜撮像中心移動制御部１６３が撮像レンズＬ１を移動させる方法の具体例１＞
以下、上記の第１実施形態の例３−１、例３−２において撮像中心移動制御部１６３が撮像レンズＬ１を移動させる方法の具体例１について説明する。図１８は、第１実施形態の例３−１、例３−２に係るプロジェクター１が備える制御部１６が行う撮像位置設定処理の流れの一例を示すフローチャートである。なお、図１８におけるステップＳ１００からステップＳ１５０までの処理は、図５に示したステップＳ１００からステップＳ１５０までの処理と同様の処理であるため説明を省略する。また、図１８におけるステップＳ１７０からステップＳ１８０までの処理は、図５に示したステップＳ１７０からステップＳ１８０までの処理と同様の処理であるため説明を省略する。 <Specific Example 1 of Method in which Imaging Center Movement Control Unit 163 Moves Imaging Lens L1>
Hereinafter, specific example 1 of a method in which the imaging center movement control unit 163 moves the imaging lens L1 in Example 3-1 and Example 3-2 of the first embodiment will be described. FIG. 18 is a flowchart illustrating an example of a flow of an imaging position setting process performed by the control unit 16 included in the projector 1 according to Example 3-1 and Example 3-2 of the first embodiment. Note that the processing from step S100 to step S150 in FIG. 18 is the same as the processing from step S100 to step S150 shown in FIG. Also, the processing from step S170 to step S180 in FIG. 18 is the same as the processing from step S170 to step S180 shown in FIG.

図１８における（ステップＳ１５０−Ｎｏ）の場合、撮像中心移動制御部１６３は、移動機構１０１によって撮像レンズＬ１の位置を変化させることにより撮像中心を移動させる（ステップＳ１６０ｂ）。例えば、撮像中心移動制御部１６３は、予め決められた回転方向に予め決められた回転量だけ撮像レンズＬ１を回転させる。なお、撮像中心移動制御部１６３は、これに代えて、他の方法によって撮像中心を移動させる方向を決定してもよい。なお、予め決められた回転量は、撮像中心移動制御部１６３に予め記憶されているものとする。   In the case of (step S150-No) in FIG. 18, the imaging center movement control unit 163 moves the imaging center by changing the position of the imaging lens L1 by the moving mechanism 101 (step S160b). For example, the imaging center movement control unit 163 rotates the imaging lens L1 by a predetermined rotation amount in a predetermined rotation direction. Instead of this, the imaging center movement control unit 163 may determine the direction in which the imaging center is moved by another method. It is assumed that the predetermined rotation amount is stored in advance in the imaging center movement control unit 163.

また、ステップＳ１６０ｂにおいて予め決められた回転方向に撮像レンズＬ１を回転させることができる限界位置に達している場合、撮像中心移動制御部１６３は、移動機構１０１により予め決められた回転方向とは逆の回転方向に撮像レンズＬ１を回転させる。ステップＳ１６０ｂの処理において撮像中心を移動させた後、撮像制御部１６１は、ステップＳ１７０に遷移し、撮像可能領域ＣＡを撮像部１０に撮像させる。   When the limit position where the imaging lens L1 can be rotated in the rotation direction determined in advance in step S160b has been reached, the imaging center movement control unit 163 is opposite to the rotation direction determined in advance by the moving mechanism 101. The imaging lens L1 is rotated in the rotation direction. After moving the imaging center in the process of step S160b, the imaging control unit 161 transitions to step S170 and causes the imaging unit 10 to image the imageable area CA.

＜撮像中心移動制御部１６３が撮像レンズＬ１を移動させる方法の具体例２＞
以下、上記の第１実施形態の例３−１、例３−２において撮像中心移動制御部１６３が撮像レンズＬ１を移動させる方法の具体例２について説明する。図１９は、第１実施形態の例３−１、例３−２に係るプロジェクター１が備える制御部１６が行う撮像位置設定処理の流れの他の例を示すフローチャートである。なお、図１９におけるステップＳ１００及びステップＳ１８０の処理は、図５に示したステップＳ１００及びステップＳ１８０の処理と同様の処理であるため説明を省略する。 <Specific Example 2 of Method in which Imaging Center Movement Control Unit 163 Moves Imaging Lens L1>
Hereinafter, a specific example 2 of a method in which the imaging center movement control unit 163 moves the imaging lens L1 in the example 3-1 and the example 3-2 of the first embodiment will be described. FIG. 19 is a flowchart illustrating another example of the flow of the imaging position setting process performed by the control unit 16 included in the projector 1 according to Example 3-1 and Example 3-2 of the first embodiment. Note that the processing in step S100 and step S180 in FIG. 19 is the same as the processing in step S100 and step S180 shown in FIG.

図１９においてステップＳ１００の処理の後、撮像中心移動制御部１６３は、レンズシフト機能によって投写レンズを移動させた場合のシフト量を算出する（ステップＳ６００）。ここで、投写レンズを移動させた場合のシフト量とは、レンズシフト機能によって投写レンズが移動した場合の投写レンズの位置（すなわち、投写レンズの中心の位置）のＸ軸方向及びＹ軸方向への移動量を示す。撮像中心移動制御部１６３は、レンズ部２０から投写レンズの位置を示す情報を取得し、取得した当該情報と、予め記憶された投写レンズの基準となる位置を示す情報とから、投写レンズのシフト量を算出する。   In FIG. 19, after the process of step S100, the imaging center movement control unit 163 calculates a shift amount when the projection lens is moved by the lens shift function (step S600). Here, the shift amount when the projection lens is moved refers to the X-axis direction and the Y-axis direction of the position of the projection lens (that is, the center position of the projection lens) when the projection lens is moved by the lens shift function. Indicates the amount of movement. The imaging center movement control unit 163 acquires information indicating the position of the projection lens from the lens unit 20, and shifts the projection lens from the acquired information and information indicating the reference position of the projection lens stored in advance. Calculate the amount.

次に、撮像中心移動制御部１６３は、例えば、レンズシフト機能によって投写レンズを移動させた後の投写レンズの位置が、レンズシフト機能によって投写レンズを移動させる前の投写レンズの位置に対して水平方向から傾いている角度を算出する。以下では、当該角度をシフト角と称して説明する。そして、撮像中心移動制御部１６３は、算出したシフト角を撮像レンズの回転量として決定する（ステップＳ６１０）。例えば、投写レンズがレンズシフト機能によって投写画像が投写されたスクリーンＳＣの面上に向かって右に１センチメートル、上に１センチメートルだけ動かされていた場合、シフト角は４５°となる。この場合、撮像中心移動制御部１６３は、撮像レンズＬ１を回転させる回転量を４５°として決定する。   Next, the imaging center movement control unit 163, for example, makes the position of the projection lens after moving the projection lens by the lens shift function horizontal with respect to the position of the projection lens before moving the projection lens by the lens shift function. Calculate the angle of inclination from the direction. Hereinafter, the angle will be referred to as a shift angle. Then, the imaging center movement control unit 163 determines the calculated shift angle as the rotation amount of the imaging lens (step S610). For example, when the projection lens is moved 1 centimeter to the right and 1 centimeter upward toward the surface of the screen SC on which the projected image is projected by the lens shift function, the shift angle is 45 °. In this case, the imaging center movement control unit 163 determines the rotation amount for rotating the imaging lens L1 as 45 °.

次に、撮像中心移動制御部１６３は、ステップＳ６１０において決定した回転量に基づいて撮像レンズＬ１を移動機構１０１に回転させる（ステップＳ６２０）。
このように、上記の撮像レンズＬ１の位置の移動方法により、プロジェクター１は、撮像部１０を１台のみ備えている場合であっても、投写可能領域ＰＡの全体を撮像することができる。また、プロジェクター１は、広角レンズを用いた場合よりも、図２９に示したような４隅の歪みが小さい挟角レンズを使用して投写可能領域ＰＡの全体を撮像することができる。 Next, the imaging center movement control unit 163 rotates the imaging lens L1 to the movement mechanism 101 based on the rotation amount determined in step S610 (step S620).
As described above, the projector 1 can image the entire projectable area PA by the method of moving the position of the imaging lens L1 even when the projector 1 includes only one imaging unit 10. In addition, the projector 1 can image the entire projectable area PA using a narrow-angle lens having a small distortion at the four corners as shown in FIG. 29, compared with the case where a wide-angle lens is used.

＜第１実施形態の例４＞
以下、本発明の第１実施形態の例４について説明する。第１実施形態の例４では、プロジェクター１は、撮像部１０により撮像された撮像画像から検出した評価値に基づいて撮像中心を移動させる構成に代えて、投写条件に基づいて撮像中心を移動させる場合について説明する。なお、以下で説明する撮像中心を移動させる方法は、撮像部１０を移動させることにより撮像中心を移動させる方法に適用してもよく、撮像レンズＬ１を移動させることにより撮像中心を移動させる方法に適用してもよい。 <Example 4 of the first embodiment>
Hereinafter, Example 4 of the first embodiment of the present invention will be described. In Example 4 of the first embodiment, the projector 1 moves the imaging center based on the projection condition instead of the configuration in which the imaging center is moved based on the evaluation value detected from the captured image captured by the imaging unit 10. The case will be described. Note that the method of moving the imaging center described below may be applied to a method of moving the imaging center by moving the imaging unit 10, or a method of moving the imaging center by moving the imaging lens L1. You may apply.

投写条件とは、投写画像を投写する際に投写光学系の状態を指定するための条件である。投写条件は、例えば、当該投写光学系に設定された各種の設定値や使用機器等によって表される。この一例において、各種の設定値とは、選択されているズームの倍率、レンズシフト機能による投写レンズのシフト量を含む。なお、使用機器とは、投写レンズの種類等を示す。   The projection condition is a condition for designating the state of the projection optical system when projecting a projected image. The projection conditions are represented by, for example, various setting values set in the projection optical system, equipment used, and the like. In this example, the various setting values include the zoom magnification selected and the shift amount of the projection lens by the lens shift function. The device used indicates the type of projection lens.

制御部１６又は制御部１６ａは、レンズ部２０から投写画像を投写している現在の投写条件を示す情報を取得する。以下では、一例として、制御部１６又は制御部１６ａが、投写レンズの種類を示す情報と、投写画像Ｐ２が投写された際のズーム倍率を示す情報と、現在の投写レンズの位置を示す情報との３つの情報が投写条件を示す情報に含まれる場合について説明する。投写レンズの種類を示す情報とは、例えば、複数の種類の投写レンズを交換して利用可能な場合に、装着されている投写レンズの種類を識別する型番やＩＤ等である。なお、投写レンズの種類を示す情報は、上記の３つの情報のうちの少なくともいずれか１つであってもよいし、上記以外の他の情報であってもよい。また、投写条件を示す情報が、メニュー画像等を介してユーザーによって入力、又は選択された情報である場合には、制御部１６又は制御部１６ａは、投写条件を示す情報を記憶部１２から取得する。   The control unit 16 or the control unit 16a acquires information indicating the current projection conditions for projecting the projection image from the lens unit 20. Hereinafter, as an example, the control unit 16 or the control unit 16a includes information indicating the type of the projection lens, information indicating the zoom magnification when the projection image P2 is projected, and information indicating the current position of the projection lens. A case where the three pieces of information are included in the information indicating the projection conditions will be described. The information indicating the type of the projection lens is, for example, a model number or ID that identifies the type of the projection lens that is mounted when a plurality of types of projection lens can be used. Note that the information indicating the type of the projection lens may be at least one of the above three pieces of information, or may be information other than the above. When the information indicating the projection condition is information input or selected by the user via a menu image or the like, the control unit 16 or the control unit 16a acquires the information indicating the projection condition from the storage unit 12. To do.

制御部１６又は制御部１６ａは、取得した投写条件を示す情報に含まれる現在の投写レンズの位置を示す情報と、予め記憶された投写レンズの基準となる位置を示す情報とから、投写レンズのシフト量を算出する。なお、制御部１６又は制御部１６ａは、レンズ部２０から投写レンズのシフト量を、投写条件を示す情報の１つとして取得する構成であってもよい。この場合、レンズ部２０は、シフト量を算出する機能部を備えるものとする。   The control unit 16 or the control unit 16a uses the information indicating the current position of the projection lens included in the acquired information indicating the projection condition and the information indicating the reference position of the projection lens stored in advance to determine the projection lens. The shift amount is calculated. The control unit 16 or the control unit 16a may be configured to acquire the shift amount of the projection lens from the lens unit 20 as one piece of information indicating the projection condition. In this case, the lens unit 20 includes a functional unit that calculates the shift amount.

制御部１６又は制御部１６ａは、算出したシフト量と、投写レンズの種類を示す情報と、投写画像Ｐ２が投写された際のズーム倍率を示す情報とに基づいて、投写画像の全体が撮像可能領域ＣＡに含まれる撮像中心の位置を特定し、特定した位置へ撮像中心を移動させるために必要な移動量を算出する。当該移動量は、ベクトル量であり、撮像中心を移動させる方向も表す。   The control unit 16 or the control unit 16a can capture the entire projected image based on the calculated shift amount, information indicating the type of the projection lens, and information indicating the zoom magnification when the projection image P2 is projected. The position of the imaging center included in the area CA is specified, and a movement amount necessary for moving the imaging center to the specified position is calculated. The movement amount is a vector amount and also represents a direction in which the imaging center is moved.

制御部１６又は制御部１６ａは、算出した移動量に基づいて、撮像中心を移動させる。これにより、制御部１６又は制御部１６ａは、投写条件に基づいて撮像中心を移動させ、その結果、上記で説明した第１実施形態の例１〜例３と同様の効果を得ることができる。
なお、第１実施形態の例４において説明した撮像中心を移動させる方法は、図１０のステップＳ５００からステップＳ５４０までの処理によってＮ台の撮像部１０から選択された撮像部１０に対して適用されてもよい。
また、投写条件に基づいて撮像中心を移動させる方法は、例えば、図５〜図８に示したステップＳ１３０における処理において、撮像中心を初期的に動かす方向を決める処理に適用されてもよい。その場合、制御部１６又は制御部１６ａは、撮像可能領域ＣＡ内にパターン画像が入り込む方向とは別の方向に撮像中心を動かし続けてしまうことを抑制することができる。 The control unit 16 or the control unit 16a moves the imaging center based on the calculated movement amount. Thereby, the control part 16 or the control part 16a moves an imaging center based on projection conditions, As a result, it can acquire the effect similar to Example 1-Example 3 of 1st Embodiment demonstrated above.
Note that the method of moving the imaging center described in Example 4 of the first embodiment is applied to the imaging units 10 selected from the N imaging units 10 by the processing from step S500 to step S540 in FIG. May be.
Further, the method of moving the imaging center based on the projection conditions may be applied to a process of determining an initial moving direction of the imaging center in the process in step S130 illustrated in FIGS. In that case, the control unit 16 or the control unit 16a can suppress the movement of the imaging center in a direction different from the direction in which the pattern image enters the imageable area CA.

また、第１実施形態の例２に係るプロジェクター１は、図１０のステップＳ５００からステップＳ５４０までの処理を行う構成に代えて、この一例において説明した投写条件に基づいて、Ｎ台の撮像部１０から投写画像の全体を撮像可能な撮像部１０を選択する構成であってもよい。この場合、第１実施形態の例２に係るプロジェクター１は、投写条件に応じた撮像部１０であって、適した撮像部１０を示す情報を予め記憶しているものとする。   Further, the projector 1 according to Example 2 of the first embodiment replaces the configuration in which the processes from Step S500 to Step S540 in FIG. 10 are performed, and based on the projection conditions described in this example, N imaging units 10 Alternatively, the image capturing unit 10 that can capture the entire projected image may be selected. In this case, it is assumed that the projector 1 according to the second example of the first embodiment is an imaging unit 10 according to the projection condition and stores in advance information indicating the suitable imaging unit 10.

＜第２実施形態＞
以下、本発明の第２実施形態について図面を参照して説明する。図２０は、第２実施形態に係るプロジェクター１の構成例を示す図である。第２実施形態に係るプロジェクター１は、Ｎ台の撮像部１００と、記憶部１２と、入力受付部１３と、制御部１６ｃと、光源制御部１７と、光源１８と、光変調装置１９と、レンズ部２０と、画像入力部２１と、画像処理部２２と、ＯＳＤ処理部２３と、光変調装置駆動部２４と、加速度センサー２５と、切換部２６を備える。なお、第２実施形態では、第１実施形態と同様な構成部には、同じ符号を付して説明を省略する。 Second Embodiment
Hereinafter, a second embodiment of the present invention will be described with reference to the drawings. FIG. 20 is a diagram illustrating a configuration example of the projector 1 according to the second embodiment. The projector 1 according to the second embodiment includes N imaging units 100, a storage unit 12, an input receiving unit 13, a control unit 16c, a light source control unit 17, a light source 18, a light modulation device 19, and the like. A lens unit 20, an image input unit 21, an image processing unit 22, an OSD processing unit 23, a light modulation device driving unit 24, an acceleration sensor 25, and a switching unit 26 are provided. Note that in the second embodiment, the same components as those in the first embodiment are denoted by the same reference numerals, and description thereof is omitted.

以下では、説明の便宜上、Ｎ台の撮像部１００のそれぞれを区別する必要がある場合、これらのそれぞれを撮像部１００−１〜撮像部１００−Ｎと称して説明する。なお、Ｎ台の撮像部１００のうちの一部又は全部は、互いにレンズ特性（レンズサイズ、画角、フォーカス範囲、Ｆ値、透過率等）の異なる撮像レンズを備えていてもよく、互いにレンズ特性の同じ撮像レンズを備えていてもよい。また、Ｎ台の撮像部１００のうちの一部又は全部は、互いに形状や大きさが異なっていてもよく、互いに形状や大きさが同じであってもよい。また、Ｎ台の撮像部１００のうちの一部又は全部は、互いにセンサー特性（センサーサイズ、解像度、カラーフィルター等）の異なる撮像素子を備えていてもよく、互いにセンサー特性の同じ撮像素子を備えていてもよい。   Hereinafter, for convenience of description, when it is necessary to distinguish each of the N imaging units 100, each of these will be referred to as imaging unit 100-1 to imaging unit 100-N. Note that some or all of the N imaging units 100 may include imaging lenses having different lens characteristics (lens size, angle of view, focus range, F value, transmittance, etc.). You may provide the imaging lens with the same characteristic. Further, some or all of the N imaging units 100 may have different shapes and sizes, or may have the same shape and size. In addition, some or all of the N imaging units 100 may include image sensors having different sensor characteristics (sensor size, resolution, color filter, etc.), and include image sensors having the same sensor characteristics. It may be.

この一例において、Ｎ台の撮像部１００のそれぞれが、撮像可能な領域の全体が完全には重ならないようにプロジェクター１に設けられている場合について説明する。例えば、撮像部１００−１の撮像可能領域ＣＡと、撮像部１００−２の撮像可能領域ＣＡとは、一部又は全部が重ならない。なお、他の例としては、互いの撮像可能領域ＣＡの全部が重なっていても良く、例えば、広角カメラと挟角カメラを想定した場合、２つのカメラ光軸が近いと、挟角カメラの撮像領域は、広角カメラの領域に全部重なる。   In this example, a case will be described in which each of the N imaging units 100 is provided in the projector 1 so that the entire imageable area does not completely overlap. For example, part or all of the imageable area CA of the imaging unit 100-1 and the imageable area CA of the imaging unit 100-2 do not overlap. As another example, all of the imageable areas CA of each other may overlap. For example, when a wide-angle camera and a narrow-angle camera are assumed, if the two camera optical axes are close, the image of the narrow-angle camera is captured. The area entirely overlaps the area of the wide-angle camera.

このようにすることで、ある撮像部１００の撮像可能領域ＣＡに投写画像の全体が含まれていない場合、プロジェクター１は、撮像可能領域ＣＡに投写画像の全体が含まれている他の撮像部１００を選択し、選択した撮像部１００によって投写画像の全体を撮像することができる。以下では、説明の便宜上、撮像可能領域ＣＡに投写画像の全体が含まれていない撮像部１００を、第１撮像部と称し、撮像可能領域ＣＡに投写画像の全体が含まれている撮像部１００を、第２撮像部と称して説明する。また、以下では、説明の便宜上、Ｎ台の撮像部１００のうち、プロジェクター１が撮像可能領域ＣＡを撮像するために使用する撮像部１００を、プロジェクター１が使用する撮像部１００と称して説明する。   By doing in this way, when the entire projection image is not included in the image pickup possible area CA of a certain image pickup unit 100, the projector 1 has another image pickup unit in which the entire projection image is included in the image pickup possible area CA. 100 can be selected, and the entire image can be captured by the selected imaging unit 100. Hereinafter, for convenience of explanation, the imaging unit 100 in which the entire projected image is not included in the imageable area CA is referred to as a first imaging unit, and the imaging unit 100 in which the entire projected image is included in the imageable area CA. Will be referred to as a second imaging unit. In the following, for convenience of explanation, of the N imaging units 100, the imaging unit 100 used by the projector 1 to capture the imageable area CA will be referred to as the imaging unit 100 used by the projector 1. .

制御部１６ｃは、撮像制御部１６１と、投写条件取得部１６４と、切換制御部１６９を備える。
投写条件取得部１６４は、プロジェクター１が投写画像を投写している現在の投写条件を示す情報を、例えば、レンズ部２０から取得する。投写条件取得部１６４は、取得部の一例である。なお、投写条件を示す情報が、メニュー画像等を介してユーザーによって入力、又は選択された情報である場合には、投写条件取得部１６４は、投写条件を示す情報を記憶部１２から取得する。
切換制御部１６９は、投写条件取得部１６４が取得した投写条件に基づいて、Ｎ台の撮像部１００から撮像可能領域ＣＡに投写画像の全体が含まれている撮像部１００を第２撮像部として選択する。そして、切換制御部１６９は、切換部２６にプロジェクター１が使用する撮像部を選択した第２撮像部に切り換えさせる。
切換部２６は、切換制御部１６９からの要求に応じて、プロジェクター１が使用する撮像部を切換制御部１６９が選択した第２撮像部に切り換える。 The control unit 16c includes an imaging control unit 161, a projection condition acquisition unit 164, and a switching control unit 169.
The projection condition acquisition unit 164 acquires information indicating the current projection conditions under which the projector 1 is projecting a projection image, for example, from the lens unit 20. The projection condition acquisition unit 164 is an example of an acquisition unit. When the information indicating the projection condition is information input or selected by the user via a menu image or the like, the projection condition acquisition unit 164 acquires information indicating the projection condition from the storage unit 12.
Based on the projection condition acquired by the projection condition acquisition unit 164, the switching control unit 169 uses the imaging unit 100 in which the entire projection image is included in the imageable area CA from the N imaging units 100 as the second imaging unit. select. Then, the switching control unit 169 causes the switching unit 26 to switch to the second imaging unit that has selected the imaging unit used by the projector 1.
In response to a request from the switching control unit 169, the switching unit 26 switches the imaging unit used by the projector 1 to the second imaging unit selected by the switching control unit 169.

図２１は、第２実施形態に係るプロジェクター１により投写画像が投写されたスクリーンＳＣの一例を示す図である。なお、この一例において、プロジェクター１がスクリーンＳＣ上に投写する投写画像を、投写画像Ｐ１１と称して説明する。図２１において、投写画像Ｐ１１は、投写可能領域ＰＡ内に投写されている。点線で囲まれた領域ＣＡ２は、第１撮像部の撮像可能領域ＣＡ２を示す。また、点線で囲まれた領域ＣＡ３は、第２撮像部の撮像可能領域ＣＡ３を示す。図２１に示したように、撮像可能領域ＣＡ２には、投写画像Ｐ１１の一部が含まれているが、投写画像Ｐ１１の全体が含まれていない。一方、撮像可能領域ＣＡ３には、投写画像Ｐ１１の全体が含まれている。例えば、プロジェクター１が現在使用している撮像部が第１撮像部であった場合、プロジェクター１は、Ｎ台の撮像部１００から第２撮像部を選択し、使用する撮像部を選択した第２撮像部に切り換える。   FIG. 21 is a diagram illustrating an example of a screen SC on which a projection image is projected by the projector 1 according to the second embodiment. In this example, a projection image projected by the projector 1 onto the screen SC will be described as a projection image P11. In FIG. 21, the projected image P11 is projected within the projectable area PA. A region CA2 surrounded by a dotted line indicates the imageable region CA2 of the first imaging unit. An area CA3 surrounded by a dotted line indicates an imageable area CA3 of the second imaging unit. As shown in FIG. 21, the imageable area CA2 includes a part of the projection image P11, but does not include the entire projection image P11. On the other hand, the entire image P11 is included in the imageable area CA3. For example, when the imaging unit currently used by the projector 1 is the first imaging unit, the projector 1 selects the second imaging unit from the N imaging units 100 and selects the second imaging unit to be used. Switch to the imaging unit.

次に、図２２を参照して、制御部１６ｃが第２撮像部を選択する処理について説明する。図２２は、制御部１６ｃが第２撮像部を選択する処理の流れの一例を示すフローチャートである。なお、以下では、撮像部１００−１が撮像制御部１６１により撮像可能領域ＣＡを撮像させる撮像部として選択されている場合について説明する。   Next, with reference to FIG. 22, a process in which the control unit 16c selects the second imaging unit will be described. FIG. 22 is a flowchart illustrating an example of a process flow in which the control unit 16c selects the second imaging unit. Hereinafter, a case will be described in which the imaging unit 100-1 is selected by the imaging control unit 161 as an imaging unit that images the imageable area CA.

まず、プロジェクター１は、入力受付部１３から受け付けられたユーザーからの操作に基づいて、スクリーンＳＣ上の投写可能領域ＰＡ内のユーザーが所望する位置に投写画像Ｐ１１を投写する（ステップＳ７００）。次に、投写条件取得部１６４は、レンズ部２０等から投写条件を示す情報として、投写レンズの種類を示す情報と、ズーム倍率を示す情報と、現在の投写レンズの位置を示す情報とを取得する（ステップＳ７１０）。   First, the projector 1 projects the projection image P11 at a position desired by the user in the projectable area PA on the screen SC based on the operation from the user received from the input receiving unit 13 (step S700). Next, the projection condition acquisition unit 164 acquires information indicating the type of the projection lens, information indicating the zoom magnification, and information indicating the current position of the projection lens as information indicating the projection condition from the lens unit 20 or the like. (Step S710).

次に、投写条件取得部１６４は、取得した当該情報と、予め記憶された投写レンズの基準となる位置を示す情報とから、投写レンズのシフト量を算出する（ステップＳ７１５）。なお、投写条件取得部１６４は、ステップＳ７１０においてレンズ部２０から投写レンズのシフト量を、投写条件を表す情報の１つとして取得する構成であってもよい。この場合、レンズ部２０は、シフト量を算出する機能部を備えるものとする。   Next, the projection condition acquisition unit 164 calculates the shift amount of the projection lens from the acquired information and the information indicating the position serving as the reference of the projection lens stored in advance (step S715). The projection condition acquisition unit 164 may be configured to acquire the shift amount of the projection lens from the lens unit 20 as one piece of information representing the projection condition in step S710. In this case, the lens unit 20 includes a functional unit that calculates the shift amount.

次に、切換制御部１６９は、取得した投写レンズの種類を示す情報と、取得したズーム倍率を示す情報と、算出したシフト量と、取得した撮像画像とに基づいて、Ｎ台の撮像部１００から撮像可能領域ＣＡに投写画像Ｐ１１の全体が含まれている撮像部１００を第２撮像部として選択する。そして、切換制御部１６９は、切換部２６にプロジェクター１が使用する撮像部を選択した第２撮像部に切り替えさせる（ステップＳ７２０）。   Next, the switching control unit 169 performs the N imaging units 100 based on the acquired information indicating the type of the projection lens, the acquired information indicating the zoom magnification, the calculated shift amount, and the acquired captured image. The imaging unit 100 in which the entire projected image P11 is included in the imageable area CA is selected as the second imaging unit. Then, the switching control unit 169 causes the switching unit 26 to switch to the second imaging unit that has selected the imaging unit used by the projector 1 (step S720).

より具体的には、切換制御部１６９は、予め決められた第１対応情報を記憶部１２から読み込む。第１対応情報とは、取得した投写レンズの種類を示す情報と、取得したズーム倍率を示す情報と、算出したシフト量と、撮像部１００を識別する情報とが対応付けられた情報である。撮像部１００を識別する情報とは、取得した投写レンズの種類を示す情報と、取得したズーム倍率を示す情報と、算出したシフト量とによって実現する投写画像Ｐ１１が投写される領域の全体を撮像可能な撮像可能領域ＣＡを有する撮像部１００を識別する型番やＩＤ等である。なお、撮像部１００を識別する情報は、これに代えて、他の情報であってもよい。   More specifically, the switching control unit 169 reads first predetermined correspondence information from the storage unit 12. The first correspondence information is information in which information indicating the type of the acquired projection lens, information indicating the acquired zoom magnification, the calculated shift amount, and information for identifying the imaging unit 100 are associated with each other. The information for identifying the imaging unit 100 is the entire area where the projection image P11 realized by the information indicating the type of the acquired projection lens, the information indicating the acquired zoom magnification, and the calculated shift amount is projected. The model number, ID, and the like for identifying the imaging unit 100 having the possible imageable area CA. Note that the information for identifying the imaging unit 100 may be other information instead.

切換制御部１６９は、取得した投写レンズの種類を示す情報と、取得したズーム倍率を示す情報と、算出したシフト量と、読み込んだ第１対応情報とに基づいて、Ｎ台の撮像部１００から第２撮像部を選択する。そして、切換制御部１６９は、切換部２６にプロジェクター１が使用する撮像部を選択した第２撮像部に切り替えさせる。   Based on the acquired information indicating the type of the projection lens, the acquired information indicating the zoom magnification, the calculated shift amount, and the read first correspondence information, the switching control unit 169 receives the information from the N imaging units 100. The second imaging unit is selected. Then, the switching control unit 169 causes the switching unit 26 to switch to the second imaging unit that has selected the imaging unit used by the projector 1.

次に、撮像制御部１６１は、ステップＳ７２０において切り換えられたプロジェクター１が使用する撮像部に撮像可能領域ＣＡを撮像させる（ステップＳ７３０）。次に、制御部１６ｃは、ステップＳ７３０において撮像された撮像画像を、ステップＳ７２０において切り換えられたプロジェクター１が使用する第２撮像部から取得する（ステップＳ７４０）。次に、制御部１６ｃは、ステップＳ７４０において取得した撮像画像を記憶部１２に記憶させる（ステップＳ７５０）。   Next, the imaging control unit 161 causes the imaging unit used by the projector 1 switched in step S720 to image the imageable area CA (step S730). Next, the control unit 16c acquires the captured image captured in step S730 from the second imaging unit used by the projector 1 switched in step S720 (step S740). Next, the control unit 16c stores the captured image acquired in step S740 in the storage unit 12 (step S750).

以上説明したように、第２実施形態に係るプロジェクター１は、投写条件に基づいて、複数の撮像部１００の中から投写条件に適合する撮像部１００を第２撮像部として選択し、選択された第２撮像部により撮像された投写可能領域ＰＡの少なくとも一部を含む画像に基づいて処理を行う。これにより、プロジェクター１は、投写画像の状態に応じて適した画像に基づく処理を行うことができる。   As described above, the projector 1 according to the second embodiment selects and selects the imaging unit 100 that matches the projection condition from the plurality of imaging units 100 as the second imaging unit based on the projection condition. Processing is performed based on an image including at least a part of the projectable area PA imaged by the second imaging unit. Thereby, the projector 1 can perform processing based on an image suitable for the state of the projected image.

また、プロジェクター１は、投写画像の全体を含む撮像画像を撮像可能な第２撮像部を投写条件に適合する撮像部１００として選択する。これにより、プロジェクター１は、投写画像の全体を含む撮像画像に基づく処理を行うことができる。   In addition, the projector 1 selects the second imaging unit that can capture the captured image including the entire projection image as the imaging unit 100 that meets the projection conditions. Thereby, the projector 1 can perform processing based on the captured image including the entire projected image.

また、プロジェクター１は、投写条件と撮像部１００を示す情報とが対応付けられた第１対応情報に基づいて、投写条件に適合する撮像部１００を選択する。これにより、プロジェクターは、投写条件に適合する撮像部１００を選択する際に撮像部１００毎の撮像可能な領域に投写画像の全体が含まれているか否かを算出する処理に係る時間を短縮することができる。   Further, the projector 1 selects the imaging unit 100 that matches the projection condition based on the first correspondence information in which the projection condition and the information indicating the imaging unit 100 are associated with each other. As a result, when the projector selects the imaging unit 100 that matches the projection conditions, the projector reduces the time related to the process of calculating whether or not the entire projection image is included in the imageable region for each imaging unit 100. be able to.

また、プロジェクター１は、装着可能な投写レンズの種類を示す情報と、当該投写レンズによる投写のズーム倍率を示す情報と、現在の当該投写レンズの位置を示す情報とのうちの少なくともいずれか１つを含む投写条件に基づいて、適合する撮像部１００を選択する。これにより、プロジェクター１は、装着可能な投写レンズの種類を示す情報と、当該投写レンズによる投写のズーム倍率を示す情報と、現在の当該投写レンズの位置を示す情報とのうちの少なくともいずれか１つを含む投写条件に基づいて、選択された撮像部１００により撮像された投写可能領域ＰＡの少なくとも一部を含む画像に基づいて処理を行うことができ、その結果、投写画像の状態に応じて適した画像に基づく処理を行うことができる。   The projector 1 also includes at least one of information indicating the type of projection lens that can be mounted, information indicating the zoom magnification of projection by the projection lens, and information indicating the current position of the projection lens. An appropriate imaging unit 100 is selected based on the projection conditions including. Thereby, the projector 1 is at least one of information indicating the type of the projection lens that can be mounted, information indicating the zoom magnification of projection by the projection lens, and information indicating the current position of the projection lens. Processing can be performed based on an image including at least a part of the projectable area PA imaged by the selected imaging unit 100 based on the projection condition including one, and as a result, depending on the state of the projection image Processing based on a suitable image can be performed.

なお、第２実施形態に係るプロジェクター１は、投写条件に基づいて、自装置に備えられているＮ台の撮像部１００毎に、投写条件に適合する撮像部１００であるか否かを判定し、投写条件に適合する撮像部１００が１台も備えられていないと判定した場合、いずれの撮像部１００も選択しない構成であってもよい。この場合、プロジェクター１は、投写条件に適合する撮像部１００が備えられていないことをユーザーに通知する。これにより、プロジェクター１は、投写条件に適合する撮像部１００が備えられていない場合、投写条件に適合する撮像部１００を選択する処理を行い続けてしまうことを抑制することができる。なお、プロジェクター１は、投写条件に適合する撮像部１００が備えられていないことを、メッセージ画像等を投写することによって通知してもよいし、ＬＥＤ（Light Emitting Diode）の点灯状態等によってユーザーに通知してもよい。点灯状態とは、例えば、点灯している状態や点滅している状態等を示す。また、プロジェクター１は、使用する機能をユーザーに選択させるメニュー画像等において、撮像部１００を使用する機能を無効（クレーアウト）にして選択できないようにしてもよい。   Note that the projector 1 according to the second embodiment determines, for each of the N imaging units 100 provided in the apparatus, whether or not the imaging unit 100 conforms to the projection conditions based on the projection conditions. If it is determined that no image capturing unit 100 that meets the projection conditions is provided, no image capturing unit 100 may be selected. In this case, the projector 1 notifies the user that the imaging unit 100 that matches the projection conditions is not provided. Thereby, the projector 1 can suppress continuing the process of selecting the imaging unit 100 that matches the projection condition when the imaging unit 100 that matches the projection condition is not provided. Note that the projector 1 may notify the user that the imaging unit 100 suitable for the projection conditions is not provided by projecting a message image or the like, or may be notified to the user by the lighting state of an LED (Light Emitting Diode) or the like. You may be notified. The lighting state indicates, for example, a lighting state or a blinking state. Further, the projector 1 may be configured such that the function that uses the imaging unit 100 is disabled (clay out) and cannot be selected in a menu image or the like that allows the user to select a function to be used.

また、交換可能な複数の投写レンズ毎の識別情報と、複数の撮像部１００毎の識別情報とを、それぞれの画角に応じて対応付けた対応情報を予め記憶部１２に記憶させておき、投写レンズを交換した後でプロジェクター１を起動する際に、投写条件取得部１６４がプロジェクター１に備えられた投写レンズの識別情報を読み取って取得し、切換制御部１６９が、取得した当該投写レンズの識別情報と対応情報とに基づいて撮像部１００を選択するようにしてもよい。なお、この場合の対応情報は、例えば、投写レンズの投写可能領域ＰＡが撮像部１００の画角に入ることと、撮像画像に含まれる投写画像が所定以上の画素数となることの２つの条件を満たすように対応付けられたものとすることができる。
また、識別情報が備わっていない投写レンズを使用可能とする場合には、投写レンズを交換した後に、メニュー画像等によって手動で撮像部１００を選択するようにしてもよい。この場合には、撮像部１００をメニュー画像から直接選択するようにしてもよいし、装着した投写レンズの種類をメニュー画像等から選択し、対応情報に基づいて撮像部１００を決定するようにしてもよい。
なお、本実施形態では、投写条件を示す情報として、投写レンズの種類を示す情報と、ズーム倍率を示す情報と、投写レンズの位置を示す情報とを取得しているが、これらの情報のすべてを取得する必要はなく、これらのうちの少なくともいずれか１つを取得するようにしてもよいし、これら以外の情報を取得するようにしてもよい。 In addition, correspondence information in which identification information for each of a plurality of interchangeable projection lenses and identification information for each of a plurality of imaging units 100 is associated with each angle of view is stored in the storage unit 12 in advance. When starting up the projector 1 after replacing the projection lens, the projection condition acquisition unit 164 reads and acquires the identification information of the projection lens provided in the projector 1, and the switching control unit 169 acquires the acquired projection lens. The imaging unit 100 may be selected based on the identification information and the correspondence information. The correspondence information in this case includes, for example, two conditions that the projectable area PA of the projection lens falls within the angle of view of the imaging unit 100 and that the projection image included in the captured image has a predetermined number of pixels or more. It is possible to associate with each other.
Further, when a projection lens without identification information can be used, the imaging unit 100 may be manually selected by a menu image or the like after the projection lens is replaced. In this case, the imaging unit 100 may be directly selected from the menu image, or the type of the mounted projection lens is selected from the menu image or the like, and the imaging unit 100 is determined based on the correspondence information. Also good.
In the present embodiment, information indicating the type of projection lens, information indicating the zoom magnification, and information indicating the position of the projection lens are acquired as information indicating the projection condition. It is not necessary to acquire the at least one of them, and at least one of them may be acquired, or information other than these may be acquired.

＜第３実施形態＞
以下、本発明の第３実施形態について図面を参照して説明する。図２３は、第３実施形態に係るプロジェクター１により投写画像Ｐ１２が投写されているスクリーンＳＣの一例を示す図である。プロジェクター１は、レンズシフト機能によりユーザーが所望する位置に投写画像Ｐ１２を投写する。また、プロジェクター１は、投写可能領域ＰＡ内に投写画像Ｐ１２を投写する。図２３において、点線に囲まれた領域は、撮像部１０による撮像可能領域ＣＡを示す。ここで、第３実施形態に係るプロジェクター１が備える撮像部１０は、図１に示したように、投写可能領域ＰＡの全体を含む領域を撮像可能な広角レンズを撮像レンズとして備える場合について説明する。 <Third Embodiment>
Hereinafter, a third embodiment of the present invention will be described with reference to the drawings. FIG. 23 is a diagram illustrating an example of the screen SC on which the projection image P12 is projected by the projector 1 according to the third embodiment. The projector 1 projects the projection image P12 at a position desired by the user by the lens shift function. Further, the projector 1 projects the projection image P12 within the projectable area PA. In FIG. 23, an area surrounded by a dotted line represents an imageable area CA by the imaging unit 10. Here, the case where the imaging unit 10 included in the projector 1 according to the third embodiment includes a wide-angle lens that can capture an area including the entire projectable area PA as an imaging lens as illustrated in FIG. 1 will be described. .

すなわち、プロジェクター１は、撮像部１００により撮像可能領域ＣＡ内に含まれる投写可能領域ＰＡの全体を含む領域を撮像する。図２４は、撮像部１００により撮像された撮像画像Ｐ１３の一例を示す図である。図２４において、一点鎖線で囲まれた領域は、投写可能領域ＰＡを示す。また、点線で囲まれた領域は、投写画像Ｐ１２を示す。図２４に示したように、撮像画像Ｐ１３には、投写可能領域ＰＡの全体が含まれる。   That is, the projector 1 images an area including the entire projectable area PA included in the imageable area CA by the imaging unit 100. FIG. 24 is a diagram illustrating an example of a captured image P13 captured by the imaging unit 100. In FIG. 24, a region surrounded by a one-dot chain line indicates a projectable region PA. A region surrounded by a dotted line indicates the projection image P12. As shown in FIG. 24, the captured image P13 includes the entire projectable area PA.

ここで、図２３に示したように、投写可能領域ＰＡの全体を含む領域を撮像可能な広角レンズを撮像レンズとして備える場合、撮像画像Ｐ１３には、投写画像Ｐ１２ではない領域が含まれる。このような領域は、例えば、撮像画像Ｐ１３に基づいて投写画像Ｐ２の画質調整等を行う場合、撮像画像Ｐ１３から投写画像Ｐ１２を検出する際に不要な領域となる。以下では、説明の便宜上、当該領域を不要領域と称して説明する。撮像画像Ｐ１３から投写画像Ｐ１２を検出する処理は、不要領域が大きければ大きいほど処理に係る負担が大きくなり、より長い処理時間を要してしまう。また、不要領域の大きさに合わせて撮像画像の解像度を大きくしすぎると、撮像画像の解像度が、制御部１６ｄ（図２６参照）に入力可能な解像度を超えてしまう場合がある。この場合、制御部１６ｄは、撮像部１００が出力する撮像画像を正しく受け取れなくなってしまう。なお、制御部１６ｄに入力される撮像画像の解像度の制限としては、回路的に解像度が制限される場合や、入力される画像情報（１フレーム分の画像情報）をメモリーに置く際のメモリー容量に制限がある場合等がある。   Here, as shown in FIG. 23, when a wide-angle lens that can capture an area including the entire projectable area PA is provided as an imaging lens, the captured image P13 includes an area that is not the projected image P12. Such an area becomes an unnecessary area when detecting the projection image P12 from the captured image P13, for example, when adjusting the image quality of the projection image P2 based on the captured image P13. Hereinafter, for convenience of explanation, the area is referred to as an unnecessary area. In the process of detecting the projected image P12 from the captured image P13, the larger the unnecessary area, the greater the burden on the process, and the longer the processing time is required. In addition, if the resolution of the captured image is excessively increased in accordance with the size of the unnecessary area, the resolution of the captured image may exceed the resolution that can be input to the control unit 16d (see FIG. 26). In this case, the control unit 16d cannot correctly receive the captured image output by the imaging unit 100. Note that the resolution of the captured image input to the control unit 16d is limited when the resolution is limited in terms of circuit or when the input image information (image information for one frame) is stored in the memory. There are cases where there is a limit.

そこで、第３実施形態に係るプロジェクター１は、この不要領域の一部又は全部を含まない画像を取得する。以下では、説明の便宜上、当該画像を処理領域画像と称して説明する。図２５は、プロジェクター１が取得する処理領域画像の一例を示す図である。図２５において、撮像画像Ｐ１３の内側のハッチングされた領域は、不要領域ＮＡを示す。また、撮像画像Ｐ１３の内側のハッチングされていない領域を含む画像は、処理領域画像Ｐ１４を示す。処理領域画像Ｐ１４には、少なくとも投写画像Ｐ１２の全体が含まれる。図２５に示した例の場合、処理領域画像Ｐ１４には、投写画像Ｐ１２の全体のみが含まれている。なお、処理領域画像Ｐ１４には、例えば、投写画像Ｐ１２を含む投写画像Ｐ１２よりも所定倍率だけ大きな領域が含まれてもよい。所定倍率は、例えば、１．１倍等である。なお、所定倍率は、これに代えて、他の倍率であってもよい。   Therefore, the projector 1 according to the third embodiment acquires an image that does not include a part or all of the unnecessary area. Hereinafter, for convenience of explanation, the image will be referred to as a processing region image. FIG. 25 is a diagram illustrating an example of a processing region image acquired by the projector 1. In FIG. 25, the hatched area inside the captured image P13 indicates an unnecessary area NA. An image including an unhatched area inside the captured image P13 indicates a processing area image P14. The processing area image P14 includes at least the entire projection image P12. In the case of the example shown in FIG. 25, the processing region image P14 includes only the entire projection image P12. Note that the processing region image P14 may include a region that is larger than the projection image P12 including the projection image P12 by a predetermined magnification, for example. The predetermined magnification is, for example, 1.1 times. The predetermined magnification may be another magnification instead.

プロジェクター１は、図２５に示したような処理領域画像Ｐ１４を取得し、取得した処理領域画像Ｐ１４に基づいて、例えば、画質調整等の処理を投写画像Ｐ１２に対して行う。これにより、プロジェクター１は、画像を記憶するのに要する記憶領域を削減することができる。また、プロジェクター１は、処理時間を抑制することができ、その結果、画質調整等において所望の結果が得られるまでの時間を短縮できるとともに、処理に係る電力量を抑制することができる。また、プロジェクター１は、処理時間を抑制することができるため、限られた時間内において撮像回数を増やすことができたり、面内及び時間軸での平均化処理等のノイズ低減処理を行う時間を確保することができたりするため、処理の品質や精度を向上することができる。
以下では、プロジェクター１が処理領域画像Ｐ１４を取得する処理について詳しく説明する。 The projector 1 acquires the processing area image P14 as shown in FIG. 25, and performs processing such as image quality adjustment on the projection image P12 based on the acquired processing area image P14. Thereby, the projector 1 can reduce the storage area required to store the image. Further, the projector 1 can suppress the processing time, and as a result, can shorten the time until a desired result is obtained in image quality adjustment and the like, and can suppress the amount of power related to the processing. Further, since the projector 1 can suppress the processing time, the number of times of imaging can be increased within a limited time, or the time for performing noise reduction processing such as averaging processing in the plane and on the time axis can be increased. The quality and accuracy of processing can be improved.
Hereinafter, the process in which the projector 1 acquires the processing area image P14 will be described in detail.

次に、図２６を参照して、第３実施形態に係るプロジェクター１の構成について説明する。図２６は、第３実施形態に係るプロジェクター１の構成例を示す図である。プロジェクター１は、記憶部１２と、入力受付部１３と、制御部１６ｄと、光源制御部１７と、光源１８と、光変調装置１９と、レンズ部２０と、画像入力部２１と、画像処理部２２と、ＯＳＤ処理部２３と、光変調装置駆動部２４と、撮像部１００を備える。なお、第３実施形態では、第１実施形態と同様な構成部には、同じ符号を付して説明を省略する。   Next, the configuration of the projector 1 according to the third embodiment will be described with reference to FIG. FIG. 26 is a diagram illustrating a configuration example of the projector 1 according to the third embodiment. The projector 1 includes a storage unit 12, an input receiving unit 13, a control unit 16d, a light source control unit 17, a light source 18, a light modulation device 19, a lens unit 20, an image input unit 21, and an image processing unit. 22, an OSD processing unit 23, a light modulation device driving unit 24, and an imaging unit 100. Note that in the third embodiment, components similar to those in the first embodiment are denoted by the same reference numerals, and description thereof is omitted.

制御部１６ｄは、撮像制御部１６１と、投写条件取得部１６４と、撮像画像処理部１６６と、処理領域画像取得部１６８を備える。
撮像画像処理部１６６は、投写条件取得部１６４が取得した投写条件と、撮像部１００から取得した撮像画像とに基づいて、処理領域画像を生成する。撮像画像処理部１６６は、特定部の一例である。
処理領域画像取得部１６８は、撮像画像処理部１６６が生成した処理領域画像を取得する。 The control unit 16d includes an imaging control unit 161, a projection condition acquisition unit 164, a captured image processing unit 166, and a processing region image acquisition unit 168.
The captured image processing unit 166 generates a processing region image based on the projection condition acquired by the projection condition acquisition unit 164 and the captured image acquired from the imaging unit 100. The captured image processing unit 166 is an example of a specifying unit.
The processing area image acquisition unit 168 acquires the processing area image generated by the captured image processing unit 166.

次に、図２７を参照して、制御部１６ｄが処理領域画像を取得する処理について説明する。図２７は、制御部１６ｄが処理領域画像を取得する処理の流れの一例を示すフローチャートである。
まず、プロジェクター１は、入力受付部１３から受け付けられたユーザーからの操作に基づいて、スクリーンＳＣ上の投写可能領域ＰＡ内のユーザーが所望する位置に投写画像Ｐ２を投写する（ステップＳ８００）。以下では、撮像部１００の撮像可能領域ＣＡの内側に投写可能領域ＰＡの全体が含まれている場合について説明する。 Next, a process in which the control unit 16d acquires a processing area image will be described with reference to FIG. FIG. 27 is a flowchart illustrating an example of a processing flow in which the control unit 16d acquires a processing region image.
First, the projector 1 projects the projection image P2 at a position desired by the user in the projectable area PA on the screen SC based on the operation from the user received from the input receiving unit 13 (step S800). Hereinafter, a case where the entire projectable area PA is included inside the imageable area CA of the imaging unit 100 will be described.

次に、投写条件取得部１６４は、制御部１６ｄにより制御される各機能部から投写画像Ｐ２を投写している現在の投写条件を示す情報を取得する（ステップＳ８１０）。以下では、一例として、投写レンズの種類を示す情報と、投写画像Ｐ２が投写された際のズーム倍率を示す情報と、現在の投写レンズの位置を示す情報との３つの情報が投写条件を示す情報に含まれる場合について説明する。投写レンズの種類を示す情報とは、例えば、投写レンズを識別する型番やＩＤ等である。なお、投写レンズの種類を示す情報は、これに代えて、他の情報であってもよい。   Next, the projection condition acquisition unit 164 acquires information indicating the current projection conditions for projecting the projection image P2 from each functional unit controlled by the control unit 16d (step S810). In the following, as an example, three types of information, ie, information indicating the type of the projection lens, information indicating the zoom magnification when the projection image P2 is projected, and information indicating the current position of the projection lens indicate the projection conditions. A case where the information is included will be described. The information indicating the type of the projection lens is, for example, a model number or ID for identifying the projection lens. Note that the information indicating the type of the projection lens may be other information instead.

次に、投写条件取得部１６４は、取得した当該情報と、予め記憶された投写レンズの基準となる位置を示す情報とから、投写レンズのシフト量を算出する（ステップＳ８２０）。なお、投写条件取得部１６４は、ステップＳ８２０に代えて、ステップＳ８１０においてレンズ部２０から投写レンズのシフト量を、投写条件を表す情報の１つとして取得する構成であってもよい。この場合、レンズ部２０は、シフト量を算出する機能部を備えるものとする。   Next, the projection condition acquisition unit 164 calculates the shift amount of the projection lens from the acquired information and the information indicating the position serving as the reference of the projection lens stored in advance (step S820). Note that the projection condition acquisition unit 164 may be configured to acquire the shift amount of the projection lens from the lens unit 20 as one piece of information representing the projection conditions in step S810 instead of step S820. In this case, the lens unit 20 includes a functional unit that calculates the shift amount.

次に、撮像制御部１６１は、撮像部１００に撮像可能領域ＣＡを撮像させる（ステップＳ８３０）。次に、制御部１６ｄは、撮像部１００から撮像画像を取得する（ステップＳ８３０）。次に、撮像画像処理部１６６は、取得した投写レンズの種類を示す情報と、取得したズーム倍率を示す情報と、算出したシフト量と、取得した撮像画像とに基づいて、撮像画像のある一部を残して他の一部を消去する処理を行い（クリッピング処理を行い）、当該処理を終えた後の画像を処理領域画像として生成する（ステップＳ８５０）。   Next, the imaging control unit 161 causes the imaging unit 100 to capture an imageable area CA (step S830). Next, the control unit 16d acquires a captured image from the imaging unit 100 (step S830). Next, the captured image processing unit 166 has one captured image based on the acquired information indicating the type of the projection lens, the acquired information indicating the zoom magnification, the calculated shift amount, and the acquired captured image. A process for erasing the other part is performed (clipping process is performed), and an image after the process is generated as a processing region image (step S850).

より具体的には、撮像画像処理部１６６は、予め決められた第２対応情報を記憶部１２から読み込む。第２対応情報とは、取得した投写レンズの種類を示す情報と、取得したズーム倍率を示す情報と、算出したシフト量と、撮像画像のうちの消去せずに残す領域を示す情報とが対応付けられた情報である。撮像画像処理部１６６は、取得した投写レンズの種類を示す情報と、取得したズーム倍率を示す情報と、算出したシフト量と、読み込んだ第２対応情報とに基づいて、撮像画像のうちの消去せずに残す領域を処理領域として特定する。そして、撮像画像処理部１６６は、特定した処理領域を示す情報と、取得した撮像画像とに基づいて、撮像画像から処理領域のみを残し、他の領域（すなわち、不要領域）を消去した処理領域画像を生成（抽出）する。   More specifically, the captured image processing unit 166 reads second predetermined correspondence information from the storage unit 12. The second correspondence information corresponds to the information indicating the type of the acquired projection lens, the information indicating the acquired zoom magnification, the calculated shift amount, and the information indicating the area to be left in the captured image without being erased. It is the attached information. The captured image processing unit 166 erases the captured image based on the acquired information indicating the type of the projection lens, the acquired information indicating the zoom magnification, the calculated shift amount, and the read second correspondence information. An area to be left without being specified is specified as a processing area. Then, the captured image processing unit 166 leaves only the processing region from the captured image based on the information indicating the identified processing region and the acquired captured image, and deletes other regions (that is, unnecessary regions). Generate (extract) an image.

処理領域画像取得部１６８は、ステップＳ８５０において撮像画像処理部１６６が生成した処理領域画像を撮像画像処理部１６６から取得する。そして、処理領域画像取得部１６８は、取得した処理領域画像を記憶部１２に記憶させる（ステップＳ８６０）。
このように、ステップＳ８００からステップＳ８６０までの処理によって、制御部１６ｄは、処理領域画像を記憶部１２に記憶させる。その結果、制御部１６ｄは、記憶部１２に記憶された処理領域画像に基づく処理を行うことができる。なお、処理領域画像は、第１実施形態において説明した、適した撮像画像の一例である。また、制御部１６ｄは、処理部の一例である。 The processing region image acquisition unit 168 acquires the processing region image generated by the captured image processing unit 166 from the captured image processing unit 166 in step S850. Then, the processing area image acquisition unit 168 stores the acquired processing area image in the storage unit 12 (step S860).
As described above, the control unit 16d stores the processing region image in the storage unit 12 through the processing from step S800 to step S860. As a result, the control unit 16d can perform processing based on the processing region image stored in the storage unit 12. The processing area image is an example of a suitable captured image described in the first embodiment. The control unit 16d is an example of a processing unit.

また、ステップＳ８５０において、撮像画像処理部１６６は、第２対応情報に基づいて処理領域を特定する構成に代えて、取得した投写レンズの種類を示す情報と、取得したズーム倍率を示す情報と、算出したシフト量とに基づいて、処理領域の位置と大きさを算出する構成であってもよい。   In step S850, the captured image processing unit 166 replaces the configuration for specifying the processing region based on the second correspondence information, information indicating the acquired type of the projection lens, information indicating the acquired zoom magnification, The configuration may be such that the position and size of the processing region are calculated based on the calculated shift amount.

また、撮像画像処理部１６６は、制御部１６ｄが備える構成に代えて、撮像部１０が備える構成であってもよい。その場合、ステップＳ８５０における処理は、撮像部１０により行われる。また、処理領域画像取得部１６８は、撮像部１０が生成した処理領域画像を取得する。これにより、プロジェクター１は、撮像部１０が撮像画像処理部１６６を備えていた場合であっても、同様の効果を得ることができる。   Further, the captured image processing unit 166 may have a configuration provided in the imaging unit 10 instead of the configuration provided in the control unit 16d. In that case, the processing in step S850 is performed by the imaging unit 10. Further, the processing region image acquisition unit 168 acquires the processing region image generated by the imaging unit 10. Accordingly, the projector 1 can obtain the same effect even when the imaging unit 10 includes the captured image processing unit 166.

以上説明したように、第３実施形態に係るプロジェクター１は、投写条件に基づいて、撮像部１００が撮像した撮像画像から投写可能領域ＰＡを含む処理領域画像として、処理領域画像を特定し、特定された処理領域画像に基づいて処理を行う。これにより、プロジェクター１は、投写画像の状態に応じて適した画像に基づく処理を行うことができる。   As described above, the projector 1 according to the third embodiment specifies and specifies a processing region image as a processing region image including the projectable region PA from the captured image captured by the imaging unit 100 based on the projection conditions. Processing is performed based on the processed region image. Thereby, the projector 1 can perform processing based on an image suitable for the state of the projected image.

また、プロジェクター１は、投写条件を示す情報と処理領域画像を示す情報とが対応付けられた第２対応情報と、投写条件取得部１６４が取得した投写条件とに基づいて、撮像画像から処理領域画像を特定する。これにより、プロジェクター１は、撮像画像から処理領域画像として特定する領域の位置と大きさを算出する処理に係る時間を短縮することができる。   In addition, the projector 1 can process the processing region from the captured image based on the second correspondence information in which the information indicating the projection condition and the information indicating the processing region image are associated with each other and the projection condition acquired by the projection condition acquisition unit 164. Identify the image. Thereby, the projector 1 can shorten the time concerning the process which calculates the position and magnitude | size of the area | region specified as a process area image from a captured image.

また、プロジェクター１は、投写条件取得部１６４が取得した投写条件に基づいて、撮像画像から処理領域画像を特定するための処理領域の位置と大きさを算出する。これにより、プロジェクター１は、算出した処理領域の位置と大きさに基づいて、撮像画像から処理領域画像を適した画像として特定することができる。   In addition, the projector 1 calculates the position and size of the processing region for specifying the processing region image from the captured image based on the projection condition acquired by the projection condition acquisition unit 164. Thereby, the projector 1 can specify the processing region image as a suitable image from the captured image based on the calculated position and size of the processing region.

また、プロジェクター１は、撮像画像から、投写画像の全体を含み、撮像画像内の投写画像の大きさに所定倍率を乗じた大きさの領域を処理領域画像として特定する。これにより、プロジェクター１は、撮像画像内の投写画像の全体を確実に含む処理領域画像を、適した画像として特定することができる。   In addition, the projector 1 specifies, from the captured image, an area including the entire projected image and having a size obtained by multiplying the size of the projected image in the captured image by a predetermined magnification as the processing area image. Thereby, the projector 1 can specify the processing region image that surely includes the entire projected image in the captured image as a suitable image.

また、プロジェクター１は、装着可能な投写レンズの種類を示す情報と、当該投写レンズによる投写のズーム倍率を示す情報と、現在の当該投写レンズの位置を示す情報とのうちの少なくともいずれか１つを含む投写条件に基づいて、撮像画像から投写面を含む処理領域画像を特定する。これにより、プロジェクター１は、装着可能な投写レンズの種類を示す情報と、当該投写レンズによる投写のズーム倍率を示す情報と、現在の当該投写レンズの位置を示す情報とのうちの少なくともいずれか１つを含む投写条件に基づいて、撮像画像から処理領域画像を適した画像として特定することができる。   The projector 1 also includes at least one of information indicating the type of projection lens that can be mounted, information indicating the zoom magnification of projection by the projection lens, and information indicating the current position of the projection lens. A processing region image including a projection plane is identified from the captured image based on a projection condition including Thereby, the projector 1 is at least one of information indicating the type of the projection lens that can be mounted, information indicating the zoom magnification of projection by the projection lens, and information indicating the current position of the projection lens. The processing region image can be identified as a suitable image from the captured image based on the projection conditions including the two.

上記の第３実施形態では、処理領域画像Ｐ１４に、少なくとも投写画像Ｐ１２の全体が含まれるようにしているが、撮像画像に基づく処理（画質調整等）に最低限必要となる領域が含まれていれば、投写画像Ｐ１２の全体が含まれていなくてもよい。また、処理領域画像Ｐ１４は、制御部１６ｄに入力可能な解像度以内で、撮像画像に基づく処理（画質調整等）に最低限必要となる領域を含む所定サイズの画像としてもよい。この場合の所定サイズは、製造時の組み立てばらつき等を考慮したマージンを含んでいることが望ましい。   In the third embodiment, the processing area image P14 includes at least the entire projected image P12. However, the processing area image P14 includes a minimum area necessary for processing (image quality adjustment, etc.) based on the captured image. If so, the entire projection image P12 may not be included. Further, the processing area image P14 may be an image of a predetermined size including an area that is at least necessary for processing (image quality adjustment or the like) based on a captured image within a resolution that can be input to the control unit 16d. In this case, it is desirable that the predetermined size includes a margin in consideration of assembly variations during manufacturing.

なお、第３実施形態では、投写条件取得部１６４は、投写条件を示す情報として、投写レンズの種類を示す情報と、ズーム倍率を示す情報と、投写レンズの位置を示す情報とを取得しているが、これらの情報をすべて取得する必要はなく、これらのうちの少なくともいずれか１つを取得するようにしてもよいし、これら以外の情報を取得するようにしてもよい。   In the third embodiment, the projection condition acquisition unit 164 acquires information indicating the type of the projection lens, information indicating the zoom magnification, and information indicating the position of the projection lens as information indicating the projection condition. However, it is not necessary to acquire all of these pieces of information, and at least one of these pieces of information may be obtained, or other pieces of information may be obtained.

上記の第３実施形態に代えて、制御部１６ｄが、取得した投写条件に基づいて処理領域を特定した後、撮像部１００が撮像した撮像画像のうち処理領域に含まれる画像のみを出力するよう撮像部１００を制御するようにしてもよい。この場合、制御部１６ｄは、撮像部１００から取得した画像を処理領域画像として記憶部１２に記憶させ、記憶させた処理領域画像に対して画質調整等の処理を行う。   Instead of the third embodiment, the control unit 16d specifies the processing region based on the acquired projection condition, and then outputs only the image included in the processing region among the captured images captured by the imaging unit 100. The imaging unit 100 may be controlled. In this case, the control unit 16d stores the image acquired from the imaging unit 100 in the storage unit 12 as a processing region image, and performs processing such as image quality adjustment on the stored processing region image.

上記の第３実施形態において、取得した撮像画像のある一部を残して他の一部を消去する処理（クリッピング処理）は必須ではない。例えば、制御部１６ｄが、取得した投写条件に基づいて処理領域を特定し、撮像部１００が撮像可能領域ＣＡを撮像した撮像画像を記憶部１２に記憶させた後に、記憶部１２に記憶した撮像画像のうち、特定した処理領域に対応する範囲の画像に対して、画質調整等の処理を行うようにしてもよい。   In the third embodiment described above, a process (clipping process) for deleting a part of the acquired captured image and leaving the other part is not essential. For example, the control unit 16d specifies a processing area based on the acquired projection condition, and the imaging unit 100 stores the captured image obtained by imaging the imageable area CA in the storage unit 12, and then stores the captured image in the storage unit 12. Among the images, processing such as image quality adjustment may be performed on an image in a range corresponding to the specified processing region.

上記の第３実施形態に代えて、制御部１６ｄが、取得した投写条件に基づいて処理領域を特定した後、さらに処理領域を最適化する処理を行うようにしてもよい。例えば、制御部１６ｄは、投写条件に基づいて処理領域を暫定的に特定した後に、所定のテストパターンを投写させた状態で撮像可能領域ＣＡを撮像させた撮像画像を記憶部１２に記憶させる。その後、制御部１６ｄは、撮像画像のうち、暫定的な処理領域の範囲内を画像解析して、最低限必要な領域のみを含む最終的な処理領域を特定する。なお、所定のテストパターンとしては、例えば、全白画像を採用することができる。また、全白画像と全黒画像を順に投写、撮像し、双方の差分に基づいて最終的な処理領域を特定するようにしてもよい。   Instead of the third embodiment described above, the control unit 16d may perform processing for further optimizing the processing region after specifying the processing region based on the acquired projection condition. For example, the control unit 16d temporarily specifies the processing region based on the projection condition, and then stores the captured image obtained by capturing the imageable region CA in a state where a predetermined test pattern is projected in the storage unit 12. After that, the control unit 16d analyzes the image of the provisional processing area within the captured image, and specifies the final processing area including only the minimum necessary area. As the predetermined test pattern, for example, an all white image can be adopted. Alternatively, an all white image and an all black image may be projected and captured in order, and the final processing area may be specified based on the difference between the two images.

以上、この発明の実施形態を、図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、この発明の要旨を逸脱しない限り、変更、置換、削除等されてもよい。   The embodiment of the present invention has been described in detail with reference to the drawings. However, the specific configuration is not limited to this embodiment, and changes, substitutions, deletions, and the like are possible without departing from the gist of the present invention. May be.

１ プロジェクター、１０、１０−１、１０−Ｎ、１００、１００−１、１００−Ｎ 撮像部、１２ 記憶部、１３ 入力受付部、１６、１６ａ、１６ｃ、１６ｄ 制御部、１７ 光源制御部、１８ 光源、１９ 光変調装置、２０ レンズ部、２１ 画像入力部、２２ 画像処理部、２３ ＯＳＤ処理部、２４ 光変調装置駆動部、２５ 加速度センサー、１０１、１０１−１、１０１−Ｎ 移動機構、１６１ 撮像制御部、１６２ 撮像部選択部、１６３ 撮像中心移動制御部、１６４ 投写条件取得部、１６５ 評価値検出部、１６７ 判定部、１６８ 処理領域画像取得部、１６９ 切換制御部 DESCRIPTION OF SYMBOLS 1 Projector 10, 10-1, 10-N, 100, 100-1, 100-N Image pick-up part, 12 Storage part, 13 Input reception part, 16, 16a, 16c, 16d Control part, 17 Light source control part, 18 Light source, 19 light modulation device, 20 lens unit, 21 image input unit, 22 image processing unit, 23 OSD processing unit, 24 light modulation device drive unit, 25 acceleration sensor, 101, 101-1, 101-N moving mechanism, 161 Imaging control unit, 162 Imaging unit selection unit, 163 Imaging center movement control unit, 164 Projection condition acquisition unit, 165 Evaluation value detection unit, 167 Determination unit, 168 Processing region image acquisition unit, 169 Switching control unit

Claims (12)

プロジェクターであって、
投写面にパターン画像を投写する投写部と、
前記投写面の少なくとも一部を含む領域を撮像する撮像部と、
前記撮像部の撮像中心を移動する移動部と、
前記撮像部が撮像する撮像画像に占める前記パターン画像の割合を表す値である評価値を検出する評価値検出部と、
前記評価値検出部が検出する前記評価値が所定条件を満たすまで、繰り返し前記撮像中心を移動可能な複数の位置の一部又は全部のそれぞれに移動させ、前記評価値が前記所定条件を満たすように前記移動部を制御する制御部と、
を備え、
前記パターン画像の前記評価値が前記所定条件を満たす状態で撮像された前記撮像画像に基づいて処理を行う、
プロジェクター。 A projector,
A projection unit that projects a pattern image onto the projection surface;
An imaging unit for imaging an area including at least a part of the projection plane;
A moving unit that moves an imaging center of the imaging unit;
An evaluation value detection unit that detects an evaluation value that is a value representing a ratio of the pattern image to a captured image captured by the imaging unit;
Until the evaluation value detected by the evaluation value detection unit satisfies a predetermined condition, the imaging center is repeatedly moved to some or all of a plurality of movable positions so that the evaluation value satisfies the predetermined condition. A control unit for controlling the moving unit;
With
Processing based on the captured image captured in a state where the evaluation value of the pattern image satisfies the predetermined condition;
projector. プロジェクターであって、
投写面に投写画像を投写する投写部と、
前記投写面の少なくとも一部を含む領域を撮像する撮像部と、
前記撮像部の撮像中心を移動する移動部と、
複数の所定の図形を含むパターン画像を前記投写部が投写しているときに、前記移動部により前記撮像中心を移動させながら前記撮像部に撮像画像を撮像させ、前記撮像画像に含まれる前記図形の数が所定条件を満たすように前記移動部を制御する制御部と、
を備え、
前記所定条件を満たす状態で撮像された前記撮像画像に基づいて処理を行う、
プロジェクター。 A projector,
A projection unit that projects a projected image on a projection surface;
An imaging unit for imaging an area including at least a part of the projection plane;
A moving unit that moves an imaging center of the imaging unit;
When the projection unit is projecting a pattern image including a plurality of predetermined figures, the figure is included in the captured image by causing the imaging unit to capture a captured image while moving the imaging center by the moving unit. A control unit that controls the moving unit so that the number of
With
Processing based on the captured image captured in a state satisfying the predetermined condition;
projector. プロジェクターであって、
投写面に投写画像を投写する投写部と、
前記投写面の少なくとも一部を含む領域を撮像する撮像部と、
前記撮像部の撮像中心を移動する移動部と、
前記移動部により前記撮像中心を移動させながら前記撮像部に撮像画像を撮像させ、前記撮像画像に占める前記投写画像の割合が所定条件を満たすように前記移動部を制御し、前記投写画像の前記割合が前記所定条件を満たすか否かをパターンマッチングによって判定する制御部と、
を備え、
前記所定条件を満たす状態で撮像された前記撮像画像に基づいて処理を行う、
プロジェクター。 A projector,
A projection unit that projects a projected image on a projection surface;
An imaging unit for imaging an area including at least a part of the projection plane;
A moving unit that moves an imaging center of the imaging unit;
The moving unit causes the imaging unit to capture a captured image while moving the imaging center, and controls the moving unit so that a ratio of the projected image in the captured image satisfies a predetermined condition. A control unit that determines by pattern matching whether a ratio satisfies the predetermined condition;
With
Processing based on the captured image captured in a state satisfying the predetermined condition;
projector. プロジェクターであって、
投写面に投写画像を投写する投写部と、
前記投写面の少なくとも一部を含む領域を撮像する複数の撮像部と、
前記撮像部の撮像中心を移動する移動部と、
前記移動部により前記撮像中心を移動させながら前記撮像部に撮像画像を撮像させ、前記撮像画像に占める前記投写画像の割合が所定条件を満たすように前記移動部を制御し、前記投写画像の前記割合に基づいて撮像に用いる前記撮像部を選択する制御部と、
を備え、
前記所定条件を満たす状態で、選択された前記撮像部により撮像された前記撮像画像に基づいて処理を行う、
プロジェクター。 A projector,
A projection unit that projects a projected image on a projection surface;
A plurality of imaging units for imaging a region including at least a part of the projection plane;
A moving unit that moves an imaging center of the imaging unit;
The moving unit causes the imaging unit to capture a captured image while moving the imaging center, and controls the moving unit so that a ratio of the projected image in the captured image satisfies a predetermined condition. A control unit that selects the imaging unit to be used for imaging based on a ratio;
With
Processing based on the captured image captured by the selected imaging unit in a state that satisfies the predetermined condition;
projector. 前記移動部は、前記撮像部の向きを変えることにより前記撮像中心を移動する、
請求項１から４のうちいずれか一項に記載のプロジェクター。 The moving unit moves the imaging center by changing the orientation of the imaging unit.
The projector according to any one of claims 1 to 4. 前記撮像部は、レンズと、光検出部とを備え、
前記移動部は、前記光検出部に対する前記レンズの相対位置を変化させることにより前記撮像中心を移動させる、
請求項１から５のうちいずれか一項に記載のプロジェクター。 The imaging unit includes a lens and a light detection unit,
The moving unit moves the imaging center by changing a relative position of the lens with respect to the light detection unit;
The projector according to any one of claims 1 to 5. 前記制御部は、前記投写部の投写条件を取得し、取得した前記投写条件に基づいて、前記移動部に移動させる前記撮像中心の位置を決定する、
請求項１から６のうちいずれか一項に記載のプロジェクター。 The control unit acquires the projection condition of the projection unit, and determines the position of the imaging center to be moved to the moving unit based on the acquired projection condition.
The projector according to any one of claims 1 to 6. 前記制御部は、取得した前記投写条件に基づいて、初期的に前記移動部が前記撮像中心を移動する方向を決定する、
請求項７に記載のプロジェクター。 The control unit initially determines a direction in which the moving unit moves the imaging center based on the acquired projection condition.
The projector according to claim 7. 投写面にパターン画像を投写部により投写し、
前記投写面の少なくとも一部を含む領域を撮像部により撮像し、
前記撮像部の撮像中心を移動部により移動し、
前記撮像部が撮像する撮像画像に占める前記パターン画像の割合を表す値である評価値を検出し、
前記評価値が所定条件を満たすまで、繰り返し前記撮像中心を移動可能な複数の位置の一部又は全部のそれぞれに移動させ、
前記評価値が前記所定条件を満たすように前記移動部を制御し、
前記パターン画像の前記評価値が前記所定条件を満たす状態で撮像された前記撮像画像に基づいて処理を行う、
制御方法。 Project a pattern image onto the projection surface using the projection unit.
An area including at least a part of the projection plane is imaged by an imaging unit,
Moving the imaging center of the imaging unit by a moving unit;
Detecting an evaluation value that is a value representing a ratio of the pattern image to a captured image captured by the imaging unit;
Until the evaluation value satisfies a predetermined condition, the imaging center is repeatedly moved to some or all of a plurality of movable positions,
Controlling the moving unit so that the evaluation value satisfies the predetermined condition;
Performs processing based on the captured image captured by the evaluation value is the predetermined condition is satisfied state of the path terpolymer down image,
Control method. 投写面に投写画像を投写部により投写し、
前記投写面の少なくとも一部を含む領域を撮像部により撮像し、
前記撮像部の撮像中心を移動部により移動し、
複数の所定の図形を含むパターン画像を投写部が投写しているときに、前記移動部により前記撮像中心を移動させながら前記撮像部に撮像画像を撮像させ、
前記撮像画像に含まれる前記図形の数が所定条件を満たすように前記移動部を制御し、
前記所定条件を満たす状態で撮像された前記撮像画像に基づいて処理を行う、
制御方法。 Project the projected image onto the projection surface using the projection unit,
An area including at least a part of the projection plane is imaged by an imaging unit,
Moving the imaging center of the imaging unit by a moving unit;
When the projection unit is projecting a pattern image including a plurality of predetermined figures, the imaging unit captures a captured image while moving the imaging center by the moving unit,
Controlling the moving unit so that the number of the figures included in the captured image satisfies a predetermined condition;
Processing based on the captured image captured in a state satisfying the predetermined condition;
Control method. 投写面に投写画像を投写部により投写し、
前記投写面の少なくとも一部を含む領域を撮像部により撮像し、
前記撮像部の撮像中心を移動部により移動し、
前記移動部により前記撮像中心を移動させながら前記撮像部に撮像画像を撮像させ、前記撮像画像に占める前記投写画像の割合が所定条件を満たすように前記移動部を制御し、
前記投写画像の前記割合が前記所定条件を満たすか否かをパターンマッチングによって判定し、
前記所定条件を満たす状態で撮像された前記撮像画像に基づいて処理を行う、
制御方法。 Project the projected image onto the projection surface using the projection unit,
An area including at least a part of the projection plane is imaged by an imaging unit,
Moving the imaging center of the imaging unit by a moving unit;
The moving unit controls the moving unit so that the imaged unit captures a captured image while moving the imaging center, and the ratio of the projected image in the captured image satisfies a predetermined condition.
Determining whether the proportion of the projected image satisfies the predetermined condition by pattern matching;
Processing based on the captured image captured in a state satisfying the predetermined condition;
Control method. 投写面に投写画像を投写部により投写し、
前記投写面の少なくとも一部を含む領域を複数の撮像部により撮像し、
前記撮像部の撮像中心を移動部により移動し、
前記移動部により前記撮像中心を移動させながら前記撮像部に撮像画像を撮像させ、前記撮像画像に占める前記投写画像の割合が所定条件を満たすように前記移動部を制御し、
前記投写画像の前記割合に基づいて撮像に用いる前記撮像部を選択し、
前記所定条件を満たす状態で、選択された前記撮像部により撮像された前記撮像画像に基づいて処理を行う、
制御方法。 Project the projected image onto the projection surface using the projection unit,
An area including at least a part of the projection plane is imaged by a plurality of imaging units,
Moving the imaging center of the imaging unit by a moving unit;
The moving unit controls the moving unit so that the imaged unit captures a captured image while moving the imaging center, and the ratio of the projected image in the captured image satisfies a predetermined condition.
Selecting the imaging unit to be used for imaging based on the ratio of the projected image;
Processing based on the captured image captured by the selected imaging unit in a state that satisfies the predetermined condition;
Control method.
JP2015067245A 2015-03-27 2015-03-27 Projector and control method Active JP6596872B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015067245A JP6596872B2 (en) 2015-03-27 2015-03-27 Projector and control method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015067245A JP6596872B2 (en) 2015-03-27 2015-03-27 Projector and control method

Publications (3)

Publication Number Publication Date
JP2016187145A JP2016187145A (en) 2016-10-27
JP2016187145A5 JP2016187145A5 (en) 2018-04-26
JP6596872B2 true JP6596872B2 (en) 2019-10-30

Family

ID=57203425

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015067245A Active JP6596872B2 (en) 2015-03-27 2015-03-27 Projector and control method

Country Status (1)

Country Link
JP (1) JP6596872B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018170667A (en) * 2017-03-30 2018-11-01 日本電気株式会社 Image processing apparatus, projector device, image reading device, image processing method, and program
JP7147617B2 (en) * 2019-02-19 2022-10-05 セイコーエプソン株式会社 Projector and projector control method

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5186964B2 (en) * 2008-03-18 2013-04-24 株式会社リコー Projection system
JP2009302814A (en) * 2008-06-12 2009-12-24 Seiko Epson Corp Imaging control device and method of imaging apparatus, and projection system
JP5293947B2 (en) * 2008-11-13 2013-09-18 株式会社ニコン Imaging device
JP2011114684A (en) * 2009-11-27 2011-06-09 Nikon Corp Image pickup device
JP2014134611A (en) * 2013-01-09 2014-07-24 Ricoh Co Ltd Geometric distortion correction device, projector, and geometric distortion correction method

Also Published As

Publication number Publication date
JP2016187145A (en) 2016-10-27

Similar Documents

Publication Publication Date Title
JP5109803B2 (en) Image processing apparatus, image processing method, and image processing program
JP5796286B2 (en) Projector and projector control method
JP6459194B2 (en) Projector and projected image control method
WO2011102299A1 (en) Control device and projection-type image display device
JP6645687B2 (en) Display device and control method
JP6056290B2 (en) Image processing apparatus, projector, and image processing method
CN112929617B (en) Projector control method, projector and display system
US11627295B2 (en) Image processing device, projection system, image processing method, and image processing program
JP6330292B2 (en) Projector and projector control method
US20210289182A1 (en) Method of controlling projector and projector
JP2011176629A (en) Controller and projection type video display device
JP6596872B2 (en) Projector and control method
CN109076186B (en) Display system and information processing method
JP7147617B2 (en) Projector and projector control method
JP2012018214A (en) Projection type video display device
JP6524750B2 (en) Projector and control method
JP2016187143A (en) Projector and control method
JP5461452B2 (en) Control device and projection display device
JP6347126B2 (en) Projector and projector control method
JP5845565B2 (en) Projector and projector control method
JP2019212975A (en) Projection-type image display apparatus control device, control method, program, and projection-type image display system
JP5233613B2 (en) Projection display apparatus and arrangement relation detection method
JP2017152765A (en) Projector and projector control method
JP2020008806A (en) Image projection device, and image projection device control program
JP2015176048A (en) Projector, and appearance change method

Legal Events

Date Code Title Description
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180316

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180316

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20181026

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190131

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190219

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190415

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190709

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190806

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190903

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190916

R150 Certificate of patent or registration of utility model

Ref document number: 6596872

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150