JP2016015558A - Image projection system - Google Patents
Image projection system Download PDFInfo
- Publication number
- JP2016015558A JP2016015558A JP2014135529A JP2014135529A JP2016015558A JP 2016015558 A JP2016015558 A JP 2016015558A JP 2014135529 A JP2014135529 A JP 2014135529A JP 2014135529 A JP2014135529 A JP 2014135529A JP 2016015558 A JP2016015558 A JP 2016015558A
- Authority
- JP
- Japan
- Prior art keywords
- image
- projection
- grid
- construction
- reference image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Controls And Circuits For Display Device (AREA)
- Transforming Electric Information Into Light Information (AREA)
Abstract
Description
本発明は、投写面に投写した所定の基準画像を撮像手段によって撮像した結果に基づいて、投写画像の歪みを補正するための補正情報を構築する画像投写システムに関するものである。 The present invention relates to an image projection system that constructs correction information for correcting distortion of a projected image based on a result of imaging a predetermined reference image projected on a projection plane by an imaging unit.
従来、この種の画像投写システムとして、特許文献１に記載のものが知られている。この画像投写システムは、画像投写手段としてのプロジェクターにより、基準画像としての格子画像をスクリーン面に投写する。そして、カメラによって撮像した格子画像における複数の格子交点の座標に基づいて格子画像の歪みを把握し、把握結果に基づいて、画像の歪みを少なくするための補正データ（補正情報）を構築する。そして、ＤＶＤプレイヤー等から送られてくる画像の各座標を補正データに基づいて座標変換し、この座標変換によって歪みが低減された画像をプロジェクターによって投写する。
Conventionally, as this type of image projection system, the one described in
前述のようにして補正データを構築する際に、スクリーン面に投写された格子画像の一部の線がスクリーン面の歪みなどによって薄くなっていることに起因して、全ての格子交点のうち、一部の格子交点が検出されなくなることがある。すると、補正データを構築することができなくなることから、ユーザーに対してエラーを報知するのが一般的である。ユーザーは、スクリーン面に投写されている格子画像における線の濃淡などに基づいて、スクリーン面で不具合を引き起こしている箇所を予想し、その箇所の状態を整えた後に、画像投写システムに対して補正データの構築処理を再実行させる。 When constructing correction data as described above, due to the fact that some lines of the grid image projected on the screen surface have become thinner due to distortion of the screen surface, among all grid intersections, Some grid intersections may not be detected. Then, since correction data cannot be constructed, an error is generally notified to the user. The user anticipates the location causing the problem on the screen surface based on the density of lines in the grid image projected on the screen surface, corrects the location, and corrects the image projection system. Re-execute the data construction process.
エラーが発生した場合には、前述のようにしてユーザーにスクリーン面を整えてもらうなど、そのエラーの原因をユーザーに取り除いてもらわなければならないのが一般的であるが、原因が自然に解消することもあり得る。例えば、空調の風量が一時的に増加したことに伴ってスクリーンが一時的に大きく揺れたことに起因してエラーが発生した場合、その後に風量が減少すれば、スクリーンの揺れという原因が自然に解消されることになる。このような場合であっても、画像投写システムはユーザーからの命令がない限り補正データを構築するための処理を再開しないことから、ユーザーは操作パネルなどの入力手段のある場所まで移動して再実行の命令を行うという手間を強いられてしまう。 When an error occurs, it is common for the user to remove the cause of the error, such as having the user prepare the screen as described above, but the cause is resolved naturally. It can happen. For example, if an error occurs due to a temporary large screen shake due to a temporary increase in the airflow of the air conditioning, if the airflow subsequently decreases, the cause of the screen shaking naturally Will be resolved. Even in such a case, the image projection system does not resume the process for constructing the correction data unless there is a command from the user, so the user moves to a place with an input means such as an operation panel and restarts. You will be forced to do execution instructions.
本発明は、以上の背景に鑑みてなされたものであり、その目的とするところは、歪み補正用の補正データを構築する際のユーザーの手間を低減することができる画像投写システムを提供することである。 The present invention has been made in view of the above background, and an object of the present invention is to provide an image projection system that can reduce a user's trouble when constructing correction data for distortion correction. It is.
上記目的を達成するために、本発明は、投写面に画像を投写する画像投写手段と、前記投写面を撮像する撮像手段と、所定の基準画像を前記画像投写手段に投写させる投写工程、前記投写面に投写された前記基準画像を前記撮像手段に撮像させる撮像工程、及び前記撮像工程における撮像で得られた画像情報によって再現される再現基準画像を解析して投写画像の歪みを補正するための補正情報を構築する構築工程を具備する歪み補正情報構築処理を実施する構築手段とを備える画像投写システムにおいて、前記構築工程にて、前記再現基準画像について不明瞭な箇所を具備するものであることが判明した場合に、前記歪み補正情報構築処理を前記投写工程からやり直す処理を実施するように、前記構築手段を構成したことを特徴とするものである。 In order to achieve the above object, the present invention provides an image projecting unit that projects an image on a projection surface, an image capturing unit that captures the projection surface, a projecting step of projecting a predetermined reference image on the image projecting unit, An imaging process for causing the imaging means to image the reference image projected on the projection surface, and a reproduction reference image reproduced by image information obtained by imaging in the imaging process, and correcting distortion of the projected image An image projection system comprising a construction means for carrying out a distortion correction information construction process comprising a construction step for constructing the correction information in the construction step, wherein the construction step comprises an unclear portion with respect to the reproduction reference image. The construction means is configured to perform the process of redoing the distortion correction information construction process from the projection process when it is found out A.
本発明によれば、歪み補正用の補正データを構築する際のユーザーの手間を低減することができるという優れた効果がある。 According to the present invention, there is an excellent effect that it is possible to reduce the trouble of the user when constructing correction data for distortion correction.
以下、本発明を適用した画像投写システムの一実施形態について説明する。
まず、実施形態に係る画像投写システムの基本的な構成について説明する。図１は、実施形態に係る画像投写システムの要部構成を示す斜視図である。この画像投写システムは、画像投写手段たるプロジェクター１、パーソナルコンピュータ等からなる制御装置２０、ＬＡＮ等の通信ネットワーク４０などを備えている。プロジェクター１は、ネットワーク４０を介して制御装置２０と繋がっている。
Hereinafter, an embodiment of an image projection system to which the present invention is applied will be described.
First, a basic configuration of the image projection system according to the embodiment will be described. FIG. 1 is a perspective view illustrating a main configuration of an image projection system according to an embodiment. This image projection system includes a
画像を投写するプロジェクター１は、撮像手段としてのカメラ６によって投写画像を撮像し、その結果を通信ネットワーク４０経由で制御装置２０に送信することができる。また、制御装置２０は、動画などの画像情報を通信ネットワーク４０経由でプロジェクター１に送信することができる。プロジェクター１は、制御装置２０から送られてくる画像情報に基づく画像を図示しないスクリーンに投写する。
The
なお、実施形態においては、プロジェクター１として、カメラ６を具備しているものを用いているが、カメラ６を具備しないものを用いてもよい。この場合、図２に示されるように、プロジェクター１とは別体のカメラ５０を通信ネットワーク４０に接続し、カメラ５０による投写画像の撮像結果を通信ネットワーク４０経由で制御装置２０に送信すればよい。
In the embodiment, the
図３は、プロジェクター１の電気回路の要部を示すブロック図である。プロジェクター１は、制御装置（２０）などの外部装置と通信を行う通信部２、画像を投写する投写部３、制御装置（２０）とは別の画像出力手段から出力される画像情報を入力するための入力部４、スピーカー５、投写画像を撮像するカメラ６などを有している。また、各種の制御や演算処理を行う制御部８、記憶手段たるＲＯＭ９、各種のデータを一時的に記憶するＲＡＭ１０、ＲＡＭに記憶された補正データに基づいて投写に用いる前の画像情報に対して歪み補正（幾何補正）を施す歪み補正部１１なども有している。制御部８は、歪み補正部１１によって補正された画像情報に基づく画像を投写部３に投写させる。なお、プロジェクター１として、カメラ６を具備しないものを用いる場合には、図２に示されるように、カメラ５０を通信ネットワーク４０に繋ぐ必要がある。
FIG. 3 is a block diagram illustrating a main part of the electric circuit of the
図４は、制御装置２０の電気回路の要部を示すブロック図である。制御装置２０は、プロジェクター（１）などの外部装置と通信を行う通信部２１、撮像された格子基準画像のデータを記憶する格子データ記憶部２２、その格子基準画像の解析を行う画像解析部２３などを有している。また、各種の制御や演算処理を行う制御部２５、各種のデータを記憶している記憶部２６、格子基準画像の解析結果に基づいて歪み補正データを構築する補正データ構築部２７なども有している。
FIG. 4 is a block diagram illustrating a main part of the electric circuit of the
プロジェクター１及び制御装置２０は、次のような歪み補正情報構築処理を実施する構築手段として機能する。即ち、格子基準画像をプロジェクター１に投写させる投写工程、投写された格子基準画像をカメラ６に撮像させる撮像工程、及び撮像工程で得られた格子基準画像の撮像結果に基づいて、補正データを構築する構築工程とを具備する歪み補正情報構築処理である。
The
次に、実施形態に係る画像投写システムの特徴的な構成について説明する。
図５は、歪み補正情報構築処理を実施中のプロジェクター１における処理フローを示すフローチャートである。この処理フローを開始したプロジェクター１は、まず、本体に設けられたボタンの押下操作や、リモコン操作などにより、ユーザーからの歪み補正命令を受信するまで待機する（ステップ１：以下、ステップをＳと記す）。そして、歪み補正命令を受信すると（Ｓ１でＹ）、格子基準画像を投写するための格子画像データを得るために制御装置２０に向けて格子要求信号を送信する（Ｓ２）。その後、制御装置２０から送られてくる格子画像データを受信すると（Ｓ３でＹ）、その格子画像データに基づいて、格子基準画像を図示しないスクリーンに投写した後（Ｓ４）、格子基準画像をカメラ６で撮像する（Ｓ５）。そして、撮像データを制御装置２０に送信した後、制御装置２０から送られてくるはずの補正データについて、受信したか否かを判定し（Ｓ７）、受信した場合には（Ｓ７でＹ）、その補正データをＲＡＭ１０に記憶して（Ｓ８）、一連の処理フローを終える。記憶した補正データについては、ユーザーの命令に基づいて制御装置２０から送られている動画などの画像データ、あるいは入力部４に入力される画像データに基づく画像を投写する際に、その画像データを幾何補正するために用いる。
Next, a characteristic configuration of the image projection system according to the embodiment will be described.
FIG. 5 is a flowchart showing a processing flow in the
一方、制御装置２０からの補正データを受信しない場合（Ｓ７）、プロジェクター１は、制御装置２０から送られるエラーデータの受信の有無を判定し（Ｓ９）、エラーデータも受信しない場合には（Ｓ９でＮ）、再び補正データの受信の有無を判定する（Ｓ７）。また、エラーデータを受信した場合には、補正データの受信を待機することなく一連の処理フローを終了する。
On the other hand, when the correction data from the
図６は、歪み補正情報構築処理を実施中の制御装置２０における処理フローを示すフローチャートである。この処理フローを開始した制御装置２０は、まず、カウント値Ｃｔを「１」に設定した後（Ｓ１）、プロジェクター１から送られてくる格子要求信号の受信を待機する（Ｓ２）。そして、格子要求信号を受信すると（Ｓ２でＹ）、格子データ記憶部２２から格子画像データを読み込んでプロジェクター１に送信した後（Ｓ３）、プロジェクター１から送られてくる撮像データの受信を待機する（Ｓ４）。その後、撮像データを受信すると（Ｓ４でＹ）、その撮像データを画像解析部２３によって解析して、撮像された格子基準画像（再現格子基準画像）について、全ての格子交点の認識が可能であるか否かを判定する（Ｓ５）。そして、認識が可能である場合には（Ｓ５でＹ）、それらの格子交点の座標に基づいて補正データを構築した後（Ｓ６）、補正データをプロジェクター１に送信してから（Ｓ７）、一連の処理フローを終了する。
FIG. 6 is a flowchart showing a processing flow in the
一方、全ての格子交点を認識することができない場合（Ｓ５でＮ）、カウント値Ｃｔについて「３」であるか否かを判定し（Ｓ８）、「３」でない場合には（Ｓ８でＮ）、カウント値Ｃｔを１つカウントアップした後（Ｓ９）、処理フローをＳ３にループさせる。このループにより、格子画像データをプロジェクター１に再送信することで、格子基準画像の投写や撮像をプロジェクター１に再実行させて、新たな撮像データを得る。これに対し、カウント値Ｃｔが「３」である場合には、格子基準画像の投写、撮像、及び解析を３回繰り返したことになる。この場合、格子基準画像の格子交点を不明瞭にしている原因をユーザーに取り除いてもらうことが必須である可能性が高いので、それ以上のリトライをせずに、ユーザーにエラーを報知する。そして、エラー信号をプロジェクター１に送信してから（Ｓ１１）、一連の処理フローを終える。
On the other hand, if all the grid intersections cannot be recognized (N in S5), it is determined whether or not the count value Ct is “3” (S8). If not “3” (N in S8). After incrementing the count value Ct by one (S9), the process flow is looped to S3. By retransmitting the lattice image data to the
かかる構成において、基準格子画像の投写、撮像、及び解析の再実行命令の発信をユーザーに強いることなく再実行を自動で行うことで、歪み補正用の補正データを構築する際のユーザーの手間を低減することができる。 In such a configuration, re-execution is automatically performed without forcing the user to issue a re-execution command for projection, imaging, and analysis of the reference grid image, thereby reducing the user's hassle when constructing correction data for distortion correction. Can be reduced.
次に、実施形態に係る画像投写システムに、より特徴的な構成を付加した実施例について説明する。なお、以下に特筆しない限り、実施例に係る画像投写システムの構成は、実施形態と同様である。
図７は、制御装置２０の格子データ記憶部２２に記憶されている第１格子画像データによって表現される第１格子基準画像を示す模式図である。また、図８は、格子データ記憶部２２に記憶されている第２格子画像データによって表現される第２格子基準画像を示す模式図である。また、図９は、格子データ記憶部２２に記憶されている第３格子画像データによって表現される第３格子基準画像を示す模式図である。また、図１０は、格子データ記憶部２２に記憶されている第４格子画像データによって表現される第４格子基準画像を示す模式図である。これら格子基準画像の外枠の大きさは互いに同じである。
Next, an example in which a more characteristic configuration is added to the image projection system according to the embodiment will be described. Unless otherwise specified below, the configuration of the image projection system according to the example is the same as that of the embodiment.
FIG. 7 is a schematic diagram illustrating a first grid reference image expressed by the first grid image data stored in the grid
第１格子基準画像（図７）、第２格子基準画像（図８）、第３格子基準画像（図９）は、外枠内の複数のマス目の大きさが全て同じである格子パターンになっている。マス目の大きさは、第１格子基準画像＜第２格子基準画像＜第３格子基準画像という順で大きくなっていることから、マス目の数は、第３格子基準画像＜第２格子基準画像＜第１格子基準画像という順で多くなっている。そして、格子交点の数も、第３格子基準画像＜第２格子基準画像＜第１格子基準画像という順で多くなっている。マス目の大きさが多くなってマス目の数が減るほど、格子交点の数が減って、格子交点の認識不良によるエラーが発生し難くなる。但し、補正データによる座標変換の密度が粗くなることから、歪み補正の精度が低下する。つまり、歪み補正を良好に低減するためには、第１格子基準画像を用いることが望ましいが、格子交点の認識不良によるエラーが最も発生し易くなる。 The first grid reference image (FIG. 7), the second grid reference image (FIG. 8), and the third grid reference image (FIG. 9) have a grid pattern in which the sizes of the plurality of cells in the outer frame are all the same. It has become. Since the size of the cells increases in the order of the first lattice reference image <the second lattice reference image <the third lattice reference image, the number of the cells is the third lattice reference image <the second lattice reference. The image increases in the order of image <first grid reference image. The number of grid intersections also increases in the order of third grid reference image <second grid reference image <first grid reference image. As the size of the grid increases and the number of grids decreases, the number of grid intersections decreases and errors due to poor recognition of grid intersections are less likely to occur. However, since the density of the coordinate conversion by the correction data becomes coarse, the accuracy of distortion correction is lowered. That is, in order to satisfactorily reduce distortion correction, it is desirable to use the first grid reference image, but an error due to a recognition failure at the grid intersection is most likely to occur.
第４格子基準画像（図１０）は、他の３つの格子基準画像とはマス目のパターンが異なっている。外枠内の左上の領域や右上の領域におけるマス目が他の領域のマス目よりも大きくなっている。このようなパターンは、プロジェクター１の機種が短焦点方式のものである場合に有効である。スクリーンに非常に近接して設置される短焦点方式のプロジェクター１では、スクリーン面の左上の領域や右上の領域において投写レンズまでの距離が最も長くなることから、歪みが生じ易くなるとともに、格子の線が薄くなり易い。つまり、格子交点の認識不良を引き起こし易い。このため、外枠内の左上や右上の領域のマス目が他の領域よりも大きくなっている第４格子基準画像が有効である。他の領域については、左上や右上の領域に比べてマス目を小さくすることで、歪み補正精度を向上させることができる。
The fourth grid reference image (FIG. 10) has a grid pattern different from the other three grid reference images. The cells in the upper left region and the upper right region in the outer frame are larger than the cells in other regions. Such a pattern is effective when the
図１１は、実施例に係る画像投写システムにおいて歪み補正情報構築処理を実施中の制御装置２０における処理フローを示すフローチャートである。この処理フローを開始した制御装置２０は、まず、ディスプレイ表示などにより、機種情報要求メッセージをユーザーに報知する（Ｓ１）。このメッセージを受けたユーザーが、制御装置２０に対してプロジェクター１の機種情報を入力すると（Ｓ２でＹ）、制御装置２０は、プロジェクター１の機種について、短焦点方式であるか否かを判断する（Ｓ３）。そして、短焦点方式でない場合には（Ｓ３でＮ）、第１カウント値Ｃｔ１を「１」に設定するとともに、第２カウント値Ｃｔ２を「２」に設定する（Ｓ４）。これに対し、短焦点方式である場合には（Ｓ３でＹ）、第１カウント値Ｃｔ１を「１」に設定するとともに、第２カウント値Ｃｔ２を「４」に設定する（Ｓ５）。
FIG. 11 is a flowchart illustrating a processing flow in the
なお、第１カウント値Ｃｔ１は、同じ格子基準画像を投写した状態での投写、撮像、及び解析のリトライ回数を示す変数である。また、第２カウント値Ｃｔ２は、格子基準画像の番号に対応する数値を示す変数である。例えば第２カウント値Ｃｔ２が「２」である場合には、格子基準画像として、「２」と同じ番号の第２格子基準画像が選択される。 The first count value Ct1 is a variable indicating the number of retries for projection, imaging, and analysis in a state where the same grid reference image is projected. The second count value Ct2 is a variable indicating a numerical value corresponding to the grid reference image number. For example, when the second count value Ct2 is “2”, the second grid reference image having the same number as “2” is selected as the grid reference image.
制御装置２０は、カウント値を設定すると、次に、第２カウント値Ｃｔ２に対応する番号の格子画像データを格子データ記憶部２２から読み込んでプロジェクター１に送信する（Ｓ６）。そして、プロジェクター１から送られてくる撮像データを受信すると（Ｓ７でＹ）、その撮像データを画像解析部２３によって解析して、撮像された格子基準画像について、全ての格子交点の認識が可能であるか否かを判定する（Ｓ８）。このとき、認識が可能である場合には（Ｓ８でＹ）、それらの格子交点の座標に基づいて補正データを構築した後（Ｓ９）、補正データをプロジェクター１に送信した後（Ｓ１０）、第２カウント値Ｃｔ２について「１」であるか否かを判定する（Ｓ１１）。そして、「１」である場合には（Ｓ１１）、歪み補正精度を最も高くする第１格子基準画像に基づく補正データの構築に成功しているので、一連の処理フローを終了する。
After setting the count value, the
Ｓ１１の工程において、第２カウント値Ｃｔ２が「１」でない場合（Ｓ１１でＮ）、即ち、使用した格子基準画像が第１格子基準画像でない場合、歪み補正精度をより高くする格子基準画像に変更しても補正データの構築に成功する可能性がある。そこで、第２カウント値Ｃｔ２を１つだけカウントアップし（Ｓ１２）、更に、第１カウント値Ｃｔ１を「１」に設定してから（Ｓ１３）、処理フローをＳ６にループさせる。これにより、マス目をより小さくした格子基準画像を用いた状態で、投写、撮像、及び解析が再び実施される。このとき、プロジェクター１は、先に制御装置２０から送られてきた補正データに基づいて歪み補正を行いながら、格子基準画像を投写する。
If the second count value Ct2 is not “1” in step S11 (N in S11), that is, if the used grid reference image is not the first grid reference image, the grid reference image is changed to a higher distortion correction accuracy. Even so, there is a possibility that the correction data can be successfully constructed. Accordingly, the second count value Ct2 is incremented by one (S12), and the first count value Ct1 is set to “1” (S13), and the processing flow is looped to S6. Thereby, projection, imaging, and analysis are performed again in a state where a grid reference image with a smaller grid is used. At this time, the
一方、Ｓ８の工程において、全ての格子交点を認識することができない場合（Ｓ８でＮ）、第１カウント値Ｃｔ１について「３」であるか否かを判定する（Ｓ１４）。つまり、同じ格子基準画像を用いた条件でのリトライ回数が３回に達したか否かを判定する。そして、「３」でない場合には（Ｓ１４でＮ）、第１カウント値Ｃｔ１を１つカウントアップした後（Ｓ１５）、処理フローをＳ６にループさせる。このループにより、先に使用したものと同じ格子基準画像を用いて、投写、撮像、及び解析を行う。 On the other hand, if all the lattice intersections cannot be recognized in step S8 (N in S8), it is determined whether or not the first count value Ct1 is “3” (S14). That is, it is determined whether or not the number of retries under the condition using the same grid reference image has reached three. If it is not “3” (N in S14), after incrementing the first count value Ct1 by one (S15), the process flow is looped to S6. By this loop, projection, imaging, and analysis are performed using the same grid reference image as used previously.
また、Ｓ１４の工程において、第１カウント値Ｃｔ１が「３」である場合には（Ｓ１４でＹ）、格子基準画像をよりマス目の小さなものに変更してリトライする機会があるか否かを判断する。具体的には、直前に使用した格子基準画像がマス目の最も大きな第３格子基準画像であった場合には、格子基準画像の格子交点を不明瞭にしている原因をユーザーに取り除いてもらう必要がある。しかし、第１格子基準画像や第２格子基準画像であった場合には、格子基準画像をマス目の小さなものに変更すれば、補正データの構築に成功する可能性がある。但し、使用していた格子基準画像が第４格子基準画像であった場合には、第３格子基準画像であった場合と同様に、リトライする機会がない。 In the step S14, if the first count value Ct1 is “3” (Y in S14), it is determined whether or not there is an opportunity to retry by changing the grid reference image to a smaller one. to decide. Specifically, when the grid reference image used immediately before is the third grid reference image having the largest grid, it is necessary for the user to remove the cause of the obscure grid intersection of the grid reference image. There is. However, in the case of the first grid reference image or the second grid reference image, if the grid reference image is changed to a small grid, the correction data may be successfully constructed. However, when the lattice reference image used is the fourth lattice reference image, there is no opportunity to retry as in the case of the third lattice reference image.
そこで、Ｓ１４の工程において、第１カウント値Ｃｔ１が「３」である場合、第１カウント値Ｃｔ１を「１」に設定した後（Ｓ１６）、第２カウント値Ｃｔ２について「３」であるか否かを判定する（Ｓ１７）。そして、「３」でない場合（Ｓ１７でＮ）には、第２カウント値Ｃｔ２について「４」であるか否かを判定し（Ｓ１８）、「４」でない場合に（Ｓ１８でＮ）、第２カウント値Ｃｔ２を１つカウントアップした後に、処理フローをＳ６にループさせる。一方、第２カウント値Ｃｔ２が「３」である場合や（Ｓ１７でＹ）、「４」である場合には（Ｓ１８でＹ）、ユーザーにエラーを報知し（Ｓ２０）、且つエラー信号をプロジェクター１に送信してから（Ｓ２１）、一連の処理フローを終える。 Therefore, in the process of S14, when the first count value Ct1 is “3”, after setting the first count value Ct1 to “1” (S16), whether or not the second count value Ct2 is “3”. Is determined (S17). If it is not “3” (N in S17), it is determined whether or not the second count value Ct2 is “4” (S18). If it is not “4” (N in S18), the second count value Ct2 is determined as “2”. After counting up the count value Ct2, the process flow is looped to S6. On the other hand, when the second count value Ct2 is “3” (Y in S17) or “4” (Y in S18), an error is notified to the user (S20), and the error signal is sent to the projector. 1 (S21), a series of processing flow is finished.
かかる構成では、格子交点の認識不良の原因が比較的軽度なものである場合には、格子のマス目をより大きくして投写、撮像及び解析を自動で再試行することで、原因解消のための作業をユーザーにしてもらわなくても、補正データを構築することができる。これにより、補正データを構築する際のユーザーの手間をより低減することができる。 In such a configuration, if the cause of the recognition failure at the grid intersection is relatively mild, the grid squares are made larger and projection, imaging and analysis are automatically retried to eliminate the cause. The correction data can be constructed without requiring the user to perform the above operation. Thereby, a user's effort at the time of construction | assembly of correction | amendment data can be reduced more.
また、プロジェクター１の機種が短焦点方式である場合に、それに適した第４格子基準画像を選択することで、補正データの構築の成功率を高めつつ、スクリーン面の左上や右上以外の領域における歪み補正精度を高めることができる。
In addition, when the model of the
これまで、補正データに基づいて画像データを座標変換して歪みを補正する例について説明したが、補正データに基づいて、投写レンズの姿勢を変えたり、プロジェクター１の向きを変えたりなどして歪みを補正してもよい。
So far, an example has been described in which image data is coordinate-transformed based on correction data to correct distortion, but based on the correction data, distortion is caused by changing the orientation of the projection lens, changing the orientation of the
以上に説明したものは一例であり、本発明は、次の態様毎に特有の効果を奏する。
［態様Ａ］
態様Ａは、投写面（例えばスクリーン面）に画像を投写する画像投写手段（例えばプロジェクター１）と、前記投写面を撮像する撮像手段（例えばカメラ６）と、所定の基準画像を前記画像投写手段に投写させる投写工程、前記投写面に投写された前記基準画像（例えば格子基準画像）を前記撮像手段に撮像させる撮像工程、及び前記撮像工程における撮像で得られた画像情報によって再現される再現基準画像を解析して投写画像の歪みを補正するための補正情報を構築する構築工程を具備する歪み補正情報構築処理を実施する構築手段（例えばプロジェクター１及び制御装置２０）とを備える画像投写システムにおいて、前記構築工程にて、前記再現基準画像について不明瞭な箇所を具備するものであることが判明した場合に、前記歪み補正情報構築処理を前記投写工程からやり直す処理を実施するように、前記構築手段を構成したことを特徴とするものである。
What has been described above is merely an example, and the present invention has a specific effect for each of the following modes.
[Aspect A]
Aspect A includes an image projection unit (for example, projector 1) that projects an image on a projection plane (for example, a screen surface), an imaging unit (for example, camera 6) that images the projection plane, and a predetermined reference image as the image projection unit. A projection step for projecting the image onto the projection surface, an imaging step for causing the imaging means to image the reference image (for example, a lattice reference image) projected on the projection plane, and a reproduction reference that is reproduced by image information obtained by imaging in the imaging step. In an image projection system including construction means (for example, the
かかる構成では、再現基準画像が不明瞭な箇所を具備するものであった場合に、基準格子画像の投写、撮像、及び解析の再試行実行命令の発信をユーザーに強いることなく、構築手段が自動で再試行を実行する。これにより、再試行実行命令を発信するというユーザーの手間をなくして、歪み補正用の補正データを構築する際のユーザーの手間を低減することができる。 In such a configuration, when the reproduced reference image has an unclear portion, the construction means automatically executes without forcing the user to issue a command to execute a retry of projection, imaging, and analysis of the reference lattice image. Perform a retry with. This eliminates the user's trouble of sending a retry execution command, and can reduce the user's trouble when constructing correction data for distortion correction.
［態様Ｂ］
態様Ｂは、態様Ａにおいて、前記基準画像として、互いにマス目の大きさ及び数の異なる複数の格子基準画像の画像情報を記憶する記憶手段を設け、前記構築工程にて、前記再現基準画像について不明瞭な箇所を具備するものであることが判明した場合に、その後にやり直した前記投写工程にて、前回の前記投写工程で用いた前記格子基準画像よりもマス目の大きな前記格子基準画像の画像情報を前記記憶手段から読み込んで前記画像投写手段に投写させる処理を実施するように、前記構築手段を構成したことを特徴とするものである。かかる構成では、格子交点の認識不良の原因が比較的軽度なものである場合には、格子のマス目をより大きくして投写、撮像及び解析を自動で再試行することで、原因解消のための作業をユーザーにしてもらわなくても、補正データを構築することができる。これにより、補正データを構築する際のユーザーの手間をより低減することができる。
[Aspect B]
Aspect B provides a storage means for storing image information of a plurality of lattice reference images having different grid sizes and numbers as the reference image in aspect A, and in the construction step, When it is determined that the grid reference image has an indistinct portion, the grid reference image having a grid larger than the grid reference image used in the previous projection process is re-executed in the subsequent projection process. The construction unit is configured to perform a process of reading image information from the storage unit and causing the image projection unit to project the image information. In such a configuration, if the cause of the recognition failure at the grid intersection is relatively mild, the grid squares are made larger and projection, imaging and analysis are automatically retried to eliminate the cause. The correction data can be constructed without requiring the user to perform the above operation. Thereby, a user's effort at the time of construction | assembly of correction | amendment data can be reduced more.
［態様Ｃ］
態様Ｃは、態様Ｂにおいて、前記構築工程を実施した後、所定の再試条件（例えば最もマス目の大きい基準格子画像に基づく補正データの構築をまだ試していない）について具備するか否かを判定し、具備した場合に、前記歪み補正情報構築処理の再実行を開始し、前記投写工程にて、前回の前記歪み補正情報構築処理で用いた前記格子基準画像よりもマス目の小さな前記格子基準画像の画像情報を前記記憶手段から読み込んで前記画像投写手段に投写させ、その後の前記構築工程にて、前記再現基準画像について不明瞭な箇所を具備しないものであるこことが判明した場合に、前記撮像結果に基づいて前記補正情報を補正する処理を実施するように、前記構築手段を構成したことを特徴とするものである。かかる構成では、歪み補正情報構築処理の再実行で補正データの補正に成功した場合に、歪み補正精度をより高めることができる。
[Aspect C]
Aspect C determines whether or not the condition C has a predetermined retry condition (for example, the construction of correction data based on the reference grid image having the largest grid has not been tried yet) after performing the construction step in aspect B. And when it is provided, the re-execution of the distortion correction information construction process is started, and in the projection step, the grid reference having a grid smaller than the grid reference image used in the previous distortion correction information construction process is started. When image information of an image is read from the storage means and projected on the image projection means, and it is found in the subsequent construction step that the reproduction reference image does not have an unclear place, The construction unit is configured to perform a process of correcting the correction information based on the imaging result. In such a configuration, the distortion correction accuracy can be further improved when correction data is successfully corrected by re-execution of the distortion correction information construction process.
［態様Ｄ］
態様Ｄは、態様Ｃにおいて、再実行を開始した前記歪み補正情報構築処理の前記構築工程にて、前記再現基準画像について不明瞭な箇所を具備するものであることが判明した場合に、前記構築工程を中断する処理を実施するように、前記構築手段を構成したことを特徴とするものである。かかる構成では、再実行で再現基準画像が不明瞭な箇所を具備するものになった場合に、エラーの誤報の発生を回避することができる。
[Aspect D]
Aspect D is the construction in the aspect C, when it is found in the construction step of the distortion correction information construction processing that has been re-executed that the reproduction reference image has an unclear portion. The construction means is configured to perform a process of interrupting the process. In such a configuration, when the reproduction reference image has an unclear portion by re-execution, it is possible to avoid the occurrence of erroneous error reporting.
［態様Ｅ］
態様Ｅは、態様Ｂ〜Ｄの何れかにおいて、互いにマス目のパターンの異なる複数の前記格子基準画像の画像情報を前記記憶手段に記憶させ、前記投写工程にて、前記記憶手段に記憶されている複数種類の前記格子基準画像のうち、前記画像投写手段の特性に応じた種類の前記格子基準画像を前記画像投写手段に投写させる処理を実施するように、前記構築手段を構成したことを特徴とするものである。かかる構成では、画像投写手段の特性い応じた種類の格子基準画像を用いることで、エラーの発生を抑えつつ、歪み補正精度を高めることができる。
[Aspect E]
Aspect E stores the image information of the plurality of lattice reference images having different grid patterns in any one of aspects B to D in the storage means, and is stored in the storage means in the projection step. The construction unit is configured to perform a process of causing the image projection unit to project the type of the grid reference image according to the characteristics of the image projection unit among the plurality of types of the grid reference images. It is what. In such a configuration, by using a grid reference image according to the characteristics of the image projection means, it is possible to improve the distortion correction accuracy while suppressing the occurrence of errors.
１：プロジェクター（画像投写手段、構築手段の一部）
６：カメラ（撮像手段）
２０：制御装置（構築手段の一部）
４０：通信ネットワーク
５０：カメラ（撮像手段）
1: Projector (image projection means, part of construction means)
6: Camera (imaging means)
20: Control device (part of construction means)
40: Communication network 50: Camera (imaging means)
Claims (5)
前記投写面を撮像する撮像手段と、
所定の基準画像を前記画像投写手段に投写させる投写工程、前記投写面に投写された前記基準画像を前記撮像手段に撮像させる撮像工程、及び前記撮像工程における撮像で得られた画像情報によって再現される再現基準画像を解析して投写画像の歪みを補正するための補正情報を構築する構築工程を具備する歪み補正情報構築処理を実施する構築手段とを備える画像投写システムにおいて、
前記構築工程にて、前記再現基準画像について不明瞭な箇所を具備するものであることが判明した場合に、前記歪み補正情報構築処理を前記投写工程からやり直す処理を実施するように、前記構築手段を構成したことを特徴とする画像投写システム。 Image projection means for projecting an image onto a projection surface;
Imaging means for imaging the projection plane;
Reproduced by a projection step of projecting a predetermined reference image on the image projection means, an imaging step of causing the imaging means to image the reference image projected on the projection plane, and image information obtained by imaging in the imaging step An image projection system comprising: a construction unit that performs a distortion correction information construction process including a construction step of constructing correction information for analyzing a reproduction reference image to correct distortion of a projection image.
In the construction step, when it is found that the reproduction reference image has an unclear portion, the construction means is configured to perform a process of redoing the distortion correction information construction process from the projection process. An image projection system characterized by comprising:
前記基準画像として、互いにマス目の大きさ及び数の異なる複数の格子基準画像の画像情報を記憶する記憶手段を設け、
前記構築工程にて、前記再現基準画像について不明瞭な箇所を具備するものであることが判明した場合に、その後にやり直した前記投写工程にて、前回の前記投写工程で用いた前記格子基準画像よりもマス目の大きな前記格子基準画像の画像情報を前記記憶手段から読み込んで前記画像投写手段に投写させる処理を実施するように、前記構築手段を構成したことを特徴とする画像投写システム。 The image projection system according to claim 1,
As the reference image, a storage unit is provided for storing image information of a plurality of lattice reference images having different grid sizes and numbers.
In the construction process, when it is found that the reproduction reference image has an unclear portion, the grid reference image used in the previous projection process in the projection process re-executed after that. An image projection system, wherein the construction unit is configured to perform processing of reading image information of the grid reference image having a larger grid size from the storage unit and causing the image projection unit to project the image information.
前記構築工程を実施した後、所定の再試条件について具備するか否かを判定し、具備した場合に、前記歪み補正情報構築処理の再実行を開始し、前記投写工程にて、前回の前記歪み補正情報構築処理で用いた前記格子基準画像よりもマス目の小さな前記格子基準画像の画像情報を前記記憶手段から読み込んで前記画像投写手段に投写させ、その後の前記構築工程にて、前記再現基準画像について不明瞭な箇所を具備しないものであるこことが判明した場合に、前記撮像結果に基づいて前記補正情報を補正する処理を実施するように、前記構築手段を構成したことを特徴とする画像投写システム。 The image projection system according to claim 2, wherein
After performing the construction process, it is determined whether or not a predetermined retry condition is satisfied, and when it is prepared, re-execution of the distortion correction information construction process is started, and the previous distortion is performed in the projection process. The image information of the lattice reference image having a grid smaller than the lattice reference image used in the correction information construction process is read from the storage means and projected onto the image projection means. In the construction step thereafter, the reproduction reference The construction means is configured to perform a process of correcting the correction information based on the imaging result when it is determined that the image does not have an unclear part. Image projection system.
再実行を開始した前記歪み補正情報構築処理の前記構築工程にて、前記再現基準画像について不明瞭な箇所を具備するものであることが判明した場合に、前記構築工程を中断する処理を実施するように、前記構築手段を構成したことを特徴とする画像投写システム。 The image projection system according to claim 3.
In the construction process of the distortion correction information construction process that has started re-execution, when it is determined that the reproduction reference image has an unclear portion, a process for interrupting the construction process is performed. Thus, an image projection system comprising the construction means.
互いにマス目のパターンの異なる複数の前記格子基準画像の画像情報を前記記憶手段に記憶させ、前記投写工程にて、前記記憶手段に記憶されている複数種類の前記格子基準画像のうち、前記画像投写手段の特性に応じた種類の前記格子基準画像を前記画像投写手段に投写させる処理を実施するように、前記構築手段を構成したことを特徴とする画像投写システム。 The image projection system according to any one of claims 2 to 4,
Image information of a plurality of grid reference images having different grid patterns from each other is stored in the storage unit, and the image among the plurality of types of grid reference images stored in the storage unit in the projection step. An image projection system, wherein the construction unit is configured to perform a process of causing the image projection unit to project the type of the grid reference image according to the characteristics of the projection unit.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2014135529A JP2016015558A (en) | 2014-07-01 | 2014-07-01 | Image projection system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2014135529A JP2016015558A (en) | 2014-07-01 | 2014-07-01 | Image projection system |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2016015558A true JP2016015558A (en) | 2016-01-28 |
Family
ID=55231465
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2014135529A Pending JP2016015558A (en) | 2014-07-01 | 2014-07-01 | Image projection system |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2016015558A (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2020255766A1 (en) * | 2019-06-20 | 2020-12-24 | ソニー株式会社 | Information processing device, information processing method, program, projection device, and information processing system |
-
2014
- 2014-07-01 JP JP2014135529A patent/JP2016015558A/en active Pending
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2020255766A1 (en) * | 2019-06-20 | 2020-12-24 | ソニー株式会社 | Information processing device, information processing method, program, projection device, and information processing system |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US9983770B2 (en) | Screen capture method, apparatus, and terminal device | |
| US9711030B2 (en) | Electronic device for providing content according to user's posture and content providing method thereof | |
| JP2017058812A (en) | Image display apparatus, image display method and program | |
| US11012608B2 (en) | Processing method and mobile device | |
| CN104301596A (en) | Video processing method and device | |
| CN110798670A (en) | Ultrashort-focus picture screen alignment method and device, ultrashort-focus projection equipment and medium | |
| JP4662874B2 (en) | Image processing apparatus and program | |
| JP2006033357A (en) | Image converting apparatus and video image projecting device | |
| JP6171371B2 (en) | Image processing program, image processing apparatus, and image processing method | |
| JP2016015558A (en) | Image projection system | |
| WO2019196662A1 (en) | Local enlargement of image | |
| US10999513B2 (en) | Information processing apparatus having camera function, display control method thereof, and storage medium | |
| JP2018107532A (en) | Projection control device, projection control method, and program | |
| WO2022042669A1 (en) | Image processing method, apparatus, device, and storage medium | |
| US8780212B2 (en) | Captured image display apparatus and method thereof | |
| CN106559627B (en) | Projection method, device and equipment | |
| JP2013153392A (en) | Image processing apparatus and image processing method, and program | |
| US10244179B2 (en) | Image processing apparatus, image capturing apparatus, control method, and recording medium | |
| US11393366B2 (en) | Projection calibrations | |
| CN117014589B (en) | Projection method, projection device, electronic equipment and storage medium | |
| JP5867903B2 (en) | Image processing apparatus, image processing method, and program | |
| CN114630008B (en) | Image processing method, device, storage medium and electronic equipment | |
| JP2015115801A (en) | Image projection apparatus, image projection method, and program | |
| JP7489225B2 (en) | IMAGE PROCESSING SYSTEM, INFORMATION PROCESSING APPARATUS, PROGRAM, AND IMAGE PROCESSING METHOD | |
| JP6312488B2 (en) | Image processing apparatus, image processing method, and program |