JPWO2015159548A1 - 投影制御装置、投影制御方法及び投影制御プログラム - Google Patents

Abstract

本発明は、高い利便性で投影画像を提供する投影制御技術を実現する投影制御装置を提供する。その投影制御装置は、画像の投影方法を設定するための投影パラメータの変更が可能な投影装置に任意の画像を投影させる投影処理部（１０１）と、ユーザ操作を検出する操作検出部（１０２）と、第一のユーザ操作が検出された場合、上記撮影装置に上記投影パラメータを変更して投影させるよう制御し、第二のユーザ操作が検出された場合、投影処理部（１０１）に上記投影パラメータを変更せず上記画像を変更させるよう制御する制御部（１０３）とを備える。

Description

本発明は、投影画像を制御する技術に関する。

広告や案内情報等を提示するデジタルサイネージが新しい情報媒体として普及しつつある。デジタルサイネージには、表示パネルを用いず、映像を壁面等に投影することで、情報提供を行うものも存在する。下記特許文献１には、このようなプロジェクタを用いた情報表示手法において、メガネを用いて視聴する者と裸眼で視聴する者とで、異なる画像を視聴させる手法が提案されている。具体的には、その提案手法は、階調値が圧縮された主画像を第一の偏光フィルタを介してスクリーンに投影する。かつ、その提案手法は、階調値が変更された副画像と当該主画像との諧調値の差に対応する補正画像を、第一の偏光フィルタとは異なる偏光成分を有する第二の偏光フィルタを介して上記スクリーンに投影する。

国際公開第２０１２／０３５７６８号

上述の提案手法によれば、各視聴者は、好ましいほうの画像に応じた視聴方法（メガネを用いるか否か）を取ることで、好ましいほうの画像を見ることができる。しかしながら、上述の提案手法のように、画像が投影されるスクリーンが固定されている場合、各視聴者は、そのスクリーンが視認できる位置に移動し、かつ、そのスクリーンの方向を向く必要がある。

本発明は、このような事情に鑑みてなされたものであり、高い利便性で投影画像を提供する投影制御技術を実現する。

本発明の目的は、高い利便性で投影画像を提供する投影制御技術を実現する投影制御装置、投影制御方法及び記録媒体を提供することにある。

本発明の各側面では、上述した課題を解決するために、それぞれ以下の構成を採用する。

本発明の第一の側面に係る投影制御装置は、画像の投影方法を設定するための投影パラメータの変更が可能な投影装置に画像を投影させる投影処理手段と、ユーザ操作を検出する操作検出手段と、第一のユーザ操作が検出された場合、上記投影装置に上記投影パラメータを変更して投影させるよう制御し、第二のユーザ操作が検出された場合、上記投影処理手段に上記投影パラメータを変更せず上記画像を変更させるよう制御する制御手段と、を有する。

本発明の第二の側面に係る投影制御方法は、画像の投影方法を設定するための投影パラメータの変更が可能な投影装置に画像を投影させ、ユーザ操作を検出し、第一のユーザ操作が検出された場合、上記投影装置に上記投影パラメータを変更して投影させ、第二のユーザ操作が検出された場合、上記投影パラメータを変更せず上記画像を変更する、ことを含む。

本発明の第三の側面に係る投影制御プログラムを記録した記録媒体は、画像の投影方法を設定するための投影パラメータの変更が可能な投影装置に画像を投影させる処理と、ユーザ操作を検出する処理と、第一のユーザ操作が検出された場合、前記投影装置に前記投影パラメータを変更して投影させ、第二のユーザ操作が検出された場合、前記投影パラメータを変更せず前記画像を変更する処理と、を少なくとも１つのコンピュータに実行させる。

上記各側面によれば、高い利便性で投影画像を提供する投影制御技術を実現することができる。

本発明の第一実施形態における投影制御装置のハードウェア構成例を概念的に示す図である。 ＩＰ（Interactive Projection）装置の外形例を簡易的に示す図である。 投影装置により投影される投影画面を概念的に示す図である。 投影画面の例を示す図である。 第一実施形態における投影制御装置の処理構成例を概念的に示す図である。 第一実施形態における投影制御装置の動作例を示すフローチャートである。 第一実施形態における投影画面自体の移動の例を示す図である。 投影画面内の投影画像（投影内容）の変更の例を示す図である。 本発明の第二実施形態における投影制御装置の動作例を示すフローチャートである。 本発明の第三実施形態における投影制御装置の動作例を示すフローチャートである。 第三実施形態における投影画面自体の移動の例を示す図である。 本発明の第四実施形態における投影制御装置の処理構成例を概念的に示す図である。 第四実施形態における投影制御装置の動作例を示すフローチャートである。 第四実施形態の変形例における投影制御装置の動作例を示すフローチャートである。 本発明の第五実施形態における投影制御装置の動作例を示すフローチャートである。 本発明の第六実施形態における投影制御装置の処理構成例を概念的に示す図である。 第六実施形態における投影制御装置の動作例を示すフローチャートである。

以下、本発明の実施の形態について説明する。なお、以下に挙げる各実施形態はそれぞれ例示であり、本発明は以下の各実施形態の構成に限定されない。
［第一実施形態］
以下、第一実施形態における投影制御装置及び投影制御方法について複数の図面を用いて説明する。

〔ハードウェア構成〕
図１は、第一実施形態における投影制御装置１０のハードウェア構成例を概念的に示す図である。投影制御装置１０は、投影型のデジタルサイネージ装置であり、ＣＰＵ（Central Processing Unit）２、メモリ３、通信ユニット４等を有する。メモリ３は、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、ハードディスク等である。通信ユニット４は、他のコンピュータとの通信網を介した通信や、三次元センサ６、投影装置７等の他の機器との信号のやりとり等を行う。通信ユニット４には、可搬型記録媒体等も接続され得る。但し、三次元センサ６及び投影装置７と、投影制御装置１０との間の通信形態は制限されない。投影制御装置１０は、図１に図示されないハードウェア要素を含んでもよく、投影制御装置１０のハードウェア構成は制限されない。

三次元センサ６は、二次元像（画像）の情報、及び、三次元センサ６からの距離の情報（深度情報）を含むセンサ情報を取得する。三次元センサ６は、例えば、可視光カメラ及び距離画像センサにより実現される。距離画像センサは、深度センサとも呼ばれ、レーザから近赤外光のパターンを照射し、そのパターンを近赤外光を検知するカメラで撮像して得られる情報に基づいて、距離画像センサから検知対象までの距離（深度）が算出される。但し、三次元センサ６の実現手法は制限されない。三次元センサ６は、複数のカメラを用いる三次元スキャナ方式で実現されてもよい。

投影装置７は、投影制御装置１０から送られる画像情報に基づいて光を投影面に投射することにより、投影面上に画像を投影する。投影装置７は、投影方向を調整する手段（方向調整手段８）を含む。方向調整手段８は、例えば、光を投射する投射部の向きを変える機構、投射部から投射された光の向きを変える機構、及び、その他の機構の中のいずれか１つ、いずれか複数、又は全部により実現される。図１の例では、三次元センサ６と投影装置７とが別々の機器として表されているが、それらは、図２に例示されるように、１つの機器として実現されてもよい。但し、図２は実施例であり、三次元センサ６及び投影装置７の一体化構造は、図２の構造に制限されない。

図２は、ＩＰ（Interactive Projection）装置９の外形例を簡易的に示す図である。ＩＰ装置９は、図２に示されるように、方向調整機構９１、９２及び９３、投射部９５及びセンシング部９６等を有する。投射部９５は、光を投射する部位であり、投影装置７の一部に相当する。センシング部９６は、センサ情報の検出面であり、三次元センサ６の一部に相当する。図２に示されるように、センシング軸の方向と投影軸の方向とが並行となるように、投射部９５及びセンシング部９６が設置されている。

方向調整機構９１、９２及び９３は、方向調整手段８の実現手法の一例であり、投影軸及びセンシング軸の各方向を調整可能とする構造である。方向調整機構９１は、各方向を紙面上、左右方向に変更可能とし、方向調整機構９２は、各方向を紙面上、上下方向に変更可能とし、方向調整機構９３は、各方向を紙面上、回転可能とする。但し、ＩＰ装置９は、投射部９５及びセンシング部９６が設置される筐体を動かすことなく、可動型のミラーや光学系機構を方向調整手段８として備えることもできる。

図３は、投影装置７により投影される投影画面を概念的に示す図である。図３に示されるように、投影装置７は、投影面７０に投影画面７２を投影する。投影画面７２は、投影面７０上の投影領域の全てを意味する。上述の投影軸は、図３の符号７１で示される。投影装置７の方向調整手段により、投影方向（投影軸７１の方向）を変えることで、投影画面７２自体を投影面７０上で移動させることができる。

図４は、投影画面の例を示す図である。投影装置７は、投影制御装置１０から送られる画像情報に基づいて、投影画面７２内に投影画像を表示する。図４の例では、投影画面７２内には、投影画像７５、７６及び７７が表示され、投影画面７２内には、投影画像７５、７６及び７７の表示領域以外の領域７８も含まれる。この領域は、投影背景領域７８と表記される。投影背景領域７８についても、投影制御装置１０から送られる画像情報に基づいて設定される。

本明細書では、投影画面とは、投影装置７から投射される光により投影面上に表れる投影像の全領域を意味し、画像又は投影画像とは、投影画面内に表示される画像を意味する。また、画面内操作とは、投影画面内のユーザ操作を意味する。

〔処理構成〕
図５は、第一実施形態における投影制御装置１０の処理構成例を概念的に示す図である。投影制御装置１０は、投影処理部１１、コンテンツ保持部１２、ユーザ位置取得部１３、投影位置取得部１４、操作検出部１５、制御部１６等を有する。これら各処理部は、例えば、ＣＰＵ２によりメモリ３に格納されるプログラムが実行されることにより実現される。また、当該プログラムは、例えば、ＣＤ（Compact Disc）、メモリカード等のような可搬型記録媒体やネットワーク上の他のコンピュータから通信ユニット４を介してインストールされ、メモリ３に格納されてもよい。

投影処理部１１は、投影装置７に画像を投影させる。具体的には、投影処理部１１は、コンテンツ保持部１２に保持される画像情報を投影装置７に送ることで、その画像情報に対応する投影画像を投影装置７に投影させる。画像及び画像情報の内容は制限されない。このとき、図４に例示されるように、投影面には、投影画面７２が投影され、その投影画面７２内にその投影画像が表示（投影）される。

また、投影処理部１１は、後述の制御部１６の指示により、投影画面内の投影内容（投影画像）を変更する。具体的には、投影処理部１１は、その指示に対応して変更された投影画像を示す画像情報を投影装置７に送る。投影画像の変更には、移動、拡大、縮小、回転、表示内容の遷移等、様々態様が含まれる。

コンテンツ保持部１２は、投影装置７に投影される画像を形成するための複数の画像情報を保持する。各画像情報には、上記投影画面内の所定位置にそれぞれ表示される文字、図柄、映像等の画像が示される。コンテンツ保持部１２に保持される画像情報は、例えば、アプリケーションプログラムがＣＰＵ２により実行されることで生成する表示データである。保持される画像情報の態様は制限されない。

ユーザ位置取得部１３は、三次元センサ６から得られるセンサ情報に基づいてユーザの特定部位を認識し、認識された特定部位の位置を示す部位位置情報を取得する。具体的には、ユーザ位置取得部１３は、センサ情報に含まれる画像情報及び深度情報の少なくとも一方を用いて、ユーザの特定部位を認識する。認識される特定部位は、ユーザが操作を行う上で用いる、体の一部（指先等）、又は、操作具である。画像から特定部位を認識する手法については、周知のオブジェクト認識手法が利用されればよい。認識手法の一例としては、ユーザ位置取得部１３は、画像情報から特徴量を用いて人の頭部を認識し、画像情報と距離情報とを用いて、その人の頭部との位置関係及び特徴量から当該特定部位を認識する。

ユーザ位置取得部１３は、センサ情報に含まれる二次元像情報及び距離情報に基づいて、上述のように認識されたユーザの特定部位の位置情報を取得する。例えば、ユーザ位置取得部１３は、三次元センサ６の位置及び向きを基準に設定された三次元座標空間における、当該特定部位の位置情報を取得することができる。

投影位置取得部１４は、三次元センサ６から得られるセンサ情報に基づいて投影画面の少なくとも一部が投影される位置を示す投影位置情報を取得する。例えば、投影位置取得部１４は、投影装置７の位置及び投影方向並びにセンサ情報に基づいて、投影装置７から投影面までの距離（投影距離）を認識することができる。そして、投影位置取得部１４は、その距離及び投影装置７の投影仕様に基づいて、上述の三次元座標空間における、投影画面が投影されている位置を特定することができる。投影画面が投影されている位置は、その三次元座標空間上の投影画面に相当する平面の位置で表すことができる。

また、図４に示されるように、投影画面内には投影画像が表示されるため、投影位置取得部１４は、投影画面の少なくとも一部としての投影画像が投影される位置を、次のようにして特定することもできる。投影位置取得部１４は、上述のように特定された投影画面の位置と、投影処理部１１で処理される画像情報から得られる投影画面内のその投影画像の位置とに基づいて、上述の三次元座標空間におけるその投影画像の位置の情報を取得することができる。

操作検出部１５は、ユーザ操作を検出する。具体的には、操作検出部１５は、ユーザ位置取得部１３により取得された部位位置情報及び投影位置取得部１４により取得された投影位置情報に基づいて、投影画面の少なくとも一部又は投影画面外に対する当該特定部位を用いたユーザ操作を検出する。例えば、操作検出部１５は、特定部位で、投影画面内又は外の任意の箇所を触り、直ぐに投影面から離す操作（以降、タップ操作と表記する）を検出する。また、操作検出部１５は、特定部位で投影画面内又は外の任意の箇所を所定時間以上触り、その状態のまま投影面上で特定部位を移動させ、その後、投影面から離す操作（以降、ドラッグ操作と表記する）を検出する。その他、操作検出部１５は、フリック操作やスワイプ操作等を検出することもできる。ここでは、スワイプ操作は、任意の箇所を触り、ドラッグ操作で用いられた上記所定時間経たないうちに、投影画面上で特定部位を移動させる操作を意味するため、ドラッグ操作と区別される。但し、操作検出部１５により検出されるユーザ操作は制限されない。

操作検出部１５は、その検出されたユーザ操作の位置を特定する。検出されたユーザ操作に応じて、特定される位置は１つ又は複数となる。例えば、上述のタップ操作では、特定部位が投影画面内又は外に触れた位置がユーザ操作の位置として特定される。上述のドラッグ操作では、特定部位が投影画面内又は外に最初に触れた位置から、特定部位が投影面から離れる位置までの移動軌跡上の複数位置がユーザ操作の位置として特定される。特定されたユーザ操作の位置は、共通の三次下座標空間にマッピングされる。

操作検出部１５は、特定されたユーザ操作の位置に基づいて、少なくとも２つのタイプのユーザ操作を区別して検出する。この２つのタイプのユーザ操作は、第一のユーザ操作と第二のユーザ操作と表記される。例えば、操作検出部１５は、その検出されたユーザ操作が開始された位置、又は、終了した位置、若しくは、それら両方がどのような場所かを投影処理部１１により処理される画像情報を用いて判断する。そして、操作検出部１５は、その結果に応じて、そのユーザ操作を第一又は第二のユーザ操作として検出する。第一のユーザ操作とは、投影画面自体を移動させるために割り当てられる操作であり、第二のユーザ操作とは、投影画面内の投影画像を変えるために割り当てられる操作である。

〔ユーザ操作の検出例〕
以下、第一実施形態における、第一及び第二のユーザ操作の検出例を挙げる。但し、操作検出部１５の処理は、以下の具体例に制限されない。

操作検出部１５は、検出されたユーザ操作が開始された位置が投影画面内の画面内操作に割り当てられていない箇所にある場合に、その操作を第一のユーザ操作として検出し、その位置が投影画面内の画面内操作に割り当てられている箇所にある場合に、その操作を第二のユーザ操作として検出する。例えば、投影画面内で単に情報や画像を表示する領域は、画面内操作に割り当てられていない箇所と判断できる。逆に、投影画面内で選択操作等の何らかの入力操作を期待する箇所は、画面内操作に割り当てられている箇所と判断できる。

操作検出部１５は、検出されたユーザ操作が開始された位置が投影画面内であり、かつ、そのユーザ操作の終了位置が投影画面外である場合に、その操作を第一のユーザ操作として検出し、開始位置及び終了位置が共に投影画面内である場合に、その操作を第二のユーザ操作として検出してもよい。

他の例として、操作検出部１５は、検出されたユーザ操作が開始された位置が投影画面内の投影背景領域である場合に、その操作を第一のユーザ操作として検出し、その位置が投影画面内の投影画像上にある場合に、その操作を第二のユーザ操作として検出することもできる。投影背景領域は、図４において符号７８で示されている。

更に他の例として、操作検出部１５は、検出されたユーザ操作が開始された位置が投影画面外である場合に、その操作を第一のユーザ操作として検出し、その位置が投影画面内である場合に、その操作を第二のユーザ操作として検出することもできる。操作検出部１５は、三次元座標空間において投影画面に相当する平面をそのままの位置で拡大した平面上にユーザの特定部位が存在するか否かで、投影画面外の接触操作を検出することができる。

また、操作検出部１５は、検出されたユーザ操作が開始された位置が投影画面内の専用の操作画像（アイコンなど）上にある場合に、その操作を第一のユーザ操作として検出し、その位置がその専用の操作画像外である場合に、その操作を第二のユーザ操作として検出することもできる。この場合、投影処理部１１により処理される画像情報には、専用の操作画像が含まれる。

制御部１６は、操作検出部１５により第一のユーザ操作が検出された場合、投影装置７の投影方向を変えて投影面に写される投影画面自体を移動させ、第二のユーザ操作が検出された場合、その投影方向を変えず投影画面内の投影内容（投影画像）を変える。例えば、制御部１６は、第一のユーザ操作が検出された場合、次のように投影装置７の投影方向を変える。

制御部１６は、検出されたユーザ操作に応じて、投影画面の移動パラメータ（方向、速度、距離等）を決定する。投影画面の移動パラメータは、検出されたユーザ操作により示される特定部位の移動方向、移動速度、移動距離等によって決めることができる。制御部１６は、その算出された移動パラメータを、投影装置７の投影方向の変更パラメータに変換する。この変換手法については、周知の幾何学的手法が用いられればよい。この変換手法は、例えば、投影位置取得部１４による投影位置の計算の逆計算により実現可能である。変更パラメータには、例えば、変更すべき向き、変更速度等が含まれる。制御部１６は、投影方向の変更パラメータを含む投影方向の変更指示を投影装置７に送る。これにより、投影装置７は、取得された変更パラメータに応じて、方向調整手段８に投影方向を変更させることで、指示された投影方向に投影画面を投影し、結果として、投影面に投影される投影画面自体を移動させる。

一方、制御部１６は、第二のユーザ操作が検出された場合、次のようにして、投影画面内の投影画像を変えることができる。例えば、制御部１６は、その検出されたユーザ操作がどのような画面内操作であるのかを判定する。画面内操作としては、一般的なコンピュータで可能とされている、ディスプレイ等の表示部における表示に対する、キーボードやマウス等のユーザインタフェース機器を用いた様々な操作が存在し得る。例えば、この画面内操作の内容は、画像の移動、画像の拡大、縮小及び回転、ハイパーリンクや選択ボタンやメニューの選択、表示スクロール、表示遷移等、様々であり、制限されない。制御部１６は、検出されたユーザ操作に対応する画面内操作に応じた投影画像となるように、投影処理部１１に指示する。これにより、その画面内操作に応じて表示状態が変更された画像情報が投影処理部１１から投影装置７に送られ、結果、投影画面自体は移動せず、投影画面内の投影画像が変更される。

〔動作例／投影制御方法〕
以下、第一実施形態における投影制御方法について図６を用いて説明する。

図６は、第一実施形態における投影制御装置１０の動作例を示すフローチャートである。図６に示されるように、第一実施形態における投影制御方法は、投影制御装置１０のような少なくとも１つのコンピュータにより実行される。例えば、図示される各工程は、投影制御装置１０が有する各処理部により実行される。各工程は、投影制御装置１０が有する上述の各処理部の処理内容と同様であるため、各工程の詳細は、適宜省略される。

投影制御装置１０は、画像を投影装置７に投影させる（Ｓ７１）。具体的には、投影制御装置１０は、画像情報を投影装置７に送信することで、画像情報に対応する投影画像を投影面７０に投影させる。これにより、投影面には投影画面が投影され、その投影画面内にその投影画像が表示される。

投影制御装置１０は、三次元センサ６から取得されるセンサ情報に基づいてユーザの特定部位を認識し、その認識された特定部位の位置を示す部位位置情報を取得する（Ｓ７２）。特定部位の位置は、投影制御装置１０で共有される三次元座標空間にマッピングされる。

投影制御装置１０は、三次元センサ６から取得されるセンサ情報に基づいて投影画面の少なくとも一部が投影される位置を示す投影位置情報を取得する（Ｓ７３）。投影画面が投影されている位置の取得手法については上述のとおりであり、投影画面内の各投影画像の位置については、（Ｓ７１）でそれら投影画像を投影させるための画像情報に基づいて特定される。投影位置についても投影制御装置１０で共有される三次元座標空間にマッピングされる。

投影制御装置１０は、（Ｓ７２）で取得された部位位置情報、及び、（Ｓ７３）で取得された投影位置情報に基づいて、投影画面の少なくとも一部又は投影画面外に対する特定部位を用いたユーザ操作を検出する（Ｓ７４）。

続いて、投影制御装置１０は、（Ｓ７４）で検出されたユーザ操作の位置を特定する（Ｓ７５）。特定された操作位置についても投影制御装置１０で共有される三次元座標空間にマッピングされる。

投影制御装置１０は、（Ｓ７５）で特定されたユーザ操作の位置に基づいて、第一又は第二のユーザ操作が検出されたか否かを判定する（Ｓ７６）。ユーザ操作の位置に基づく第一及び第二のユーザ操作の検出手法については上述したとおりである。

投影制御装置１０は、第一のユーザ操作が検出されたと判断すると（Ｓ７６；第一のユーザ操作）、投影装置７の投影方向を変更する（Ｓ７７）。具体的には、投影制御装置１０は、投影方向の変更指示を投影装置７に送る。投影制御装置１０は、第二のユーザ操作が検出されたと判断すると（Ｓ７６；第二のユーザ操作）、投影方向を変更せず、投影画面内の投影画像を変更する（Ｓ７８）。

投影制御装置１０は、（Ｓ７７）又は（Ｓ７８）の実行後、若しくは、第一又は第二のユーザ操作が検出されていないと判断した場合（Ｓ７６；ＮＯ）、（Ｓ７２）以降を再度実行する。

上述の投影制御方法の実施例について図７及び図８を用いて説明する。図７及び図８には、上述の投影制御方法の実施シーンの例が示される。図７及び図８の例では、投影面７０がユーザの利用するテーブルであり、投影装置７は、そのテーブルの上方に、そのテーブルの方向を向いて設置されている。図７及び図８には図示されていないが、投影装置７の近くには三次元センサ６も同様の向きに設置されている。

図７は、第一実施形態における投影画面自体の移動の例を示す図である。

投影制御装置１０は、投影画像８１、８２、８３及び８４を投影面７０の中央に投影させる（Ｓ７１）。これにより、投影画面７２内に投影画像８１、８２、８３及び８４が表示される。

投影制御装置１０は、投影面７０となるテーブルを利用するユーザの指先の位置を示す部位位置情報を取得する（Ｓ７２）。更に、投影制御装置１０は、投影画面７２が投影されている位置、及び、投影画面７２内の投影画像８１、８２、８３及び８４の位置を示す投影位置情報を取得する（Ｓ７３）。

投影制御装置１０は、ユーザの指先が投影画面７２内の位置８５に接触し、かつ、その指先が投影面７０上、方向８７に移動する操作を検出する（Ｓ７４）。

投影制御装置１０は、検出されたユーザ操作の開始点となる位置８５、移動後の位置（移動方向８７を含む）等を特定する。

（Ｓ７４）で検出されたユーザ操作が開始された位置８５が、投影画面７２内の投影背景領域７８にあるため、投影制御装置１０は、そのユーザ操作を第一のユーザ操作と判断する（Ｓ７６；第一のユーザ操作）。これにより、投影制御装置１０は、投影装置７の投影方向を変更することで、投影画面７２を符号８０で示される位置に移動させる（Ｓ７７）。

図８は、投影画面内の投影画像（投影内容）の変更の例を示す図である。図８には、図７に示されていた投影画面７２が上述のように移動された後の投影画面８０が示される。投影画面８０は、投影面７０であるテーブルのユーザの近接するエリアに投影されている。

投影制御装置１０は、当該ユーザの指先の位置を示す部位位置情報を取得する（Ｓ７２）。投影制御装置１０は、投影画面８０が投影されている位置、及び、投影画面８０内の投影画像８１等の位置を示す投影位置情報を取得する（Ｓ７３）。

投影制御装置１０は、ユーザの指先が投影画面８０内の位置８８に接触し、かつ、その指先が投影面７０上、方向８９に移動する操作を検出する（Ｓ７４）。投影制御装置１０は、検出されたユーザ操作の開始点となる位置８８、移動後の位置（移動方向８９を含む）等を特定する。

（Ｓ７４）で検出されたユーザ操作が開始された位置８８が、投影画面８０内の投影画像８１上にあるため、投影制御装置１０は、そのユーザ操作を第二のユーザ操作と判断する（Ｓ７６；第二のユーザ操作）。これにより、投影制御装置１０は、投影方向を変更することなく、投影画像８８を投影画面８０内で方向８９に移動させることで、投影画面８０の投影画像（投影内容）を変更する（Ｓ７８）。この場合、投影制御装置１０は、投影画像８８が投影画面８０内で移動する様子を示す画像情報を投影装置７に送ることで、投影画像８８を投影画面８０内で移動させる。

〔第一実施形態の作用及び効果〕
上述のように、第一実施形態では、ユーザの特定部位の位置を示す部位位置情報及び投影画面の少なくとも一部が投影されている位置を示す投影位置情報が取得される。そして、各位置情報に基づいて、投影画面の少なくとも一部又は投影画面外に対するその特定部位を用いたユーザ操作が検出される。そして、検出されたユーザ操作の位置に基づいて、そのユーザ操作が第一又は第二のユーザ操作であるか否かが判断され、この判断結果に応じて、投影装置７の投影方向、又は、投影画面内の投影画像が変更される。具体的には、第一のユーザ操作が検出された場合には、投影装置７の投影方向が変更され、結果として、投影面に写される投影画面自体が移動する。第二のユーザ操作が検出された場合には、投影方向を変えず投影画面内の投影画像が変更される。

従って、第一実施形態によれば、ユーザは、第一のユーザ操作を行うことで、投影画面自体を移動させることができ、ひいては、図７及び図８に例示される実施シーンのように、複数のユーザによる投影画面の共有が可能となる。各ユーザは、各自利用し易い位置に投影画面を移動させることができるからである。このような投影画面の共有を、ディスプレイ等の表示部を用いる形態で実現するためには、その表示部自体を各ユーザが移動する必要があるため、使い勝手が悪い。第一実施形態によれば、ユーザ端末を用いることなく、簡単操作で投影画面を複数人で共有できる環境を提供することができる。つまり、高い利便性で投影画像を提供することができる。

更に、投影画面の少なくとも一部又は投影画面外に対するユーザ操作の位置に応じて、投影画面自体の移動と投影画面内の投影画像の変更とが切り替えられるため、ユーザにとって使い易い状態で投影画像を提供することができる。
［第二実施形態］
以下、第二実施形態における投影制御装置及び投影制御方法について図面を用いて説明する。第二実施形態では、ユーザ操作の時間に基づいて、投影画面自体の移動と投影画面内の投影画像の変更とが切り替えられる。以下、第二実施形態について、第一実施形態と異なる内容を中心に説明し、第一実施形態と同様の内容については適宜省略する。

〔処理構成〕
第二実施形態における投影制御装置１０の処理構成は、第一実施形態と同様であるが、以下に示す処理部の処理内容が第一実施形態と異なる。

操作検出部１５は、上述のように検出された、投影画面の少なくとも一部又は投影画面外に対する当該特定部位を用いたユーザ操作の時間（操作時間）を計測し、計測された操作時間に基づいて、第一のユーザ操作及び第二のユーザ操作を区別して検出する。操作時間は、投影画面の少なくとも一部又は投影画面外の或る位置に特定部位が留まった時間を含む。例えば、上述のタップ操作では、特定部位が投影画面内又は外に触れた時間が計測される。上述のドラッグ操作では、特定部位が投影画面内又は外に最初に触れた位置での特定部位の留まった時間が計測される。

例えば、操作検出部１５は、検出されたユーザ操作が所定時間より長い操作時間を含む場合、そのユーザ操作を第一のユーザ操作として検出し、検出されたユーザ操作が所定時間より長い操作時間を含まない場合、そのユーザ操作を第二のユーザ操作として検出する。所定時間は予め操作検出部１５により保持される。更に具体的には、操作検出部１５は、上述のドラッグ操作を第一のユーザ操作として検出し、上述のスワイプ操作、タップ操作、フリック操作等の他の操作を第二のユーザ操作として検出する。また、操作検出部１５は、ドラッグ操作とは異なり、特定部位が、投影画面内又は外の或る位置に所定時間より長く接触し、その後、投影面から離れ、その後、所定時間内に投影面上の他の位置に接触する操作を第一のユーザ操作として検出することもできる。

〔動作例／投影制御方法〕
以下、第二実施形態における投影制御方法について図９を用いて説明する。

図９は、第二実施形態における投影制御装置１０の動作例を示すフローチャートである。第二実施形態における投影制御方法の実行主体については、第一実施形態と同様である。各工程は、投影制御装置１０が有する上述の各処理部の処理内容と同様であるため、各工程の詳細は、適宜省略される。図９では、図６に示される第一実施形態と同じ処理内容の工程については、図６と同じ符号が付されている。

投影制御装置１０は、（Ｓ７４）で検出されたユーザ操作の操作時間を計測する（Ｓ９１）。

投影制御装置１０は、（Ｓ９１）で計測された操作時間に基づいて、第一又は第二のユーザ操作が検出されたか否かを判定する（Ｓ９２）。操作時間に基づく第一及び第二のユーザ操作の検出手法については上述したとおりである。

〔第二実施形態における作用及び効果〕
上述のように、第二実施形態では、投影画面の少なくとも一部又は投影画面外に対する当該特定部位を用いたユーザ操作の時間が計測され、この操作時間が考慮されて、そのユーザ操作が第一又は第二のユーザ操作であるか否かが判断される。そして、その判断結果に応じて、投影装置７の投影方向、又は、投影画面内の投影画像が変更される。

第二実施形態によれば、投影画面の少なくとも一部又は投影画面外に対する当該特定部位を用いたユーザ操作の時間に基づいて、投影画面自体の移動と投影画面内の投影画像の変更とを切り替えるための操作（第一のユーザ操作及び第二のユーザ操作）を設定することができる。上述の具体例のように、ドラッグ操作を投影画面自体の移動のための操作とし、それ以外を投影画面内の投影画像の変更のための操作とすることができ、ユーザにとってイメージし易い操作を実現することができる。
［第三実施形態］
以下、第三実施形態における投影制御装置及び投影制御方法について図面を用いて説明する。第三実施形態では、ユーザ操作の対象となった投影画面内の投影画像の状態に基づいて、投影画面自体の移動と投影画面内の投影画像の変更とが切り替えられる。以下、第三実施形態について、第一実施形態と異なる内容を中心に説明し、第一実施形態と同様の内容については適宜省略する。

〔処理構成〕
第三実施形態における投影制御装置１０の処理構成は、第一実施形態と同様であるが、以下に示す処理部の処理内容が第一実施形態と異なる。

操作検出部１５は、検出されたユーザ操作の対象となる投影画面内の投影画像の状態を特定し、特定された投影画像の状態に基づいて、第一のユーザ操作及び第二のユーザ操作を区別して検出する。例えば、操作検出部１５は、投影画面の少なくとも一部又は投影画面外に対する当該特定部位を用いたユーザ操作が検出された際に、投影処理部１１により処理される画像情報に基づいて、投影画面内の投影画像の状態を特定することができる。この特定は、投影画像の状態が投影画面自体の移動を許可する状態か否かを決定することを意味する。

例えば、操作検出部１５は、投影画像が画面内操作を受け付ける状態か否か、投影画像が初期状態を示す初期画像か否かなどを当該状態として特定する。操作検出部１５は、投影画像が画面内操作を受け付けない状態を示す場合には、そのユーザ操作を第一のユーザ操作として検出し、投影画像が画面内操作を受け付ける状態を示す場合には、そのユーザ操作を第二のユーザ操作として検出する。また、操作検出部１５は、投影画像が初期画像である場合には、そのユーザ操作を第一のユーザ操作として検出し、投影画像が初期画像でない場合には、そのユーザ操作を第二のユーザ操作として検出する。但し、特定される投影画像の状態と第一及び第二のユーザ操作との関係は制限されない。

〔動作例／投影制御方法〕
以下、第三実施形態における投影制御方法について図１０を用いて説明する。

図１０は、第三実施形態における投影制御装置１０の動作例を示すフローチャートである。第三実施形態における投影制御方法の実行主体については、第一実施形態と同様である。各工程は、投影制御装置１０が有する上述の各処理部の処理内容と同様であるため、各工程の詳細は、適宜省略される。図１０では、図６に示される第一実施形態と同じ処理内容の工程については、図６と同じ符号が付されている。

投影制御装置１０は、（Ｓ７４）で検出されたユーザ操作の対象となる投影画面内の投影画像の状態を特定する（Ｓ１０１）。

投影制御装置１０は、（Ｓ１０１）で特定された投影画像の状態に基づいて、第一又は第二のユーザ操作が検出されたか否かを判定する（Ｓ１０２）。投影画像の状態に基づく第一及び第二のユーザ操作の検出手法については上述したとおりである。

図１１は、第三実施形態における投影画面自体の移動の例を示す図である。

投影制御装置１０は、投影画面自体の移動を許可する状態（初期状態と表記）を示す投影画像６１を含む投影画面６０を投影面７０に中央に投影させる（Ｓ７１）。このとき、投影制御装置１０は、初期状態の投影画像６１が投影面７０上を浮遊しているように、移動させることもできる。

投影制御装置１０は、投影面７０となるテーブルを利用するユーザの指先の位置を示す部位位置情報を取得する（Ｓ７２）。更に、投影制御装置１０は、投影画面６０が投影されている位置を示す投影位置情報を取得する（Ｓ７３）。投影制御装置１０は、投影画面６０内の投影画像６１の位置をその投影位置情報として更に取得することもできる。

投影制御装置１０は、ユーザの指先が投影画面６０内に接触し、かつ、その指先が投影面７０上、移動する操作を検出する（Ｓ７４）。そのユーザ操作の開始点として、投影制御装置１０は、ユーザの指先が、投影画面６０内の少なくとも一部、又は、投影画面６０外の投影面７０上に接触する位置を検出してもよい。

投影制御装置１０は、（Ｓ７４）で検出されたユーザ操作の対象となる投影画面６０内の投影画像６１の状態が初期状態を示すことを認識する（Ｓ１０１、Ｓ１０２；第一のユーザ操作）。これにより、投影制御装置１０は、投影装置７の投影方向を変更することで、投影画面６０を符号６２で示される位置に移動させる（Ｓ７７）。投影制御装置１０は、投影画面６０の移動完了後、投影画像６１の状態を初期状態から画面内操作を受け付け得る状態に自動で移行させることもできる。この表示状態の移行として、投影制御装置１０は、図１１に示されるように、投影画像６１から切り替えて、投影画像８１、８２、８３及び８４を投影装置７に投影させる。

状態が初期状態から画面内操作を受け付け得る状態に変更された投影画像８１、８２、８３及び８４は、以降、図８の例と同様に、処理される。この場合、投影制御装置１０は、投影画像８１、８２、８３及び８４に、初期状態に戻るための操作ボタン等を設ける。投影制御装置１０は、この操作ボタンに対するユーザ操作の検出に応じて、投影画像８１、８２、８３及び８４から切り替えて、初期状態の投影画像６１に再度戻す。

〔第三実施形態における作用及び効果〕
上述のように、第三実施形態では、投影画面の少なくとも一部又は投影画面外に対する当該特定部位を用いたユーザ操作が検出される。そして、その検出されたユーザ操作の対象となる投影画面内の投影画像の状態に基づいて、そのユーザ操作が第一又は第二のユーザ操作であるか否かが判断される。そして、その判断結果に応じて、投影装置７の投影方向、又は、投影画面内の投影画像が変更される。

第三実施形態によれば、投影画面内の投影画像の状態で、投影画面自体の移動か、投影画面内の操作かが切り替えられるため、第一及び第二のユーザ操作を区別する処理を簡易化することができ、ユーザにとっても操作し易くすることができる。
［第四実施形態］
以下、第四実施形態における投影制御装置及び投影制御方法について図面を用いて説明する。第四実施形態では、操作体となるユーザの特定部位の形状に基づいて、投影画面自体の移動と投影画面内の投影画像の変更とが切り替えられる。以下、第四実施形態について、第一実施形態と異なる内容を中心に説明し、第一実施形態と同様の内容については適宜省略する。

〔処理構成〕
図１２は、第四実施形態における投影制御装置１０の処理構成例を概念的に示す図である。第四実施形態における投影制御装置１０は、形状認識部１７を更に有する。形状認識部１７についても他の処理部と同様に実現される。

形状認識部１７は、ユーザの特定部位の形状を認識する。形状認識部１７は、ユーザ位置取得部１３により認識されたユーザの特定部位に関し、その形状を認識する。特定部位の形状は、センサ情報に含まれる二次元画像に対する周知の画像認識処理により、認識され得る。例えば、特定部位としてユーザの手が用いられる場合、一本だけ指を立てた状態、複数本指を立てた状態、握った状態、開いた状態等、様々な状態が認識され得る。また、形状認識部１７は、データグローブやデータスーツに搭載されるひずみセンサ等のような、図示されない他のセンサから得られる情報に基づいて、ユーザの特定部位の形状を認識することもできる。当該特定部位の形状の認識手法は制限されない。

操作検出部１５は、投影画面の少なくとも一部又は投影画面外に対する特定部位を用いたユーザ操作の検出時におけるその特定部位の形状に基づいて、第一のユーザ操作及び第二のユーザ操作を区別して検出する。例えば、操作検出部１５は、検出されたユーザ操作が複数本の指を用いた操作である場合、そのユーザ操作を第一のユーザ操作と判断し、検出されたユーザ操作が一本指を用いた操作である場合、そのユーザ操作を第二のユーザ操作と判断する。また、操作検出部１５は、検出されたユーザ操作が両腕で行う操作である場合、そのユーザ操作を第一の所定ユーザ操作と判断し、検出されたユーザ操作が片腕で行う操作である場合、そのユーザ操作を第二の所定ユーザ操作と判断する。 また、操作検出部１５は、検出されたユーザ操作が手のひらを開いた状態の操作である場合、そのユーザ操作を第一のユーザ操作と判断し、検出されたユーザ操作が手を握った状態の操作である場合、そのユーザ操作を第二のユーザ操作と判断する。

上記例のように、操作検出部１５は、操作点が少ない又は小さいユーザ操作を第二のユーザ操作とし、操作点が多い又は大きいユーザ操作を第一のユーザ操作とすることが望ましい。このようにすれば、操作点が少ない又は小さいユーザ操作が投影画面内の操作に割り当てられ、操作点が多い又は大きいユーザ操作が投影画面自体の操作に割り当てられるため、ユーザによって把握し易い操作となるからである。但し、特定部位の形状と第一及び第二のユーザ操作との関係は制限されない。

〔動作例／投影制御方法〕
以下、第四実施形態における投影制御方法について図１３を用いて説明する。

図１３は、第四実施形態における投影制御装置１０の動作例を示すフローチャートである。第四実施形態における投影制御方法の実行主体については、第一実施形態と同様である。各工程は、投影制御装置１０が有する上述の各処理部の処理内容と同様であるため、各工程の詳細は、適宜省略される。図１３では、図６に示される第一実施形態と同じ処理内容の工程については、図６と同じ符号が付されている。

投影制御装置１０は、（Ｓ７４）でユーザ操作が検出されると、そのときのユーザの特定部位の形状を認識する（Ｓ１３１）。特定部位の形状の認識手法については上述したとおりである。

投影制御装置１０は、（Ｓ１３１）で認識されたユーザの特定部位の形状に基づいて、第一又は第二のユーザ操作が検出されたか否かを判定する（Ｓ１３２）。特定部位の形状に基づく第一及び第二のユーザ操作の検出手法については上述したとおりである。

〔第四実施形態における作用及び効果〕
上述のように、第四実施形態では、投影画面の少なくとも一部又は投影画面外に対する特定部位を用いたユーザ操作が検出される。そして、そのユーザ操作時のその特定部位の形状が認識される。そして、その認識された特定部位の形状に基づいて、そのユーザ操作が第一又は第二のユーザ操作であるか否かが判断される。そして、その判断結果に応じて、投影装置７の投影方向、又は、投影画面内の投影画像が変更される。

第四実施形態によれば、操作体となる特定部位の形状で、投影画面自体の移動か、投影画面内の操作かが切り替えられるため、ユーザにとって観念し易い操作感を実現することができる。また、ユーザは、操作に用いる特定部位の形状を変えるだけで、所望の操作を行うことができる。
［第四実施形態の変形例］
第四実施形態において、ユーザの特定部位の形状を認識しなくとも、同様の効果を得ることもできる。この変形例では、投影制御装置１０の処理構成は、第一実施形態と同様であればよい。但し、以下に示す処理部の処理内容が第一実施形態と異なる。

ユーザ位置取得部１３は、特定部位として、ユーザの手の複数箇所を認識し、認識された手の複数箇所の位置を示す部位位置情報を取得する。例えば、ユーザ位置取得部１３は、特定部位として、ユーザの複数の指を認識し、各指の位置を示す部位位置情報を取得する。また、ユーザ位置取得部１３は、特定部位として、複数の指と共に手のひらを認識し、各指の位置及び手のひらの位置を示す部位位置情報を取得することもできる。手のひらの位置は、手のひらの中央の一点の位置により示されてもよい。

操作検出部１５は、投影画面の少なくとも一部又は投影画面外に対する、ユーザ位置取得部１３により認識された箇所の接触数を特定し、特定された接触数に基づいて、第一のユーザ操作及び第二のユーザ操作を区別して検出する。上記例では、操作検出部１５は、投影画面の少なくとも一部又は投影画面外に接触したユーザの指の数を特定する。操作検出部１５は、接触数が所定数（例えば１つ）よりも多い場合、そのユーザ操作を第一のユーザ操作とし、接触数が所定数以下である場合、そのユーザ操作を第二のユーザ操作とすることが望ましい。このようにすれば、操作点が少ないユーザ操作が投影画面内の操作に割り当てられ、操作点が多いユーザ操作が投影画面自体の操作に割り当てられるため、ユーザによって把握し易い操作となるからである。但し、接触数と第一及び第二のユーザ操作との関係は制限されない。

〔動作例／投影制御方法〕
以下、第四実施形態の変形例における投影制御方法について図１４を用いて説明する。

図１４は、第四実施形態の変形例における投影制御装置１０の動作例を示すフローチャートである。実行主体については、第一実施形態と同様である。各工程は、投影制御装置１０が有する上述の各処理部の処理内容と同様であるため、各工程の詳細は、適宜省略される。図１４では、図６に示される第一実施形態と同じ処理内容の工程については、図６と同じ符号が付されている。

（Ｓ７２）において、投影制御装置１０は、ユーザの手の複数箇所を認識し、手の各箇所の位置を示す部位位置情報を取得する。

投影制御装置１０は、（Ｓ７４）で検出されたユーザ操作に関し、手の認識された箇所の接触数を特定する（Ｓ１４１）。

投影制御装置１０は、（Ｓ１４１）で特定された接触数に基づいて、第一又は第二のユーザ操作が検出されたか否かを判定する（Ｓ１４２）。接触数に基づく第一及び第二のユーザ操作の検出手法については上述したとおりである。

ユーザ操作時の特定部位の形状は、このように、特定部位の接触数を用いても判断することができる。本変形例においても、第四実施形態と同様に、ユーザは、操作に用いる特定部位の形状を変えるだけで、所望の操作を行うことができる。
［第五実施形態］
以下、第五実施形態における投影制御装置及び投影制御方法について図面を用いて説明する。第五実施形態では、検出されたユーザ操作における特定部位の移動速度に基づいて、投影画面自体の移動と投影画面内の投影画像の変更とが切り替えられる。以下、第五実施形態について、第一実施形態と異なる内容を中心に説明し、第一実施形態と同様の内容については適宜省略する。

〔処理構成〕
第五実施形態における投影制御装置１０の処理構成は、第一実施形態と同様であるが、以下に示す処理部の処理内容が第一実施形態と異なる。

操作検出部１５は、ユーザ位置取得部１３により取得された部位位置情報及び投影位置取得部１４により取得された投影位置情報に基づいて、検出されたユーザ操作における特定部位の移動速度を計測する。そして、操作検出部１５は、計測された移動速度に基づいて、第一のユーザ操作及び第二のユーザ操作を区別して検出する。例えば、操作検出部１５は、三次元センサ６からのセンサ情報の取得間隔で、ユーザ位置取得部１３により部位位置情報が取得される場合、センサ情報の取得間隔に基づいて、複数の部位位置情報から得られる操作距離に費やされた時間を算出すことができる。操作検出部１５は、その操作距離をその時間で除算することで、移動速度を計測することができる。また、操作検出部１５は、三次元センサ６から得られるセンサ情報に時間情報が含まれており、その時間情報を用いて、移動速度を計測することもできる。操作距離は、ユーザ操作が開始された位置からユーザ操作が終了された位置までの距離により算出される。

操作検出部１５は、移動速度が所定速度よりも速い場合に、第一のユーザ操作が検出されたと判断し、移動速度が所定速度よりも遅い場合に、第二のユーザ操作が検出されたと判断する。この逆の判断がなされてもよい。

〔動作例／投影制御方法〕
以下、第五実施形態における投影制御方法について図１５を用いて説明する。

図１５は、第五実施形態における投影制御装置１０の動作例を示すフローチャートである。第五実施形態における投影制御方法の実行主体については、第一実施形態と同様である。各工程は、投影制御装置１０が有する上述の各処理部の処理内容と同様であるため、各工程の詳細は、適宜省略される。図１５では、図６に示される第一実施形態と同じ処理内容の工程については、図６と同じ符号が付されている。

投影制御装置１０は、（Ｓ７４）で検出されたユーザ操作における特定部位の移動速度を計測する（Ｓ１５１）。移動速度の計測手法については上述したとおりである。

投影制御装置１０は、（Ｓ１５１）で計測された特定部位の移動速度に基づいて、第一又は第二のユーザ操作が検出されたか否かを判定する（Ｓ１５２）。移動速度に基づく第一及び第二のユーザ操作の検出手法については上述したとおりである。

〔第五実施形態における作用及び効果〕
上述のように、第五実施形態では、投影画面の少なくとも一部又は投影画面外に対する特定部位を用いたユーザ操作が検出される。そして、そのユーザ操作における特定部位の移動速度が計測され、その計測された移動速度に基づいて、そのユーザ操作が第一又は第二のユーザ操作であるか否かが判断される。そして、その判断結果に応じて、投影装置７の投影方向、又は、投影画面内の投影画像が変更される。

第五実施形態によれば、移動体の移動速度という操作パラメータを用いて、投影画面自体の移動か、投影画面内の操作かを切り替えることができる。
［第六実施形態］
以下、第六実施形態における投影制御装置及び投影制御方法について図１６及び図１７を用いて説明する。

〔処理構成〕
図１６は、第六実施形態における投影制御装置の処理構成例を概念的に示す図である。図１６に示されるように、投影制御装置１００は、投影処理部１０１と操作検出部１０２と制御部１０３とを有する。投影制御装置１００は、図１に示される投影制御装置１０と同様のハードウェア構成を有する。投影制御装置１００が有する各処理部は、投影制御装置１０と同様にプログラムが処理されることで、上述の各処理部が実現される。

投影処理部１０１は、画像の投影方法を設定するための投影パラメータの変更が可能な投影装置に画像を投影させる。投影処理部１０１の具体的処理内容は、投影処理部１１の処理内容を含む。投影装置は、図１に示される投影装置７に相当する。第六実施形態における投影装置は、投影方向を含む投影パラメータの変更が可能な投影装置である。

投影パラメータとは、投影装置により投影される投影画面全体に影響を及ぼす、投影装置又は他の機器により変更可能な設定であり、投影画面内に表示させる投影画像に関する画像情報とは異なる。投影パラメータは、投影方向のみであってもよいし、投影方向以外の他のパラメータの１つであってもよいし、それらの組み合わせであってもよい。例えば、投影方向の変更は、投影装置７が有する方向調整手段８により実現される。投影方向以外の他の投影パラメータには、ズーム倍率、画質（明るさやコントラスト等）等が含まれる。例えば、ズーム倍率が変更されることで、投影面に投影される投影画面自体の大きさを拡大又は縮小させることができる。但し、投影画面自体の大きさを変えれば、それに追従して、投影画面内の投影画像の大きさも同様に変更される。

操作検出部１０２は、ユーザ操作を検出する。操作検出部１０２の具体的処理内容は、上述の操作検出部１５の処理内容を含む。

制御部１０３は、第一のユーザ操作が検出された場合、上記投影装置に上記投影パラメータを変更して投影させるよう制御し、第二のユーザ操作が検出された場合、投影処理部１０１に上記投影パラメータを変更せず上記画像（投影画像）を変更させるよう制御する。制御部１０３の具体的処理内容は、上述の制御部１６の処理内容を含む。制御部１０３は、自身で、投影パラメータを変更してもよいし、投影装置にそれを変更させてもよい。

制御部１０３は、第一のユーザ操作が検出された場合、投影装置に投影方向以外の投影パラメータを変更して投影させるよう制御し、第二のユーザ操作が検出された場合、投影処理部１０１にその投影パラメータを変更せず投影画像を変更させるよう制御することもできる。例えば、制御部１６は、第一のユーザ操作が検出された場合、ズーム倍率を上げて、投影面に投影される投影画面自体の大きさを拡大し、第二のユーザ操作が検出された場合、投影画面内の対象の投影画像の大きさを拡大する。ここで、投影画面自体の大きさを拡大すれば、追従して、投影画面内の投影画像の大きさも拡大される。一方で、投影画面内の投影画像の大きさの変更は、投影画面自体の大きさの変更に直結しない。投影画面内の対象の投影画面の大きさの変更は、投影処理部１１から投影装置７に送られる画像情報の変更により実現可能である。投影画面自体の大きさを変更するための第一のユーザ操作としては、両腕を特定部位として用いたユーザ操作が割り当てられることが望ましい。

投影制御装置１００は、コンテンツ保持部１２を有してもよいし、他のコンピュータがそれらを有してもよい。

〔動作例／投影制御方法〕
図１７は、第六実施形態における投影制御装置１００の動作例を示すフローチャートである。第六実施形態における投影制御方法は、投影制御装置１００のような少なくとも１つのコンピュータにより実行される。例えば、図示される各工程は、投影制御装置１００が有する各処理部により実行される。

第六実施形態における投影制御方法は、図１７に示されるように、（Ｓ１７１）から（Ｓ１７５）を含む。

（Ｓ１７１）では、投影制御装置１００は、画像の投影方法を設定するための投影パラメータの変更が可能な投影装置に画像を投影させる。

（Ｓ１７２）では、投影制御装置１００は、ユーザ操作を検出する。

（Ｓ１７１）及び（Ｓ１７２）は、上述の各図の（Ｓ７１）及び（Ｓ７４）に相当する。

投影制御装置１００は、第一のユーザ操作が検出された場合（Ｓ１７３；第一のユーザ操作）、投影装置に投影パラメータを変更して投影させる（Ｓ１７４）。また、投影制御装置１００は、第二のユーザ操作が検出された場合（Ｓ１７３；第二のユーザ操作）、上記投影パラメータを変更せず当該投影画面内の投影画像を変更する（Ｓ１７５）。（Ｓ１７３）は、上述の（Ｓ７６）、（Ｓ９２）、（Ｓ１０２）、（Ｓ１３２）、（Ｓ１４２）及び（Ｓ１５２）に相当する。（Ｓ１７４）及び（Ｓ１７５）は、上述の各図の（Ｓ７７）及び（Ｓ７８）に相当する。但し、（Ｓ１７４）については、上述のとおり、投影方向以外の投影パラメータの変更も含む。

また、第六実施形態は、このような投影制御方法を少なくとも１つのコンピュータに実行させるプログラムであってもよいし、このようなプログラムを記録した当該少なくとも１つのコンピュータが読み取り可能な記録媒体であってもよい。

第六実施形態によれば、上述の各実施形態及び各変形例と同様の作用効果に加えて、投影方向以外の投影パラメータの変更に伴い、投影画面自体の移動、拡大／縮小、画質変更等を行うことができる。
［補足］
上述の内容では特に言及されなかったが、投影制御装置１０及び投影制御装置１００は、複数の投影装置７に接続されていてもよい。この場合、投影制御装置１０及び投影制御装置１００は、複数ユーザの個々のユーザ操作に対応可能なように、複数の投影画面を別々に投影、かつ、制御することができる。この場合、投影制御装置１０及び投影制御装置１００は、参加するユーザの数に応じて、動作する投影装置７の数を増やしていけばよい。具体的には、或る投影装置７により投影される投影画面に対して或るユーザが操作した後に、投影制御装置１０及び投影制御装置１００は、他の１つの投影装置７に投影画面の投影を開始させるようにする。

また、投影制御装置１０及び投影制御装置１００は、複数ユーザの特定部位（例えば、腕）を認識し、複数ユーザによる共同操作を検出し、この共同操作に基づいて、第一のユーザ操作及び第二のユーザ操作を区別して検出することもできる。

なお、上述の説明で用いた複数のフローチャートでは、複数の工程（処理）が順番に記載されているが、各実施形態及び各変形例で実行される工程の実行順序は、その記載の順番に制限されない。各実施形態及び各変形例では、図示される工程の順番を内容的に支障のない範囲で変更することができる。例えば、図６において、（Ｓ７２）及び（Ｓ７３）は、逆の順に実行されてもよいし、並列に実行されてもよい。

また、上述の各実施形態及び各変形例は、内容が相反しない範囲で組み合わせることができる。第二から第五の各実施形態は、第一実施形態で用いられたユーザ操作の位置に代えて、操作時間、投影画面の表示状態、特定部位の形状、特定部位の接触数、特定部位の移動速度を用いたが、ユーザ操作の位置に加えて、それら各情報を用いてもよい。また、それら情報のいずれか複数の組み合わせが用いられてもよい。

上記の各実施形態及び各変形例の一部又は全部は、以下の付記のようにも特定され得る。但し、各実施形態及び各変形例が以下の記載に限定されるものではない。

（付記１） 画像の投影方法を設定するための投影パラメータの変更が可能な投影装置に画像を投影させる投影処理手段と、
ユーザ操作を検出する操作検出手段と、
第一のユーザ操作が検出された場合、前記投影装置に前記投影パラメータを変更して投影させるよう制御し、第二のユーザ操作が検出された場合、前記投影処理手段に前記投影パラメータを変更せず前記画像を変更させるよう制御する制御手段と、
を備える投影制御装置。

（付記２） 三次元センサから得られるセンサ情報に基づいてユーザの特定部位を認識し、認識された特定部位の位置を示す部位位置情報を取得するユーザ位置取得手段と、
三次元センサから得られるセンサ情報に基づいて前記投影装置による投影画面の少なくとも一部が投影される位置を示す投影位置情報を取得する投影位置取得手段と、
を更に備え、
前記操作検出手段は、前記部位位置情報及び前記投影位置情報に基づいて、前記投影画面の少なくとも一部又は前記投影画面外に対する前記特定部位を用いたユーザ操作を検出する、
付記１に記載の投影制御装置。

（付記３） 前記操作検出手段は、前記検出されたユーザ操作の位置を特定し、特定された操作位置に基づいて、前記第一のユーザ操作及び前記第二のユーザ操作を区別して検出する、
付記２に記載の投影制御装置。

（付記４） 前記操作検出手段は、前記検出されたユーザ操作の操作時間を計測し、計測された操作時間に基づいて、前記第一のユーザ操作及び前記第二のユーザ操作を区別して検出する、
付記２又は３に記載の投影制御装置。

（付記５） 前記操作検出手段は、前記検出されたユーザ操作の対象となる投影画面内の投影画像の状態を特定し、特定された投影画像の状態に基づいて、前記第一のユーザ操作及び前記第二のユーザ操作を区別して検出する、
付記２から４のいずれか１つに記載の投影制御装置。

（付記６） 前記ユーザの前記特定部位の形状を認識する形状認識手段、
を更に備え、
前記ユーザ操作の検出時における前記特定部位の形状に基づいて、前記第一のユーザ操作及び前記第二のユーザ操作を区別して検出する、
付記２から５のいずれか１つに記載の投影制御装置。

（付記７） 前記ユーザ位置取得手段は、前記特定部位として、ユーザの手の複数箇所を認識し、認識された手の複数箇所の位置を示す部位位置情報を取得し、
前記操作検出手段は、前記投影画面の少なくとも一部又は前記投影画面外に対する、前記手の認識された箇所の接触数を特定し、特定された接触数に基づいて、前記第一のユーザ操作及び前記第二のユーザ操作を区別して検出する、
付記２から５のいずれか１つに記載の投影制御装置。

（付記８） 前記操作検出手段は、前記部位位置情報及び前記投影位置情報に基づいて、前記検出されたユーザ操作における前記特定部位の移動速度を計測し、計測された移動速度に基づいて、前記第一のユーザ操作及び前記第二のユーザ操作を区別して検出する、
付記２から７のいずれか１つに記載の投影制御装置。

（付記９） 少なくとも１つのコンピュータに実行される投影制御方法において、
画像の投影方法を設定するための投影パラメータの変更が可能な投影装置に画像を投影させ、
ユーザ操作を検出し、
第一のユーザ操作が検出された場合、前記投影装置に前記投影パラメータを変更して投影させ、第二のユーザ操作が検出された場合、前記投影パラメータを変更せず前記画像を変更する、
ことを含む投影制御方法。

（付記１０） 三次元センサから得られるセンサ情報に基づいてユーザの特定部位を認識し、
前記認識された特定部位の位置を示す部位位置情報を取得し、
三次元センサから得られるセンサ情報に基づいて前記投影装置による投影画面の少なくとも一部が投影される位置を示す投影位置情報を取得する、
ことを更に含み、
前記ユーザ操作の検出は、前記部位位置情報及び前記投影位置情報に基づいて、前記投影画面の少なくとも一部又は前記投影画面外に対する前記特定部位を用いたユーザ操作を検出する、
付記９に記載の投影制御方法。

（付記１１） 前記検出されたユーザ操作の位置を特定する、
ことを更に含み、
前記ユーザ操作の検出は、前記特定された操作位置に基づいて、前記第一のユーザ操作及び前記第二のユーザ操作を区別して検出する、
付記１０に記載の投影制御方法。

（付記１２） 前記検出されたユーザ操作の操作時間を計測する、
ことを更に含み、
前記ユーザ操作の検出は、前記計測された操作時間に基づいて、前記第一のユーザ操作及び前記第二のユーザ操作を区別して検出する、
付記１０又は１１に記載の投影制御方法。

（付記１３） 前記検出されたユーザ操作の対象となる投影画面内の投影画像の状態を特定する、
ことを更に含み、
前記ユーザ操作の検出は、前記特定された投影画像の状態に基づいて、前記第一のユーザ操作及び前記第二のユーザ操作を区別して検出する、
付記１０から１２のいずれか１つに記載の投影制御方法。

（付記１４） 前記ユーザの前記特定部位の形状を認識する、
ことを更に含み、
前記ユーザ操作の検出は、前記ユーザ操作の検出時における前記特定部位の形状に基づいて、前記第一のユーザ操作及び前記第二のユーザ操作を区別して検出する、
付記１０から１３のいずれか１つに記載の投影制御方法。

（付記１５） 前記特定部位は、ユーザの手の複数箇所であり、
前記投影制御方法は、
前記投影画面の少なくとも一部又は前記投影画面外に対する、前記手の認識された箇所の接触数を特定する、
ことを更に含み、
前記ユーザ操作の検出は、前記特定された接触数に基づいて、前記第一のユーザ操作及び前記第二のユーザ操作を区別して検出する、
付記１０から１３のいずれか１つに記載の投影制御方法。

（付記１６） 前記部位位置情報及び前記投影位置情報に基づいて、前記検出されたユーザ操作における前記特定部位の移動速度を計測する、
ことを更に含み、
前記ユーザ操作の検出は、前記計測された移動速度に基づいて、前記第一のユーザ操作及び前記第二のユーザ操作を区別して検出する、
付記１０から１５のいずれか１つに記載の投影制御方法。

（付記１７） ９から１６のいずれか１つに記載の投影制御方法を少なくとも１つのコンピュータに実行させる投影制御プログラムを記録した記録媒体。

以上、実施形態及び実施例を参照して本願発明を説明したが、本願発明は上記実施形態及び実施例に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。

この出願は、２０１４年４月１８日に出願された日本出願特願２０１４−０８６５１２を基礎とする優先権を主張し、その開示の全てをここに取り込む。

２ ＣＰＵ
３ メモリ
６ 三次元センサ
７ 投影装置
８ 方向調整手段
９ ＩＰ装置
９１、９２、９３ 方向調整機構
９５ 投射部
９６ センシング部
１０、１００ 投影制御装置
１１、１０１ 投影処理部
１２ コンテンツ保持部
１３ ユーザ位置取得部
１４ 投影位置取得部
１５、１０２ 操作検出部
１６、１０３ 制御部
１７ 形状認識部

本発明の目的は、高い利便性で投影画像を提供する投影制御技術を実現する投影制御装置、投影制御方法及び投影制御プログラムを提供することにある。

本発明の第三の側面に係る投影制御プログラムは、画像の投影方法を設定するための投影パラメータの変更が可能な投影装置に画像を投影させる処理と、ユーザ操作を検出する処理と、第一のユーザ操作が検出された場合、前記投影装置に前記投影パラメータを変更して投影させ、第二のユーザ操作が検出された場合、前記投影パラメータを変更せず前記画像を変更する処理と、を少なくとも１つのコンピュータに実行させる。

Claims (10)

1. 画像の投影方法を設定するための投影パラメータの変更が可能な投影装置に画像を投影させる投影処理手段と、
   ユーザ操作を検出する操作検出手段と、
   第一のユーザ操作が検出された場合、前記投影装置に前記投影パラメータを変更して投影させるよう制御し、第二のユーザ操作が検出された場合、前記投影処理手段に前記投影パラメータを変更せず前記画像を変更させるよう制御する制御手段と、
   を備える投影制御装置。
2. 三次元センサから得られるセンサ情報に基づいてユーザの特定部位を認識し、認識された特定部位の位置を示す部位位置情報を取得するユーザ位置取得手段と、
   三次元センサから得られるセンサ情報に基づいて前記投影装置による投影画面の少なくとも一部が投影される位置を示す投影位置情報を取得する投影位置取得手段と、
   を更に備え、
   前記操作検出手段は、前記部位位置情報及び前記投影位置情報に基づいて、前記投影画面の少なくとも一部又は前記投影画面外に対する前記特定部位を用いたユーザ操作を検出する、
   請求項１に記載の投影制御装置。
3. 前記操作検出手段は、前記検出されたユーザ操作の位置を特定し、特定された操作位置に基づいて、前記第一のユーザ操作及び前記第二のユーザ操作を区別して検出する、
   請求項２に記載の投影制御装置。
4. 前記操作検出手段は、前記検出されたユーザ操作の操作時間を計測し、計測された操作時間に基づいて、前記第一のユーザ操作及び前記第二のユーザ操作を区別して検出する、
   請求項２又は３に記載の投影制御装置。
5. 前記操作検出手段は、前記検出されたユーザ操作の対象となる投影画面内の投影画像の状態を特定し、特定された投影画像の状態に基づいて、前記第一のユーザ操作及び前記第二のユーザ操作を区別して検出する、
   請求項２から４のいずれか１項に記載の投影制御装置。
6. 前記ユーザの前記特定部位の形状を認識する形状認識手段、
   を更に備え、
   前記ユーザ操作の検出時における前記特定部位の形状に基づいて、前記第一のユーザ操作及び前記第二のユーザ操作を区別して検出する、
   請求項２から５のいずれか１項に記載の投影制御装置。
7. 前記ユーザ位置取得手段は、前記特定部位として、ユーザの手の複数箇所を認識し、認識された手の複数箇所の位置を示す部位位置情報を取得し、
   前記操作検出手段は、前記投影画面の少なくとも一部又は前記投影画面外に対する、前記手の認識された箇所の接触数を特定し、特定された接触数に基づいて、前記第一のユーザ操作及び前記第二のユーザ操作を区別して検出する、
   請求項２から５のいずれか１項に記載の投影制御装置。
8. 前記操作検出手段は、前記部位位置情報及び前記投影位置情報に基づいて、前記検出されたユーザ操作における前記特定部位の移動速度を計測し、計測された移動速度に基づいて、前記第一のユーザ操作及び前記第二のユーザ操作を区別して検出する、
   請求項２から７のいずれか１項に記載の投影制御装置。
9. 画像の投影方法を設定するための投影パラメータの変更が可能な投影装置に画像を投影させ、
   ユーザ操作を検出し、
   第一のユーザ操作が検出された場合、前記投影装置に前記投影パラメータを変更して投影させ、第二のユーザ操作が検出された場合、前記投影パラメータを変更せず前記画像を変更する、
   投影制御方法。
10. 画像の投影方法を設定するための投影パラメータの変更が可能な投影装置に画像を投影させる処理と、
    ユーザ操作を検出する処理と、
    第一のユーザ操作が検出された場合、前記投影装置に前記投影パラメータを変更して投影させ、第二のユーザ操作が検出された場合、前記投影パラメータを変更せず前記画像を変更する処理と、を少なくとも１つのコンピュータに実行させる投影制御プログラムを記録した記録媒体。

Images