JPWO2020031740A1

JPWO2020031740A1 - 制御装置および制御方法、並びにプログラム

Info

Publication number: JPWO2020031740A1
Application number: JP2020536466A
Authority: JP
Inventors: 龍一鈴木
Original assignee: Sony Corp; Sony Group Corp
Current assignee: Sony Corp; Sony Group Corp
Priority date: 2018-08-10
Filing date: 2019-07-26
Publication date: 2021-09-09
Also published as: US20210302753A1; WO2020031740A1

Abstract

本開示は、より広範囲に画像を適切に投影することができるようにする制御装置および制御方法、並びにプログラムに関する。画像コンテンツを投影する投影部が出力する投影光の少なくとも一部を反射可能に構成されたミラーの姿勢を示す姿勢情報に基づいて、画像コンテンツを回転または反転するように補正する画像処理が画像コンテンツに対して施される。そして、その画像処理が施された画像コンテンツを投影部から出力する際に、ミラーのピッチ方向およびロール方向の姿勢が制御される。本技術は、例えば、ミラー反射機構を備えたプロジェクタに適用できる。

Description

本開示は、制御装置および制御方法、並びにプログラムに関し、特に、より広範囲に画像を適切に投影することができるようにした制御装置および制御方法、並びにプログラムに関する。

従来、空間内の任意の投影面に画像を投影するために、いくつかの方式が提案されている。例えば、そのうちの一つとして、プロジェクタ自体を駆動する方式があるが、明るい環境や広範囲に画像を投影したい場合にはプロジェクタの輝度を上げる必要があり、プロジェクタが大型化することになる。その結果、プロジェクタ自体を駆動させる方式では、設備が大掛かりとなっていた。

そこで、プロジェクタの大型化を回避するため、プロジェクタ自体を駆動させずに、ミラーを駆動させることによって画像を空間内の任意の投影面へ反射させる方式が提案されている。しかしながら、ミラーユニット自体の機構の制約やミラー自体が妨げとなってしまう結果、ミラーを駆動させる方式において画像の投影可能な範囲は、プロジェクタ自体を駆動させる方式よりも限定されることになっていた。

例えば、特許文献１には、１台の投影手段から複数画面の画像を投影し、ミラーなどの導光手段により所望の表示位置に別々に複数の画像を投影することができる投影装置が開示されている。

特開２００１−３０５６８３号公報

ところで、上述したような方式を利用して、例えば、室内の側面や天面、床面などの広範囲に画像を投影する際に、画像が適切に投影されていないと認識されることがあり、その改善が求められていた。

本開示は、このような状況に鑑みてなされたものであり、より広範囲に画像を適切に投影することができるようにするものである。

本開示の一側面の制御装置は、画像コンテンツを投影する投影部が出力する投影光の少なくとも一部を反射可能に構成されたミラーの姿勢を示す姿勢情報に基づいて、前記画像コンテンツに対して補正処理を施す補正処理部と、前記補正処理部により前記補正処理が施された前記画像コンテンツの前記投影部からの出力を制御する制御部とを備える。

本開示の一側面の制御方法またはプログラムは、画像コンテンツを投影する投影部が出力する投影光の少なくとも一部を反射可能に構成されたミラーの姿勢を示す姿勢情報に基づいて、前記画像コンテンツに対して補正処理を施すことと、前記補正処理が施された前記画像コンテンツの前記投影部からの出力を制御することとを含む。

本開示の一側面においては、画像コンテンツを投影する投影部が出力する投影光の少なくとも一部を反射可能に構成されたミラーの姿勢を示す姿勢情報に基づいて、画像コンテンツに対して補正処理が施され、その補正処理が施された画像コンテンツの投影部からの出力が制御される。

本開示の一側面によれば、より広範囲に画像を適切に投影することができる。

なお、ここに記載された効果は必ずしも限定されるものではなく、本開示中に記載されたいずれかの効果であってもよい。

本技術を適用した投影システムの一実施の形態の構成例を示す図である。ミラー反射型プロジェクタの外観構成を示す図である。ミラー反射型プロジェクタにおけるミラーの駆動状態を説明する図である。ミラー反射型プロジェクタにおけるミラーの収納状態を説明する図である。ミラー反射型プロジェクタの設置例を示す図である。コンテンツを投影する際の投影向きの決定について説明する図である。ミラー不使用エリアの設定について説明する図である。ミラー不使用境界を跨ぐ画像を結合する画像処理について説明する図である。投影システムの機能的な構成例を示すブロック図である。コンテンツ出力制御処理を説明するフローチャートである。ミラー反射型プロジェクタに対する空間の断面方向について定義する図である。ミラーのピッチ回転を図式化した図である。ミラーのミラー長とミラーチルト角との関係を示す図である。コンテンツの向きを考慮せずに投影される画像の一例を示す図である。コンテンツの向きを考慮せずに画像を投影する場合におけるミラーの動きおよび補正処理について説明する図である。コンテンツの向きを考慮して投影される画像の一例を示す図である。コンテンツの向きを考慮して画像を投影する場合におけるミラーの動きおよび補正処理について説明する図である。駆動型プロジェクタの外観構成を示す図である。駆動型プロジェクタにより投影される画像の一例を示す図である。駆動型プロジェクタにより画像を投影する場合における駆動機構の動きおよび補正処理について説明する図である。本技術を適用したコンピュータの一実施の形態の構成例を示すブロック図である。

以下、本技術を適用した具体的な実施の形態について、図面を参照しながら詳細に説明する。

＜投影システムの構成例＞
図１は、本技術を適用した投影システムの一実施の形態の構成例を示す図である。

図１に示すように、投影システム１１は、センサモジュール１２、ミラー反射型プロジェクタ１３、および制御処理装置１４が接続されて構成される。例えば、投影システム１１は、複数人のユーザが居る部屋内での利用が想定され、室内の側面や天面、床面などの任意の投影面に対して画像を投影する。

センサモジュール１２は、投影システム１１を利用してコンテンツを視聴するユーザに関するユーザ情報、投影システム１１が利用される環境に関する環境情報、および、ポインティングデバイスを利用したポインティングに関するポインティング情報を取得する。例えば、センサモジュール１２は、ユーザ情報として、一人または複数人のユーザについて、位置や、姿勢、顔向き、視界、視線、手指などの検出結果を取得する。また、センサモジュール１２は、環境情報として、画像を投影する対象となる投影面の形状や、投影面の凹凸、投影面の色、画像を投影する際の障害物または遮蔽物、画像を投影する環境の照度などの検出結果を取得する。

また、センサモジュール１２は、ポインティング情報として、空間内を光で指し示すポインティングデバイスをユーザが利用する場合に、カメラなどにより光を検出することによって、ポインティング位置を取得する。ポインティングデバイスとしては、レーザーポインタなどのように可視光を用いるものや、家電操作に用いるリモートコントローラの赤外線のように不可視光を用いるものなどを使用することができる。また、ポインティングデバイスとして、固定された光源から照射されて再帰性反射材で反射された赤外光を検出する方式のデバイスや、ジャイロまたは加速度センサを用いて方向を推定する方式のデバイスなどを使用してもよい。

ミラー反射型プロジェクタ１３は、動画像や静止画像などのコンテンツを出力する出力装置である。例えば、ミラー反射型プロジェクタ１３は、図２に示すようなミラー２２を駆動し、制御処理装置１４による制御に従って、所望の投影面に画像を投影することができる。

制御処理装置１４は、センサモジュール１２により取得された各種の情報の解析、および、ミラー反射型プロジェクタ１３により出力されるコンテンツの解析を行い、ミラー反射型プロジェクタ１３によるコンテンツの出力を制御するコンテンツ出力制御処理を行う。

例えば、制御処理装置１４は、センサモジュール１２により取得された情報に基づいて、ミラー反射型プロジェクタ１３と投影面との三次元的な位置関係などを計算する。そして、制御処理装置１４は、計算結果に従って、投影面に投影される画像がユーザによりどのように視認されるかなどを解析し、ユーザから適切に見えるようにする画像処理を画像に施して投影させる。

また、制御処理装置１４は、コンテンツの属性を解析して、例えば、何らかの形でコンテンツをユーザに伝えるトリガが発動された際、そのコンテンツのフォーマット（例えば、文章や動画など）や、伝える対象者、緊急性などを踏まえ、ユーザと投影面との位置関係や投影面とミラー反射型プロジェクタ１３との位置関係の解析に利用する。

また、制御処理装置１４は、投影システム１１が複数の出力装置を備えている場合、それらの出力装置の中から、ユーザにコンテンツを提供するのに最適な出力装置を決定するだけでなく、その出力装置に特有のパラメタも同時に最適化することができる。例えば、ミラー反射型プロジェクタ１３の場合は、制御処理装置１４は、ミラー反射型プロジェクタ１３により投影される画像の明るさまたは大きさを調整するズーム機構やフォーカス機構などに設定されるパラメタを決定する。

このように投影システム１１は構成されており、制御処理装置１４がミラー反射型プロジェクタ１３から出力されるコンテンツを制御することによって、より広範囲に画像を適切に投影することができる。

＜ミラー反射型プロジェクタの構成例および設置例＞
図２乃至図５を参照して、ミラー反射型プロジェクタ１３の構成例および設置例について説明する。

図２に示すように、ミラー反射型プロジェクタ１３は、プロジェクタ本体２１から画像を投影する投影部に、ミラー２２が駆動可能に装着された構成となっている。ミラー２２は、ピッチアーム２３に対して固定されており、ピッチアーム２３がピッチモータ２４によって回転駆動することで、投影部の光軸に対してピッチ方向にミラー２２が駆動される。さらに、ピッチアーム２３およびピッチモータ２４は、ロールアーム２５に対して固定されており、ピッチアーム２３およびピッチモータ２４がロールモータ２６によって回転駆動することで、投影部の光軸に対してロール方向にミラー２２が駆動される。

また、ロールアーム２５は、プロジェクタ本体２１の投影部に内蔵されている光源２７から画像を投影する光軸を遮らないように構成され、その光軸を回転軸として回転可能な構成となっている。例えば、図３には、図４に示した状態から、ロールモータ２６が駆動することによってミラー２２をロール方向に回転させた状態が示されている。

また、ピッチアーム２３は、その回転軸が、光源２７から画像を投影する光軸と交差しない構成となっている。これにより、図４に示すように、ミラー反射型プロジェクタ１３は、ミラー２２を完全に折り畳んだ収納状態とすることができる。つまり、ミラー反射型プロジェクタ１３は、ミラー２２を収納状態とすることで、ミラー２２で画像を反射させない通常のプロジェクタと同様に使用することが可能である。

このようにミラー反射型プロジェクタ１３は構成されており、ピッチモータ２４およびロールモータ２６が、それぞれ独立してピッチアーム２３およびロールアーム２５を駆動することで、所望の角度および向きとなるようにミラー２２を回転させることができる。従って、ミラー反射型プロジェクタ１３は、ミラー２２による反射を利用して、所望の方向および向きで、画像を投影することができる。なお、以下適宜、このようにミラー２２による反射を利用して画像を投影する機構をミラー反射機構２８と称する。

なお、プロジェクタ本体２１の機能として搭載されているズームや、フォーカス、レンズシフトなどを、ミラー反射型プロジェクタ１３がコンテンツを投影する際の調整に使用してもよい。

また、図５には、ミラー反射型プロジェクタ１３の設置例が示されている。

例えば、ミラー反射型プロジェクタ１３Ａは、プロジェクタ本体２１の投影部が天面に向かう姿勢で、ミラー反射機構２８が床面から露出するように、床面に埋め込まれて設置される設置例である。また、ミラー反射型プロジェクタ１３Ｂは、プロジェクタ本体２１の投影部が床面に向かう姿勢で、ミラー反射機構２８が天面から露出するように、天面に埋め込まれて設置される設置例である。

また、ミラー反射型プロジェクタ１３Ｃは、ほぼ水平方向に光軸が向かうように天面に吊り下げられるように設置（いわゆる一般的な天吊り）される設定例である。なお、通常のプロジェクタにミラー反射機構２８を装着して、ミラー反射型プロジェクタ１３Ｃのような構成としてもよい。

なお、上述したように、ミラー反射型プロジェクタ１３は、所望の方向および向きで画像を投影することができ、ミラー反射型プロジェクタ１３の設置は、図３に示されるような設置例に限定されることはない。

＜コンテンツの出力制御＞
図６乃至図８を参照して、投影システム１１においてコンテンツを出力する際の基本的な制御について説明する。

図６は、コンテンツを投影する際の投影向きの決定について説明する図である。

例えば、コンテンツに上下方向がある場合には、投影システム１１を利用するユーザから見やすい向きとなるように、例えば、ユーザから見てコンテンツの上下が逆さとならないように、ミラー反射型プロジェクタ１３からコンテンツを投影することが望ましい。

図６のＡに示すように、投影面が部屋の側面である場合、制御処理装置１４は、天面に向かう方向が上向きとなるように、コンテンツの投影向きを決定する。これにより、部屋の側面に投影されるコンテンツの上下方向は、例えば、図１に示したように立っているユーザや座っているユーザなどから見て逆さとなることなく、ミラー反射型プロジェクタ１３によりコンテンツが適切に投影される。

図６のＢに示すように、投影面が部屋の床面または天面である場合、制御処理装置１４は、ユーザの位置や顔の向きなどに合わせてコンテンツの投影向きを決定する。例えば、ユーザが床面に仰向けで寝ているとき、制御処理装置１４は、そのユーザの姿勢に合わせて、ユーザの頭側がコンテンツの上側となるようにコンテンツの投影向きを決定し、ミラー反射型プロジェクタ１３によりコンテンツが適切に投影される。

このように、投影システム１１では、コンテンツを投影する投影面や、コンテンツを見るユーザの姿勢などのような利用環境に基づき、コンテンツを投影する際の投影向きが決定される。

図７は、ミラー反射型プロジェクタ１３がコンテンツを投影する際のミラー不使用エリアの設定について説明する図である。

例えば、投影システム１１では、ミラー反射型プロジェクタ１３がコンテンツを投影する際に、ミラー２２の反射を使用しないミラー不使用エリアが設定され、コンテンツの出力位置に応じた制御が行われる。

図７に示すように、投影部が天井に向かう姿勢で、ミラー反射型プロジェクタ１３が床面に設置されている場合、ミラー反射型プロジェクタ１３の真正面となる天面にミラー不使用エリアが設定される。ミラー不使用エリアは、ミラー反射型プロジェクタ１３が、ミラー反射機構２８を用いずに、プロジェクタ本体２１の投影部から直接的にコンテンツを投影することが可能な投影範囲内に設定される。

例えば、ミラー不使用エリアは、ミラー反射型プロジェクタ１３のスペック（画角や、ズーム比、フォーカス、レンズシフトなど）、および、ミラー反射型プロジェクタ１３から投影面までの距離に従って設定される。図７に示す例では、破線で表すミラー不使用境界の内側がミラー不使用エリアとなり、ミラー不使用境界の外側がミラー不使用エリアの範囲外となる。

なお、プロジェクタ本体２１の投影部から直接的にコンテンツを投影することが可能な投影範囲の一部を、ミラー不使用エリアの範囲外として、ミラー不使用エリアを狭く設定してもよい。例えば、ミラー不使用境界の近傍では、ミラー２２のチルト角がミラー反射型プロジェクタ１３に対して垂直に近づくため、ミラー２２により反射されて投影される画像の投影面での解像度が低下してしまい、ミラー２２を利用した画像の投影には適した状況とならない可能性がある。そのため、例えば、投影される画像の解像度（細かさ）に応じて、画像の投影に適したエリアであるかどうかをユーザが判断し、その状況に応じてミラー不使用エリアを調整するようにしてもよい。

ここで、ミラー反射型プロジェクタ１３がコンテンツを投影するとき、ミラー不使用エリアの範囲外にコンテンツを投影するケース、ミラー不使用エリアにコンテンツを投影するケース、ミラー不使用境界を跨ぐようにコンテンツを投影するケースが発生する。

例えば、ミラー不使用エリアの範囲外にコンテンツを投影するケースでは、ミラー反射型プロジェクタ１３は、ミラー２２でコンテンツを反射させることになる。そのため、ミラー反射型プロジェクタ１３は、ミラー２２の反射によるコンテンツの反転を考慮して、コンテンツを補正する画像処理を行う必要がある。

即ち、図７の各側面に投影されているコンテンツのように、正面に対してコンテンツの上下方向が正しくなるような向きのままでは、右側面や、左側面、背面などに投影する際に、ミラー２２の反射によってコンテンツが回転してしまう。従って、コンテンツに上下方向がある場合には、図６を参照して説明したように、コンテンツの投影向きを決定して、その投影向きに従った上下方向となるようにコンテンツを回転または反転させる画像処理を施す必要がある。

このように、ミラーを駆動させる方式では、例えば、プロジェクタ自体を駆動させる方式とは画像の投影のされ方が異なり、その違いを吸収するような補正処理が行われる。

また、ミラー不使用エリアにコンテンツを投影するケースでは、ミラー反射型プロジェクタ１３は、本来の画角内にコンテンツが収まるため、その画角内の補正処理（例えば、正方形の画像が斜めに投影されることで台形に歪んでしまわないように形状やサイズなどを補正する画像処理）を行う。

例えば、図７に示す天面において、ミラー不使用エリアに投影されるコンテンツと、ミラー不使用エリアの範囲外に投影されるコンテンツとで、それぞれ向きが反転することになる。このように、ミラー２２によりコンテンツが反転することを考慮して、ミラー不使用エリアとミラー不使用エリアの範囲外とのうち、いずれか一方のコンテンツを、予め反転させる画像処理を施す必要がある。これにより、ミラー不使用エリアに投影されるコンテンツと、ミラー不使用エリアの範囲外に投影されるコンテンツとの向きを一致させることができる。

そして、ミラー不使用境界を跨ぐようにコンテンツを投影するケースでは、コンテンツの一部分がミラー２２によって反転されて投影される一方で、その他の部分は、そのまま投影されることになる。そのため、投影システム１１では、ミラー２２によって反転されて投影される一部分と、その他の部分とを分割して、ミラー不使用境界を跨いで投影されたときに元のコンテンツとなるように、それぞれの部分を結合する画像処理を行う必要がある。このとき、ミラー２２によって反転されて投影される一部分に対して、回転または反転させる画像処理が施され、その他の部分には、その画像処理は施されない。

即ち、図８に示すように、ミラー反射型プロジェクタ１３が投影する画像は、ミラー２２で反射されない直接光に割り当てる画像と、ミラー２２で反射される反射光に割り当てる画像とに分けられ、それらが１枚の画像に結合される。このとき、ミラー不使用境界を跨いで投影されたときに、ミラー２２で反射されない直接光に割り当てる画像と、ミラー２２で反射される反射光に割り当てる画像とが、元の画像となるように適切に結合されるように画像処理が行われる。なお、それらの２つの画像の結合については、図１１乃至図１３を参照して後述する。

＜投影システムの機能的な構成例＞
図９は、投影システム１１の機能的な構成例を示すブロック図である。なお、図１に示したように、投影システム１１は、センサモジュール１２、ミラー反射型プロジェクタ１３、および制御処理装置１４を備えて構成されており、図９に示す機能ブロックは、いずれかが機能として備えていればよい。

図９に示すように、投影システム１１は、入力部４１、人認識処理部４２、環境認識処理部４３、ポインティング認識処理部４４、出力コンテンツ色味決定部４５、出力位置決定部４６、出力時間／タイミング決定部４７、出力コンテンツ補正処理部４８、出力制御部４９、および出力部５０を備えて構成される。

入力部４１は、各種の入力装置により取得される画像や情報などの入力を行う。例えば、入力４１は、熱分布画像を取得するサーモカメラ６１、距離画像を取得するTOF（Time of Flight）カメラ６２、視差画像を取得するステレオカメラ６３、ミラー２２の現在の姿勢（例えば、ピッチ方向およびロール方向の角度）を示す姿勢情報を取得するエンコーダ６４、マイクロフォンなどの音声入力装置６５、慣性を計測する慣性計測装置６６、カラー画像を取得するRGBカメラ６７、および、赤外線画像を取得するIR（infrared）カメラ６８を有している。

人認識処理部４２は、投影システム１１を利用するユーザを認識するための処理を行う。例えば、人認識処理部４２は、ユーザの位置を検出する位置検出部７１、ユーザの姿勢を検出する姿勢検出部７２、ユーザの顔向きを検出する顔向き検出部７３、ユーザの視界および視線を検出する視界／視線検出部７４、および、ユーザの手指を検出する手指検出部７５を有している。

環境認識処理部４３は、投影システム１１が利用される環境を認識するための処理を行う。例えば、環境認識処理部４３は、環境の照度を検出する照度検出部８１、ミラー反射型プロジェクタ１３から見て投影面がどのような平面になっているかを検出する平面検出部８２、投影面の材質および色を検出する投影面材質／色検出部８３、および、遮蔽物があるか否かを検出する遮蔽物検出部８４を有している。

ポインティング認識処理部４４は、投影システム１１を利用するユーザにより使用されるポインティングデバイスの認識に関する処理を行う。例えば、ポインティング認識処理部４４は、ポインティングデバイスから出力されるレーザ光の輝点を検出する輝点検出部９１を有している。

出力コンテンツ色味決定部４５は、例えば、投影面材質／色検出部８３により検出される投影面の材質および色に応じて、投影面に画像が投影されたときにコンテンツの本来の色となるように、ミラー反射型プロジェクタ１３が出力するコンテンツに対する色味を決定する。

出力位置決定部４６は、ミラー反射型プロジェクタ１３がコンテンツを出力する出力位置を決定する。

出力時間／タイミング決定部４７は、ミラー反射型プロジェクタ１３がコンテンツを出力する出力時間、および、コンテンツを出力するタイミングを決定する。

出力コンテンツ補正処理部４８は、エンコーダ６４により取得されるミラー２２の現在の姿勢情報、出力コンテンツ色味決定部４５により決定された色味、出力位置決定部４６により決定された出力位置、並びに、出力時間／タイミング決定部４７により決定された出力時間およびタイミングに従って、ミラー反射型プロジェクタ１３が出力するコンテンツに対する補正処理を行う。例えば、出力コンテンツ補正処理部４８は、投影向きに従った上下方向となるようにコンテンツを回転または反転させる補正処理を行う。また、出力コンテンツ補正処理部４８は、ミラー２２の現在の姿勢情報に従って、図８を参照して上述したように、直接光に割り当てる画像と反射光に割り当てる画像とが、元の画像となるように適切に結合されるように合成した合成画像を生成する補正処理を行う。

ここで、ミラー２２の姿勢情報は画像の投影位置に対応する。従って、出力コンテンツ補正処理部４８は、ミラー２２の姿勢情報に基づき、どの投影位置に画像が投影されるかに応じて、ミラー反射型プロジェクタ１３から出力される投影光（または、投影光の少なくとも一部）がミラー２２で反射されるか否かを判断することができる。同様に、出力コンテンツ補正処理部４８は、ミラー２２の姿勢情報に基づいて、ミラー反射型プロジェクタ１３から投影される画像がミラー不使用境界を跨ぐ（即ち、画像の一部がミラー２２で反射され、かつ、画像の他の一部がミラー２２で反射されない）か否かを判断することができる。

出力制御部４９は、出力コンテンツ補正処理部４８により補正処理が施されたコンテンツが、適切に投影されるように、ミラー反射型プロジェクタ１３からの出力を制御する。例えば、出力制御部４９は、画像の投影位置に応じてミラー２２の姿勢、即ち、ミラー２２のピッチ方向およびロール方向の角度を変更する制御を行う。さらに、直接光に割り当てる画像と反射光に割り当てる画像とが、元の画像となるように適切に結合されるような補正処理理が行われた場合、出力制御部４９は、ミラー２２の現在の姿勢情報に従って、直接光に割り当てる画像がミラー２２で反射されず、かつ、反射光に割り当てる画像がミラー２２で反射されるように、ミラー２２の目標姿勢を制御する。

出力部５０は、ミラー反射型プロジェクタ１３に対する出力を行う。例えば、出力部５０は、ミラー２２を駆動するピッチモータ２４およびロールモータ２６に対する制御を行うミラー駆動用モータ１０１、ミラー反射型プロジェクタ１３に画像を供給するプロジェクタ出力装置１０２、および、ミラー反射型プロジェクタ１３のズームおよびフォーカスを調整するプロジェクタズーム／フォーカス調整装置１０３を有している。

なお、入力部４１および出力部５０は、上述したような各種のハードウェアにより構成される一方、例えば、人認識処理部４２、環境認識処理部４３、およびポインティング認識処理部４４は、ファームウェアにより機能が実現される。また、出力コンテンツ色味決定部４５、出力位置決定部４６、出力時間／タイミング決定部４７、出力コンテンツ補正処理部４８、出力制御部４９は、アプリケーションにより機能が実現される。即ち、投影システム１１は、ファームウェアおよびアプリケーションを実行するCPU（Central Processing Unit）やDSP（Digital Signal Processor）などの１または複数の回路を備えて構成される。

＜コンテンツ出力制御処理＞
図１０のフローチャートを参照して、投影システム１１において行われるコンテンツ出力制御処理について説明する。

例えば、ミラー反射型プロジェクタ１３から投影される画像の１フレームごとに処理が行われ、ステップＳ１１において、人認識処理部４２および環境認識処理部４３は、投影システム１１を利用するユーザおよび環境を認識する処理を行う。これにより、投影システム１１では、利用空間内に歪みなく画像を投影するための３次元的な形状を把握するのに必要な環境情報や、床面や天面に画像を投影する際のコンテンツの向きを決定するために必要なユーザ情報などを取得する。

例えば、人認識処理部４２は、投影システム１１を利用するユーザを認識するための処理を行って、ユーザの位置や、姿勢、顔向き、視界、視線、手指などを検出し、それらの検出結果を示すユーザ情報を出力する。また、環境認識処理部４３は、投影システム１１が利用される環境を認識にするための処理を行って、環境の照度や、投影面がどのような平面であるか、投影面の材質および色、遮蔽物があるか否かなどを検出し、それらの検出結果を示す環境情報を出力する。

ステップＳ１２において、出力位置決定部４６は、ステップＳ１１で取得した環境情報に基づいて、投影システム１１が利用される室内空間におけるコンテンツの出力位置、即ち、画像を投影する投影位置を決定する。

ステップＳ１３において、出力コンテンツ補正処理部４８は、ステップＳ１２で出力位置決定部５１が決定した出力位置に従って、図６を参照して上述したようにコンテンツに上下方向があるとき、ステップＳ１１で取得したユーザ情報および環境情報を参照してコンテンツを出力する際の投影向きを決定する。

ステップＳ１４において、出力コンテンツ補正処理部４８は、ステップＳ１２で出力位置決定部５１が決定したコンテンツの出力位置に従って、ミラー２２を使用して反射光によりコンテンツが投影されるミラー使用エリアの範囲内（即ち、図７を参照して説明したミラー不使用エリアの範囲外）に画像を投影するか否かを判定する。

ステップＳ１４において、出力位置決定部５１が、ミラー使用エリアの範囲内に画像を投影すると判定した場合、処理はステップＳ１５に進む。即ち、この場合、ミラー反射型プロジェクタ１３は、コンテンツを出力するのにミラー反射機構２８を使用することになる。

ステップＳ１５において、出力コンテンツ補正処理部４８は、上述の図７を参照して説明したように、ミラー反射機構２８の使用を考慮し、コンテンツに上下方向がコンテンツの投影向きに合うように、画像を反転または回転させる補正処理を行う。

一方、ステップＳ１４において、出力コンテンツ補正処理部４８が、ミラー使用エリアの範囲内に画像を投影しないと判定した場合、処理はステップＳ１６に進む。ステップＳ１６において、出力コンテンツ補正処理部４８は、ミラー不使用境界を跨いで画像を投影するか否かを判定する。

ステップＳ１６において、出力コンテンツ補正処理部４８が、ミラー不使用境界を跨いで画像を投影しないと判定した場合、処理はステップＳ１７に進む。即ち、この場合、ミラー反射型プロジェクタ１３は、コンテンツを出力するのにミラー反射機構２８を使用せずに、ミラー不使用エリア内に画像を投影することになる。

ステップＳ１７において、出力コンテンツ補正処理部４８は、上述の図７を参照して説明したように、ミラー反射機構２８の使用を考慮せずに、ミラー反射型プロジェクタ１３の本来の画角内で画像に対する補正処理を行う。

一方、出力コンテンツ補正処理部４８が、ミラー不使用境界を跨いで画像を投影すると判定した場合、処理はステップＳ１８に進む。

ステップＳ１８において、出力コンテンツ補正処理部４８は、上述の図８を参照して説明したように、ミラー反射機構２８の使用を考慮して画像を反転または回転させる補正処理を行うとともに、ミラー２２の境界で直接光と反射光とに割り当てた画像を結合する画像処理を行う。

そして、ステップＳ１５、ステップＳ１７、またはステップＳ１８の処理後、処理はステップＳ１９に進む。ステップＳ１９において、出力コンテンツ補正処理部４８は、ミラー反射型プロジェクタ１３から見て投影面がどのような平面になっているかに従って、空間に歪みなく投影されるように画像を補正する空間マッピング補正を行う。

その後、ステップＳ１９で空間マッピング補正が行われた画像が、出力制御部４９による制御に従ってプロジェクタ出力装置１０２からミラー反射型プロジェクタ１３に出力され、ステップＳ１２で決定された投影位置に画像が投影された後、処理は終了される。そして、次の画像の１フレームを対象として、以下、同様の処理が繰り返される。

以上のように、投影システム１１においてコンテンツ出力制御処理を実行することで、ユーザの姿勢などに応じた投影向きで画像を投影することができるとともに、ミラー反射機構２８の使用を考慮した適切な画像を広範囲に投影することができる。

＜コンテンツ出力制御処理における画像処理＞
図１１乃至図１７を参照して、コンテンツ出力制御処理において行われる画像処理について説明する。

まず、図１１に示すように、ミラー反射型プロジェクタ１３に対する空間の断面方向について定義し、図１２に示すように、ミラー２２のピッチ回転を図式化する。この場合、図１３に示すように、ミラー２２の長さを狭めると、ミラー２２のピッチを更に回転させなければ、ミラー２２で反射されない直接光に割り当てる画像と、ミラー２２で反射される反射光に割り当てる画像（図８参照）との、２つの画像は結合されなくなる。

即ち、図１３において、２つの画像が結合されるミラー長およびミラーチルト角の組み合わせの条件には「ＯＫ」が示されている。一方、２つの画像が結合されないミラー長およびミラーチルト角の組み合わせの条件には「ＮＧ」が示されている。

従って、投影システム１１では、空間の広さや、ミラー２２の長さ、ミラー２２のピッチ回転角度、ピッチ回転軸の光源２７に対する相対距離、プロジェクタ本体２１の画角などを調整することで、空間内で２つの画像が結合されるような画像処理が行われる。

なお、２つの画像のつなぎ目を目立たなくさせるために、両方の画像を少しずつ重ね合わせて、色味やガンマカーブなどを調整することで、つなぎ目が目立たなくなるような画像処理を行ってもよい。また、２つの画像を結合させることができない場合でも、それぞれの画像の境界付近をぼかす画像処理を行って、そのギャップが目立たなくするようにしてもよい。

ここで、ユーザがコンテンツを見る際の姿勢などに従って、コンテンツに上下方向がある場合には、コンテンツの投影向きを考慮する必要があり、コンテンツに上下方向がない場合には、コンテンツの投影向きを考慮する必要はない。そして、コンテンツに上下方向がある場合と、コンテンツに上下方向がない場合とではコンテンツ出力制御処理における画像処理が異なるものとなる。

まず、図１４および図１５を参照して、コンテンツに上下方向がない場合における画像処理について説明し、次に、図１６および図１７を参照して、コンテンツに上下方向がある場合における画像処理について説明する。

図１４には、上下方向がないコンテンツとして、流れ星の画像を投影する例が示されている。

例えば、図１４に示す出力位置ａから出力位置ｅまで連続的にコンテンツを出力する例について説明する。例えば、出力位置ａは、ミラー不使用エリアの範囲外とであり、出力位置ｂは、ミラー不使用境界を跨ぎ、出力位置ｃは、ミラー不使用エリアである。また、出力位置ｄは、ミラー不使用境界を跨ぎ、出力位置ｅは、ミラー不使用エリアである。

そして、図１４に示すように、ユーザが、ミラー反射型プロジェクタ１３の右側に立っている場合、ユーザから見て右側の側面の出力位置ａから、天面の出力位置ｃを通り、左側の側面の出力位置ｄへコンテンツが遷移する。ここで、流れ星の画像は、コンテンツの方向をユーザの位置を考慮することなく投影することができる。

そして、図１５には、図１４に示したようにコンテンツを出力する出力位置ａから出力位置ｅまでの、ミラー反射機構２８の動きと、図１０のステップＳ１３、ステップＳ１４乃至Ｓ１８、およびステップＳ１９の処理内容の一例が示されている。

図１５に示すように、ミラー反射機構２８は、出力位置ａから出力位置ｅまで、ピッチ回転を連続して行い、その際、出力位置ｃの区間のみロール回転を行うことになる。また、出力位置ａおよび出力位置ｅの区間では、ミラー２２の反射のみを用いた画像が投影されるため、左右を反転するように補正処理が施される（図１０のステップＳ１５）。一方で、出力位置ｃの区間では、ミラー２２を用いずに画像が投影されるため、左右を反転するような補正処理は施されない（図１０のステップＳ１７）。

また、出力位置ｂおよび出力位置ｄの区間では、ミラー不使用境界を跨ぐように投影されるため、左右を反転するように補正した画像と、その補正を行わない画像とを１つに結合する画像処理（図１０のステップＳ１８）が行われる。そして、出力位置ｂの区間では、ミラー２２で反射される反射光に割り当てられる画像から、ミラー２２で反射されない直接光に割り当てる画像へ徐々に移行させながら２つの画像が結合される。また、出力位置ｄの区間では、その逆に、ミラー２２で反射されない直接光に割り当てる画像からミラー２２で反射される反射光に割り当てる画像へ徐々に移行させながら２つの画像が結合される。さらに、連動するように、使用していないミラー２２を次の投影面に使用するために、ロール回転を行うように先回りされている。

図１６には、上下方向があるコンテンツとして、子犬の画像を投影する例が示されている。

図１６には、図１４で説明した例と異なり、コンテンツの向きをユーザの位置に合わせて回転させた見え方が示されている。図１６に示すように、物理法則に乗っ取った生物や物などは人の位置に応じてその向きを変えなければ違和感が生じる。

そこで、図１７に示すように、空間形状／人の位置に基づくコンテンツの方向の補正、即ち、コンテンツの投影向きを決定する処理（図１０のステップＳ１３）を行って、画像を回転させる画像処理が施される。この画像処理における角度の算出は、図７に示したような画像の回転を元に戻すように逆算することで求められる。

なお、ミラー機構特有の補正処理（図１０のステップＳ１５、ステップＳ１７、ステップＳ１８）、および、空間マッピング補正（図１０のステップＳ１９）は、上下方向があるコンテンツでも、上下方向がないコンテンツでも同様に行われる。

＜駆動型プロジェクタな構成例＞
図１８乃至図２０を参照して、プロジェクタ本体２１を駆動する駆動型プロジェクタ１３１について説明する。

上述したような、ユーザ情報および環境情報に基づいてコンテンツを出力する際の投影向きを決定する補正処理（図１０のステップＳ１３）や、空間に歪みなく投影するように画像を補正する空間マッピング補正を行う補正処理（図１０のステップＳ１３）は、駆動型プロジェクタ１３１にも適用することができる。

図１８には、駆動型プロジェクタ１３１の外観構成が示されている。

図１８に示すように、駆動型プロジェクタ１３１は、チルト機構１３２およびパン機構１３３にプロジェクタ本体２１が搭載されて構成される。そして、チルト機構１３２がプロジェクタ本体２１をチルト方向に駆動し、パン機構１３３がプロジェクタ本体２１をパン方向に駆動する。

このような構成の駆動型プロジェクタ１３１においても、図１９に示すように、上述したミラー反射型プロジェクタ１３と同様の軌跡で、出力位置ａから出力位置ｅへと画像を移動させながら投影することができる。

図２０には、駆動型プロジェクタ１３１による画像の投影時における画像処理の例が示されている。

駆動型プロジェクタ１３１では、プロジェクタ本体２１が駆動するため、駆動型プロジェクタ１３１でのミラー反射機構２８の使用を考慮して画像を回転する処理（図１０のステップＳ１５）などは行われない。即ち、駆動型プロジェクタ１３１では、画像を回転する処理に替えて、空間マッピング補正において、プロジェクタ本体２１のロール回転が行われる。

例えば、駆動型プロジェクタ１３１では、プロジェクタ本体２１の画角を有効活用し、ピッチ方向に９０°回らずにコンテンツを画像内で移動させることで、あたかも９０°上まで移動しているような表現を行うことができる。これにより、駆動型プロジェクタ１３１は、チルト機構１３２およびパン機構１３３が急制動を行うことを抑制することができる。

以上のように構成される投影システム１１において、ミラー反射型プロジェクタ１３は、ミラー反射機構２８自体によってプロジェクタ本体２１から投影される光が遮られることなく、非常に広範囲に画像を投影することができる。また、図４に示したように、ミラー反射型プロジェクタ１３は、ミラー２２を完全に折り畳んだ収納状態での使用も可能である。

また、投影システム１１では、ミラー２２によって反射されて投影される画像と、ミラー２２によって反射されずに投影される画像とを結合することにより、投影システム１１自身のオクルージョンを除いた全方位へ連続して画像を移動させることができる。さらに、本技術は、図１８乃至図２０を参照して説明したように、駆動型プロジェクタ１３１にも適用することができる。

なお、本実施の形態において、ミラー２２の姿勢情報には、システム的な目標姿勢（これから動かそうとする目標となる姿勢）の値と、現在の物理的な姿勢（エンコーダ６４により取得された現在のピッチモータ２４およびロールモータ２６の回転角）の値との、両方の値が含まれる。また、画像は、静止画像および動画像の両方を含むものである。

＜コンピュータの構成例＞
次に、上述した一連の処理（制御処理方法）は、ハードウェアにより行うこともできるし、ソフトウェアにより行うこともできる。一連の処理をソフトウェアによって行う場合には、そのソフトウェアを構成するプログラムが、汎用のコンピュータ等にインストールされる。

図２１は、上述した一連の処理を実行するプログラムがインストールされるコンピュータの一実施の形態の構成例を示すブロック図である。

プログラムは、コンピュータに内蔵されている記録媒体としてのハードディスク２０５やROM２０３に予め記録しておくことができる。

あるいはまた、プログラムは、ドライブ２０９によって駆動されるリムーバブル記録媒体２１１に格納（記録）しておくことができる。このようなリムーバブル記録媒体２１１は、いわゆるパッケージソフトウェアとして提供することができる。ここで、リムーバブル記録媒体２１１としては、例えば、フレキシブルディスク、CD-ROM(Compact Disc Read Only Memory)，MO(Magneto Optical)ディスク，DVD(Digital Versatile Disc)、磁気ディスク、半導体メモリ等がある。

なお、プログラムは、上述したようなリムーバブル記録媒体２１１からコンピュータにインストールする他、通信網や放送網を介して、コンピュータにダウンロードし、内蔵するハードディスク２０５にインストールすることができる。すなわち、プログラムは、例えば、ダウンロードサイトから、ディジタル衛星放送用の人工衛星を介して、コンピュータに無線で転送したり、LAN(Local Area Network)、インターネットといったネットワークを介して、コンピュータに有線で転送することができる。

コンピュータは、CPU(Central Processing Unit)２０２を内蔵しており、CPU２０２には、バス２０１を介して、入出力インタフェース２１０が接続されている。

CPU２０２は、入出力インタフェース２１０を介して、ユーザによって、入力部２０７が操作等されることにより指令が入力されると、それに従って、ROM(Read Only Memory)２０３に格納されているプログラムを実行する。あるいは、CPU２０２は、ハードディスク２０５に格納されたプログラムを、RAM(Random Access Memory)２０４にロードして実行する。

これにより、CPU２０２は、上述したフローチャートにしたがった処理、あるいは上述したブロック図の構成により行われる処理を行う。そして、CPU２０２は、その処理結果を、必要に応じて、例えば、入出力インタフェース２１０を介して、出力部２０６から出力、あるいは、通信部２０８から送信、さらには、ハードディスク２０５に記録等させる。

なお、入力部２０７は、キーボードや、マウス、マイク等で構成される。また、出力部２０６は、LCD(Liquid Crystal Display)やスピーカ等で構成される。

ここで、本明細書において、コンピュータがプログラムに従って行う処理は、必ずしもフローチャートとして記載された順序に沿って時系列に行われる必要はない。すなわち、コンピュータがプログラムに従って行う処理は、並列的あるいは個別に実行される処理（例えば、並列処理あるいはオブジェクトによる処理）も含む。

また、プログラムは、１のコンピュータ（プロセッサ）により処理されるものであっても良いし、複数のコンピュータによって分散処理されるものであっても良い。さらに、プログラムは、遠方のコンピュータに転送されて実行されるものであっても良い。

さらに、本明細書において、システムとは、複数の構成要素（装置、モジュール（部品）等）の集合を意味し、すべての構成要素が同一筐体中にあるか否かは問わない。したがって、別個の筐体に収納され、ネットワークを介して接続されている複数の装置、及び、１つの筐体の中に複数のモジュールが収納されている１つの装置は、いずれも、システムである。

また、例えば、１つの装置（または処理部）として説明した構成を分割し、複数の装置（または処理部）として構成するようにしてもよい。逆に、以上において複数の装置（または処理部）として説明した構成をまとめて１つの装置（または処理部）として構成されるようにしてもよい。また、各装置（または各処理部）の構成に上述した以外の構成を付加するようにしてももちろんよい。さらに、システム全体としての構成や動作が実質的に同じであれば、ある装置（または処理部）の構成の一部を他の装置（または他の処理部）の構成に含めるようにしてもよい。

また、例えば、本技術は、１つの機能を、ネットワークを介して複数の装置で分担、共同して処理するクラウドコンピューティングの構成をとることができる。

また、例えば、上述したプログラムは、任意の装置において実行することができる。その場合、その装置が、必要な機能（機能ブロック等）を有し、必要な情報を得ることができるようにすればよい。

また、例えば、上述のフローチャートで説明した各ステップは、１つの装置で実行する他、複数の装置で分担して実行することができる。さらに、１つのステップに複数の処理が含まれる場合には、その１つのステップに含まれる複数の処理は、１つの装置で実行する他、複数の装置で分担して実行することができる。換言するに、１つのステップに含まれる複数の処理を、複数のステップの処理として実行することもできる。逆に、複数のステップとして説明した処理を１つのステップとしてまとめて実行することもできる。

なお、コンピュータが実行するプログラムは、プログラムを記述するステップの処理が、本明細書で説明する順序に沿って時系列に実行されるようにしても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで個別に実行されるようにしても良い。つまり、矛盾が生じない限り、各ステップの処理が上述した順序と異なる順序で実行されるようにしてもよい。さらに、このプログラムを記述するステップの処理が、他のプログラムの処理と並列に実行されるようにしても良いし、他のプログラムの処理と組み合わせて実行されるようにしても良い。

なお、本明細書において複数説明した本技術は、矛盾が生じない限り、それぞれ独立に単体で実施することができる。もちろん、任意の複数の本技術を併用して実施することもできる。例えば、いずれかの実施の形態において説明した本技術の一部または全部を、他の実施の形態において説明した本技術の一部または全部と組み合わせて実施することもできる。また、上述した任意の本技術の一部または全部を、上述していない他の技術と併用して実施することもできる。

＜構成の組み合わせ例＞
なお、本技術は以下のような構成も取ることができる。
（１）
画像コンテンツを投影する投影部が出力する投影光の少なくとも一部を反射可能に構成されたミラーの姿勢を示す姿勢情報に基づいて、前記画像コンテンツに対して補正処理を施す補正処理部と、
前記補正処理部により前記補正処理が施された前記画像コンテンツの前記投影部からの出力を制御する制御部と
を備える制御装置。
（２）
前記補正処理部は、前記姿勢情報が、前記画像コンテンツを投影するための投影光の少なくとも一部が前記ミラーで反射されることを示す場合、前記画像コンテンツの少なくとも一部に対して前記補正処理を施す
上記（１）に記載の制御装置。
（３）
前記補正処理部は、前記姿勢情報が、前記画像コンテンツを投影するための投影光の一部が前記ミラーで反射される反射光として投影され、かつ、前記投影光の他の一部が前記ミラーで反射されない直接光として投影されることを示す場合、前記画像コンテンツのうち前記反射光に割り当てられる部分の画像に対しては前記補正処理を行い、前記画像コンテンツのうち前記直接光に割り当てられる部分の画像に対しては前記補正処理を行わない
上記（２）に記載の制御装置。
（４）
前記補正処理部は、前記画像コンテンツのうち前記反射光に割り当てられる部分の画像と、前記画像コンテンツのうち前記直接光に割り当てられる部分の画像とを合成した合成画像を生成し、
前記制御部は、前記合成画像を前記投影部に出力させる制御を行う
上記（３）に記載の制御装置。
（５）
前記補正処理部は、前記姿勢情報が、前記画像コンテンツを投影するための投影光が前記ミラーで反射されない直接光として投影されることを示す場合、前記画像コンテンツに対して前記補正処理を行なわない
上記（４）に記載の制御装置。
（６）
前記補正処理は、前記画像コンテンツを回転または反転する画像処理である
上記（１）から（５）までのいずれかに記載の制御装置。
（７）
前記姿勢情報は、前記画像コンテンツの投影位置に対応する情報である
上記（１）から（６）までのいずれかに記載の制御装置。
（８）
前記姿勢情報は、前記投影部の光軸に対する前記ミラーのピッチ方向の角度を示す情報を含む
上記（７）に記載の制御装置。
（９）
前記姿勢情報は、前記投影部の光軸に対する前記ミラーのロール方向の角度を示す情報を含む
上記（７）に記載の制御装置。
（１０）
前記制御部は、前記画像コンテンツの投影位置に応じて、前記ミラーの姿勢を変更する制御を行う
上記（１）から（９）までのいずれかに記載の制御装置。
（１１）
前記制御部は、前記投影部の光軸に対してピッチ方向に、前記ミラーの姿勢を変更する制御を行う
上記（１０）に記載の制御装置。
（１２）
前記制御部は、前記投影部の光軸に対してロール方向に、前記ミラーの姿勢を変更する制御を行う
上記（１０）に記載の制御装置。
（１３）
前記投影部が利用される利用環境として、前記画像コンテンツを視聴するユーザ、および、前記画像コンテンツを投影する投影面を認識する環境認識部
をさらに備える上記（１）から（１１）までのいずれかに記載の制御装置。
（１４）
画像コンテンツの投影を制御する制御処理装置が、
前記画像コンテンツを投影する投影部が出力する投影光の少なくとも一部を反射可能に構成されたミラーの姿勢を示す姿勢情報に基づいて、前記画像コンテンツに対して補正処理を施すことと、
前記補正処理が施された前記画像コンテンツの前記投影部からの出力を制御することと
を含む制御方法。
（１５）
画像コンテンツの投影を制御する制御処理装置のコンピュータに、
前記画像コンテンツを投影する投影部が出力する投影光の少なくとも一部を反射可能に構成されたミラーの姿勢を示す姿勢情報に基づいて、前記画像コンテンツに対して補正処理を施すことと、
前記補正処理が施された前記画像コンテンツの前記投影部からの出力を制御することと
を含む処理を実行させるためのプログラム。

なお、本実施の形態は、上述した実施の形態に限定されるものではなく、本開示の要旨を逸脱しない範囲において種々の変更が可能である。また、本明細書に記載された効果はあくまで例示であって限定されるものではなく、他の効果があってもよい。

１１投影システム，１２センサモジュール，１３ミラー反射型プロジェクタ，１４制御処理装置，２１プロジェクタ本体，２２ミラー，２３ピッチアーム，２４ピッチモータ，２５ロールアーム，２６ロールモータ２，２７光源，２８ミラー反射機構，４１入力部，４２人認識処理部，４３環境認識処理部，４４ポインティング認識処理部，４５出力コンテンツ色味決定部，４６出力位置決定部，４７出力時間／タイミング決定部，４８出力コンテンツ補正処理部，４９出力制御部，５０出力部，６１サーモカメラ，６２ TOFカメラ，６３ステレオカメラ，６４エンコーダ，６５音声入力装置，６６慣性計測装置，６７ RGBカメラ，６８ IRカメラ，７１位置検出部，７２姿勢検出部，７３検出部，７４視界／視線検出部，７５手指検出部，８１照度検出部，８２平面検出部，８３投影面材質／色検出部，８４遮蔽物検出部，９１輝点検出部，１０１ミラー駆動用モータ，１０２プロジェクタ出力装置，１０３プロジェクタズーム／フォーカス調整装置

Claims

画像コンテンツを投影する投影部が出力する投影光の少なくとも一部を反射可能に構成されたミラーの姿勢を示す姿勢情報に基づいて、前記画像コンテンツに対して補正処理を施す補正処理部と、
前記補正処理部により前記補正処理が施された前記画像コンテンツの前記投影部からの出力を制御する制御部と
を備える制御装置。
前記補正処理部は、前記姿勢情報が、前記画像コンテンツを投影するための投影光の少なくとも一部が前記ミラーで反射されることを示す場合、前記画像コンテンツの少なくとも一部に対して前記補正処理を施す
請求項１に記載の制御装置。
前記補正処理部は、前記姿勢情報が、前記画像コンテンツを投影するための投影光の一部が前記ミラーで反射される反射光として投影され、かつ、前記投影光の他の一部が前記ミラーで反射されない直接光として投影されることを示す場合、前記画像コンテンツのうち前記反射光に割り当てられる部分の画像に対しては前記補正処理を行い、前記画像コンテンツのうち前記直接光に割り当てられる部分の画像に対しては前記補正処理を行わない
請求項２に記載の制御装置。
前記補正処理部は、前記画像コンテンツのうち前記反射光に割り当てられる部分の画像と、前記画像コンテンツのうち前記直接光に割り当てられる部分の画像とを合成した合成画像を生成し、
前記制御部は、前記合成画像を前記投影部に出力させる制御を行う
請求項３に記載の制御装置。
前記補正処理部は、前記姿勢情報が、前記画像コンテンツを投影するための投影光が前記ミラーで反射されない直接光として投影されることを示す場合、前記画像コンテンツに対して前記補正処理を行なわない
請求項４に記載の制御装置。
前記補正処理は、前記画像コンテンツを回転または反転する画像処理である
請求項４に記載の制御装置。
前記姿勢情報は、前記画像コンテンツの投影位置に対応する情報である
請求項１に記載の制御装置。
前記姿勢情報は、前記投影部の光軸に対する前記ミラーのピッチ方向の角度を示す情報を含む
請求項７に記載の制御装置。
前記姿勢情報は、前記投影部の光軸に対する前記ミラーのロール方向の角度を示す情報を含む
請求項７に記載の制御装置。
前記制御部は、前記画像コンテンツの投影位置に応じて、前記ミラーの姿勢を変更する制御を行う
請求項１に記載の制御装置。
前記制御部は、前記投影部の光軸に対してピッチ方向に、前記ミラーの姿勢を変更する制御を行う
請求項１０に記載の制御装置。
前記制御部は、前記投影部の光軸に対してロール方向に、前記ミラーの姿勢を変更する制御を行う
請求項１０に記載の制御装置。
前記投影部が利用される利用環境として、前記画像コンテンツを視聴するユーザ、および、前記画像コンテンツを投影する投影面を認識する環境認識部
をさらに備える請求項１に記載の制御装置。
画像コンテンツの投影を制御する制御処理装置が、
前記画像コンテンツを投影する投影部が出力する投影光の少なくとも一部を反射可能に構成されたミラーの姿勢を示す姿勢情報に基づいて、前記画像コンテンツに対して補正処理を施すことと、
前記補正処理が施された前記画像コンテンツの前記投影部からの出力を制御することと
を含む制御方法。
画像コンテンツの投影を制御する制御処理装置のコンピュータに、
前記画像コンテンツを投影する投影部が出力する投影光の少なくとも一部を反射可能に構成されたミラーの姿勢を示す姿勢情報に基づいて、前記画像コンテンツに対して補正処理を施すことと、
前記補正処理が施された前記画像コンテンツの前記投影部からの出力を制御することと
を含む処理を実行させるためのプログラム。