JP3711025B2 - Virtual reality space movement control device - Google Patents
Virtual reality space movement control device Download PDFInfo
- Publication number
- JP3711025B2 JP3711025B2 JP2001024619A JP2001024619A JP3711025B2 JP 3711025 B2 JP3711025 B2 JP 3711025B2 JP 2001024619 A JP2001024619 A JP 2001024619A JP 2001024619 A JP2001024619 A JP 2001024619A JP 3711025 B2 JP3711025 B2 JP 3711025B2
- Authority
- JP
- Japan
- Prior art keywords
- space
- virtual
- search
- plan
- camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Processing Or Creating Images (AREA)
- Position Input By Displaying (AREA)
- User Interface Of Digital Computer (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明はバーチャルリアリティ（以下ＶＲ）技術に関する。ＶＲ技術は、コンピュータゲーム、デジタルアーカイヴシステム、プレゼンテーションシステムなど様々な分野に応用が図られている。
【０００２】
【従来技術】
ＶＲ技術を用いた従来のデジタルアーカイブシステム、プレゼンテーションシステムにおいては、（１）利用者がＶＲ空間を自由に歩き回る、（２）制作側が定義したパスにしたがい移動を行う、（３）名称で定義された場所に移動するなどの方法で、空間の中を移動し鑑賞していた。
【０００３】
【発明が解決しようとする課題】
上記（１）または（２）の方法の場合、利用者が求める物体が空間上のどこにあるかが直感的に分かり難くまた、場合によっては利用者にとっては不要な空間中を歩き回ると言う、煩雑な操作をしなければならなかった。また、（３）の名称で定義されたシーン（場所、時刻）に移動する場合も、その場所が仮想空間中の何処で、時刻は何時なのか、またそのシーンが本当に求めているシーンなのかを確認するには不十分な為、結局、複数のシーンを幾つも移動し、求めるシーンを探す必要があった。この為、利用者は本来興味のある物体を鑑賞したいにもかかわらず、それ以外の煩雑な操作に時間をかける必要があり、十分満足の行く物では無かった。
【０００４】
本発明はこのような問題点を考慮してなされたものであり、不要で煩雑な空間移動操作をする必要がなく、利用者が仮想空間上のどこにいるか簡単に把握でき、興味のある地点・シーンに簡単に移動可能な、仮想現実空間移動制御装置を提供することを課題とする。
【０００５】
【課題を解決するための手段】
そこで、本発明では、
仮想空間を表現するデータを記憶するＶＲデータ格納部と、
前記ＶＲデータ格納部のデータを読み出し３次元空間としての仮想世界を主画面枠に描画するＶＲ描画部と、仮想世界の平面図データを格納する平面図データ格納部と、現在のカメラ位置を記憶管理する位置情報管理部または現在のカメラ位置及び時刻を記憶管理するシーン情報管理部のいずれかと、現在探索中の仮想空間の平面図を前記主画面枠とは異なる副画面枠中に表示する仮想空間探索案内手段と、記憶手段と、を備えたマウス等の入力装置による操作指示により仮想空間内を自由に動いて仮想世界を鑑賞する主画面と副画面を有する仮想現実空間移動制御装置において、
前記記憶手段には、仮想世界に存在するオブジェクトを、その識別番号と、その存在位置情報と、そのオブジェクトに関連するテキスト情報により定めた第１のテーブルと、
仮想世界に事前に定められたカメラマークを、そのカメラ位置と注視方向、そのカメラマークが描画する景観図データ、その景観図に描画されるオブジェクトの識別番号、そのカメラマークに関連するテキスト情報により記述した第２のテーブルと、を保持しておき、前記仮想空間探索案内手段は、前記カメラマークを前記仮想空間の平面図上にマークするとともに、そのカメラマークの景観図とそのカメラマークに関連するテキスト情報から案内画面を構成して平面図上の前記マークと関連付けて前記副画面枠内に表示して、仮想現実空間内のオブジェクトの存在を利用者に案内させるとともに、この平面図上のカメラマークまたは案内画面枠が選択されることを、そのカメラマークの位置への移動指示として受付け、前記シーン情報管理部または位置情報管理部へその移動指示を伝えるように構成することで課題を解決することを要旨とする。
【０００６】
また、本発明の第２の観点は、
仮想空間を表現するデータを記憶するＶＲデータ格納部と、
前記ＶＲデータ格納部のデータを読み出し３次元空間としての仮想世界を主画面枠に描画するＶＲ描画部と、仮想世界の平面図データを格納する平面図データ格納部と、現在のカメラ位置を記憶管理する位置情報管理部と、現在探索中の仮想空間の平面図を前記主画面枠とは異なる副画面枠中に表示する仮想空間探索案内手段と、を備えたマウス等の入力装置による操作指示により仮想空間内を自由に動いて仮想世界を鑑賞する主画面と副画面を有する仮想現実空間移動制御装置であって、
検索キーから、仮想世界の該当するオブジェクトの位置情報、該オブジェクトを描画するカメラ位置情報、および該オブジェクトの名称などの該オブジェクトに関連するテキスト情報を抽出するように構成されたデータベース部をさらに備え、
前記仮想空間探索案内手段は、前記いずれかの画面上に検索キー入力部と検索開始ボタンを設け、鑑賞したいオブジェクトのキーを前記検索キー入力部に入力されて検索開始指示を受けると、前記副画面枠内に、検索結果である該当オブジェクトに関連するテキストを表示した案内テキスト枠を設けるとともに、前記平面図上に、検索結果である該オブジェクトの存在位置を表すオブジェクトマークを前記案内テキスト枠と関連付けて表示して、検索されたオブジェクトを利用者に案内するとともに、このオブジェクトマークまたは前記案内テキスト枠が選択されると、または、無条件で自動的に、前記位置情報管理部へ検索結果である該オブジェクトを描画するカメラ位置情報を伝え、前記ＶＲ描画部にそのカメラ位置からの仮想世界の画面を主画面枠に表示させるよう構成された仮想現実空間移動制御装置により課題を解決することである。
【０００７】
また、本発明の第３の観点は、
仮想空間を表現するデータを記憶するＶＲデータ格納部と、
前記ＶＲデータ格納部のデータを読み出し３次元空間としての仮想世界を主画面枠に描画するＶＲ描画部と、仮想世界の平面図データを格納する平面図データ格納部と、現在のカメラ位置を記憶管理する位置情報管理部と、現在探索中の仮想空間の平面図を前記主画面枠とは異なる副画面枠中に表示する仮想空間探索案内手段と、を備えたマウス等の入力装置による操作指示により仮想空間内を自由に動いて仮想世界を鑑賞する主画面と副画面を有する仮想現実空間移動制御装置であって、
検索キーから、仮想世界の該当するオブジェクトの位置情報、該オブジェクトを描画するカメラ位置情報、該カメラ位置から描画される景観図画像および該オブジェクトの名称などの該オブジェクトに関連するテキスト情報を抽出するように構成されたデータベース部をさらに備え、
前記仮想空間探索案内手段は、前記いずれかの画面上に検索キー入力部と検索開始ボタンを設け、鑑賞したいオブジェクトのキーを前記検索キー入力部に入力されて検索開始指示を受けると、前記副画面枠内に、
検索結果である該当オブジェクトに関連するテキストと検索結果である該オブジェクトが描画される景観図を表示した案内画面枠を設けるとともに、前記平面図上に、検索結果である該オブジェクトを描画するカメラ位置を表すカメラマークを前記案内画面枠と関連付けて表示するとともに検索結果である該オブジェクトの存在位置を表すオブジェクトマークを表示して、検索されたオブジェクトを利用者に案内するとともに、このカメラマークまたは前記案内画面枠が選択されると、前記位置情報管理部へこのカメラマークの表すカメラ位置情報を伝え、前記ＶＲ描画部にそのカメラ位置からの仮想世界の画面を主画面枠に表示させるよう構成された仮想現実空間移動制御装置により課題を解決するものである。これは第２の観点の仮想現実空間移動制御装置において、検索の結果抽出されたオブジェクトへ誘導する案内テキスト枠の代わりにテキスト情報だけでなく景観画像を含めた案内画面枠を利用できるよう機能拡張したものといえる。
【０００８】
また、本発明の第４の観点は、
仮想空間を表現するデータを記憶するＶＲデータ格納部と、
前記ＶＲデータ格納部のデータを読み出し３次元空間としての仮想世界を主画面枠に描画するＶＲ描画部と、仮想世界の平面図データを格納する平面図データ格納部と、現在のカメラ位置および時刻を記憶管理するシーン情報管理部と、現在探索中の仮想空間の平面図を前記主画面枠とは異なる副画面枠中に表示する仮想空間探索案内手段と、を備えたマウス等の入力装置による操作指示により仮想空間内を自由に動いて仮想世界を鑑賞する主画面と副画面を有する仮想現実空間移動制御装置であって、
検索キーから、仮想世界の該当するオブジェクトの位置情報、該オブジェクトを描画するカメラ位置および時刻の情報、該カメラ位置から描画される景観図画像および該オブジェクトの名称などの該オブジェクトに関連するテキスト情報を抽出するように構成されたデータベース部をさらに備え、
前記仮想空間探索案内手段は、前記いずれかの画面上に検索キー入力部と検索開始ボタンを設け、鑑賞したいオブジェクトのキーを前記検索キー入力部に入力されて検索開始指示を受けると、前記副画面枠内に、
検索結果である該当オブジェクトに関連するテキストと検索結果である該オブジェクトが描画される景観図を表示した案内画面枠を設けるとともに、前記平面図上に、検索結果である該オブジェクトを描画するカメラ位置を表すカメラマークを前記案内画面枠と関連付けて表示するとともに検索結果である該オブジェクトの存在位置を表すオブジェクトマークを表示して、検索されたオブジェクトを利用者に案内するとともに、このカメラマークまたは前記案内画面枠が選択されると、前記シーン情報管理部へ選択されたカメラマークのカメラ位置情報および時刻情報を伝え、前記ＶＲ描画部にそのカメラ位置およびその時刻からの仮想世界の画面を主画面枠に表示させるよう構成された仮想現実空間移動制御装置により課題を解決する。第３の観点の位置情報管理部を、現在のカメラ位置および時刻を記憶管理するシーン情報管理部に置き換えるなどして、時間情報をも管理できるよう機能拡張したものである。
【００１２】
【発明の実施の形態】
以下、本発明の実施形態を、図面を用いて、３つの実施例により説明してゆく。
【００１３】
《実施例１》図１に本発明の一実施例である仮想現実空間移動制御装置１の全体構成図を示す。仮想現実空間移動制御装置１は、ＶＲ描画部１０、位置情報管理部２０、ＶＲデータ格納部３０、平面図データ格納部４０、ＶＲ空間移動指示部５０、データベース部６０から構成される。ＶＲ空間移動指示部５０は、仮想空間探索案内手段の一形態である。
【００１４】
ＶＲ描画部１０は、ＶＲデータ格納部３０より、形状データ、質感データ、ライトデータ、カメラデータを読み込み、ＶＲ空間を描画する。位置情報管理部２０は、ＶＲ空間上のカメラの視点のX,Y,Z座標、注視点のX,Y,Z座標（以下これらを総称してカメラ位置と呼ぶ）を格納する。ＶＲデータ格納部３０には、ＶＲ空間を定義する形状データ、質感データ、ライトデータ、カメラデータが格納されている。前述のＶＲ描画部１０がこれらのデータを読込み主画面枠に描画を行う。
【００１５】
図２は前記形状データを説明する図である。形状データは、頂点の座標を定める頂点テーブルと面と頂点との関係を記述する面テーブルで構成され、ＶＲ空間上のオブジェクトの図形的な定義を与える。色データは、上記形状データにおける各面の色の属性値であり、環境色：Ra,Ga,Ba、拡散色：Rd,Gd,Bd、鏡面色：Rs,Gs,Bs、鏡面係数：Ｓで表される。ライトデータは、ＶＲ空間中に置かれる光源の３次元的な位置(X,Y,Z)、方向(NX,NY,NZ)、強度、色(R,G,B)を表す。カメラデータは、立上げ時のカメラ位置、画角、視野角を定義する。
【００１６】
平面図データ格納部４０には、上記ＶＲデータ格納部に格納されているＶＲデータに対応した平面図が格納されている。
【００１７】
ＶＲ空間移動指示部５０は、平面図データ格納部４０、位置情報管理部２０及び、データベース部６０の後述する空間位置情報管理データベース（以下空間位置情報管理ＤＢ）６１を読込み、ＶＲ空間の移動を補助するための副画面（平面図、平面図上でのカメラ位置、その位置に対応した案内画面）を提示すると伴に、マウス等の入力装置からのＶＲ空間の移動指示を受け付ける。また、利用者から受付けた検索キーワードをデータベース部に問合せ、検索結果の提示を行う。
【００１８】
データベース部６０には空間位置情報管理ＤＢ６１と物体情報管理データベース（以下物体情報管理ＤＢ）６２の２種類のデータベースが保持されている。
【００１９】
空間位置情報管理ＤＢ６１には、ＶＲ空間内のカメラ情報と、それに対応する平面図上の位置・説明用画像、説明文などの関連情報が格納される。図１７にこのデータベースの内容の一部を示している。各項目の意味は以下の通りである。
・VR視点位置
ＶＲ描画部で描画しているＶＲ空間に対応したカメラ視点情報
・VR注視点位置
ＶＲ描画部で描画しているＶＲ空間に対応したカメラ注視点情報
・平面図視点位置
平面図上でのカメラ位置（正規化されている）
・平面図注視点位置
平面図上でのカメラ注視点位置（正規化されている）
・名称
その位置の名前
・画像ファイル名
その位置の説明図のファイル名（主に、その位置から見た景観図）
・説明情報
説明用テキストデータ
・描画物体番号
その位置から見た時に描画される物体番号。（図１８の物体情報管理ＤＢ６２ の物体番号と対応している。）
・初期描画フラグ
起動時に位置情報を表示するかのフラグ。○が表示で、×が非表示である。こ こで、○の物体だけが起動時に表示される。それ以外は、検索で該当した時に 描画される。
【００２０】
次に物体情報管理ＤＢ６２を説明する。このデータベースは、ＶＲ空間上に配置された物体の属性及び、その物体の平面図上の位置を格納しているデータベースである。図１８に本データベースの一部を示す。各項目の意味は以下の通りである。
・物体番号
物体につけた番号。空間位置情報管理ＤＢ６１の描画物体番号と対応している 。
・名称
物体の名称。配置される物（絵画）や建物の名前（噴水など）が格納されてい る。
・検索キー情報
検索するさいに用いる、キーワードを格納する。実際に検索する場合は名称と 検索キー情報を元に該当する物体を検索する。
・平面図上の位置
ＶＲ空間を表す平面図における当該物体の位置が格納される。ここでは、矩形 の左上、右下の座標（正規化されている）を格納しているが、平面図上で位置 がわかるものならば何でも良く例えば、多角形でも、位置を表す画像データで も構わない。多角形の場合は、頂点座標が格納される。また、画像の場合は画 像ファイル名が格納される。
【００２１】
次に、仮想現実空間移動制御装置１によるＶＲ空間の表示と操作の流れを説明する。
【００２２】
本システムを起動すると、図３に示す初期画面が表示される。表示画面はＶＲ空間表示画面（主画面）▲１▼とＶＲ空間移動指示画面（副画面）▲２▼の領域に分けられる。
【００２３】
ＶＲ空間表示画面▲１▼は、ＶＲ描画部１０がＶＲデータ格納部３０よりＶＲデータを読み込み表示する。利用者は▲１▼を見ながらＶＲ空間を鑑賞をする。この画面上でマウスなどの入力デバイスを操作することにより自由にカメラ位置を移動しＶＲ空間を再描画することができる。移動後のカメラ位置は、位置情報管理部２０に格納される。また、▲２▼のＶＲ空間移動指示画面上での指示の元、位置情報管理部２０より予め用意されたカメラ情報を読込み、ＶＲ空間を移動することができる。
【００２４】
ＶＲ空間移動指示画面▲２▼は、▲１▼で表示しているＶＲ空間を移動する為の指示画面で、ＶＲ空間移動指示部５０によって描画される。ＶＲ空間移動指示部５０は平面図データ格納部４０よりＶＲ空間の平面図を読込みＶＲ空間移動指示画面▲２▼の所定の位置に描画する。また、空間位置情報管理ＤＢ６１より管理情報を読込み、ＶＲ空間上に配置された物体や建物の案内情報をＶＲ空間移動指示画面▲２▼に描画する。
【００２５】
図４は、ＶＲ空間の平面図の例である。また、図５は、ＶＲ空間移動指示画面▲２▼の構成例である。図５で、▲３▼は平面図であり、▲４▼−１、▲４▼−２、▲４▼−３は、空間位置情報管理ＤＢ６１より呼出された物体や建物の案内画面である。各案内画面枠には、その物体や建物をその付近から眺めた景観図と説明テキストを表示する。さらに、各画案内画面に表示された景観図に対応するカメラマークを平面図上に表示する。物体や建物の案内情報は、空間位置情報管理ＤＢ６１の初期描画フラグが○の物に関してのみ、案内情報として読込まれ▲４▼領域に描画される。また、位置情報管理部より現在のＶＲ空間上のカメラ位置（視点、注視点）を読込みこれに対応する平面図上にマーク（黒いカメラ）を行う。さらに、物体を検索する為の、検索枠▲５▼を表示する。
【００２６】
図５の平面図表示枠▲３▼には、▲１▼のＶＲ空間中の現在カメラ位置、案内される物体（▲４▼−１、▲４▼−２、▲４▼−３に表示される物体）に対応したカメラマーク（それぞれの景観図に対応）及び後述する▲５▼で検索した結果に対応するカメラ位置がマーキング表示される。
【００２７】
利用者は、平面図▲３▼と▲４▼の複数の案内画面により、現在位置と移動したい場所を直感的に把握する事ができる。利用者が▲４▼の案内画面のどれかを選択することで、カメラ位置を変更し、▲１▼、▲３▼を再描画する。例えば、図３（図５）の状態から▲４▼−１を選択すると、図６となる。
【００２８】
図５の▲４▼−１を選択すると、対応するＶＲ空間情報カメラ位置（図１９に示すVR視点位置<22.0 1.0 20.0>、VR注視点位置< 4.0 1.0 20.0>）を読込み、位置情報管理部２０に格納する。また、平面図上の視点位置<0.72 0.20>、注視点位置<0.54 0.20>（同じく図１９）に基づき、▲３▼上の現在のカメラ位置を移動しカメラマークを再描画する。尚、平面図上のカメラマークは視点位置に置かれ、注視点方向に向く形で描画される。次に、ＶＲ描画部１０が位置情報管理部２０よりカメラ位置（視点位置<22.0 1.0 20.0>、注視点位置< 4.0 1.0 20.0>）を読込み、ＶＲ空間を再描画する。このようにして、図３が図６に変化する。
【００２９】
ＶＲ空間検索枠▲５▼は、鑑賞対象の内容を入力することにより、関連する位置を検索する画面である。図７に「DNP画５」で検索した場合の、検索後のＶＲ空間移動指示画面▲２▼を示す。検索により２地点が抽出され、▲３▼上に２つのカメラマークと、DNP画５の位置（▲３▼−１）が表示されると伴に、▲４▼に２地点の案内画面（▲４▼−４、▲４▼−５）が追加表示される。この画面から、例えば▲４▼−４を選択すると前述のようにカメラ位置を変更し、▲１▼、▲３▼を再描画する。図８に▲４▼−４を選択した場合の画面を示す。
【００３０】
次に、実際に仮想現実空間移動制御装置１を用いＶＲ空間の移動を行う全体の流れを図９を用い説明する。
【００３１】
（起動：ＶＲ空間を表示）本装置を起動するとＶＲ描画部１０、ＶＲ空間移動指示部５０により、図３のＶＲ空間移動初期表示画面が表示される（Ｓ１０）。
【００３２】
（入力待ち）その後、マウス、キーボードなどの入力装置からの入力待ち状態となる（Ｓ２０）。この後は、以後の入力指示に応じて以下３つの処理（ＶＲ空間を自由に移動する、指定した位置に移動する、ＶＲ空間上の物***置を検索する）のいずれかを実行する。
【００３３】
（ＶＲ空間を自由に移動）入力待ち状態（Ｓ２０）において、ＶＲ空間表示画面▲１▼上でのマウス操作信号が検出されると、その信号は以下のルールで解釈され、ＶＲ空間上でカメラを移動し、ＶＲ空間の再描画を行う（Ｓ３０）。
左ボタンを押したまま移動：
前→前進、後→後退、左→左移動、右→右移動
右ボタンを押したまま移動：
前→上向、後→下向、左→左向、右→右向
次に、ＶＲ空間の自由移動を行った後のカメラ位置を、位置情報管理部２０に格納する（Ｓ３２）。最後に、ＶＲ空間移動指示部５０が位置情報管理部１０より現在のカメラ位置X,Y,Zを読込み、その内容に基づき、数１で平面図▲３▼上のカメラ位置ix,iyを算出し、現在のカメラ位置にカメラマークを表示する（Ｓ３４）。
【数１】
ix = (X-XL)/(XR - XL) iy = Z / (ZB - ZA)
但し X,Y,Zは、現在のカメラ位置のＶＲ空間座標
ＶＲ空間は、XL（左端）<=X<=XR（右端）、ZA（奥）<=Z<=ZB（手前）と 表され、XL、XR、ZA、ZBで空間のサイズが決まる。
【００３４】
尚、実施例のＶＲ空間の場合、 XL= -50.0 , XR= 50.0 , ZB = 100.0 , ZA = 0.0 としている。図１０に平面図とＶＲ空間との対応関係を示す。例えば、図３に示すように現在のカメラが入口（視点＜0.0 1.0 95.0＞、注視点＜0.0 1.0 90.0＞）にある場合、平面図上のカメラは、＜0.5 0.95＞に配置され、方向は＜0.5 0.95＞から<0.5 0.9>を向いた形となる。
【００３５】
（ＶＲ空間中の物体を選択し移動）利用者が案内画面の（▲４▼−＊）を選択すると、案内画面に対応する平面図上のカメラ位置（図１９の平面図視点位置、平面図注視点位置）を元に、平面図上の現在のカメラマークを更新する（Ｓ４０）。次に、選択項目に従ったＶＲ空間上のカメラ位置（図１９のVR視点位置<22.0 1.0 20.0>、VR注視点位置<4.0 1.0 20.0>）を空間位置情報管理ＤＢ６１から読み出し位置情報管理部２０に格納する（Ｓ４２）。ＶＲ描画部１０にて、新たに設定されたカメラ位置によりＶＲ空間を再描画する（Ｓ４４）。
【００３６】
（物***置検索）作業者が、検索を行うために、検索枠▲５▼に検索したいキーワードを入力して来た場合は、ＶＲ空間位置検索を行う（Ｓ５０）。例えば、「DNP画5」を検索キーとして入力した場合、ＶＲ空間移動指示部５０では、物体情報管理ＤＢ６２に問合せを行う。物体情報管理ＤＢ６２は入力されたキーワードと合致するものが「名称」、「検索キー情報」にあるかを検索し、該当するものがあった場合その物体番号と平面図上の位置を保持する。次に、ＶＲ空間移動指示部５０は、空間位置情報管理ＤＢ６１に対し、先に保持した物体番号を用い、描画物体番号内に同一のものがあるか検索を行う。同一のものが有る場合は、そのレコード情報（ＶＲ視点位置〜説明情報まで７項目）を保持する。この例の場合は、図２０、図２１の内容を保持する。今回は、「DNP画5」で検索を行ったが例えば「女性」で検索を行っても、同一の検索結果が得られる。
【００３７】
次に、上記、図２０、図２１の内容に則り、平面図表示画面、位置内容説明画面の更新を行う（Ｓ５４）。まずは、図２０の平面図上の位置を元に、平面図表示画面上に検索対象の物***置（矩形：左上0.40 0.42 ,右下 0.41,0.49）を描画する。
【００３８】
次に、図２１の平面図視点位置、平面図注視点位置を元に、平面図上にカメラマークを表示する。（１件目：視点＜0.49 0.47＞、注視点＜0.40 0.47＞。２件目：視点＜0.48 0.61＞、注視点＜0.40 0.47＞。）さらに、図２１の名称、説明情報により、説明テキストを得て、対応する画像（１件目：Jpimg5.bmp 、２件目：Jproom2.bmp）とともに案内画面（図７の▲４▼−４、▲４▼−５）を作りに表示する。
【００３９】
ここまで説明した実施例１は、時間で空間内の事象が変化しない静的なＶＲ空間を対象にしていたものであるが、次に第２の実施例として、動的（時間で空間内の事象がある）なＶＲ空間を扱えるように拡張した仮想現実空間移動制御装置２を説明する。以下実施例１との違いを中心に説明する。
【００４０】
《実施例２》図１１は仮想現実空間移動制御装置２の全体構成図である。仮想現実空間移動制御装置１の位置情報管理部２０の代わりにシーン情報管理部２１が置き換わった構成となっているが、他の各部分も平面図データ格納部４０を除き、時間により変化する仮想世界を描くために機能が拡張されている。以下、各部の説明を行う。
【００４１】
ＶＲ描画部１０は、ＶＲデータ格納部３０より、形状データ、質感データ、ライトデータ、カメラデータに加え、シーングラフデータを読み込み、ＶＲ空間を描画する。実施例１と異なり、このＶＲ空間は時間によりシーン（例えば物体が動く、朝から昼に明るさが変わる、物体の色が変わるなど）が変化する。
【００４２】
シーングラフデータとは、各物体の時間軸における変動（物体の移動、物体色の変化、明るさの変化など）を表すデータである。ここでは、物体が移動する場合を例に取り具体的内容を説明する。各物体のある時間の位置はスケール(sx,sy,sz)、回転（rx,ry,rz）、移動（mx,my,mz）によって定義される。このスケール、回転、移動情報を各物体毎に、基準時間分格納する。尚、基準時間の間はＶＲ描画部で補間処理される。例えば基準時間が１秒おきにある場合は、その間の移動情報が補間処理で算出される。
【００４３】
シーン情報管理部２１は、ＶＲ空間上のカメラ位置（視点のX,Y,Z座標、注視点のX,Y,Z座標：以下カメラ位置）に加え、ＶＲ空間の時刻を格納する。
【００４４】
ＶＲデータ格納部３０は、ＶＲ空間を定義する形状データ、質感データ、ライトデータ、カメラデータに加えシーングラフデータが格納されている。前述のＶＲ描画部１０でこれらのデータを読込み描画を行う。
【００４５】
ＶＲシーン移動指示部５１は、仮想空間探索手段の一形態であり、実施例１におけるＶＲ空間移動指示文５０に加え、シーン情報管理部２１及び、空間位置情報管理ＤＢ６１からＶＲシーンの時刻を読込み、ＶＲシーンの移動を補助するための副画面（時刻、平面図、平面図上でのカメラ位置、幾つかの案内画面）を提示すると伴に、ＶＲシーン（位置、時刻）の移動指示を受付ける。
【００４６】
空間位置情報管理ＤＢ６１は、実施例１の空間位置情報管理ＤＢの内容に加え、ＶＲ空間の時刻情報（秒）をも保有している。図２２は、実施例２の空間位置情報管理ＤＢ６１の内容の例を示す図である。ここで時刻情報が ？1.0 のものは静的なものであり、時間で変化しないものとする。図２２において、名称：「庭の車」は時刻10.0秒におけるものであることがわかる。また、名称：「入口の車」は時刻30.0秒におけるものである。
【００４７】
物体情報管理ＤＢ６２は、ＶＲ空間上の物体の属性及び、その物体が配置されている平面図上の位置、を格納しているデータベースである。何時の時刻にその位置に配置されるかは、図２２の描画物体番号に対応する時刻に対応している。図２３にこのデータベースの一部を示す。物体番号、名称、検索キー情報は、実施例１と同様である。平面図上の位置の欄には、ＶＲ空間を表す平面図における、その時刻における本物体の位置が格納される。
【００４８】
次に実際の表示画面を用い処理の内容を説明する。本システムを起動すると、図１２に示す初期画面が表示される。表示画面はＶＲシーン表示画面（主画面）▲６▼とＶＲシーン移動指示画面（副画面）▲７▼の領域に分けられる。
【００４９】
ＶＲシーン表示画面▲６▼には、ＶＲ描画部１０がＶＲデータ格納部３０よりＶＲデータを読み込み表示する。ＶＲデータ格納部３０には、シーングラフデータも含まれているため、ＶＲシーン表示画面▲６▼の風景は時間的に変動させることができる。この画面上でマウスなどの入力デバイスを操作することにより自由にカメラ位置を移動しＶＲ空間を再描画することができる。移動後のカメラ位置、時刻は、シーン情報管理部２１に格納される。また、ＶＲシーン移動指示画面▲７▼の指示の元、シーン情報管理部２１よりカメラ情報、時刻を読込み、ＶＲシーンを移動することができる。
【００５０】
ＶＲシーン移動指示画面▲７▼は、実施例１の場合と同様平面図▲３▼、検索画面▲５▼を含み、ＶＲ空間移動指示画面▲２▼と同様な見た目と働きを提供するが、ＶＲ空間の現在時刻表示▲８▼があり、案内画面▲９▼は、それぞれの時刻表示を含んでいる。
【００５１】
図１４は、検索画面▲５▼にキーワードを入力して検索させた結果を表示させたＶＲシーン移動指示画面▲７▼である。検索結果についても時刻表示が案内画面▲９▼の一つとして表示される。図１４では、「自動車」を検索キーワードとして検索させた結果、２地点が検索され、その地点のシーンを▲９▼−３、▲９▼−４に時刻表示付きで表示している。
【００５２】
図１５は、図１４から、▲９▼−４を選択した場合の画面である。▲９▼−４を選択するとＶＲシーン（カメラ位置、時刻）が更新され、ＶＲシーン表示画面▲６▼、平面図▲３▼を再描画する。
【００５３】
次に、実際に本システムを用いＶＲ空間の移動を行う処理の流れを図１６を用い説明する
【００５４】
（起動：ＶＲ空間を表示）本装置を起動するとＶＲ描画部１０、ＶＲシーン移動指示部５１により、図１２の初期表示画面が表示される（Ｓ１１）。
【００５５】
（入力待ち）その後、マウス、キーボードなどの入力装置からの入力待ち状態となる（Ｓ２１）。この後は、以後の入力指示に応じて以下３つの処理（ＶＲ空間を自由に移動する、指定したシーン（位置および時刻）に移動する、ＶＲ空間上の物体シーン（位置および時刻）を検索する）のいずれかを実行する。
【００５６】
（ＶＲ空間を自由に移動）入力待ち状態（Ｓ２１）において、ＶＲ空間表示画面上でのマウス操作信号が検出されると、その信号は実施例１と同じルールで解釈され、ＶＲ空間上でカメラを移動し、ＶＲ空間の再描画を行う（Ｓ３５）。次に、ＶＲ空間の自由移動を行った後のカメラ位置、時刻を、シーン情報管理部２１に格納する（Ｓ３７）。最後に、平面図表示画面▲３▼上の現在のカメラ位置及び時刻表示を更新する（Ｓ３９）。ＶＲ空間座標から平面図座標への座標変換式はは実施例１と同様数１に従う。尚、ＶＲシーン移動指示部５１は、一定時間間隔（例えば１秒おき）で、シーン情報管理部２１よりカメラ位置及び時刻を読込み、表示の更新を行う。
【００５７】
（指定したシーンに移動）利用者が案内画面の（▲９▼−＊）のどれかを選択すると、対応する平面図上のカメラ位置を元に、平面図上の現在のカメラマークを更新する（Ｓ４５）。次に、選択項目に従ったＶＲ空間上のカメラ位置、時刻をシーン情報管理部２１に格納する（Ｓ４７）。ＶＲ描画部１０にてシーン情報管理部２１より現在のカメラ位置、時刻を読込み、再描画する（Ｓ４９）。尚、時刻が ？1.0 の場合は、時刻の変更は行わない。
【００５８】
（ＶＲシーン上の物***置を検索）ＶＲシーンの検索を行い、結果を案内画面として表示する。実施例１に加え、検索結果として、時刻情報も保持する。「自動車」をキーワードで検索した場合は、図２４、図２５に示す内容が保持され、案内画面▲９▼−３、▲９▼−４が表示される。
【００５９】
以上、第２の実施例である仮想現実空間移動制御装置２を説明した。次に第３の実施例である仮想現実空間移動制御装置３を実施例１との違いを中心に説明する。
【００６０】
《実施例３》仮想現実空間移動制御装置３の全体構成は、仮想現実空間移動制御装置１と基本的に同じである。したがって、全体構成は、図１のように表すことができる。ただし、ＶＲ空間移動指示部（仮想空間探索案内手段）５０の働きが少し異なる。仮想現実空間移動制御装置３では、案内画面を用いない。代わりにオブジェクトの説明テキストだけを表示する案内テキスト枠を設ける。したがって、空間位置情報データベース６１のテーブルは、図２６のように、仮想現実空間移動制御装置１で用いる空間位置情報データベース６１のテーブルから、画像ファイル名の項目を除いた構成となる。
【００６１】
次に実際の表示画面に基づき処理の流れを説明する。本システムを起動すると、図２７に示す初期画面が表示される。実施例１と同様、表示画面はＶＲ空間表示画面（主画面）▲１▼とＶＲ空間移動指示画面（副画面）▲２▼の領域に分けられる。
【００６２】
ＶＲ空間表示画面▲１▼には、ＶＲ描画部１０がＶＲデータ格納部３０よりＶＲデータを読み込み表示する。この画面上でマウスなどの入力デバイスを操作することにより自由にカメラ位置を移動しＶＲ空間を再描画することができる。移動後のカメラ位置、は、位置情報管理部２０に格納される。また、ＶＲ空間移動指示画面▲２▼の指示の元、位置情報管理部２０よりカメラ情報を読込み、ＶＲ空間を移動することができる。
【００６３】
図２８は、ＶＲ空間移動指示画面▲２▼の詳細説明図である。ＶＲ空間移動指示画面▲２▼は、実施例１の場合と同様平面図▲３▼、検索画面▲５▼を含み、実施例１で説明したＶＲ空間移動指示画面▲２▼と同様な見た目と働きを提供するが、仮想空間上のオブジェクトを説明する案内画面枠の代わりに、オブジェクトの説明テキストを表示した案内テキスト枠▲４▼−１、▲４▼−２、▲４▼−３が設けられる。これらの案内テキスト枠は平面図▲３▼中の対応するカメラマークと対応付けられて表示される。このカメラマークは単にカメラの位置を示しておりカメラの注視方向は示さない。また、平面図▲３▼中には、現在のカメラ位置の表示はない。
【００６４】
検索画面▲５▼の働きも実施例１の仮想現実空間移動制御装置１と同様である。図２９に「DNP画５」で検索した場合の、検索後のＶＲ空間移動指示画面▲２▼（▲３▼、▲４▼、▲５▼）を示す。検索によりDNP画５の位置（▲３▼―１）が表示される。利用者が、この画面から、▲３▼上のDNP画５の位置や案内テキスト枠（▲５▼―１）を選択すると、ＶＲ空間移動指示部５０は、DNP画５が閲覧可能な位置を空間管理ＤＢより検索し、該当した位置にカメラ位置を読みこみ、▲１▼を再描画する。図３０に▲５▼―１を選択した場合の画面を示す。
【００６５】
次に、実際に本システムを用いＶＲ空間の移動を行う処理の流れを図３１を用い説明する
【００６６】
（起動：ＶＲ空間を表示）本装置を起動するとＶＲ描画部１０、ＶＲ空間移動指示部５１により、図２７の初期表示画面が表示される（Ｓ１０）。
【００６７】
（入力待ち）その後、マウス、キーボードなどの入力装置からの入力待ち状態となる（Ｓ２０）。この後は、以後の入力指示に応じて以下３つの処理（ＶＲ空間を自由に移動する、指定したシーン（位置および時刻）に移動する、ＶＲ空間上の物体シーン（位置および時刻）を検索する）のいずれかを実行する。
【００６８】
（ＶＲ空間を自由に移動）入力待ち状態（Ｓ２０）において、ＶＲ空間表示画面上でのマウス操作信号が検出されると、その信号は実施例１と同じルールで解釈され、ＶＲ空間上でカメラを移動し、ＶＲ空間の再描画を行う（Ｓ３０）。次に、ＶＲ空間の自由移動を行った後のカメラ位置を、位置情報管理部２０に格納する（Ｓ３２）。ＶＲ空間座標から平面図座標への座標変換式は実施例１と同様数１に従う。尚、ＶＲ空間移動指示部５０は、一定時間間隔（例えば１秒おき）で、位置情報管理部２０よりカメラ位置を読込み、表示の更新を行う。
【００６９】
（ＶＲ空間上の物体を選択し移動）利用者が案内画面の案内テキスト枠（▲４▼−＊、または▲５▼−＊）のどれか、または平面図▲３▼中のどれかのカメラマークを選択すると、選択項目に従ったＶＲ空間上のカメラ位置を位置情報管理部２０に格納する（Ｓ４２）。ＶＲ描画部１０にて位置情報管理部２０より更新されたカメラ位置を読込み、再描画する（Ｓ４４）。
【００７０】
（ＶＲ空間上の物***置を検索）利用者が、検索を行うために、検索枠▲５▼にキーワードを入力してきた場合は、実施例１と同様にＶＲ空間位置検索を行う（Ｓ５０）。例えば、「DNP画5」を検索キーとして入力すると、実施例１の場合と同様に、ＶＲ空間移動指示部５０では、物体情報管理ＤＢに問合せを行い、入力されたキーワードと合致するものが「名称」、「検索キー情報」にあるかを検索し、該当するものがあった場合その物体番号と平面図上の位置を保持する。次に、空間位置情報管理ＤＢに対し、先に保持した物体番号を用い、描画物体番号内に同一のものがあるか検索を行う。同一のものが有る場合は、そのレコード情報を保持する。この場合は、図２０（実施例１の場合と同じ）、および図３２の内容を保持する。
【００７１】
次に、平面図表示画面の更新を行う。まずは、図３２の平面図上の位置を元に、平面図表示画面上に検索対象の物***置（矩形：左上0.40 0.42 ,右下 0.41,0.49）を描画する。また、検索対象の説明テキストを表示する（Ｓ５４）。
【００７２】
次に、平面図上の物***置が選択されたこととして、図３２中に示されるカメラ位置を位置情報管理部２０に格納する（Ｓ６２）。こうして、検索された物体を表示可能な位置へVR空間のカメラ位置を更新する。そしてＶＲ空間描画部１０の次のサイクルで位置情報管理部２０より現在のカメラ位置を読込み、再描画する（Ｓ４４）。
【００７３】
以上、実施例３として仮想現実空間移動制御装置３を説明した。本発明の実施態様としては、平面図▲３▼中に現在のカメラ位置の表示がなくてもよい。仮想空間上のオブジェクトを案内するために、案内画面枠ではなく案内テキスト枠を用いてもよい。また、カメラマークは、単にカメラの位置だけを表すマークであってもよい。また、特定のオブジェクトの位置にジャンプする時は、案内テキスト枠を選択してもよいし、カメラマークそのものを選択してもよい。
【００７４】
以上本発明の内容を好ましい実施態様により３つの実施例として説明したが、本発明は、これら実施例の記載に限定されるものではない。本発明の趣旨を逸脱しない範囲にて様々な実施が可能である。
【００７５】
【発明の効果】
副画面を設け、そこに案内画面、検索キー受付け枠を設けることにより、仮想世界の探索が大変楽になり、利用者は無駄な動きを強いられなくなった。従って利用者の本来の目的である、仮想世界の鑑賞が十分行えるようになった。また、時間軸で変化しているＶＲ空間においては、従来の手法でＶＲ空間を移動したのでは目的のシーン（ある時間でのある場所）に出会うことは困難であり、また一度出会っても再度同じシーンに到達するのは至難であった。今回のシステムを用いる事により何度でも同一シーンに到達することが可能な為、見たいシーン、コンテンツを何度でも鑑賞することが可能となる。
【図面の簡単な説明】
【図１】 本発明の一実施形態に係る仮想現実空間移動制御装置１の全体構成図である。
【図２】 形状データの説明図である。
【図３】 初期表示画面である。
【図４】 平面図データである。
【図５】 仮想現実空間移動指示画面である。
【図６】 ▲４▼−１選択後の表示画面である。
【図７】 検索後の仮想現実空間移動指示画面である。
【図８】 ▲４▼−４を選択した場合の表示画面である。
【図９】 仮想現実空間移動制御装置の動作フローの説明図である。
【図１０】平面図と仮想現実空間の対応関係を説明する図である。
【図１１】第２の実施例である仮想現実空間移動制御装置２の全体構成図である。
【図１２】仮想現実空間移動制御装置２の初期表示画面である。
【図１３】仮想現実空間移動制御装置２の移動指示画面である。
【図１４】検索後のＶＲシーン移動指示画面である。
【図１５】▲９▼−４を選択した場合の表示画面である。
【図１６】ＶＲ空間の移動の流れを説明する流れ図である。
【図１７】空間位置情報管理データベースの説明図である。
【図１８】物体情報管理データベースの説明図である。
【図１９】空間位置情報管理データベース内の▲４▼−１を選択した場合に対応する内容である。
【図２０】物体情報管理データベースの説明図である。
【図２１】空間位置情報管理データベースの説明図である。
【図２２】空間位置情報管理データベースの説明図である。
【図２３】物体情報管理データベースの説明図である。
【図２４】物体情報管理データベースの説明図である。
【図２５】空間位置情報管理データベースの説明図である。
【図２６】空間位置情報管理データベースの説明図である。
【図２７】仮想現実空間移動制御装置３の初期表示画面である。
【図２８】仮想現実空間移動制御装置３の移動指示画面である。
【図２９】検索後の仮想現実空間移動指示画面である。
【図３０】図２９の▲５▼−１を選択した場合の表示画面である。
【図３１】仮想現実空間移動制御装置３の動作フローの説明図である。
【図３２】検索の結果ＶＲ空間移動指示部５０に一時記憶される空間位置情報管理データベースから抽出された情報の説明図である。
【符号の説明】
１、２仮想現実空間移動制御装置
１０ ＶＲ描画部
２０ 位置情報管理部
２１ シーン情報管理部
３０ ＶＲデータ格納部
４０ 平面図データ格納部
５０ ＶＲ空間移動指示部
５１ ＶＲシーン移動指示部
６０ データベース部
６１ 空間位置情報管理データベース
６２ 物体情報管理データベース[0001]
BACKGROUND OF THE INVENTION
The present invention relates to virtual reality (hereinafter referred to as VR) technology. The VR technology is applied to various fields such as computer games, digital archive systems, and presentation systems.
[0002]
[Prior art]
In the conventional digital archiving system and presentation system using VR technology, (1) the user freely walks around the VR space, (2) moves according to the path defined by the production side, (3) is defined by the name I moved around the space and watched it.
[0003]
[Problems to be solved by the invention]
In the case of the above method (1) or (2), it is difficult to intuitively understand where the object desired by the user is in the space, and in some cases, it is complicated to walk around in the space unnecessary for the user. I had to do something. Also, when moving to a scene (location, time) defined by the name of (3), where in the virtual space is the time, what time is it, and whether the scene is really a desired scene After all, it was necessary to move several scenes and search for the desired scene. For this reason, although the user wants to appreciate the object of interest, it is necessary to spend time for other complicated operations, which is not satisfactory.
[0004]
The present invention has been made in consideration of such problems, and it is not necessary to perform an unnecessary and complicated space movement operation, so that the user can easily grasp where in the virtual space, It is an object of the present invention to provide a virtual reality space movement control device that can be easily moved to a scene.
[0005]
[Means for Solving the Problems]
Therefore, in the present invention,
A VR data storage that stores data representing the virtual space;
Reads data from the VR data storage unit and draws a virtual world as a three-dimensional space on the main screen frame, a plan view data storage unit for storing plan view data of the virtual world, and stores the current camera position Either a position information management unit to manage or a scene information management unit to store and manage the current camera position and time, and a virtual to display a plan view of the currently searched virtual space in a sub-screen frame different from the main screen frame In a virtual reality space movement control device having a main screen and a sub-screen for freely moving in a virtual space and appreciating a virtual world according to an operation instruction by an input device such as a mouse provided with a space search guidance means and a storage means,
In the storage means, an object existing in the virtual world is identified by its identification number, its existence position information, and a first table defined by text information related to the object,
The camera mark determined in advance in the virtual world is determined by its camera position and gaze direction, landscape map data drawn by the camera mark, identification number of the object drawn in the landscape map, and text information related to the camera mark. The virtual space search and guidance means marks the camera mark on the plan view of the virtual space, and relates to the landscape view of the camera mark and the camera mark. A guide screen is constructed from the text information to be displayed and associated with the mark on the plan view and displayed in the sub-screen frame to guide the user about the existence of the object in the virtual reality space. The selection of a camera mark or a guide screen frame is accepted as an instruction to move to the position of the camera mark, and the scene information management Or the subject matter to solve the problem by configured to communicate the movement instruction to the location information management unit.
[0006]
The second aspect of the present invention is as follows.
A VR data storage that stores data representing the virtual space;
Reads data from the VR data storage unit and draws a virtual world as a three-dimensional space on the main screen frame, a plan view data storage unit for storing plan view data of the virtual world, and stores the current camera position Operation instruction by an input device such as a mouse provided with a position information management unit to be managed and a virtual space search guide means for displaying a plan view of the currently searched virtual space in a sub-screen frame different from the main screen frame A virtual reality space movement control device having a main screen and a sub-screen for moving freely in a virtual space to appreciate a virtual world,
A database unit configured to extract the position information of the corresponding object in the virtual world, the camera position information for drawing the object, and the text information related to the object such as the name of the object from the search key; ,
The virtual space search guide means is provided with a search key input unit and a search start button on any of the screens. When a key of an object to be viewed is input to the search key input unit and receives a search start instruction, A guidance text frame displaying text related to the object as a search result is provided in the screen frame, and an object mark indicating the location of the object as a search result is displayed on the plan view as the guidance text frame. It displays in association and guides the searched object to the user, and when this object mark or the guidance text frame is selected or automatically unconditionally, the position information management unit is displayed as a search result. Information on the camera position at which the object is drawn is transmitted to the VR drawing unit, and the virtual world image from the camera position is transmitted to the VR drawing unit. The it is to solve the problem by virtual reality space movement control device configured to display on the main screen frame.
[0007]
The third aspect of the present invention is
A VR data storage that stores data representing the virtual space;
Reads data from the VR data storage unit and draws a virtual world as a three-dimensional space on the main screen frame, a plan view data storage unit for storing plan view data of the virtual world, and stores the current camera position Operation instruction by an input device such as a mouse provided with a position information management unit to be managed and a virtual space search guide means for displaying a plan view of the currently searched virtual space in a sub-screen frame different from the main screen frame A virtual reality space movement control device having a main screen and a sub-screen for moving freely in a virtual space to appreciate a virtual world,
From the search key, the position information of the corresponding object in the virtual world, the camera position information for drawing the object, the landscape map image drawn from the camera position and the text information related to the object such as the name of the object are extracted. And further comprising a database part configured as follows:
The virtual space search guide means is provided with a search key input unit and a search start button on any of the screens. When a key of an object to be viewed is input to the search key input unit and receives a search start instruction, In the screen frame,
A camera screen where a guide screen frame displaying a text related to an object as a search result and a landscape map in which the object as a search result is displayed is provided, and a camera position for drawing the object as a search result on the plan view Is displayed in association with the guide screen frame, and an object mark indicating the presence position of the object as a search result is displayed to guide the searched object to the user. When the guide screen frame is selected, the camera position information indicated by the camera mark is transmitted to the position information management unit, and the VR drawing unit displays the virtual world screen from the camera position on the main screen frame. The problem is solved by the virtual reality space movement control device. In the virtual reality space movement control device according to the second aspect, the function is extended so that a guidance screen frame including not only text information but also a landscape image can be used instead of the guidance text frame guided to the object extracted as a result of the search. It can be said that.
[0008]
The fourth aspect of the present invention is
A VR data storage that stores data representing the virtual space;
A VR drawing unit that reads out data from the VR data storage unit and draws a virtual world as a three-dimensional space on the main screen frame; a plan view data storage unit that stores plan view data of the virtual world; and a current camera position and time A scene information management unit for storing and managing virtual space search guidance means for displaying a plan view of the currently searched virtual space in a sub-screen frame different from the main screen frame, by an input device such as a mouse A virtual reality space movement control device having a main screen and a sub screen for freely moving in a virtual space by operating instructions and viewing a virtual world,
From the search key, the position information of the corresponding object in the virtual world, the camera position and time information for drawing the object, the landscape map image drawn from the camera position and the text information related to the object such as the name of the object Further comprising a database part configured to extract
The virtual space search guide means is provided with a search key input unit and a search start button on any of the screens. When a key of an object to be viewed is input to the search key input unit and receives a search start instruction, In the screen frame,
A camera position for providing a guide screen frame displaying a text related to an object as a search result and a landscape map in which the object as a search result is drawn, and drawing the object as a search result on the plan view Is displayed in association with the guide screen frame, and an object mark indicating the presence position of the object as a search result is displayed to guide the searched object to the user. When the guide screen frame is selected, the camera position information and time information of the selected camera mark are transmitted to the scene information management unit, and the virtual position screen from the camera position and time is transmitted to the VR drawing unit as the main screen. The problem is solved by a virtual reality space movement control device configured to be displayed in a frame. The position information management unit according to the third aspect is expanded to include a scene information management unit that stores and manages the current camera position and time so that the time information can be managed.
[0012]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, embodiments of the present invention will be described using three examples with reference to the drawings.
[0013]
[0014]
The
[0015]
FIG. 2 is a diagram for explaining the shape data. The shape data includes a vertex table that defines vertex coordinates and a surface table that describes the relationship between the surfaces and vertices, and gives a graphical definition of the object in the VR space. The color data is the attribute value of the color of each surface in the shape data, and the environmental color: Ra, Ga, Ba, diffusion color: Rd, Gd, Bd, specular color: Rs, Gs, Bs, specular coefficient: S expressed. The light data represents the three-dimensional position (X, Y, Z), direction (NX, NY, NZ), intensity, and color (R, G, B) of the light source placed in the VR space. The camera data defines the camera position, field angle, and viewing angle at startup.
[0016]
The plan view
[0017]
The VR space
[0018]
The
[0019]
The spatial position
・ VR viewpoint position
Camera viewpoint information corresponding to the VR space drawn by the VR drawing unit
・ VR gaze position
Camera gazing point information corresponding to the VR space drawn by the VR drawing unit
・ Plan view point
Camera position on the floor plan (normalized)
・ Plan view point of interest
Camera gazing position on the floor plan (normalized)
·name
The name of the position
・ Image file name
File name of explanatory drawing of the position (mainly landscape view seen from the position)
・ Description information
Text data for explanation
・ Drawing object number
The object number drawn when viewed from that position. (This corresponds to the object number in the object
-Initial drawing flag
Flag to display location information at startup. ○ is displayed and × is not displayed. Here, only the objects marked with ○ are displayed at startup. Other than that, it is drawn when it corresponds to the search.
[0020]
Next, the object
・ Object number
The number assigned to the object. This corresponds to the drawing object number in the spatial position
·name
The name of the object. Stores objects to be placed (paintings) and building names (fountains, etc.).
・ Search key information
Stores keywords used for searching. When actually searching, the corresponding object is searched based on the name and search key information.
・ Position on the floor plan
The position of the object in the plan view representing the VR space is stored. Here, the upper left and lower right coordinates (normalized) of the rectangle are stored, but any coordinates can be used as long as the position can be seen on the plan view, for example, a polygon or image data representing the position. I do not care. In the case of a polygon, vertex coordinates are stored. In the case of an image, the image file name is stored.
[0021]
Next, the display and operation flow of the VR space by the virtual reality space
[0022]
When this system is activated, an initial screen shown in FIG. 3 is displayed. The display screen is divided into a VR space display screen (main screen) (1) and a VR space movement instruction screen (subscreen) (2).
[0023]
In the VR space display screen (1), the
[0024]
The VR space movement instruction screen (2) is an instruction screen for moving the VR space displayed in (1), and is drawn by the VR space
[0025]
FIG. 4 is an example of a plan view of the VR space. FIG. 5 is a configuration example of the VR space movement instruction screen (2). In FIG. 5, (3) is a plan view, and (4) -1, (4) -2, and (4) -3 are guidance screens for objects and buildings called from the spatial position
[0026]
In the plan view display frame (3) in FIG. 5, the current camera position in the VR space of (1) and the guided object ((4) -1, (4) -2, (4) -3) are displayed. The camera mark corresponding to each landscape map and the camera position corresponding to the result retrieved in (5) to be described later are displayed as markings.
[0027]
The user can intuitively grasp the current position and the place where the user wants to move by using a plurality of guidance screens of the plan views (3) and (4). When the user selects one of the guidance screens (4), the camera position is changed, and (1) and (3) are redrawn. For example, when (4) -1 is selected from the state of FIG. 3 (FIG. 5), the result is as shown in FIG.
[0028]
When (4) -1 in FIG. 5 is selected, the corresponding VR spatial information camera position (VR viewpoint position <22.0 1.0 20.0>, VR gazing point position <4.0 1.0 20.0> shown in FIG. 19) is read, and the position
[0029]
The VR space search frame {circle over (5)} is a screen for searching for a related position by inputting the contents of the appreciation object. FIG. 7 shows a VR space movement instruction screen {circle around (2)} after searching for “
[0030]
Next, the overall flow of actually moving the VR space using the virtual reality space
[0031]
(Activation: Display VR space) When this apparatus is activated, the
[0032]
(Waiting for input) Thereafter, the apparatus waits for input from an input device such as a mouse or a keyboard (S20). Thereafter, one of the following three processes (moving freely in the VR space, moving to a specified position, and searching for an object position in the VR space) is executed in accordance with a subsequent input instruction.
[0033]
(Move freely in the VR space) When a mouse operation signal on the VR space display screen (1) is detected in the input waiting state (S20), the signal is interpreted according to the following rules, and the camera is displayed on the VR space. And redraw the VR space (S30).
Move while holding down the left button:
Forward → Forward, Back → Reverse, Left → Left, Right → Right
Move while holding down the right button:
Front → Up, Back → Down, Left → Left, Right → Right
Next, the camera position after the free movement in the VR space is stored in the position information management unit 20 (S32). Finally, the VR space
[Expression 1]
ix = (X-XL) / (XR-XL) iy = Z / (ZB-ZA)
Where X, Y and Z are the VR space coordinates of the current camera position
The VR space is expressed as XL (left end) <= X <= XR (right end), ZA (back) <= Z <= ZB (front), and the size of the space is determined by XL, XR, ZA, ZB.
[0034]
In the case of the VR space of the embodiment, XL = −50.0, XR = 50.0, ZB = 100.0, and ZA = 0.0. FIG. 10 shows the correspondence between the plan view and the VR space. For example, as shown in FIG. 3, if the current camera is at the entrance (viewpoint <0.0 1.0 95.0>, gazing point <0.0 1.0 90.0>), the camera on the plan view is placed at <0.5 0.95> and the direction is From <0.5 0.95> to <0.5 0.9>.
[0035]
(Selecting and moving an object in the VR space) When the user selects (4)-* on the guidance screen, the camera position on the plan view corresponding to the guidance screen (plan view viewpoint position, plan view in FIG. 19). Based on the gazing point position, the current camera mark on the plan view is updated (S40). Next, the camera position (VR viewpoint position <22.0 1.0 20.0>, VR gazing point position <4.0 1.0 20.0> in FIG. 19) according to the selected item is read from the spatial position
[0036]
(Object position search) When the operator inputs a keyword to be searched for in the search frame (5) in order to perform a search, a VR space position search is performed (S50). For example, when “
[0037]
Next, the plan view display screen and the position content explanation screen are updated in accordance with the contents of FIGS. 20 and 21 (S5).4). First, based on the position on the plan view of FIG. 20, the object position to be searched (rectangle: upper left 0.40 0.42, lower right 0.41,0.49) is drawn on the plan view display screen.
[0038]
Next, a camera mark is displayed on the plan view based on the plan view viewpoint position and the plan view gazing point position in FIG. (First case: viewpoint <0.49 0.47>, gaze point <0.40 0.47>. Second case: viewpoint <0.48 0.61>, gaze point <0.40 0.47>.) Then, a guide screen ((4) -4, (4) -5 in FIG. 7) is displayed together with the corresponding image (first item: Jpimg5.bmp, second item: Jproom2.bmp).
[0039]
The first embodiment described so far is intended for a static VR space in which events in the space do not change over time. Next, as a second embodiment, dynamic (in the space in the space in time) The virtual reality space
[0040]
[0041]
The
[0042]
The scene graph data is data representing changes in the time axis of each object (object movement, object color change, brightness change, etc.). Here, the specific contents will be described by taking as an example a case where an object moves. The position of each object at a certain time is defined by a scale (sx, sy, sz), rotation (rx, ry, rz), and movement (mx, my, mz). The scale, rotation, and movement information is stored for each object for each reference time. Note that interpolation processing is performed by the VR drawing unit during the reference time. For example, when the reference time is every second, movement information during that time is calculated by interpolation processing.
[0043]
The scene information management unit 21 stores the time in the VR space in addition to the camera position in the VR space (X, Y, Z coordinates of the viewpoint, X, Y, Z coordinates of the gazing point: hereinafter camera position).
[0044]
The VR
[0045]
The VR scene
[0046]
The space position
[0047]
The object
[0048]
Next, the contents of processing will be described using an actual display screen. When this system is activated, an initial screen shown in FIG. 12 is displayed. The display screen is divided into a VR scene display screen (main screen) (6) and a VR scene movement instruction screen (subscreen) (7).
[0049]
On the VR scene display screen {circle around (6)}, the
[0050]
The VR scene movement instruction screen (7) includes a plan view (3) and a search screen (5) as in the first embodiment, and provides the same look and function as the VR space movement instruction screen (2). There is a VR space current time display {circle over (8)}, and the guidance screen {circle over (9)} includes each time display.
[0051]
FIG. 14 is a VR scene movement instruction screen {circle over (7)} displaying the search result by inputting a keyword to the search screen {circle over (5)}. As for the search result, the time display is displayed as one of the guidance screens (9). In FIG. 14, as a result of searching for “automobile” as a search keyword, two points are searched, and the scenes at the points are displayed with time display at (9) -3 and (9) -4.
[0052]
FIG. 15 shows a screen when (9) -4 is selected from FIG. When (9) -4 is selected, the VR scene (camera position, time) is updated, and the VR scene display screen (6) and the plan view (3) are redrawn.
[0053]
Next, the flow of processing for actually moving the VR space using this system will be described with reference to FIG.
[0054]
(Activation: Display VR space) When this apparatus is activated, the
[0055]
(Waiting for input) Thereafter, the apparatus waits for input from an input device such as a mouse or a keyboard (S21). Thereafter, the following three processes (moving in the VR space freely, moving to the specified scene (position and time), searching for the object scene (position and time) in the VR space) are searched according to the input instruction thereafter. )
[0056]
(Move freely in the VR space) When a mouse operation signal on the VR space display screen is detected in the input waiting state (S21), the signal is interpreted according to the same rules as in the first embodiment, and the camera is moved on the VR space. And redraw the VR space (S35). Next, the camera position and time after free movement in the VR space are stored in the scene information management unit 21 (S37). Finally, the current camera position and time display on the plan view display screen (3) are updated (S39). The coordinate conversion formula from the VR space coordinates to the plan view coordinates follows
[0057]
(Move to specified scene) When the user selects any of (9)-* on the guidance screen, the current camera mark on the plan view is updated based on the camera position on the corresponding plan view. (S45). Next, the camera position and time in the VR space according to the selection item are stored in the scene information management unit 21 (S47). The
[0058]
(Search for object position on VR scene) The VR scene is searched and the result is displayed as a guidance screen. In addition to the first embodiment, time information is also held as a search result. When searching for “automobile” by keyword, the contents shown in FIGS. 24 and 25 are retained, and guidance screens {circle around (9)}-3 and {circle around (9)}-4 are displayed.
[0059]
The virtual reality space
[0060]
Example 3 The overall configuration of the virtual reality space
[0061]
Next, the flow of processing will be described based on the actual display screen. When this system is activated, an initial screen shown in FIG. 27 is displayed. Similar to the first embodiment, the display screen is divided into a VR space display screen (main screen) (1) and a VR space movement instruction screen (sub screen) (2).
[0062]
In the VR space display screen (1), the
[0063]
FIG. 28 is a detailed explanatory diagram of the VR space movement instruction screen (2). The VR space movement instruction screen (2) includes a plan view (3) and a search screen (5) as in the first embodiment, and has the same appearance as the VR space movement instruction screen (2) described in the first embodiment. In place of the guide screen frame for explaining the object in the virtual space, the guide text frames (4) -1, (4) -2, and (4) -3 are displayed. It is done. These guidance text frames are displayed in association with the corresponding camera marks in the plan view (3). This camera mark simply indicates the position of the camera and does not indicate the direction of gaze of the camera. Also, the current camera position is not displayed in the plan view (3).
[0064]
The function of the search screen (5) is the same as that of the virtual reality space
[0065]
Next, the flow of processing for actually moving the VR space using this system will be described with reference to FIG.
[0066]
(Activation: Display VR space) When this apparatus is activated, the
[0067]
(Waiting for input) Thereafter, the apparatus waits for input from an input device such as a mouse or a keyboard (S20). Thereafter, the following three processes (moving in the VR space freely, moving to the specified scene (position and time), searching for the object scene (position and time) in the VR space) are searched according to the input instruction thereafter. )
[0068]
(Move freely in the VR space) When a mouse operation signal on the VR space display screen is detected in the input waiting state (S20), the signal is interpreted according to the same rules as in the first embodiment, and the camera is moved on the VR space. And redraw the VR space (S30). Next, the camera position after the free movement in the VR space is stored in the position information management unit 20 (S32). The coordinate conversion formula from the VR space coordinates to the plan view coordinates follows
[0069]
(Select and move an object in the VR space) The user can select one of the guidance text frames (4)-* or (5)-* on the guidance screen, or any camera in the plan view (3). When the mark is selected, the camera position in the VR space according to the selection item is stored in the position information management unit 20 (S42). The
[0070]
(Search for the object position in the VR space) If the user has entered a keyword in the search frame {circle over (5)} for searching, the VR space position search is performed in the same manner as in the first embodiment (S50). For example, when “
[0071]
Next, the plan view display screen is updated. First, based on the position on the plan view of FIG. 32, the object position (rectangle: upper left 0.40 0.42, lower right 0.41,0.49) to be searched is drawn on the plan view display screen. Also, the explanatory text to be searched is displayed (S54).
[0072]
Next, assuming that the object position on the plan view is selected, the camera position shown in FIG. 32 is stored in the position information management unit 20 (S62). Thus, the camera position in the VR space is updated to a position where the searched object can be displayed. Then, in the next cycle of the VR
[0073]
The virtual reality space
[0074]
Although the contents of the present invention have been described as three examples according to preferred embodiments, the present invention is not limited to the description of these examples. Various implementations are possible without departing from the spirit of the present invention.
[0075]
【The invention's effect】
By providing a sub-screen and providing a guide screen and a search key receiving frame there, the search of the virtual world has become very easy, and users are not forced to make unnecessary moves. Therefore, the user can fully appreciate the virtual world, which is the original purpose of the user. Also, in a VR space changing on the time axis, it is difficult to meet the target scene (a place at a certain time) if the VR space is moved by the conventional method. It was difficult to reach the same scene. By using this system, it is possible to reach the same scene as many times as possible, so it is possible to appreciate the scene and content that you want to see.
[Brief description of the drawings]
FIG. 1 is an overall configuration diagram of a virtual reality space
FIG. 2 is an explanatory diagram of shape data.
FIG. 3 is an initial display screen.
FIG. 4 is plan view data.
FIG. 5 is a virtual reality space movement instruction screen.
FIG. 6 is a display screen after selecting (4) -1.
FIG. 7 is a virtual reality space movement instruction screen after search.
FIG. 8 is a display screen when (4) -4 is selected.
FIG. 9 is an explanatory diagram of an operation flow of the virtual reality space movement control device.
FIG. 10 is a diagram illustrating a correspondence relationship between a plan view and a virtual reality space.
FIG. 11 is an overall configuration diagram of a virtual reality space
12 is an initial display screen of the virtual reality space
13 is a movement instruction screen of the virtual reality space
FIG. 14 is a VR scene movement instruction screen after search.
FIG. 15 is a display screen when (9) -4 is selected.
FIG. 16 is a flowchart illustrating the flow of movement in the VR space.
FIG. 17 is an explanatory diagram of a spatial position information management database.
FIG. 18 is an explanatory diagram of an object information management database.
FIG. 19 shows contents corresponding to the case where (4) -1 in the spatial position information management database is selected.
FIG. 20 is an explanatory diagram of an object information management database.
FIG. 21 is an explanatory diagram of a spatial position information management database.
FIG. 22 is an explanatory diagram of a spatial position information management database.
FIG. 23 is an explanatory diagram of an object information management database.
FIG. 24 is an explanatory diagram of an object information management database.
FIG. 25 is an explanatory diagram of a spatial position information management database.
FIG. 26 is an explanatory diagram of a spatial position information management database.
27 is an initial display screen of the virtual reality space
FIG. 28 is a movement instruction screen of the virtual reality space
FIG. 29 is a virtual reality space movement instruction screen after search.
30 is a display screen when (5) -1 in FIG. 29 is selected. FIG.
31 is an explanatory diagram of an operation flow of the virtual reality space
32 is an explanatory diagram of information extracted from the spatial position information management database temporarily stored in the VR space
[Explanation of symbols]
1, 2 virtual reality space movement control device
10 VR drawing section
20 Location Information Management Department
21 Scene Information Management Department
30 VR data storage
40 Plan view data storage
50 VR space movement instruction section
51 VR scene movement instruction section
60 Database section
61 Spatial location information management database
62 Object information management database
Claims (4)
前記ＶＲデータ格納部のデータを読み出し３次元空間としての仮想世界を主画面枠に描画するＶＲ描画部と、仮想世界の平面図データを格納する平面図データ格納部と、現在のカメラ位置を記憶管理する位置情報管理部または現在のカメラ位置及び時刻を記憶管理するシーン情報管理部のいずれかと、現在探索中の仮想空間の平面図を前記主画面枠とは異なる副画面枠中に表示する仮想空間探索案内手段と、記憶手段と、を備えたマウス等の入力装置による操作指示により仮想空間内を自由に動いて仮想世界を鑑賞する主画面と副画面を有する仮想現実空間移動制御装置であって、Reads data from the VR data storage unit and draws a virtual world as a three-dimensional space on the main screen frame, a plan view data storage unit for storing plan view data of the virtual world, and stores the current camera position Either a position information management unit to manage or a scene information management unit to store and manage the current camera position and time, and a virtual to display a plan view of the currently searched virtual space in a sub-screen frame different from the main screen frame A virtual reality space movement control device having a main screen and a sub-screen for freely moving in a virtual space and viewing a virtual world in response to an operation instruction from an input device such as a mouse provided with a space search guidance means and a storage means. And
前記記憶手段には、仮想世界に存在するオブジェクトを、その識別番号と、その存在位置情報と、そのオブジェクトに関連するテキスト情報により定めた第１のテーブルと、In the storage means, an object existing in the virtual world is identified by its identification number, its existence position information, and a first table defined by text information related to the object,
仮想世界に事前に定められたカメラマークを、そのカメラ位置と注視方向、そのカメラマークが描画する景観図データ、その景観図に描画されるオブジェクトの識別番号、そのカメラマークに関連するテキスト情報により記述した第２のテーブルと、を保持しておき、前記仮想空間探索案内手段は、前記カメラマークを前記仮想空間の平面図上にマークするとともに、そのカメラマークの景観図とそのカメラマークに関連するテキスト情報から案内画面を構成して平面図上の前記マークと関連付けて前記副画面枠内に表示して、仮想現実空間内のオブジェクトの存在を利用者に案内させるとともに、この平面図上のカメラマークまたは案内画面枠が選択されることを、そのカメラマークの位置への移動指示として受付け、前記シーン情報管理部または位置情報管理部へその移動指示を伝えるように構成された仮想現実空間移動制御装置。The camera mark determined in advance in the virtual world is determined by its camera position and gaze direction, landscape map data drawn by the camera mark, identification number of the object drawn in the landscape map, and text information related to the camera mark. The virtual space search and guidance means marks the camera mark on the plan view of the virtual space, and relates to the landscape view of the camera mark and the camera mark. A guide screen is constructed from the text information to be displayed and associated with the mark on the plan view and displayed in the sub-screen frame to guide the user about the existence of the object in the virtual reality space. The selection of a camera mark or guide screen frame is accepted as an instruction to move to the position of the camera mark, and the scene information management Or virtual reality space movement control device configured to communicate the movement instruction to the location information management unit.
前記ＶＲデータ格納部のデータを読み出し３次元空間としての仮想世界を主画面枠に描画するＶＲ描画部と、仮想世界の平面図データを格納する平面図データ格納部と、現在のカメラ位置を記憶管理する位置情報管理部と、現在探索中の仮想空間の平面図を前記主画面枠とは異なる副画面枠中に表示する仮想空間探索案内手段と、を備えたマウス等の入力装置による操作指示により仮想空間内を自由に動いて仮想世界を鑑賞する主画面と副画面を有する仮想現実空間移動制御装置であって、Reads data from the VR data storage unit and draws a virtual world as a three-dimensional space on the main screen frame, a plan view data storage unit for storing plan view data of the virtual world, and stores the current camera position Operation instruction by an input device such as a mouse provided with a position information management unit to be managed and a virtual space search guide means for displaying a plan view of the currently searched virtual space in a sub-screen frame different from the main screen frame A virtual reality space movement control device having a main screen and a sub-screen for moving freely in a virtual space to appreciate a virtual world,
検索キーから、仮想世界の該当するオブジェクトの位置情報、該オブジェクトを描画するカメラ位置情報、および該オブジェクトの名称などの該オブジェクトに関連するテキスト情報を抽出するように構成されたデータベース部をさらに備え、A database unit configured to extract the position information of the corresponding object in the virtual world, the camera position information for drawing the object, and the text information related to the object such as the name of the object from the search key; ,
前記仮想空間探索案内手段は、前記いずれかの画面上に検索キー入力部と検索開始ボタンを設け、鑑賞したいオブジェクトのキーを前記検索キー入力部に入力されて検索開始指示を受けると、前記副画面枠内に、検索結果である該当オブジェクトに関連するテキストを表示した案内テキスト枠を設けるとともに、前記平面図上に、検索結果である該オブジェクトの存在位置を表すオブジェクトマークを前記案内テキスト枠と関連付けて表示して、検索されたオブジェクトを利用者に案内するとともに、このオブジェクトマークまたは前記案内テキスト枠が選択されると、または、無条件で自動的に、前記位置情報管理部へ検索結果である該オブジェクトを描画するカメラ位置情報を伝え、前記ＶＲ描画部にそのカメラ位置からの仮想世界の画面を主画面枠に表示させるよう構成された仮想現実空間移動制御装置。The virtual space search guide means is provided with a search key input unit and a search start button on any of the screens. When a key of an object to be viewed is input to the search key input unit and receives a search start instruction, A guidance text frame displaying text related to the object as a search result is provided in the screen frame, and an object mark indicating the location of the object as a search result is displayed on the plan view as the guidance text frame. It displays in association and guides the searched object to the user, and when this object mark or the guidance text frame is selected or automatically unconditionally, the position information management unit is displayed as a search result. Information on the camera position at which the object is drawn is transmitted to the VR drawing unit, and a virtual world image from the camera position is sent to the VR drawing unit. Virtual reality space movement control device configured to display the on the main screen frame.
前記ＶＲデータ格納部のデータを読み出し３次元空間としての仮想世界を主画面枠に描画するＶＲ描画部と、仮想世界の平面図データを格納する平面図データ格納部と、現在のカメラ位置を記憶管理する位置情報管理部と、現在探索中の仮想空間の平面図を前記主画面枠とは異なる副画面枠中に表示する仮想空間探索案内手段と、を備えたマウス等の入力装置による操作指示により仮想空間内を自由に動いて仮想世界を鑑賞する主画面と副画面をReads data from the VR data storage unit and draws a virtual world as a three-dimensional space on the main screen frame, a plan view data storage unit for storing plan view data of the virtual world, and stores the current camera position Operation instruction by an input device such as a mouse provided with a position information management unit to be managed and a virtual space search guide means for displaying a plan view of the currently searched virtual space in a sub-screen frame different from the main screen frame The main screen and the sub screen to move freely in the virtual space and appreciate the virtual world 有する仮想現実空間移動制御装置であって、A virtual reality space movement control device comprising:
検索キーから、仮想世界の該当するオブジェクトの位置情報、該オブジェクトを描画するカメラ位置情報、該カメラ位置から描画される景観図画像および該オブジェクトの名称などの該オブジェクトに関連するテキスト情報を抽出するように構成されたデータベース部をさらに備え、From the search key, the position information of the corresponding object in the virtual world, the camera position information for drawing the object, the landscape map image drawn from the camera position and the text information related to the object such as the name of the object are extracted. And further comprising a database part configured as follows:
前記仮想空間探索案内手段は、前記いずれかの画面上に検索キー入力部と検索開始ボタンを設け、鑑賞したいオブジェクトのキーを前記検索キー入力部に入力されて検索開始指示を受けると、前記副画面枠内に、The virtual space search guide means is provided with a search key input unit and a search start button on any of the screens. When a key of an object to be viewed is input to the search key input unit and receives a search start instruction, In the screen frame,
検索結果である該当オブジェクトに関連するテキストと検索結果である該オブジェクトが描画される景観図を表示した案内画面枠を設けるとともに、前記平面図上に、検索結果である該オブジェクトを描画するカメラ位置を表すカメラマークを前記案内画面枠と関連付けて表示するとともに検索結果である該オブジェクトの存在位置を表すオブジェクトマークを表示して、検索されたオブジェクトを利用者に案内するとともに、このカメラマークまたは前記案内画面枠が選択されると、前記位置情報管理部へこのカメラマークの表すカメラ位置情報を伝え、前記ＶＲ描画部にそのカメラ位置からの仮想世界の画面を主画面枠に表示させるよう構成された仮想現実空間移動制御装置。A camera position for providing a guide screen frame displaying a text related to an object as a search result and a landscape map in which the object as a search result is drawn, and drawing the object as a search result on the plan view Is displayed in association with the guide screen frame, and an object mark indicating the presence position of the object as a search result is displayed to guide the searched object to the user. When the guide screen frame is selected, the camera position information indicated by the camera mark is transmitted to the position information management unit, and the VR drawing unit displays the virtual world screen from the camera position on the main screen frame. Virtual reality space movement control device.
前記ＶＲデータ格納部のデータを読み出し３次元空間としての仮想世界を主画面枠に描画するＶＲ描画部と、仮想世界の平面図データを格納する平面図データ格納部と、現在のカメラ位置および時刻を記憶管理するシーン情報管理部と、現在探索中の仮想空間の平面図を前記主画面枠とは異なる副画面枠中に表示する仮想空間探索案内手段と、を備えたマウス等の入力装置による操作指示により仮想空間内を自由に動いて仮想世界を鑑賞する主画面と副画面を有する仮想現実空間移動制御装置であって、A VR drawing unit that reads out data from the VR data storage unit and draws a virtual world as a three-dimensional space on the main screen frame; a plan view data storage unit that stores plan view data of the virtual world; and a current camera position and time A scene information management unit for storing and managing virtual space search guidance means for displaying a plan view of the currently searched virtual space in a sub-screen frame different from the main screen frame, by an input device such as a mouse A virtual reality space movement control device having a main screen and a sub screen for freely moving in a virtual space by operating instructions and viewing a virtual world,
検索キーから、仮想世界の該当するオブジェクトの位置情報、該オブジェクトを描画するカメラ位置および時刻の情報、該カメラ位置から描画される景観図画像および該オブジェクトの名称などの該オブジェクトに関連するテキスト情報を抽出するように構成されたデータベース部をさらに備え、From the search key, the position information of the corresponding object in the virtual world, the camera position and time information for drawing the object, the landscape map image drawn from the camera position and the text information related to the object such as the name of the object Further comprising a database part configured to extract
前記仮想空間探索案内手段は、前記いずれかの画面上に検索キー入力部と検索開始ボタンを設け、鑑賞したいオブジェクトのキーを前記検索キー入力部に入力されて検索開始指示を受けると、前記副画面枠内に、The virtual space search guide means is provided with a search key input unit and a search start button on any of the screens. When a key of an object to be viewed is input to the search key input unit and receives a search start instruction, In the screen frame,
検索結果である該当オブジェクトに関連するテキストと検索結果である該オブジェクトが描画される景観図を表示した案内画面枠を設けるとともに、前記平面図上に、検索結果である該オブジェクトを描画するカメラ位置を表すカメラマークを前記案内画面枠と関連付けて表示するとともに検索結果である該オブジェクトの存在位置を表すオブジェクトマークを表示して、検索されたオブジェクトを利用者に案内するとともに、このカメラマークまたは前記案内画面枠が選択されると、前記シーン情報管理部へ選択されたカメラマークのカメラ位置情報および時刻情報を伝え、前記ＶＲ描画部にそのカメラ位置およびその時刻からの仮想世界の画面を主画面枠に表示させるよう構成された仮想現実空間移動制御装置。A camera position for providing a guide screen frame displaying a text related to an object as a search result and a landscape map in which the object as a search result is drawn, and drawing the object as a search result on the plan view Is displayed in association with the guide screen frame, and an object mark indicating the presence position of the object as a search result is displayed to guide the searched object to the user. When the guide screen frame is selected, the camera position information and time information of the selected camera mark are transmitted to the scene information management unit, and the virtual position screen from the camera position and time is transmitted to the VR drawing unit as the main screen. A virtual reality space movement control device configured to be displayed on a frame.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001024619A JP3711025B2 (en) | 2000-03-21 | 2001-01-31 | Virtual reality space movement control device |
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000-78815 | 2000-03-21 | ||
| JP2000078815 | 2000-03-21 | ||
| JP2001024619A JP3711025B2 (en) | 2000-03-21 | 2001-01-31 | Virtual reality space movement control device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2001338311A JP2001338311A (en) | 2001-12-07 |
| JP3711025B2 true JP3711025B2 (en) | 2005-10-26 |
Family
ID=26587986
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2001024619A Expired - Fee Related JP3711025B2 (en) | 2000-03-21 | 2001-01-31 | Virtual reality space movement control device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3711025B2 (en) |
Families Citing this family (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5090135B2 (en) * | 2007-11-14 | 2012-12-05 | オリンパスイメージング株式会社 | Image viewing system, image viewing method, image viewing server, and terminal device |
| US20090237396A1 (en) * | 2008-03-24 | 2009-09-24 | Harris Corporation, Corporation Of The State Of Delaware | System and method for correlating and synchronizing a three-dimensional site model and two-dimensional imagery |
| JP2014016967A (en) * | 2012-07-11 | 2014-01-30 | Sony Corp | Information display program and information display device |
| JP5519751B2 (en) * | 2012-09-11 | 2014-06-11 | オリンパスイメージング株式会社 | Image viewing system, image viewing method, image viewing server, and terminal device |
| JP5519750B2 (en) * | 2012-09-11 | 2014-06-11 | オリンパスイメージング株式会社 | Image viewing system, image viewing method, image viewing server, and terminal device |
| JP6077068B1 (en) * | 2015-07-30 | 2017-02-08 | 株式会社オプティム | Augmented reality system and augmented reality method |
| JP6275764B2 (en) * | 2016-03-25 | 2018-02-07 | 株式会社ファイン | Interior view image creation apparatus, interior view image creation method, and computer program |
| CN105892680A (en) * | 2016-04-28 | 2016-08-24 | 乐视控股（北京）有限公司 | Interactive equipment control method and device based on virtual reality helmet |
| JP6306765B1 (en) | 2017-02-27 | 2018-04-04 | 株式会社コロプラ | Method executed by computer for moving in virtual space, program for causing computer to execute the method, and information processing apparatus |
| CN112308983B (en) * | 2020-10-30 | 2024-03-29 | 北京虚拟动点科技有限公司 | Virtual scene arrangement method and device, electronic equipment and storage medium |
| JP7011363B1 (en) | 2021-10-07 | 2022-01-26 | 毅 曹 | Storyboard production equipment, storyboard production method and storyboard production program |
| CN115951806B (en) * | 2022-11-01 | 2024-06-07 | 金华八达集团有限公司监理分公司 | AR technology-based construction scene identification method and terminal |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3215306B2 (en) * | 1995-09-19 | 2001-10-02 | 株式会社ナムコ | Image synthesis method and apparatus |
-
2001
- 2001-01-31 JP JP2001024619A patent/JP3711025B2/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2001338311A (en) | 2001-12-07 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN112219205B (en) | Matching of content to a spatial 3D environment | |
| KR102555443B1 (en) | Matching content to a spatial 3d environment | |
| Wither et al. | Annotation in outdoor augmented reality | |
| JP4130409B2 (en) | How to interact with 3D graphic environment | |
| Kooper et al. | Browsing the real-world wide web: Maintaining awareness of virtual information in an AR information space | |
| US20010028369A1 (en) | Three dimensional spatial user interface | |
| JP3148133B2 (en) | Information retrieval device | |
| JP3711025B2 (en) | Virtual reality space movement control device | |
| KR20170010444A (en) | Zooming graphical user interface | |
| JP2004507724A (en) | Method for displaying target information, method for navigating in a map screen, computer program product and navigation device | |
| JP2007535733A (en) | System that enables image distribution and interactive operation | |
| JPH08287085A (en) | Data base retrieval system | |
| CN114385052B (en) | Dynamic display method of Tab column and three-dimensional display device | |
| CN112684893A (en) | Information display method and device, electronic equipment and storage medium | |
| US11797171B2 (en) | Interactive media content platform | |
| Chung et al. | Development of a head-mounted mixed reality museum navigation system | |
| JP7381556B2 (en) | Media content planning system | |
| JP2005044102A (en) | Image reproduction method and device | |
| US11995868B2 (en) | Image processing device, image providing server, image display method, and image provision method for navigating horizontally or vertically between floor images | |
| Bettio et al. | A novel approach for exploring annotated data with interactive lenses | |
| JP2004536335A (en) | Time series by image | |
| JPH0916315A (en) | Information retrieval system | |
| JP2006155231A (en) | Viewing system and program | |
| WO2020084192A1 (en) | Method, arrangement, and computer program product for three-dimensional visualization of augmented reality and virtual reality environments | |
| JP2935315B2 (en) | Figure selection input method in 3D figure processing system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20050427 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050627 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20050809 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20050811 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090819 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090819 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100819 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110819 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110819 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120819 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120819 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130819 Year of fee payment: 8 |
|
| LAPS | Cancellation because of no payment of annual fees |