JP3611807B2 - ビデオゲーム装置、ビデオゲームにおける擬似カメラ視点移動制御方法及びプログラム - Google Patents
ビデオゲーム装置、ビデオゲームにおける擬似カメラ視点移動制御方法及びプログラム Download PDFInfo
- Publication number
- JP3611807B2 JP3611807B2 JP2001220312A JP2001220312A JP3611807B2 JP 3611807 B2 JP3611807 B2 JP 3611807B2 JP 2001220312 A JP2001220312 A JP 2001220312A JP 2001220312 A JP2001220312 A JP 2001220312A JP 3611807 B2 JP3611807 B2 JP 3611807B2
- Authority
- JP
- Japan
- Prior art keywords
- player
- image
- game
- display
- viewpoint
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
- 238000000034 method Methods 0.000 title claims description 24
- 239000003550 marker Substances 0.000 claims description 53
- 238000001514 detection method Methods 0.000 claims description 21
- 238000003384 imaging method Methods 0.000 claims description 14
- 230000004044 response Effects 0.000 claims description 11
- 238000006243 chemical reaction Methods 0.000 claims description 6
- 230000000007 visual effect Effects 0.000 claims description 2
- 238000012545 processing Methods 0.000 description 49
- 238000010586 diagram Methods 0.000 description 26
- 238000004364 calculation method Methods 0.000 description 15
- 238000000605 extraction Methods 0.000 description 9
- 230000002093 peripheral effect Effects 0.000 description 7
- 230000005484 gravity Effects 0.000 description 5
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 4
- 238000012935 Averaging Methods 0.000 description 3
- 230000004397 blinking Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 238000001914 filtration Methods 0.000 description 3
- 239000000284 extract Substances 0.000 description 2
- 240000005926 Hamelia patens Species 0.000 description 1
- 241001290307 Thalassoma bifasciatum Species 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
Images
Classifications
-
- A63F13/10—
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/50—Controlling the output signals based on the game progress
- A63F13/52—Controlling the output signals based on the game progress involving aspects of the displayed game scene
- A63F13/525—Changing parameters of virtual cameras
- A63F13/5258—Changing parameters of virtual cameras by dynamically adapting the position of the virtual camera to keep a game object or game character in its viewing frustum, e.g. for tracking a character or a ball
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
- A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
- A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/45—Controlling the progress of the video game
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/80—Special adaptations for executing a specific game genre or game mode
- A63F13/837—Shooting of targets
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
- A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
- A63F2300/1012—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals involving biosensors worn by the player, e.g. for measuring heart beat, limb activity
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
- A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
- A63F2300/1087—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals comprising photodetecting means, e.g. a camera
- A63F2300/1093—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals comprising photodetecting means, e.g. a camera using visible light
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
- A63F2300/60—Methods for processing data by generating or executing the game program
- A63F2300/66—Methods for processing data by generating or executing the game program for rendering three dimensional images
- A63F2300/6661—Methods for processing data by generating or executing the game program for rendering three dimensional images for changing the position of the virtual camera
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
- A63F2300/60—Methods for processing data by generating or executing the game program
- A63F2300/66—Methods for processing data by generating or executing the game program for rendering three dimensional images
- A63F2300/6661—Methods for processing data by generating or executing the game program for rendering three dimensional images for changing the position of the virtual camera
- A63F2300/6676—Methods for processing data by generating or executing the game program for rendering three dimensional images for changing the position of the virtual camera by dedicated player input
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
- A63F2300/80—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game specially adapted for executing a specific type of game
- A63F2300/8076—Shooting
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Processing Or Creating Images (AREA)
- User Interface Of Digital Computer (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は、擬似カメラの視点からのゲーム画像、例えば３次元画像を作成し、該画像をディスプレイ画面に表示すると共に、前記ディスプレイへの表示画像に応答する、プレイヤからの反応を受けて擬似カメラの視点を移動させながらゲーム進行を行うビデオゲームの制御技術に関する。
【０００２】
【従来の技術】
モニタに表示されるゲーム画面の手前でプレイするプレイヤを撮像するカメラをゲーム機本体の適所に取り付け、プレイヤに装着された（カメラでの撮像に適した）特殊な被検知体をカメラで撮像し、その動きを認識する業務用ゲーム機が知られている。このゲーム機では、カメラで撮影された被検知体の画像から人体の動きを検出し、その動きに対応させた展開でゲームを進行するものである。また、プレイヤの頭上に１個の超音波送信機と２個の超音波受信機とを装備し、送信機から送波された超音波パルスであってプレイヤの頭部で反射し、両受信機で受波された超音波パルスの各伝搬時間とその時間差とから頭部位置を算定し、算定された頭部位置に、擬似３次元のゲーム画面を生成する基準となる擬似カメラの視点を連動させる業務用ゲーム機が知られている。
【０００３】
【発明が解決しようとする課題】
擬似カメラの視点をプレイヤの動きに連動させることにより、臨場感あるゲーム画像を提供する家庭用ゲーム機を実現することは業務用ゲーム機の場合と異なり、容易ではない。例えば業務用のように、固定的なプレイ領域が確保されているわけではなく、場所的、時間的に撮影画像中に含まれる背景画像の処理の問題があり、また前述したような撮影画像から検出容易な特殊な被検知体の購入をプレイヤに強いることにも限界がある。
【０００４】
本発明は上記に鑑みてなされたもので、撮像手段をディスプレイ画面の前方のプレイ領域を視野とする向きにして所望する位置に配置し、撮像画像に基づいてプレイヤの注目部位の変化方向及び変化量に前記擬似カメラの視点を連動させて移動するようにしたビデオゲーム装置、ビデオゲームにおける擬似カメラ視点移動制御方法及びプログラムを提供することを目的とするものである。
【０００５】
【課題を解決するための手段】
請求項１記載の発明は、画像を表示するディスプレイと、擬似カメラの視点からのゲーム画像を作成し、該画像を前記ディスプレイ画面に表示する表示制御手段と、ディスプレイの表示画像に応答する、プレイヤからの反応を受けてゲーム進行を行うゲーム制御部とを備えたビデオゲーム装置において、前記ディスプレイ画面の前方のプレイ領域を視野とする向きにして配置可能にされ、配置状態でプレイ領域を周期的に撮像する撮像手段と、撮像画像からプレイヤの注目部位の位置を検出する位置検出手段と、ゲーム開始前にプレイヤの前記プレイ領域内での初期位置に対するキャリブレーション処理を行う初期プレイ位置設定手段と、検出された注目部位の位置の平面的な動きを検出する動作検出手段と、検出された注目部位の位置の変化方向及び変化量に連動させて前記擬似カメラの視点を移動させる視点変更手段とを備えてなり、前記初期プレイ位置設定手段は、前記ディスプレイ画面の所定位置に注目部位基準マーカと前記位置検出手段で検出されたプレイヤの注目部位を示す現在認識位置マークとを表示し、両マークの位置関係によって適正化されたことを示すべく両マークの一方の表示形態を変化させることを特徴とするものである。
【０００６】
請求項２記載の発明は、擬似カメラの視点からのゲーム画像を作成し、該画像をディスプレイの画面に表示すると共に、前記ディスプレイの表示画像に応答する、プレイヤからの反応を受けて擬似カメラの視点を移動させながらゲーム進行をコンピュータに行わせるビデオゲームにおける擬似カメラ視点移動制御方法において、コンピュータの位置検出手段が、前記ディスプレイ画面の前方のプレイ領域を視野とする向きにして所望する位置に配置される撮像手段でプレイ領域を周期的に撮像しながら、撮像された画像からプレイヤの注目部位を検出し、コンピュータの初期プレイ位置設定手段が、ゲーム開始前にプレイヤの前記プレイ領域内での初期位置に対するキャリブレーション処理を行い、コンピュータの動作検出手段が、検出された注目部位の位置の平面的な動きを検出し、コンピュータの視点変更手段が、検出された注目部位の位置の変化方向及び変化量に連動させて前記擬似カメラの視点を移動し、かつ、前記初期プレイ位置設定手段が、前記ディスプレイ画面の所定位置に注目部位基準マーカと前記位置検出手段で検出されたプレイヤの注目部位を示す現在認識位置マークとを表示し、両マークの位置関係によって適正化されたことを示すべく両マークの一方の表示形態を変化させることを特徴とするものである。
【０００７】
請求項３記載の発明は、擬似カメラの視点からのゲーム画像を作成し、該画像をディスプレイの画面に表示すると共に、前記ディスプレイの表示画像に応答する、プレイヤからの反応を受けて擬似カメラの視点を移動させながらゲーム進行をコンピュータに行わせるビデオゲームにおける擬似カメラ視点移動制御プログラムであって、コンピュータを、前記ディスプレイ画面の前方のプレイ領域を視野とする向きにして所望する位置に配置される撮像手段でプレイ領域を周期的に撮像しながら、撮像された画像からプレイヤの注目部位を検出する位置検出手段と、ゲーム開始前にプレイヤの前記プレイ領域内での初期位置に対するキャリブレーション処理を行う初期プレイ位置設定手段と、検出された注目部位の位置の平面的な動きを検出する動作検出手段と、検出された注目部位の位置の変化方向及び変化量に連動させて前記擬似カメラの視点を移動させる視点変更手段として機能させると共に、前記初期プレイ位置設定手段が、前記ディスプレイ画面の所定位置に注目部位基準マーカと前記位置検出手段で検出されたプレイヤの注目部位を示す現在認識位置マークとを表示し、両マークの位置関係によって適正化されたことを示すべく両マークの一方の表示形態を変化させることを特徴とするものである。
【０００８】
請求項１、２、３記載の発明によれば、擬似カメラの視点からのゲーム画像、例えば３次元画像が作成され、該画像がディスプレイの画面に表示されると共に、前記ディスプレイの表示画像に応答する、プレイヤからの反応、例えば姿勢変化を受けて擬似カメラの視点が移動されながらゲームが進行される。また、撮像手段が前記ディスプレイ画面の前方のプレイ領域を視野とする向きにして所望する位置に配置され、プレイ領域が周期的に撮像される。そして、撮像された画像からプレイヤの注目部位例えば頭部が検出され、さらに該注目部位の位置の平面的な動きが検出される。検出された注目部位の位置に擬似カメラの視点がくるように、すなわち擬似カメラの変化方向及び変化量に連動（追従）させて前記擬似カメラの視点が移動される。一方、ゲーム開始前にプレイヤの前記プレイ領域内での初期位置に対するキャリブレーション処理が初期プレイ位置設定手段によって実行される。すなわち、初期プレイ位置設定手段により、前記ディスプレイ画面の所定位置に注目部位基準マーカと前記位置検出手段で検出されたプレイヤの注目部位を示す現在認識位置マークとが表示され、両マークの位置関係によって適正化されたことを示すべく両マークの一方の表示形態が変化させられる。この表示形態の変化により、プレイヤの初期位置に対するキャリブレーションが終了する。
【０００９】
【発明の実施の形態】
図１は、本発明の一実施形態に係るビデオゲーム装置を用いてプレイヤがゲームを行う状況を説明する斜視図である。同図に示すように、ゲーム装置は、ディスプレイとしての家庭用テレビ受像器４０、撮像手段としてのカメラユニット４２、家庭用ゲーム機４６、及びガンコントローラ４８を含んで構成されており、ガンシューティングゲームを実現するためのものである。
【００１０】
家庭用テレビ受像器４０及び家庭用ゲーム機４６は例えばキャビネット４４上に載置されており、カメラユニット４２は本実施形態では家庭用テレビ受像器４０上に載置されている。カメラユニット４２はプレイヤＰの姿をリアルタイムに撮像するデジタルカメラであり、家庭用ゲーム機４６にケーブルで接続されている。デジタルカメラは撮影レンズの光軸上であって結像位置に２次元配列された受光素子、例えば電荷結合素子（ＣＣＤ）が配置され、所定の露光時間で視野内の被写体（プレイヤ）を光像として撮像するものである。
【００１１】
家庭用ゲーム機４６は家庭用テレビ受像器４０に接続されており、家庭用ゲーム機４６で生成されるゲーム画面を表示するとともに、ゲーム音楽やゲーム効果音を出力し、さらに立ち位置適正化処理時には、撮像したプレイヤ画像をリアルタイムで家庭用ゲーム機４６に供給するようになっている。ガンコントローラ４８は拳銃型のゲームコントローラであり、家庭用ゲーム機４６のコントローラ接続端子にケーブルで接続されている。そして、ガンコントローラ４８をプレイヤＰが手に持ち、家庭用テレビ受像器４０に向けると、その銃身方向が家庭用ゲーム機４６に入力されるようになっている。また、ガンコントローラ４８には引き金を模したトリガーが設けられており、トリガーの状態（トリガーを引いたかどうか）を示す信号が家庭用ゲーム機４６に入力されるようになっている。
【００１２】
家庭用ゲーム機４６では、３次元ゲーム空間（仮想３次元空間）がメモリ上に構築されており、所定空間位置に配置された擬似カメラの視点から３次元ゲーム空間を見た様子が家庭用テレビ受像器４０に映し出されるようになっている。このとき、家庭用ゲーム機４６は、プレイヤ画像からプレイヤＰの頭部位置を認識して、頭部位置に前記視点の位置を連動させるように視点変更処理を施している。このため、プレイヤＰがカメラユニット４２の前で体を動かすと、それに応じて家庭用テレビ受像器４０に映し出されるゲーム画面が変化するようになり、プレイヤＰは自分自身があたかも３次元ゲーム空間に入り込んだような感覚（臨場感）を得ることができる。そうして、家庭用ゲーム機４６では、３次元ゲーム空間に現れる敵キャラクタをプレイヤＰがガンコントローラ４８を用いて射撃するとともに、プレイヤＰが体（具体的には頭の位置）を動かすことにより、敵キャラクタからの攻撃（射撃）を避けることができるゲームを実現している。
【００１３】
図２は、ゲーム装置１０のハードウェア構成を示す図である。同図に示すように、ゲーム装置１０は、家庭用テレビ受像器４０であるモニタ１８及びスピーカ２２に接続された家庭用ゲーム機４６に、情報記憶媒体たるＤＶＤ（Digital Versatile Disk；商標）２５が装着されることにより構成される。ここでは、ゲームプログラムやゲームデータを家庭用ゲーム機４６に供給するためにＤＶＤ２５を用いるが、ＣＤ−ＲＯＭ（Compact Disk - Read Only Memory；商標）やＲＯＭ（Read Only Memory）カード等、他のあらゆる情報記憶媒体を用いることができる。また、インターネット等のデータ通信網を介して遠隔地からゲームプログラムやゲームデータを家庭用ゲーム機４６に供給することもできる。
【００１４】
家庭用ゲーム機４６は、マイクロプロセッサ１４、画像処理部１６、主記憶部２６、入出力処理部３０、周辺機器インタフェース３１、音声処理部２０、及びＤＶＤ再生部２４を含んで構成されている。マイクロプロセッサ１４、画像処理部１６、主記憶部２６、入出力処理部３０及び周辺機器インタフェース３１は、バス１２によって相互データ通信可能に接続され、入出力処理部３０には、ガンコントローラ４８、音声処理部２０及びＤＶＤ再生部２４が接続されている。また、周辺機器インタフェース３１にはカメラユニット４２が接続されている。家庭用ゲーム機４６の各構成要素は筐体内に収容されている。ここでは、モニタ１８として家庭用テレビ受像器４０が用いられ、スピーカ２２としてその内蔵スピーカが用いられる。
【００１５】
マイクロプロセッサ１４は、図示しないＲＯＭに格納されるオペレーティングシステムやＤＶＤ２５から読み出されるゲームプログラムに基づいて、家庭用ゲーム機４６の各部を制御する。バス１２はアドレス及びデータを家庭用ゲーム機４６の各部でやり取りするためのものである。また、主記憶部２６には、ＤＶＤ２５から読み取られたゲームプログラム及びゲームデータが必要に応じて書き込まれる。画像処理部１６はＶＲＡＭ（Video Random Access Memory）を含んで構成されており、マイクロプロセッサ１４から送られる画像データを受け取ってＶＲＡＭ上にゲーム画面を描画するとともに、その内容をビデオ信号に変換してモニタ１８に出力する。
【００１６】
画像処理部１６は、擬似３次元空間上における擬似カメラの視点から見た各キャラクタ（敵キャラクタや、ゲーム空間内に配置される種々の建造物他の物体キャラクタ等）の座標位置等の計算、光源計算処理、計算された擬似３次元空間上の座標位置から２次元空間上での座標位置への変換のための計算及び主記憶部２６の表示バッファに描画すべき画像を構成するポリゴンを位置付ける処理、さらに各ポリゴンに対するテクスチャマッピング処理を行う。キャラクタの座標位置計算における擬似カメラの視点情報は、後述するように位置認識部７１から伝送されるプレイヤの注目部位例えば頭部の位置情報が用いられる。従って、擬似カメラの視点はプレイヤの眼と実質一致し、本実施形態ではプレイヤに対応するキャラクタはモニタ画面に表示されない。
【００１７】
入出力処理部３０はガンコントローラ４８、音声処理部２０及びＤＶＤ再生部２４とマイクロプロセッサ１４との間のデータ通信を中継するためのインタフェースである。ガンコントローラ４８は、図１に示されるように拳銃型のゲームコントローラであり、トリガー状態及び銃身（銃口）方向（具体的には家庭用テレビ受像器４０の画面上での指示位置）を家庭用ゲーム機４６に入力するためのものである。ガンコントローラ４８には、例えば公知の構成を採用することができる。すなわち、プレイヤＰがガンコントローラ４８のトリガーを引くと、その情報（トリガー信号）がコントローラ端子から家庭用ゲーム機４６に入力されるようにする。一方、家庭用ゲーム機４６では、該トリガー信号が入力されたとき、ゲームプログラムにより、例えば１フレームだけ所定色例えば白色の画面を表示することにより、家庭用テレビ受像器４０の画面上で輝点を走査させる。ガンコントローラ４８には銃口奥部に指向性の強い受光センサを備えるようにしておき、該受光センサで家庭用テレビ受像器４０の輝点を検出すると、走査開始時刻から輝点検出時刻までの時間を算出するとともに、そこから家庭用テレビ受像器４０の画面上での輝点の位置（座標）を算出するようにする。そして、その位置、すなわち銃身方向を家庭用ゲーム機４６に入力すれば、ガンコントローラ４８を好適に実現することができる。なお、走査開始時刻は、家庭ゲーム機４６から家庭用テレビ受像器４０に供給されるビデオ信号に含まれている同期信号から取得するようにすれば好適である。
【００１８】
そして、プレイヤから射撃された弾丸に対するテレビ受像器４０の画面のゲーム空間における弾道計算を順次実行し、好ましくは計算の都度、画面内に弾丸を表示させる等して、画面に表示されている敵キャラクタに命中したか否かを判断する。命中したか否かの判断は逐次の弾道計算の結果と敵キャラクタの位置座標とから座標の一致乃至は実質的な一致によって行うようにしている。
【００１９】
音声処理部２０はサウンドバッファを含んで構成されており、ＤＶＤ２５から読み出されてサウンドバッファに記憶された音楽やゲーム効果音等のデータを再生してスピーカ２２から出力する。ＤＶＤ再生部２４は、マイクロプロセッサ１４からの指示に従ってＤＶＤ２５に記録されたゲームプログラム及びゲームデータを読み取る。周辺機器インタフェース３１は家庭用ゲーム機４６に各種周辺機器を接続するためのインタフェースであり、例えばＵＳＢ（Universal Serial Bus）インタフェースを採用することができる。周辺機器インタフェース３１には、ここではカメラユニット４２が接続される。カメラユニット４２は、例えばグレイスケール（白黒２５６階調）の撮影画像を所定時間おき（例えば１／６０秒等）に家庭用ゲーム機４６に入力するための公知のデジタルカメラである。このカメラユニット４２は、プレイヤＰの姿を撮影するため、ここではレンズをプレイヤＰに向けた状態で家庭用テレビ受像器４０の上に載置されている。
【００２０】
ここで、タイトル画面を表示するための家庭用ゲーム機４６の処理について説明する。この処理は、ＤＶＤ２５に格納されているゲームプログラムに基づいて実行されるものである。
【００２１】
図３は、マイクロプロセッサ１４のソフトウェア構成を示す図である。
図３において、マイクロプロセッサ１４は初期プレイ位置設定部７０、位置認識部７１、フィルタ処理部７２及び視点変更処理部７３を備え、各部の機能はＤＶＤ２５に格納されているゲームプログラムに基づいて実行される。位置認識部７１は撮像制御部７１１１〜重心計算部７１２３を備え、フィルタ処理部７２は情報更新部７２１１〜バッファサイズ判定部７２１４を備える。
【００２２】
初期プレイ位置設定部７０はプレイヤＰの立ち位置を適正化する初期キャリブレーション処理を行うもので、図６に示すように、モニタ１８の所定位置にプレイヤ立ち位置案内画像５０を表示すると共に、その画像５０内の所定位置、本実施形態では中央やや上部に例えば円環状のマーカで示す頭部基準位置マーカ５２を表示し、さらにカメラユニット４２により撮像したプレイヤ画像５６と、該画像５６から得た例えば丸点で示す現在認識位置マーカ５４を重畳表示する。プレイヤＰの立ち位置や姿勢、あるいはカメラユニット４２の撮影方向や撮影位置を変更することで、現在認識位置マーカ５４が円環状の頭部基準位置マーカ５２の内側に入ると、基準位置（初期プレイ位置）を適正化したとして、頭部基準位置マーカ５２の表示態様（例えば色や点滅表示の有無）を変化させるようにしている。
【００２３】
次に、図４（ａ）〜（ｄ）は、プレイヤＰの頭部が上下方向に移動した場合に家庭用テレビ受像器４０に表示される一連のゲーム画面の例を示している。同図（ａ）〜（ｄ）は、プレイヤＰがカメラユニット４２の前で中腰姿勢から徐々に立ち上がって略直立の姿勢になった場合、すなわちプレイヤＰの頭が下方から上方に移動した場合の４画面を表示順に示すものである。同図（ａ）に示すゲーム画面は、視点のすぐ前方に机状の障害物Ｂが存在しており、プレイヤＰはこの障害物Ｂの手前下方に隠れている状況を表している。この場合、ゲーム画面において、障害物Ｂの向こうに銃を手にした敵ゲームキャラクタＡＣ１の頭部の一部だけが表されている。次に、同図（ｂ）に示すゲーム画面は、プレイヤＰがやや頭を持ち上げて、頭の高さが障害物Ｂの上面の高さに略一致した状況を表している。この場合、ゲーム画面において、敵ゲームキャラクタＡＣ１の胸部までが表されるとともに、その後方にさらに２人の敵ゲームキャラクタＡＣ２，ＡＣ３の頭部が新たに表されている。同図（ｃ）に示すゲーム画面は、プレイヤＰがさらに背を伸ばして頭を持ち上げた状況を表している。この場合、ゲーム画面において、プレイヤＰの頭は障害物上面Ｂｓより若干高い位置にあり、３人の敵ゲームキャラクタＡＣ１〜ＡＣ３の上半身が表されるとともに、障害物上面Ｂｓも表される。同図（ｄ）に示すゲーム画面は、プレイヤＰが略直立の姿勢になった状況を表している。この場合、プレイヤＰの首辺りまでが障害物Ｂから露出しており、障害物上面Ｂｓは同図（ｃ）に示すゲーム画面よりも広く表されている。これらの図に示すように、プレイヤＰの頭の位置が上がるにつれて、障害物Ｂの表示位置が下側に移動するとともに、障害物上面Ｂｓや敵ゲームキャラクタＡＣ１〜ＡＣ３の全貌がゲーム画面に徐々に表れる。
【００２４】
次に、図５（ａ）〜（ｄ）は、プレイヤＰの頭部が左右方向に移動した場合に家庭用テレビ受像器４０に表示される一連のゲーム画面の例を示している。同図（ａ）〜（ｄ）は、プレイヤＰがカメラユニット４２の前で体を右側から左側に移動させた場合、すなわちプレイヤＰの頭が右方から左方に移動した場合の４画面を表示順に示すものである。同図（ａ）に示すゲーム画面は、視点のすぐ手前右側にドア又は壁状の障害物Ｂが存在しており、プレイヤＰはこの障害物Ｂの手前に隠れている状況を表している。この場合、ゲーム画面において、障害物Ｂの向こうに銃を手にした敵ゲームキャラクタＡＣ１の腕の一部だけが表されている。次に、同図（ｂ）に示す画面は、プレイヤＰがやや左に移動し、頭が障害物Ｂの左端に略一致した状況を表している。この場合、ゲーム画面において、敵ゲームキャラクタＡＣ１の頭及び胸部までが表されている。同図（ｃ）に示すゲーム画面は、プレイヤＰがさらに左に移動した状況を表している。この場合、ゲーム画面において、敵ゲームキャラクタＡＣ１のほぼ上半身が表されるとともに、さらに敵ゲームキャラクタＡＣ２もその後方に表されている。同図（ｄ）に示すゲーム画面は、プレイヤＰが障害物Ｂから左側に飛び出した状況を表している。この場合、敵ゲームキャラクタＡＣ１，ＡＣ２の他に、さらに敵ゲームキャラクタＡＣ３も表されている。これらの図に示すように、プレイヤＰの頭の位置が左から右に移動するにつれて、障害物Ｂの表示位置が右側に移動するとともに、敵ゲームキャラクタＡＣ１〜ＡＣ３の全貌がゲーム画面に徐々に表れる。
【００２５】
図６は、家庭用ゲーム機４６によって提供されるゲームのタイトル画面（スタート画面）の一例を示す図である。同図に示すタイトル画面は、家庭用ゲーム機４６の起動後、或いはゲーム終了後、新しいゲームの開始前に家庭用テレビ受像器４０に表示されるものである。同図に示すように、このタイトル画面では、画面の両端にメニューボタン画像６２が表示され、中央上方にゲームのタイトル文字列６０が表示されている。さらに、タイトル文字列６０の下側にはプレイヤ立ち位置案内画像５０が表示されている。また、メニューボタン画像６２は各種ゲーム又はオプション設定に移行するための標的であり、プレイヤＰがガンコントローラ４８でメニューボタン画像６２を撃ち抜くと、そのメニューボタン画像６２に対応するゲーム又はオプション設定が始まるようになっている。
【００２６】
プレイヤ立ち位置案内画像５０は、初期プレイ位置設定部７０により表示される、ゲーム開始前にプレイヤＰが立ち位置を適正化するのを助けるための画像であり、同プレイヤ立ち位置案内画像５０を見ながらプレイヤＰはゲーム開始前にカメラユニット４２の前方で自分の立ち位置や姿勢、或いはカメラユニット４２の撮影方向や撮影位置を正す。初期プレイ位置設定部７０は撮影制御部７１１１によりカメラユニット４２で取得されるリアルタイムの画像、すなわちプレイヤ画像５６をベースとして、そこに頭部基準位置マーカ５２及び現在認識位置マーカ５４を重ね合わせ表示するものである。頭部基準位置マーカ５２はプレイヤ画像５６の固定位置（例えばプレイヤ画像５６の中央、上から１５％の位置等）に表示される円環状のマーカであり、プレイヤ画像５６におけるプレイヤＰの頭（の最上部位）の画像位置をゲーム開始前に合わせておくべき場所（基準位置）を示すためのものである。また、このゲーム装置１０では、プレイヤ画像５６からプレイヤＰの頭の現在位置が認識されるようになっており、その認識位置を表す丸点が現在認識位置マーカ５４としてプレイヤ画像５６に重ね合わせ表示されるようになっている。プレイヤＰは自分の体（立ち位置や姿勢）を動かし、或いはカメラユニット４２の撮影方向や撮影位置を変更して、現在認識位置マーカ５４が円環状の頭部基準位置マーカ５２の内側に入るようにすることで、基準位置（初期プレイ位置）を適正化することができる。初期プレイ位置設定部７０は、現在認識位置マーカ５４が、頭部基準位置マーカ５２の内側に表示されているか外側に表示されているかを判断して、その結果に応じて頭部基準位置マーカ５２の表示態様（例えば色や点滅表示の有無）を変化するようにしている。こうして、プレイヤＰがプレイヤ立ち位置案内画像５０を見ながら、自分とカメラユニット４２との位置関係を、ゲーム開始前に容易に適正化できるようにしている。
【００２７】
ここで、タイトル画面を表示するための家庭用ゲーム機４６の処理について説明する。この処理は、ＤＶＤ２５に格納されているゲームプログラムに基づいて実行されるものである。
【００２８】
図７は、家庭用ゲーム機４６によるタイトル画面表示処理を説明するフロー図である。同図に示すように、家庭用ゲーム機４６では、まずマイクロプロセッサ１４が、タイトル画面の背景画像、タイトル文字列６０、メニューボタン画像６２、著作権表示等を画像処理部１６に含まれるＶＲＡＭに描画する（Ｓ１０１）。次に、カメラユニット４２によって取得される画像（プレイヤＰを撮影することを目的にしているため、ここでは「プレイヤ画像」と呼ぶ。）を取得する（Ｓ１０２）。そして、タイトル画面におけるプレイヤ立ち位置案内画像５０の位置にプレイヤ画像が配されるよう、Ｓ１０２で取得したプレイヤ画像をＶＲＡＭに描画する（Ｓ１０３）。
【００２９】
さらに、Ｓ１０２で取得したプレイヤ画像に基づいてプレイヤＰの頭の位置（頭部位置）を認識し、認識結果にフィルタ処理を施した情報（フィルタ処理済み頭部位置）を取得する（Ｓ１０４）。ここでの位置認識処理及びフィルタ処理は後に詳述する。その後、マイクロプロセッサ１４は、タイトル画面に含まれるプレイヤ画像の頭部位置にマーカ（赤点）が表されるよう、フィルタ処理済み頭部位置に対応するＶＲＡＭの座標に現在認識位置マーカ５４を描画する（Ｓ１０５）。
【００３０】
次に、初期プレイ位置設定部７０は、フィルタ処理済み頭部位置が基準位置にあるかを判断する。基準位置は、ゲーム開始前にプレイヤＰの頭部が写されているべきプレイヤ画像中の位置である。そして、フィルタ処理済み頭部位置が基準位置にあれば、既にＶＲＡＭに描画されているプレイヤ画像の基準位置に赤色の頭部基準位置マーカ５２を描画する（Ｓ１０７）。一方、フィルタ処理済み頭部位置が基準位置になければ、プレイヤ画像の基準位置に青色の頭部基準位置マーカ５２を描画する（Ｓ１０８）。その後、ガンコントローラ４８の銃身方向を取得し（Ｓ１０９）、その位置に照準マーカ５８を描画する（Ｓ１１０）。
【００３１】
以上のようにすれば、プレイヤＰとカメラユニット４２との位置関係が適切でない場合には、図８に示すように、タイトル画面において、円環状の頭部基準位置マーカ５２の外に現在認識位置マーカ５４が表示され、頭部基準位置マーカ５２は青色で表示されるようになる。一方、プレイヤＰとカメラユニット４２との位置関係が適切であれば、図６に示すように、タイトル画面において、円環状の頭部基準位置マーカ５２の内に現在認識位置マーカ５４が表示され、頭部基準位置マーカ５２は赤色で表示されるようになる。このため、プレイヤＰは立ち位置を変更し、或いはカメラユニット４２の設置位置又は撮影方向を変更することにより、頭部基準位置マーカ５２がタイトル画面において赤色に表示されるようにして、プレイヤＰとカメラユニット４２との位置関係を簡単に適正化することができる。
【００３２】
プレイヤＰとカメラユニット４２との位置関係が適正化されていないと、ゲーム中にプレイヤＰが屈んだり左右に体をずらしたりとき、頭の位置がプレイヤ画像に入らなくなってしまい、頭の位置を正しく認識することができないことがあり得る。しかしながら、本ゲーム装置１０によれば、プレイヤＰとカメラユニット４２との位置関係をゲーム開始前に適正化しておくことができるので、ゲーム中にプレイヤＰが屈んだり左右に体をずらしたりしたときでも、頭の位置を正しく認識することができる。
【００３３】
なお、プレイヤＰに対する案内は以上説明したものに限らない。例えば、図９に示す案内画像のように、プレイヤ画像を表示せず、現在認識位置マーカ５４と頭部基準位置マーカ５２だけを表示するようにしてもよい。また、現在認識位置マーカ５４と頭部基準位置マーカ５２の位置関係によって頭部基準位置マーカ５２の表示態様を変化させる代わりに、現在認識位置マーカ５４の表示態様（色彩や点滅パターン等）を変化させるようにしてもよい。或いは、別の箇所に現在認識位置マーカ５４と頭部基準位置マーカ５２との位置関係に応じた表示をするようにしてもよい。また、現在認識位置マーカ５４の表示を省略してもよい。
【００３４】
さらに、現在認識位置マーカ５４だけを表示し、頭部基準位置マーカ５２が本来表示されるべき位置に現在認識位置マーカ５４が移動してきたとき、現在認識位置マーカ５４の表示態様を変化するようにしてもよい。こうしても、案内画像を見ながら、プレイヤＰは自分とカメラユニット４２との位置関係を正すことができる。
【００３５】
その他、プレイヤＰの頭部の現在認識位置と基準位置との関係に従って、例えば「右に移動してください。」、「左に移動してください。」、「手前に寄ってください。」、「後ろに下がってください」等のメッセージを表示するようにしてもよい。また、現在認識位置マーカ５４や頭部基準位置マーカ５２の形状は以上説明したものに限らず、様々な形状を採用することができる。さらに、プレイヤＰに対する案内はゲーム開始前に行うようにすればよい。このため、例えばタイトル画面とは別の画面でプレイヤＰに対する案内を行うようにしてもよい。
【００３６】
次に、家庭用ゲーム機４６におけるプレイヤ画像処理を説明する。
【００３７】
図１０は、撮像制御部による制御を受けてカメラユニット４２から取得されるプレイヤ画像に基づいてプレイヤＰの頭部位置を認識し、認識結果にフィルタを施す処理を説明するフロー図である。また、図１１は、フィルタ処理を詳細に説明するフロー図である。これらの処理は、ＤＶＤ２５に格納されているゲームプログラムに従って、家庭用ゲーム機４６においてタイマ７１１２により管理される所定時間おき（例えば１／６０秒おき）に実行されるものである。
【００３８】
カメラユニット４２によってプレイヤ画像が取得されると、撮影画像取込部７１１３は、図１０に示すように、まず該プレイヤ画像を主記憶部２６に用意された画像バッファに格納する（Ｓ２０１）。この画像バッファは、所定時間おきにカメラユニット４２で取得されるプレイヤ画像を記憶するためのものであり、最新のプレイヤ画像も含めて、所定数（ここでは合計４つ）のプレイヤ画像が時間順に記憶される。そして、最新のプレイヤ画像が取得されると、該プレイヤ画像が画像バッファに追加記憶されるとともに、最も古いプレイヤ画像が破棄される。図１２には、画像バッファに記憶される一連のプレイヤ画像の例を示す図である。ここで、同図（ａ）が最新のプレイヤ画像、同図（ｂ）が直前のプレイヤ画像、同図（ｃ）がその前のプレイヤ画像、同図（ｄ）がそのさらに前の（画像バッファ中、最も古い）プレイヤ画像を示している。同図に示す例は、プレイヤＰがカメラユニット４２の前で左から右に体を揺らしている状況を示している。
【００３９】
次に、平均化処理部７１１４は、画像バッファに記憶されるプレイヤ画像のうち、最新のものを除く３つのプレイヤ画像の平均化画像を生成する（Ｓ２０２）。平均化画像は、本実施形態では後述するプレイヤＰの動きと１／６０秒という画像取り込み周期とから経験的、実験的に得られる好ましい数としての３つのプレイヤ画像に対し、その対応画素に与えられた各色情報（白黒２５６階調）を平均化して得られる画像である。そして、第１の差分・２値化処理部７１１５により、この平均化画像と最新のプレイヤ画像との差分が生成され（Ｓ２０３）、この差分画像は、両画像の対応画素に与えられた色情報を引き算して得られる画像を閾値と大小比較して二値化（白黒化）される。図１３は、この差分画像の一例である。そして、画像抽出部７１１６により、この差分画像から前回認識位置（プレイヤＰの頭部位置）を中心とする所定半径内の画像が抽出される（Ｓ２０４）。図１４は、この抽出画像の一例を示している。同図において、黒丸は前回認識位置を示しており、実際には抽出画像には表されない。
【００４０】
次に、面積判定部７１１７は、抽出画像において黒く表された領域（差分が残存する領域）の面積が所定閾値未満か否かを調べる（Ｓ２０５）。そして、抽出画像において黒く表された領域の面積が所定閾値未満の場合、再出力部７１１８は、主記憶部２６に予め記憶されている前回出力（フィルタ処理済み頭部位置）を再出力する（Ｓ２１３）。プレイヤＰの動きが少ない場合、Ｓ２０３で得られる差分画像においては、図１５に示すようにプレイヤＰの輪郭だけ差分が残存することになる。そして、この場合、前回認識位置の近傍を抽出すると、図１６に示すようにその面積は小さくなる。Ｓ２０２からＳ２０５の処理では、このようにプレイヤＰの動きが少ないときは前回出力を再出力するようにして、出力値の変動を抑えるようにしている。
【００４１】
一方、抽出画像において黒く表された領域の面積が所定閾値以上の場合、次に、第２の差分・２値化処理部７１１９により、最新のプレイヤ画像（図１２（ａ））とその直前のプレイヤ画像（図１２（ｂ））とが画像バッファから読み出され、その差分画像（二値化画像）が生成される（Ｓ２０６）。図１７は、この差分画像の一例を示す図である。そして、画像抽出部７１１６は、この差分画像から前回認識位置を中心とする所定半径内（選出範囲）の画像を抽出する。この所定半径は面積判定部７１１７での判定用として採用された前述の所定半径と同一でもよく、あるいは移動量が大きい点を考慮して多少大きく設定してもよい。図１８は、この抽出画像の一例を示している。同図において、黒丸は前回認識位置を示しており、実際には抽出画像には表されない。抽出画像において黒く表されたピクセルの位置は、Ｓ２１１においてプレイヤＰの頭部位置認識に用いられる。すなわち、この抽出画像はプレイヤＰの頭部位置を認識するときの基礎位置群を含んでいる。そして、基礎位置群のピクセルから頭部位置が求められることになる。
【００４２】
変動量算出部７１２０は、この抽出画像において黒く表された領域（基礎位置群；差分が残存する領域）の変動量、本実施形態では高さ及び幅を計測し、変動判定部７１２１により、その値がそれぞれ所定閾値未満か否かが調べられる（Ｓ２０８）。そして、変動判定部７１２１により、いずれかが所定閾値未満であれば、抽出範囲（選出範囲）がプレイヤＰに十分に近づくまでは（Ｓ２０９）、画像移動処理部７１２２により抽出範囲（選出範囲）をプレイヤＰの方向にずらし、抽出画像を再生成する（Ｓ２１０）。具体的には、Ｓ２０６の差分画像（二値化画像）において黒く表された領域の重心を、重心計算部７１２３により算出し、抽出範囲（選出範囲）の中心を前回認識位置から該重心に所定距離ずつ近づける。図１９は、この処理の様子を説明するための図であり、ハッチングを施した領域は差分が残存している領域、黒三角は差分の重心位置、黒丸は前回認識位置を示している。同図では、プレイヤＰがカメラユニット４２の前で左上から右下に急激に移動した様子が示されている。Ｓ２１０では、こうした場合、画像移動処理部７１２２によって抽出範囲（選出範囲）の中心を同図において黒丸の位置から黒三角の方向に徐々にずらすのである。そして、前回認識位置と重心との距離の所定割合、例えば７０％の距離を移動しても依然として抽出画像において黒く表された領域が狭い場合、前回出力を再出力する（Ｓ２１３）。一方、抽出範囲（選出範囲）をずらした結果、図２０に示すように、抽出画像において黒く表された領域の高さ及び幅のいずれもが、それぞれ所定閾値以上となれば、そのときの抽出画像から今回の頭部位置を決定する（Ｓ２１１）。例えば、抽出画像において黒く表された領域の中央、上から数ピクセルの位置を今回の頭部位置として選出する。その後、こうして選出（認識）された今回の頭部位置にフィルタ処理を施し、フィルタ処理済み頭部位置を出力する（Ｓ２１２）。
【００４３】
以上のようにすれば、原則として前回認識位置に対応する選出範囲内で基礎位置群を選出するようにして、例外的に選出範囲を変更して基礎位置群を再選出することになり、プレイヤ画像にプレイヤ以外の動くものが写っている場合にも、その影響を排除することができるとともに、特に頭部位置が素早く移動した場合であっても、適正な位置認識をすることができる。
【００４４】
次に、上述したフィルタ処理では、図２１（ａ）に示すように、情報更新部７２１１により、最大で１６個の頭部位置（Ｐｎ〜Ｐｎ−１５；添字は認識時刻に対応する。）を格納する頭部位置バッファが主記憶部２６に用意される。この頭部位置バッファでは、所定時間おきに認識されるプレイヤＰの頭部位置を記憶するためのものであり、最新の頭部位置も含めて、最大で１６個の頭部位置が時間順に記憶される。そして、最新の頭部位置が認識されると、該頭部位置が頭部位置バッファに追加記憶されるとともに、最も古い頭部位置が破棄される。例えば、同図（ａ）の状態で頭部位置Ｐｎ＋１が認識されると、該頭部位置Ｐｎ＋１が頭部位置バッファに追加記憶されるとともに、最も古い頭部位置Ｐｎ−１５が頭部位置バッファから破棄される。また、この頭部位置バッファは、バッファサイズ、すなわち頭部位置の記憶個数が可変となっており、本実施形態では、例えば同図（ｂ）に示すように記憶個数が２個の状態、４個の状態、８個の状態、及び同図（ａ）に示すように記憶個数が１６個の状態、全部で４通りの状態を取りうる。
【００４５】
図１１に示すように、フィルタ処理では、まず現在の頭部位置バッファのバッファサイズｎが取得される（Ｓ３０１）。そして、情報更新部７２１１により、現バッファサイズｎが最大サイズＮｍａｘ（ここでは１６）に等しければ（Ｓ３０２）、最も古い頭部位置を頭部位置バッファから破棄して、最新の頭部位置を頭部位置バッファに記憶する（Ｓ３０５）。一方、バッファサイズ判定部７２１４により、現バッファサイズｎが最大サイズＮｍａｘに等しくなければ、古い頭部位置を破棄することなく、最新の頭部位置を頭部位置バッファに追加記憶し（Ｓ３０３）、さらに現バッファサイズｎに１を加える（Ｓ３０４）。
【００４６】
次に、頭部位置バッファに格納されている各頭部位置の移動量を算出する（Ｓ３０６）。具体的には、移動量算出部７２１２により、各頭部位置とその直前の頭部位置との距離が算出される。例えば図２１の例では、頭部位置Ｐｎと頭部位置Ｐｎ−１との距離、頭部位置Ｐｎ−１と頭部位置Ｐｎ−２との距離、頭部位置Ｐｎ−２と頭部位置Ｐｎ−３との距離、…、頭部位置Ｐｎ−１４と頭部位置Ｐｎ−１５との距離が算出される（データが１６個揃っていない場合（例えば後述するように破棄）には、揃っているデータで行う）。さらに、移動量算出部７２１２は算出された移動量の平均値を算出し、次いでバッファサイズ決定部７２１３により、その値に対応するバッファサイズＮが決定される（Ｓ３０７）。本実施形態では、平均値が１１以上の場合はバッファサイズＮ＝２とし、９以上１１未満の場合はバッファサイズＮ＝４とし、７以上９未満の場合はバッファサイズＮ＝８とし、バッファサイズ７未満の場合はバッファサイズＮ＝１６とする。なお、ここでは頭部位置バッファに記憶される各頭部位置の移動量の平均に基づいてバッファサイズＮを決定するようにしたが、他の計算方法を採用するようにしてもよい。例えば、各頭部位置の移動量に重み付けをしたり、移動量を算出する対象を頭部位置バッファに記憶されている頭部位置のうち比較的新しいものに限定したりすることによって、最新の頭部位置が急激に動いたと判断される場合に、速やかにバッファサイズＮが小さくなるようにしてもよい。
【００４７】
次に、バッファサイズ判定部７２１４は、現バッファサイズｎとバッファサイズＮとを比較し（Ｓ３０８）、現バッファサイズｎがバッファサイズＮよりも大きければ、頭部位置バッファに記憶されている頭部位置を古いものから順に破棄して、現バッファサイズｎがバッファサイズＮとなるようにする（Ｓ３０９）。一方、現バッファサイズｎがバッファサイズＮ以下であれば、Ｓ３０９をスキップする。その後、頭部位置バッファに記憶されている頭部位置を平均し、その値を主記憶部２６に前回出力として保存するとともに（Ｓ３１１）、フィルタ処理済み頭部位置として出力する（Ｓ３１２）。こうして出力されるフィルタ処理済み頭部位置は、上述したように、３次元ゲーム空間を描画するとき、視点位置の決定に用いられる。また、タイトル画面においてプレイヤ立ち位置案内画像５０を表示するとき、現在認識位置マーカ５４の表示位置の決定に用いられる。なお、ここでは頭部位置バッファに記憶されている頭部位置の平均値をフィルタ処理済み頭部位置としているが、頭部位置バッファに記憶されている頭部位置に重み付けをして、例えばフィルタ処理済み頭部位置に対する最新の頭部位置の影響がより大きくなるようにしてもよい。
【００４８】
以上説明したフィルタ処理によれば、頭部位置バッファに記憶されている頭部位置の平均値を出力するようにしたので、フィルタ処理済み頭部位置の値の変動を抑えることができる。また、頭部位置バッファのサイズを該頭部位置バッファに記憶されている各頭部位置の移動量に応じて変化させるようにしたので、プレイヤＰの頭部位置が急に動いた場合、それに応じてフィルタ処理済み頭部位置の値を速やかに変化させることができる。このため、フィルタ処理済み頭部位置を用いたゲーム処理を好適に行うことができるようになる。
【００４９】
そして、視点変更処理部７３は得られた位置情報を画像処理部１６に伝送する。
これにより、画像処理部１６は、前述したようにして、入手した位置情報を基に擬似３次元空間上における擬似カメラの視点を設定し、そこから見た画像の表示処理を行う。
【００５０】
なお、本発明は上記実施の形態に限定されるものではない。
【００５１】
（１）カメラユニット４２として、所定距離だけ離間された２台のカメラ装置を接地し、かつ互いに交差する（好ましくは直交する）向きに配置し、それぞれからのプレイヤ画像からプレイヤの注目部位の平面的な動きを算出して、一方のカメラ（モニタ１８と同じ向き）で上下左右の動きを、他方のカメラ（モニタ１８の画面と直交する向き）でモニタ１８に対する遠近の動きを得るようにすればよい。このようにすれば、プレイヤＰの３次元的な動きが検出し得るので、擬似カメラ視点を上下左右に加えて前後にも移動することが可能となる。
【００５２】
（２）本実施形態では、ゲーム画像として３次元ゲーム空間上での画像を採用したが、本発明は、２次元ゲーム空間で行うゲームにも適用可能であり、この場合、画面上で上下左右に移動させるようにすることができる。
【００５３】
（３）以上の説明ではガンシューティングゲームに本発明を適用する例を取り上げたが、撮像手段によって画像に取得して、該画像に基づいてゲームを進行させるゲームであれば、あらゆる種類のゲームに適用することができる。
【００５４】
（４）ここではプレイヤＰの頭を位置認識の対象としたが、その他の部位を位置認識の対象としてもよい。さらに、プレイヤＰが手にするもの、例えばゴルフクラブおもちゃ、テニスクラブおもちゃ、銃器おもちゃ等、様々な物を位置認識の対象としてもよい。
【００５５】
【発明の効果】
以上説明したように、請求項１、２、３記載の発明によれば、撮像手段をディスプレイと対応させて所望位置に容易に載置等できると共に、擬似カメラの視点をプレイヤの自由な動きに追従させるようにしてプレイヤの意図する視点からの画像を積極的に提示することが出来、ゲーム性の幅を広げることができ、興趣乃至臨場感に富んだゲームを提供し得る。しかも、プレイヤと撮像手段との位置関係をゲーム開始前に容易に適正化しておくことができるので、ゲーム中にプレイヤが屈んだり左右に体をずらしたりしたときでも、頭の位置を正しく認識することができる。
【図面の簡単な説明】
【図１】本発明の実施の形態に係るゲーム装置を用いてプレイヤがガンシューティングゲームを楽しむ様子を示す図である。
【図２】ゲーム装置のハードウェア構成を示す図である。
【図３】ゲーム装置のマイクロプロセッサのソフトウェア構成を示す図である。
【図４】プレイヤが上下に動いた場合に表示されるゲーム画面の一例を説明する図である。
【図５】プレイヤが左右に動いた場合に表示されるゲーム画面の一例を説明する図である。
【図６】タイトル画面（スタート画面）の一例を示す図である。
【図７】タイトル画面表示処理を説明するフロー図である。
【図８】タイトル画面に含まれるプレイヤ立ち位置案内画像の一例を示す図である。
【図９】タイトル画面に含まれるプレイヤ立ち位置案内画像の変形例を示す図である。
【図１０】プレイヤ画像処理を説明する図である。
【図１１】認識位置に対するフィルタ処理を説明する図である。
【図１２】一連のプレイヤ画像を示す図である。
【図１３】平均化プレイヤ画像と最新プレイヤ画像との差分画像を示す図である。
【図１４】図１３に示す画像から前回認識位置近傍を抽出した結果を示す図である。
【図１５】プレイヤの動きが少ない場合における、平均化プレイヤ画像と最新プレイヤ画像との差分画像を示す図である。
【図１６】図１５に示す画像から前回認識位置近傍を抽出した結果を示す図である。
【図１７】最新プレイヤ画像と直前プレイヤ画像との差分画像を示す図である。
【図１８】図１７に示す画像から前回認識位置近傍を抽出した結果を示す図である。
【図１９】前回認識位置が最新プレイヤ画像及び直前プレイヤ画像から離れている場合における、最新プレイヤ画像と直前プレイヤ画像との差分画像を示す図である。
【図２０】前回認識位置からプレイヤ側に寄った位置を図１９に示す画像から抽出した結果を示す図である。
【図２１】認識位置バッファの記憶内容を示す図である。
【符号の説明】
１０ ゲーム装置、１２ バス、１４ マイクロプロセッサ、１６ 画像処理部、１８ モニタ、２４ ＤＶＤ再生部、２５ ＤＶＤ、２６ 主記憶部、３０
入出力処理部、３１ 周辺機器インタフェース（Ｉ／Ｆ）、４０ 家庭用テレビ受像器、４２ カメラユニット、４６ 家庭用ゲーム機、４８ ガンコントローラ、７０ 初期プレイ位置設定部、７１ 位置認識部（位置検出手段、動作検出手段）、７２ フィルタ処理部、７３ 視点変更処理部、７１１１ 撮像制御部、７１１２ タイマ、７１１３ 撮影画像取込手段、７１１４ 平均化処理部、７１１５ 第１の差分・２値化処理部、７１１６ 画像抽出部、７１１７ 面積判定部、７１１８ 再出力部、７１１９ 第２の差分・２値化処理部、７１２０ 変動量算出部、７１２１ 変動判定部、７１２２ 画像移動処理部、７１２３ 重心計算部、７２１１ 情報更新部、７２１２ 移動量算出部、７２１３ バッファサイズ決定部、７２１４ バッファサイズ判定部、５０ プレイヤ立ち位置案内画像、５２ 頭部基準位置マーカ、５４，５４ａ 現在認識位置マーカ、５６ プレイヤ画像、Ｐ プレイヤ、ＡＣ１〜ＡＣ３ 敵キャラクタ、Ｂ 障害物、Ｂｓ 障害物上面
【発明の属する技術分野】
本発明は、擬似カメラの視点からのゲーム画像、例えば３次元画像を作成し、該画像をディスプレイ画面に表示すると共に、前記ディスプレイへの表示画像に応答する、プレイヤからの反応を受けて擬似カメラの視点を移動させながらゲーム進行を行うビデオゲームの制御技術に関する。
【０００２】
【従来の技術】
モニタに表示されるゲーム画面の手前でプレイするプレイヤを撮像するカメラをゲーム機本体の適所に取り付け、プレイヤに装着された（カメラでの撮像に適した）特殊な被検知体をカメラで撮像し、その動きを認識する業務用ゲーム機が知られている。このゲーム機では、カメラで撮影された被検知体の画像から人体の動きを検出し、その動きに対応させた展開でゲームを進行するものである。また、プレイヤの頭上に１個の超音波送信機と２個の超音波受信機とを装備し、送信機から送波された超音波パルスであってプレイヤの頭部で反射し、両受信機で受波された超音波パルスの各伝搬時間とその時間差とから頭部位置を算定し、算定された頭部位置に、擬似３次元のゲーム画面を生成する基準となる擬似カメラの視点を連動させる業務用ゲーム機が知られている。
【０００３】
【発明が解決しようとする課題】
擬似カメラの視点をプレイヤの動きに連動させることにより、臨場感あるゲーム画像を提供する家庭用ゲーム機を実現することは業務用ゲーム機の場合と異なり、容易ではない。例えば業務用のように、固定的なプレイ領域が確保されているわけではなく、場所的、時間的に撮影画像中に含まれる背景画像の処理の問題があり、また前述したような撮影画像から検出容易な特殊な被検知体の購入をプレイヤに強いることにも限界がある。
【０００４】
本発明は上記に鑑みてなされたもので、撮像手段をディスプレイ画面の前方のプレイ領域を視野とする向きにして所望する位置に配置し、撮像画像に基づいてプレイヤの注目部位の変化方向及び変化量に前記擬似カメラの視点を連動させて移動するようにしたビデオゲーム装置、ビデオゲームにおける擬似カメラ視点移動制御方法及びプログラムを提供することを目的とするものである。
【０００５】
【課題を解決するための手段】
請求項１記載の発明は、画像を表示するディスプレイと、擬似カメラの視点からのゲーム画像を作成し、該画像を前記ディスプレイ画面に表示する表示制御手段と、ディスプレイの表示画像に応答する、プレイヤからの反応を受けてゲーム進行を行うゲーム制御部とを備えたビデオゲーム装置において、前記ディスプレイ画面の前方のプレイ領域を視野とする向きにして配置可能にされ、配置状態でプレイ領域を周期的に撮像する撮像手段と、撮像画像からプレイヤの注目部位の位置を検出する位置検出手段と、ゲーム開始前にプレイヤの前記プレイ領域内での初期位置に対するキャリブレーション処理を行う初期プレイ位置設定手段と、検出された注目部位の位置の平面的な動きを検出する動作検出手段と、検出された注目部位の位置の変化方向及び変化量に連動させて前記擬似カメラの視点を移動させる視点変更手段とを備えてなり、前記初期プレイ位置設定手段は、前記ディスプレイ画面の所定位置に注目部位基準マーカと前記位置検出手段で検出されたプレイヤの注目部位を示す現在認識位置マークとを表示し、両マークの位置関係によって適正化されたことを示すべく両マークの一方の表示形態を変化させることを特徴とするものである。
【０００６】
請求項２記載の発明は、擬似カメラの視点からのゲーム画像を作成し、該画像をディスプレイの画面に表示すると共に、前記ディスプレイの表示画像に応答する、プレイヤからの反応を受けて擬似カメラの視点を移動させながらゲーム進行をコンピュータに行わせるビデオゲームにおける擬似カメラ視点移動制御方法において、コンピュータの位置検出手段が、前記ディスプレイ画面の前方のプレイ領域を視野とする向きにして所望する位置に配置される撮像手段でプレイ領域を周期的に撮像しながら、撮像された画像からプレイヤの注目部位を検出し、コンピュータの初期プレイ位置設定手段が、ゲーム開始前にプレイヤの前記プレイ領域内での初期位置に対するキャリブレーション処理を行い、コンピュータの動作検出手段が、検出された注目部位の位置の平面的な動きを検出し、コンピュータの視点変更手段が、検出された注目部位の位置の変化方向及び変化量に連動させて前記擬似カメラの視点を移動し、かつ、前記初期プレイ位置設定手段が、前記ディスプレイ画面の所定位置に注目部位基準マーカと前記位置検出手段で検出されたプレイヤの注目部位を示す現在認識位置マークとを表示し、両マークの位置関係によって適正化されたことを示すべく両マークの一方の表示形態を変化させることを特徴とするものである。
【０００７】
請求項３記載の発明は、擬似カメラの視点からのゲーム画像を作成し、該画像をディスプレイの画面に表示すると共に、前記ディスプレイの表示画像に応答する、プレイヤからの反応を受けて擬似カメラの視点を移動させながらゲーム進行をコンピュータに行わせるビデオゲームにおける擬似カメラ視点移動制御プログラムであって、コンピュータを、前記ディスプレイ画面の前方のプレイ領域を視野とする向きにして所望する位置に配置される撮像手段でプレイ領域を周期的に撮像しながら、撮像された画像からプレイヤの注目部位を検出する位置検出手段と、ゲーム開始前にプレイヤの前記プレイ領域内での初期位置に対するキャリブレーション処理を行う初期プレイ位置設定手段と、検出された注目部位の位置の平面的な動きを検出する動作検出手段と、検出された注目部位の位置の変化方向及び変化量に連動させて前記擬似カメラの視点を移動させる視点変更手段として機能させると共に、前記初期プレイ位置設定手段が、前記ディスプレイ画面の所定位置に注目部位基準マーカと前記位置検出手段で検出されたプレイヤの注目部位を示す現在認識位置マークとを表示し、両マークの位置関係によって適正化されたことを示すべく両マークの一方の表示形態を変化させることを特徴とするものである。
【０００８】
請求項１、２、３記載の発明によれば、擬似カメラの視点からのゲーム画像、例えば３次元画像が作成され、該画像がディスプレイの画面に表示されると共に、前記ディスプレイの表示画像に応答する、プレイヤからの反応、例えば姿勢変化を受けて擬似カメラの視点が移動されながらゲームが進行される。また、撮像手段が前記ディスプレイ画面の前方のプレイ領域を視野とする向きにして所望する位置に配置され、プレイ領域が周期的に撮像される。そして、撮像された画像からプレイヤの注目部位例えば頭部が検出され、さらに該注目部位の位置の平面的な動きが検出される。検出された注目部位の位置に擬似カメラの視点がくるように、すなわち擬似カメラの変化方向及び変化量に連動（追従）させて前記擬似カメラの視点が移動される。一方、ゲーム開始前にプレイヤの前記プレイ領域内での初期位置に対するキャリブレーション処理が初期プレイ位置設定手段によって実行される。すなわち、初期プレイ位置設定手段により、前記ディスプレイ画面の所定位置に注目部位基準マーカと前記位置検出手段で検出されたプレイヤの注目部位を示す現在認識位置マークとが表示され、両マークの位置関係によって適正化されたことを示すべく両マークの一方の表示形態が変化させられる。この表示形態の変化により、プレイヤの初期位置に対するキャリブレーションが終了する。
【０００９】
【発明の実施の形態】
図１は、本発明の一実施形態に係るビデオゲーム装置を用いてプレイヤがゲームを行う状況を説明する斜視図である。同図に示すように、ゲーム装置は、ディスプレイとしての家庭用テレビ受像器４０、撮像手段としてのカメラユニット４２、家庭用ゲーム機４６、及びガンコントローラ４８を含んで構成されており、ガンシューティングゲームを実現するためのものである。
【００１０】
家庭用テレビ受像器４０及び家庭用ゲーム機４６は例えばキャビネット４４上に載置されており、カメラユニット４２は本実施形態では家庭用テレビ受像器４０上に載置されている。カメラユニット４２はプレイヤＰの姿をリアルタイムに撮像するデジタルカメラであり、家庭用ゲーム機４６にケーブルで接続されている。デジタルカメラは撮影レンズの光軸上であって結像位置に２次元配列された受光素子、例えば電荷結合素子（ＣＣＤ）が配置され、所定の露光時間で視野内の被写体（プレイヤ）を光像として撮像するものである。
【００１１】
家庭用ゲーム機４６は家庭用テレビ受像器４０に接続されており、家庭用ゲーム機４６で生成されるゲーム画面を表示するとともに、ゲーム音楽やゲーム効果音を出力し、さらに立ち位置適正化処理時には、撮像したプレイヤ画像をリアルタイムで家庭用ゲーム機４６に供給するようになっている。ガンコントローラ４８は拳銃型のゲームコントローラであり、家庭用ゲーム機４６のコントローラ接続端子にケーブルで接続されている。そして、ガンコントローラ４８をプレイヤＰが手に持ち、家庭用テレビ受像器４０に向けると、その銃身方向が家庭用ゲーム機４６に入力されるようになっている。また、ガンコントローラ４８には引き金を模したトリガーが設けられており、トリガーの状態（トリガーを引いたかどうか）を示す信号が家庭用ゲーム機４６に入力されるようになっている。
【００１２】
家庭用ゲーム機４６では、３次元ゲーム空間（仮想３次元空間）がメモリ上に構築されており、所定空間位置に配置された擬似カメラの視点から３次元ゲーム空間を見た様子が家庭用テレビ受像器４０に映し出されるようになっている。このとき、家庭用ゲーム機４６は、プレイヤ画像からプレイヤＰの頭部位置を認識して、頭部位置に前記視点の位置を連動させるように視点変更処理を施している。このため、プレイヤＰがカメラユニット４２の前で体を動かすと、それに応じて家庭用テレビ受像器４０に映し出されるゲーム画面が変化するようになり、プレイヤＰは自分自身があたかも３次元ゲーム空間に入り込んだような感覚（臨場感）を得ることができる。そうして、家庭用ゲーム機４６では、３次元ゲーム空間に現れる敵キャラクタをプレイヤＰがガンコントローラ４８を用いて射撃するとともに、プレイヤＰが体（具体的には頭の位置）を動かすことにより、敵キャラクタからの攻撃（射撃）を避けることができるゲームを実現している。
【００１３】
図２は、ゲーム装置１０のハードウェア構成を示す図である。同図に示すように、ゲーム装置１０は、家庭用テレビ受像器４０であるモニタ１８及びスピーカ２２に接続された家庭用ゲーム機４６に、情報記憶媒体たるＤＶＤ（Digital Versatile Disk；商標）２５が装着されることにより構成される。ここでは、ゲームプログラムやゲームデータを家庭用ゲーム機４６に供給するためにＤＶＤ２５を用いるが、ＣＤ−ＲＯＭ（Compact Disk - Read Only Memory；商標）やＲＯＭ（Read Only Memory）カード等、他のあらゆる情報記憶媒体を用いることができる。また、インターネット等のデータ通信網を介して遠隔地からゲームプログラムやゲームデータを家庭用ゲーム機４６に供給することもできる。
【００１４】
家庭用ゲーム機４６は、マイクロプロセッサ１４、画像処理部１６、主記憶部２６、入出力処理部３０、周辺機器インタフェース３１、音声処理部２０、及びＤＶＤ再生部２４を含んで構成されている。マイクロプロセッサ１４、画像処理部１６、主記憶部２６、入出力処理部３０及び周辺機器インタフェース３１は、バス１２によって相互データ通信可能に接続され、入出力処理部３０には、ガンコントローラ４８、音声処理部２０及びＤＶＤ再生部２４が接続されている。また、周辺機器インタフェース３１にはカメラユニット４２が接続されている。家庭用ゲーム機４６の各構成要素は筐体内に収容されている。ここでは、モニタ１８として家庭用テレビ受像器４０が用いられ、スピーカ２２としてその内蔵スピーカが用いられる。
【００１５】
マイクロプロセッサ１４は、図示しないＲＯＭに格納されるオペレーティングシステムやＤＶＤ２５から読み出されるゲームプログラムに基づいて、家庭用ゲーム機４６の各部を制御する。バス１２はアドレス及びデータを家庭用ゲーム機４６の各部でやり取りするためのものである。また、主記憶部２６には、ＤＶＤ２５から読み取られたゲームプログラム及びゲームデータが必要に応じて書き込まれる。画像処理部１６はＶＲＡＭ（Video Random Access Memory）を含んで構成されており、マイクロプロセッサ１４から送られる画像データを受け取ってＶＲＡＭ上にゲーム画面を描画するとともに、その内容をビデオ信号に変換してモニタ１８に出力する。
【００１６】
画像処理部１６は、擬似３次元空間上における擬似カメラの視点から見た各キャラクタ（敵キャラクタや、ゲーム空間内に配置される種々の建造物他の物体キャラクタ等）の座標位置等の計算、光源計算処理、計算された擬似３次元空間上の座標位置から２次元空間上での座標位置への変換のための計算及び主記憶部２６の表示バッファに描画すべき画像を構成するポリゴンを位置付ける処理、さらに各ポリゴンに対するテクスチャマッピング処理を行う。キャラクタの座標位置計算における擬似カメラの視点情報は、後述するように位置認識部７１から伝送されるプレイヤの注目部位例えば頭部の位置情報が用いられる。従って、擬似カメラの視点はプレイヤの眼と実質一致し、本実施形態ではプレイヤに対応するキャラクタはモニタ画面に表示されない。
【００１７】
入出力処理部３０はガンコントローラ４８、音声処理部２０及びＤＶＤ再生部２４とマイクロプロセッサ１４との間のデータ通信を中継するためのインタフェースである。ガンコントローラ４８は、図１に示されるように拳銃型のゲームコントローラであり、トリガー状態及び銃身（銃口）方向（具体的には家庭用テレビ受像器４０の画面上での指示位置）を家庭用ゲーム機４６に入力するためのものである。ガンコントローラ４８には、例えば公知の構成を採用することができる。すなわち、プレイヤＰがガンコントローラ４８のトリガーを引くと、その情報（トリガー信号）がコントローラ端子から家庭用ゲーム機４６に入力されるようにする。一方、家庭用ゲーム機４６では、該トリガー信号が入力されたとき、ゲームプログラムにより、例えば１フレームだけ所定色例えば白色の画面を表示することにより、家庭用テレビ受像器４０の画面上で輝点を走査させる。ガンコントローラ４８には銃口奥部に指向性の強い受光センサを備えるようにしておき、該受光センサで家庭用テレビ受像器４０の輝点を検出すると、走査開始時刻から輝点検出時刻までの時間を算出するとともに、そこから家庭用テレビ受像器４０の画面上での輝点の位置（座標）を算出するようにする。そして、その位置、すなわち銃身方向を家庭用ゲーム機４６に入力すれば、ガンコントローラ４８を好適に実現することができる。なお、走査開始時刻は、家庭ゲーム機４６から家庭用テレビ受像器４０に供給されるビデオ信号に含まれている同期信号から取得するようにすれば好適である。
【００１８】
そして、プレイヤから射撃された弾丸に対するテレビ受像器４０の画面のゲーム空間における弾道計算を順次実行し、好ましくは計算の都度、画面内に弾丸を表示させる等して、画面に表示されている敵キャラクタに命中したか否かを判断する。命中したか否かの判断は逐次の弾道計算の結果と敵キャラクタの位置座標とから座標の一致乃至は実質的な一致によって行うようにしている。
【００１９】
音声処理部２０はサウンドバッファを含んで構成されており、ＤＶＤ２５から読み出されてサウンドバッファに記憶された音楽やゲーム効果音等のデータを再生してスピーカ２２から出力する。ＤＶＤ再生部２４は、マイクロプロセッサ１４からの指示に従ってＤＶＤ２５に記録されたゲームプログラム及びゲームデータを読み取る。周辺機器インタフェース３１は家庭用ゲーム機４６に各種周辺機器を接続するためのインタフェースであり、例えばＵＳＢ（Universal Serial Bus）インタフェースを採用することができる。周辺機器インタフェース３１には、ここではカメラユニット４２が接続される。カメラユニット４２は、例えばグレイスケール（白黒２５６階調）の撮影画像を所定時間おき（例えば１／６０秒等）に家庭用ゲーム機４６に入力するための公知のデジタルカメラである。このカメラユニット４２は、プレイヤＰの姿を撮影するため、ここではレンズをプレイヤＰに向けた状態で家庭用テレビ受像器４０の上に載置されている。
【００２０】
ここで、タイトル画面を表示するための家庭用ゲーム機４６の処理について説明する。この処理は、ＤＶＤ２５に格納されているゲームプログラムに基づいて実行されるものである。
【００２１】
図３は、マイクロプロセッサ１４のソフトウェア構成を示す図である。
図３において、マイクロプロセッサ１４は初期プレイ位置設定部７０、位置認識部７１、フィルタ処理部７２及び視点変更処理部７３を備え、各部の機能はＤＶＤ２５に格納されているゲームプログラムに基づいて実行される。位置認識部７１は撮像制御部７１１１〜重心計算部７１２３を備え、フィルタ処理部７２は情報更新部７２１１〜バッファサイズ判定部７２１４を備える。
【００２２】
初期プレイ位置設定部７０はプレイヤＰの立ち位置を適正化する初期キャリブレーション処理を行うもので、図６に示すように、モニタ１８の所定位置にプレイヤ立ち位置案内画像５０を表示すると共に、その画像５０内の所定位置、本実施形態では中央やや上部に例えば円環状のマーカで示す頭部基準位置マーカ５２を表示し、さらにカメラユニット４２により撮像したプレイヤ画像５６と、該画像５６から得た例えば丸点で示す現在認識位置マーカ５４を重畳表示する。プレイヤＰの立ち位置や姿勢、あるいはカメラユニット４２の撮影方向や撮影位置を変更することで、現在認識位置マーカ５４が円環状の頭部基準位置マーカ５２の内側に入ると、基準位置（初期プレイ位置）を適正化したとして、頭部基準位置マーカ５２の表示態様（例えば色や点滅表示の有無）を変化させるようにしている。
【００２３】
次に、図４（ａ）〜（ｄ）は、プレイヤＰの頭部が上下方向に移動した場合に家庭用テレビ受像器４０に表示される一連のゲーム画面の例を示している。同図（ａ）〜（ｄ）は、プレイヤＰがカメラユニット４２の前で中腰姿勢から徐々に立ち上がって略直立の姿勢になった場合、すなわちプレイヤＰの頭が下方から上方に移動した場合の４画面を表示順に示すものである。同図（ａ）に示すゲーム画面は、視点のすぐ前方に机状の障害物Ｂが存在しており、プレイヤＰはこの障害物Ｂの手前下方に隠れている状況を表している。この場合、ゲーム画面において、障害物Ｂの向こうに銃を手にした敵ゲームキャラクタＡＣ１の頭部の一部だけが表されている。次に、同図（ｂ）に示すゲーム画面は、プレイヤＰがやや頭を持ち上げて、頭の高さが障害物Ｂの上面の高さに略一致した状況を表している。この場合、ゲーム画面において、敵ゲームキャラクタＡＣ１の胸部までが表されるとともに、その後方にさらに２人の敵ゲームキャラクタＡＣ２，ＡＣ３の頭部が新たに表されている。同図（ｃ）に示すゲーム画面は、プレイヤＰがさらに背を伸ばして頭を持ち上げた状況を表している。この場合、ゲーム画面において、プレイヤＰの頭は障害物上面Ｂｓより若干高い位置にあり、３人の敵ゲームキャラクタＡＣ１〜ＡＣ３の上半身が表されるとともに、障害物上面Ｂｓも表される。同図（ｄ）に示すゲーム画面は、プレイヤＰが略直立の姿勢になった状況を表している。この場合、プレイヤＰの首辺りまでが障害物Ｂから露出しており、障害物上面Ｂｓは同図（ｃ）に示すゲーム画面よりも広く表されている。これらの図に示すように、プレイヤＰの頭の位置が上がるにつれて、障害物Ｂの表示位置が下側に移動するとともに、障害物上面Ｂｓや敵ゲームキャラクタＡＣ１〜ＡＣ３の全貌がゲーム画面に徐々に表れる。
【００２４】
次に、図５（ａ）〜（ｄ）は、プレイヤＰの頭部が左右方向に移動した場合に家庭用テレビ受像器４０に表示される一連のゲーム画面の例を示している。同図（ａ）〜（ｄ）は、プレイヤＰがカメラユニット４２の前で体を右側から左側に移動させた場合、すなわちプレイヤＰの頭が右方から左方に移動した場合の４画面を表示順に示すものである。同図（ａ）に示すゲーム画面は、視点のすぐ手前右側にドア又は壁状の障害物Ｂが存在しており、プレイヤＰはこの障害物Ｂの手前に隠れている状況を表している。この場合、ゲーム画面において、障害物Ｂの向こうに銃を手にした敵ゲームキャラクタＡＣ１の腕の一部だけが表されている。次に、同図（ｂ）に示す画面は、プレイヤＰがやや左に移動し、頭が障害物Ｂの左端に略一致した状況を表している。この場合、ゲーム画面において、敵ゲームキャラクタＡＣ１の頭及び胸部までが表されている。同図（ｃ）に示すゲーム画面は、プレイヤＰがさらに左に移動した状況を表している。この場合、ゲーム画面において、敵ゲームキャラクタＡＣ１のほぼ上半身が表されるとともに、さらに敵ゲームキャラクタＡＣ２もその後方に表されている。同図（ｄ）に示すゲーム画面は、プレイヤＰが障害物Ｂから左側に飛び出した状況を表している。この場合、敵ゲームキャラクタＡＣ１，ＡＣ２の他に、さらに敵ゲームキャラクタＡＣ３も表されている。これらの図に示すように、プレイヤＰの頭の位置が左から右に移動するにつれて、障害物Ｂの表示位置が右側に移動するとともに、敵ゲームキャラクタＡＣ１〜ＡＣ３の全貌がゲーム画面に徐々に表れる。
【００２５】
図６は、家庭用ゲーム機４６によって提供されるゲームのタイトル画面（スタート画面）の一例を示す図である。同図に示すタイトル画面は、家庭用ゲーム機４６の起動後、或いはゲーム終了後、新しいゲームの開始前に家庭用テレビ受像器４０に表示されるものである。同図に示すように、このタイトル画面では、画面の両端にメニューボタン画像６２が表示され、中央上方にゲームのタイトル文字列６０が表示されている。さらに、タイトル文字列６０の下側にはプレイヤ立ち位置案内画像５０が表示されている。また、メニューボタン画像６２は各種ゲーム又はオプション設定に移行するための標的であり、プレイヤＰがガンコントローラ４８でメニューボタン画像６２を撃ち抜くと、そのメニューボタン画像６２に対応するゲーム又はオプション設定が始まるようになっている。
【００２６】
プレイヤ立ち位置案内画像５０は、初期プレイ位置設定部７０により表示される、ゲーム開始前にプレイヤＰが立ち位置を適正化するのを助けるための画像であり、同プレイヤ立ち位置案内画像５０を見ながらプレイヤＰはゲーム開始前にカメラユニット４２の前方で自分の立ち位置や姿勢、或いはカメラユニット４２の撮影方向や撮影位置を正す。初期プレイ位置設定部７０は撮影制御部７１１１によりカメラユニット４２で取得されるリアルタイムの画像、すなわちプレイヤ画像５６をベースとして、そこに頭部基準位置マーカ５２及び現在認識位置マーカ５４を重ね合わせ表示するものである。頭部基準位置マーカ５２はプレイヤ画像５６の固定位置（例えばプレイヤ画像５６の中央、上から１５％の位置等）に表示される円環状のマーカであり、プレイヤ画像５６におけるプレイヤＰの頭（の最上部位）の画像位置をゲーム開始前に合わせておくべき場所（基準位置）を示すためのものである。また、このゲーム装置１０では、プレイヤ画像５６からプレイヤＰの頭の現在位置が認識されるようになっており、その認識位置を表す丸点が現在認識位置マーカ５４としてプレイヤ画像５６に重ね合わせ表示されるようになっている。プレイヤＰは自分の体（立ち位置や姿勢）を動かし、或いはカメラユニット４２の撮影方向や撮影位置を変更して、現在認識位置マーカ５４が円環状の頭部基準位置マーカ５２の内側に入るようにすることで、基準位置（初期プレイ位置）を適正化することができる。初期プレイ位置設定部７０は、現在認識位置マーカ５４が、頭部基準位置マーカ５２の内側に表示されているか外側に表示されているかを判断して、その結果に応じて頭部基準位置マーカ５２の表示態様（例えば色や点滅表示の有無）を変化するようにしている。こうして、プレイヤＰがプレイヤ立ち位置案内画像５０を見ながら、自分とカメラユニット４２との位置関係を、ゲーム開始前に容易に適正化できるようにしている。
【００２７】
ここで、タイトル画面を表示するための家庭用ゲーム機４６の処理について説明する。この処理は、ＤＶＤ２５に格納されているゲームプログラムに基づいて実行されるものである。
【００２８】
図７は、家庭用ゲーム機４６によるタイトル画面表示処理を説明するフロー図である。同図に示すように、家庭用ゲーム機４６では、まずマイクロプロセッサ１４が、タイトル画面の背景画像、タイトル文字列６０、メニューボタン画像６２、著作権表示等を画像処理部１６に含まれるＶＲＡＭに描画する（Ｓ１０１）。次に、カメラユニット４２によって取得される画像（プレイヤＰを撮影することを目的にしているため、ここでは「プレイヤ画像」と呼ぶ。）を取得する（Ｓ１０２）。そして、タイトル画面におけるプレイヤ立ち位置案内画像５０の位置にプレイヤ画像が配されるよう、Ｓ１０２で取得したプレイヤ画像をＶＲＡＭに描画する（Ｓ１０３）。
【００２９】
さらに、Ｓ１０２で取得したプレイヤ画像に基づいてプレイヤＰの頭の位置（頭部位置）を認識し、認識結果にフィルタ処理を施した情報（フィルタ処理済み頭部位置）を取得する（Ｓ１０４）。ここでの位置認識処理及びフィルタ処理は後に詳述する。その後、マイクロプロセッサ１４は、タイトル画面に含まれるプレイヤ画像の頭部位置にマーカ（赤点）が表されるよう、フィルタ処理済み頭部位置に対応するＶＲＡＭの座標に現在認識位置マーカ５４を描画する（Ｓ１０５）。
【００３０】
次に、初期プレイ位置設定部７０は、フィルタ処理済み頭部位置が基準位置にあるかを判断する。基準位置は、ゲーム開始前にプレイヤＰの頭部が写されているべきプレイヤ画像中の位置である。そして、フィルタ処理済み頭部位置が基準位置にあれば、既にＶＲＡＭに描画されているプレイヤ画像の基準位置に赤色の頭部基準位置マーカ５２を描画する（Ｓ１０７）。一方、フィルタ処理済み頭部位置が基準位置になければ、プレイヤ画像の基準位置に青色の頭部基準位置マーカ５２を描画する（Ｓ１０８）。その後、ガンコントローラ４８の銃身方向を取得し（Ｓ１０９）、その位置に照準マーカ５８を描画する（Ｓ１１０）。
【００３１】
以上のようにすれば、プレイヤＰとカメラユニット４２との位置関係が適切でない場合には、図８に示すように、タイトル画面において、円環状の頭部基準位置マーカ５２の外に現在認識位置マーカ５４が表示され、頭部基準位置マーカ５２は青色で表示されるようになる。一方、プレイヤＰとカメラユニット４２との位置関係が適切であれば、図６に示すように、タイトル画面において、円環状の頭部基準位置マーカ５２の内に現在認識位置マーカ５４が表示され、頭部基準位置マーカ５２は赤色で表示されるようになる。このため、プレイヤＰは立ち位置を変更し、或いはカメラユニット４２の設置位置又は撮影方向を変更することにより、頭部基準位置マーカ５２がタイトル画面において赤色に表示されるようにして、プレイヤＰとカメラユニット４２との位置関係を簡単に適正化することができる。
【００３２】
プレイヤＰとカメラユニット４２との位置関係が適正化されていないと、ゲーム中にプレイヤＰが屈んだり左右に体をずらしたりとき、頭の位置がプレイヤ画像に入らなくなってしまい、頭の位置を正しく認識することができないことがあり得る。しかしながら、本ゲーム装置１０によれば、プレイヤＰとカメラユニット４２との位置関係をゲーム開始前に適正化しておくことができるので、ゲーム中にプレイヤＰが屈んだり左右に体をずらしたりしたときでも、頭の位置を正しく認識することができる。
【００３３】
なお、プレイヤＰに対する案内は以上説明したものに限らない。例えば、図９に示す案内画像のように、プレイヤ画像を表示せず、現在認識位置マーカ５４と頭部基準位置マーカ５２だけを表示するようにしてもよい。また、現在認識位置マーカ５４と頭部基準位置マーカ５２の位置関係によって頭部基準位置マーカ５２の表示態様を変化させる代わりに、現在認識位置マーカ５４の表示態様（色彩や点滅パターン等）を変化させるようにしてもよい。或いは、別の箇所に現在認識位置マーカ５４と頭部基準位置マーカ５２との位置関係に応じた表示をするようにしてもよい。また、現在認識位置マーカ５４の表示を省略してもよい。
【００３４】
さらに、現在認識位置マーカ５４だけを表示し、頭部基準位置マーカ５２が本来表示されるべき位置に現在認識位置マーカ５４が移動してきたとき、現在認識位置マーカ５４の表示態様を変化するようにしてもよい。こうしても、案内画像を見ながら、プレイヤＰは自分とカメラユニット４２との位置関係を正すことができる。
【００３５】
その他、プレイヤＰの頭部の現在認識位置と基準位置との関係に従って、例えば「右に移動してください。」、「左に移動してください。」、「手前に寄ってください。」、「後ろに下がってください」等のメッセージを表示するようにしてもよい。また、現在認識位置マーカ５４や頭部基準位置マーカ５２の形状は以上説明したものに限らず、様々な形状を採用することができる。さらに、プレイヤＰに対する案内はゲーム開始前に行うようにすればよい。このため、例えばタイトル画面とは別の画面でプレイヤＰに対する案内を行うようにしてもよい。
【００３６】
次に、家庭用ゲーム機４６におけるプレイヤ画像処理を説明する。
【００３７】
図１０は、撮像制御部による制御を受けてカメラユニット４２から取得されるプレイヤ画像に基づいてプレイヤＰの頭部位置を認識し、認識結果にフィルタを施す処理を説明するフロー図である。また、図１１は、フィルタ処理を詳細に説明するフロー図である。これらの処理は、ＤＶＤ２５に格納されているゲームプログラムに従って、家庭用ゲーム機４６においてタイマ７１１２により管理される所定時間おき（例えば１／６０秒おき）に実行されるものである。
【００３８】
カメラユニット４２によってプレイヤ画像が取得されると、撮影画像取込部７１１３は、図１０に示すように、まず該プレイヤ画像を主記憶部２６に用意された画像バッファに格納する（Ｓ２０１）。この画像バッファは、所定時間おきにカメラユニット４２で取得されるプレイヤ画像を記憶するためのものであり、最新のプレイヤ画像も含めて、所定数（ここでは合計４つ）のプレイヤ画像が時間順に記憶される。そして、最新のプレイヤ画像が取得されると、該プレイヤ画像が画像バッファに追加記憶されるとともに、最も古いプレイヤ画像が破棄される。図１２には、画像バッファに記憶される一連のプレイヤ画像の例を示す図である。ここで、同図（ａ）が最新のプレイヤ画像、同図（ｂ）が直前のプレイヤ画像、同図（ｃ）がその前のプレイヤ画像、同図（ｄ）がそのさらに前の（画像バッファ中、最も古い）プレイヤ画像を示している。同図に示す例は、プレイヤＰがカメラユニット４２の前で左から右に体を揺らしている状況を示している。
【００３９】
次に、平均化処理部７１１４は、画像バッファに記憶されるプレイヤ画像のうち、最新のものを除く３つのプレイヤ画像の平均化画像を生成する（Ｓ２０２）。平均化画像は、本実施形態では後述するプレイヤＰの動きと１／６０秒という画像取り込み周期とから経験的、実験的に得られる好ましい数としての３つのプレイヤ画像に対し、その対応画素に与えられた各色情報（白黒２５６階調）を平均化して得られる画像である。そして、第１の差分・２値化処理部７１１５により、この平均化画像と最新のプレイヤ画像との差分が生成され（Ｓ２０３）、この差分画像は、両画像の対応画素に与えられた色情報を引き算して得られる画像を閾値と大小比較して二値化（白黒化）される。図１３は、この差分画像の一例である。そして、画像抽出部７１１６により、この差分画像から前回認識位置（プレイヤＰの頭部位置）を中心とする所定半径内の画像が抽出される（Ｓ２０４）。図１４は、この抽出画像の一例を示している。同図において、黒丸は前回認識位置を示しており、実際には抽出画像には表されない。
【００４０】
次に、面積判定部７１１７は、抽出画像において黒く表された領域（差分が残存する領域）の面積が所定閾値未満か否かを調べる（Ｓ２０５）。そして、抽出画像において黒く表された領域の面積が所定閾値未満の場合、再出力部７１１８は、主記憶部２６に予め記憶されている前回出力（フィルタ処理済み頭部位置）を再出力する（Ｓ２１３）。プレイヤＰの動きが少ない場合、Ｓ２０３で得られる差分画像においては、図１５に示すようにプレイヤＰの輪郭だけ差分が残存することになる。そして、この場合、前回認識位置の近傍を抽出すると、図１６に示すようにその面積は小さくなる。Ｓ２０２からＳ２０５の処理では、このようにプレイヤＰの動きが少ないときは前回出力を再出力するようにして、出力値の変動を抑えるようにしている。
【００４１】
一方、抽出画像において黒く表された領域の面積が所定閾値以上の場合、次に、第２の差分・２値化処理部７１１９により、最新のプレイヤ画像（図１２（ａ））とその直前のプレイヤ画像（図１２（ｂ））とが画像バッファから読み出され、その差分画像（二値化画像）が生成される（Ｓ２０６）。図１７は、この差分画像の一例を示す図である。そして、画像抽出部７１１６は、この差分画像から前回認識位置を中心とする所定半径内（選出範囲）の画像を抽出する。この所定半径は面積判定部７１１７での判定用として採用された前述の所定半径と同一でもよく、あるいは移動量が大きい点を考慮して多少大きく設定してもよい。図１８は、この抽出画像の一例を示している。同図において、黒丸は前回認識位置を示しており、実際には抽出画像には表されない。抽出画像において黒く表されたピクセルの位置は、Ｓ２１１においてプレイヤＰの頭部位置認識に用いられる。すなわち、この抽出画像はプレイヤＰの頭部位置を認識するときの基礎位置群を含んでいる。そして、基礎位置群のピクセルから頭部位置が求められることになる。
【００４２】
変動量算出部７１２０は、この抽出画像において黒く表された領域（基礎位置群；差分が残存する領域）の変動量、本実施形態では高さ及び幅を計測し、変動判定部７１２１により、その値がそれぞれ所定閾値未満か否かが調べられる（Ｓ２０８）。そして、変動判定部７１２１により、いずれかが所定閾値未満であれば、抽出範囲（選出範囲）がプレイヤＰに十分に近づくまでは（Ｓ２０９）、画像移動処理部７１２２により抽出範囲（選出範囲）をプレイヤＰの方向にずらし、抽出画像を再生成する（Ｓ２１０）。具体的には、Ｓ２０６の差分画像（二値化画像）において黒く表された領域の重心を、重心計算部７１２３により算出し、抽出範囲（選出範囲）の中心を前回認識位置から該重心に所定距離ずつ近づける。図１９は、この処理の様子を説明するための図であり、ハッチングを施した領域は差分が残存している領域、黒三角は差分の重心位置、黒丸は前回認識位置を示している。同図では、プレイヤＰがカメラユニット４２の前で左上から右下に急激に移動した様子が示されている。Ｓ２１０では、こうした場合、画像移動処理部７１２２によって抽出範囲（選出範囲）の中心を同図において黒丸の位置から黒三角の方向に徐々にずらすのである。そして、前回認識位置と重心との距離の所定割合、例えば７０％の距離を移動しても依然として抽出画像において黒く表された領域が狭い場合、前回出力を再出力する（Ｓ２１３）。一方、抽出範囲（選出範囲）をずらした結果、図２０に示すように、抽出画像において黒く表された領域の高さ及び幅のいずれもが、それぞれ所定閾値以上となれば、そのときの抽出画像から今回の頭部位置を決定する（Ｓ２１１）。例えば、抽出画像において黒く表された領域の中央、上から数ピクセルの位置を今回の頭部位置として選出する。その後、こうして選出（認識）された今回の頭部位置にフィルタ処理を施し、フィルタ処理済み頭部位置を出力する（Ｓ２１２）。
【００４３】
以上のようにすれば、原則として前回認識位置に対応する選出範囲内で基礎位置群を選出するようにして、例外的に選出範囲を変更して基礎位置群を再選出することになり、プレイヤ画像にプレイヤ以外の動くものが写っている場合にも、その影響を排除することができるとともに、特に頭部位置が素早く移動した場合であっても、適正な位置認識をすることができる。
【００４４】
次に、上述したフィルタ処理では、図２１（ａ）に示すように、情報更新部７２１１により、最大で１６個の頭部位置（Ｐｎ〜Ｐｎ−１５；添字は認識時刻に対応する。）を格納する頭部位置バッファが主記憶部２６に用意される。この頭部位置バッファでは、所定時間おきに認識されるプレイヤＰの頭部位置を記憶するためのものであり、最新の頭部位置も含めて、最大で１６個の頭部位置が時間順に記憶される。そして、最新の頭部位置が認識されると、該頭部位置が頭部位置バッファに追加記憶されるとともに、最も古い頭部位置が破棄される。例えば、同図（ａ）の状態で頭部位置Ｐｎ＋１が認識されると、該頭部位置Ｐｎ＋１が頭部位置バッファに追加記憶されるとともに、最も古い頭部位置Ｐｎ−１５が頭部位置バッファから破棄される。また、この頭部位置バッファは、バッファサイズ、すなわち頭部位置の記憶個数が可変となっており、本実施形態では、例えば同図（ｂ）に示すように記憶個数が２個の状態、４個の状態、８個の状態、及び同図（ａ）に示すように記憶個数が１６個の状態、全部で４通りの状態を取りうる。
【００４５】
図１１に示すように、フィルタ処理では、まず現在の頭部位置バッファのバッファサイズｎが取得される（Ｓ３０１）。そして、情報更新部７２１１により、現バッファサイズｎが最大サイズＮｍａｘ（ここでは１６）に等しければ（Ｓ３０２）、最も古い頭部位置を頭部位置バッファから破棄して、最新の頭部位置を頭部位置バッファに記憶する（Ｓ３０５）。一方、バッファサイズ判定部７２１４により、現バッファサイズｎが最大サイズＮｍａｘに等しくなければ、古い頭部位置を破棄することなく、最新の頭部位置を頭部位置バッファに追加記憶し（Ｓ３０３）、さらに現バッファサイズｎに１を加える（Ｓ３０４）。
【００４６】
次に、頭部位置バッファに格納されている各頭部位置の移動量を算出する（Ｓ３０６）。具体的には、移動量算出部７２１２により、各頭部位置とその直前の頭部位置との距離が算出される。例えば図２１の例では、頭部位置Ｐｎと頭部位置Ｐｎ−１との距離、頭部位置Ｐｎ−１と頭部位置Ｐｎ−２との距離、頭部位置Ｐｎ−２と頭部位置Ｐｎ−３との距離、…、頭部位置Ｐｎ−１４と頭部位置Ｐｎ−１５との距離が算出される（データが１６個揃っていない場合（例えば後述するように破棄）には、揃っているデータで行う）。さらに、移動量算出部７２１２は算出された移動量の平均値を算出し、次いでバッファサイズ決定部７２１３により、その値に対応するバッファサイズＮが決定される（Ｓ３０７）。本実施形態では、平均値が１１以上の場合はバッファサイズＮ＝２とし、９以上１１未満の場合はバッファサイズＮ＝４とし、７以上９未満の場合はバッファサイズＮ＝８とし、バッファサイズ７未満の場合はバッファサイズＮ＝１６とする。なお、ここでは頭部位置バッファに記憶される各頭部位置の移動量の平均に基づいてバッファサイズＮを決定するようにしたが、他の計算方法を採用するようにしてもよい。例えば、各頭部位置の移動量に重み付けをしたり、移動量を算出する対象を頭部位置バッファに記憶されている頭部位置のうち比較的新しいものに限定したりすることによって、最新の頭部位置が急激に動いたと判断される場合に、速やかにバッファサイズＮが小さくなるようにしてもよい。
【００４７】
次に、バッファサイズ判定部７２１４は、現バッファサイズｎとバッファサイズＮとを比較し（Ｓ３０８）、現バッファサイズｎがバッファサイズＮよりも大きければ、頭部位置バッファに記憶されている頭部位置を古いものから順に破棄して、現バッファサイズｎがバッファサイズＮとなるようにする（Ｓ３０９）。一方、現バッファサイズｎがバッファサイズＮ以下であれば、Ｓ３０９をスキップする。その後、頭部位置バッファに記憶されている頭部位置を平均し、その値を主記憶部２６に前回出力として保存するとともに（Ｓ３１１）、フィルタ処理済み頭部位置として出力する（Ｓ３１２）。こうして出力されるフィルタ処理済み頭部位置は、上述したように、３次元ゲーム空間を描画するとき、視点位置の決定に用いられる。また、タイトル画面においてプレイヤ立ち位置案内画像５０を表示するとき、現在認識位置マーカ５４の表示位置の決定に用いられる。なお、ここでは頭部位置バッファに記憶されている頭部位置の平均値をフィルタ処理済み頭部位置としているが、頭部位置バッファに記憶されている頭部位置に重み付けをして、例えばフィルタ処理済み頭部位置に対する最新の頭部位置の影響がより大きくなるようにしてもよい。
【００４８】
以上説明したフィルタ処理によれば、頭部位置バッファに記憶されている頭部位置の平均値を出力するようにしたので、フィルタ処理済み頭部位置の値の変動を抑えることができる。また、頭部位置バッファのサイズを該頭部位置バッファに記憶されている各頭部位置の移動量に応じて変化させるようにしたので、プレイヤＰの頭部位置が急に動いた場合、それに応じてフィルタ処理済み頭部位置の値を速やかに変化させることができる。このため、フィルタ処理済み頭部位置を用いたゲーム処理を好適に行うことができるようになる。
【００４９】
そして、視点変更処理部７３は得られた位置情報を画像処理部１６に伝送する。
これにより、画像処理部１６は、前述したようにして、入手した位置情報を基に擬似３次元空間上における擬似カメラの視点を設定し、そこから見た画像の表示処理を行う。
【００５０】
なお、本発明は上記実施の形態に限定されるものではない。
【００５１】
（１）カメラユニット４２として、所定距離だけ離間された２台のカメラ装置を接地し、かつ互いに交差する（好ましくは直交する）向きに配置し、それぞれからのプレイヤ画像からプレイヤの注目部位の平面的な動きを算出して、一方のカメラ（モニタ１８と同じ向き）で上下左右の動きを、他方のカメラ（モニタ１８の画面と直交する向き）でモニタ１８に対する遠近の動きを得るようにすればよい。このようにすれば、プレイヤＰの３次元的な動きが検出し得るので、擬似カメラ視点を上下左右に加えて前後にも移動することが可能となる。
【００５２】
（２）本実施形態では、ゲーム画像として３次元ゲーム空間上での画像を採用したが、本発明は、２次元ゲーム空間で行うゲームにも適用可能であり、この場合、画面上で上下左右に移動させるようにすることができる。
【００５３】
（３）以上の説明ではガンシューティングゲームに本発明を適用する例を取り上げたが、撮像手段によって画像に取得して、該画像に基づいてゲームを進行させるゲームであれば、あらゆる種類のゲームに適用することができる。
【００５４】
（４）ここではプレイヤＰの頭を位置認識の対象としたが、その他の部位を位置認識の対象としてもよい。さらに、プレイヤＰが手にするもの、例えばゴルフクラブおもちゃ、テニスクラブおもちゃ、銃器おもちゃ等、様々な物を位置認識の対象としてもよい。
【００５５】
【発明の効果】
以上説明したように、請求項１、２、３記載の発明によれば、撮像手段をディスプレイと対応させて所望位置に容易に載置等できると共に、擬似カメラの視点をプレイヤの自由な動きに追従させるようにしてプレイヤの意図する視点からの画像を積極的に提示することが出来、ゲーム性の幅を広げることができ、興趣乃至臨場感に富んだゲームを提供し得る。しかも、プレイヤと撮像手段との位置関係をゲーム開始前に容易に適正化しておくことができるので、ゲーム中にプレイヤが屈んだり左右に体をずらしたりしたときでも、頭の位置を正しく認識することができる。
【図面の簡単な説明】
【図１】本発明の実施の形態に係るゲーム装置を用いてプレイヤがガンシューティングゲームを楽しむ様子を示す図である。
【図２】ゲーム装置のハードウェア構成を示す図である。
【図３】ゲーム装置のマイクロプロセッサのソフトウェア構成を示す図である。
【図４】プレイヤが上下に動いた場合に表示されるゲーム画面の一例を説明する図である。
【図５】プレイヤが左右に動いた場合に表示されるゲーム画面の一例を説明する図である。
【図６】タイトル画面（スタート画面）の一例を示す図である。
【図７】タイトル画面表示処理を説明するフロー図である。
【図８】タイトル画面に含まれるプレイヤ立ち位置案内画像の一例を示す図である。
【図９】タイトル画面に含まれるプレイヤ立ち位置案内画像の変形例を示す図である。
【図１０】プレイヤ画像処理を説明する図である。
【図１１】認識位置に対するフィルタ処理を説明する図である。
【図１２】一連のプレイヤ画像を示す図である。
【図１３】平均化プレイヤ画像と最新プレイヤ画像との差分画像を示す図である。
【図１４】図１３に示す画像から前回認識位置近傍を抽出した結果を示す図である。
【図１５】プレイヤの動きが少ない場合における、平均化プレイヤ画像と最新プレイヤ画像との差分画像を示す図である。
【図１６】図１５に示す画像から前回認識位置近傍を抽出した結果を示す図である。
【図１７】最新プレイヤ画像と直前プレイヤ画像との差分画像を示す図である。
【図１８】図１７に示す画像から前回認識位置近傍を抽出した結果を示す図である。
【図１９】前回認識位置が最新プレイヤ画像及び直前プレイヤ画像から離れている場合における、最新プレイヤ画像と直前プレイヤ画像との差分画像を示す図である。
【図２０】前回認識位置からプレイヤ側に寄った位置を図１９に示す画像から抽出した結果を示す図である。
【図２１】認識位置バッファの記憶内容を示す図である。
【符号の説明】
１０ ゲーム装置、１２ バス、１４ マイクロプロセッサ、１６ 画像処理部、１８ モニタ、２４ ＤＶＤ再生部、２５ ＤＶＤ、２６ 主記憶部、３０
入出力処理部、３１ 周辺機器インタフェース（Ｉ／Ｆ）、４０ 家庭用テレビ受像器、４２ カメラユニット、４６ 家庭用ゲーム機、４８ ガンコントローラ、７０ 初期プレイ位置設定部、７１ 位置認識部（位置検出手段、動作検出手段）、７２ フィルタ処理部、７３ 視点変更処理部、７１１１ 撮像制御部、７１１２ タイマ、７１１３ 撮影画像取込手段、７１１４ 平均化処理部、７１１５ 第１の差分・２値化処理部、７１１６ 画像抽出部、７１１７ 面積判定部、７１１８ 再出力部、７１１９ 第２の差分・２値化処理部、７１２０ 変動量算出部、７１２１ 変動判定部、７１２２ 画像移動処理部、７１２３ 重心計算部、７２１１ 情報更新部、７２１２ 移動量算出部、７２１３ バッファサイズ決定部、７２１４ バッファサイズ判定部、５０ プレイヤ立ち位置案内画像、５２ 頭部基準位置マーカ、５４，５４ａ 現在認識位置マーカ、５６ プレイヤ画像、Ｐ プレイヤ、ＡＣ１〜ＡＣ３ 敵キャラクタ、Ｂ 障害物、Ｂｓ 障害物上面
Claims (3)
- 画像を表示するディスプレイと、擬似カメラの視点からのゲーム画像を作成し、該画像を前記ディスプレイ画面に表示する表示制御手段と、ディスプレイの表示画像に応答する、プレイヤからの反応を受けてゲーム進行を行うゲーム制御部とを備えたビデオゲーム装置において、
前記ディスプレイ画面の前方のプレイ領域を視野とする向きにして配置可能にされ、配置状態でプレイ領域を周期的に撮像する撮像手段と、
撮像画像からプレイヤの注目部位の位置を検出する位置検出手段と、
ゲーム開始前にプレイヤの前記プレイ領域内での初期位置に対するキャリブレーション処理を行う初期プレイ位置設定手段と、
検出された注目部位の位置の平面的な動きを検出する動作検出手段と、
検出された注目部位の位置の変化方向及び変化量に連動させて前記擬似カメラの視点を移動させる視点変更手段とを備えてなり、
前記初期プレイ位置設定手段は、前記ディスプレイ画面の所定位置に注目部位基準マーカと前記位置検出手段で検出されたプレイヤの注目部位を示す現在認識位置マークとを表示し、両マークの位置関係によって適正化されたことを示すべく両マークの一方の表示形態を変化させることを特徴とするビデオゲーム装置。 - 擬似カメラの視点からのゲーム画像を作成し、該画像をディスプレイの画面に表示すると共に、前記ディスプレイの表示画像に応答する、プレイヤからの反応を受けて擬似カメラの視点を移動させながらゲーム進行をコンピュータに行わせるビデオゲームにおける擬似カメラ視点移動制御方法において、
コンピュータの位置検出手段が、前記ディスプレイ画面の前方のプレイ領域を視野とする向きにして所望する位置に配置される撮像手段でプレイ領域を周期的に撮像しながら、撮像された画像からプレイヤの注目部位を検出し、
コンピュータの初期プレイ位置設定手段が、ゲーム開始前にプレイヤの前記プレイ領域内での初期位置に対するキャリブレーション処理を行い、
コンピュータの動作検出手段が、検出された注目部位の位置の平面的な動きを検出し、
コンピュータの視点変更手段が、検出された注目部位の位置の変化方向及び変化量に連動させて前記擬似カメラの視点を移動し、
かつ、前記初期プレイ位置設定手段が、前記ディスプレイ画面の所定位置に注目部位基準マーカと前記位置検出手段で検出されたプレイヤの注目部位を示す現在認識位置マークとを表示し、両マークの位置関係によって適正化されたことを示すべく両マークの一方の表示形態を変化させることを特徴とするビデオゲームにおける擬似カメラ視点移動制御方法。 - 擬似カメラの視点からのゲーム画像を作成し、該画像をディスプレイの画面に表示すると共に、前記ディスプレイの表示画像に応答する、プレイヤからの反応を受けて擬似カメラの視点を移動させながらゲーム進行をコンピュータに行わせるビデオゲームにおける擬似カメラ視点移動制御プログラムであって、コンピュータを、
前記ディスプレイ画面の前方のプレイ領域を視野とする向きにして所望する位置に配置される撮像手段でプレイ領域を周期的に撮像しながら、撮像された画像からプレイヤの注目部位を検出する位置検出手段と、
ゲーム開始前にプレイヤの前記プレイ領域内での初期位置に対するキャリブレーション処理を行う初期プレイ位置設定手段と、
検出された注目部位の位置の平面的な動きを検出する動作検出手段と、
検出された注目部位の位置の変化方向及び変化量に連動させて前記擬似カメラの視点を移動させる視点変更手段として機能させると共に、
前記初期プレイ位置設定手段が、前記ディスプレイ画面の所定位置に注目部位基準マーカ と前記位置検出手段で検出されたプレイヤの注目部位を示す現在認識位置マークとを表示し、両マークの位置関係によって適正化されたことを示すべく両マークの一方の表示形態を変化させることを特徴とするビデオゲームにおける擬似カメラ視点移動制御プログラム。
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001220312A JP3611807B2 (ja) | 2001-07-19 | 2001-07-19 | ビデオゲーム装置、ビデオゲームにおける擬似カメラ視点移動制御方法及びプログラム |
| US10/197,514 US6890262B2 (en) | 2001-07-19 | 2002-07-17 | Video game apparatus, method and recording medium storing program for controlling viewpoint movement of simulated camera in video game |
| EP02016211A EP1279425A3 (en) | 2001-07-19 | 2002-07-18 | Video game apparatus, method and recording medium storing program for controlling movement of simulated camera in video game |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001220312A JP3611807B2 (ja) | 2001-07-19 | 2001-07-19 | ビデオゲーム装置、ビデオゲームにおける擬似カメラ視点移動制御方法及びプログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2003030686A JP2003030686A (ja) | 2003-01-31 |
| JP3611807B2 true JP3611807B2 (ja) | 2005-01-19 |
Family
ID=19054152
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2001220312A Expired - Lifetime JP3611807B2 (ja) | 2001-07-19 | 2001-07-19 | ビデオゲーム装置、ビデオゲームにおける擬似カメラ視点移動制御方法及びプログラム |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US6890262B2 (ja) |
| EP (1) | EP1279425A3 (ja) |
| JP (1) | JP3611807B2 (ja) |
Cited By (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8439733B2 (en) | 2007-06-14 | 2013-05-14 | Harmonix Music Systems, Inc. | Systems and methods for reinstating a player within a rhythm-action game |
| US8444464B2 (en) | 2010-06-11 | 2013-05-21 | Harmonix Music Systems, Inc. | Prompting a player of a dance game |
| US8449360B2 (en) | 2009-05-29 | 2013-05-28 | Harmonix Music Systems, Inc. | Displaying song lyrics and vocal cues |
| US8465366B2 (en) | 2009-05-29 | 2013-06-18 | Harmonix Music Systems, Inc. | Biasing a musical performance input to a part |
| US8550908B2 (en) | 2010-03-16 | 2013-10-08 | Harmonix Music Systems, Inc. | Simulating musical instruments |
| US8663013B2 (en) | 2008-07-08 | 2014-03-04 | Harmonix Music Systems, Inc. | Systems and methods for simulating a rock band experience |
| US8678896B2 (en) | 2007-06-14 | 2014-03-25 | Harmonix Music Systems, Inc. | Systems and methods for asynchronous band interaction in a rhythm action game |
| US8686269B2 (en) | 2006-03-29 | 2014-04-01 | Harmonix Music Systems, Inc. | Providing realistic interaction to a player of a music-based video game |
| US8702485B2 (en) | 2010-06-11 | 2014-04-22 | Harmonix Music Systems, Inc. | Dance game and tutorial |
| US9024166B2 (en) | 2010-09-09 | 2015-05-05 | Harmonix Music Systems, Inc. | Preventing subtractive track separation |
| US9358456B1 (en) | 2010-06-11 | 2016-06-07 | Harmonix Music Systems, Inc. | Dance competition game |
| US9981193B2 (en) | 2009-10-27 | 2018-05-29 | Harmonix Music Systems, Inc. | Movement based recognition and evaluation |
| US10357714B2 (en) | 2009-10-27 | 2019-07-23 | Harmonix Music Systems, Inc. | Gesture-based user interface for navigating a menu |
Families Citing this family (177)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7749089B1 (en) | 1999-02-26 | 2010-07-06 | Creative Kingdoms, Llc | Multi-media interactive play system |
| US7878905B2 (en) | 2000-02-22 | 2011-02-01 | Creative Kingdoms, Llc | Multi-layered interactive play experience |
| US6761637B2 (en) | 2000-02-22 | 2004-07-13 | Creative Kingdoms, Llc | Method of game play using RFID tracking device |
| US7445550B2 (en) | 2000-02-22 | 2008-11-04 | Creative Kingdoms, Llc | Magical wand and interactive play experience |
| US7066781B2 (en) | 2000-10-20 | 2006-06-27 | Denise Chapman Weston | Children's toy with wireless tag/transponder |
| JP3417555B2 (ja) * | 2001-06-29 | 2003-06-16 | 株式会社コナミコンピュータエンタテインメント東京 | ゲーム装置、人物画像処理方法及びプログラム |
| JP3420221B2 (ja) * | 2001-06-29 | 2003-06-23 | 株式会社コナミコンピュータエンタテインメント東京 | ゲーム装置及びプログラム |
| JP2003019346A (ja) * | 2001-07-10 | 2003-01-21 | Konami Co Ltd | ゲーム装置、ゲームタイトル画像表示制御方法及びプログラム |
| US6990639B2 (en) * | 2002-02-07 | 2006-01-24 | Microsoft Corporation | System and process for controlling electronic components in a ubiquitous computing environment using multimodal integration |
| US6967566B2 (en) | 2002-04-05 | 2005-11-22 | Creative Kingdoms, Llc | Live-action interactive adventure game |
| US20070066396A1 (en) | 2002-04-05 | 2007-03-22 | Denise Chapman Weston | Retail methods for providing an interactive product to a consumer |
| US8947347B2 (en) | 2003-08-27 | 2015-02-03 | Sony Computer Entertainment Inc. | Controlling actions in a video game unit |
| US7102615B2 (en) * | 2002-07-27 | 2006-09-05 | Sony Computer Entertainment Inc. | Man-machine interface using a deformable device |
| US8797260B2 (en) | 2002-07-27 | 2014-08-05 | Sony Computer Entertainment Inc. | Inertially trackable hand-held controller |
| US7883415B2 (en) * | 2003-09-15 | 2011-02-08 | Sony Computer Entertainment Inc. | Method and apparatus for adjusting a view of a scene being displayed according to tracked head motion |
| US7646372B2 (en) | 2003-09-15 | 2010-01-12 | Sony Computer Entertainment Inc. | Methods and systems for enabling direction detection when interfacing with a computer program |
| JP2005533628A (ja) * | 2002-07-25 | 2005-11-10 | アンダミロ カンパニー リミテッド | シューティング・ゲーム機及びその実行方法 |
| US8686939B2 (en) * | 2002-07-27 | 2014-04-01 | Sony Computer Entertainment Inc. | System, method, and apparatus for three-dimensional input control |
| US7803050B2 (en) * | 2002-07-27 | 2010-09-28 | Sony Computer Entertainment Inc. | Tracking device with sound emitter for use in obtaining information for controlling game program execution |
| US10086282B2 (en) * | 2002-07-27 | 2018-10-02 | Sony Interactive Entertainment Inc. | Tracking device for use in obtaining information for controlling game program execution |
| US7391409B2 (en) * | 2002-07-27 | 2008-06-24 | Sony Computer Entertainment America Inc. | Method and system for applying gearing effects to multi-channel mixed input |
| US9174119B2 (en) | 2002-07-27 | 2015-11-03 | Sony Computer Entertainement America, LLC | Controller for providing inputs to control execution of a program when inputs are combined |
| US9393487B2 (en) | 2002-07-27 | 2016-07-19 | Sony Interactive Entertainment Inc. | Method for mapping movements of a hand-held controller to game commands |
| US8139793B2 (en) * | 2003-08-27 | 2012-03-20 | Sony Computer Entertainment Inc. | Methods and apparatus for capturing audio signals based on a visual image |
| US8570378B2 (en) | 2002-07-27 | 2013-10-29 | Sony Computer Entertainment Inc. | Method and apparatus for tracking three-dimensional movements of an object using a depth sensing camera |
| US9474968B2 (en) | 2002-07-27 | 2016-10-25 | Sony Interactive Entertainment America Llc | Method and system for applying gearing effects to visual tracking |
| US8313380B2 (en) | 2002-07-27 | 2012-11-20 | Sony Computer Entertainment America Llc | Scheme for translating movements of a hand-held controller into inputs for a system |
| US7918733B2 (en) * | 2002-07-27 | 2011-04-05 | Sony Computer Entertainment America Inc. | Multi-input game control mixer |
| US7352358B2 (en) * | 2002-07-27 | 2008-04-01 | Sony Computer Entertainment America Inc. | Method and system for applying gearing effects to acoustical tracking |
| US8233642B2 (en) | 2003-08-27 | 2012-07-31 | Sony Computer Entertainment Inc. | Methods and apparatuses for capturing an audio signal based on a location of the signal |
| US7854655B2 (en) | 2002-07-27 | 2010-12-21 | Sony Computer Entertainment America Inc. | Obtaining input for controlling execution of a game program |
| US7850526B2 (en) | 2002-07-27 | 2010-12-14 | Sony Computer Entertainment America Inc. | System for tracking user manipulations within an environment |
| US7352359B2 (en) * | 2002-07-27 | 2008-04-01 | Sony Computer Entertainment America Inc. | Method and system for applying gearing effects to inertial tracking |
| US7760248B2 (en) | 2002-07-27 | 2010-07-20 | Sony Computer Entertainment Inc. | Selective sound source listening in conjunction with computer interactive processing |
| US8160269B2 (en) | 2003-08-27 | 2012-04-17 | Sony Computer Entertainment Inc. | Methods and apparatuses for adjusting a listening area for capturing sounds |
| US9682319B2 (en) | 2002-07-31 | 2017-06-20 | Sony Interactive Entertainment Inc. | Combiner method for altering game gearing |
| US7674184B2 (en) | 2002-08-01 | 2010-03-09 | Creative Kingdoms, Llc | Interactive water attraction and quest game |
| US7815507B2 (en) * | 2004-06-18 | 2010-10-19 | Igt | Game machine user interface using a non-contact eye motion recognition device |
| US7841944B2 (en) * | 2002-08-06 | 2010-11-30 | Igt | Gaming device having a three dimensional display device |
| US8460103B2 (en) * | 2004-06-18 | 2013-06-11 | Igt | Gesture controlled casino gaming system |
| US9446319B2 (en) | 2003-03-25 | 2016-09-20 | Mq Gaming, Llc | Interactive gaming toy |
| US8072470B2 (en) | 2003-05-29 | 2011-12-06 | Sony Computer Entertainment Inc. | System and method for providing a real-time three-dimensional interactive environment |
| US8323106B2 (en) * | 2008-05-30 | 2012-12-04 | Sony Computer Entertainment America Llc | Determination of controller three-dimensional location using image analysis and ultrasonic communication |
| US9573056B2 (en) | 2005-10-26 | 2017-02-21 | Sony Interactive Entertainment Inc. | Expandable control device via hardware attachment |
| US8287373B2 (en) | 2008-12-05 | 2012-10-16 | Sony Computer Entertainment Inc. | Control device for communicating visual information |
| US7874917B2 (en) | 2003-09-15 | 2011-01-25 | Sony Computer Entertainment Inc. | Methods and systems for enabling depth and direction detection when interfacing with a computer program |
| US10279254B2 (en) | 2005-10-26 | 2019-05-07 | Sony Interactive Entertainment Inc. | Controller having visually trackable object for interfacing with a gaming system |
| US7285047B2 (en) * | 2003-10-17 | 2007-10-23 | Hewlett-Packard Development Company, L.P. | Method and system for real-time rendering within a gaming environment |
| US7746321B2 (en) | 2004-05-28 | 2010-06-29 | Erik Jan Banning | Easily deployable interactive direct-pointing system and presentation control system and calibration method therefor |
| JP2005349048A (ja) * | 2004-06-11 | 2005-12-22 | Konami Co Ltd | ゲーム装置、ゴルフゲーム装置及び該装置のショット結果決定方法 |
| US8684839B2 (en) | 2004-06-18 | 2014-04-01 | Igt | Control of wager-based game using gesture recognition |
| JP3746060B2 (ja) | 2004-07-20 | 2006-02-15 | コナミ株式会社 | ゲーム装置、コンピュータの制御方法及びプログラム |
| US7942744B2 (en) | 2004-08-19 | 2011-05-17 | Igt | Virtual input system |
| US8547401B2 (en) | 2004-08-19 | 2013-10-01 | Sony Computer Entertainment Inc. | Portable augmented reality device and method |
| JP4433948B2 (ja) | 2004-09-02 | 2010-03-17 | 株式会社セガ | 背景画像取得プログラム、ビデオゲーム装置、背景画像取得方法、および、プログラムを記録したコンピュータ読み取り可能な記録媒体 |
| US7864159B2 (en) | 2005-01-12 | 2011-01-04 | Thinkoptics, Inc. | Handheld vision based absolute pointing system |
| JP2006305176A (ja) * | 2005-04-28 | 2006-11-09 | Nintendo Co Ltd | ゲームプログラムおよびゲーム装置 |
| US8128518B1 (en) * | 2005-05-04 | 2012-03-06 | Michael J. Kudla | Goalie training device and method |
| US9285897B2 (en) | 2005-07-13 | 2016-03-15 | Ultimate Pointer, L.L.C. | Easily deployable interactive direct-pointing system and calibration method therefor |
| JP4805633B2 (ja) | 2005-08-22 | 2011-11-02 | 任天堂株式会社 | ゲーム用操作装置 |
| US7942745B2 (en) | 2005-08-22 | 2011-05-17 | Nintendo Co., Ltd. | Game operating device |
| US7927216B2 (en) | 2005-09-15 | 2011-04-19 | Nintendo Co., Ltd. | Video game system with wireless modular handheld controller |
| US8313379B2 (en) | 2005-08-22 | 2012-11-20 | Nintendo Co., Ltd. | Video game system with wireless modular handheld controller |
| JP4262726B2 (ja) | 2005-08-24 | 2009-05-13 | 任天堂株式会社 | ゲームコントローラおよびゲームシステム |
| US8870655B2 (en) | 2005-08-24 | 2014-10-28 | Nintendo Co., Ltd. | Wireless game controllers |
| JP4907128B2 (ja) * | 2005-08-30 | 2012-03-28 | 任天堂株式会社 | ゲームシステムおよびゲームプログラム |
| US8308563B2 (en) | 2005-08-30 | 2012-11-13 | Nintendo Co., Ltd. | Game system and storage medium having game program stored thereon |
| US20070054715A1 (en) * | 2005-09-02 | 2007-03-08 | Action Electronics Co., Ltd. | Display for multi-media game console |
| US8157651B2 (en) | 2005-09-12 | 2012-04-17 | Nintendo Co., Ltd. | Information processing program |
| JP4773170B2 (ja) * | 2005-09-14 | 2011-09-14 | 任天堂株式会社 | ゲームプログラムおよびゲームシステム |
| US8616973B2 (en) * | 2005-09-15 | 2013-12-31 | Sony Computer Entertainment Inc. | System and method for control by audible device |
| US8645985B2 (en) * | 2005-09-15 | 2014-02-04 | Sony Computer Entertainment Inc. | System and method for detecting user attention |
| US20070117628A1 (en) * | 2005-11-19 | 2007-05-24 | Stanley Mark J | Method and apparatus for providing realistic gun motion input to a video game |
| US20070195198A1 (en) * | 2006-02-21 | 2007-08-23 | Lim Soo S | Method and apparatus for eliminating optical sensor flickering in video gaming systems |
| CN101496387B (zh) * | 2006-03-06 | 2012-09-05 | 思科技术公司 | 用于移动无线网络中的接入认证的***和方法 |
| JP4151982B2 (ja) | 2006-03-10 | 2008-09-17 | 任天堂株式会社 | 動き判別装置および動き判別プログラム |
| JP4489718B2 (ja) * | 2006-03-27 | 2010-06-23 | 株式会社コナミデジタルエンタテインメント | ゲームシステム、ゲームシステムの制御方法及びプログラム |
| US7976387B2 (en) * | 2006-04-11 | 2011-07-12 | Avago Technologies General Ip (Singapore) Pte. Ltd. | Free-standing input device |
| TWI305728B (en) * | 2006-04-26 | 2009-02-01 | Pixart Imaging Inc | Interactive wireless game apparatus and wireless peripheral module |
| CN102580314B (zh) * | 2006-05-04 | 2015-05-20 | 美国索尼电脑娱乐公司 | 获得用于控制游戏程序的运行的输入 |
| WO2007130582A2 (en) * | 2006-05-04 | 2007-11-15 | Sony Computer Entertainment America Inc. | Computer imput device having gearing effects |
| KR101020509B1 (ko) | 2006-05-04 | 2011-03-09 | 소니 컴퓨터 엔터테인먼트 아메리카 엘엘씨 | 프로그램의 실행을 제어하기 위한 입력을 획득하는 방법 |
| US20110014981A1 (en) * | 2006-05-08 | 2011-01-20 | Sony Computer Entertainment Inc. | Tracking device with sound emitter for use in obtaining information for controlling game program execution |
| US8913003B2 (en) * | 2006-07-17 | 2014-12-16 | Thinkoptics, Inc. | Free-space multi-dimensional absolute pointer using a projection marker system |
| US20080096643A1 (en) * | 2006-08-10 | 2008-04-24 | Shalini Venkatesh | System and method for using image analysis of user interface signals for program control |
| US7976380B2 (en) * | 2006-08-10 | 2011-07-12 | Avago Technologies General Ip (Singapore) Pte. Ltd. | System and method for using wavelet analysis of a user interface signal for program control |
| US8096880B2 (en) * | 2006-08-15 | 2012-01-17 | Nintendo Co., Ltd. | Systems and methods for reducing jitter associated with a control device |
| US8781151B2 (en) | 2006-09-28 | 2014-07-15 | Sony Computer Entertainment Inc. | Object detection using video input combined with tilt angle information |
| US8310656B2 (en) | 2006-09-28 | 2012-11-13 | Sony Computer Entertainment America Llc | Mapping movements of a hand-held controller to the two-dimensional image plane of a display screen |
| USRE48417E1 (en) | 2006-09-28 | 2021-02-02 | Sony Interactive Entertainment Inc. | Object direction using video input combined with tilt angle information |
| US8360847B2 (en) * | 2006-11-13 | 2013-01-29 | Igt | Multimedia emulation of physical reel hardware in processor-based gaming machines |
| TW200914094A (en) * | 2006-12-06 | 2009-04-01 | Actionairgun Llc | System, method, and apparatus for organizing and implementing real-life game and sports activities |
| US9176598B2 (en) * | 2007-05-08 | 2015-11-03 | Thinkoptics, Inc. | Free-space multi-dimensional absolute pointer with improved performance |
| JP2009082645A (ja) * | 2007-10-03 | 2009-04-23 | Taito Corp | オートバイゲーム装置 |
| US8542907B2 (en) * | 2007-12-17 | 2013-09-24 | Sony Computer Entertainment America Llc | Dynamic three-dimensional object mapping for user-defined control device |
| JP5224832B2 (ja) | 2008-01-21 | 2013-07-03 | 任天堂株式会社 | 情報処理プログラムおよび情報処理装置 |
| US8797377B2 (en) * | 2008-02-14 | 2014-08-05 | Cisco Technology, Inc. | Method and system for videoconference configuration |
| US10229389B2 (en) * | 2008-02-25 | 2019-03-12 | International Business Machines Corporation | System and method for managing community assets |
| CN102016877B (zh) | 2008-02-27 | 2014-12-10 | 索尼计算机娱乐美国有限责任公司 | 用于捕获场景的深度数据并且应用计算机动作的方法 |
| US8368753B2 (en) | 2008-03-17 | 2013-02-05 | Sony Computer Entertainment America Llc | Controller with an integrated depth camera |
| US8319819B2 (en) * | 2008-03-26 | 2012-11-27 | Cisco Technology, Inc. | Virtual round-table videoconference |
| US8390667B2 (en) * | 2008-04-15 | 2013-03-05 | Cisco Technology, Inc. | Pop-up PIP for people not in picture |
| EP2116919A1 (en) | 2008-05-09 | 2009-11-11 | MBDA UK Limited | display of 3-dimensional objects |
| US20090312100A1 (en) * | 2008-06-12 | 2009-12-17 | Harris Scott C | Face Simulation in Networking |
| US20090310027A1 (en) * | 2008-06-16 | 2009-12-17 | James Fleming | Systems and methods for separate audio and video lag calibration in a video game |
| US8858341B2 (en) * | 2008-08-21 | 2014-10-14 | Jeff Weiland | Multi video game changer |
| US8694658B2 (en) * | 2008-09-19 | 2014-04-08 | Cisco Technology, Inc. | System and method for enabling communication sessions in a network environment |
| KR20100048747A (ko) * | 2008-10-31 | 2010-05-11 | 한국과학기술원 | 안면 추적을 이용한 모바일 유저 인터페이스 장치 |
| JP5342854B2 (ja) * | 2008-11-21 | 2013-11-13 | 東芝電波プロダクツ株式会社 | 射撃訓練用模擬対抗装置 |
| US20100146409A1 (en) * | 2008-12-04 | 2010-06-10 | Sony Computer Entertainment Inc. | Virtual Space Management System |
| US8332499B2 (en) * | 2008-12-04 | 2012-12-11 | Sony Computer Entertainment Inc. | Virtual space management system |
| US8961313B2 (en) * | 2009-05-29 | 2015-02-24 | Sony Computer Entertainment America Llc | Multi-positional three-dimensional controller |
| US8659590B1 (en) * | 2008-12-17 | 2014-02-25 | Nvidia Corporation | System, method, and computer program product for modifying signals of a three-dimensional graphics application program based on a tracking algorithm |
| JP2010142592A (ja) * | 2008-12-22 | 2010-07-01 | Nintendo Co Ltd | ゲームプログラムおよびゲーム装置 |
| US9652030B2 (en) * | 2009-01-30 | 2017-05-16 | Microsoft Technology Licensing, Llc | Navigation of a virtual plane using a zone of restriction for canceling noise |
| US8659637B2 (en) * | 2009-03-09 | 2014-02-25 | Cisco Technology, Inc. | System and method for providing three dimensional video conferencing in a network environment |
| US8527657B2 (en) | 2009-03-20 | 2013-09-03 | Sony Computer Entertainment America Llc | Methods and systems for dynamically adjusting update rates in multi-player network gaming |
| US8342963B2 (en) | 2009-04-10 | 2013-01-01 | Sony Computer Entertainment America Inc. | Methods and systems for enabling control of artificial intelligence game characters |
| US8246467B2 (en) * | 2009-04-29 | 2012-08-21 | Apple Inc. | Interactive gaming with co-located, networked direction and location aware devices |
| US9898675B2 (en) * | 2009-05-01 | 2018-02-20 | Microsoft Technology Licensing, Llc | User movement tracking feedback to improve tracking |
| US8393964B2 (en) | 2009-05-08 | 2013-03-12 | Sony Computer Entertainment America Llc | Base station for position location |
| US8142288B2 (en) | 2009-05-08 | 2012-03-27 | Sony Computer Entertainment America Llc | Base station movement detection and compensation |
| US20100283829A1 (en) * | 2009-05-11 | 2010-11-11 | Cisco Technology, Inc. | System and method for translating communications between participants in a conferencing environment |
| US9383823B2 (en) | 2009-05-29 | 2016-07-05 | Microsoft Technology Licensing, Llc | Combining gestures beyond skeletal |
| US8659639B2 (en) | 2009-05-29 | 2014-02-25 | Cisco Technology, Inc. | System and method for extending communications between participants in a conferencing environment |
| US9082297B2 (en) * | 2009-08-11 | 2015-07-14 | Cisco Technology, Inc. | System and method for verifying parameters in an audiovisual environment |
| JP5333106B2 (ja) * | 2009-09-15 | 2013-11-06 | 株式会社三洋物産 | 遊技機 |
| JP5478205B2 (ja) * | 2009-11-13 | 2014-04-23 | 任天堂株式会社 | ゲーム装置、ゲームプログラム、ゲームシステムおよびゲーム制御方法 |
| EP2507764A4 (en) * | 2009-11-30 | 2013-06-19 | Hewlett Packard Development Co | STABILIZING A SUBJECT OF INTEREST IN A CAPTURED VIDEO |
| JP5693022B2 (ja) * | 2010-03-04 | 2015-04-01 | キヤノン株式会社 | 表示制御装置および表示制御システム、並びにそれらの制御方法、プログラム、記憶媒体 |
| US9225916B2 (en) | 2010-03-18 | 2015-12-29 | Cisco Technology, Inc. | System and method for enhancing video images in a conferencing environment |
| JP5300777B2 (ja) * | 2010-03-31 | 2013-09-25 | 株式会社バンダイナムコゲームス | プログラム及び画像生成システム |
| US9313452B2 (en) | 2010-05-17 | 2016-04-12 | Cisco Technology, Inc. | System and method for providing retracting optics in a video conferencing environment |
| KR101148508B1 (ko) | 2010-07-16 | 2012-05-25 | 한국과학기술원 | 모바일 기기 디스플레이의 표시 장치 및 그 방법, 이를 이용하는 모바일 기기 |
| US8425316B2 (en) | 2010-08-03 | 2013-04-23 | Igt | Methods and systems for improving play of a bonus game on a gaming machine and improving security within a gaming establishment |
| US8704879B1 (en) * | 2010-08-31 | 2014-04-22 | Nintendo Co., Ltd. | Eye tracking enabling 3D viewing on conventional 2D display |
| US8896655B2 (en) | 2010-08-31 | 2014-11-25 | Cisco Technology, Inc. | System and method for providing depth adaptive video conferencing |
| US8599934B2 (en) | 2010-09-08 | 2013-12-03 | Cisco Technology, Inc. | System and method for skip coding during video conferencing in a network environment |
| JP5580156B2 (ja) * | 2010-09-27 | 2014-08-27 | 株式会社コナミデジタルエンタテインメント | ゲーム装置、ゲーム制御方法、ならびに、プログラム |
| US8599865B2 (en) | 2010-10-26 | 2013-12-03 | Cisco Technology, Inc. | System and method for provisioning flows in a mobile network environment |
| US8699457B2 (en) | 2010-11-03 | 2014-04-15 | Cisco Technology, Inc. | System and method for managing flows in a mobile network environment |
| US8619030B2 (en) * | 2010-11-09 | 2013-12-31 | Blackberry Limited | Method and apparatus for controlling an output device of a portable electronic device |
| US8902244B2 (en) | 2010-11-15 | 2014-12-02 | Cisco Technology, Inc. | System and method for providing enhanced graphics in a video environment |
| US9338394B2 (en) | 2010-11-15 | 2016-05-10 | Cisco Technology, Inc. | System and method for providing enhanced audio in a video environment |
| US9143725B2 (en) | 2010-11-15 | 2015-09-22 | Cisco Technology, Inc. | System and method for providing enhanced graphics in a video environment |
| US8730297B2 (en) | 2010-11-15 | 2014-05-20 | Cisco Technology, Inc. | System and method for providing camera functions in a video environment |
| US8542264B2 (en) | 2010-11-18 | 2013-09-24 | Cisco Technology, Inc. | System and method for managing optics in a video environment |
| US8723914B2 (en) | 2010-11-19 | 2014-05-13 | Cisco Technology, Inc. | System and method for providing enhanced video processing in a network environment |
| US9111138B2 (en) * | 2010-11-30 | 2015-08-18 | Cisco Technology, Inc. | System and method for gesture interface control |
| USD678308S1 (en) | 2010-12-16 | 2013-03-19 | Cisco Technology, Inc. | Display screen with graphical user interface |
| USD678320S1 (en) | 2010-12-16 | 2013-03-19 | Cisco Technology, Inc. | Display screen with graphical user interface |
| USD682864S1 (en) | 2010-12-16 | 2013-05-21 | Cisco Technology, Inc. | Display screen with graphical user interface |
| USD682294S1 (en) | 2010-12-16 | 2013-05-14 | Cisco Technology, Inc. | Display screen with graphical user interface |
| USD678894S1 (en) | 2010-12-16 | 2013-03-26 | Cisco Technology, Inc. | Display screen with graphical user interface |
| USD678307S1 (en) | 2010-12-16 | 2013-03-19 | Cisco Technology, Inc. | Display screen with graphical user interface |
| USD682293S1 (en) | 2010-12-16 | 2013-05-14 | Cisco Technology, Inc. | Display screen with graphical user interface |
| USD682854S1 (en) | 2010-12-16 | 2013-05-21 | Cisco Technology, Inc. | Display screen for graphical user interface |
| CN102166414B (zh) * | 2011-01-28 | 2013-10-09 | 刘林运 | 一种真人对抗模拟射击***、对战平台及其操作方法 |
| US8692862B2 (en) | 2011-02-28 | 2014-04-08 | Cisco Technology, Inc. | System and method for selection of video data in a video conference environment |
| US8670019B2 (en) | 2011-04-28 | 2014-03-11 | Cisco Technology, Inc. | System and method for providing enhanced eye gaze in a video conferencing environment |
| US20120277001A1 (en) * | 2011-04-28 | 2012-11-01 | Microsoft Corporation | Manual and Camera-based Game Control |
| US8786631B1 (en) | 2011-04-30 | 2014-07-22 | Cisco Technology, Inc. | System and method for transferring transparency information in a video environment |
| US8934026B2 (en) | 2011-05-12 | 2015-01-13 | Cisco Technology, Inc. | System and method for video coding in a dynamic environment |
| US8947493B2 (en) | 2011-11-16 | 2015-02-03 | Cisco Technology, Inc. | System and method for alerting a participant in a video conference |
| US8682087B2 (en) | 2011-12-19 | 2014-03-25 | Cisco Technology, Inc. | System and method for depth-guided image filtering in a video conference environment |
| US8777226B1 (en) * | 2012-06-21 | 2014-07-15 | Robert Hubert Decker, Jr. | Proxy target system |
| US9681154B2 (en) | 2012-12-06 | 2017-06-13 | Patent Capital Group | System and method for depth-guided filtering in a video conference environment |
| KR102175853B1 (ko) * | 2013-02-22 | 2020-11-06 | 삼성전자주식회사 | 동작 제어 방법 및 그 전자 장치 |
| US9380295B2 (en) * | 2013-04-21 | 2016-06-28 | Zspace, Inc. | Non-linear navigation of a three dimensional stereoscopic display |
| US9843621B2 (en) | 2013-05-17 | 2017-12-12 | Cisco Technology, Inc. | Calendaring activities based on communication processing |
| US9412222B2 (en) * | 2013-09-20 | 2016-08-09 | Igt | Coordinated gaming machine attract via gaming machine cameras |
| JPWO2015099174A1 (ja) * | 2013-12-27 | 2017-03-23 | フィールズ株式会社 | 遊技機 |
| JP6691351B2 (ja) * | 2015-03-31 | 2020-04-28 | 株式会社バンダイナムコエンターテインメント | プログラム及びゲームシステム |
| WO2017136014A2 (en) | 2015-11-13 | 2017-08-10 | Flir Systems, Inc. | Video sensor fusion and model based virtual and augmented reality systems and methods |
| US11328155B2 (en) | 2015-11-13 | 2022-05-10 | FLIR Belgium BVBA | Augmented reality labels systems and methods |
| JP6532393B2 (ja) * | 2015-12-02 | 2019-06-19 | 株式会社ソニー・インタラクティブエンタテインメント | 表示制御装置及び表示制御方法 |
| TWI739069B (zh) * | 2019-03-04 | 2021-09-11 | 仁寶電腦工業股份有限公司 | 遊戲裝置與辨識遊戲裝置的方法 |
Family Cites Families (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4836670A (en) * | 1987-08-19 | 1989-06-06 | Center For Innovative Technology | Eye movement detector |
| JP2552427B2 (ja) | 1993-12-28 | 1996-11-13 | コナミ株式会社 | テレビ遊戯システム |
| US5686942A (en) | 1994-12-01 | 1997-11-11 | National Semiconductor Corporation | Remote computer input system which detects point source on operator |
| US6176782B1 (en) * | 1997-12-22 | 2001-01-23 | Philips Electronics North America Corp. | Motion-based command generation technology |
| JPH09138637A (ja) | 1995-11-13 | 1997-05-27 | Mitsubishi Heavy Ind Ltd | 模擬視界装置 |
| US6009210A (en) | 1997-03-05 | 1999-12-28 | Digital Equipment Corporation | Hands-free interface to a virtual reality environment using head tracking |
| WO1999035633A2 (en) * | 1998-01-06 | 1999-07-15 | The Video Mouse Group | Human motion following computer mouse and game controller |
| JP2000259856A (ja) * | 1999-03-09 | 2000-09-22 | Nippon Telegr & Teleph Corp <Ntt> | ３次元コンピュータグラフィックス表示方法及び装置 |
-
2001
- 2001-07-19 JP JP2001220312A patent/JP3611807B2/ja not_active Expired - Lifetime
-
2002
- 2002-07-17 US US10/197,514 patent/US6890262B2/en not_active Expired - Fee Related
- 2002-07-18 EP EP02016211A patent/EP1279425A3/en not_active Withdrawn
Cited By (22)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8686269B2 (en) | 2006-03-29 | 2014-04-01 | Harmonix Music Systems, Inc. | Providing realistic interaction to a player of a music-based video game |
| US8444486B2 (en) | 2007-06-14 | 2013-05-21 | Harmonix Music Systems, Inc. | Systems and methods for indicating input actions in a rhythm-action game |
| US8439733B2 (en) | 2007-06-14 | 2013-05-14 | Harmonix Music Systems, Inc. | Systems and methods for reinstating a player within a rhythm-action game |
| US8690670B2 (en) | 2007-06-14 | 2014-04-08 | Harmonix Music Systems, Inc. | Systems and methods for simulating a rock band experience |
| US8678896B2 (en) | 2007-06-14 | 2014-03-25 | Harmonix Music Systems, Inc. | Systems and methods for asynchronous band interaction in a rhythm action game |
| US8678895B2 (en) | 2007-06-14 | 2014-03-25 | Harmonix Music Systems, Inc. | Systems and methods for online band matching in a rhythm action game |
| US8663013B2 (en) | 2008-07-08 | 2014-03-04 | Harmonix Music Systems, Inc. | Systems and methods for simulating a rock band experience |
| US8449360B2 (en) | 2009-05-29 | 2013-05-28 | Harmonix Music Systems, Inc. | Displaying song lyrics and vocal cues |
| US8465366B2 (en) | 2009-05-29 | 2013-06-18 | Harmonix Music Systems, Inc. | Biasing a musical performance input to a part |
| US10421013B2 (en) | 2009-10-27 | 2019-09-24 | Harmonix Music Systems, Inc. | Gesture-based user interface |
| US10357714B2 (en) | 2009-10-27 | 2019-07-23 | Harmonix Music Systems, Inc. | Gesture-based user interface for navigating a menu |
| US9981193B2 (en) | 2009-10-27 | 2018-05-29 | Harmonix Music Systems, Inc. | Movement based recognition and evaluation |
| US8550908B2 (en) | 2010-03-16 | 2013-10-08 | Harmonix Music Systems, Inc. | Simulating musical instruments |
| US8636572B2 (en) | 2010-03-16 | 2014-01-28 | Harmonix Music Systems, Inc. | Simulating musical instruments |
| US8874243B2 (en) | 2010-03-16 | 2014-10-28 | Harmonix Music Systems, Inc. | Simulating musical instruments |
| US9278286B2 (en) | 2010-03-16 | 2016-03-08 | Harmonix Music Systems, Inc. | Simulating musical instruments |
| US8568234B2 (en) | 2010-03-16 | 2013-10-29 | Harmonix Music Systems, Inc. | Simulating musical instruments |
| US8702485B2 (en) | 2010-06-11 | 2014-04-22 | Harmonix Music Systems, Inc. | Dance game and tutorial |
| US9358456B1 (en) | 2010-06-11 | 2016-06-07 | Harmonix Music Systems, Inc. | Dance competition game |
| US8562403B2 (en) | 2010-06-11 | 2013-10-22 | Harmonix Music Systems, Inc. | Prompting a player of a dance game |
| US8444464B2 (en) | 2010-06-11 | 2013-05-21 | Harmonix Music Systems, Inc. | Prompting a player of a dance game |
| US9024166B2 (en) | 2010-09-09 | 2015-05-05 | Harmonix Music Systems, Inc. | Preventing subtractive track separation |
Also Published As
| Publication number | Publication date |
|---|---|
| US6890262B2 (en) | 2005-05-10 |
| JP2003030686A (ja) | 2003-01-31 |
| EP1279425A3 (en) | 2003-03-26 |
| EP1279425A2 (en) | 2003-01-29 |
| US20030017872A1 (en) | 2003-01-23 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3611807B2 (ja) | ビデオゲーム装置、ビデオゲームにおける擬似カメラ視点移動制御方法及びプログラム | |
| US7452275B2 (en) | Game device, game controlling method and program | |
| US8257176B2 (en) | Game device and method for processing images responsive to captured player images | |
| JP5039808B2 (ja) | ゲーム装置、ゲーム装置の制御方法、及びプログラム | |
| US7059962B2 (en) | Gun shooting game device, method of controlling computer and program | |
| US9155967B2 (en) | Method for implementing game, storage medium, game device, and computer | |
| US8956227B2 (en) | Storage medium recording image processing program, image processing device, image processing system and image processing method | |
| US8506404B2 (en) | Wireless gaming method and wireless gaming-enabled mobile terminal | |
| US7828659B2 (en) | Game device, control method of computer, and information storage medium | |
| JP5320332B2 (ja) | ゲーム装置、ゲーム装置の制御方法、及びプログラム | |
| US20120094773A1 (en) | Storage medium having stored thereon game program, image processing apparatus, image processing system, and image processing method | |
| US8523683B2 (en) | Storage medium storing game program, game apparatus and game control method | |
| US8884987B2 (en) | Storage medium having stored thereon display control program, display control apparatus, display control system, and display control method for setting and controlling display of a virtual object using a real world image | |
| JP2001299975A (ja) | 体感装置及び体感システム | |
| JP2011210019A (ja) | プログラム、情報記憶媒体及び画像生成装置 | |
| JP2003058317A (ja) | 指向位置検出用マーカ、指向位置検出装置及び射的ゲーム装置 | |
| JP2007328781A (ja) | インタラクティブな３次元位置追跡のためのシステム及び方法 | |
| JP2021126454A (ja) | ゲームシステム | |
| JP2020000911A (ja) | 映像表示装置 | |
| JP2019101513A (ja) | 仮想空間表示装置、ゲームシステムおよび仮想空間における仮想オブジェクトの向き判定方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20040706 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20040906 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20041019 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20041020 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 3611807 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20081029 Year of fee payment: 4 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20081029 Year of fee payment: 4 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20081029 Year of fee payment: 4 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20081029 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091029 Year of fee payment: 5 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101029 Year of fee payment: 6 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101029 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111029 Year of fee payment: 7 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121029 Year of fee payment: 8 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131029 Year of fee payment: 9 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| EXPY | Cancellation because of completion of term |