JP2003103052A - 映像体験システム、情報処理方法およびプログラム - Google Patents
映像体験システム、情報処理方法およびプログラムInfo
- Publication number
- JP2003103052A JP2003103052A JP2001300545A JP2001300545A JP2003103052A JP 2003103052 A JP2003103052 A JP 2003103052A JP 2001300545 A JP2001300545 A JP 2001300545A JP 2001300545 A JP2001300545 A JP 2001300545A JP 2003103052 A JP2003103052 A JP 2003103052A
- Authority
- JP
- Japan
- Prior art keywords
- game
- player
- image
- card
- computer graphics
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Processing Or Creating Images (AREA)
Abstract
(57)【要約】
【課題】 仮想のＣＧ画像を表示させることにより、現
実世界とＣＧの仮想世界を合わせて見ることができ、プ
レイボードを用いたゲームを今まで以上高い興奮度を感
じることができるようにすることを目的とする。 【解決手段】 プレイヤーが装着しているヘッドマウン
トディスプレイが有する撮像部から画像を入力しマーク
を検出し、プレイボー上におけるユーザの視線位置を求
める。さらに、プレイボード上のアイテムを識別し、識
別結果に基づきゲームシーンを示すコンピュータグラフ
ィックスを作成する。そして、視線位置に基づくコンピ
ュータグラフィックスをヘッドマウントディスプレイ上
に表示する。
実世界とＣＧの仮想世界を合わせて見ることができ、プ
レイボードを用いたゲームを今まで以上高い興奮度を感
じることができるようにすることを目的とする。 【解決手段】 プレイヤーが装着しているヘッドマウン
トディスプレイが有する撮像部から画像を入力しマーク
を検出し、プレイボー上におけるユーザの視線位置を求
める。さらに、プレイボード上のアイテムを識別し、識
別結果に基づきゲームシーンを示すコンピュータグラフ
ィックスを作成する。そして、視線位置に基づくコンピ
ュータグラフィックスをヘッドマウントディスプレイ上
に表示する。
Description
【０００１】
【発明の属する技術分野】複数のマークが付けられてい
るプレイボード上にアイテムを配置する進行するゲーム
に関するものである。
るプレイボード上にアイテムを配置する進行するゲーム
に関するものである。
【０００２】
【従来の技術】従来から様々なカードゲームが存在す
る。一般的なトランプを用いたポーカーやブラックジャ
ック等がある。最近では漫画のキャラクターをカードに
当てはめたカードを使用して行うカードゲームがはやっ
ている。
る。一般的なトランプを用いたポーカーやブラックジャ
ック等がある。最近では漫画のキャラクターをカードに
当てはめたカードを使用して行うカードゲームがはやっ
ている。
【０００３】このカードゲームはお互いにカード持ち寄
ってプレイシートまたはプレイボード上で対戦するもの
で、カードは漫画のキャラクターとその属性が記述され
ているものや、そのキャラクターの必殺技が記述されて
いるもので構成されている。プレイヤー同士はそれらの
カードを使用してゲームを進めていく。ゲームはカード
のコンビネーションで攻撃方法や攻撃力、防御方法や防
御力が決まり、それらによって勝敗が決まる。
ってプレイシートまたはプレイボード上で対戦するもの
で、カードは漫画のキャラクターとその属性が記述され
ているものや、そのキャラクターの必殺技が記述されて
いるもので構成されている。プレイヤー同士はそれらの
カードを使用してゲームを進めていく。ゲームはカード
のコンビネーションで攻撃方法や攻撃力、防御方法や防
御力が決まり、それらによって勝敗が決まる。
【０００４】
【発明が解決しようとする課題】このカードゲームはキ
ャラクター依存性が強くプレイヤーの思い入れも大き
い。そこでカードをプレイボード上に置いたときに、そ
のカードがキャラクターのものであればそのキャラクタ
ーがＣＧで登場し、そのカードが必殺技のものであれば
必殺技がＣＧで表示されるようになれば、よりゲームに
興奮度が増すと思われる。
ャラクター依存性が強くプレイヤーの思い入れも大き
い。そこでカードをプレイボード上に置いたときに、そ
のカードがキャラクターのものであればそのキャラクタ
ーがＣＧで登場し、そのカードが必殺技のものであれば
必殺技がＣＧで表示されるようになれば、よりゲームに
興奮度が増すと思われる。
【０００５】本発明は、仮想のＣＧ画像を表示させるこ
とにより、現実世界とＣＧの仮想世界を合わせて見るこ
とができ、プレイボードを用いたゲームを今まで以上高
い興奮度を感じることができるようにすることを目的と
する。
とにより、現実世界とＣＧの仮想世界を合わせて見るこ
とができ、プレイボードを用いたゲームを今まで以上高
い興奮度を感じることができるようにすることを目的と
する。
【０００６】
【課題を解決するための手段】本願の映像体験システム
は、複数のマークが付けられているプレイボード上にア
イテムを配置することにより進行するゲームを行うため
の映像体験システムであって、前記プレイボード上に置
かれた複数のアイテムの種類および該アイテムの位置を
認識する位置把握部と、前記複数のアイテムの種類およ
び前記アイテムの位置からゲームの進行を管理するゲー
ム管理手段と、前記複数のアイテムの種類および前記ア
イテムの位置に応じたゲームシーンのコンピュータグラ
フィックスを生成する生成手段とを有することを特徴と
する。
は、複数のマークが付けられているプレイボード上にア
イテムを配置することにより進行するゲームを行うため
の映像体験システムであって、前記プレイボード上に置
かれた複数のアイテムの種類および該アイテムの位置を
認識する位置把握部と、前記複数のアイテムの種類およ
び前記アイテムの位置からゲームの進行を管理するゲー
ム管理手段と、前記複数のアイテムの種類および前記ア
イテムの位置に応じたゲームシーンのコンピュータグラ
フィックスを生成する生成手段とを有することを特徴と
する。
【０００７】また、本願の情報処理方法は、複数のマー
クが付けられているプレイボード上にアイテムを配置す
ることにより進行するゲームのための情報処理方法であ
って、プレイヤーが装着しているヘッドマウントディス
プレイが有する撮像部から画像を入力し、前記画像内か
らマークを検出し、前記プレイボー上における前記ユー
ザの視線位置を求め、前記プレイボード上のアイテムを
識別し、該識別結果に基づきゲームのシーンを示すコン
ピュータグラフィックスを作成し、前記視線位置に基づ
く前記コンピュータグラフィックスを前記ヘッドマウン
トディスプレイ上に表示させることを特徴とする。
クが付けられているプレイボード上にアイテムを配置す
ることにより進行するゲームのための情報処理方法であ
って、プレイヤーが装着しているヘッドマウントディス
プレイが有する撮像部から画像を入力し、前記画像内か
らマークを検出し、前記プレイボー上における前記ユー
ザの視線位置を求め、前記プレイボード上のアイテムを
識別し、該識別結果に基づきゲームのシーンを示すコン
ピュータグラフィックスを作成し、前記視線位置に基づ
く前記コンピュータグラフィックスを前記ヘッドマウン
トディスプレイ上に表示させることを特徴とする。
【０００８】
【発明の実施の形態】（実施形態１）本実施形態では、
カードゲームにＭＲ技術（複合現実感技術）を用いるこ
とにより、現実世界とＣＧ（コンピュータグラフィック
ス）の仮想世界を合わせてゲームを進行させるシステム
を説明する。
カードゲームにＭＲ技術（複合現実感技術）を用いるこ
とにより、現実世界とＣＧ（コンピュータグラフィック
ス）の仮想世界を合わせてゲームを進行させるシステム
を説明する。
【０００９】以下に、２人のプレイヤーが設置されたボ
ード上でカードを使ってプレイする対戦型カードゲーム
に本実施形態を適用した場合のシステムを詳細に説明す
る。
ード上でカードを使ってプレイする対戦型カードゲーム
に本実施形態を適用した場合のシステムを詳細に説明す
る。
【００１０】本実施形態を用いてゲームを行っている時
のイメージを図１に示す。２人のプレイヤーはシースル
ーＨＭＤを被りゲームの対戦スペースとなるボードを間
にはさんで位置する。２人のプレイヤーはそれぞれの持
ちカードをボード上に配置したり、ボード上に配置した
カードを移動させたりしてゲームを進行させて行く。プ
レイヤーがシースルーＨＭＤを覗くとカード上にはカー
ドの特性に応じたＣＧが浮き出ているように見える。
のイメージを図１に示す。２人のプレイヤーはシースル
ーＨＭＤを被りゲームの対戦スペースとなるボードを間
にはさんで位置する。２人のプレイヤーはそれぞれの持
ちカードをボード上に配置したり、ボード上に配置した
カードを移動させたりしてゲームを進行させて行く。プ
レイヤーがシースルーＨＭＤを覗くとカード上にはカー
ドの特性に応じたＣＧが浮き出ているように見える。
【００１１】本実施形態のシステム構成の模式図を図２
に示す。
に示す。
【００１２】プレイヤーは２１ＨＭＤを被っていて２１
ＨＭＤには２０カメラと２２３次元位置姿勢測定手段が
備えられている。２１ＨＭＤは２５ゲーム管理部に、２
０カメラと２２３次元位置姿勢測定手段は２９位置把握
部に信号ケーブルで接続されている。
ＨＭＤには２０カメラと２２３次元位置姿勢測定手段が
備えられている。２１ＨＭＤは２５ゲーム管理部に、２
０カメラと２２３次元位置姿勢測定手段は２９位置把握
部に信号ケーブルで接続されている。
【００１３】２０カメラはプレイヤーの視線に合わせた
カメラでありプレイヤーの見ているものが２０カメラに
よって撮影される。撮影された画像データは２９位置把
握部に送られる。
カメラでありプレイヤーの見ているものが２０カメラに
よって撮影される。撮影された画像データは２９位置把
握部に送られる。
【００１４】プレイヤーが２６プレイボード上を見てい
る場合は、２０カメラの撮影画像には図３の３１マーカ
ーが写る。３１マーカーはプレイボード上のあらかじめ
決められたポイントに設置されていて、その位置情報は
２９位置把握部にインプットされている。それにより２
０カメラに写った３１マーカーによってプレイヤーの見
ている領域を推測することが出来る。
る場合は、２０カメラの撮影画像には図３の３１マーカ
ーが写る。３１マーカーはプレイボード上のあらかじめ
決められたポイントに設置されていて、その位置情報は
２９位置把握部にインプットされている。それにより２
０カメラに写った３１マーカーによってプレイヤーの見
ている領域を推測することが出来る。
【００１５】２２３次元位置姿勢測定手段はプレイヤー
が被るＨＭＤの位置・姿勢を測定するものである。測定
された位置姿勢データは２９位置把握部に入力される。
が被るＨＭＤの位置・姿勢を測定するものである。測定
された位置姿勢データは２９位置把握部に入力される。
【００１６】２９位置把握部では２０カメラに写った３
１マーカー位置と２２３次元位置姿勢測定手段からの位
置姿勢データからプレイヤーの見ている範囲を算出す
る。
１マーカー位置と２２３次元位置姿勢測定手段からの位
置姿勢データからプレイヤーの見ている範囲を算出す
る。
【００１７】２６プレイボードの上には２７屋根があり
そこには２８カード認識カメラが設置されている。な
お、２８カード認識カメラの数は１台で２６プレイボー
ド上すべてをカバーしてもよいし、例えば４つのエリア
に分けて４台の２８カード認識カメラを置いてもよい
し、カードの置かれる区分領域の数だけ２８カード認識
カメラを設置してもよい。２８カード認識カメラはゲー
ム中プレイボード上を常に撮影しており、撮影画像は２
４カード読み取り部に送られる。２４カード読み取り部
では撮影画像から２６プレイボード上のカードの識別が
行われる。
そこには２８カード認識カメラが設置されている。な
お、２８カード認識カメラの数は１台で２６プレイボー
ド上すべてをカバーしてもよいし、例えば４つのエリア
に分けて４台の２８カード認識カメラを置いてもよい
し、カードの置かれる区分領域の数だけ２８カード認識
カメラを設置してもよい。２８カード認識カメラはゲー
ム中プレイボード上を常に撮影しており、撮影画像は２
４カード読み取り部に送られる。２４カード読み取り部
では撮影画像から２６プレイボード上のカードの識別が
行われる。
【００１８】プレイボード上のマーカーについて説明す
る。図３は２６プレイボードを上から見た図である。２
６プレイボード上には３１マーカーが配置されている。
３１マーカーはある特定の色と形で作られたもので、
色、形、位置の情報はあらかじめ２９位置把握部に登録
されている。２０カメラの撮影画像からマーカー部を検
出し、色、形を識別することにより撮影画像が対応する
プレイボードの位置を判断することができる。そして、
その判断結果からプレイヤーがボードのどの領域を見て
いるかを推測することができる。
る。図３は２６プレイボードを上から見た図である。２
６プレイボード上には３１マーカーが配置されている。
３１マーカーはある特定の色と形で作られたもので、
色、形、位置の情報はあらかじめ２９位置把握部に登録
されている。２０カメラの撮影画像からマーカー部を検
出し、色、形を識別することにより撮影画像が対応する
プレイボードの位置を判断することができる。そして、
その判断結果からプレイヤーがボードのどの領域を見て
いるかを推測することができる。
【００１９】次にガイドについて説明する。図４は２６
プレイボードを上から見た図である。２６プレイボード
上には４１ガイドが手前のプレイヤーに５×２、反対側
のプレイヤーにも５×２で配置されている。４１ガイド
で区切られた領域はゲーム進行上カードが置かれるべき
位置であり、それ以外の領域に置かれてもゲーム進行上
には影響しない。４１ガイドによってカードの位置がき
っちり決められるため、カードの認識精度が上がる。４
１ガイドの構造はカードサイズのくぼみやカードサイズ
の囲い等である。
プレイボードを上から見た図である。２６プレイボード
上には４１ガイドが手前のプレイヤーに５×２、反対側
のプレイヤーにも５×２で配置されている。４１ガイド
で区切られた領域はゲーム進行上カードが置かれるべき
位置であり、それ以外の領域に置かれてもゲーム進行上
には影響しない。４１ガイドによってカードの位置がき
っちり決められるため、カードの認識精度が上がる。４
１ガイドの構造はカードサイズのくぼみやカードサイズ
の囲い等である。
【００２０】ゲームの流れをフローチャートを用いて説
明する。
明する。
【００２１】まず、図７を用いて２４カード読み取り部
の説明をする。
の説明をする。
【００２２】Ｓ７０１でスタートするとまずＳ７０２で
画像取り込みのフェーズに入る。Ｓ７０２では２８カメ
ラから来たプレイボード上の画像をキャプチャする。次
にそのキャプチャ画像をＳ７０３のカード識別フェーズ
で識別する。
画像取り込みのフェーズに入る。Ｓ７０２では２８カメ
ラから来たプレイボード上の画像をキャプチャする。次
にそのキャプチャ画像をＳ７０３のカード識別フェーズ
で識別する。
【００２３】図５を用いてカード識別について説明す
る。図５は２６プレイボードを上から見た図であり、図
４のガイド上に３つのカードを置いた状態である。左上
を（０，０）右下を（５，４）と座標をつける。図５の
状態は、（５，１）にＧのカード、（４，３）に２のカ
ード、（３，４）に１のカードが配置されている。
る。図５は２６プレイボードを上から見た図であり、図
４のガイド上に３つのカードを置いた状態である。左上
を（０，０）右下を（５，４）と座標をつける。図５の
状態は、（５，１）にＧのカード、（４，３）に２のカ
ード、（３，４）に１のカードが配置されている。
【００２４】Ｓ７０３では、２８カメラの画像を解析
し、画像認識技術を用いてプレイボード上に配置されて
いるカードを検出し、各カードの座標および種類を識別
する。そして、識別されたカードの座標および種類を、
カード配置データとして保持する。
し、画像認識技術を用いてプレイボード上に配置されて
いるカードを検出し、各カードの座標および種類を識別
する。そして、識別されたカードの座標および種類を、
カード配置データとして保持する。
【００２５】Ｓ７０４で以前のカード配置データと現在
のカード配置データを比較する。比較の結果配置データ
に変更がなければ、再びＳ７０２画像取り込みに戻る。
配置の変更があればＳ７０５の配置カードデータの変更
を行い、再びＳ７０２画像取り込みに戻る。
のカード配置データを比較する。比較の結果配置データ
に変更がなければ、再びＳ７０２画像取り込みに戻る。
配置の変更があればＳ７０５の配置カードデータの変更
を行い、再びＳ７０２画像取り込みに戻る。
【００２６】次に図８で２９ゲーム位置把握部の説明を
行う。
行う。
【００２７】Ｓ８０１でスタートするとまずＳ８０２で
画像取り込みフェーズに入る。Ｓ８０２ではプレイヤー
がつけているＨＭＤに付属している２０カメラからの画
像をキャプチャする。次にＳ８０３で２２３次元位置姿
勢測定手段から姿勢データを取り込む。Ｓ８０４ではＳ
８０２で取り込んだ画像から３１マーカーを識別してプ
レイヤーの視点を推測する。次にＳ８０５でＳ８０３で
得た姿勢情報とＳ８０４の推測位置の情報とからより正
確なプレイヤーの視点位置を決定する。その後は再びＳ
８０２に戻る。
画像取り込みフェーズに入る。Ｓ８０２ではプレイヤー
がつけているＨＭＤに付属している２０カメラからの画
像をキャプチャする。次にＳ８０３で２２３次元位置姿
勢測定手段から姿勢データを取り込む。Ｓ８０４ではＳ
８０２で取り込んだ画像から３１マーカーを識別してプ
レイヤーの視点を推測する。次にＳ８０５でＳ８０３で
得た姿勢情報とＳ８０４の推測位置の情報とからより正
確なプレイヤーの視点位置を決定する。その後は再びＳ
８０２に戻る。
【００２８】次に図９で２５ゲーム管理部の説明をす
る。
る。
【００２９】Ｓ９０１でスタートするとＳ９０２でプレ
イヤーからのゲーム進行合図を待つ。なんらかのイベン
トが来るとＳ９０３に行きイベントの種類を判別する。
そのイベントが次のフェーズへ進めという信号の場合、
Ｓ９０４に進む。そのイベントが異なる場合はＳ９０２
に行って再びイベントが来るのを待つ。
イヤーからのゲーム進行合図を待つ。なんらかのイベン
トが来るとＳ９０３に行きイベントの種類を判別する。
そのイベントが次のフェーズへ進めという信号の場合、
Ｓ９０４に進む。そのイベントが異なる場合はＳ９０２
に行って再びイベントが来るのを待つ。
【００３０】次のフェーズへ進めという信号は、フェー
ズを進行させる動作を認識し、生成される。フェーズを
進行させる動作の認識方法としては様々な方法が考えら
れる。例えば、図６のようにプレイヤーが宣言した音声
を音声認識部が認識しゲームの進行を判断したり、プレ
イヤーが備え付けているＨＭＤに付属の２０カメラにカ
ードを大きく映したことを画像認識を用いて判断した
り、ボード上の特定の位置にカードが置かれたことを２
８カード認識カメラからの画像から画像認識を用いて判
断することが考えられる。
ズを進行させる動作を認識し、生成される。フェーズを
進行させる動作の認識方法としては様々な方法が考えら
れる。例えば、図６のようにプレイヤーが宣言した音声
を音声認識部が認識しゲームの進行を判断したり、プレ
イヤーが備え付けているＨＭＤに付属の２０カメラにカ
ードを大きく映したことを画像認識を用いて判断した
り、ボード上の特定の位置にカードが置かれたことを２
８カード認識カメラからの画像から画像認識を用いて判
断することが考えられる。
【００３１】Ｓ９０４に進むと２４カード読み取り部が
導き出したカード配置データを読み込む。Ｓ９０５でカ
ードの配置データより現在のフェーズにおいて関係する
カードのデータを取り込み、そのカードの配置と組み合
わせによって、攻撃側の攻撃キャラクターと攻撃特性
（攻撃力と攻撃方法）を算出する。次にＳ９０６でＳ９
０５と同じようにカードの配置データから現在のフェー
ズにおいて関係するカードのデータを取り込み、そのカ
ードの配置と組み合わせによって、防御側の防御キャラ
クターと防御特性（防御力と防御方法）を算出する。Ｓ
９０５、Ｓ９０６における攻撃特性や防御特性の算出方
法は当該ゲームのルールに則って行う。
導き出したカード配置データを読み込む。Ｓ９０５でカ
ードの配置データより現在のフェーズにおいて関係する
カードのデータを取り込み、そのカードの配置と組み合
わせによって、攻撃側の攻撃キャラクターと攻撃特性
（攻撃力と攻撃方法）を算出する。次にＳ９０６でＳ９
０５と同じようにカードの配置データから現在のフェー
ズにおいて関係するカードのデータを取り込み、そのカ
ードの配置と組み合わせによって、防御側の防御キャラ
クターと防御特性（防御力と防御方法）を算出する。Ｓ
９０５、Ｓ９０６における攻撃特性や防御特性の算出方
法は当該ゲームのルールに則って行う。
【００３２】Ｓ９０７で攻撃側と防御側のキャラクター
の組み合わせにより戦闘結果を算出し、その結果に沿っ
た戦闘シーンを作成する。Ｓ９０８で２９位置把握部が
導き出したプレイヤー視点を獲得する。Ｓ９０９でプレ
イヤー視点から見た戦闘シーンのＣＧを作成する。次に
Ｓ９１０で２０カメラから取り込んだ画像とＳ９０９で
作成したＣＧを合成する。そして、プレイヤーが被って
いるＨＭＤに、ＭＲ技術を用いて現実世界とＣＧの仮想
世界を合わせることにより、カード上に仮想のＣＧキャ
ラクタを表示させる。
の組み合わせにより戦闘結果を算出し、その結果に沿っ
た戦闘シーンを作成する。Ｓ９０８で２９位置把握部が
導き出したプレイヤー視点を獲得する。Ｓ９０９でプレ
イヤー視点から見た戦闘シーンのＣＧを作成する。次に
Ｓ９１０で２０カメラから取り込んだ画像とＳ９０９で
作成したＣＧを合成する。そして、プレイヤーが被って
いるＨＭＤに、ＭＲ技術を用いて現実世界とＣＧの仮想
世界を合わせることにより、カード上に仮想のＣＧキャ
ラクタを表示させる。
【００３３】ただし合成が必要なのはビデオシースルー
ＨＭＤの場合であり、光学式シースルーＨＭＤの場合は
必要ない。
ＨＭＤの場合であり、光学式シースルーＨＭＤの場合は
必要ない。
【００３４】以上説明した本発明によれば、視点位置に
対応した仮想のＣＧグラフィックスを表示させることに
より、現実世界とＣＧの仮想世界を合わせて見ることが
でき、プレイボードを用いたゲームを今まで以上高い興
奮度を感じることができる。
対応した仮想のＣＧグラフィックスを表示させることに
より、現実世界とＣＧの仮想世界を合わせて見ることが
でき、プレイボードを用いたゲームを今まで以上高い興
奮度を感じることができる。
【００３５】（変形例）２８カード認識カメラを十分設
置できない場合に２８カード認識カメラの読み取り精度
を上げるために、カードを配置する前にプレイヤーが被
っている２１ＨＭＤの前にカードをかざし、２０カメラ
に撮影させてカード種類を識別するようにしても構わな
い。また、２８カード認識カメラの読み取り精度を上げ
るために、特定の位置に２８カード認識カメラを設置
し、カードを配置する前に特定位置の２８カード認識カ
メラに撮影させてカード種類を識別するようにしても構
わない。
置できない場合に２８カード認識カメラの読み取り精度
を上げるために、カードを配置する前にプレイヤーが被
っている２１ＨＭＤの前にカードをかざし、２０カメラ
に撮影させてカード種類を識別するようにしても構わな
い。また、２８カード認識カメラの読み取り精度を上げ
るために、特定の位置に２８カード認識カメラを設置
し、カードを配置する前に特定位置の２８カード認識カ
メラに撮影させてカード種類を識別するようにしても構
わない。
【００３６】また、実施形態１では、カードを用いてゲ
ームのアイテムとして用いたが、コマなどのカード以外
の他のアイテムを用いても構わない。
ームのアイテムとして用いたが、コマなどのカード以外
の他のアイテムを用いても構わない。
【００３７】また、プレイボードが凹凸のある立体構造
になっており、キャラクターはその立体構造の高さに応
じた位置に表示されるようにしても構わない。プレイボ
ードの立体構造のモデルを予め登録しておき、視線の位
置に対応する立体構造情報に基づき、合成するＣＧ位置
を制御する。
になっており、キャラクターはその立体構造の高さに応
じた位置に表示されるようにしても構わない。プレイボ
ードの立体構造のモデルを予め登録しておき、視線の位
置に対応する立体構造情報に基づき、合成するＣＧ位置
を制御する。
【００３８】また、プレイボード上のカードを識別する
ためのカード認識手段として、実施形態１では、２８カ
メラの画像を解析し画像認識技術を用いてカードの絵柄
を認識し識別していたが、カードにバーコードを付けバ
ーコードリーダーを用いて識別するようにしても構わな
い。
ためのカード認識手段として、実施形態１では、２８カ
メラの画像を解析し画像認識技術を用いてカードの絵柄
を認識し識別していたが、カードにバーコードを付けバ
ーコードリーダーを用いて識別するようにしても構わな
い。
【００３９】上述した実施形態の機能を実現する様に各
種のデバイスを動作させる様に該各種デバイスと接続さ
れた装置あるいはシステム内のコンピュータに、前記実
施の形態の機能を実現するためのソフトウエアのプログ
ラムコードを供給し、そのシステムあるいは装置のコン
ピュータ（ＣＰＵあるいはＭＰＵ）を格納されたプログ
ラムに従って前記各種デバイスを動作させることによっ
て実施したものも本発明の範疇に含まれる。
種のデバイスを動作させる様に該各種デバイスと接続さ
れた装置あるいはシステム内のコンピュータに、前記実
施の形態の機能を実現するためのソフトウエアのプログ
ラムコードを供給し、そのシステムあるいは装置のコン
ピュータ（ＣＰＵあるいはＭＰＵ）を格納されたプログ
ラムに従って前記各種デバイスを動作させることによっ
て実施したものも本発明の範疇に含まれる。
【００４０】この場合、前記ソフトウエアのプログラム
コード自体が前述した実施の形態の機能を実現すること
になり、そのプログラムコード自体、及びそのプログラ
ムコードをコンピュータに供給するための手段、例えば
かかるプログラムコードを格納した記憶媒体は本発明を
構成する。
コード自体が前述した実施の形態の機能を実現すること
になり、そのプログラムコード自体、及びそのプログラ
ムコードをコンピュータに供給するための手段、例えば
かかるプログラムコードを格納した記憶媒体は本発明を
構成する。
【００４１】かかるプログラムコードを格納する記憶媒
体としては例えばフロッピーディスク、ハードディス
ク、光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、磁気
テープ、不揮発性のメモリカード、ＲＯＭ等を用いるこ
とが出来る。
体としては例えばフロッピーディスク、ハードディス
ク、光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、磁気
テープ、不揮発性のメモリカード、ＲＯＭ等を用いるこ
とが出来る。
【００４２】またコンピュータが供給されたプログラム
コードを実行することにより、前述の実施形態の機能が
実現されるだけではなく、そのプログラムコードがコン
ピュータにおいて稼働しているＯＳ（オペレーティング
システム）、あるいは他のアプリケーションソフト等と
共同して前述の実施形態の機能が実現される場合にもか
かるプログラムコードは本発明の実施形態に含まれるこ
とは言うまでもない。
コードを実行することにより、前述の実施形態の機能が
実現されるだけではなく、そのプログラムコードがコン
ピュータにおいて稼働しているＯＳ（オペレーティング
システム）、あるいは他のアプリケーションソフト等と
共同して前述の実施形態の機能が実現される場合にもか
かるプログラムコードは本発明の実施形態に含まれるこ
とは言うまでもない。
【００４３】更に供給されたプログラムコードが、コン
ピュータの機能拡張ボードやコンピュータに接続された
機能拡張ユニットに備わるメモリに格納された後そのプ
ログラムコードの指示に基づいてその機能拡張ボードや
機能格納ユニットに備わるＣＰＵ等が実際の処理の一部
または全部を行い、その処理によって前述した実施形態
の機能が実現される場合も本発明に含まれることは言う
までもない。
ピュータの機能拡張ボードやコンピュータに接続された
機能拡張ユニットに備わるメモリに格納された後そのプ
ログラムコードの指示に基づいてその機能拡張ボードや
機能格納ユニットに備わるＣＰＵ等が実際の処理の一部
または全部を行い、その処理によって前述した実施形態
の機能が実現される場合も本発明に含まれることは言う
までもない。
【００４４】
【発明の効果】本発明は、仮想のＣＧグラフィックスを
表示させることにより、現実世界とＣＧの仮想世界を合
わせて見ることができ、プレイボードを用いたゲームを
今まで以上高い興奮度を感じることができるようにする
ことを目的とする。
表示させることにより、現実世界とＣＧの仮想世界を合
わせて見ることができ、プレイボードを用いたゲームを
今まで以上高い興奮度を感じることができるようにする
ことを目的とする。
【図１】実施形態１をイメージした図
【図２】実施形態１の構成を表した模式図
【図３】マーカーを説明する図
【図４】ガイドを説明する図
【図５】カード識別を説明する図
【図６】音声によるフェイズ進行を説明する図
【図７】カード読み取り部のフローチャート
【図８】位置把握部のフローチャート
【図９】ゲーム管理部のフローチャート
─────────────────────────────────────────────────────
【手続補正書】
【提出日】平成１４年９月３日（２００２．９．３）
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】００４４
【補正方法】変更
【補正内容】
【００４４】
【発明の効果】本発明は、仮想のＣＧグラフィックスを
表示させることにより、現実世界とＣＧの仮想世界を合
わせて見ることができ、プレイボードを用いたゲームを
今まで以上高い興奮度を感じることができるようにする
ことを目的とする。
表示させることにより、現実世界とＣＧの仮想世界を合
わせて見ることができ、プレイボードを用いたゲームを
今まで以上高い興奮度を感じることができるようにする
ことを目的とする。
─────────────────────────────────────────────────────
フロントページの続き
(72)発明者 野呂 英生
東京都大田区下丸子３丁目30番２号キヤノ
ン株式会社内
Ｆターム(参考） 2C001 BA01 BA04 BA05 BA06 BB02
BB07 BC05 BC08 CA08 CA09
CC01 DA01 DA04
Claims (9)
- 【請求項１】 複数のマークが付けられているプレイボ
ード上にアイテムを配置することにより進行するゲーム
を行うための映像体験システムであって、 前記プレイボード上に置かれた複数のアイテムの種類お
よび該アイテムの位置を認識する位置把握部と、 前記複数のアイテムの種類および前記アイテムの位置か
らゲームの進行を管理するゲーム管理手段と、 前記複数のアイテムの種類および前記アイテムの位置に
応じたゲームシーンのコンピュータグラフィックスを生
成する生成手段とを有することを特徴とする映像体験シ
ステム。 - 【請求項２】 さらに、前記ゲームは対戦型ゲームであ
り、自軍内の組み合わせで自軍キャラクターの特性を決
定する決定手段を有し、 前記生成手段は、前記決定された自軍キャラクターの特
性に基づき前記コンピュータグラフィックスを生成する
ことを特徴とする請求項１記載の映像体験システム。 - 【請求項３】 前記ゲーム管理手段は、自軍・他軍のキ
ャラクター特性の組み合わせでゲーム進行を管理するこ
とを特徴とする請求項１記載の映像体験システム。 - 【請求項４】 前記プレイボードは立体構造を有し、 前記プレイボードの立体構造のモデルに基づき、前記コ
ンピュータグラフィックスを、ユーザが装着しているヘ
ッドマウントディスプレイ上に表示させることを特徴と
する請求項１記載の映像体験システム。 - 【請求項５】 複数のマークが付けられているプレイボ
ード上にアイテムを配置することにより進行するゲーム
のための情報処理方法であって、 プレイヤーが装着しているヘッドマウントディスプレイ
が有する撮像部から画像を入力し、 前記画像内からマークを検出し、前記プレイボー上にお
ける前記ユーザの視線位置を求め、 前記プレイボード上のアイテムを識別し、該識別結果に
基づきゲームのシーンを示すコンピュータグラフィック
スを作成し、 前記視線位置に基づく前記コンピュータグラフィックス
を前記ヘッドマウントディスプレイ上に表示させること
を特徴とする情報処理方法。 - 【請求項６】 更に、プレイヤーの位置姿勢を測定する
３次元位置姿勢測定部から該プレイヤーの位置姿勢情報
を入力し、 前記視線位置は、前記位置姿勢情報および前記検出した
マークから求められることを特徴とする請求項５記載の
情報処理方法。 - 【請求項７】 前記プレイボード上の画像を撮影する撮
影部からの画像から、前記プレイボード上のアイテムを
識別することを特徴とする請求項５記載の情報処理方
法。 - 【請求項８】 さらに、プレイヤーからのゲームの進行
合図を認識することを特徴とする請求項５記載の情報処
理方法。 - 【請求項９】 複数のマークが付けられているプレイボ
ード上にアイテムを配置することにより進行するゲーム
のための情報処理方法を実現するためのプログラムであ
って、 プレイヤーが装着しているヘッドマウントディスプレイ
が有する撮像部から画像を入力し、 前記画像内からマークを検出し、前記プレイボー上にお
ける前記ユーザの視線位置を求め、 前記プレイボード上のアイテムを識別し、該識別結果に
基づきゲームのシーンを示すコンピュータグラフィック
スを作成し、 前記視線位置に基づく前記コンピュータグラフィックス
を前記ヘッドマウントディスプレイ上に表示させるプロ
グラム。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001300545A JP3584230B2 (ja) | 2001-09-28 | 2001-09-28 | 映像体験システム、情報処理方法およびプログラム |
| US10/254,789 US20030062675A1 (en) | 2001-09-28 | 2002-09-26 | Image experiencing system and information processing method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001300545A JP3584230B2 (ja) | 2001-09-28 | 2001-09-28 | 映像体験システム、情報処理方法およびプログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2003103052A true JP2003103052A (ja) | 2003-04-08 |
| JP3584230B2 JP3584230B2 (ja) | 2004-11-04 |
Family
ID=19121099
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2001300545A Expired - Fee Related JP3584230B2 (ja) | 2001-09-28 | 2001-09-28 | 映像体験システム、情報処理方法およびプログラム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3584230B2 (ja) |
Cited By (22)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005143657A (ja) * | 2003-11-12 | 2005-06-09 | Olympus Corp | 情報呈示システム、情報呈示装置、情報呈示装置のための媒体、情報呈示方法、及び情報提示プログラム |
| JP2005261643A (ja) * | 2004-03-18 | 2005-09-29 | Sony Computer Entertainment Inc | 情報処理装置およびエンタテインメント装置 |
| JP2005261642A (ja) * | 2004-03-18 | 2005-09-29 | Sony Computer Entertainment Inc | エンタテインメント装置 |
| WO2006025137A1 (ja) * | 2004-09-01 | 2006-03-09 | Sony Computer Entertainment Inc. | 画像処理装置、ゲーム装置および画像処理方法 |
| WO2006106679A1 (ja) * | 2005-03-31 | 2006-10-12 | Konami Digital Entertainment Co., Ltd. | ゲーム装置、ゲーム実行制御方法 |
| WO2007108101A1 (ja) * | 2006-03-20 | 2007-09-27 | Olympus Corporation | 情報端末 |
| EP2107414A1 (en) * | 2008-03-31 | 2009-10-07 | Brother Kogyo Kabushiki Kaisha | Head mount display and head mount display system |
| JP2010004923A (ja) * | 2008-06-24 | 2010-01-14 | Taito Corp | カードゲーム装置用のカードテーブル及びそのカードテーブルを備えたカードゲーム装置 |
| JP2011175439A (ja) * | 2010-02-24 | 2011-09-08 | Sony Corp | 画像処理装置、画像処理方法、プログラム及び画像処理システム |
| JP2012094101A (ja) * | 2010-09-28 | 2012-05-17 | Nintendo Co Ltd | 画像処理プログラム、画像処理装置、画像処理システム、および画像処理方法 |
| JP2012178068A (ja) * | 2011-02-25 | 2012-09-13 | Nintendo Co Ltd | 情報処理システム、情報処理方法、情報処理装置、及び情報処理プログラム |
| JP2013059542A (ja) * | 2011-09-14 | 2013-04-04 | Namco Bandai Games Inc | プログラム、情報記憶媒体及びゲーム装置 |
| JP2013061870A (ja) * | 2011-09-14 | 2013-04-04 | Namco Bandai Games Inc | プログラム、情報記憶媒体及び電子機器 |
| JP2013059541A (ja) * | 2011-09-14 | 2013-04-04 | Namco Bandai Games Inc | プログラム、情報記憶媒体、ゲーム装置及びコンピュータ |
| WO2014002346A1 (ja) * | 2012-06-29 | 2014-01-03 | 株式会社ソニー・コンピュータエンタテインメント | 映像処理装置、映像処理方法、および映像処理システム |
| US9282319B2 (en) | 2010-06-02 | 2016-03-08 | Nintendo Co., Ltd. | Image display system, image display apparatus, and image display method |
| US9278281B2 (en) | 2010-09-27 | 2016-03-08 | Nintendo Co., Ltd. | Computer-readable storage medium, information processing apparatus, information processing system, and information processing method |
| JPWO2016017121A1 (ja) * | 2014-07-28 | 2017-06-22 | パナソニックＩｐマネジメント株式会社 | 拡張現実表示システム、端末装置および拡張現実表示方法 |
| US10015473B2 (en) | 2010-06-11 | 2018-07-03 | Nintendo Co., Ltd. | Computer-readable storage medium, image display apparatus, image display system, and image display method |
| JP2018129043A (ja) * | 2014-03-14 | 2018-08-16 | 株式会社ソニー・インタラクティブエンタテインメント | 空間感知を備えるゲーム機 |
| JP2021176460A (ja) * | 2020-05-10 | 2021-11-11 | 望月 貴里子 | 仮想空間表示装置、プログラム |
| WO2023282257A1 (ja) * | 2021-07-08 | 2023-01-12 | エンゼルグループ株式会社 | カードゲーム対戦システム |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP6112815B2 (ja) * | 2012-09-27 | 2017-04-12 | 京セラ株式会社 | 表示装置、制御システムおよび制御プログラム |
-
2001
- 2001-09-28 JP JP2001300545A patent/JP3584230B2/ja not_active Expired - Fee Related
Cited By (30)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005143657A (ja) * | 2003-11-12 | 2005-06-09 | Olympus Corp | 情報呈示システム、情報呈示装置、情報呈示装置のための媒体、情報呈示方法、及び情報提示プログラム |
| JP2005261643A (ja) * | 2004-03-18 | 2005-09-29 | Sony Computer Entertainment Inc | 情報処理装置およびエンタテインメント装置 |
| JP2005261642A (ja) * | 2004-03-18 | 2005-09-29 | Sony Computer Entertainment Inc | エンタテインメント装置 |
| US7991220B2 (en) | 2004-09-01 | 2011-08-02 | Sony Computer Entertainment Inc. | Augmented reality game system using identification information to display a virtual object in association with a position of a real object |
| WO2006025137A1 (ja) * | 2004-09-01 | 2006-03-09 | Sony Computer Entertainment Inc. | 画像処理装置、ゲーム装置および画像処理方法 |
| WO2006106679A1 (ja) * | 2005-03-31 | 2006-10-12 | Konami Digital Entertainment Co., Ltd. | ゲーム装置、ゲーム実行制御方法 |
| JP2006280658A (ja) * | 2005-03-31 | 2006-10-19 | Konami Digital Entertainment:Kk | ゲーム装置、ゲーム実行制御プログラム及びゲーム実行制御方法 |
| WO2007108101A1 (ja) * | 2006-03-20 | 2007-09-27 | Olympus Corporation | 情報端末 |
| EP2107414A1 (en) * | 2008-03-31 | 2009-10-07 | Brother Kogyo Kabushiki Kaisha | Head mount display and head mount display system |
| JP2010004923A (ja) * | 2008-06-24 | 2010-01-14 | Taito Corp | カードゲーム装置用のカードテーブル及びそのカードテーブルを備えたカードゲーム装置 |
| JP2011175439A (ja) * | 2010-02-24 | 2011-09-08 | Sony Corp | 画像処理装置、画像処理方法、プログラム及び画像処理システム |
| US9282319B2 (en) | 2010-06-02 | 2016-03-08 | Nintendo Co., Ltd. | Image display system, image display apparatus, and image display method |
| US10015473B2 (en) | 2010-06-11 | 2018-07-03 | Nintendo Co., Ltd. | Computer-readable storage medium, image display apparatus, image display system, and image display method |
| US9278281B2 (en) | 2010-09-27 | 2016-03-08 | Nintendo Co., Ltd. | Computer-readable storage medium, information processing apparatus, information processing system, and information processing method |
| JP2012094101A (ja) * | 2010-09-28 | 2012-05-17 | Nintendo Co Ltd | 画像処理プログラム、画像処理装置、画像処理システム、および画像処理方法 |
| JP2012178068A (ja) * | 2011-02-25 | 2012-09-13 | Nintendo Co Ltd | 情報処理システム、情報処理方法、情報処理装置、及び情報処理プログラム |
| US9064335B2 (en) | 2011-02-25 | 2015-06-23 | Nintendo Co., Ltd. | System, method, device and computer-readable medium recording information processing program for superimposing information |
| JP2013059541A (ja) * | 2011-09-14 | 2013-04-04 | Namco Bandai Games Inc | プログラム、情報記憶媒体、ゲーム装置及びコンピュータ |
| JP2013061870A (ja) * | 2011-09-14 | 2013-04-04 | Namco Bandai Games Inc | プログラム、情報記憶媒体及び電子機器 |
| US9155967B2 (en) | 2011-09-14 | 2015-10-13 | Bandai Namco Games Inc. | Method for implementing game, storage medium, game device, and computer |
| JP2013059542A (ja) * | 2011-09-14 | 2013-04-04 | Namco Bandai Games Inc | プログラム、情報記憶媒体及びゲーム装置 |
| US9639989B2 (en) | 2012-06-29 | 2017-05-02 | Sony Corporation | Video processing device, video processing method, and video processing system |
| JP2014010664A (ja) * | 2012-06-29 | 2014-01-20 | Sony Computer Entertainment Inc | 映像処理装置、映像処理方法、および映像処理システム |
| WO2014002346A1 (ja) * | 2012-06-29 | 2014-01-03 | 株式会社ソニー・コンピュータエンタテインメント | 映像処理装置、映像処理方法、および映像処理システム |
| JP2018129043A (ja) * | 2014-03-14 | 2018-08-16 | 株式会社ソニー・インタラクティブエンタテインメント | 空間感知を備えるゲーム機 |
| JPWO2016017121A1 (ja) * | 2014-07-28 | 2017-06-22 | パナソニックＩｐマネジメント株式会社 | 拡張現実表示システム、端末装置および拡張現実表示方法 |
| JP2021176460A (ja) * | 2020-05-10 | 2021-11-11 | 望月 貴里子 | 仮想空間表示装置、プログラム |
| JP7229198B2 (ja) | 2020-05-10 | 2023-02-27 | 望月 貴里子 | 仮想空間表示装置、プログラム |
| WO2023282257A1 (ja) * | 2021-07-08 | 2023-01-12 | エンゼルグループ株式会社 | カードゲーム対戦システム |
| JP2023010645A (ja) * | 2021-07-08 | 2023-01-20 | エンゼルグループ株式会社 | カードゲーム対戦システム |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3584230B2 (ja) | 2004-11-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2003103052A (ja) | 映像体験システム、情報処理方法およびプログラム | |
| US20030062675A1 (en) | Image experiencing system and information processing method | |
| US8854356B2 (en) | Storage medium having stored therein image processing program, image processing apparatus, image processing system, and image processing method | |
| JP5791433B2 (ja) | 情報処理プログラム、情報処理システム、情報処理装置および情報処理方法 | |
| US7084887B1 (en) | Marker layout method, mixed reality apparatus, and mixed reality space image generation method | |
| US9495800B2 (en) | Storage medium having stored thereon image processing program, image processing apparatus, image processing system, and image processing method | |
| JP5738569B2 (ja) | 画像処理プログラム、装置、システムおよび方法 | |
| JP3584229B2 (ja) | 映像体験システムおよび情報処理方法 | |
| CN103140879B (zh) | 信息呈现装置、数字照相机、头戴式显示器、投影仪、信息呈现方法和信息呈现程序 | |
| US8226011B2 (en) | Method of executing an application in a mobile device | |
| JP3904562B2 (ja) | 画像表示システム、記録媒体及びプログラム | |
| JP4425274B2 (ja) | トラッキングされている頭部の動作に従って表示中のシーンのビューを調整する方法及び装置 | |
| US9030493B2 (en) | Image processing system, method and apparatus, and computer-readable medium recording image processing program | |
| US6335731B1 (en) | Image generation device and information storage medium | |
| US20120094773A1 (en) | Storage medium having stored thereon game program, image processing apparatus, image processing system, and image processing method | |
| JP2002157606A (ja) | 画像表示制御装置、複合現実感提示システム、画像表示制御方法、及び処理プログラムを提供する媒体 | |
| US8262476B2 (en) | Game apparatus, character and virtual camera control method, program and recording medium | |
| JP2005143657A (ja) | 情報呈示システム、情報呈示装置、情報呈示装置のための媒体、情報呈示方法、及び情報提示プログラム | |
| JP6202980B2 (ja) | 情報処理プログラム、情報処理装置、情報処理システム、および、情報処理方法 | |
| JP2013050883A (ja) | 情報処理プログラム、情報処理システム、情報処理装置および情報処理方法 | |
| JP5735861B2 (ja) | 画像表示プログラム、画像表示装置、画像表示方法、画像表示システム、マーカ | |
| JP2013050882A (ja) | 情報処理プログラム、情報処理システム、情報処理装置および情報処理方法 | |
| US20090082106A1 (en) | System and method for rendering game pieces | |
| CN116196624A (zh) | 程序、游戏装置以及游戏*** | |
| JP2005149315A (ja) | 画像描画装置及び方法、プログラム並びに記録媒体 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20040203 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20040405 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20040727 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20040802 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20070806 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080806 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080806 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090806 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090806 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100806 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110806 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120806 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120806 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130806 Year of fee payment: 9 |
|
| LAPS | Cancellation because of no payment of annual fees |