JP3851907B2 - 画像表示システム及びビデオゲームシステム - Google Patents

Description

本発明は、机やテーブル等の上に置かれたカードを撮像し、その撮像した映像と共に、カードに貼付された識別情報に対応するオブジェクトの三次元画像を表示する画像表示システム及び画像表示システムの原理を利用したビデオゲームシステムに関する。

近時、表面又は裏面に識別画像（二次元バーコード等）が貼付されたカードを例えばＣＣＤカメラで撮像し、この撮像画像の画像データから前記カードに貼付された識別画像の画像データを探知し、探知された識別画像の画像データから前記カードの識別情報を検出する方法が特許文献１によって開示されている。

そして、この方法を発展させて、前記ＣＣＤカメラからの前記カードの画像を含むを撮像画像をモニタ上に表示すると共に、前記モニタに表示されている前記カードの画像上に、検出された前記識別情報に対応したオブジェクトの三次元画像を重畳して表示するようにした例が特許文献２によって明らかにされている。この方法によれば、実空間と仮想空間を融合した視覚効果を表現することが可能となる。

特開２０００−８２１０８号公報 特開２０００−３２２６０２号公報

本発明は、上述した特許文献２の方法をさらに発展させて、様々なビデオゲームに簡単に適用させることができ、ビデオゲームの範疇の拡大化、多様化を図ることができる画像表示システムを提供することを目的とする。

また、本発明の目的は、上述した特許文献２の方法をさらに発展させて、実空間でしか楽しめなかったカードゲームを仮想空間にまで広げることができ、カードゲームとビデオゲームとが融合した新規なゲームを提供することができるビデオゲームシステムを提供することにある。

本発明では、表示されたカードの画像上に、該カードの識別情報に対応するオブジェクトの画像が重畳して表示される。そして、所定のタイミングで撮像した画像データと前記所定のタイミングとは別のタイミングで撮像した画像データとの差分をとられ、差分後のデータに基づいて動きのあった画像が特定される。この特定された画像がオブジェクトの画像に接触しているかどうかが判別され、接触していると判別された場合に、前記識別情報に対応するパラメータが変更されることになる。これは、例えばビデオゲームであれば、ユーザがキャラクタをなでることで、キャラクタの経験値や体力等が増加する等の処理が行われ、キャラクタの育成ゲーム等に好適である。ここで、キャラクタとは、オブジェクトのうち、動きを伴うオブジェクトであって、人間や動物、あるいはテレビ番組やアニメーション映画等で登場する主人公等を模したオブジェクトを指す。

そして、差分演算処理は、第１の差分信号に基づいて前記撮像手段からの撮像画像の画像データを第１の差分用メモリに記憶し、第２の差分信号に基づいて前記撮像手段からの撮像画像の画像データを第２の差分用メモリに記憶し、前記第１の差分メモリに記憶された画像データと前記第２の差分メモリに記憶された画像データとの差分をとるようにしてもよい。

接触判別処理は、前記画像特定手段にて特定された画像の一部のスクリーン座標と前記オブジェクトの一部のスクリーン座標とが同じ場合に、前記特定された画像が前記オブジェクトに接触していると判別するようにしてもよい。

画像特定処理は、前記動きのあった画像をユーザの手の画像として疑似的に特定するようにしてもよい。つまり、ここでの処理は、上述した差分演算処理を行った結果、ある画像がキャラクタの画像に接触するように動いていることが判明したとき、その画像はユーザの手であって、例えばユーザがキャラクタをなでていると疑似的に認識する等である。

また、本発明は、所定のタイミングで撮像した画像データと前記所定のタイミングとは別のタイミングで撮像した画像データとの差分をとり、差分後のデータに基づいて前記カードに動きがあったかどうかを判別し、その判別結果に従った表示処理を行う。例えば、複数のカードが重なった場合に、前記複数のカードが重なった画像の上に１つの新たなオブジェクトの画像を重畳して表示する等の表示処理が行われる。この場合、前記新たなオブジェクトとしては、前記複数のカードの識別情報の組み合わせに対応したオブジェクト等が考えられる。ビデオゲームに適用した場合は、前記判別結果に従ってビデオゲームのシナリオを進行させる等である。この場合、撮像されたカードの画像が複数ある場合であって、かつ、前記カード動き判別手段にて１つのカードが移動していると判別した場合に、前記各カードの画像上に表示されている複数のオブジェクトの画像のうち、移動していると判別したカードの画像上に表示されているオブジェクトの画像を選択してシナリオを進行させる等の処理を行うことができる。

また、本発明は、前記カードに描かれた識別情報を検出し、所定のタイミングで撮像した前記カードの画像データと前記所定のタイミングとは別のタイミングで撮像した前記カードの画像データとの差分をとり、差分後のデータに基づいて前記カードに動きがあったかどうかを判別する。そして、前記カードに動きがあった場合に、該カードの識別情報を再度検出する。これによって、複数のカードがあった場合の配置換えや新たなカードへの交換が行われた場合でもその動きのあったカードの画像上にそのカードの識別情報に対応したオブジェクトの画像を重畳させて表示させることができる。

また、本発明は、撮像画像に存在する１枚目のカードに貼付された識別画像の位置から前記撮像画像全体のカメラ座標系を求めると共に、前記識別画像に基づいて１枚目のカードの識別情報を検出する。そして、１枚目のカードのカメラ座標に基づいて他のカードの配置位置を予測し、予測した配置位置における画像から他のカードに貼付された識別画像を検出して、他のカードの識別情報を検出する。

この処理としては、例えば１枚目のカードの識別画像の画像データをアフィン変換して１枚目のカードの識別情報を検出し、他のカードの識別画像の画像データをアフィン変換して該他のカードの識別情報を検出する等である。

例えば２人のユーザがそれぞれ複数のカードを例えば横方向に並べる場合であって、かつ、前記各ユーザがそれぞれ１枚目のカードを１つの対角線上に置く場合においては、前記撮像画像のうち、対角線上に並んだ２つのカードの画像の位置を検出し、検出された前記２つのカードの位置から前記対角線を含む矩形領域を特定する。そして、特定された前記矩形領域内の画像データから残りのカードの識別情報を検出するようにしてもよい。

これにより、複数のカードに対する認識処理の負荷を軽減することができ、処理スピードの高速化につながる。

上述の発明において、同一のオブジェクトに複数の識別情報を割り当て、前記複数の識別情報のそれぞれにおいて前記同一のオブジェクトに関するパラメータを異なせるようにしてもよい。これにより、例えば同じオブジェクトであっても、その後のシナリオの進行や時間の経過に伴って別のオブジェクトに変化する場合や変化しない場合等、あるいは経験値の増加が速い場合や遅い場合等、様々なパラメータの違いを自由に設定することができる。そのため、例えばビデオゲームに適用した場合に、キャラクタ毎の成長の過程を楽しんだり、カードのランク付け等を楽しむことが可能となる。

また、前記コンピュータに接続される着脱自在の記憶媒体を有し、前記識別情報に対応する情報を前記記憶媒体にて管理するようにしてもよいし、前記コンピュータをネットワークを介してネットワークサーバに接続し、前記識別情報に対応する情報を前記ネットワークサーバにて管理するようにしてもよい。

この場合、例えばユーザのビデオゲームシステムに識別情報に対応する情報を記憶している場合、カードに対応するオブジェクトやパラメータ等はそれぞれユーザ毎に異なることとなる。そのため、カードを譲渡しても、識別情報に対応する情報の内容が異なれば、ほとんど意味がない。しかし、識別情報に対応する情報を着脱自在の記憶媒体やネットワークサーバで一括管理できれば、識別情報に対応する情報はそれぞれユニークな情報となり、全ユーザにおいて共通とすることができる。そのため、カードの譲渡を可能にすることができる。

更に、本発明では、前記カードの識別画像を、セルが多数配置されてなる二次元バーコードにて構成するようにしてもよい。この場合、セルを黒の油性ペンや水性ペンで塗り足したり、セルを白の油性ペンや水性ペンで消したりすることで、自由に識別情報を変えることができる。どのようなオブジェクトの画像が登場するか、また、経験値のアップによってどのような形態に変化していくかを楽しむことができ、ビデオゲームに対して更に面白みを加えることができる。

以上説明したように、本発明に係る画像表示システムによれば、様々なビデオゲームに簡単に適用させることができ、ビデオゲームの範疇の拡大化、多様化を図ることができる。

また、本発明に係るビデオゲームシステムによれば、実空間でしか楽しめなかったカードゲームを仮想空間にまで広げることができ、カードゲームとビデオゲームとが融合した新規なゲームを提供することができる。

以下、本発明に係る画像表示システムをビデオゲームシステムに適用した実施の形態例を図１〜図２９を参照しながら説明する。

本実施の形態に係るビデオゲームシステム１０は、図１に示すように、ビデオゲーム機１２と各種外部機器１４とを有する。

ビデオゲーム機１２は、各種プログラムを実行するＣＰＵ１６と、各種プログラムやデータが格納されるメインメモリ１８と、画像データが記録（描画）される画像メモリ２０と、各種外部機器１４とのデータのやりとりを行うための入出力ポート２２と、後述する差分演算を行うための第１及び第２の差分用メモリ２４及び２６とを有する。

入出力ポート２２に接続される各種外部機器１４は、表示用インターフェース（Ｉ／Ｆ）２８を介して接続されるモニタ３０と、光ディスク（ＤＶＤ−ＲＯＭ、ＤＶＤ−ＲＷ、ＤＶＤ−ＲＡＭ、ＣＤ−ＲＯＭ等）３２に対して再生／記録を行う光ディスクドライブ３４と、メモリカード用インターフェース（Ｉ／Ｆ）３６を介して接続されるメモリカード３８と、撮像用インターフェース（Ｉ／Ｆ）４０を介して接続されるＣＣＤカメラ４２と、ハードディスク４４に対して再生／記録を行うハードディスクドライブ（ＨＤＤ）４６と、音声用インターフェース４８を介して接続されるスピーカ５０とを有する。もちろん、入出力ポート２２から図示しないルータを介してインターネット（図示せず）に接続される場合もある。

これら外部機器１４に対するデータの入出力並びにビデオゲーム機１２内でのデータの加工等はＣＰＵ１６とメインメモリ１８を通じて行われ、特に、撮像データや画像データは画像メモリ２０に記録（描画）される。

次に、この実施の形態に係るビデオゲームシステム１０が有する特徴的な機能、即ち、例えば光ディスク３２、メモリカード３８やハードディスク４４のようなランダムアクセス可能な記録媒体、さらにはインターネットやイントラネットのようなネットワークによってビデオゲーム機１２に提供されるプログラムによって実現される機能について図２〜図３１を参照しながら説明する。

まず、このビデオゲームシステム１０にて使用されるカード５４について説明する。このカード５４は、一般にカードゲームで使用されるカードと同じ大きさ厚みを有し、表面には、図２Ａに示すように、カード５４に対応したキャラクタを示す絵柄が印刷され、裏面には、図２Ｂに示すように、識別画像５６が印刷されている。もちろん、透明性のカードでもかまわない。この場合、識別画像５６だけが印刷されることになる。

識別画像５６は、図２Ｂに示すような二次元バーコード（以下、２Ｄコードと略記する）のパターンにて構成されている。識別画像５６は、１ブロックを１単位とし、縦方向が９．５ブロック分の長さで、横方向が７ブロック分の長さの長方形の範囲内に、ロゴ部５８とコード部６０が１ブロック分離して配置されている。ロゴ部５８は、コード部６０の基準位置とカード５４の方向を知らせるための２Ｄコードであって、縦方向が１．５ブロック分の長さで、横方向が７ブロック分の長さの大きな長方形の黒色の基準セル６２が配置されている。なお、このロゴ部５８には、例えば、キャラクタの名称、あるいは宣伝のためのマーク（ロゴ）等が印刷される場合もある。

コード部６０は、縦方向と横方向が共に７ブロック分の長さの正方形の範囲のうち、各コーナー部に対応して識別情報認識用の例えば黒色の方形のコーナーセル６４が配置され、さらに、４つのコーナーセル６４で囲まれた領域に識別情報を認識するための例えば黒色の方形の識別セル６６が二次元的にパターン化され配置されている。

撮像画像データから識別画像５６の位置を検出する手法、コーナーセル６４の画像を検出する手法並びに識別セル６６の二次元パターンを検出する手法は、例えば先に述べた特許文献１（特開２０００−８２１０８号公報）に詳しく説明してあるため、該特許文献１を参照されたい。

また、本実施の形態では、識別セル６６の二次元パターンの各種パターンと各パターンに対応する識別番号との対応テーブルが例えばデータベース６８（２Ｄコードのデータベース：図６や図７参照）としてハードディスク４４や光ディスク３２等に登録されている。従って、検出した識別セル６６の二次元パターンをデータベース６８内の前記対応テーブルで照合することによって、カード５４の識別番号を容易に検出することができる。

そして、ビデオゲームシステムで実現される機能は、図３Ａ及び図３Ｂに示すように、机やテーブル５２等に置かれた例えば６つのカード５４１、５４２、５４３、５４４、５４５及び５４６をＣＣＤカメラ４２で撮像してモニタ３０の画面に表示すると共に、モニタ３０の画面に表示されたカード５４１、５４２、５４３、５４４、５４５及び５４６の各画像、例えば各カード５４１、５４２、５４３、５４４、５４５及び５４６に貼付された識別画像５６１、５６２、５６３、５６４、５６５及び５６６の上に、各カード５４１〜５４６の識別画像５６１〜５６６等に対応するオブジェクト（キャラクタ）の画像７０１、７０２、７０３、７０４、７０５及び７０６を重畳して表示することで、ゲームとビデオゲームとを融合したゲームを実現させるというものである。なお、キャラクタとは、オブジェクトのうち、人間や動物、あるいはテレビ番組やアニメーション映画等で登場する主人公等を指す。

また、ＣＣＤカメラ４２は、図３Ａに示すように、机やテーブル５２上に固定されたスタンド７２に取り付けられるが、このとき、例えばユーザによって、ＣＣＤカメラ４２の撮像面がカード５４１〜５４６の置かれた部分に向くように調整される。もちろん、図４Ａに示すように、ユーザ７４が例えば１つのカード５４２を持っている姿を撮像してモニタ３０に映し出すことによって、モニタ３０の画面には、図４Ｂに示すように、ユーザ７４の画像とカード５４２の識別画像５６２とキャラクタの画像７０２が表示され、ユーザ７４が持っているカード５４２上にキャラクタが乗っているようなシーンを表示させることもできる。

そして、本実施の形態の上述した機能は、例えばハードディスク４４にインストールされた各種プログラムのうち、前記機能を実現するためのアプリケーションプログラムがＣＰＵ１６で実行されることによって達成される。

このアプリケーションプログラム８０は、図５に示すように、カード認識プログラム８２、キャラクタ出現表示プログラム８４、キャラクタ動作表示プログラム８６、第１のカード位置予測プログラム８８、第２のカード位置予測プログラム９０、画像動き検出プログラム９２、カード動き検出プログラム９４、カード再認識プログラム９６、キャラクタ変化プログラム９８、情報テーブル参照プログラム１００を有する。

ここで、前記アプリケーションプログラム８０の機能について図５〜図２９を参照しながら説明する。

まず、カード認識プログラム８２は、机やテーブル５２等の上に置かれたカード（例えば図３Ａにおけるカード５４１）の識別画像５６１を認識して、識別画像５６１上に表示させるべきキャラクタの画像（例えば図３Ｂにおける画像７０１）を特定する処理を行うもので、図６に示すように、撮像画像描画機能１０２と、基準セル探知機能１０４と、識別情報検出機能１０６と、カメラ座標検出機能１０８と、キャラクタ画像検索機能１１０とを有する。ここで、「認識」とは、画像メモリ２０に描画された撮像画像データから検出されたカード５４１の識別画像５６１から当該カード５４１の識別番号や方向を検出することを示す。

撮像画像描画機能１０２は、撮像した被写体の映像を画像メモリ２０に背景画像として設定し描画する。背景画像として設定する処理の１つとしては、ＺバッファリングへのＺ値の設定等が挙げられる。

基準セル探知機能１０４は、上述したように、画像メモリ２０に描画された画像データ（撮像画像データ）からロゴ部５８の基準セル６２の画像データを探知して、基準セル６２の画像データの位置を検出する。基準セル６２の画像データの位置は、スクリーン座標として検出される。

識別情報検出機能１０６は、図７に示すように、検出した基準セル６２の画像データの位置に基づいてコーナーセル６４の画像データを検出し、これら基準セル６２及びコーナーセル６４によって形成される領域１１２の画像データをアフィン変換して、カード５４１の識別画像５６１を上面から見た画像１１４と等価な画像データとし、該画像データからコード部６０の二次元パターン、すなわち、コーナーセル６４と識別セル６６の二次元パターンからなるコード１１６を抽出し、該コード１１６から識別番号等を検出する。識別番号の検出は、上述したように、抽出したコード１１６を２Ｄコードのデータベース６８と照合することによって行われる。

カメラ座標検出機能１０８は、図８に示すように、検出したスクリーン座標並びにＣＣＤカメラの焦点距離に基づいてカメラ視点Ｃ０を原点とするカメラ座標系（６軸の方向：ｘ、ｙ、ｚ、θｘ、θｙ及びθｚ）を求め、カード５４１における識別画像５６１のカメラ座標を求める。このとき、カード５４１におけるロゴ部５８の中心のカメラ座標とコード部６０の中心のカメラ座標が求められる。

なお、画像メモリ２０に描画された画像のスクリーン座標から該画像のカメラ座標を求める手法、並びにある画像のカメラ座標から画像メモリ２０上のスクリーン座標を求める手法については、先に述べた特許文献２（特開２０００−３２２６０２号公報）に詳しく説明してあるため、該特許文献２を参照されたい。

キャラクタ画像検索機能１１０は、検出した識別番号に基づくキャラクタの画像（例えば図３Ｂに示すキャラクタの画像７０１）をオブジェクト情報テーブル１１８から検索する。

オブジェクト情報テーブル１１８の内訳は、例えば図９に示すように、多数のレコードが配列されて構成され、１つのレコードに、識別番号、基本パラメータ（経験値、レベル）、キャラクタの画像データ（レベル１）の格納先頭アドレス、レベル１のパラメータ（体力、攻撃力、防御力等）、キャラクタの画像データ（レベル２）の格納先頭アドレス、レベル２のパラメータ（体力、攻撃力、防御力等）、キャラクタの画像データ（レベル３）の格納先頭アドレス、レベル３のパラメータ（体力、攻撃力、防御力等）、有効／無効ビットが登録されている。

画像データとしては、基本パラメータの１つであるレベルに対応する画像データが読み出される。つまり、レベルが１であれば、レベル１に対応する格納先頭アドレスから画像データが読み出され、さらに、レベル１のパラメータが読み出されることになる。レベル２及びレベル３についても同様である。また、有効／無効ビットは、そのレコードが有効であるかどうかを判別するためのビットである。「無効」が設定される場合は、例えば現段階ではキャラクタの画像が設定されていない場合や、例えばキャラクタがビデオゲームで設定された戦闘で負け、死亡した場合等である。

そして、このキャラクタ画像検索機能１１０は、オブジェクト情報テーブル１１８から当該識別番号に対応するレコードを検索し、検索したレコードが「有効」であれば、該レコードに登録された複数の格納先頭アドレスのうち、現在のレベルに対応する格納先頭アドレスから画像データ１２０を読み出す。例えばハードディスク４４や光ディスク３２等に記録され、かつ、多数の画像データ１２０が登録されたデータファイル１２２のうち、前記格納先頭アドレスから当該キャラクタに対応する画像データ１２０を読み出す。「無効」の場合は、画像データ１２０を読み出さない。

従って、机やテーブル５２等に１つのカード５４１を置いたとき、前記カード認識プログラム８２が起動されて、置かれたカード５４１の識別画像５６１で特定される識別番号及びレベル（以下、識別番号等と記す）に対応するキャラクタの画像７０１が特定されることになる。なお、レベルに応じてキャラクタの画像を変化させないのであれば、オブジェクト情報テーブル１１８の各レコードには、画像データ１２０について１つの格納先頭アドレスだけが登録されることから、この場合は、カード５４１の識別画像５６１で特定される識別番号に対応するキャラクタの画像７０１が特定されることになる。

このカード認識プログラム８２により、実空間と仮想空間を融合した視覚効果を表現することが可能となる。そして、このカード認識プログラム８２から様々なアプリケーションプログラム（キャラクタ出現表示プログラム８４、キャラクタ動作表示プログラム８６、第１のカード位置予測プログラム８８、第２のカード位置予測プログラム９０等）に制御が移されることになる。

次に、キャラクタ出現表示プログラム８４は、検出したカード（例えばカード５４１）の識別画像５６１で特定される識別番号等に対応するキャラクタの画像７０１をカード５４１の識別画像５６１に重畳させて登場させる表示を行うもので、図１０に示すように、動作データ列検索機能１２４、登場姿勢設定機能１２６、三次元画像設定機能１２８、画像描画機能１３０、画像表示機能１３２及び繰返し機能１３４とを有する。

動作データ列検索機能１２４は、キャラクタが登場するシーンを表示するための動作データ列を識別番号等に基づいて登場動作情報テーブル１３６から検索する。具体的には、まず、例えばハードディスク４４や光ディスク３２等に記録され、かつ、各レコードに動作データ列の格納先頭アドレスが登録された登場動作情報テーブル１３６から識別番号等に対応するレコードを検索する。そして、例えばハードディスク４４や光ディスク３２等に記録され、かつ、多数の動作データ列１３８が登録されたデータファイル１４０のうち、前記検索したレコードに登録された格納先頭アドレスから当該キャラクタの画像７０１が登場する動作を示す動作データ列１３８を読み出す。

登場姿勢設定機能１２６は、キャラクタの画像７０１が登場する過程の１つの姿勢を設定する。例えば読み出された動作データ列１３８のｉフレーム目（ｉ＝１，２，３・・・）の動作データに基づいてキャラクタの画像７０１の頂点データをカメラ座標系で移動して１つの姿勢を設定する。

三次元画像設定機能１２８は、検出したカード５４１の識別画像５６１のカメラ座標に基づいて該カード５４１の識別画像５６１の上に前記キャラクタの画像７０１が登場する過程の１つの姿勢の三次元画像を設定する。

画像描画機能１３０は、キャラクタの画像７０１が登場する過程の１つの姿勢の三次元画像をスクリーン座標系の画像に透視変換して画像メモリ２０に描画（隠面処理を含む）する。このとき、Ｚバッファリングのうち、キャラクタの画像７０１のＺ値をフレーム単位に設定し直すことで、カード５４１の識別画像５６１の下からキャラクタの画像７０１が徐々に出現するようなシーンを表現することができる。

画像表示機能１３２は、画像メモリ２０に描画された画像を１フレーム単位に入出力ポート２２を介してモニタ３０に出力し、モニタ３０の画面に前記画像を表示する。

繰返し機能１３４は、登場姿勢設定機能１２６による処理→三次元画像設定機能１２８による処理→画像描画機能１３０による処理→画像表示機能１３２による処理を順次繰り返す。これによって、カード５４１の識別画像５６１の上に、該カード５４１の識別番号等に対応するキャラクタの画像７０１が登場するシーンが表示されることになる。

次に、キャラクタ動作表示プログラム８６は、キャラクタが待機しているシーンや攻撃しているシーン、魔法をかけるシーン、他のキャラクタを庇うシーン等を表示するもので、図１１に示すように、上述したキャラクタ出現表示プログラム８４とほぼ同様に、動作データ列検索機能１４２、姿勢設定機能１４４、三次元画像設定機能１４６、画像描画機能１４８、画像表示機能１５０及び繰返し機能１５２とを有する。

動作データ列検索機能１４２は、キャラクタが待機するシーン、攻撃するシーン、魔法をかけるシーン、他のキャラクタを庇うシーンを表示するための動作データ列をシーンに応じた各種動作情報テーブル１５４から検索する。具体的には、まず、例えばハードディスク４４や光ディスク３２等に記録され、かつ、各レコードに動作データ列の格納先頭アドレスが登録された各種動作情報テーブル１５４から表示すべき動作に対応する動作情報テーブル１５４を特定し、さらに、特定された動作情報テーブル１５４から当該識別番号等に対応するレコードを検索する。そして、例えばハードディスク４４や光ディスク３２等に記録され、かつ、多数の動作データ列１５６が登録されたデータファイル１５８のうち、前記検索したレコードに登録された先頭アドレスから今回表示すべき動作（キャラクタが待機する動作、攻撃する動作、魔法をかける動作、他のキャラクタを庇う動作等）に対応した動作データ列１５６を読み出す。

姿勢設定機能１４４は、例えばカード５４１に関するキャラクタであれば、キャラクタの画像７０１が待機する過程の１つの姿勢、攻撃する過程の１つの姿勢、魔法をかける過程の１つの姿勢、他のキャラクタを庇う過程の１つの姿勢を設定する。例えば読み出された動作データ列１５６のｉフレーム目（ｉ＝１，２，３・・・）の動作データに基づいてキャラクタの画像７０１の頂点データをカメラ座標系で移動して１つの姿勢を設定する。

三次元画像設定機能１４６は、検出したカード５４１の識別画像５６１のカメラ座標に基づいて該カード５４１の識別画像５６１の上に前記キャラクタの画像７０１が待機する過程の１つの姿勢、攻撃する過程の１つの姿勢、魔法をかける過程の１つの姿勢、他のキャラクタを庇う過程の１つの姿勢の三次元画像を設定する。

画像描画機能１４８は、キャラクタの画像７０１が待機する過程の１つの姿勢、攻撃する過程の１つの姿勢、魔法をかける過程の１つの姿勢、他のキャラクタを庇う過程の１つの姿勢の三次元画像をスクリーン座標系の画像に透視変換して画像メモリ２０に描画（隠面処理を含む）する。

画像表示機能１５０は、画像メモリ２０に描画された画像を１フレーム単位に入出力ポート２２を介してモニタ３０に出力し、モニタ３０の画面に前記画像を表示する。

繰返し機能１５２は、姿勢設定機能１４４による処理→三次元画像設定機能１４６による処理→画像描画機能１４８による処理→画像表示機能１５０による処理を順次繰り返す。これによって、キャラクタの画像７０１が待機するシーン、攻撃するシーン、魔法をかけるシーン、他のキャラクタを庇うシーンが表示されることになる。

これらカード認識プログラム８２、キャラクタ出現表示プログラム８４及びキャラクタ動作表示プログラム８６によって、カードゲームのキャラクタをビデオゲームのシナリオ中に出現させて様々な動作を行わせることができる。つまり、実空間でしか楽しめなかったカードゲームを仮想空間にまで広げることができ、カードゲームとビデオゲームとが融合した新規なゲームを提供することができる。

次に、第１のカード位置予測プログラム８８について説明する。このプログラム８８は、例えば図１２に示すように、３つのカードを例えば横方向に並べる場合を想定したものである。

そして、この第１のカード位置予測プログラム８８は、図１３Ａに示すように、例えば上述したカード認識プログラム８２によって１つのカード５４１の識別画像５６１の位置が検出された場合に、該識別画像５６１の位置に基づいて他のカード５４２及び５４３（図１２参照）の配置位置を予測するものであって、図１４に示すように、探知領域設定機能１６２と、基準セル探知機能１６４と、識別情報検出機能１６６と、キャラクタ画像検索機能１６８とを有する。

ここで、第１のカード位置予測プログラム８８の処理動作、特に、図１３Ａに示すように、１つのカード５４１の識別画像５６１のカメラ座標が、例えばカード認識プログラム８２によって検出された後の動作について図１５を参照しながら説明する。

まず、図１５のステップＳ１において、探知領域設定機能１６２は、検出された１つの識別画像５６１のカメラ座標に基づいて、図１３Ａに示すように、識別画像５６１を含むある範囲の探知領域１７０のカメラ座標を求める。この探知領域１７０は、複数のカードを横方向に配置するのであれば矩形の領域となる。

その後、ステップＳ２において、得られた探知領域１７０のカメラ座標から画像メモリ２０上での前記探知領域１７０の描画範囲１７２を求める。

その後、ステップＳ３において、基準セル探知機能１６４は、画像メモリ２０のうち、探知領域１７０の描画範囲１７２に基準セル６２の画像データが存在しているか否かを判別する。

基準セル６２の画像データが存在している場合、例えば図１２Ａに示すように、カード５４１の横に２つのカード５４２及び５４３が横方向に並べられている場合を想定したとき、図１５のステップＳ４に進み、識別情報検出機能１６６は、検出した基準セル６２及びコーナーセル６４によって形成される領域の画像データをアフィン変換する。そして、カード５４２及び５４３の識別画像５６２及び５６３から各カード５４２及び５４３に対応する識別番号を検出する。識別番号の検出は、上述したように、識別画像５６２及び５６３から抽出したコードを２Ｄコードのデータベース６８と照合することによって行われる。

その後、ステップＳ５において、キャラクタ画像検索機能１６８は、カード５４２及び５４３の各識別番号等に基づくキャラクタの画像データ１２０をオブジェクト情報テーブル１１８から検索する。例えばオブジェクト情報テーブル１１８からそれぞれ識別番号に対応するレコードを検索し、検索したレコードが「有効」であれば、各レコードに登録された複数の格納先頭アドレスのうち、現在のレベルに対応する格納先頭アドレスからそれぞれ画像データ１２０を読み出す。

一方、前記ステップＳ３において、基準セル６２の画像データが存在していないと判別された場合は、基準セル探知機能１６４は、ステップＳ６に進み、モニタ３０の画面に全てのカードを置くように促すエラーメッセージを出力する。その後、ステップＳ７において、所定時間（例えば３秒間）だけ待機した後、ステップＳ３に戻り、上述した処理を繰り返す。

そして、探知領域に存在する全てのカードについてキャラクタの画像７０１〜７０３を決定した段階で、上述した処理動作が終了する。

この場合も、例えばキャラクタ出現表示プログラム８４が起動されることによって、図１２Ｂに示すように、各カード５４１〜５４３の識別画像５６１〜５６３上にそれぞれカード５４１〜５４３の識別番号に対応するキャラクタの画像７０１〜７０３が登場するシーンが表示されることになる。

この第１のカード位置予測プログラム８８では、複数のカード５４２及び５４３に対する認識を、既に検出された１つのカード５４１の識別画像５６１の位置に基づいて設定された探知領域１７０に対して行うようにしたので、複数のカード５４２及び５４３を認識するために、再度、画像メモリ２０全体を探知する必要がなくなり、複数のカード５４２及び５４３に対する認識処理の負荷を軽減することができる。これは、処理スピードの高速化につながる。

次に、第２のカード位置予測プログラム９０について説明する。このプログラム８２は、図３Ａに示すように、２人がそれぞれ３つのカードを例えば横方向に並べる場合であって、かつ、各人が最初に例えば左側に１枚目のカード５４１及び５４４を置く場合、即ち、対角線上に２枚のカード５４１及び５４４を置く場合を想定したものである。

そして、この第２のカード位置予測プログラム９０は、２つのカードが対角線上に置かれた場合に、他のカードの位置を予測するものであって、図１６に示すように、矩形領域設定機能１７４と、基準セル探知機能１７６と、識別情報検出機能１７８と、キャラクタ画像検索機能１８０とを有する。

ここで、第２のカード位置予測プログラム９０の処理動作、特に、図１７Ａに示すように、対角線Ｌｍ上に置かれた２つのカード５４１及び５４４の識別画像５６１及び５６４のカメラ座標が、例えばカード認識プログラム８２によって検出された後の動作について図１８を参照しながら説明する。

まず、図１８のステップＳ１０１において、矩形領域設定機能１７４は、図１７Ａに示すように、対角線Ｌｍ上に置かれた２つのカード５４１及び５４４の識別画像５６１及び５６４のカメラ座標に基づいて、該対角線Ｌｍを含む矩形領域１８２のカメラ座標を求める。

その後、ステップＳ１０２において、得られた矩形領域１８２のカメラ座標から、図１７Ｂに示すように、画像メモリ２０上での前記矩形領域１８２の描画範囲１８４を求める。その後、ステップＳ１０３において、基準セル探知機能１７６は、画像メモリ２０のうち、矩形領域１８２の描画範囲１８４に基準セル６２の画像データが存在しているか否かを判別する。

基準セル６２の画像データが存在している場合、例えば図３Ａに示すように、カード５４１の横に２つのカード５４２及び５４３が横方向に並べられ、かつ、カード５４４の横に２つのカード５４５及び５４６が横方向に並べられている場合を想定したとき、図１８のステップＳ１０４に進み、識別情報検出機能１７８は、検出した基準セル６２及びコーナーセル６４によって形成される領域の画像データをアフィン変換する。そして、残りのカード５４２、５４３、５４５及び５４６の識別画像５６２、５６３、５６５及び５６６から各カード５４２、５４３、５４５及び５４６に対応する識別番号を検出する。識別番号の検出は、上述したように、識別画像５６２、５６３、５６５及び５６６から抽出したコードを２Ｄコードのデータベース６８と照合することによって行われる。

その後、ステップＳ１０５において、キャラクタ画像検索機能１８０は、カード５４２、５４３、５４５及び５４６の各識別番号等に基づくキャラクタの画像データ１２０をオブジェクト情報テーブル１１８から検索する。例えばオブジェクト情報テーブル１１８からそれぞれ識別番号に対応するレコードを検索し、検索したレコードが「有効」であれば、各レコードに登録された複数の格納先頭アドレスのうち、現在のレベルに対応する格納先頭アドレスからそれぞれ画像データ１２０を読み出す。

一方、前記ステップＳ３において、残りのカード５４２、５４３、５４５及び５４６の識別画像５６２、５６３、５６５及び５６６が存在していないと判別された場合は、基準セル探知機能１７６は、ステップＳ１０６に進み、モニタ３０の画面に残りの全てのカード５４２、５４３、５４５及び５４６を置くように促すエラーメッセージを出力し、その後、ステップＳ１０７において、所定時間（例えば３秒間）だけ待機した後、ステップＳ１０３に戻り、処理を繰り返す。

そして、矩形領域１８２に存在する全てのカード５４１〜５４６についてキャラクタの画像７０１〜７０６を決定した段階で、上述した処理動作が終了する。

この場合も、例えばキャラクタ出現表示プログラム８４が起動されることによって、各カード５４１〜５４６の識別画像５６１〜５６６上にそれぞれカード５４１〜５４６の識別番号等に対応するキャラクタの画像７０１〜７０６が登場するシーンが表示されることになる。

この第２のカード位置予測プログラム９０では、複数のカード５４２、５４３、５４５及び５４６に対する認識を、対角線Ｌｍ上に置かれた２つのカード５４１及び５４４にて形成される矩形領域１８２に対して行うようにしたので、対角線Ｌｍ上に置かれた２枚のカード５４１及び５４４を認識した後に、他のカード５４２、５４３、５４５及び５４６を認識するために、再度、画像メモリ２０全体を探知する必要がなくなり、複数のカード５４２、５４３、５４５及び５４６に対する認識処理の負荷を軽減することができる。

上述した第１及び第２のカード位置予測プログラム８８及び９０においては、カード５４１〜５４６の配置を示す情報テーブル（カード配置情報テーブル：図示せず）を複数の対戦者に対応して複数用意し、カード５４１〜５４６の識別画像５６１〜５６６のカメラ座標とカード５４１〜５４６の識別番号が検出される毎に、該当するカード配置情報テーブルに登録するようにしてもよい。この場合、机やテーブル５２等に置かれた全てのカード５４１〜５４６のカメラ座標がすべてカード配置情報テーブルに登録された段階で、それ以降、このカード配置情報テーブルに登録されたカメラ座標に基づいてカード５４１〜５４６の認識（再認識）を行うようにしてもよい。

なお、対戦者がそれぞれ３つのカードを例えば横方向に並べる場合において、それぞれ３つのカードの方向を変えて配置することで、各対戦者での処理手順をそれぞれ１つに特定するようにしてもよい。

例えば３つのカード５４１〜５４３のうち、左側のカード５４１の配置方向によって動作を行うキャラクタを特定し、中央のカード５４２の配置方向によって動作によって影響を与えるべき相手のキャラクタを特定し、右側のカードの配置方向によって動作を特定する、等である。

すなわち、左側のカード５４１の配置方向によって動作を行うキャラクタが特定される場合、前記カード５４１が左方向であれば、該カード５４１に対応するキャラクタの画像７０１が選択され、上方向であれば、中央のカード５４２に対応するキャラクタの画像７０２が選択され、右方向であれば、右側のカード５４３に対応するキャラクタの画像７０３が選択され、下方向であれば、３つのカード５４１〜５４３に対応する３つのキャラクタの画像７０１〜７０３が選択される。

中央のカード５４２の配置方向によって相手となるキャラクタが特定される場合、前記カード５４２が左方向であれば、相手方のカード５４４に対応するキャラクタの画像７０４が選択され、上方向であれば、相手方の中央のカード５４５に対応するキャラクタの画像７０５が選択され、右方向であれば、相手方の右側のカード５４６に対応するキャラクタの画像７０６が選択され、下方向であれば、自分方の左側のカード５４１の配置方向で選択したキャラクタの画像が選択される。

右側のカード５４３の配置方向によって動作が特定される場合、カード５４３が左方向であれば「攻撃する」が選択され、上方向であれば「魔法をかける」が選択され、右方向であれば「防御する」が選択され、下方向であれば「庇う」が選択される。

このカードの配置方向に応じた処理を行うようにすれば、操作装置（キー操作によってコマンド入力を行うための装置）を使用しなくても、複数のカード５４１〜５４３の向きの組み合わせによって様々な処理を指示することができる。

次に、画像動き検出プログラム９２について説明する。このプログラム９２は、所定のタイミングで撮像した画像データと前記所定のタイミングとは別のタイミングで撮像した画像データとの差分をとり、差分後のデータに基づいて動きのあった画像を特定し、この特定された画像（ユーザの手の画像等）がキャラクタの画像に接触しているかどうかを判別し、接触していると判別した場合に、前記キャラクタに対応するパラメータを変更するというものである。

このプログラム９２は、図１９に示すように、第１のメモリ機能１８８と、第２のメモリ機能１９０と、差分演算機能１９２と、画像特定機能１９４と、接触判別機能１９６と、繰返し機能１９８と、パラメータ変更機能２００とを有する。

このプログラム９２の動作、例えば、図２０Ａに示すように、ユーザ７４が一方の手２０２に１つのカード５４２を持つことによって、モニタ３０の画面上において、カード５４２の識別画像５６２上に、該カード５４２の識別番号等に対応するキャラクタの画像７０２が登場した以降の動作について図１９〜図２１を参照しながら説明する。

まず、第１のメモリ機能１８８は、第１の差分信号Ｓ１の入力タイミングに基づいてＣＣＤカメラ４２からの撮像画像データ２０４を取り込んで第１の差分用メモリ２４に記憶する。第１の差分信号Ｓ１の入力タイミングは任意に設定することができる。

第２のメモリ機能１９０は、第２の差分信号Ｓ２の入力タイミングに基づいてＣＣＤカメラ４２からの撮像画像データ２０６を取り込んで第２の差分用メモリ２６に記憶する。第２の差分信号Ｓ２の入力タイミングも任意に設定することができ、例えば第１の差分信号Ｓ１の１フレーム後、２フレーム後、５フレーム後等が挙げられる。

差分演算機能１９２は、図２１に示すように、第１の差分用メモリ２４に記憶された撮像画像データ２０４と第２の差分用メモリ２６に記憶された撮像画像データ２０６との差分をとる。例えば第２の差分用メモリ２６に記憶された撮像画像データ２０６から第１の差分用メモリ２４に記憶された撮像画像データ２０４を差し引く等の処理を行うようにしてもよい。

画像特定機能１９４は、差分後のデータ２０８から動きのあった画像を特定する。差分後のデータ２０８としては、１画素単位や数画素単位でそれぞれ島状に分散したデータが想定されるが、ここでは、差分後のデータ２０８について、１００画素以上の大きな固まりを示すデータを抽出し、抽出したデータを動きのあった画像として特定する。図２１の例では、動きのあった画像として３つの画像２０８ａ〜２０８ｃが特定された場合を示している。特定とは、抽出したデータ２０８ａ〜２０８ｃの記録範囲をスクリーン座標として検出することを示す。

接触判別機能１９６は、動きのあった１以上の画像２０８ａ〜２０８ｃについて、各動きのあった画像２０８ａ〜２０８ｃのスクリーン座標と画像メモリ２０に描画されたキャラクタの画像７０２のスクリーン座標に基づいて、キャラクタの画像７０２に触っている画像２０８ｃがあるかどうかを判別する。この判別は、それぞれ動きのあった画像（２０８ａ〜２０８ｃ）の一部のスクリーン座標とキャラクタの画像７０２の一部のスクリーン座標（画像メモリ２０上のスクリーン座標）とが同じであれば、キャラクタの画像７０２を触っている画像があったものと判別する。図２１の例では、画像２０８ｃが該当する。

動きのあった画像が１つ（例えば画像２０８ｃ）であれば、この接触判別機能１９６は、該動きのあった画像２０８ｃがキャラクタの画像７０２を触っているかどうかを判別することとなり、該動きのあった画像２０８ｃの一部のスクリーン座標とキャラクタの画像７０２の一部のスクリーン座標とが同じであれば、キャラクタの画像７０２を触っている画像があったものと判別する。それ以外は触っていないと判別する。

繰返し機能１９８は、第１のメモリ機能１８８による処理→第２のメモリ機能１９０による処理→差分演算機能１９２による処理→画像特定機能１９４による処理→接触判別機能１９６による処理を順次繰り返す。

パラメータ変更機能２００は、繰返し機能１９８によって上述した各種機能による処理が繰り返されている間に、接触判別機能１９６において、動きのあった画像がキャラクタの画像７０２に接触していると判別した回数が所定回数（例えば５回以上の任意の整数を選ぶことができる）以上であれば、オブジェクト情報テーブル１１８のうち、当該カード５４２の識別番号に対応するレコードに登録されているパラメータ、例えば経験値、体力、攻撃力等の値を増加させる。

これは、前記画像特定機能１９４によって特定された画像２０８ａ〜２０８ｃのうち、接触判別機能１９６によってキャラクタの画像７０２に接触していると判別された画像２０８ｃが、ユーザの手２１０であると疑似的に推定し、ユーザがキャラクタをなでてかわいがっていることを推定しているものである。

従って、対戦ゲーム等のほか、例えばユーザが特定のキャラクタを育てて、攻撃力を高めたり、防御力を高めたりするという育成ゲームにも好ましく適用させることができる。

なお、ユーザがキャラクタを手でなでてかわいがる場合、ユーザの手２１０の画像でキャラクタの画像７０２が隠れてしまい、キャラクタが喜ぶという動作を画像メモリ２０に描画したとしても、キャラクタの画像７０２がほとんど見えない場合もありえる。そこで、撮像した画像を画像メモリ２０に描画する際に、ＺバッファリングのＺ値を例えば最も高い値（カメラ座標系における原点であるカメラ視点から最も遠いことを示す値）に設定することで、ユーザが手２１０でキャラクタをなでるという画像が表示されても、ユーザの手２１０の画像でキャラクタの画像７０２が隠れるということがなくなる。従って、ユーザは、キャラクタが喜ぶという動作を見ながらキャラクタをかわいがることができ、育成ゲーム等に面白みを加えることができる。

ところで、ビデオゲームの進行に伴って、机やテーブル５２等に置かれたカードがユーザの手で動かされる場合がある。例えば１以上のカードの位置がずれたり、カードの配置の入れ替えや新たなカードとの交換等である。このようにカードに動きがあった場合、動きのあったカードについて再度認識する必要がある。

これを解決するには、カード認識プログラム８２、第１のカード位置予測プログラム８８並びに第２のカード位置予測プログラム９０を、数フレーム単位あるいは数１０フレーム単位に起動すればよい。もちろん、新たなカード（例えばカード５４１）を認識した場合は、キャラクタ出現表示プログラム８４を起動して新たなカード５４１の識別画像５６１上に、該新たなカード５４１の識別番号等に応じたキャラクタの画像７０１を登場させ、カード５４１の位置がずれたり、配置が入れ替わる程度であれば、キャラクタ動作表示プログラム８６を起動して、例えば「待機」の動作を表示すればよい。

カードの再認識においては、上述したように、カード認識プログラム８２、第１のカード位置予測プログラム８８並びに第２のカード位置予測プログラム９０を数フレーム単位あるいは数１０フレーム単位に起動するようにしてもよいが、カードに動きがあったときにだけカードの再認識を行うようにしてもよい。以下、その手法、すなわち、カード動き検出プログラム９４及びカード再認識プログラム９６の処理について説明する。

まず、カード動き検出プログラム９４は、所定のタイミングで撮像した画像データと前記所定のタイミングとは別のタイミングで撮像した画像データとの差分をとり、差分後のデータに基づいて動きのあったカードを特定するというものである。

すなわち、机やテーブル５２等に置かれた例えば３つのカード５４１〜５４３は、その後、図２２Ａに示すように、これら３つのカード５４１〜５４３のうち、例えば１つのカード５４１がユーザの手によって左右に揺らされたり、図２２Ｂに示すように、１つのカード５４１が一方向にずらされたり、図２２Ｃに示すように、一緒に置かれた複数のカード５４２及び５４３の配置が入れ替えられたり（配置換え）、図２３Ａに示すように、例えば１つのカード５４１が新しいカード５４４と交換されたり、図２３Ｂに示すように、一緒に置かれた３つのカード５４１〜５４３が重ねられたりするが、このプログラムはこれらの動きを検出して、動きのあったカードを特定するものである。

このプログラム９４は、図２４に示すように、上述した画像動き検出プログラム９２と同様の第１のメモリ機能２１２と、第２のメモリ機能２１４と、差分演算機能２１６とを有するほか、カード特定機能２１８と、繰返し機能２２０とを有する。

第１及び第２のメモリ機能２１２及び２１４並びに差分演算機能２１６は、上述した画像動き検出プログラム９２における第１及び第２のメモリ機能１８８及び１９０並びに差分演算機能１９２と同様の処理を行うため、ここではその重複説明を省略する。なお、繰返し機能２２０は、第１のメモリ機能２１２による処理→第２のメモリ機能２１４による処理→差分演算機能２１６による処理→カード特定機能２１８による処理を順次繰り返す。

カード特定機能２１８は、差分後のデータのうち、カード（例えばカード５４１）が置かれた範囲について探知を行って、カード５４１の識別画像５６１が存在するかどうかを検出する。ここでのカード５４１の識別画像５６１は、移動によって現れた新たなカード５４１の識別画像（ポジ画像）と、移動によって存在しなくなったカード５４１の識別画像（ネガ画像）を含む。カード５４１の識別画像５６１が存在すれば、カード５４１に動きがあったものとして、該カード５４１の画像５６１の記録範囲をスクリーン座標として検出する。

具体的には、１つのカード５４１をずらすあるいは揺らす動作があった場合は、該１つのカード５４１の画像５６１のスクリーン座標が検出され、２つ以上のカード（例えばカード５４１〜５４３）についてずらすあるいは揺らす動作があれば、ずらされたあるいは揺らされた２つ以上のカード５４１〜５４３の識別画像５６１〜５６３の各スクリーン座標が検出されることになる。例えば図２２Ｃに示すように、カード５４２とカード５４３の入れ替えの場合は、入れ替えがあったカード５４２及び５４３の識別画像５６２及び５６３の各スクリーン座標が検出されることになる。例えば図２３Ａに示すように、カード５４３を別のカード５４４に交換する場合は、交換があったカード５４３及び５４４の識別画像５６３及び５６４のスクリーン座標が検出されることになる。例えば図２３Ｂに示すように、３つのカード５４１〜５４３を重ねた場合は、重ねられた３つのカード５４１〜５４３のうち、一番上のカード（例えばカード５４１）の識別画像５６１のスクリーン座標が検出されることになる。

このように、あるカードの識別画像についてのスクリーン座標が検出された段階で、動きのあったカードが特定されることになる。検出されたスクリーン座標は、その後に起動されるカード再認識プログラム９６に供給される。

次に、カード再認識プログラム９６について説明する。このプログラム９６は、カード動き検出プログラム９４でのカード特定機能２１８において、動きのあったカードを特定したときに起動されるもので、動きのあったカードについて再度識別情報の認識を行う。このカード再認識プログラム９６は、図２５に示すように、上述したカード認識プログラム８２と同様のカメラ座標検出機能２２２と、識別情報検出機能２２４と、キャラクタ画像検索機能２２６とを有する。このカード再認識プログラム９６での処理は、上述したカード認識プログラム８２とほぼ同様の処理を行うため、ここではその重複説明を省略する。

このカード再認識プログラム９６での処理によって、動きのあったカードの識別番号等に対応するキャラクタの画像が特定される。従って、新たなカードを認識した場合は、キャラクタ出現表示プログラム８４が起動されることによって、新たなカードの画像上に、該新たなカードの識別番号等に応じたキャラクタの画像が登場され、カードの位置がずれたり、配置が入れ替わる程度であれば、キャラクタ動作表示プログラム８６が起動されることによって、動きのあったカードの画像上に、該カードの識別番号等に対応するキャラクタの画像が表示されると共に、カードの動かし方に応じて「攻撃する」、「魔法をかける」、「防御する」、「庇う」等の動作が行われることになる。

複数のカードを重ねた場合は、一番上にあるカードの識別番号等に対応するキャラクタの画像を出現させるようにしてもよい。あるいは、重ねられた２以上のカードの識別番号を記憶させることで、これら２以上の識別番号の組合せに対応する新たなキャラクタ、例えば重ねられたカードに対応する２以上のキャラクタが合体してできた巨大なキャラクタの画像を出現させるようにしてもよい。これは、例えば図示しない合体情報テーブルから２以上の識別情報の組合せに対応するレコードを検索し、検索されたレコードに登録された画像データの先頭アドレスから当該合体に対応したキャラクタの画像データを読み出す等の処理を行えばよい。

また、図２６に示すように、２つの透明性のカード５４７及び５４８を重ねると、透明性のカード５４７の識別画像５６７と透明性のカード５４８の識別画像５６８とが合成された新たな識別画像５６９が形成される。従って、この新たな識別画像５６９がカード認識プログラム８２によって認識され、その後、例えばキャラクタ出現表示プログラム８４が起動されることで、モニタ３０の画面上には、新たな識別画像５６９上に、該識別画像５６９で特定される識別番号等に対応した新たなキャラクタの画像が登場する表示が行われることになる。

次に、キャラクタ変化プログラム９８について説明する。このプログラム９８は、キャラクタの画像を、キャラクタのレベルアップ時において、レベルに応じた画像に変化させるものであって、図２７に示すように、レベルアップ機能２２８を有する。

このプログラム９８は、上述した各種アプリケーションプログラム８０において、オブジェクト情報テーブル１１８に対する書込み、特に経験値への書込みが行われるたびに起動される。レベルアップ機能２２８は、経験値の書込みが行われたレコードについて、該レコードに格納されている経験値が一定の数値を超えているか否かを判別し、超えていれば、当該レコードに格納されているレベルを＋１更新する。

上述したように、カード認識プログラム８２やカード再認識プログラム９６においては、カードの識別番号とレベルに応じた画像データを検索し、また、キャラクタ出現表示プログラム８４及びキャラクタ動作表示プログラム８６は、カードの識別番号とレベルに応じた動作データ列を検索することから、カードの識別画像上には、カードの識別番号とレベルとに応じたキャラクタの画像が重畳して表示されることになる。

従って、例えば図２８に示すように、３つの識別番号（第１〜第３の識別番号６０１〜６０３）があった場合に、レベル１では、それぞれ同じキャラクタ（第１のキャラクタ）の画像７１１であっても、レベル２においては、第１の識別番号６０１は第２のキャラクタの画像７１２、第２及び第３の識別番号６０２及び６０３はそれぞれ同じ第３のキャラクタの画像７１３とし、レベル３では、それぞれ別のキャラクタ（第４〜第６のキャラクタ）の画像７１４〜７１６とすることができる。

もちろん、例えば１つの識別番号について、レベル１〜レベル２にわたって同じキャラクタの画像とすることもできるし、レベル１からレベル２になった段階で別のキャラクタの画像に変化するが、レベル２〜レベル３にわたって、同じキャラクタの画像とすることもできる。また、１つの識別番号について、レベル１〜レベル３にわたって同じキャラクタの画像とすることもできる。

これによって、ユーザに対して、同一のキャラクタが出現する同種類のカードであっても、レベルによって様々な進化をとげるというイメージを与えることができ、カードゲームの面白みをさらに向上させることができる。

次に、情報テーブル参照プログラム１００について説明する。このプログラム１００は、図２９に示すように、オブジェクト情報テーブル１１８等がメモリカード３８やネットワークサーバ２３０にて管理される場合に、これらメモリカード３８やネットワークサーバ２３０に対してアクセスを行うものであって、テーブルアクセス機能２３２を有する。ネットワークサーバ２３０は、ネットワーク２３４を通じて本実施の形態に係るビデオゲームシステム１０に接続される。

例えばオブジェクト情報テーブル１１８を例えばハードディスク４４に記憶している場合、カードに対応するキャラクタやパラメータ等はそれぞれユーザ毎に異なる。そのため、カードを譲渡しても、オブジェクト情報テーブル１１８の内容が異なれば、ほとんど意味がない。

そこで、この情報テーブル参照プログラム１００は、カードの譲渡を可能にするものであって、前記テーブルアクセス機能２３２は、アクセス先がメモリカード３８であれば、対戦するユーザの情報を登録し、メモリカード３８に登録されたオブジェクト情報テーブル１１８の使用を該メモリカード３８に登録したユーザのみに限定する。これによって、メモリカード３８に登録したユーザ間でのカードの譲渡を可能にする。

また、前記テーブルアクセス機能２３２は、アクセス先がネットワークサーバ２３０であれば、ブラウザを通じて対戦するユーザの情報をネットワークサーバ２３０に登録することで、ネットワークサーバ２３０で管理されているオブジェクト情報テーブル１１８の使用が許可される。この場合、ネットワークサーバ２３０で管理されているオブジェクト情報テーブル１１８は、ネットワークサーバ２３０に登録したユーザ間でユニークな情報となり、登録した全ユーザにおいて共通とすることができる。そのため、ネットワークサーバ２３０に登録したユーザ間でのカードの譲渡が可能になる。

ネットワークサーバ２３０でオブジェクト情報テーブル１１８を管理している場合は、「無効」が設定されているレコードについて、所定期間の経過後やビデオゲームのバージョンアップ等によって新たにキャラクタの画像の登録やパラメータを設定して、「有効」に再設定する等の処理を行うことができる。この場合、新たなカードの生産に合わせた新たなキャラクタの追加、死亡したキャラクタの復活等をホームページでの宣伝と共にスムーズに行うことができ、カードの有効利用等を図ることができる。

また、図２Ｂに示すように、カードの識別画像５６におけるコード部６０の二次元パターンを、複数の識別セル６６が配置して構成するようにしたので、識別セル６６を黒の油性ペンや水性ペンで塗り足したり、識別セル６６を白の油性ペンや水性ペンで消したりすることで、自由にコード部６０の二次元パターンを変えることができる。どのようなキャラクタの画像が登場するか、また、レベルアップによってどのような形態に変化していくかを楽しむことができ、カードゲームが融合されたビデオゲームに対してさらに面白みを加えることができる。

なお、本発明に係る画像表示システム及びビデオゲームシステムは、上述の実施の形態に限らず、本発明の要旨を逸脱することなく、種々の構成を採り得ることはもちろんである。

本実施の形態に係るビデオゲームシステムの構成を示すブロック図である。 図２Ａはカードの表面を示す平面図であり、図２Ｂはカードの裏面を示す背面図である。 図３Ａ及び図３Ｂは本実施の形態に係るビデオゲームシステムの使用形態の一例を示す説明図である。 図４Ａ及び図４Ｂは本実施の形態に係るビデオゲームシステムの使用形態の他の例を示す説明図である。 本実施の形態に係るビデオゲームシステムで実行されるアプリケーションプログラムを示す構成図である。 カード認識プログラムの機能を示すブロック図である。 撮像されたカードの識別画像からカードの識別番号を検出するまでの過程を示す説明図である。 取り込まれた撮像画像から撮像画像のカメラ座標を求める過程を示す説明図である。 オブジェクト情報テーブルの内訳を示す説明図である。 キャラクタ出現表示プログラムの機能を示すブロック図である。 キャラクタ動作表示プログラムの機能を示すブロック図である。 図１２Ａ及び図１２Ｂは第１のカード位置予測プログラムの機能を説明するための使用形態の一例を示す図である。 図１３Ａ及び図１３Ｂは机やテーブル等に置かれた１つのカードから探知領域を求める過程を示す説明図である。 第１のカード位置予測プログラムの機能を示すブロック図である。 第１のカード位置予測プログラムの処理を示すフローチャートである。 第２のカード位置予測プログラムの機能を示すブロック図である。 図１７Ａ及び図１７Ｂは対角線上に置かれた２つのカードから矩形領域を求める過程を示す説明図である。 第２のカード位置予測プログラムの処理を示すフローチャートである。 画像動き検出プログラムの機能を示すブロック図である。 図２０Ａ及び図２０Ｂはユーザがカードを手に持ったときの状態を撮像し、モニタ上にその撮像映像と共にキャラクタの画像を表示した状態を示す説明図である。 撮像画像データの差分演算に基づいて動きのある画像を検出する過程を示す説明図である。 図２２Ａは１つのカードを揺らす状態を示す説明図であり、図２２Ｂは１つのカードをずらした状態を示す説明図であり、図２２Ｃは２つのカードの配置を入れ替えた状態を示す説明図である。 図２３Ａは１つのカードを新たなカードに交換する状態を示す説明図であり、図２３Ｂは３つのカードを重ねた状態を示す説明図である。 カード動き検出プログラムの機能を示すブロック図である。 カード再認識プログラムの機能を示すブロック図である。 透明性のカードを重ねて２つの２Ｄコードを合成させる例を示す説明図である。 キャラクタ変化プログラムの機能を示すブロック図である。 識別番号とレベルに応じてキャラクタの画像が変化する例を示す説明図である。 情報テーブル参照プログラムの機能を示すブロック図である。

符号の説明

１０…ビデオゲームシステム １２…ビデオゲーム機
１６…ＣＰＵ １８…メインメモリ
２０…画像メモリ ２４…第１の差分用メモリ
２６…第２の差分用メモリ ３０…モニタ
３２…光ディスク ３８…メモリカード
４２…ＣＣＤカメラ ４４…ハードディスク
５４、５４１〜５４８…カード ５６、５６１〜５６９…識別画像
５８…ロゴ部 ６０…コード部
６２…基準セル ６４…コーナーセル
６６…識別セル ８２…カード認識プログラム
８４…キャラクタ出現表示プログラム ８６…キャラクタ動作表示プログラム
８８…第１のカード位置予測プログラム
９０…第２のカード位置予測プログラム ９２…画像動き検出プログラム
９４…カード動き検出プログラム ９６…カード再認識プログラム
９８…キャラクタ変化プログラム １００…情報テーブル参照プログラム
２３０…ネットワークサーバ
７０１〜７０６、７１１〜７１６…キャラクタの画像

Claims (17)

1. コンピュータと、
   前記コンピュータに接続され、識別画像が貼付されたカードを撮像する撮像手段と、
   前記コンピュータに接続された表示装置とを有する画像表示システムにおいて、
   前記撮像手段からの前記カードの識別画像を含む撮像画像を前記表示装置に出力して、該表示装置に前記撮像画像を表示させる撮像画像表示手段と、
   前記撮像画像から前記カードに貼付された前記識別画像を探知する探知手段と、
   前記探知手段が探知した前記識別画像から前記カードの識別情報を検出する識別情報検出手段と、
   前記表示装置に表示された前記カードの識別画像上に、該カードの前記識別情報に対応するオブジェクトの画像を重畳して表示するように制御するオブジェクト表示制御手段と、
   所定のタイミングで撮像した第１撮像画像と前記所定のタイミングとは別のタイミングで撮像した第２撮像画像との差分をとって差分画像を得る差分演算手段と、
   前記差分画像のスクリーン座標と前記カードの識別画像上に重畳して表示されている前記オブジェクトの画像のスクリーン座標とに基づいて、前記オブジェクトの画像に前記差分画像が接触したかどうかを判別する判別手段と、
   前記判別手段によって、前記オブジェクトの画像に前記差分画像が接触していると判別された場合に、前記識別情報に対応するパラメータを変更するパラメータ変更手段とを有することを特徴とする画像表示システム。
2. 請求項１記載の画像表示システムにおいて、
   前記判別手段は、前記差分画像における一部のスクリーン座標と前記カードの識別画像上に重畳して表示されている前記オブジェクトの画像における一部のスクリーン座標とが同じである場合に、前記オブジェクトの画像に前記差分画像が接触していると判別することを特徴とする画像表示システム。
3. 請求項１又は２記載の画像表示システムにおいて、
   前記差分演算手段、前記判別手段の順番で行われる一連の処理を繰り返し行い、その間に、前記判別手段において、前記オブジェクトの画像に前記差分画像が接触していると判別した回数が所定回数以上となったときに、前記パラメータ変更手段は、前記識別情報に対応するパラメータを変更することを特徴とする画像表示システム。
4. 請求項１〜３のいずれか１項に記載の画像表示システムにおいて、
   前記差分演算手段は、
   第１の差分信号に基づいて前記撮像手段からの撮像画像を前記第１撮像画像として第１の差分用メモリに記憶する手段と、
   第２の差分信号に基づいて前記撮像手段からの撮像画像を前記第２撮像画像として第２の差分用メモリに記憶する手段と、
   前記第１の差分用メモリに記憶された前記第１撮像画像と前記第２の差分用メモリに記憶された前記第２撮像画像との差分をとる手段とを有することを特徴とする画像表示システム。
5. 請求項１〜４のいずれか１項に記載の画像表示システムにおいて、
   前記撮像画像表示手段は、前記撮像画像を、前記オブジェクト表示制御手段にて表示される前記オブジェクトの画像のカメラ視点からの距離よりも遠い位置に設定して表示することを特徴とする画像表示システム。
6. 請求項１〜５のいずれか１項に記載の画像表示システムにおいて、
   同一のオブジェクトに複数の識別情報が割り当てられ、
   前記複数の識別情報のそれぞれにおいて前記同一のオブジェクトに関するパラメータが異なることを特徴とする画像表示システム。
7. 請求項１〜５のいずれか１項に記載の画像表示システムにおいて、
   前記コンピュータに接続される着脱自在の記憶媒体を有し、
   前記識別情報に対応する情報が前記記憶媒体にて管理されていることを特徴とする画像表示システム。
8. 請求項１〜５のいずれか１項に記載の画像表示システムにおいて、
   前記コンピュータがネットワークを介してネットワークサーバに接続され、
   前記識別情報に対応する情報が前記ネットワークサーバにて管理されていることを特徴とする画像表示システム。
9. コンピュータと、
   前記コンピュータに接続され、識別画像が貼付されたカードを撮像する撮像手段と、
   前記コンピュータに接続された表示装置とを有するビデオゲームシステムにおいて、
   前記撮像手段からの前記カードの画像を含む撮像画像を前記表示装置に出力して、該表示装置に前記撮像画像を表示させる撮像画像表示手段と、
   前記撮像画像から前記カードに貼付された前記識別画像を探知する探知手段と、
   前記探知手段が探知した前記識別画像から前記カードの識別情報を検出する識別情報検出手段と、
   前記表示装置に表示された前記カードの画像上に、該カードの前記識別情報に対応するオブジェクトの画像を重畳して表示するように制御するオブジェクト表示制御手段と、
   所定のタイミングで撮像した第１撮像画像と前記所定のタイミングとは別のタイミングで撮像した第２撮像画像との差分をとって差分画像を得る差分演算手段と、
   前記差分画像のスクリーン座標と前記カードの識別画像上に重畳して表示されている前記オブジェクトの画像のスクリーン座標とに基づいて、前記オブジェクトの画像に前記差分画像が接触したかどうかを判別する判別手段と、
   前記判別手段によって、前記オブジェクトの画像に前記差分画像が接触していると判別された場合に、前記識別情報に対応するパラメータを変更するパラメータ変更手段とを有し、
   前記オブジェクトがビデオゲームにおけるキャラクタを示すオブジェクトであって、
   前記ビデオゲームの内容は、前記キャラクタが他のキャラクタと戦闘を行うことで経験値を増やすことを含む場合に、
   前記パラメータ変更手段は、前記識別情報に対応するオブジェクトの経験値を変更することを特徴とするビデオゲームシステム。
10. 請求項９記載のビデオゲームシステムにおいて、
    前記判別手段は、前記差分画像における一部のスクリーン座標と前記カードの識別画像上に重畳して表示されている前記オブジェクトの画像における一部のスクリーン座標とが同じである場合に、前記オブジェクトの画像に前記差分画像が接触していると判別することを特徴とするビデオゲームシステム。
11. 請求項９又は１０記載のビデオゲームシステムにおいて、
    前記差分演算手段、前記判別手段の順番で行われる一連の処理を繰り返し行い、その間に、前記判別手段において、前記オブジェクトの画像に前記差分画像が接触していると判別した回数が所定回数以上となったときに、前記パラメータ変更手段は、前記識別情報に対応するパラメータを変更することを特徴とするビデオゲームシステム。
12. 請求項９〜１１のいずれか１項に記載のビデオゲームシステムにおいて、
    前記差分演算手段は、
    第１の差分信号に基づいて前記撮像手段からの撮像画像を前記第１撮像画像として第１の差分用メモリに記憶する手段と、
    第２の差分信号に基づいて前記撮像手段からの撮像画像を前記第２撮像画像として第２の差分用メモリに記憶する手段と、
    前記第１の差分用メモリに記憶された前記第１撮像画像と前記第２の差分用メモリに記憶された前記第２撮像画像との差分をとる手段とを有することを特徴とするビデオゲームシステム。
13. 請求項９〜１２のいずれか１項に記載のビデオゲームシステムにおいて、
    前記撮像画像表示手段は、前記撮像画像を、前記オブジェクト表示制御手段にて表示される前記オブジェクトの画像のカメラ視点からの距離よりも遠い位置に設定して表示することを特徴とするビデオゲームシステム。
14. 請求項９〜１３のいずれか１項に記載のビデオゲームシステムにおいて、
    同一のオブジェクトに複数の識別情報が割り当てられ、
    前記複数の識別情報のそれぞれにおいて前記同一のオブジェクトに関するパラメータが異なることを特徴とするビデオゲームシステム。
15. 請求項９〜１４のいずれか１項に記載のビデオゲームシステムにおいて、
    前記コンピュータに接続される着脱自在の記憶媒体を有し、
    前記識別情報に対応する情報が前記記憶媒体にて管理されていることを特徴とするビデオゲームシステム。
16. 請求項９〜１４のいずれか１項に記載のビデオゲームシステムにおいて、
    前記コンピュータがネットワークを介してネットワークサーバに接続され、
    前記識別情報に対応する情報が前記ネットワークサーバにて管理されていることを特徴とするビデオゲームシステム。
17. 請求項９〜１６のいずれか１項に記載のビデオゲームシステムにおいて、
    前記カードの識別画像は、セルが多数配置されてなる二次元バーコードにて構成されていることを特徴とするビデオゲームシステム。

Images