JP2007139918A - 表示画像制御装置、表示画像制御方法、表示画像制御システムおよび表示画像制御プログラム - Google Patents

Abstract

【課題】本発明の目的とするところは、ユーザにとって操作性のよい、ユーザインターフェースを備える表示制御装置、表示制御方法および表示制御プログラムを提供することにある。
【解決手段】本実施携帯によれば、ユーザは、リモコンを用いてリモコンが向けられる方向に表示されるポイント位置を情報処理装置の操作画面内に移動させ、リモコンのスイッチをＯＮ／ＯＦＦさせることによって、操作画面に対応する情報処理装置の操作を実行することができる構成とした。
【選択図】図１

Description

本願は、表示装置の制御分野に関する。

近年の画像・音声処理技術の進展に伴い、さまざまな画像・音声にかかわる情報機器の高機能化のための研究開発が活発に進められている。

例えば、ＤＶＤ（Digital Versatile Disc）レコーダ、ＤＶＤプレーヤおよびＡＶ（Audio Visual）アンプ等の情報機器においても、高機能化が顕著になっている。このために、単機能なボタンでの操作が困難なため、画面を見ながらユーザの手元にあるリモコンの方向ボタンと決定キーなどで操作することが非常に多くなっている。そして、リモコンには非常に数多くのボタンが設けられている。このリモコンを使用して、情報機器の画面上において、平面状に並んだアイコンを選択するという操作がこれらの情報機器には必要で，情報機器の機能が増えるほど操作が面倒になる傾向がある。具体的には、次にすべき操作を理解するまでの時間が増え、ボタンを操作する回数が増え、また、それらに伴い、操作に要する時間が増加している。上に述べたような操作は、ＰＣ（Personal Computer）等ではマウスといったポインティングデバイスを使って比較的容易に行うことができる。しかしＤＶＤレコーダのような家電製品は机に座って使用するようなものではないため，マウスのようなＰＣで使用されているポインティングデバイスをそのまま用いることはできない。また、トラックポイントのように机上ではなくても比較的使いやすいものもあるが、操作にある程度慣れが必要であることと、方向ボタンと同様で相対位置移動の操作となるため、移動方向を確実に操作できる方向ボタンと比べてそれほど有利ではない。

複雑な機能を備える情報機器において、いかにその機能を快適に実行できるかは、ユーザにとってその商品の魅力となる。

したがって、高機能化する画像・音声にかかわるユーザインターフェースを備える情報機器において，より操作性の良いポインティングデバイスがユーザに求められている。

本発明は、上述した点に鑑みなされたものであり、その目的とするところは、ユーザにとって操作性のよい、ユーザインターフェースを備える表示制御装置、表示制御方法および表示制御プログラムを提供することにある。

本発明の請求項１に記載の表示画像制御装置は、少なくとも２以上の画像情報が入力される画像情報入力手段と、前記２以上の画像情報に含まれる特徴画像情報を抽出する特徴画像情報抽出手段と、前記画像情報ごとの前記特徴画像情報を比較する特徴画像情報比較手段と、前記特徴画像情報比較手段によって比較された前記画像ごとの前記特徴画像情報によって特定される特徴画像が同一であるか否かを判断する特徴画像情報判断手段と、前記画像情報入力手段によって入力された前記少なくとも２以上の画像情報のいずれか１つの画像情報における基準点を決定する基準点決定手段と、前記基準点が決定された前記画像情報において前記特徴画像情報判断手段により同一であると判断された前記特徴画像を含む他の前記画像情報における当該特徴画像と、当該他の画像情報において前記基準点に対応する基準点の位置関係情報を演算する基準点位置演算手段と、前記位置関係情報が出力される出力手段と、を備えることを特徴とする。

本発明の請求項４に記載の表示画像制御システムは、請求項１乃至３の何れか一項に記載の表示画像制御装置と、画像情報撮影手段と、前記画像情報撮影手段から入力された画像情報を出力する画像情報出力手段と、状態変化検知手段と、前記状態変化検知手段によって検出された状態変化情報を出力する状態変化出力手段と、を備える携帯装置と、前記表示画像制御装置の出力手段から出力された前記位置関係情報と、前記携帯装置の状態変化出力手段から出力された前記状態変化情報とが入力され、前記位置関係情報、前記状態変化情報およびデータ情報の処理状態に基づいて、前記データ情報に関する処理を示す操作画像情報および前記基準点に対応する画像情報を出力する情報処理装置と、を備えることを特徴とする。

次に、本願に最適な実施の形態について、図面に基づいて説明する。

（Ｉ）全体構成及び動作
始めに、実施形態に係る表示制御装置を含む表示画像制御システムＳの全体構成について、図１を用いて説明する。また、実施形態に使用される表示制御装置に入力される画像と画像表示装置に表示される画像との関係について図２を用いて説明する。

まず、実施形態に係わる表示画像制御システムＳの構成および概要動作について図１を用いて説明する。図１に示すように、表示画像制御システムＳは画像表示装置１０、情報処理装置としての情報機器６、表示画像制御装置としての表示制御装置１１および携帯装置としてのリモコン部７から構成される。

ユーザは、画像情報撮影手段としてのカメラ部８を用いて、画像表示装置１０に表示されている情報機器６の操作をあらわす操作画像を含む画像情報を撮影する。表示制御装置１１は、カメラ部８から送出される画像表示装置１０に表示されている画像情報を含むカメラ画像信号Ｓｓｉと、情報機器６が画面表示装置１０に表示している画像の画面１における位置情報を含む画面表示情報信号Ｓｓｉとを基に、カメラ部８におけるレンズ８ａの光軸中心の延長線と画面１とが交錯するポイント位置１４を演算する。

表示制御装置１１は、演算されたポイント位置１４の画像表示装置１０の画面１における位置情報を含む信号をポイント位置情報信号Ｓｐｐとして情報機器６に出力する。情報機器６は入力されたポイント位置情報信号Ｓｐｐを基に、画面１に表示するポイント位置１４を、他の画像情報も含めた画面表示信号Ｓｓｓとして、画像表示装置１０に出力する。画像表示装置１０は、画面表示信号Ｓｓｓに基づいて、画面１にポイント位置１４および情報機器６の操作をあらわす操作画像を含めた画像を表示する。

また、リモコン部７は、状態変化検知手段としてのボタン部９のボタンのＯＮ／ＯＦＦ情報をボタン情報信号Ｓｂｊとして情報機器６に出力する。情報機器６は、ボタン情報信号Ｓｂｊおよびポイント位置１４に基づいて、情報機器６の動作を決定する。

次に図１における各構成部分について説明する。

画像表示装置１０の画面１には、例えば、特徴画像としてのアイコン２、アイコン３、アイコン４、基準点に対応するポイント位置１４およびメッセージ表示部５等の画像が表示される。画面１に表示される表示画像には特に制限がなく、動画および静止画等のあらゆる画像を表示することが可能である。

アイコン２、アイコン３およびアイコン４は、情報機器６に対する操作情報等の画像情報をあらわす。ポイント位置１４がアイコン２、アイコン３およびアイコン４の領域内に移動され、リモコン部７のボタン部９が押下されると、アイコン２、アイコン３およびアイコン４のそれぞれの領域にあらわされた画像情報に対応した操作が情報機器６において実行される。詳細は後述する。

ポイント位置１４は、カメラ部８の動きに対応して表示される画像である。ポイント位置１４として表示される画像は、任意の画像とすることができる。本実施形態においては、情報機器６がポイント位置１４として×印を画面１に表示する。

メッセージ表示部５には、ポイント位置１４とアイコン２、アイコン３およびアイコン４との位置関係情報が、画面１を見ているユーザに対して表示される。

また、ポイント位置１４が画面１上にある場合には、ユーザに対して、ユーザが操作するべき情報を表示する。

リモコン部７は、画像情報撮影手段としてのカメラ部８と状態変化検知手段としてのボタン部９とを備えている。

カメラ部８は、レンズ部８ａおよびＣＣＤ（Charge Coupled Device）（図示せず）等の撮像素子とを備えている。カメラ部８の機能は、携帯電話に搭載されているカメラが有する機能で十分であり、画素数などの性能は現在の携帯電話に搭載されているような高性能なものは必要とせず、低コストなカメラを使用することができる。

画面１の方向に向けられたレンズ部８ａには、画面１、アイコン２、アイコン３、アイコン４、ポイント位置１４およびメッセージ表示部５等の画像情報が入力される。入力された画像情報はＣＣＤ等の撮像素子を介して、カメラ画像情報信号Ｓｃｉとして表示制御装置１１に出力される。

カメラ画像情報信号Ｓｃｉは有線に限らず、無線通信を用いることができる。このことにより、ユーザは、リモコン部７を移動させて、画面１上のポイント位置１４を移動させる操作を違和感なく行うことができる。

ボタン部９には、一つ以上のボタン型スイッチ等のスイッチ（図示せず）が設けられている。ユーザは、画面１に表示された画像およびポイント位置１４を見ながらスイッチをＯＮ／ＯＦＦさせる。ボタン部９は、スイッチがＯＮ状態になったことを示す情報またはスイッチがＯＦＦ状態になったことを示す情報を、ボタン情報信号Ｓｂｊとして情報機器６に出力する。

表示制御装置１１は、リモコン部７に備えられているカメラ部８から出力されるカメラ画像情報信号Ｓｃｉ、および情報機器部６から出力される画面表示情報信号Ｓｓｉを入力し、ポイント位置情報信号Ｓｐｐを情報機器６に出力する。

表示制御装置１１は、カメラ画像情報信号Ｓｃｉに含まれる画面１、アイコン２、アイコン３、アイコン４およびメッセージ表示部５等の画像情報等の画像情報と、画面表示情報信号Ｓｓｉに含まれる画面１、アイコン２、アイコン３、アイコン４およびメッセージ表示部５等の画像情報の画像情報とを入力して、２つの画像情報を比較する。

そして、表示制御装置１１は、画面表示情報信号Ｓｓｉに含まれるアイコン２の画像情報を基にして、カメラ画像情報信号Ｓｃｉに含まれるアイコン２の画像を認識する。同様に、画面表示情報信号Ｓｓｉに含まれる画面１、アイコン３、アイコン４およびメッセージ表示部５等の画像情報を基に、カメラ画像情報信号Ｓｃｉに含まれる画面１、アイコン３、アイコン４およびメッセージ表示部５等の画像を認識する。

その後、表示制御装置１１は、カメラ画像情報信号Ｓｃｉに含まれる画面１、アイコン３、アイコン４およびメッセージ表示部５等の画像情報の画像認識結果に基づいて、カメラ画像情報信号Ｓｃｉの１フレーム内における、画面１、アイコン２、アイコン３、アイコン４およびメッセージ表示部等の座標位置を演算する。

さらに、カメラ画像情報信号Ｓｃｉの１フレーム内の中心を示す中心座標位置（レンズ８ａの中心位置を示す）と、カメラ画像情報信号Ｓｃｉの同一フレーム内にある画面１、アイコン２、アイコン３、アイコン４およびメッセージ表示部５等の画像の座標位置との関係を演算する。

カメラ画像情報信号Ｓｃｉの１フレーム内の中心を示す中心座標位置（レンズ８ａの光軸中心）は、カメラ部８が画面１のどの部分に向いているかをあらわす。すなわち、カメラ画像情報信号Ｓｃｉの１フレーム内の中心を示す中心座標位置は、カメラ部８におけるレンズ部８ａの中心（レンズ８ａの光軸中心）を画面１の方向に延長した場合に、レンズ８ａの光軸中心と画面１との交差点をあらわす。

この中心座標位置情報をポイント位置情報信号Ｓｐｐとして、表示制御部１１は、情報機器６に出力する。

情報機器６には、表示制御装置１１から出力されたポイント位置情報信号Ｓｐｐ、およびリモコン部７から出力されたボタン情報信号Ｓｂｊが入力される。また、情報機器６から画像表示装置１０に画面表示信号６が出力され、情報機器６に画面表示情報信号Ｓｓｓが出力される。

情報機器６は、ポイント位置情報信号Ｓｐｐを基にして、レンズ８ａの光軸の延長線と画面１との交差点をあらわすポイント位置１４を画面１上のどの位置に表示するかを演算する。情報機器６は、演算結果を基に、画面表示信号Ｓｓｓを介して画面１にポイント位置１４を表示する。

情報機器６は、ユーザがリモコン部７を操作することによって、さまざまな動作を実行する。

例えば、ポイント位置１４がアイコン２の表示領域内にある場合において、ユーザがアイコン２に表示されている画像情報に対応した操作を情報機器６に行わせたい場合には、ユーザは、ボタン部９にあるスイッチをＯＮ状態にさせる。この場合には、ボタン部９にあるスイッチがＯＮ状態になったことを示す情報が、ボタン情報信号Ｓｂｊとして情報機器６に出力される。

情報機器部６は、ボタン情報信号Ｓｂｊの変化により、ボタン部９にあるスイッチがＯＮ状態になったことを検知すると、ポイント位置１４が指示しているアイコン２領域内に表示された内容の動作を実行する。

このように、情報機器６は、アイコン２乃至４に情報機器６が実行できる機能を表示させる。そして、ユーザがリモコン部７のカメラ部８の撮影方向と連動したポイント位置１４をアイコン２乃至４の表示領域内に移動させて、ユーザがリモコン部７にあるボタン部９のスイッチをＯＮさせることによって、情報機器６はアイコンに表示された機能を実行する。

ポイント位置は、レンズ８ａの光軸中心に限られるわけではなく、レンズ８ａの特定部分に対応した位置とすることができる。

次に、図２を用いて、表示制御装置１１に入力される画像と画像表示装置１０に表示される画像との関係について説明する。

四角枠１５は、カメラ部８内にあるＣＣＤの四辺をあらわしている。レンズ８ａを介して入力される画像のうち、図２の四角枠１５内の画像がカメラ画像情報信号Ｓｃｉとして、リモコン部７から表示制御装置１１に出力される。

四角枠１５内にある点線１２は、四角枠１５におけるＸ座標の中心線をあらわす。また、四角枠１５内にある点線１３は、四角枠１５におけるＹ座標の中心線をあらわす。点線１２と点線１３とが交差するポイント位置１４が、ＣＣＤの中心をあらわすとともにレンズ８ａの光軸中心をあらわす。

レンズ８ａのレンズ面と画像表示装置１０の画面１とは、常に平行な位置関係にあるわけではない。例えば、画像表示装置１０の画面１に対して、斜めの方向にレンズ８ａがある場合には、図２における四角枠１５内の画像のように、画面１、アイコン２乃至４、およびポイント位置１４がＣＣＤによって撮影される。

四角枠１５内の画像情報が、カメラ画像情報信号Ｓｃｉとして、表示制御装置１１に入力される。

表示制御装置１１には、情報機器６が画面１に表示している画像情報が、画面表示情報信号Ｓｓｉとして、情報機器６から表示制御装置１１に入力される。

表示制御装置１１は、カメラ画像情報信号Ｓｃｉ内にある画像情報であるアイコン２と、画面表示情報信号Ｓｓｉ内にある画像情報であるアイコン２とを比較して、同一のアイコンであることを認識する。

アイコンの認識を行う場合には、画面表示装置１０が表示している画像の特徴（例えば、「位置Ｘ１,Ｙ１に四角が表示されている」や「位置Ｘ２,Ｙ２は赤っぽい色，位置Ｘ３,Ｙ３は青っぽい色」等の情報）の情報があらかじめ、表示制御装置１１に記憶されていると、表示制御装置１１はアイコンを認識しやすい。

さらに，デザインが工夫された認識しやすい形状であるアイコンを画面表示装置１０が画面１に表示するようにすると、表示制御装置１１はアイコンを認識しやすい。例えば、アイコンの周縁部に特徴的なパターンをつけることによっても、表示制御装置１１がアイコンを認識しやすくなる。また、アイコンの周縁部を小さい波状、半円状、三角状および四角状などのデザインされた形状にすることによって、表示制御装置１１がアイコンを認識しやすくなる。

次に、図３を用いて、表示制御装置１１の内部動作について説明する。

リモコン部７から出力されたカメラ画像情報信号Ｓｃｉが、表示制御装置１１のカメラ画像情報入力部１１ａに入力される。カメラ画像情報入力部１１ａは、一定量のカメラ画像情報を記憶するメモリなどの記憶回路を備えている。

カメラ画像情報処理部１１ｂは、カメラ画像情報入力部１１ａに入力された画像情報のフォーマットを表示制御装置１１内において使用する所定のフォーマットに変換する。

また、情報機器６から出力された画面表示情報信号Ｓｓｉが、表示制御装置１１の画面表示情報入力部１１ｆに入力される。画面表示情報入力部１１ｆは、一定量の画面表示情報を記憶するメモリなどの記憶回路を備えている。

画面表示情報処理部１１ｇは、画面表示情報入力部１１ｆに入力された画面表示情報のフォーマットを表示制御装置１１内において使用する所定のフォーマットに変換する。

カメラ画像情報処理部１１ｂから出力される情報の画像フォーマットと、画面表示情報処理部１１ｇから出力される情報の画像フォーマットは同じものである。

画像認識部１１ｃは、画面表示情報に含まれるアイコン画像情報等を、カメラ画像情報の中から認識する。認識方法は前述した方法で行われ、画面１を斜め方向からカメラ部８で撮影した場合、または画面１の一部のみを撮影した場合においても画像認識部１１ｃは、アイコン等の画像情報を認識することができる。

例えば、画面１の四辺の枠の一部しか撮影できなかった場合には、撮影された部分の画面１の四辺の枠から、アイコンの位置を推測して、アイコンの種類を認識することもできる。

また、カメラ部８が画面１の四辺の枠およびアイコンのいずれも撮影していないことを、画像認識部１１ｃが認識した場合には、カメラ部８が画像表示装置１０の画面１の方向に向いていない旨をあらわす情報を、画像認識部１１ｃは、ポイント位置演算部１１ｄに出力する。

ポイント位置演算部１１ｄは、画像認識部１１ｃによって認識された画面１に表示されたアイコンがカメラ画像情報の枠のどの位置にあるかを演算する。

そして、ポイント位置演算部１１ｄは、カメラ画像の中心位置（レンズ８ａの光軸中心）であるポイント位置が、認識されたアイコンまたは画面１の枠からどちらの方向にどれだけ離れているかを演算する。このようにして、ポイント位置情報は、画面１に表示されたアイコン等との相対位置として演算される。

ポイント位置演算部１１ｄで演算されたポイント位置情報が、ポイント位置出力部１１ｅを介して、ポイント位置情報信号Ｓｐｐとして、情報機器６に出力される。

カメラ部８が画像表示装置１０の画面１の方向に向いていない旨をあらわす情報が、画像認識部１１ｃからポイント位置演算部１１ｄに入力された場合には、画像を認識できないことを表す情報が、ポイント位置演算部１１ｄからポイント位置出力部１１ｅを介して、ポイント位置情報信号Ｓｐｐとして、情報機器６に出力される。

ポイント位置出力部１１ｅは、ポイント位置を情報機器６で取り扱うフォーマットに変換する。また、ポイント位置出力部１１ｅは、情報機器６からの入力要求に応じて、ポイント位置情報をポイント位置情報信号Ｓｐｐとして、情報機器６に出力する。

（II）本願の第一実施形態
次に、図４、図５および図６を用いて、第一実施形態に係わる画面表示について説明する。本実施形態は、リモコン部７を画面１に向けて、ポイント位置１４を画面１に表示して、画面１にアイコンとして表示されている情報機器６の機能を実行するための手順を示す実施形態である。

図４は、画面１と画面１に表示されたアイコン２、アイコン１６、アイコン１７およびメッセージ表示部５をあらわしたものである。

図４の状態は、リモコン部７のカメラ部８に画面１が全く撮影されていない場合における、画面１の状態である。

この場合には、カメラ部８が画像表示装置１０の画面１の方向に向いていないことをあらわす情報が、リモコン部１１の画像認識部１１ｃから、ポイント位置演算部１１ｄに出力される。そして、カメラ部８が画像表示装置１０の画面１の方向に向いていない旨をあらわす情報が、情報表示制御装置１１から、情報機器６に出力される。情報機器６は、画面１のメッセージ表示部に“リモコンを画面に向けてください”等の表示をし、ユーザにリモコン部７のカメラ部８を画面１の方向に向けるように促す。

次に、図５を説明する。

図５の状態は、リモコン部７のカメラ部８に画面１の一部が撮影されているがポイント位置１４が画面１に表示できない位置にある場合における、画面１の状態である。

この場合には、表示制御装置１１の画像認識部１１ｃにおいて、図５における画面１の画面枠をあらわす辺１ａ、辺１ｂ、辺１ｃ若しくは辺１ｃのうちの少なくとも一つの辺または辺１ａ、辺１ｂ、辺１ｃ若しくは辺１ｃのうちの少なくとも一つの辺の一部が認識されている状態である。

次に、表示制御装置１１のポイント演算部１１ｄにおいて、画像認識部１１ｃにおいて認識された画面１の画面枠を基に、ポイント位置１４の座標位置を演算する。

その結果、ポイント位置１４をあらわす座標位置が画面１の画面枠よりも外側に存在する場合には、ポイント位置１４が画面１の外側にあることをあらわす情報を、ポイント位置演算部１１ｄからポイント位置出力部１１ｅに出力する。

図５の場合は、辺１ｂの座標位置よりも、ポイント位置１４の座標が右側にあることが、ポイント位置演算部１１ｄにおいて演算される。例えば、辺１ｂの座標位置をあらわすＸ軸方向の値が、ポイント位置１４をあらわすＸ軸方向の値よりも小さい場合である。

その結果、ポイント位置演算部１１ｄは、ポイント位置１４が辺１ｂの外側にあることを内容とする情報を、ポイント位置出力部１１ｅを経由して情報機器６に出力する。

情報機器６は、ポイント位置出力部１１ｅから入力された情報によって、ポイント位置１４が辺１ｂの外側にあることを認識する。すると、情報機器６は、リモコン部７のカメラ部８ａの光軸中心が画面１上にないことを示すために、メッセージ表示部５にカメラ部８ａの光軸中心が画面１上にないことをあらわすメッセージを表示する。例えば、図５に表示されているように“リモコンが画面から外れています”というメッセージを、情報機器６は画面１のメッセージ表示部５に表示する。

また、ユーザにとって、リモコン部７を操作しやすいように、画面１のどちらの方向にカメラ部８ａの光軸中心がずれているかを、情報機器６は画面１に表示する。例えば、図５に表示されているように、画面１からカメラ部８ａの光軸中心がずれている方向に向いた矢印である矢印１８を、情報機器６は画面１に表示する。

図５において矢印１８が表示されることによって、ユーザはリモコン部７をどちらの方向に移動すれば、画面１上にポイント位置１４を示す印を表示することができるようになるかを容易に判断することができる。

情報機器６は、矢印１８を点滅表示させることによって表示し、または、アイコン１、アイコン１６若しくはアイコン１７と異なる色によって表示することもできる。

図５において、カメラ部８ａの光軸中心が画面１の辺１ａより上側にずれていると、表示制御装置１１において判断された場合には、矢印１８の矢の向きが画面１の上側を示すように、情報機器部６は画面１に矢印１８を表示する。

同様に、図５において、カメラ部８ａの光軸中心が画面１の辺１ｃより下側にずれていると、表示制御装置１１において判断された場合には、矢印１８の矢の向きが画面１の下側を示すように、情報機器部６は画面１に表示する。

同様に、図５において、カメラ部８ａの光軸中心が画面１の辺１ｄより左側にずれていると、表示制御装置１１において判断された場合には、矢印１８の矢の向きが画面１の左側を示すように、情報機器部６は画面１に表示する。

矢印１８の表示位置は、画面１の特定の位置に表示されてもよいし、カメラ部８ａの光軸中心を示すポイント位置１４が画面１からずれている方向に位置する画面１の辺の近傍に表示されるようにすることもできる。

次に図６を用いて、ポイント位置が画面１の内側にあるアイコンが表示されている領域に入った場合の画面１の表示について説明する。画面１に表示されるアイコンには、次に行われるべき情報機器６における操作が表示される。

図６は、ポイント位置１４がアイコン１６の領域内に入った場合が表示されている。ポイント位置１４は円画像１９で表示されている。四角であらわされるアイコン１６の領域にポイント位置１４が入ったことが情報機器６で検出されると、情報機器６は画面１に表示されているアイコン１６の表示をハイライト表示に切り替える。

この結果、ユーザは画面１で表示されているポイント位置とアイコンの位置関係が視覚的に把握しやすくなる。

また、メッセージ表示部５には、ユーザに次の操作を促すメッセージが表示される。例えば、図５に示される“選択してください”という表示である。

ユーザは、アイコン１６がハイライト表示されている場合において、リモコン部７のボタン部９にあるスイッチをＯＦＦ状態からＯＮ状態に変化させると、情報機器６は、ボタン情報信号Ｓｂｊを介して、アイコン１６が選択されたことを認識する。

すると、情報機器６は、アイコン１６に表示されている操作をユーザが選択したと認識して、アイコン１６の表示に対応する操作を開始する。

例えば、情報機器６に対する操作手順が階層化されている場合においては、次の階層における選択肢が、新たに、アイコン２、アイコン１６およびアイコン１７に表示される。

この画面表示機能によって、リモコン部７に設けたスイッチ一つが、リモコン部７に情報機器６の操作に対応するスイッチを多く設けた場合と同様の機能を有するようになる。

次に、図７を用いて、本実施形態における動作についてフローチャートを用いて説明する。

ステップＳ１において、情報機器６は、画像表示装置１０の画面１にメニュー等の情報機器６の操作情報をあらわすアイコン等の画像を表示する。そしてステップＳ２に進む。

ステップＳ２において、表示制御装置１１は、リモコン部７のカメラ部８が撮影した画像に画面１が含まれているか否かを判断する。リモコン部７のカメラ部８が撮影した画像に画面１が含まれている場合（ステップＳ２：ＹＥＳ）には、ステップＳ３に進む。リモコン部７のカメラ部が撮影した画像に画面１が含まれていない場合（ステップＳ２：ＮＯ）には、ステップＳ９に進む。

ステップＳ３において、表示制御装置１１は、リモコン部７のカメラ部８の光軸中心がカメラ部８によって撮影された画面１内にあるか否かを、カメラ部８が撮影した画像から判断する。カメラ部８の光軸中心が画面１内にある場合（ステップＳ３：ＹＥＳ）には、ステップＳ４に進む。カメラ部８の光軸中心が画面１内にない場合（ステップＳ３：ＮＯ）には、ステップＳ１０に進む。

ステップＳ４において、表示制御装置１１は、カメラ部８の光軸中心とカメラ部８によって撮影された画面１の画像とが交差する位置座標をポイント位置座標として、情報機器６に出力する。情報機器６は、表示制御装置１１から入力されたポイント位置座標に基づいて、画面１にポイント位置１４を表示する。次に、ステップＳ５に進む。

ステップＳ５において、表示制御装置１１は、リモコン部７のカメラ部８の光軸中心がカメラ部８によって撮影されたアイコン２、アイコン１６またはアイコン１７の領域内にあるか否かを、カメラ部８が撮影した画像から判断する。カメラ部８の光軸中心がアイコン２、アイコン１６またはアイコン１７の領域内にある場合（ステップＳ５：ＹＥＳ）には、ステップＳ６に進む。カメラ部８の光軸中心がアイコン２、アイコン１６またはアイコン１７の領域内にない場合（ステップＳ５：ＮＯ）には、ステップＳ２に進む。

ステップＳ６において、表示制御装置１１は、リモコン部７のカメラ部８の光軸中心がカメラ部８によって撮影されたアイコン２、アイコン１６またはアイコン１７の領域内にあることをあらわす情報を情報機器６に出力する。すると、情報機器６は、表示制御装置１１によってリモコン部７のカメラ部８の光軸中心がカメラ部８によって撮影されたアイコンの領域に存在すると判断されたアイコンをハイライト表示するように、画像表示装置１０に画面表示信号Ｓｓｓを出力する。そして、ステップＳ７に進む。

ステップＳ７において、情報機器６は、リモコン部７のボタン部９に設けられたスイッチがＯＮ状態なったか否かを判断する。情報機器６は、リモコン部７のボタン部９に設けられたスイッチがＯＮ状態なった場合（ステップＳ７：ＹＥＳ）には、ステップＳ８に進む。情報機器６は、リモコン部７のボタン部９に設けられたスイッチがＯＮ状態なっていない場合（ステップＳ７：ＮＯ）には、ステップＳ２に進む。

ステップＳ８において、情報機器６はステップＳ６においてハイライト表示をしたアイコンに表示された操作に該当する機能を実行する。そしてステップ２に進む。

ステップＳ８において実行される機能が情報機器６の電源をＯＦＦにする場合には、図７に表示された動作フローが終了する。

ステップＳ９において、表示制御装置１１は、リモコン部７のカメラ部８が撮影した画像に画面１が含まれていないことを内容とする情報を情報機器６に出力する。情報機器６は、画面１のメッセージ表示部５に、ユーザにリモコン部７を操作してリモコン部７のカメラ部８を画面１に向けるように、注意メッセージをメッセージ表示部５に表示する。

また、ステップＳ１０において、表示制御装置１１は、リモコン部７のカメラ部８の光軸中心がカメラ部８によって撮影された画面１内にないこと、および画面１の四辺のどの方向にカメラ部８の光軸中心があるかを示す情報を、情報機器６に出力する。情報機器６は、画面１のメッセージ表示部５に、ユーザにリモコン部７のカメラ部８が画面１内の方向に向いていない（リモコン部７のカメラ部８の撮影方向が画面１から外れている）ことをあらわす注意メッセージをメッセージ表示部５に表示する。

以上の実施形態においては、アイコンが３つの場合について説明したが、本願はこれに限られるわけではなく、任意のアイコンの数を使用することができる。

また、表示制御装置１１を独立した装置として説明しているが、表示制御装置１１が有する機能を、リモコン部７が有するように構成することが可能である。また、表示制御装置１１が有する機能を、情報機器９が有するように構成することも可能である。さらに、表示制御装置１１が有する機能を、リモコン部７と情報機器９とに適宜分割して有するように構成することも可能である。

さらに、図７のフローチャートに対応するプログラムを、フレキシブルディスク等の記録媒体に予め記録しておき、或いはインターネット等のネットワークを介して予め記録しておき、これを汎用のマイクロコンピュータ等により読み出して実行することにより、当該汎用のマイクロコンピュータ等を実施形態に係わるＣＰＵとして機能させることも可能である。

（III）本願の第二実施形態
次に、本発明の第二実施形態について図８を参照して説明する。

図８において、第一実施形態における部材と同一の部材には同じ番号を付し、説明を省略する。

図８においてセレクタ部２２は、画像表示装置１０の画面１に表示する内容を出力している情報機器を選択する装置である。

また、セレクタ部２２は、画像表示装置１０の画面１にアイコン２、アイコン１６、アイコン１７およびメッセージ表示部５を表示する。

アイコン２には情報機器１の名称が表示され、アイコン１６には情報機器２の名称が表示され、アイコン１７には情報機器３の名称が表示され、メッセージ表示部５には“情報機器の選択をしてください”等のユーザがこれから動作させたい情報機器をポイント位置で選択することを促すメッセージを、セレクタ部２２は表示する。

ユーザは、リモコン部のカメラ部を画面１に向けることによって表示されるポイント位置１４を、動作をさせたい情報機器に対応する表示がされたアイコンの領域内に移動させる。そして、ユーザがリモコン部７のボタン部９のスイッチをＯＮ状態にする。すると、リモコン部７から、カメラ部で撮影した画像情報とともに、スイッチがＯＮ状態になったことをあらわす情報が、画像ボタン情報信号Ｓｃｂとして、リモコン部７から表示制御装置２１に出力される。

表示制御装置２１は、入力された画像ボタン情報信号Ｓｃｂに基づいて、どのアイコンがユーザによって選択され、リモコン部７のボタン部９のスイッチがＯＮ状態となったか否かを識別する。そして、表示制御装置２１は、選択されたアイコンに対応する情報機器の操作をするために、選択された機器の情報を機器選択信号Ｓｊｓとしてセレクタ部２６に出力する。

セレクタ部２６は、機器選択信号Ｓｊｓに基づいて、入力される画像ボタン情報信号Ｓｃｂを、機器操作信号として出力する情報機器を選択する。

例えば、アイコン２に対応する情報機器が情報機器１である場合において、ポイント位置１４がアイコン２の領域内に入っており、ボタン部９のスイッチがＯＮ状態になった場合には、表示制御装置は、機器選択信号Ｓｊｓに選択された情報機器が情報機器１であることを示す情報を含めて、セレクタ部２６に機器選択信号Ｓｊｓを出力する。

セレクタ部２６は、選択された情報機器が情報機器１であることを示す機器選択信号Ｓｊｓに基づいて、情報機器１に画像表示装置１０の画面１に初期操作画面を表示するように、機器操作信号Ｓｏ１を出力する。

機器操作信号Ｓｏ１を入力した情報機器１は、画像表示装置１０の画面１に表示する初期操作画面および情報機器１がユーザによって選択されたことを内容とする情報を含む選択画面表示信号Ｓｓｓ１をセレクタ部２２に出力する。また、情報機器１は、初期操作画面情報を含む選択画面表示情報信号Ｓｓｉ１を表示制御装置２１に出力する。

画面表示情報信号Ｓｓｓ１が入力されたセレクタ部２２は、画面表示情報信号Ｓｓｓ１に基づいて、画面１に情報機器１の初期設定画面を表示する。

ユーザが、リモコン部７を用いて、アイコン１６またはアイコン１７を選択した場合にも各部および各機器が上記と同様の動作を行う。

以上の実施形態においては、セレクタ部２２に接続された情報機器が３つの場合について説明したが、接続される情報機器の種類および数には制限がなく任意の情報機器を接続することができる。

また、表示制御装置２１を独立した装置として説明しているが、表示制御装置２１が有する機能を、リモコン部７が有するように構成することが可能である。

さらに、表示制御装置２１が有する機能を、リモコン部７と情報機器２３、２４および２５とに適宜分割して有するように構成することも可能である。

さらに、第二実施形態に対応するプログラムを、フレキシブルディスク等の記録媒体に予め記録しておき、或いはインターネット等のネットワークを介して予め記録しておき、これを汎用のマイクロコンピュータ等により読み出して実行することにより、当該汎用のマイクロコンピュータ等を実施形態に係わるＣＰＵとして機能させることも可能である。

（IV）本願の第三実施形態
第三実施形態は、第一実施形態における情報機器６が光ディスク再生機の場合である。

光ディスク再生機は、光ディスク再生機に挿入された光ディスクに記録された情報を再生する機能を持っている。

光ディスク再生機が光ディスクを再生する場合には、ユーザの指示に従って再生することが必要となる。ここでは、光ディスク再生機の電源がＯＮ状態となり、再生されるべき光ディスクが光ディスク再生機に挿入されている場合について説明する。この場合には、アイコン２には“再生”の文字が表示され、アイコン３には“早送り”の文字が表示され、アイコン４には“巻き戻し”の文字が表示され、メッセージ表示部５には“動作を選択して下さい”の文字が表示される場合を説明する。

カメラ部８におけるレンズ８ａの中心位置の延長線と、画面１とが交錯するポイント位置を、画面１に表示されたアイコン２、アイコン３、アイコン４およびメッセージ表示部５との関係であらわしたポイント位置情報信号Ｓｐｐが情報機器６（光ディスク再生機）に入力される。

情報機器６は、入力されたポイント位置情報信号Ｓｐｐに基づいて、画面１上に、カメラ部８が向けられている箇所をあらわすポイント位置１４を表示するように画面表示信号Ｓｓｓを出力する。ポイント位置１４は任意の形状とすることができる。

また、情報機器６は、ボタン情報信号Ｓｂｊが変化した場合に、画面１上におけるポイント位置１４がアイコンで表示される領域に入っている場合には、あらかじめ定められた動作を行う。

例えば、ポイント位置１４がアイコン２“再生”であらわされた領域に入った場合において、ユーザがリモコン部７におけるボタン部９のスイッチをＯＮ状態にすると、ボタン部９のスイッチがＯＮ状態であることをあらわすボタン位置情報信号Ｓｂｊが情報機器６に入力される。

すると、光ディスク再生機である情報機器６は、アイコン２“再生”が選択されたと認識して、挿入されている光ディスクを再生し、再生された画像情報を、画面表示信号Ｓｓｓとして画像表示機器１０に出力する。画像表示機器１０は、画面表示信号Ｓｓｓに基づいて、画像情報を表示する。また、光ディスクに音情報が記録されている場合には、その音情報をスピーカ等（図示せず）を用いて再生する。

光ディスク再生機である情報機器６が、挿入された光ディスクを再生している場合には、アイコン２は“再生”の文字を表示せずに、“停止”の文字を表示する。

この場合において、アイコン１６には“早送り”の文字が表示され、アイコン１７には“巻き戻し”の文字が表示され、メッセージ表示部５には“動作を選択して下さい”の文字が表示される。

この光ディスク再生機が光ディスクを再生している場合には、図１０に示されるように、アイコン２、１６および１７は、光ディスクから再生された画像に対して小さく表示される。または、ボタン情報信号Ｓｂｊが変化したことを光ディスク再生機が検知すると、アイコン２、１６および１７を光ディスク再生機が画面１に表示し、また表示しなくすることもできる。

すなわち、リモコン部７のボタン部９にあるスイッチをＯＮ／ＯＦＦさせるたびに、光ディスク再生機は、アイコン２、１６および１７を画面１に表示し、次に表示しないことを繰り返すことができる。

このことによってユーザは、光ディスクの再生画面だけを楽しみたい場合には、ボタン部９にあるスイッチをＯＦＦ状態にして、画面１に表示されているアイコン２、１６、１７およびメッセージ表示部５を表示させないことができる。

また、次に、ユーザがボタン部９にあるスイッチをＯＮ状態にすると、画面１に表示されてなかったアイコン２、１６、１７およびメッセージ表示部５を表示させることができる。

光ディスクが再生されている場合に、ポイント位置１４がアイコン２“停止”で表示された領域に入った場合において、ユーザがリモコン部７におけるボタン部９のスイッチをＯＮ状態にすると、ボタン部９のスイッチがＯＮ状態であることをあらわすボタン位置情報信号Ｓｂｊが情報機器６に入力される。

すると、光ディスク再生機である情報機器６は、アイコン２“停止”が選択されたと認識して、挿入されている光ディスクの再生を停止する。

光ディスク再生機である情報機器６は、光ディスクの再生を停止した場合には、アイコン２の表示を“光ディスクの排出”とし、アイコン１６の表示を“再生”とし、アイコン１７の表示を“電源ＯＦＦ”とする。

なお、本実施形態においては、アイコンの表示の一部について説明したが他にも、光ディスク再生機に備わっているあらゆる機能をアイコンで表示して、リモコン部７からその機能を選択して、光ディスク再生機を動作させることが可能である。

さらに、本実施形態に対応するプログラムを、フレキシブルディスク等の記録媒体に予め記録しておき、或いはインターネット等のネットワークを介して予め記録しておき、これを汎用のマイクロコンピュータ等により読み出して実行することにより、当該汎用のマイクロコンピュータ等を実施形態に係わるＣＰＵとして機能させることも可能である。

以上述べてきたように、本発明の上記各実施形態によれば、表示制御装置は、一の画像情報に含まれる情報処理装置の操作画面と他の画像情報に含まれる同一情報処理装置の操作画面とを比較し、操作画面の同一性を確認した後に、一の画像情報における基準点の位置を他の画像情報における対応した基準点の位置情報として演算できる。

従って、一の画像における特定画像位置に対応する他の画像における特定画像位置を演算することができ、ユーザは異なる画像間の特定画像対応位置をすばやく認識することが可能となる。

また、ある対象物（操作画面等の画面）が表示された画像と、その画像を異なる角度から撮影した画像間とで対象物を基準にして、操作画面等の表示がされる画像における、ユーザが表示させたポイント位置を演算することができる。

さらに、表示画面とその表示画面を撮影した撮影画面との間で、相互に同一情報（操作画面等の対象物）を認識することができるようになるので、操作画面の変化をユーザが迅速に認識することができる。

さらに、リモコン等の携帯装置によって、ユーザは撮影しようとする画像にリモコンを向け、リモコンが向けられた方向に容易にポイント位置を表示することができる。そして、ユーザが撮影しようとする画像がデータ処理に関する画像である場合において、ポイント位置が表示されたその画像上において、携帯装置のスイッチをＯＮ状態にしたときに、その画像に対応する情報処理が情報処置装置によって実行される。

さらに、ユーザはリモコンを用いて、リモコンの方向に基づいて表示されたポイント位置を利用して、情報処理装置の操作画面を選択することができる。

さらに、ユーザは、リモコンを用いてリモコンの方向に基づいて表示されたポイント位置を利用して情報処理装置の操作画面を選択し、携帯装置のスイッチをＯＮ、ＯＦＦさせて、操作画面に対応する情報処理装置の操作を実行することができる。

さらに、ユーザは、リモコンを用いて、リモコンの方向に基づいて表示されたポイント位置を情報処理装置の操作画面内に移動させ、リモコンのスイッチをＯＮ、ＯＦＦさせて、操作画面に対応する情報処理装置の操作を実行することができる。

さらに、ユーザは、プラズマ画面、液晶画面およびＣＲＴ（Cathode Ray Tube）画面等の画像表示装置にリモコンの方向に基づいて表示されるべきポイント位置および情報処理装置の操作画面等を表示させることができる。

さらに、ユーザは、プラズマ画面、液晶画面およびＣＲＴ（Cathode Ray Tube）画面等にＤＶＤプレーヤ等の情報処理装置においてコンテンツ情報を再生している場合には、リモコンの方向に基づいて表示されるべきポイント位置および情報処理装置の操作画面等を小さく、また表示画面の片隅に表示させることができる。

さらに、ユーザはリモコンを用いて、リモコンの方向に基づいて表示されたポイント位置を情報処理装置の操作画面内に移動させ、携帯装置のスイッチをＯＮ、ＯＦＦさせて、操作画面が階層状に構成されている場合であっても次々に画面操作をすることができる。また、情報処理の実行終了毎に次の処理内容をあらわす操作画面を表示し、情報処理装置の操作を継続することができる。

第一の実施形態に係る表示画像制御システムの概要構成例を示すブロック図である。 第一の実施形態に係わる表示制御装置に入力される画像と画像表示装置に表示される画像との関係をあらわす図である。 第一の実施形態に係わる表示制御装置の内部構成を示すブロック図である。 第一の実施形態に係わる画像表示装置の画面に表示される画像の一例をあらわす図である。 第一の実施形態に係わる画像表示装置の画面に表示される画像の一例をあらわす図である。 第一の実施形態に係わる画像表示装置の画面に表示される画像の一例をあらわす図である。 第一の実施形態に係わる表示画像制御システムの動作をあらわすフローチャートである。 第二の実施形態に係る表示画像制御システムの概要構成例を示すブロック図である。 第三の実施形態に係わる画像表示装置の画面に表示される画像の一例をあらわす図である。 第三の実施形態に係わる画像表示装置の画面に表示される画像の一例をあらわす図である。

符号の説明

１ … 画面
２、３、４、１６、１７ … アイコン
５ … メッセージ表示部
６ … 情報機器
７ … リモコン部
８ … カメラ部
８ａ … レンズ部
９ … ボタン部
１０… 画像表示装置
１１、２１… 表示制御装置
１４… ポイント位置

Claims (14)

1. 少なくとも２以上の画像情報が入力される画像情報入力手段と、
   前記２以上の画像情報に含まれる特徴画像情報を抽出する特徴画像情報抽出手段と、
   前記画像情報ごとの前記特徴画像情報を比較する特徴画像情報比較手段と、
   前記特徴画像情報比較手段によって比較された前記画像ごとの前記特徴画像情報によって特定される特徴画像が同一であるか否かを判断する特徴画像情報判断手段と、
   前記画像情報入力手段によって入力された前記少なくとも２以上の画像情報のいずれか１つの画像情報における基準点を決定する基準点決定手段と、
   前記基準点が決定された前記画像情報において前記特徴画像情報判断手段により同一であると判断された前記特徴画像を含む他の前記画像情報における当該特徴画像と、当該他の画像情報において前記基準点に対応する基準点の位置関係情報を演算する基準点位置演算手段と、
   前記位置関係情報が出力される出力手段と、
   を備えることを特徴とする表示画像制御装置。
2. 請求項１に記載の表示画像制御装置において、
   前記画像情報入力手段に入力される２以上の画像情報は、同一対象物を異なる角度から画像情報として表現したことを特徴とする表示画像制御装置。
3. 請求項１に記載の表示画像制御装置において、
   前記画像情報入力手段に入力される２以上の画像情報の少なくとも１つの画像情報は、画像情報表示手段によって表示されるべき画像情報であり、
   他の少なくとも１つの画像情報は、前記画像情報表示手段によって表示される画像情報を画像情報撮影手段によって撮影される画像情報であることを特徴とする表示画像制御装置。
4. 請求項１乃至３の何れか一項に記載の表示画像制御装置と、
   画像情報撮影手段と、前記画像情報撮影手段から入力された画像情報を出力する画像情報出力手段と、状態変化検知手段と、前記状態変化検知手段によって検出された状態変化情報を出力する状態変化出力手段と、を備える携帯装置と、
   前記表示画像制御装置の出力手段から出力された前記位置関係情報と、前記携帯装置の状態変化出力手段から出力された前記状態変化情報とが入力され、前記位置関係情報、前記状態変化情報およびデータ情報の処理状態に基づいて、前記データ情報に関する処理を示す操作画像情報および前記基準点に対応する画像情報を出力する情報処理装置と、
   を備えることを特徴とする表示画像制御システム。
5. 請求項４に記載の表示画像制御システムにおいて、
   前記表示画像制御装置の前記特徴画像情報には、前記操作画像情報が含まれることを特徴とする表示画像制御システム。
6. 請求項４または５に記載の表示画像制御システムにおいて、
   前記情報処理装置は、前記位置関係情報および前記状態変化情報に基づいて、前記データ情報の処理を実行することを特徴とする表示画像制御システム。
7. 請求項４乃至６のいずれか一項に記載の表示画像制御システムにおいて、
   前記情報処理装置は、前記基準点に対応する画像情報によって表示される表示領域が、前記操作画像情報によって表示される表示領域の内部にあることを検出した場合には、前記操作画像情報によって表示される表示領域の表示状態を変化させることを特徴とする表示画像制御システム。
8. 請求項４乃至７のいずれか一項に記載の表示画像制御システムにおいて、
   前記操作画像情報および前記基準点に対応する画像情報が入力され、前記操作画像情報および前記基準点に対応する画像情報に基づいて、操作画像および前記基準点に対応する画像を表示する画像表示装置を更に有することを特徴とする表示画像制御システム。
9. 請求項８に記載の表示画像制御システムにおいて、
   前記画像表示装置は、前記データ情報の処理状態に基づいて、前記操作画像の大きさおよび表示位置を変化させることを特徴とする表示画像制御システム。
10. 請求項５乃至９の何れか一項に記載の表示画像制御システムにおいて、
    前記操作画像情報は、前記情報処理の実行後に前記情報処理装置が行うことができる情報処理の種類をあらわす画像情報であることを特徴とする表示画像制御システム。
11. 少なくとも２以上の画像情報が入力される画像情報入力工程と、
    前記２以上の画像情報に含まれる特徴画像情報を抽出する特徴画像情報抽出工程と、
    前記画像情報ごとの前記特徴画像情報を比較する特徴画像情報比較工程と、
    前記特徴画像情報比較工程において比較された前記画像ごとの前記特徴画像情報によって特定される特徴画像が同一であるか否かを判断する特徴画像情報判断工程と、
    前記画像情報入力工程において入力された前記少なくとも２以上の画像情報のいずれか１つの画像情報における基準点を決定する基準点決定工程と、
    前記基準点が決定された前記画像情報において前記特徴画像情報判断工程において同一であると判断された前記特徴画像を含む他の前記画像情報における当該特徴画像と、当該他の画像情報において前記基準点に対応する基準点の位置関係情報を演算する基準点位置演算工程と、
    前記位置関係情報が出力される出力工程と、
    を備えることを特徴とする表示画像制御方法。
12. 請求項１１に記載の表示画像制御方法と、
    画像情報撮影工程と、前記画像情報撮影工程において入力された画像情報を出力する画像情報出力工程と、状態変化検知工程と、前記状態変化検知工程において検出された状態変化情報を出力する状態変化出力工程と、を備える携帯装置における処理方法と、
    前記表示画像制御工程の出力工程において出力された前記位置関係情報と、前記携帯装置の処理方法の状態変化出力工程において出力された前記状態変化情報とが入力され、前記位置関係情報、前記状態変化情報およびデータ情報の処理状態に基づいて、前記データ情報に関する処理を示す操作画像情報および前記基準点に対応する画像情報を出力する情報処理工程と、
    を備えることを特徴とする表示画像制御方法。
13. 表示画像制御装置に含まれるコンピュータを
    少なくとも２以上の画像情報が入力される画像情報入力手段、
    前記２以上の画像情報に含まれる特徴画像情報を抽出する特徴画像情報抽出手段、
    前記画像情報ごとの前記特徴画像情報を比較する特徴画像情報比較手段、
    前記特徴画像情報比較手段によって比較された前記画像ごとの前記特徴画像情報によって特定される特徴画像が同一であるか否かを判断する特徴画像情報判断手段、
    前記画像情報入力手段によって入力された前記少なくとも２以上の画像情報のいずれか１つの画像情報における基準点を決定する基準点決定手段、
    前記基準点が決定された前記画像情報において前記特徴画像情報判断手段により同一であると判断された前記特徴画像を含む他の前記画像情報における当該特徴画像と、当該他の画像情報において前記基準点に対応する基準点の位置関係情報を演算する基準点位置演算手段、
    前記位置関係情報が出力される出力手段、
    として機能させることを特徴とする表示画像制御プログラム。
14. 請求項１３に記載の表示画像制御プログラムと、
    携帯装置に含まれるコンピュータを、
    画像情報撮影手段、前記画像情報撮影手段から入力された画像情報を出力する画像情報出力手段、状態変化検知手段、前記状態変化検知手段によって検出された状態変化情報を出力する状態変化出力手段、として機能させる携帯装置に処理プログラムと、
    情報処理装置に含まれるコンピュータを、
    前記表示画像制御プログラムにおける前記位置関係情報、前記携帯装置の前記状態変化情報およびデータ情報の処理状態に基づいて、前記データ情報に関する処理を示す操作画像情報および前記基準点に対応する画像情報を出力する動作をさせる機能を有する情報処理プログラムと、
    を備えることを特徴とする表示画像制御プログラム。

Images