JP2003186596A - 表示装置及び表示装置の入力方法 - Google Patents
表示装置及び表示装置の入力方法Info
- Publication number
- JP2003186596A JP2003186596A JP2001380236A JP2001380236A JP2003186596A JP 2003186596 A JP2003186596 A JP 2003186596A JP 2001380236 A JP2001380236 A JP 2001380236A JP 2001380236 A JP2001380236 A JP 2001380236A JP 2003186596 A JP2003186596 A JP 2003186596A
- Authority
- JP
- Japan
- Prior art keywords
- motion
- display device
- information
- image
- input
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/0304—Detection arrangements using opto-electronic means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
- Image Analysis (AREA)
- Position Input By Displaying (AREA)
Abstract
(57)【要約】
【課題】 情報の掲示を行う表示装置において、手が届
かない距離においても人間の簡単な動作によって高度な
表示制御の入力を行うことができる表示装置及び表示装
置の入力方法を実現する。 【解決手段】 人間の動作を検出する画像入力手段、身
体動作を複数の部位の動作に分離する分離手段と、夫々
の動作部位毎の動作情報を出力する動作情報出力手段と
を有し、前記の夫々の動作情報出力を選択や移動の操作
を行う選択的入力指示及び選択的入力指示への決定指示
として組み合わせ、その結果に基づいて表示の制御を行
わせることを特徴とする。
かない距離においても人間の簡単な動作によって高度な
表示制御の入力を行うことができる表示装置及び表示装
置の入力方法を実現する。 【解決手段】 人間の動作を検出する画像入力手段、身
体動作を複数の部位の動作に分離する分離手段と、夫々
の動作部位毎の動作情報を出力する動作情報出力手段と
を有し、前記の夫々の動作情報出力を選択や移動の操作
を行う選択的入力指示及び選択的入力指示への決定指示
として組み合わせ、その結果に基づいて表示の制御を行
わせることを特徴とする。
Description
【０００１】
【発明の属する技術分野】本発明は様々な情報を表示す
る表示装置に関し、手の届かない距離から表示装置の制
御を行う入力方法に関する。
る表示装置に関し、手の届かない距離から表示装置の制
御を行う入力方法に関する。
【０００２】
【従来の技術】表示パネル技術とディジタル情報化技術
の進展に伴って、壁に掛けられるような薄型の表示パネ
ルを用いた装置に配信や蓄積した情報を複数の人間で利
用する環境が整いつつある。そのために表示装置は情報
ソースの切り替えや、表示個所の指示といった入力操作
が必要となる。
の進展に伴って、壁に掛けられるような薄型の表示パネ
ルを用いた装置に配信や蓄積した情報を複数の人間で利
用する環境が整いつつある。そのために表示装置は情報
ソースの切り替えや、表示個所の指示といった入力操作
が必要となる。
【０００３】こうした表示装置を離れたところから空間
上で制御する入力方式としては、従来はキーボードを持
つリモコンが一般的であった。しかし、細かなポインテ
ィングの位置入力や複数で共用して使用される表示装置
に対しては次のような理由により不都合である。
上で制御する入力方式としては、従来はキーボードを持
つリモコンが一般的であった。しかし、細かなポインテ
ィングの位置入力や複数で共用して使用される表示装置
に対しては次のような理由により不都合である。
【０００４】 マウスによる操作のような細かな位置
入力や、連続的な移動の指示はキーボードからは困難で
ある。 不特定なユーザで共用する装置では、リモコンの置
き場所やその使い方を周知させることが困難である。 特別な機器を手に持ったり、装着したりせずに入力
の指示が行えることが望ましい。
入力や、連続的な移動の指示はキーボードからは困難で
ある。 不特定なユーザで共用する装置では、リモコンの置
き場所やその使い方を周知させることが困難である。 特別な機器を手に持ったり、装着したりせずに入力
の指示が行えることが望ましい。
【０００５】上記の解決方法として人間のジェスチャー
を入力手段とする方法が提案されており、その従来例を
説明する。
を入力手段とする方法が提案されており、その従来例を
説明する。
【０００６】図６のブロック図は特開平１０−３１５５
１の例であって、表示装置制御のような高度な入力を可
能にするためにジェスチャーに加えて音声認識技術を用
いている。人間６１のボデーアクションを画像センサ６
２で検出し、その補助手段としての音声入力手段６３を
併用し、認識手段６４が操作者の意図を判別して被制御
装置６５としての表示装置等を制御するよう構成してい
る。
１の例であって、表示装置制御のような高度な入力を可
能にするためにジェスチャーに加えて音声認識技術を用
いている。人間６１のボデーアクションを画像センサ６
２で検出し、その補助手段としての音声入力手段６３を
併用し、認識手段６４が操作者の意図を判別して被制御
装置６５としての表示装置等を制御するよう構成してい
る。
【０００７】
【発明が解決しようとする課題】しかしながら上記従来
例のように音声入力を用いることにより、幾つかの不都
合な問題が発生する。一つ目には複数の不特定利用者に
対して音声入力が他者への迷惑になってしまうことであ
る。例えば美術館などの環境で展示物の説明を行う表示
装置では大変不都合である。二つ目には騒音その他、音
が既に存在している環境において自然発声による指示音
声を入力装置に分別させることは大変技術的に高度で高
価格となる点である。例えば、屋外や街頭に設置した場
合などである。また、屋外でなくても表示装置自体に説
明のための音声、音響を発生させていることの方が一般
的であり、ゲーム装置の場合にも効果音等がそれに当た
る。
例のように音声入力を用いることにより、幾つかの不都
合な問題が発生する。一つ目には複数の不特定利用者に
対して音声入力が他者への迷惑になってしまうことであ
る。例えば美術館などの環境で展示物の説明を行う表示
装置では大変不都合である。二つ目には騒音その他、音
が既に存在している環境において自然発声による指示音
声を入力装置に分別させることは大変技術的に高度で高
価格となる点である。例えば、屋外や街頭に設置した場
合などである。また、屋外でなくても表示装置自体に説
明のための音声、音響を発生させていることの方が一般
的であり、ゲーム装置の場合にも効果音等がそれに当た
る。
【０００８】更には、制御を目的として音声認識のため
に発声を行わせることは通常の会話と異なり、人間にと
って苦痛な作業であることも大いに考慮する必要があ
る。
に発声を行わせることは通常の会話と異なり、人間にと
って苦痛な作業であることも大いに考慮する必要があ
る。
【０００９】よって本発明は上記の問題点に鑑み、音声
入力のような他の補助入力手段を用いずに、人間の身体
動作にて高度な入力制御が行える表示装置及び入力方法
を提供することを目的とする。
入力のような他の補助入力手段を用いずに、人間の身体
動作にて高度な入力制御が行える表示装置及び入力方法
を提供することを目的とする。
【００１０】
【課題を解決するための手段】本発明は上記の課題を解
決するために、電子情報を表示せしめる表示装置本体
と、人間の身体の動作を検出する画像入力手段と、該画
像入力手段記画像情報から身体動作を解析する動作解析
手段と、表示の制御を行う表示制御手段とを備え、前記
動作解析手段は身体動作を複数の部位の動作に分離する
分離手段と、夫々の動作部位毎の動作情報を出力する動
作情報出力手段とを更に有し、前記の夫々の動作情報出
力を組み合わせた結果に基づいて表示の制御を行うこと
を特徴とする。
決するために、電子情報を表示せしめる表示装置本体
と、人間の身体の動作を検出する画像入力手段と、該画
像入力手段記画像情報から身体動作を解析する動作解析
手段と、表示の制御を行う表示制御手段とを備え、前記
動作解析手段は身体動作を複数の部位の動作に分離する
分離手段と、夫々の動作部位毎の動作情報を出力する動
作情報出力手段とを更に有し、前記の夫々の動作情報出
力を組み合わせた結果に基づいて表示の制御を行うこと
を特徴とする。
【００１１】請求項１，７に記載の、このような構成に
よれば、身体の動作による入力のみにて高度な表示制御
を行うことが可能となる。
よれば、身体の動作による入力のみにて高度な表示制御
を行うことが可能となる。
【００１２】また、請求項２、８に記載の本発明は、表
示装置の前に立つ複数の利用者の中から入力を行う利用
者を特定する方法を実現するものである。
示装置の前に立つ複数の利用者の中から入力を行う利用
者を特定する方法を実現するものである。
【００１３】また、請求項３，９に記載のように本発明
においては、人間の右手と左手の動作とに対して画像情
報を分離し、一方の動作情報出力が選択や移動の操作を
行う選択的入力指示であり、他方の動作情報出力を少な
くとも前記選択的入力指示への決定指示とすることが望
ましい。
においては、人間の右手と左手の動作とに対して画像情
報を分離し、一方の動作情報出力が選択や移動の操作を
行う選択的入力指示であり、他方の動作情報出力を少な
くとも前記選択的入力指示への決定指示とすることが望
ましい。
【００１４】また、請求項４，１０に記載のように本発
明においては、人間の右手又は左手による手の動作と、
顔を動かす動作とに画像情報を分離し、一方の動作情報
出力が選択や移動の操作を行う選択的入力指示であり、
他方の動作情報出力を少なくとも前記選択的入力指示へ
の決定指示とすることが望ましい。
明においては、人間の右手又は左手による手の動作と、
顔を動かす動作とに画像情報を分離し、一方の動作情報
出力が選択や移動の操作を行う選択的入力指示であり、
他方の動作情報出力を少なくとも前記選択的入力指示へ
の決定指示とすることが望ましい。
【００１５】また、請求項５、１１に記載のように本発
明においては、先に顔の位置情報を抽出し、該顔の位置
情報を基にして対象とする動作部位を求めて分離する方
法を取ることが望ましい。
明においては、先に顔の位置情報を抽出し、該顔の位置
情報を基にして対象とする動作部位を求めて分離する方
法を取ることが望ましい。
【００１６】また、請求項６、１２に記載のように本発
明においては、複数の利用者の中から入力を行う利用者
の特定をするにあたって、人間の右手と左手の動作とを
組み合わせたパターンであることが望ましい。
明においては、複数の利用者の中から入力を行う利用者
の特定をするにあたって、人間の右手と左手の動作とを
組み合わせたパターンであることが望ましい。
【００１７】
【発明の実施の形態】以下に本発明の実施例を図面に基
づいて詳述する。
づいて詳述する。
【００１８】図１は、本発明の実施例による表示装置の
全体図である。表示装置本体１は独立したネットワーク
端末としてＩＰアドレスを有し、制御回路２（図２にお
いて詳説する）、表示パネル３及び初期設定や受信アド
レス等を設定する設定入力手段４から構成され、配信さ
れる電子情報の受信手段である通信インタフェースには
通信回線５が接続されてインターネット網へと繋がって
いる。表示装置としては、屋外の表示パネルのような規
模の大きいものから家庭用の小規模なものまで多様であ
って、それにより表示パネルの大きさも変わってくる。
複数の人に共用される場合が主であるが、個人を対象と
したものであっても良い。装置の形態としてはパソコン
のような据え置きタイプでなく、このような壁面等に設
置する形が自然である。
全体図である。表示装置本体１は独立したネットワーク
端末としてＩＰアドレスを有し、制御回路２（図２にお
いて詳説する）、表示パネル３及び初期設定や受信アド
レス等を設定する設定入力手段４から構成され、配信さ
れる電子情報の受信手段である通信インタフェースには
通信回線５が接続されてインターネット網へと繋がって
いる。表示装置としては、屋外の表示パネルのような規
模の大きいものから家庭用の小規模なものまで多様であ
って、それにより表示パネルの大きさも変わってくる。
複数の人に共用される場合が主であるが、個人を対象と
したものであっても良い。装置の形態としてはパソコン
のような据え置きタイプでなく、このような壁面等に設
置する形が自然である。
【００１９】情報の形態も文字情報から、静止画、動画
と多様化され、画像への音声付加も一般的に用いられ
る。従ってこのような情報を得る表示装置としては、常
時接続によるＰＵＳＨという配信形態となる。図１では
通信回線５のローカルなネットワークには監視カメラ６
も接続されてネットワークシステムを成し、離れたとこ
ろにある屋内又は屋外の様子を本発明の表示装置によっ
て見ることが出来、幼児等被保護者の様子の見守りや、
外部に対するセキュリティチェックその他の用途に用い
られる。
と多様化され、画像への音声付加も一般的に用いられ
る。従ってこのような情報を得る表示装置としては、常
時接続によるＰＵＳＨという配信形態となる。図１では
通信回線５のローカルなネットワークには監視カメラ６
も接続されてネットワークシステムを成し、離れたとこ
ろにある屋内又は屋外の様子を本発明の表示装置によっ
て見ることが出来、幼児等被保護者の様子の見守りや、
外部に対するセキュリティチェックその他の用途に用い
られる。
【００２０】そして、更にはインターネット網を通して
７、あるいは８に代表されるコンテンツサービス情報を
受信して表示する。こうしたコンテンツは、利用者の嗜
好によって選択され、料金等の契約がなされたニュース
やマガジン、あるいは自然風景と多様であって定期ある
いは不定期に更新されて送られてきて表示装置内に蓄積
される。
７、あるいは８に代表されるコンテンツサービス情報を
受信して表示する。こうしたコンテンツは、利用者の嗜
好によって選択され、料金等の契約がなされたニュース
やマガジン、あるいは自然風景と多様であって定期ある
いは不定期に更新されて送られてきて表示装置内に蓄積
される。
【００２１】また、図１では図示していないが表示装置
と同じローカルなネットワーク内にホームサーバなるサ
ーバを設置しておき、該サーバを窓口として入手した情
報を所定のフィルタ手段で選別してから表示装置へ送信
したり、大容量情報はサーバ内に蓄積しておくようなネ
ットワーク構成にしても良い。
と同じローカルなネットワーク内にホームサーバなるサ
ーバを設置しておき、該サーバを窓口として入手した情
報を所定のフィルタ手段で選別してから表示装置へ送信
したり、大容量情報はサーバ内に蓄積しておくようなネ
ットワーク構成にしても良い。
【００２２】９は人間の身体の動作を検出する画像入力
手段で、ＣＣＤ等を用いた撮像デバイスである。
手段で、ＣＣＤ等を用いた撮像デバイスである。
【００２３】図２は本発明の実施例による制御回路のブ
ロック図で、ＣＰＵ１１、内部バス１２を介して表示用
コントローラであるＤ−ＣＯＮＴ１６、ビデオＲＡＭで
あるＶＲＡＭ１５、受信情報を複数ページ蓄積しておく
ページメモリであるＰＡＧＥ−ＲＡＭ１８が接続され、
Ｄ−ＣＯＮＴ１６の画像等の表示データは表示パネル１
７に出力されて表示される。表示パネルの方式としては
薄型化の構成が可能な、液晶、ＥＬ、プラズマ表示方式
等を用いることができる。
ロック図で、ＣＰＵ１１、内部バス１２を介して表示用
コントローラであるＤ−ＣＯＮＴ１６、ビデオＲＡＭで
あるＶＲＡＭ１５、受信情報を複数ページ蓄積しておく
ページメモリであるＰＡＧＥ−ＲＡＭ１８が接続され、
Ｄ−ＣＯＮＴ１６の画像等の表示データは表示パネル１
７に出力されて表示される。表示パネルの方式としては
薄型化の構成が可能な、液晶、ＥＬ、プラズマ表示方式
等を用いることができる。
【００２４】更に内部バスには、前記設定入力手段４の
インタフェースであるＫＩＦ１９、通信インタフェース
であるＣＯＭ−ＩＦ２１、本発明の制御プログラムを内
蔵したＲＯＭ１３、内部メモリであるＲＡＭ１４、表示
装置が有する特定の情報発生手段であるＧＥＮ２３、音
声及び音響を発生するＳＰ２４、時刻情報及びタイマ処
理を行うタイマであるＴＩＭ２５が接続され、続いて本
発明の入力方法に深く関わる画像入力手段２８や画像入
力手段の画像情報から身体動作を解析する動作解析手段
ＤＩＳである２７、２７の動作部位毎の動作情報出力で
あるＲとＬにより表示を制御する命令を形成するコマン
ド発生手段２６、特定の比較パターンを記憶したパター
ンメモリ２９より構成されている。
インタフェースであるＫＩＦ１９、通信インタフェース
であるＣＯＭ−ＩＦ２１、本発明の制御プログラムを内
蔵したＲＯＭ１３、内部メモリであるＲＡＭ１４、表示
装置が有する特定の情報発生手段であるＧＥＮ２３、音
声及び音響を発生するＳＰ２４、時刻情報及びタイマ処
理を行うタイマであるＴＩＭ２５が接続され、続いて本
発明の入力方法に深く関わる画像入力手段２８や画像入
力手段の画像情報から身体動作を解析する動作解析手段
ＤＩＳである２７、２７の動作部位毎の動作情報出力で
あるＲとＬにより表示を制御する命令を形成するコマン
ド発生手段２６、特定の比較パターンを記憶したパター
ンメモリ２９より構成されている。
【００２５】動作解析手段２７はＣＰＵプログラム内に
格納されたアルゴリズムにより身体動作を複数の部位の
動作に分離し、夫々の動作部位毎の動作情報ＲとＬを出
力する。Ｒ、Ｌは、例えば右手と左手の動作情報、或い
は右手と顔の上下左右の向き、更には、右手と左手と顔
の上下左右の向きといった３つの部位としても良い。そ
して、こうした解析の処理時間を速めるためには専用の
ＩＣや専用のＣＰＵを割り当てても良い。なお、本発明
で用いている手の動作の定義は、手の平や指といった狭
い意味でなく、腕から先の部位として広く定義してい
る。
格納されたアルゴリズムにより身体動作を複数の部位の
動作に分離し、夫々の動作部位毎の動作情報ＲとＬを出
力する。Ｒ、Ｌは、例えば右手と左手の動作情報、或い
は右手と顔の上下左右の向き、更には、右手と左手と顔
の上下左右の向きといった３つの部位としても良い。そ
して、こうした解析の処理時間を速めるためには専用の
ＩＣや専用のＣＰＵを割り当てても良い。なお、本発明
で用いている手の動作の定義は、手の平や指といった狭
い意味でなく、腕から先の部位として広く定義してい
る。
【００２６】コマンド発生手段２６は動作情報出力Ｒ、
Ｌの組み合わせを用いて表示回路の制御を行う。特に初
期制御のような特定の制御には組み合わせた結果を一つ
のコマンドとするが、途中の複雑な制御のためには夫々
の動作情報出力Ｒ、Ｌ等に対して異なる種類の制御指示
を割り当てる。例えば、異なる制御指示として一方の動
作情報出力が選択や移動の操作を行う選択的入力指示で
あり、他方の動作情報出力を少なくとも前記選択的入力
指示への決定指示とする。また異なる制御指示への考え
方として表現を変えれば、一方を直接的な操作への指
示、他方をその直接的な指示に対しての決定、終了、中
断といった主従的な組み合わせの関係としても良い。
Ｌの組み合わせを用いて表示回路の制御を行う。特に初
期制御のような特定の制御には組み合わせた結果を一つ
のコマンドとするが、途中の複雑な制御のためには夫々
の動作情報出力Ｒ、Ｌ等に対して異なる種類の制御指示
を割り当てる。例えば、異なる制御指示として一方の動
作情報出力が選択や移動の操作を行う選択的入力指示で
あり、他方の動作情報出力を少なくとも前記選択的入力
指示への決定指示とする。また異なる制御指示への考え
方として表現を変えれば、一方を直接的な操作への指
示、他方をその直接的な指示に対しての決定、終了、中
断といった主従的な組み合わせの関係としても良い。
【００２７】パターンメモリ２９は前記初期制御のよう
な特定の制御のために、動作を組み合わせた結果を一つ
のコマンドとする比較パターンを格納しておくメモリで
ある。例えば複数の利用者から一人を選ぶ選択時や、特
定の機能の制御を開始するための場合などに適用する。
具体的な身体動作としては右手と左手による特定の形な
どとするのが自然である。
な特定の制御のために、動作を組み合わせた結果を一つ
のコマンドとする比較パターンを格納しておくメモリで
ある。例えば複数の利用者から一人を選ぶ選択時や、特
定の機能の制御を開始するための場合などに適用する。
具体的な身体動作としては右手と左手による特定の形な
どとするのが自然である。
【００２８】２３のＧＥＮは表示装置自身による特定情
報発生手段であって、受信情報の到来前や受信情報を表
示し尽くしたときなどのベースの表示情報として使用す
る。例えば、時刻表示を針式アナログ時計表示の画像デ
ザインで、壁掛け時計の如く表示させておくことができ
る。
報発生手段であって、受信情報の到来前や受信情報を表
示し尽くしたときなどのベースの表示情報として使用す
る。例えば、時刻表示を針式アナログ時計表示の画像デ
ザインで、壁掛け時計の如く表示させておくことができ
る。
【００２９】ＫＩＦ１９は設定入力手段のキーボードで
あるＫＢ２０に接続されており、２０は表示装置の初期
設定並びに受信を選択する情報先の設定などを行う。本
発明はこうした初期的な設定に加えて、個々の受信情報
に対しての優先ランクの設定なども行う。優先ランクに
より複数の情報を受信して同時に表示したい情報が複数
あったときに、表示装置自身がそのランク情報に基づき
表示の方法や順序等を処理し、かつ利用者が見るにあた
っても適切な情報掲示を行うことができる。
あるＫＢ２０に接続されており、２０は表示装置の初期
設定並びに受信を選択する情報先の設定などを行う。本
発明はこうした初期的な設定に加えて、個々の受信情報
に対しての優先ランクの設定なども行う。優先ランクに
より複数の情報を受信して同時に表示したい情報が複数
あったときに、表示装置自身がそのランク情報に基づき
表示の方法や順序等を処理し、かつ利用者が見るにあた
っても適切な情報掲示を行うことができる。
【００３０】通信インタフェース２１は通信伝送手段２
２に接続されている。そして２２は電話線やＬＡＮケー
ブルに限定されず、無線によるワイヤレス方式、或いは
電灯線を用いた通信方式などにより本発明の表示装置を
構築できる。特に電灯線通信方式を用いることにより、
表示装置に要する電源供給を電灯線コンセントから取る
経路と共用ができるのでケーブル等の敷設を必要とせず
に設置が大変容易であり、無線における場合のように周
波数資源による端末収容数の問題や電波遮蔽物などを気
にしなくても良い。
２に接続されている。そして２２は電話線やＬＡＮケー
ブルに限定されず、無線によるワイヤレス方式、或いは
電灯線を用いた通信方式などにより本発明の表示装置を
構築できる。特に電灯線通信方式を用いることにより、
表示装置に要する電源供給を電灯線コンセントから取る
経路と共用ができるのでケーブル等の敷設を必要とせず
に設置が大変容易であり、無線における場合のように周
波数資源による端末収容数の問題や電波遮蔽物などを気
にしなくても良い。
【００３１】図３は本発明の実施例における身体の動作
解析と制御指令形成のフローチャートである。操作事例
としては左右の手を用いて、表示されている***作対象
に対し、移動や選択を行う場合である。
解析と制御指令形成のフローチャートである。操作事例
としては左右の手を用いて、表示されている***作対象
に対し、移動や選択を行う場合である。
【００３２】まず、Ｓ―３１で画像入力手段より出力さ
れた画像の中に人間が存在するかの解析と検出を行う。
存在が検出された場合には、Ｓ―３２の処理によって右
手の動作と左手の動作に分離した解析出力を得る。
れた画像の中に人間が存在するかの解析と検出を行う。
存在が検出された場合には、Ｓ―３２の処理によって右
手の動作と左手の動作に分離した解析出力を得る。
【００３３】次にＳ―３３では制御の開始を示している
身体の動作指示であるかの検出を行う。この場合は右手
と左手を組み合わせて一体化した動作そのものを開始の
指示としても良いし、あるいは左手のみが開始を指示す
るものとしても良い。
身体の動作指示であるかの検出を行う。この場合は右手
と左手を組み合わせて一体化した動作そのものを開始の
指示としても良いし、あるいは左手のみが開始を指示す
るものとしても良い。
【００３４】制御の開始が指示されると、Ｓ―３４にお
いて右手の動作に追従して表示画面中の***作対象に対
し移動や選択が行われる。具体的には、カーソルの移動
であったり、画像中の特定部分の移動であったり、画面
全体のページ送りであったり、画像中に現れたリストの
中から特定の指示や文字を選択していく操作である。
いて右手の動作に追従して表示画面中の***作対象に対
し移動や選択が行われる。具体的には、カーソルの移動
であったり、画像中の特定部分の移動であったり、画面
全体のページ送りであったり、画像中に現れたリストの
中から特定の指示や文字を選択していく操作である。
【００３５】また、Ｓ―３４と並行してＳ―３５によっ
て左手の動作を監視し、特定パターンの有無を検出す
る。左手が操作の決定を表す動作を指示場合には、その
ときの右手によって指示された移動量や選択を結果を確
定する。左手の動作が決定を表すまでは右手の位置が示
す指示に基づく移動・選択を継続する。これは人間にと
って極めて指示をし易い手を用いて＋方向と−方向のど
ちらもアナログ的に二次元上で指示できるためヒューマ
ンインタフェースとして大変優れている。なお、手の検
出部位としては手の平としても良いし、肘の角度や腕そ
のものの角度であっても良い。
て左手の動作を監視し、特定パターンの有無を検出す
る。左手が操作の決定を表す動作を指示場合には、その
ときの右手によって指示された移動量や選択を結果を確
定する。左手の動作が決定を表すまでは右手の位置が示
す指示に基づく移動・選択を継続する。これは人間にと
って極めて指示をし易い手を用いて＋方向と−方向のど
ちらもアナログ的に二次元上で指示できるためヒューマ
ンインタフェースとして大変優れている。なお、手の検
出部位としては手の平としても良いし、肘の角度や腕そ
のものの角度であっても良い。
【００３６】Ｓ―３６はＳ―３５の検出に基づき具体的
な確定処理を行い、表示装置の制御ルーチンにコマンド
を発行する。
な確定処理を行い、表示装置の制御ルーチンにコマンド
を発行する。
【００３７】図４は本発明の実施例における身体の動作
と操作の関係を例示する表示形態図である。図中の４Ａ
は人間の動作を示し、表示装置に向かって左手を略直角
に右手を伸ばした状態を示している。
と操作の関係を例示する表示形態図である。図中の４Ａ
は人間の動作を示し、表示装置に向かって左手を略直角
に右手を伸ばした状態を示している。
【００３８】４Ａは制御の開始を指示する動作を示して
おり、図のように両手がある形を示す状態を開始の指示
としているが、左手の動作のみで表しても良い。制御が
開始された後は具体的な制御操作となって４Ｂ、４Ｃに
表されている動作へと移行する。図４の右側にある４Ｂ
１、４Ｃ１、４Ｃ２は制御操作のモードになった以降の
表示装置の画面状態を表す。
おり、図のように両手がある形を示す状態を開始の指示
としているが、左手の動作のみで表しても良い。制御が
開始された後は具体的な制御操作となって４Ｂ、４Ｃに
表されている動作へと移行する。図４の右側にある４Ｂ
１、４Ｃ１、４Ｃ２は制御操作のモードになった以降の
表示装置の画面状態を表す。
【００３９】４Ｂは右手４１の位置により画面状態４Ｂ
１にカーソル４３が出現し、手の先端である４１に追従
して移動する関係を示している。また、４３はカーソル
でなくても表示画面上の構成部品を対象とすることもで
きる。
１にカーソル４３が出現し、手の先端である４１に追従
して移動する関係を示している。また、４３はカーソル
でなくても表示画面上の構成部品を対象とすることもで
きる。
【００４０】４Ｃは右腕４２の角度を用いて画面状態４
Ｃ１に表示させた選択リスト４４を上下に移動させる関
係を示している。また４Ｃ２は、画面４Ｃ２の表示隅に
表示させたページ表示部４５を、腕角度４２の上下動作
がページ送りとページ戻しを移動指示している関係を示
している。
Ｃ１に表示させた選択リスト４４を上下に移動させる関
係を示している。また４Ｃ２は、画面４Ｃ２の表示隅に
表示させたページ表示部４５を、腕角度４２の上下動作
がページ送りとページ戻しを移動指示している関係を示
している。
【００４１】上記の表示形態図における右手と左手の関
係は限定されるものではなく、逆であっても構わない。
また、手の動作でなく、手と顔の動作としても人間にと
って制御しやすい動作部位である。顔の動作としては上
下方向、左右方向ともに有用である。
係は限定されるものではなく、逆であっても構わない。
また、手の動作でなく、手と顔の動作としても人間にと
って制御しやすい動作部位である。顔の動作としては上
下方向、左右方向ともに有用である。
【００４２】４Ｚは移動や選択を決定した場合にその指
示を行う動作を示している。図の例では左手４６が曲げ
状態から水平状態になったことで制御の内容を決定した
ことの指示を表している。本発明では複雑な移動や選択
と、決定動作を人間の異なる部位の動作をセレクト／セ
ット方法に対応させるようにしたことによって複雑、高
度な制御を人間にとって極めて容易に操作できる動作に
置き換えて実現している。そして、手の握り方や指とい
った細かな動作でなく、腕等による出来るだけ大きな動
作を用いていることにより表示装置が遠くからでも判別
し易く、誤判断を起こさないようにしている。
示を行う動作を示している。図の例では左手４６が曲げ
状態から水平状態になったことで制御の内容を決定した
ことの指示を表している。本発明では複雑な移動や選択
と、決定動作を人間の異なる部位の動作をセレクト／セ
ット方法に対応させるようにしたことによって複雑、高
度な制御を人間にとって極めて容易に操作できる動作に
置き換えて実現している。そして、手の握り方や指とい
った細かな動作でなく、腕等による出来るだけ大きな動
作を用いていることにより表示装置が遠くからでも判別
し易く、誤判断を起こさないようにしている。
【００４３】本発明は利用者が表示装置と距離がある場
合の表示制御が主目的であるが、人間が他の操作のため
にキーボードを操作できない場合の用途にも有効である
ことは言うまでもない。この点に関しては、表示装置と
の距離が近い場合においてもキーボードを付けにくい構
成やキーボートを排してより簡単なヒューマンインタフ
ェースを実現する場合にも適している。
合の表示制御が主目的であるが、人間が他の操作のため
にキーボードを操作できない場合の用途にも有効である
ことは言うまでもない。この点に関しては、表示装置と
の距離が近い場合においてもキーボードを付けにくい構
成やキーボートを排してより簡単なヒューマンインタフ
ェースを実現する場合にも適している。
【００４４】また、本発明の上記の構成は人間の動作を
平面的に検出しているため、画像の入力手段としては一
つのセンサで単純に平面入力するだけで良く、特別な装
置を必要としない。身体動作の入力方法としては手の動
作を平面の動きと前後の動きに分離する方法も考えられ
るが、その場合には二つの画像入力手段が必要になって
装置が複雑になってしまう。また、三次元的要素が入っ
てくると利用者が制御可能な位置や角度も制限され実用
性が低下してしまう。
平面的に検出しているため、画像の入力手段としては一
つのセンサで単純に平面入力するだけで良く、特別な装
置を必要としない。身体動作の入力方法としては手の動
作を平面の動きと前後の動きに分離する方法も考えられ
るが、その場合には二つの画像入力手段が必要になって
装置が複雑になってしまう。また、三次元的要素が入っ
てくると利用者が制御可能な位置や角度も制限され実用
性が低下してしまう。
【００４５】図４に記載している４Ｘは複数の人間が表
示装置の前に立っていたときに、制御しようとした利用
者の特定化とそれを表示装置が識別するための動作パタ
ーンを示している。４Ｘの例では右手と左手を共に略直
角に曲げた状態で特定化パターンを指示している。４Ｘ
に限定されるものではないが、出来るだけ意図的な動作
であって、表示装置にも回りの他の人間にも識別し易い
動作パターンであることが望ましい。
示装置の前に立っていたときに、制御しようとした利用
者の特定化とそれを表示装置が識別するための動作パタ
ーンを示している。４Ｘの例では右手と左手を共に略直
角に曲げた状態で特定化パターンを指示している。４Ｘ
に限定されるものではないが、出来るだけ意図的な動作
であって、表示装置にも回りの他の人間にも識別し易い
動作パターンであることが望ましい。
【００４６】図５は本発明の実施例によるフローチャー
トの一部で、特に身体の部位を識別する部分を示してい
る。
トの一部で、特に身体の部位を識別する部分を示してい
る。
【００４７】まず、Ｓ―５１で目、鼻、口等による人間
の顔の特徴により顔の識別とその位置を抽出する。次に
Ｓ―５２で顔の外形を識別し、Ｓ―５３で顔の向きを判
別する。従って、顔の位置、向き、外形から腕や手の画
像が存在する距離や範囲が推定できるので、それに基づ
いた予想範囲と実画像の輪郭パターンより効率的に目的
とする部位の形や動作を求めることができる。
の顔の特徴により顔の識別とその位置を抽出する。次に
Ｓ―５２で顔の外形を識別し、Ｓ―５３で顔の向きを判
別する。従って、顔の位置、向き、外形から腕や手の画
像が存在する距離や範囲が推定できるので、それに基づ
いた予想範囲と実画像の輪郭パターンより効率的に目的
とする部位の形や動作を求めることができる。
【００４８】
【発明の効果】以上説明したように本発明によれば、情
報を掲示する表示装置において、人間の身体動作のみの
操作で高度な表示の制御が可能にすることができる。ま
た、本発明によれば、複数の利用者に情報を掲示する表
示装置において、利用者を特定化し、その利用者による
身体動作で高度な表示の制御が可能になる。
報を掲示する表示装置において、人間の身体動作のみの
操作で高度な表示の制御が可能にすることができる。ま
た、本発明によれば、複数の利用者に情報を掲示する表
示装置において、利用者を特定化し、その利用者による
身体動作で高度な表示の制御が可能になる。
【００４９】
【図１】 本発明による表示装置の実施例を示す全体図
である。
である。
【図２】 本発明による表示装置の実施例を示す制御回
路のブロック図である。
路のブロック図である。
【図３】 本発明による表示装置の実施例のフローチャ
ートである。
ートである。
【図４】 本発明による表示装置の実施例の表示形態図
である。
である。
【図５】 本発明による表示装置の部分フローチャート
である。
である。
【図６】 従来例のブロック図である。
１・・表示装置本体
２・・制御回路
３、１７・・表示パネル
５・・通信回線
６・・監視カメラ
７、８・・コンテンツサービス情報の送信元
９・・画像入力手段
１６・・表示用コントローラ
１８・・ページメモリ
２１・・通信インタフェース
２２・・通信伝送手段
２３・・特定の情報発生手段
２６・・コマンド発生手段
２７・・動作解析手段
２８・・画像入力手段
２９・・パターンメモリ
─────────────────────────────────────────────────────
フロントページの続き
Ｆターム(参考） 5B087 AA10 AB02 BC06
5C082 AA13 BA41 BB53 CA54 CB05
DA22 DA42 DA73 DA86 MM02
MM05 MM09
5L096 BA02 CA14 DA02 FA06 FA67
FA69 HA01 JA22
Claims (12)
- 【請求項１】 電子情報を表示せしめる表示装置本体
と、人間の身体の動作を検出する画像入力手段と、該画
像入力手段記画像情報から身体動作を解析する動作解析
手段と、表示の制御を行う表示制御手段とを備えた表示
装置において、前記動作解析手段は身体動作を複数の部
位の動作に分離する分離手段と、夫々の動作部位毎の動
作情報を出力する動作情報出力手段とを更に有し、前記
の夫々の動作情報出力組み合わせた結果に基づいて表示
の制御を行うことを特徴とする表示装置。 - 【請求項２】 電子情報を表示せしめる表示装置本体
と、人間の身体の動作を検出する画像入力手段と、該画
像入力手段記画像情報から身体動作を解析する動作解析
手段と、表示の制御を行う表示制御手段とを備えた表示
装置において、前記動作解析手段は身体動作を複数の部
位の動作に分離する分離手段と、夫々の動作部位毎の動
作情報を出力する動作情報出力手段とを更に有し、前記
動作部位毎の動作情報出力を組み合わせた結果が予め設
定した特定のパターンであった場合には、該特定パター
ンを発生させた画像発生者を表示の制御者として決定
し、以後は前記発生者についてのみ動作の検出と解析を
行うことを特徴とする表示装置。 - 【請求項３】 前記分離手段は、人間の右手と左手の動
作とに対して画像情報を分離し、一方の動作情報出力が
選択や移動の操作を行う選択的入力指示であり、他方の
動作情報出力を少なくとも前記選択的入力指示への決定
指示とすることを特徴する請求項１又は２に記載の表示
装置。 - 【請求項４】 前記分離手段は、人間の右手又は左手に
よる手の動作と、顔を動かす動作とに画像情報を分離
し、一方の動作情報出力が選択や移動の操作を行う選択
的入力指示であり、他方の動作情報出力を少なくとも前
記選択的入力指示への決定指示とすることを特徴する請
求項１又は２に記載の表示装置。 - 【請求項５】 前記動作部位分離手段は、先に顔の位置
情報を抽出し、該顔の位置情報を基にして対象とする動
作部位を求めて分離することを特徴する請求項１ないし
４のいずれかに記載の表示装置。 - 【請求項６】 前記特定のパターンは、人間の右手と左
手の動作とを組み合わせたパターンであることを特徴す
る請求項２記載の表示装置。 - 【請求項７】 画像入力手段により人間の身体の画像を
検出する第１のステップと、 該画像情報を身体の部位に分離し、各部位ごとの動作と
して動作情報を出力する第２のステップと、 前記の夫々の動作情報出力を組み合わせて制御指令を形
成し、表示制御手段へ出力する第３のステップと、 前記制御指令に基づいて表示装置の表示制御を行う第４
のステップとを有することを特徴とする表示装置の入力
方法。 - 【請求項８】 画像入力手段により人間の身体の画像を
検出する第１のステップと、 該画像情報を身体の部位に分離し、各部位ごとの動作と
して動作情報を出力する第２のステップと、 前記動作情報出力を組み合わせた結果が予め設定した特
定のパターンであることを検出した場合に、該特定パタ
ーンを発生させた画像発生者を表示の制御者として決定
し、以後は前記発生者についてのみ制御指令を形成し、
表示制御手段へ出力する第３のステップと、 前記制御指令に基づいて表示装置の表示制御を行う第４
のステップとを有することを特徴とする表示装置の入力
方法。 - 【請求項９】 前記第２のステップにおいて、人間の右
手と左手の動作とに対して画像情報を分離して夫々の動
作情報を出力し、 前記第３のステップにおいて、一方の動作情報出力が選
択や移動の操作を行う選択的入力指示であり、他方の動
作情報出力を少なくとも前記選択的入力指示への決定指
示とすることを特徴する請求項７又は８に記載の表示装
置の入力方法。 - 【請求項１０】 前記第２のステップにおいて、人間の
右手又は左手による手の動作と顔を動かす動作とに対し
て画像情報を分離して夫々の動作情報を出力し、 前記第３のステップにおいて、一方の動作情報出力が選
択や移動の操作を行う選択的入力指示であり、他方の動
作情報出力を少なくとも前記選択的入力指示への決定指
示とすることを特徴する請求項７又は８に記載の表示装
置の入力方法。 - 【請求項１１】 前記第２のステップにおいて、先に顔
の位置情報を抽出し、該顔の位置情報を基にして対象と
する動作部位を求めて分離することを特徴する請求項７
ないし１０のいずれかに記載の表示装置の入力方法。 - 【請求項１２】 前記第３のステップにおいて、前記特
定のパターンは、人間の右手と左手の動作とを組み合わ
せたパターンであることを特徴する請求項８記載の表示
装置の入力方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001380236A JP3997392B2 (ja) | 2001-12-13 | 2001-12-13 | 表示装置及び表示装置の入力方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001380236A JP3997392B2 (ja) | 2001-12-13 | 2001-12-13 | 表示装置及び表示装置の入力方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2003186596A true JP2003186596A (ja) | 2003-07-04 |
| JP3997392B2 JP3997392B2 (ja) | 2007-10-24 |
Family
ID=27591368
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2001380236A Expired - Fee Related JP3997392B2 (ja) | 2001-12-13 | 2001-12-13 | 表示装置及び表示装置の入力方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3997392B2 (ja) |
Cited By (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006209563A (ja) * | 2005-01-31 | 2006-08-10 | Victor Co Of Japan Ltd | インターフェース装置 |
| JP2010017571A (ja) * | 2009-09-24 | 2010-01-28 | Daiichi Shokai Co Ltd | 遊技機 |
| JP2010176510A (ja) * | 2009-01-30 | 2010-08-12 | Sanyo Electric Co Ltd | 情報表示装置 |
| JP2010238145A (ja) * | 2009-03-31 | 2010-10-21 | Casio Computer Co Ltd | 情報出力装置、遠隔制御方法、及びプログラム |
| US7849421B2 (en) | 2005-03-19 | 2010-12-07 | Electronics And Telecommunications Research Institute | Virtual mouse driving apparatus and method using two-handed gestures |
| JP2010283691A (ja) * | 2009-06-05 | 2010-12-16 | Casio Computer Co Ltd | 画像特定装置、表示制御装置、画像特定プログラム、及び、表示制御プログラム |
| JP2011095984A (ja) * | 2009-10-29 | 2011-05-12 | Nikon Corp | 画像表示装置 |
| WO2012039140A1 (ja) * | 2010-09-22 | 2012-03-29 | 島根県 | 操作入力装置および方法ならびにプログラム |
| JP2012516497A (ja) * | 2009-01-30 | 2012-07-19 | トムソン ライセンシング | マルチメディアの表示から情報を制御及び要求する方法 |
| JP2012222784A (ja) * | 2011-04-14 | 2012-11-12 | Casio Comput Co Ltd | 遠隔操作装置、遠隔操作方法及びプログラム |
| WO2012161279A1 (ja) * | 2011-05-25 | 2012-11-29 | 株式会社コナミデジタルエンタテインメント | 指示受付装置、指示受付方法、非一時的な記録媒体、ならびに、プログラム |
| JP2013016060A (ja) * | 2011-07-05 | 2013-01-24 | Shimane Prefecture | 操作入力装置および操作判定方法並びにプログラム |
| JP2013161406A (ja) * | 2012-02-08 | 2013-08-19 | Sharp Corp | データ入力装置、表示装置、データ入力方法、及びデータ入力プログラム |
| WO2013137412A1 (ja) * | 2012-03-15 | 2013-09-19 | オムロン株式会社 | 制御装置、電子機器、制御方法、制御プログラム、および、制御プログラムを格納したコンピュータ読取可能な記録媒体 |
| KR20140014129A (ko) * | 2011-01-19 | 2014-02-05 | 휴렛-팩커드 디벨롭먼트 컴퍼니, 엘.피. | 멀티모달 및 제스처 제어를 위한 방법 및 시스템 |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5658500B2 (ja) | 2010-07-26 | 2015-01-28 | キヤノン株式会社 | 情報処理装置及びその制御方法 |
| CN110164440B (zh) * | 2019-06-03 | 2022-08-09 | 交互未来(北京)科技有限公司 | 基于捂嘴动作识别的语音交互唤醒电子设备、方法和介质 |
-
2001
- 2001-12-13 JP JP2001380236A patent/JP3997392B2/ja not_active Expired - Fee Related
Cited By (25)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006209563A (ja) * | 2005-01-31 | 2006-08-10 | Victor Co Of Japan Ltd | インターフェース装置 |
| US7849421B2 (en) | 2005-03-19 | 2010-12-07 | Electronics And Telecommunications Research Institute | Virtual mouse driving apparatus and method using two-handed gestures |
| JP2012516497A (ja) * | 2009-01-30 | 2012-07-19 | トムソン ライセンシング | マルチメディアの表示から情報を制御及び要求する方法 |
| JP2010176510A (ja) * | 2009-01-30 | 2010-08-12 | Sanyo Electric Co Ltd | 情報表示装置 |
| US9639744B2 (en) | 2009-01-30 | 2017-05-02 | Thomson Licensing | Method for controlling and requesting information from displaying multimedia |
| JP2010238145A (ja) * | 2009-03-31 | 2010-10-21 | Casio Computer Co Ltd | 情報出力装置、遠隔制御方法、及びプログラム |
| JP2010283691A (ja) * | 2009-06-05 | 2010-12-16 | Casio Computer Co Ltd | 画像特定装置、表示制御装置、画像特定プログラム、及び、表示制御プログラム |
| JP2010017571A (ja) * | 2009-09-24 | 2010-01-28 | Daiichi Shokai Co Ltd | 遊技機 |
| JP2011095984A (ja) * | 2009-10-29 | 2011-05-12 | Nikon Corp | 画像表示装置 |
| WO2012039140A1 (ja) * | 2010-09-22 | 2012-03-29 | 島根県 | 操作入力装置および方法ならびにプログラム |
| CN103154858A (zh) * | 2010-09-22 | 2013-06-12 | 岛根县 | 操作输入装置与方法及程序 |
| EP2620849A4 (en) * | 2010-09-22 | 2017-02-22 | Shimane Prefectural Government | Operation input apparatus, operation input method, and program |
| US9329691B2 (en) | 2010-09-22 | 2016-05-03 | Shimane Prefectural Government | Operation input apparatus and method using distinct determination and control areas |
| JP2014507714A (ja) * | 2011-01-19 | 2014-03-27 | ヒューレット−パッカード デベロップメント カンパニー エル．ピー． | マルチモーダル及びジェスチャー制御のための方法及びシステム |
| KR20140014129A (ko) * | 2011-01-19 | 2014-02-05 | 휴렛-팩커드 디벨롭먼트 컴퍼니, 엘.피. | 멀티모달 및 제스처 제어를 위한 방법 및 시스템 |
| KR101690117B1 (ko) | 2011-01-19 | 2016-12-27 | 휴렛-팩커드 디벨롭먼트 컴퍼니, 엘.피. | 멀티모달 및 제스처 제어를 위한 방법 및 시스템 |
| US9778747B2 (en) | 2011-01-19 | 2017-10-03 | Hewlett-Packard Development Company, L.P. | Method and system for multimodal and gestural control |
| JP2012222784A (ja) * | 2011-04-14 | 2012-11-12 | Casio Comput Co Ltd | 遠隔操作装置、遠隔操作方法及びプログラム |
| CN103562823A (zh) * | 2011-05-25 | 2014-02-05 | 科乐美数码娱乐株式会社 | 指示受理装置、指示受理方法、非暂时性记录介质以及程序 |
| JP2012247823A (ja) * | 2011-05-25 | 2012-12-13 | Konami Digital Entertainment Co Ltd | 指示受付装置、指示受付方法、ならびに、プログラム |
| WO2012161279A1 (ja) * | 2011-05-25 | 2012-11-29 | 株式会社コナミデジタルエンタテインメント | 指示受付装置、指示受付方法、非一時的な記録媒体、ならびに、プログラム |
| JP2013016060A (ja) * | 2011-07-05 | 2013-01-24 | Shimane Prefecture | 操作入力装置および操作判定方法並びにプログラム |
| JP2013161406A (ja) * | 2012-02-08 | 2013-08-19 | Sharp Corp | データ入力装置、表示装置、データ入力方法、及びデータ入力プログラム |
| WO2013137412A1 (ja) * | 2012-03-15 | 2013-09-19 | オムロン株式会社 | 制御装置、電子機器、制御方法、制御プログラム、および、制御プログラムを格納したコンピュータ読取可能な記録媒体 |
| JPWO2013137412A1 (ja) * | 2012-03-15 | 2015-08-03 | オムロン株式会社 | 制御装置、電子機器、制御方法、制御プログラム、および、制御プログラムを格納したコンピュータ読取可能な記録媒体 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3997392B2 (ja) | 2007-10-24 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2003186596A (ja) | 表示装置及び表示装置の入力方法 | |
| JP7127645B2 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
| EP2877909B1 (en) | Multimodal interaction with near-to-eye display | |
| US11170580B2 (en) | Information processing device, information processing method, and recording medium | |
| US9218781B2 (en) | Information processing apparatus, display control method, and program | |
| CN103442201B (zh) | 用于语音和视频通信的增强接口 | |
| US20210217248A1 (en) | Information processing device, information processing method, and program | |
| WO2016157330A1 (ja) | モバイル監視装置、プログラム、及び制御方法 | |
| WO2020078319A1 (zh) | 基于手势的操控方法及终端设备 | |
| JP2007213190A (ja) | コミュニケーションロボット改良システム | |
| EP3276618A1 (en) | Information processing system and information processing method | |
| JPWO2018216355A1 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
| EP3528024A1 (en) | Information processing device, information processing method, and program | |
| CN113138669A (zh) | 电子设备的图像获取方法、装置、***及电子设备 | |
| US20200125398A1 (en) | Information processing apparatus, method for processing information, and program | |
| EP3621299A1 (en) | Information processing device, information processing method, and program | |
| JP2017035215A (ja) | 情報処理装置、情報処理システム、及びキャラクタ移動制御プログラム | |
| JPWO2016088410A1 (ja) | 情報処理装置、情報処理方法およびプログラム | |
| Yamato et al. | Hand gesture interaction with a low-resolution infrared image sensor on an inner wrist | |
| CN114945949A (zh) | 化身显示装置、化身显示***、化身显示方法以及化身显示程序 | |
| WO2019054037A1 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
| EP3396509A1 (en) | Information processing device, information processing method, and program | |
| WO2019138682A1 (ja) | 情報処理装置、情報処理方法及びプログラム | |
| JP2017035214A (ja) | 情報処理装置、情報処理システム、及びキャラクタ移動制御プログラム | |
| JP3625549B2 (ja) | 多地点ビデオ会議システム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20041001 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20061026 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20061031 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20061228 |
|
| RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20061228 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20070711 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20070724 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100817 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110817 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120817 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130817 Year of fee payment: 6 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| LAPS | Cancellation because of no payment of annual fees |