JP5829390B2 - 情報処理装置、および情報処理方法 - Google Patents
情報処理装置、および情報処理方法 Download PDFInfo
- Publication number
- JP5829390B2 JP5829390B2 JP2010200264A JP2010200264A JP5829390B2 JP 5829390 B2 JP5829390 B2 JP 5829390B2 JP 2010200264 A JP2010200264 A JP 2010200264A JP 2010200264 A JP2010200264 A JP 2010200264A JP 5829390 B2 JP5829390 B2 JP 5829390B2
- Authority
- JP
- Japan
- Prior art keywords
- processing apparatus
- information processing
- information
- user
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 476
- 238000003672 processing method Methods 0.000 title claims description 7
- 238000000034 method Methods 0.000 claims description 277
- 230000008569 process Effects 0.000 claims description 265
- 238000012545 processing Methods 0.000 claims description 256
- 238000001514 detection method Methods 0.000 claims description 229
- 230000033001 locomotion Effects 0.000 claims description 200
- 230000000737 periodic effect Effects 0.000 claims description 80
- 230000009471 action Effects 0.000 claims description 44
- 238000003384 imaging method Methods 0.000 claims description 44
- 238000004891 communication Methods 0.000 claims description 40
- 239000000284 extract Substances 0.000 claims description 8
- 238000013459 approach Methods 0.000 description 50
- 230000006872 improvement Effects 0.000 description 48
- 230000006870 function Effects 0.000 description 25
- 238000003860 storage Methods 0.000 description 18
- 238000004364 calculation method Methods 0.000 description 14
- 238000010586 diagram Methods 0.000 description 14
- 230000008859 change Effects 0.000 description 12
- 230000004048 modification Effects 0.000 description 8
- 238000012986 modification Methods 0.000 description 8
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 6
- 230000005540 biological transmission Effects 0.000 description 6
- 230000000007 visual effect Effects 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 238000007796 conventional method Methods 0.000 description 3
- 238000012937 correction Methods 0.000 description 3
- 238000009826 distribution Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000001815 facial effect Effects 0.000 description 2
- 238000001159 Fisher's combined probability test Methods 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000008451 emotion Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000007665 sagging Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000011895 specific detection Methods 0.000 description 1
- 230000037303 wrinkles Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
- Position Input By Displaying (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Description
1.本発明の実施形態に係るアプローチ
2.本発明の実施形態に係る情報処理装置
3.本発明の実施形態に係るプログラム
本発明の実施形態に係る情報処理装置(以下、「情報処理装置100」と示す場合がある。)の構成について説明する前に、本発明の実施形態に係る操作性向上アプローチについて説明する。以下では、情報処理装置100の外部装置において撮像された撮像画像が情報処理装置100に入力され、情報処理装置100が当該撮像画像を処理する構成を主に例に挙げて説明する。なお、本発明の実施形態に係る情報処理装置100の構成は、上記に限られず、例えば、情報処理装置100が撮像機能を有し、当該撮像機能を用いて撮像された撮像画像を処理することもできる。また、本発明の実施形態に係る撮像画像とは、撮像により得られた動画像(または、時間軸方向に連続して撮像された静止画像の集合体)である。また、以下に示す本発明の実施形態に係る操作性向上アプローチに係る処理は、本発明の実施形態に係る情報処理方法に係る処理と捉えることができる。
上述したように、ユーザのジェスチャ動作(以下、単に「動作」と示す場合がある。)を検出して検出された動作に対応する処理を行う場合には、ユーザは、GUIを用いる場合よりもより直感的に情報処理装置に指示を与えることが可能となる。よって、情報処理装置100は、撮像画像を画像処理してユーザの動作を検出し、検出された動作に対応する処理を行うことによって、ユーザの操作性の向上を図る。
まず、本発明の実施形態に係る操作性向上アプローチに係る第1の処理について説明する。情報処理装置100は、例えば下記の(1)の処理〜(4)の処理を行うことによって、ユーザの操作性の向上を図る。
情報処理装置100は、撮像画像の中からユーザ(被写体)の顔を検出し、顔領域を特定する。ここで、顔領域を特定は、例えば、ユーザの目、鼻、口、骨格などの特徴点の検出や、顔の輝度分布および構造パターンと類似した領域を検出することで行うことができる。なお、本発明の実施形態に係る情報処理装置100における顔領域検出処理は、上記に限られない。例えば、情報処理装置100は、処理対象の現フレームと一つ前のフレーム(frame)との差分をとって動体を検出し、当該動体から頭部を特定することにより顔領域を検出することもできる。
上記(1)の処理(顔領域検出処理)において顔領域が検出されると、情報処理装置100は、顔領域に基づいて、顔領域の近傍に動作領域を設定する。
ここで、情報処理装置100において動作領域設定処理の一例について、より具体的に説明する。図3は、本発明の実施形態に係る情報処理装置100における動作領域設定処理の一例を説明するための説明図である。ここで、図3は、図1に示すように顔領域FAの左近傍および右近傍に動作領域MAを設定する場合の処理の一例を示している。
上記(2)の処理(動作領域設定処理)において動作領域MAが設定されると、情報処理装置100は、撮像画像と、基準検出情報または個別検出情報とに基づいて、動作領域MAにおいてユーザによる所定の動作が行われたことを判定する。
本発明の実施形態に係る動作判定処理の第1の例として、基準検出情報に基づく処理について説明する。情報処理装置100は、撮像画像に基づいて設定された動作領域MAにおける周期成分を検出する。そして、情報処理装置100は、動作領域MAにおける検出結果と、基準検出情報の周期成分の情報とに基づいて、所定の動作が行われたか否かを判定する。ここで、情報処理装置100は、例えばフィッシャー法などを用いて動作領域MA内の特定点(特定の画素)における特性を解析することによって、所定の動作が行われたか否かを判定するが、本発明の実施形態に係る判定方法は、上記に限られない。また、情報処理装置100は、例えば、所定の時間ごとの撮像画像や所定のフレーム数ごとの撮像画像を用いて、動作領域MAにおける周期成分を検出するが、本発明の実施形態に係る動作領域MAにおける周期成分の検出方法は、上記に限られない。
次に、本発明の実施形態に係る動作判定処理の第2の例として、基準検出情報または個別検出情報を選択的に用いる処理について説明する。情報処理装置100は、上記(1)の処理により特定された顔領域FAから顔情報を抽出する。また、情報処理装置100は、抽出された顔情報と個別検出情報とに基づいて、個別検出情報の中に抽出された顔情報と対応する顔情報があるか否かを判定する。ここで、本発明の実施形態に係る顔情報が、例えば骨格の情報、および目・鼻・口の位置関係を示す情報など複数の情報群である場合、情報処理装置100は、例えば、個別検出情報の中に抽出された顔情報と一致する顔情報があるときに、抽出された顔情報と対応する顔情報があると判定する。なお、本発明の実施形態に係る情報処理装置100における個別検出情報の中に抽出された顔情報と対応する顔情報があるか否かの判定方法は、上記に限られない。例えば、情報処理装置100は、個別検出情報の中に、上記複数の情報群のうちの一定数以上の情報が抽出された顔情報と一致する顔情報があるときに、抽出された顔情報と対応する顔情報があると判定してもよい。
上記(3)の処理(動作判定処理)において所定の動作が行われたことが判定されると、情報処理装置100は、判定された所定の動作に対応する処理を行う。
上記操作性向上アプローチに係る第1の処理を行うことによって、情報処理装置100は、ユーザの操作性の向上を図ることができる。しかしながら、本発明の実施形態に係る情報処理装置100における操作性向上アプローチに係る処理は、上記に限られない。例えば、情報処理装置100は、上述したように、通知処理を行った上で所定の期間継続的に所定の動作が行われたと判定された場合に判定された所定の動作に対応する処理を行うこともできる。そこで次に、本発明の実施形態に係る操作性向上アプローチに係る第2の処理として、通知処理を行う場合における処理について説明する。情報処理装置100は、例えば下記の(I)の処理〜(V)の処理を行うことによって、誤検出によるユーザの意図しない処理が実行されることを防止し、ユーザの利便性や操作性をさらなる向上を図る。
情報処理装置100は、上記(1)の処理(顔領域検出処理)と同様に、撮像画像の中からユーザの顔を検出し、顔領域FAを特定する。
上記(I)の処理(顔領域検出処理)において顔領域が検出されると、情報処理装置100は、上記(2)の処理(動作領域設定処理)と同様に、顔領域FAに基づいて、顔領域FAの近傍に動作領域MAを設定する。
上記(II)の処理(動作領域設定処理)において動作領域MAが設定されると、情報処理装置100は、上記(3)の処理(動作判定処理)と同様に、撮像画像と、基準検出情報または個別検出情報とに基づいて、動作領域MAにおいてユーザによる所定の動作が行われたことを判定する。
上記(III)の処理(動作判定処理)において動作領域MAにおいてユーザによる所定の動作が行われたと判定されると、情報処理装置100は、通知処理を行う。
ここで、本発明の実施形態に係る通知処理が行われることによるユーザへの通知の具体例について説明する。以下では、情報処理装置100が、視覚的にユーザに通知を行うための通知処理を行う場合を例に挙げて説明する。
上記(III)の処理(動作判定処理)において、所定の動作が行われたと判定されてから所定の期間、継続的に所定の動作が行われたことが判定されると、情報処理装置100は、判定された所定の動作に対応する処理を行う。ここで、情報処理装置100は、上記(4)の処理(実行処理)と同様に、判定された所定の動作に対応する処理を行う。
次に、上述した本発明の実施形態に係る操作性向上アプローチを実現するための処理の一例について説明する。
図9は、本発明の実施形態に係る情報処理装置100における操作性向上アプローチに係る処理の一例を示す流れ図であり、上記操作性向上アプローチに係る第1の処理に対応する処理の一例を示している。以下では、情報処理装置100が、撮像画像に対して設定された動作領域MAにおける周期成分に基づいて、ユーザの所定の動作を判定する場合の処理を例に挙げて説明する。
図13は、本発明の実施形態に係る情報処理装置100における操作性向上アプローチに係る処理の他の例を示す流れ図であり、上記操作性向上アプローチに係る第2の処理に対応する処理の一例を示している。以下では、情報処理装置100が、撮像画像に対して設定された動作領域MAにおける周期成分に基づいて、ユーザの所定の動作を判定する場合における処理を例に挙げて説明する。
次に、上述した本発明の実施形態に係る操作性向上アプローチに係る処理を行うことが可能な、本発明の実施形態に係る情報処理装置100の構成の一例について説明する。
図14は、本発明の第1の実施形態に係る情報処理装置100の構成の一例を示すブロック図である。ここで、図14では、表示画面への画像(静止画像または動画像)の表示と、表示画面の表示方向を撮像することによる撮像画像の生成とを行う表示システム200を併せて示している。また、図14では、表示システム200が、表示を行う表示装置300と、撮像を行う撮像装置400とからなる例を示しているが、本発明の実施形態に係る表示システム200の構成は、上記に限られない。例えば、表示システム200は、表示装置300と撮像装置400とが一体となった装置(例えば撮像機能を有する表示装置)であってもよい。
図15は、本発明の実施形態に係る情報処理装置100のハードウェア構成の一例を示す説明図である。図15を参照すると、情報処理装置100は、例えば、MPU150と、ROM152と、RAM154と、記録媒体156と、入出力インタフェース158と、操作入力デバイス160と、表示デバイス162と、通信インタフェース164とを備える。また、情報処理装置100は、例えば、データの伝送路としてのバス166で各構成要素間を接続する。
なお、本発明の第1の実施形態に係る情報処理装置100の構成は、図14に示す構成に限られない。例えば、第1の実施形態に係る情報処理装置100は、音声出力デバイスなど、ユーザの所定の動作の意味に関連付けられる処理を実現するためのデバイスなどをさらに備えていてもよい。また、第1の実施形態に係る情報処理装置100は、記憶部102を備えず、基準検出情報170や処理情報172などの処理に用いる情報を、サーバなどの外部装置から適宜取得して処理を行うこともできる。
図16は、本発明の第2の実施形態に係る情報処理装置の構成の一例を示すブロック図である。ここで、図16では、図14と同様に、表示システム200を併せて示している。
なお、本発明の第2の実施形態に係る情報処理装置100の構成は、図16に示す構成に限られない。例えば、第2の実施形態に係る情報処理装置100は、第1の実施形態に係る情報処理装置100の変形例と同様に、ユーザの所定の動作の意味に関連付けられる処理を実現するためのデバイスなどをさらに備えていてもよい。また、第2の実施形態に係る情報処理装置100は、第1の実施形態に係る情報処理装置100の変形例と同様に、基準検出情報170や処理情報172などの処理に用いる情報をサーバなどの外部装置から適宜取得して処理を行う構成であってもよい。
上記では、第1の実施形態に係る情報処理装置100および第2の実施形態に係る情報処理装置100として、表示システム200の撮像装置400(すなわち、外部装置)が生成した撮像画像を処理する構成を示した。しかしながら、本発明の実施形態に係る情報処理装置100の構成は、外部装置が生成した撮像画像を処理する構成に限られない。
なお、本発明の第3の実施形態に係る情報処理装置100の構成は、図17に示す構成に限られない。例えば、第3の実施形態に係る情報処理装置100は、第2の実施形態に係る情報処理装置100と同様に、学習部118をさらに備えていてもよい。また、第3の実施形態に係る情報処理装置100は、例えば音声出力部124を備えない構成であってもよく、また、ユーザの所定の動作の意味に関連付けられる処理を実現するためのデバイスなどをさらに備えていてもよい。さらに、第3の実施形態に係る情報処理装置100は、第1の実施形態に係る情報処理装置100の変形例と同様に、基準検出情報170や処理情報172などの処理に用いる情報をサーバなどの外部装置から適宜取得して処理を行う構成であってもよい。
コンピュータを、本発明の実施形態に係る情報処理装置として機能させるためのプログラム(例えば、上記(1)の処理(顔領域検出処理)〜(4)の処理(実行処理)を実現するプログラムや、上記(I)の処理(顔領域検出処理)〜(V)の処理(実行処理)を実現するプログラム)によって、ユーザの操作性の向上を図ることができる。
102 記憶部
104 通信部
106 入力部
108 検出部
110 動作領域設定部
112 動作判定部
114 通知処理部
116 処理部
118 学習部
120 撮像部
122 表示部
124 音声出力部
200 表示システム
300 表示装置
400 撮像装置
Claims (18)
- 撮像により得られた動画像である撮像画像からユーザの顔を含む顔領域を検出する検出部と、
前記検出部において前記顔領域が検出された場合に、前記顔領域に基づいて、前記ユーザの動作を検出するための前記撮像画像における動作領域を、前記顔領域の近傍に設定する動作領域設定部と、
前記撮像画像と、ユーザの所定の動作の検出の基準となる基準検出情報とに基づいて、前記動作領域設定部が設定した前記動作領域においてユーザによる前記所定の動作が行われたことを判定する動作判定部と、
前記動作判定部において前記所定の動作が行われたと判定された場合に、前記所定の動作が行われたと判定したことをユーザに通知する通知処理を行う通知処理部と、
前記動作判定部において、前記通知処理が行われた後所定の期間継続的に前記所定の動作が行われたと判定された場合に、前記動作判定部において判定された前記所定の動作に対応する処理を行う処理部と、
を備える、情報処理装置。 - 前記基準検出情報には、前記所定の動作とユーザの周期動作を検出するための周期成分の情報とが対応付けられており、
前記動作判定部は、
前記撮像画像に対して設定された前記動作領域における周期成分を検出し、
前記動作領域における周期成分の検出結果と前記周期成分の情報とに基づいて、前記所定の動作が行われたことを判定する、請求項1に記載の情報処理装置。 - 前記動作判定部は、前記基準検出情報、または、特定のユーザが行う所定の動作の検出の基準となる個別検出情報を選択的に用いて、前記動作領域においてユーザによる前記所定の動作が行われたことを判定する、請求項1、または2に記載の情報処理装置。
- 前記個別検出情報には、前記所定の動作、ユーザの周期動作を検出するための周期成分の情報、およびユーザの顔の特徴を示す顔情報が対応付けられており、
前記動作判定部は、
前記撮像画像に対して設定された前記動作領域における周期成分を検出し、
前記撮像画像の前記顔領域から前記顔情報を抽出し、
抽出した前記顔情報に対応する前記個別検出情報がある場合には、前記動作領域における周期成分の検出結果と、前記個別検出情報の前記周期成分の情報とに基づいて、前記所定の動作が行われたことを判定する、請求項3に記載の情報処理装置。 - 前記個別検出情報を管理する学習部をさらに備え、
前記学習部は、前記動作判定部において前記所定の動作が行われたと判定された場合には、前記動作判定部において検出された周期成分の情報を、判定された前記所定の動作および抽出した前記顔情報に対応する個別検出情報における前記周期成分の情報とする、請求項4に記載の情報処理装置。 - 前記検出部は、前記撮像画像に対して設定された前記動作領域において動体をさらに検出し、
前記動作判定部は、前記検出部において動体が検出された場合に、前記所定の動作が行われたことを選択的に判定する、請求項2に記載の情報処理装置。 - 検出部は、矩形の前記顔領域を検出し、
前記動作領域設定部は、前記顔領域の水平方向の長さと前記顔領域の垂直方向の長さとに基づく前記動作領域を設定する、請求項1、または2に記載の情報処理装置。 - 前記動作領域設定部は、前記顔領域から前記ユーザの顔の特徴を示す顔情報を抽出し、
設定した前記動作領域を、前記顔情報に基づいて再設定する、請求項7に記載の情報処理装置。 - 前記動作領域設定部は、前記顔領域の左近傍または前記顔領域の右近傍のいずれか一方、または、前記顔領域の左近傍および前記顔領域の右近傍の双方に、前記動作領域を設定する、請求項1、または2に記載の情報処理装置。
- 前記動作領域設定部は、前記顔領域の下近傍または上近傍のいずれか一方、または、前記顔領域の下近傍および前記顔領域の上近傍の双方に、1または2以上の前記動作領域をさらに設定し、
前記動作判定部は、複数の前記動作領域ごとに前記所定の動作が行われたことを判定し、
前記処理部は、前記所定の動作が行われたと判定された動作領域、および判定された前記所定の動作に対応する処理を行う、請求項9に記載の情報処理装置。 - 前記動作判定部は、前記動作領域外における周期成分は検出しない、請求項2または4に記載の情報処理装置。
- 外部装置と通信を行う通信部をさらに備え、
前記処理部は、前記動作判定部において判定された前記所定の動作に対応する処理を前記外部装置に行わせるための処理実行命令を、前記通信部を介して前記外部装置へ送信する、請求項1、または2に記載の情報処理装置。 - 画像を表示画面に表示する表示部と、
前記表示画面の表示方向を撮像し、前記撮像画像を生成する撮像部と、
をさらに備え、
前記検出部は、前記撮像部が生成した前記撮像画像から前記顔領域を検出する、請求項1、または2に記載の情報処理装置。 - 前記通知処理部は、
前記表示画面に表示される画像を変化させることにより、前記所定の動作が行われたと判定したことを視覚的に通知する、請求項13に記載の情報処理装置。 - 前記表示部は、点灯デバイスを備え、
前記通知処理部は、前記点灯デバイスの点灯状態を変化させることにより、前記所定の動作が行われたと判定したことを視覚的に通知する、請求項13に記載の情報処理装置。 - 外部装置と通信を行う通信部をさらに備え、
前記通知処理部は、前記所定の動作が行われたと判定したことを前記外部装置に通知させるための処理実行命令を、前記通信部を介して前記外部装置へ送信する、請求項1、または2に記載の情報処理装置。 - 撮像により得られた動画像である撮像画像からユーザの顔を含む顔領域を検出するステップと、
前記検出するステップにおいて前記顔領域が検出された場合に、前記顔領域に基づいて、前記ユーザの動作を検出するための前記撮像画像における動作領域を、前記顔領域の近傍に設定するステップと、
前記撮像画像と、ユーザの所定の動作の検出の基準となる基準検出情報とに基づいて、前記設定するステップにおいて設定された前記動作領域においてユーザによる前記所定の動作が行われたことを判定するステップと、
前記判定するステップにおいて前記所定の動作が行われたと判定された場合に、前記所定の動作が行われたと判定したことをユーザに通知する通知処理を行うステップと、
前記判定するステップにおいて、前記通知処理が行われた後所定の期間継続的に前記所定の動作が行われたと判定された場合に、前記判定するステップにおいて判定された前記所定の動作に対応する処理を行うステップと、
を有する、情報処理方法。 - 前記基準検出情報には、前記所定の動作とユーザの周期動作を検出するための周期成分の情報とが対応付けられており、
前記判定するステップでは、
前記撮像画像に対して設定された前記動作領域における周期成分が検出され、
前記動作領域における周期成分の検出結果と前記周期成分の情報とに基づいて、前記所定の動作が行われたことが判定される、請求項17に記載の情報処理方法。
Priority Applications (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010200264A JP5829390B2 (ja) | 2010-09-07 | 2010-09-07 | 情報処理装置、および情報処理方法 |
CN2011102544143A CN102402383A (zh) | 2010-09-07 | 2011-08-31 | 信息处理设备和信息处理方法 |
CN201811283978.8A CN109634403A (zh) | 2010-09-07 | 2011-08-31 | 信息处理设备和信息处理方法 |
EP11179707.2A EP2426576A3 (en) | 2010-09-07 | 2011-09-01 | Information processing device and information processing method |
US13/223,417 US8744137B2 (en) | 2010-09-07 | 2011-09-01 | Information processing device and information processing method |
US14/260,893 US9513712B2 (en) | 2010-09-07 | 2014-04-24 | Information processing device and information processing method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010200264A JP5829390B2 (ja) | 2010-09-07 | 2010-09-07 | 情報処理装置、および情報処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012058928A JP2012058928A (ja) | 2012-03-22 |
JP5829390B2 true JP5829390B2 (ja) | 2015-12-09 |
Family
ID=44763861
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010200264A Active JP5829390B2 (ja) | 2010-09-07 | 2010-09-07 | 情報処理装置、および情報処理方法 |
Country Status (4)
Country | Link |
---|---|
US (2) | US8744137B2 (ja) |
EP (1) | EP2426576A3 (ja) |
JP (1) | JP5829390B2 (ja) |
CN (2) | CN109634403A (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104427170A (zh) * | 2013-08-29 | 2015-03-18 | 京瓷办公信息***株式会社 | 电子设备 |
Families Citing this family (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5598232B2 (ja) * | 2010-10-04 | 2014-10-01 | ソニー株式会社 | 情報処理装置、情報処理システムおよび情報処理方法 |
US20130057553A1 (en) * | 2011-09-02 | 2013-03-07 | DigitalOptics Corporation Europe Limited | Smart Display with Dynamic Font Management |
WO2013018861A1 (ja) | 2011-08-04 | 2013-02-07 | オリンパス株式会社 | 医療用マニピュレータおよびその制御方法 |
JP5953058B2 (ja) | 2011-08-04 | 2016-07-13 | オリンパス株式会社 | 手術支援装置およびその着脱方法 |
JP6021484B2 (ja) | 2011-08-04 | 2016-11-09 | オリンパス株式会社 | 医療用マニピュレータ |
JP6005950B2 (ja) * | 2011-08-04 | 2016-10-12 | オリンパス株式会社 | 手術支援装置及びその制御方法 |
JP5936914B2 (ja) | 2011-08-04 | 2016-06-22 | オリンパス株式会社 | 操作入力装置およびこれを備えるマニピュレータシステム |
JP5931497B2 (ja) | 2011-08-04 | 2016-06-08 | オリンパス株式会社 | 手術支援装置およびその組立方法 |
JP6081061B2 (ja) | 2011-08-04 | 2017-02-15 | オリンパス株式会社 | 手術支援装置 |
US9519341B2 (en) | 2011-08-04 | 2016-12-13 | Olympus Corporation | Medical manipulator and surgical support apparatus |
JP6009840B2 (ja) | 2011-08-04 | 2016-10-19 | オリンパス株式会社 | 医療機器 |
JP5456817B2 (ja) * | 2012-03-23 | 2014-04-02 | ヤフー株式会社 | 表示制御装置、表示制御方法、情報表示システム及びプログラム |
JP6011165B2 (ja) * | 2012-08-31 | 2016-10-19 | オムロン株式会社 | ジェスチャ認識装置、その制御方法、表示機器、および制御プログラム |
US9575960B1 (en) * | 2012-09-17 | 2017-02-21 | Amazon Technologies, Inc. | Auditory enhancement using word analysis |
US9672413B2 (en) * | 2012-11-06 | 2017-06-06 | Sony Corporation | Setting operation area for input according to face position |
JP6058978B2 (ja) * | 2012-11-19 | 2017-01-11 | サターン ライセンシング エルエルシーSaturn Licensing LLC | 画像処理装置及び画像処理方法、撮影装置、並びにコンピューター・プログラム |
JP6018996B2 (ja) * | 2013-09-04 | 2016-11-02 | シャープ株式会社 | 情報処理装置 |
KR20150043149A (ko) * | 2013-10-14 | 2015-04-22 | 삼성전자주식회사 | 손 모양 인식을 이용한 디지털 장치의 제어 방법 및 촬영 방법과, 그 장치 |
KR20150130808A (ko) * | 2014-05-14 | 2015-11-24 | 삼성전자주식회사 | 사용자의 공간 제스처를 식별하는 방법 및 장치 |
CN105094273B (zh) * | 2014-05-20 | 2018-10-12 | 联想(北京)有限公司 | 一种信息发送方法及电子设备 |
EP3200122B1 (de) * | 2016-01-26 | 2022-06-22 | Sick Ag | Optoelektronischer sensor und verfahren zur sicheren erkennung von objekten einer mindestgrösse |
CN109643165A (zh) | 2016-09-01 | 2019-04-16 | 三菱电机株式会社 | 手势判定装置、手势操作装置和手势判定方法 |
CN106643998A (zh) * | 2016-12-23 | 2017-05-10 | 中山乐心电子有限公司 | 用于电子秤的处理数据方法与装置及包括该装置的电子秤 |
JP7106031B2 (ja) * | 2020-03-19 | 2022-07-25 | 三菱電機株式会社 | ジェスチャ検出装置及びジェスチャ検出方法 |
Family Cites Families (31)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5594469A (en) * | 1995-02-21 | 1997-01-14 | Mitsubishi Electric Information Technology Center America Inc. | Hand gesture machine control system |
JPH0981307A (ja) * | 1995-09-08 | 1997-03-28 | Clarion Co Ltd | 機器制御装置 |
US8218829B2 (en) * | 2001-08-20 | 2012-07-10 | Polycom, Inc. | System and method for using biometrics technology in conferencing |
WO2003025859A1 (fr) * | 2001-09-17 | 2003-03-27 | National Institute Of Advanced Industrial Science And Technology | Dispositif d'interface |
US8745541B2 (en) * | 2003-03-25 | 2014-06-03 | Microsoft Corporation | Architecture for controlling a computer using hand gestures |
JP4153818B2 (ja) * | 2003-03-31 | 2008-09-24 | 本田技研工業株式会社 | ジェスチャ認識装置、ジェスチャ認識方法及びジェスチャ認識プログラム |
JP4723799B2 (ja) | 2003-07-08 | 2011-07-13 | 株式会社ソニー・コンピュータエンタテインメント | 制御システムおよび制御方法 |
JP4479194B2 (ja) * | 2003-08-29 | 2010-06-09 | 富士ゼロックス株式会社 | 動作識別装置、及び対象物の姿勢識別装置 |
JP4792824B2 (ja) * | 2004-11-05 | 2011-10-12 | 富士ゼロックス株式会社 | 動作分析装置 |
JP2007122218A (ja) * | 2005-10-26 | 2007-05-17 | Fuji Xerox Co Ltd | 画像分析装置 |
US8411034B2 (en) * | 2009-03-12 | 2013-04-02 | Marc Boillot | Sterile networked interface for medical systems |
JP4711885B2 (ja) * | 2006-05-25 | 2011-06-29 | 三菱電機株式会社 | 遠隔操作装置及び方法 |
KR100776801B1 (ko) | 2006-07-19 | 2007-11-19 | 한국전자통신연구원 | 화상 처리 시스템에서의 제스처 인식 장치 및 방법 |
JP4689548B2 (ja) * | 2006-07-19 | 2011-05-25 | 株式会社ソニー・コンピュータエンタテインメント | 画像処理装置、画像処理方法、記録媒体、コンピュータプログラム、半導体デバイス |
US8013870B2 (en) * | 2006-09-25 | 2011-09-06 | Adobe Systems Incorporated | Image masks generated from local color models |
US8726194B2 (en) * | 2007-07-27 | 2014-05-13 | Qualcomm Incorporated | Item selection using enhanced control |
CN103369391B (zh) * | 2007-11-21 | 2016-12-28 | 高通股份有限公司 | 基于媒体偏好控制电子设备的方法和*** |
JP4384240B2 (ja) | 2008-05-28 | 2009-12-16 | 株式会社東芝 | 画像処理装置、画像処理方法、画像処理プログラム |
JP2010009558A (ja) * | 2008-05-28 | 2010-01-14 | Oki Semiconductor Co Ltd | 画像認識装置、電装機器動作制御ユニット、電化製品、画像認識プログラム、半導体装置 |
KR101526995B1 (ko) * | 2008-10-15 | 2015-06-11 | 엘지전자 주식회사 | 이동 단말기 및 이것의 디스플레이 제어 방법 |
KR101527408B1 (ko) * | 2008-11-04 | 2015-06-17 | 삼성전자주식회사 | 얼굴 표정 검출 방법 및 시스템 |
CN101753889B (zh) * | 2008-12-17 | 2012-10-17 | 深圳Tcl新技术有限公司 | 电视机自动调整的方法及电视机 |
JP5706340B2 (ja) * | 2009-01-21 | 2015-04-22 | トムソン ライセンシングThomson Licensing | 顔検出及びホットスポットの動きによりメディアを制御する方法 |
SG173021A1 (en) | 2009-01-23 | 2011-08-29 | Agency Science Tech & Res | Method of accessing a data storage device |
JP5180874B2 (ja) | 2009-02-27 | 2013-04-10 | 株式会社日立製作所 | バッファ管理方法、及びパケット通信装置 |
US9898675B2 (en) * | 2009-05-01 | 2018-02-20 | Microsoft Technology Licensing, Llc | User movement tracking feedback to improve tracking |
US8428368B2 (en) * | 2009-07-31 | 2013-04-23 | Echostar Technologies L.L.C. | Systems and methods for hand gesture control of an electronic device |
JP5371626B2 (ja) * | 2009-08-18 | 2013-12-18 | キヤノン株式会社 | 表示制御装置、表示制御装置の制御方法、プログラム及び記憶媒体 |
US9400548B2 (en) * | 2009-10-19 | 2016-07-26 | Microsoft Technology Licensing, Llc | Gesture personalization and profile roaming |
EP2524280A1 (en) * | 2010-01-14 | 2012-11-21 | BrainLAB AG | Controlling a surgical navigation system |
US8457353B2 (en) * | 2010-05-18 | 2013-06-04 | Microsoft Corporation | Gestures and gesture modifiers for manipulating a user-interface |
-
2010
- 2010-09-07 JP JP2010200264A patent/JP5829390B2/ja active Active
-
2011
- 2011-08-31 CN CN201811283978.8A patent/CN109634403A/zh active Pending
- 2011-08-31 CN CN2011102544143A patent/CN102402383A/zh active Pending
- 2011-09-01 EP EP11179707.2A patent/EP2426576A3/en not_active Withdrawn
- 2011-09-01 US US13/223,417 patent/US8744137B2/en active Active
-
2014
- 2014-04-24 US US14/260,893 patent/US9513712B2/en active Active
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104427170A (zh) * | 2013-08-29 | 2015-03-18 | 京瓷办公信息***株式会社 | 电子设备 |
CN104427170B (zh) * | 2013-08-29 | 2017-09-22 | 京瓷办公信息***株式会社 | 电子设备 |
Also Published As
Publication number | Publication date |
---|---|
JP2012058928A (ja) | 2012-03-22 |
US20140237433A1 (en) | 2014-08-21 |
US8744137B2 (en) | 2014-06-03 |
EP2426576A2 (en) | 2012-03-07 |
US9513712B2 (en) | 2016-12-06 |
CN109634403A (zh) | 2019-04-16 |
US20120057792A1 (en) | 2012-03-08 |
CN102402383A (zh) | 2012-04-04 |
EP2426576A3 (en) | 2014-03-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5829390B2 (ja) | 情報処理装置、および情報処理方法 | |
JP5625643B2 (ja) | 情報処理装置、および情報処理方法 | |
US10782788B2 (en) | Gesture controlled communication | |
US10928896B2 (en) | Information processing apparatus and information processing method | |
EP2972681B1 (en) | Display control method and apparatus | |
JP4720874B2 (ja) | 情報処理装置、情報処理方法および情報処理プログラム | |
US10180718B2 (en) | Information processing apparatus and information processing method | |
WO2015037177A1 (en) | Information processing apparatus method and program combining voice recognition with gaze detection | |
WO2012046425A1 (en) | Information processing device and information processing method | |
JP5900161B2 (ja) | 情報処理システム、方法およびコンピュータ読み取り可能な記録媒体 | |
JP5740972B2 (ja) | 情報処理装置および情報処理方法 | |
KR20200128493A (ko) | 사용자 단말 장치 및 그 제어 방법 | |
US20210289165A1 (en) | Display Device and Video Communication Data Processing Method | |
CN110704145B (zh) | 一种热区调整方法与装置、电子设备与存储介质 | |
EP4108524A1 (en) | Human-machine interaction method and device | |
WO2023273517A1 (zh) | 屏幕控制方法、装置、存储介质及终端设备 | |
JP2014209778A (ja) | 情報処理装置および情報処理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130716 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140129 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140212 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140331 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20140909 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20151022 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5829390 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |