JP6064464B2 - 頭部装着型表示装置、頭部装着型表示装置の制御方法、および、認証システム - Google Patents
頭部装着型表示装置、頭部装着型表示装置の制御方法、および、認証システム Download PDFInfo
- Publication number
- JP6064464B2 JP6064464B2 JP2012198349A JP2012198349A JP6064464B2 JP 6064464 B2 JP6064464 B2 JP 6064464B2 JP 2012198349 A JP2012198349 A JP 2012198349A JP 2012198349 A JP2012198349 A JP 2012198349A JP 6064464 B2 JP6064464 B2 JP 6064464B2
- Authority
- JP
- Japan
- Prior art keywords
- user
- trajectory
- head
- mounted display
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0172—Head mounted characterised by optical features
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
- G06F21/31—User authentication
- G06F21/316—User authentication by observing the pattern of computer usage, e.g. typical user behaviour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
- G06F21/31—User authentication
- G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
- G06F21/31—User authentication
- G06F21/36—User authentication by graphic or iconic representation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/0304—Detection arrangements using opto-electronic means
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Security & Cryptography (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- Human Computer Interaction (AREA)
- Optics & Photonics (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Social Psychology (AREA)
- Control Of Indicators Other Than Cathode Ray Tubes (AREA)
- User Interface Of Digital Computer (AREA)
Description
使用者が虚像と外景を同時に視認可能な頭部装着型表示装置であって、
前記頭部装着型表示装置を装着した状態における前記使用者の視界方向の少なくとも一部を撮影し、前記使用者の動作を取得する撮影部と、
前記虚像の表示領域と前記撮影部の撮影領域とが重複する重複領域を前記使用者に案内する案内部と、
前記撮影部により撮影された前記動作から、前記使用者の動作の軌跡を取得する軌跡取得部と、
前記軌跡取得部により取得された前記軌跡を用いて、前記使用者が正当な使用者であるか否かを認証する認証処理部と、
を備え、
前記撮影部は、
予め定められた開始トリガーを検出後、予め定められた終了トリガーを検出するまでの間の前記動作を撮影し、
前記案内部は、
前記撮影部の撮影領域に含まれ前記撮影領域よりも小さな領域を、前記重複領域として設定する、頭部装着型表示装置。本発明の他の適用例は、
使用者が虚像と外景を同時に視認可能な頭部装着型表示装置であって、
前記頭部装着型表示装置を装着した状態における前記使用者の視界方向の少なくとも一部を撮影し、前記使用者の動作を取得する撮影部と、
前記撮影部により撮影された前記動作から、前記使用者の動作の軌跡を取得する軌跡取得部と、
前記軌跡取得部により取得された前記軌跡を用いて、前記使用者が正当な使用者であるか否かを認証する認証処理部と、
前記頭部装着型表示装置の正当な使用者によって予め登録された前記軌跡である認証用軌跡を記憶する記憶部と、
を備え、
前記認証処理部は、
前記軌跡取得部により取得された前記軌跡と、前記認証用軌跡との類似度が第1の閾値以上である場合に、前記使用者が正当な使用者であると判定し、
前記軌跡取得部により取得された前記軌跡と、過去に前記軌跡取得部により取得された前記軌跡を等倍、横方向拡大、縦方向拡大、横方向縮小、縦方向縮小の少なくともいずれかの方法を用いて変換した軌跡との類似度が、前記第1の閾値よりも大きな第2の閾値以上である場合、前記使用者は正当な使用者でないと判定する、頭部装着型表示装置。本発明の形態は、次の通りである。
A−1.頭部装着型表示装置の構成:
図1は、本発明の一実施形態における頭部装着型表示装置の外観の構成を示す説明図である。頭部装着型表示装置HMは、頭部に装着する頭部装着型表示装置であり、ヘッドマウントディスプレイ(Head Mounted Display、HMD)とも呼ばれる。本実施形態のヘッドマウントディスプレイHMは、使用者が、虚像を視認すると同時に外景も直接視認可能な光学透過型の頭部装着型表示装置である。
・n回目に取得した位置と、n+1回目に取得した位置とを仮想的に結んだベクトル(矢印)の向きが、移動方向である。
・n回目に取得した位置と、n+1回目に取得した位置とを仮想的に結んだベクトル(矢印)の大きさが、移動量である。
・位置は、例えば、映像の最も左上部分の画素を(0,0)座標とした場合のX方向、Y方向の変化として定義することができる。
このようにすれば、軌跡取得部146は、使用者の体の一部の移動方向と移動量とを求めることができる。このため、軌跡取得部146は、これらの移動方向と移動量との変化によって、認証用ジェスチャー(動作)の軌跡を定量的に特定することができる。
(1)1回目に取得した位置SP1と2回目に取得した位置SP2とを結んだベクトルVE1の向きおよび大きさ
(2)2回目に取得した位置SP2と3回目に取得した位置SP3とを結んだベクトルVE2の向きおよび大きさ
(3)3回目〜n−1回目のベクトルVE3〜VEn−1の向きおよび大きさ
(4)n回目に取得した位置SPnとn+1回目に取得した位置SPn+1とを結んだベクトルVEnの向きおよび大きさ
図6は、認証処理の手順を示すシーケンス図である。認証処理は、使用者が正当な使用者であるか否かを認証するための処理である。本実施形態における認証処理は、ヘッドマウントディスプレイHMが起動されたこと、換言すれば、電源のONを検出したことをトリガーとして開始される(ステップS100)。認証処理部142は、カメラ61を起動させる(ステップS102)。
以降では、図6に示した認証処理における、種々のバリエーションについて説明する。
図7は、認証処理(図6)のステップS104で表示される入力案内表示画面の他の例を示す説明図である。図7(A)は、入力案内表示画面の第1の他の例を示している。入力案内表示画面W2は、入力案内表示画面W1と同様に、使用者による認証用ジェスチャーの入力を補助するための画面である。図7(A)の例では、入力案内表示画面W2には、案内メッセージMG2と、開始地点シンボルSS2と、終了地点シンボルES2とが含まれている。案内メッセージMG2は、使用者に対して、開始地点から始めて終了地点で終わるように認証用ジェスチャーを再現する旨を求める文字列である。開始地点シンボルSS2は、円状の図形に、開始地点である旨の文字列表示を付した図形である。終了地点シンボルES2は、円状の図形に、終了地点である旨の文字列表示を付した図形である。
図7(B)は、入力案内表示画面の第2の他の例を示している。入力案内表示画面W3は、入力案内表示画面W1と同様に、使用者による認証用ジェスチャーの入力を補助するための画面である。図7(B)の例では、入力案内表示画面W3には、案内メッセージMG3と、案内フレームFM3とが含まれている。案内メッセージMG3は、使用者に認証用ジェスチャーの再現を求める旨を表示する文字列である。案内フレームFM3は、虚像の表示領域と、カメラ61の撮影領域とが重複する重複領域を示す枠の画像である。案内フレームFM1との違いは、フレーム内がマス目に区切られている点のみである。
図8は、認証処理(図6)で用いられるジェスチャー開始操作とジェスチャー終了操作の他の例を示す説明図である。図8(A)は、使用者の手の第1の形状である。図8(B)は、使用者の手の第2の形状である。
本発明の第2実施形態では、認証処理を別途設けられたサーバー側で実施する構成について説明する。以下では、第1実施形態と異なる構成および動作を有する部分についてのみ説明する。なお、図中において第1実施形態と同様の構成部分については先に説明した第1実施形態と同様の符号を付し、その詳細な説明を省略する。
図9は、第2実施形態における認証システムの概略構成を示す説明図である。第2実施形態の認証システム1000は、ヘッドマウントディスプレイHMaと、サーバーSVとを備えている。ヘッドマウントディスプレイHMaは、通信キャリアBSを介して無線通信でインターネットINTに接続されている。サーバーSVは、有線通信でインターネットINTに接続されている。この結果、サーバーSVとヘッドマウントディスプレイHMaとは、互いにインターネットINTによって接続されている。通信キャリアBSは、送受信アンテナや、無線基地局、交換局を含む。なお、サーバーSVは、特許請求の範囲における「認証サーバー」に相当する。
図10は、第2実施形態における認証処理の手順を示すシーケンス図である。本実施形態における認証処理は、ヘッドマウントディスプレイHMaからサーバーSVに対して、オンラインストレージ機能の使用要求が送信されたことをトリガーとして開始される。
・サーバーSVの記憶部350内のファイルやフォルダーを読み取るための「読み取り要求」
・サーバーSVの記憶部350内へファイルやフォルダーを書き込むための「書き込み要求」
・サーバーSVの記憶部350内のファイルやフォルダーを変更するための「変更要求」
使用要求操作を検出したOS150は、検出した操作に応じた使用要求を、インターフェイス180を介してサーバーSVへ送信する(ステップS202)。
第2実施形態の認証処理(図10)においても、「A−3.認証処理のバリエーション」の説明と同様のバリエーションを採用することができる。詳細な説明は省略する。
上記実施形態において、ハードウェアによって実現されるとした構成の一部をソフトウェアに置き換えるようにしてもよく、逆に、ソフトウェアによって実現されるとした構成の一部をハードウェアに置き換えるようにしてもよい。その他、以下のような変形も可能である。
上記実施形態では、ヘッドマウントディスプレイの構成について例示した。しかし、ヘッドマウントディスプレイの構成は、本発明の要旨を逸脱しない範囲において任意に定めることが可能であり、例えば、各構成部の追加・削除・変換等を行うことができる。
上記実施形態では、認証処理の一例を示した。しかし、図6、図10に示した処理の手順はあくまで一例であり、種々の変形が可能である。例えば、一部のステップを省略してもよいし、更なる他のステップを追加してもよい。また、実行されるステップの順序を変更してもよい。
追加の条件は、例えば、以下のように設定することができる。
・認証処理部は、マイク等から音声入力された合言葉が、予め登録されている言葉と一致するか否かを判定する。
・利用者によって予め指定されたセキュリティ用アイテムを装着または保持した状態で認証用ジェスチャーを再現させる。認証処理部は、ジェスチャー映像の動画に含まれるセキュリティ用アイテムの画像と、予め指定されたセキュリティ用アイテムの画像を比較し、一致するか否かを判定する。セキュリティ用アイテムは、例えば、指輪や、時計や、ブレスレットや、付け爪等を指定することができる。
このようにすれば、複数種類の認証方法を組み合わせて使用者の認証を行うことができるため、ヘッドマウントディスプレイにおけるセキュリティをより強固にすることができる。
上記実施形態の認証処理(図6、図10)では、動画の撮影を開始する開始トリガーとしてのジェスチャー開始操作と、動画の撮影を終了する終了トリガーとしてのジェスチャー終了操作とのいくつかの組み合わせ例を挙げた。しかし、上記組み合わせはあくまで一例であり、種々の組み合わせが可能である。
上記実施形態の認証処理(図8)では、ジェスチャー開始操作とジェスチャー終了操作の他の例として、使用者の手の形状の一例を示した。しかし、図8に図示した例はあくまで一例であり、種々の変更をすることができる。
上記第2実施形態では、認証システムの構成について例示した。しかし、認証システムの構成は、本発明の要旨を逸脱しない範囲において任意に定めることが可能であり、例えば、ヘッドマウントディスプレイやサーバー等の装置の追加・削除・変換等を行うことができる。また、ヘッドマウントディスプレイやサーバー等の内部の構成要素の追加・削除・変換等を行うことができる。
上記実施形態の認証処理(図6、図10)では、正しい認証用ジェスチャーの軌跡(認証用軌跡データー)を予め登録しておく構成について説明した。しかし、予め登録された正しい認証用ジェスチャーの軌跡に代えて、使用者の筆跡による認証を行ってもよい。この場合、認証用軌跡データーに代えて、筆跡特定情報を記憶部に予め格納しておく。筆跡特定情報とは、使用者の筆跡を特定するために用いられる情報であり、例えば、代表的な文字についての使用者の筆順や、字画構成や、字画形態等が含まれる。
本発明は、上述の実施形態や実施例、変形例に限られるものではなく、その趣旨を逸脱しない範囲において種々の構成で実現することができる。例えば、発明の概要の欄に記載した各形態中の技術的特徴に対応する実施形態、実施例、変形例中の技術的特徴は、上述の課題の一部または全部を解決するために、あるいは、上述の効果の一部または全部を達成するために、適宜、差し替えや組み合わせを行うことが可能である。また、その技術的特徴が本明細書中に必須なものとして説明されていなければ、適宜、削除することが可能である。
12…点灯部
14…タッチパッド
16…十字キー
18…電源スイッチ
20…画像表示部
21…耳掛部
22…右表示駆動部
24…左表示駆動部
26…右光学像表示部
28…左光学像表示部
32…右イヤホン
34…左イヤホン
40…接続部
42…右コード
44…左コード
46…連結部材
48…本体コード
51…送信部
52…送信部
53…受信部
54…受信部
61…ディジタルビデオカメラ(撮影部)
110…入力情報取得部
120…記憶部
122…認証用軌跡データー(認証用軌跡)
130…電源
140…CPU
142…認証処理部(認証処理部)
144…案内部(案内部)
146…軌跡取得部(軌跡取得部)
148…認証制御部(認証制御部)
160…画像処理部
170…音声処理部
180…インターフェイス(送信部)
190…表示制御部
201…右バックライト制御部(画像光生成部)
202…左バックライト制御部(画像光生成部)
211…右LCD制御部(表示素子、画像光生成部)
212…左LCD制御部(表示素子、画像光生成部)
221…右バックライト(画像光生成部)
222…左バックライト(画像光生成部)
241…右LCD(表示素子、画像光生成部)
242…左LCD(表示素子、画像光生成部)
251…右投写光学系(導光部)
252…左投写光学系(導光部)
261…右導光板(導光部)
262…左導光板(導光部)
310…ROM
320…RAM
330…通信インターフェイス
340…CPU
342…認証処理部(認証処理部)
346…軌跡取得部(軌跡取得部)
348…共有制御部(機能提供部)
350…記憶部
352…認証用軌跡データー(認証用軌跡)
354…ユーザーデーター
1000…認証システム
PCLK…クロック信号
VSync…垂直同期信号
HSync…水平同期信号
Data…画像データー
Data1…右眼用画像データー
Data2…左眼用画像データー
OA…外部機器
SC…外景
VI…虚像
IL…照明光
PL…画像光
VR…視野
EL、ER…端部
W1、W2、W3…入力案内表示画面
MG1、MG2、MG3…案内メッセージ
FM1、FM3…案内フレーム
SP1、SP2、SP3…位置
ES2…終了地点シンボル
SS2…開始地点シンボル
TR…軌跡
VE1、VE2、VE3…ベクトル
HM、HMa…頭部装着型表示装置(ヘッドマウントディスプレイ)
SV…サーバー(認証サーバー)
PC…パーソナルコンピューター
BS…通信キャリア
Claims (14)
- 使用者が虚像と外景を同時に視認可能な頭部装着型表示装置であって、
前記頭部装着型表示装置を装着した状態における前記使用者の視界方向の少なくとも一部を撮影し、前記使用者の動作を取得する撮影部と、
前記虚像の表示領域と前記撮影部の撮影領域とが重複する重複領域を前記使用者に案内する案内部と、
前記撮影部により撮影された前記動作から、前記使用者の動作の軌跡を取得する軌跡取得部と、
前記軌跡取得部により取得された前記軌跡を用いて、前記使用者が正当な使用者であるか否かを認証する認証処理部と、
を備え、
前記撮影部は、
予め定められた開始トリガーを検出後、予め定められた終了トリガーを検出するまでの間の前記動作を撮影し、
前記案内部は、
前記撮影部の撮影領域に含まれ前記撮影領域よりも小さな領域を、前記重複領域として設定する、頭部装着型表示装置。 - 請求項1記載の頭部装着型表示装置であって、
前記開始トリガーまたは前記終了トリガーの少なくとも一方は、前記使用者の動作の所定時間以上の静止の検出である、頭部装着型表示装置。 - 請求項1記載の頭部装着型表示装置であって、
前記開始トリガーまたは前記終了トリガーの少なくとも一方は、前記使用者の動作の所定位置の通過の検出である、頭部装着型表示装置。 - 請求項1記載の頭部装着型表示装置であって、
前記開始トリガーまたは前記終了トリガーの少なくとも一方は、前記使用者の体の一部の所定形状の検出である、頭部装着型表示装置。 - 使用者が虚像と外景を同時に視認可能な頭部装着型表示装置であって、
前記頭部装着型表示装置を装着した状態における前記使用者の視界方向の少なくとも一部を撮影し、前記使用者の動作を取得する撮影部と、
前記撮影部により撮影された前記動作から、前記使用者の動作の軌跡を取得する軌跡取得部と、
前記軌跡取得部により取得された前記軌跡を用いて、前記使用者が正当な使用者であるか否かを認証する認証処理部と、
前記頭部装着型表示装置の正当な使用者によって予め登録された前記軌跡である認証用軌跡を記憶する記憶部と、
を備え、
前記認証処理部は、
前記軌跡取得部により取得された前記軌跡と、前記認証用軌跡との類似度が第1の閾値以上である場合に、前記使用者が正当な使用者であると判定し、
前記軌跡取得部により取得された前記軌跡と、過去に前記軌跡取得部により取得された前記軌跡を等倍、横方向拡大、縦方向拡大、横方向縮小、縦方向縮小の少なくともいずれかの方法を用いて変換した軌跡との類似度が、前記第1の閾値よりも大きな第2の閾値以上である場合、前記使用者は正当な使用者でないと判定する、頭部装着型表示装置。 - 請求項5記載の頭部装着型表示装置であって、
前記認証用軌跡は、前記使用者の筆跡を特定する筆跡特定情報である、頭部装着型表示装置。 - 請求項1から6のいずれか一項記載の頭部装着型表示装置であって、
前記軌跡取得部は、前記使用者の体の一部の移動方向と移動量との変化によって前記動作の軌跡を特定する、頭部装着型表示装置。 - 請求項1から6のいずれか一項記載の頭部装着型表示装置であって、
前記軌跡取得部は、前記使用者によって保持されている任意の物の移動方向と移動量との変化によって前記動作の軌跡を特定する、頭部装着型表示装置。 - 請求項8記載の頭部装着型表示装置であって、
前記軌跡取得部は、
前記使用者の体の一部または前記任意の物のうちの任意の場所を特定点とし、所定の時間間隔で繰り返し前記特定点の位置を取得し、n回目に取得した前記特定点の位置と、n+1回目に取得した前記特定点の位置とを仮想的に結んだベクトルの向きを前記移動方向として求め、n回目に取得した前記特定点の位置と、n+1回目に取得した前記特定点の位置とを仮想的に結んだベクトルの大きさを前記移動量として求める、頭部装着型表示装置。 - 使用者が虚像と外景を同時に視認可能な頭部装着型表示装置の制御方法であって、
(a)前記頭部装着型表示装置を装着した状態における前記使用者の視界方向の少なくとも一部を撮影し、前記使用者の動作を取得する工程と、
(b)前記工程(a)により取得された前記動作から、前記使用者の動作の軌跡を取得する工程と、
(c)前記工程(b)により取得された前記軌跡を用いて、前記使用者が正当な使用者であるか否かを認証する工程と、
を備え、
前記制御方法は、さらに、
(d)前記虚像の表示領域と前記工程(a)により撮影される撮影領域とが重複する重複領域を前記使用者に案内する工程
を備え、
前記工程(a)は、
予め定められた開始トリガーを検出後、予め定められた終了トリガーを検出するまでの間の前記動作を撮影し、
前記工程(d)は、
前記工程(a)による撮影領域に含まれ前記撮影領域よりも小さな領域を、前記重複領域として設定する、頭部装着型表示装置の制御方法。 - 使用者が虚像と外景を同時に視認可能な頭部装着型表示装置の制御方法であって、
(a)前記頭部装着型表示装置を装着した状態における前記使用者の視界方向の少なくとも一部を撮影し、前記使用者の動作を取得する工程と、
(b)前記工程(a)により取得された前記動作から、前記使用者の動作の軌跡を取得する工程と、
(c)前記工程(b)により取得された前記軌跡を用いて、前記使用者が正当な使用者であるか否かを認証する工程と、
を備え、
前記工程(c)は、
前記工程(b)により取得された前記軌跡と、前記頭部装着型表示装置の正当な使用者によって予め登録された前記軌跡である認証用軌跡との類似度が第1の閾値以上である場合に、前記使用者が正当な使用者であると判定し、
前記工程(b)により取得された前記軌跡と、過去に前記工程(b)により取得された前記軌跡を等倍、横方向拡大、縦方向拡大、横方向縮小、縦方向縮小の少なくともいずれかの方法を用いて変換した軌跡との類似度が、前記第1の閾値よりも大きな第2の閾値以上である場合、前記使用者は正当な使用者でないと判定する、頭部装着型表示装置の制御方法。 - 認証システムであって、
使用者が虚像と外景を同時に視認可能な頭部装着型表示装置と、
前記使用者の認証を行う認証サーバーと、
を備え、
前記頭部装着型表示装置は、
前記頭部装着型表示装置を装着した状態における前記使用者の視界方向の少なくとも一部を撮影し、前記使用者の動作を取得する撮影部と、
前記虚像の表示領域と前記撮影部の撮影領域とが重複する重複領域を前記使用者に案内する案内部と、
前記撮影部により取得された前記動作を前記認証サーバーへ送信する送信部と、
を備え、
前記認証サーバーは、
前記頭部装着型表示装置から受信した前記動作から、前記使用者の動作の軌跡を取得する軌跡取得部と、
前記軌跡取得部により取得された前記軌跡を用いて、前記使用者が正当な使用者であるか否かを認証する認証処理部と、
前記認証処理部による前記認証の結果を、前記頭部装着型表示装置へ送信する送信部と、
を備え、
前記撮影部は、
予め定められた開始トリガーを検出後、予め定められた終了トリガーを検出するまでの間の前記動作を撮影し、
前記案内部は、
前記撮影部の撮影領域に含まれ前記撮影領域よりも小さな領域を、前記重複領域として設定する、認証システム。 - 認証システムであって、
使用者が虚像と外景を同時に視認可能な頭部装着型表示装置と、
前記使用者の認証を行う認証サーバーと、
を備え、
前記頭部装着型表示装置は、
前記頭部装着型表示装置を装着した状態における前記使用者の視界方向の少なくとも一部を撮影し、前記使用者の動作を取得する撮影部と、
前記撮影部により取得された前記動作を前記認証サーバーへ送信する送信部と、
を備え、
前記認証サーバーは、
前記頭部装着型表示装置から受信した前記動作から、前記使用者の動作の軌跡を取得する軌跡取得部と、
前記頭部装着型表示装置の正当な使用者によって予め登録された前記軌跡である認証用軌跡を記憶する記憶部と、
前記軌跡取得部により取得された前記軌跡を用いて、前記使用者が正当な使用者であるか否かを認証する認証処理部と、
前記認証処理部による前記認証の結果を、前記頭部装着型表示装置へ送信する送信部と、
を備え、
前記認証処理部は、
前記軌跡取得部により取得された前記軌跡と、前記認証用軌跡との類似度が第1の閾値以上である場合に、前記使用者が正当な使用者であると判定し、
前記軌跡取得部により取得された前記軌跡と、過去に前記軌跡取得部により取得された前記軌跡を等倍、横方向拡大、縦方向拡大、横方向縮小、縦方向縮小の少なくともいずれかの方法を用いて変換した軌跡との類似度が、前記第1の閾値よりも大きな第2の閾値以上である場合、前記使用者は正当な使用者でないと判定する、認証システム。 - 請求項12または13記載の認証システムであって、
前記認証サーバーは、さらに、
所定の機能を提供する機能提供部を備え、
前記機能提供部は、前記認証処理部によって前記使用者が正当な使用者であると判定されるまでの間、前記使用者に対する前記所定の機能の提供を制限する、認証システム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012198349A JP6064464B2 (ja) | 2012-09-10 | 2012-09-10 | 頭部装着型表示装置、頭部装着型表示装置の制御方法、および、認証システム |
US13/975,799 US9317126B2 (en) | 2012-09-10 | 2013-08-26 | Head-mounted display device, control method for the head-mounted display device, and authentication system |
US15/075,822 US10191555B2 (en) | 2012-09-10 | 2016-03-21 | Head-mounted display device, control method for the head-mounted display device, and authentication system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012198349A JP6064464B2 (ja) | 2012-09-10 | 2012-09-10 | 頭部装着型表示装置、頭部装着型表示装置の制御方法、および、認証システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014052942A JP2014052942A (ja) | 2014-03-20 |
JP6064464B2 true JP6064464B2 (ja) | 2017-01-25 |
Family
ID=50232760
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012198349A Active JP6064464B2 (ja) | 2012-09-10 | 2012-09-10 | 頭部装着型表示装置、頭部装着型表示装置の制御方法、および、認証システム |
Country Status (2)
Country | Link |
---|---|
US (2) | US9317126B2 (ja) |
JP (1) | JP6064464B2 (ja) |
Families Citing this family (32)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6064464B2 (ja) * | 2012-09-10 | 2017-01-25 | セイコーエプソン株式会社 | 頭部装着型表示装置、頭部装着型表示装置の制御方法、および、認証システム |
US8752151B2 (en) * | 2012-10-09 | 2014-06-10 | At&T Intellectual Property I, L.P. | Methods, systems, and products for authentication of users |
US9715282B2 (en) * | 2013-03-29 | 2017-07-25 | Microsoft Technology Licensing, Llc | Closing, starting, and restarting applications |
US10262462B2 (en) | 2014-04-18 | 2019-04-16 | Magic Leap, Inc. | Systems and methods for augmented and virtual reality |
US9251333B2 (en) * | 2013-08-29 | 2016-02-02 | Paypal, Inc. | Wearable user device authentication system |
US10460096B2 (en) * | 2013-10-30 | 2019-10-29 | Ohio University | Motion-based identity authentication of an individual |
CN106031135B (zh) * | 2014-02-21 | 2020-01-10 | 索尼公司 | 可穿戴设备和通信控制方法 |
US9826400B2 (en) * | 2014-04-04 | 2017-11-21 | Qualcomm Incorporated | Method and apparatus that facilitates a wearable identity manager |
CN105320248B (zh) * | 2014-06-03 | 2018-12-07 | 深圳Tcl新技术有限公司 | 空中手势输入方法及装置 |
US10725533B2 (en) | 2014-09-26 | 2020-07-28 | Intel Corporation | Systems, apparatuses, and methods for gesture recognition and interaction |
US9892249B2 (en) | 2014-09-29 | 2018-02-13 | Xiaomi Inc. | Methods and devices for authorizing operation |
CN104283876A (zh) * | 2014-09-29 | 2015-01-14 | 小米科技有限责任公司 | 操作授权方法及装置 |
US9811650B2 (en) * | 2014-12-31 | 2017-11-07 | Hand Held Products, Inc. | User authentication system and method |
JP6494455B2 (ja) * | 2015-07-13 | 2019-04-03 | キヤノン株式会社 | 映像処理装置、映像処理方法、及びプログラム |
WO2017099318A1 (ko) * | 2015-12-10 | 2017-06-15 | 삼성전자 주식회사 | 헤드 마운티드 디스플레이 장치의 사용자를 인증하는 방법 및 헤드 마운티드 디스플레이 장치 |
US10515419B1 (en) * | 2016-02-17 | 2019-12-24 | United Services Automobile Association | Systems and methods for leveraging remotely captured images |
JP6964132B2 (ja) * | 2016-09-28 | 2021-11-10 | マジック リープ, インコーポレイテッドMagic Leap, Inc. | ウェアラブルデバイスによる顔モデル捕捉 |
CN106997239A (zh) | 2016-10-13 | 2017-08-01 | 阿里巴巴集团控股有限公司 | 基于虚拟现实场景的业务实现方法及装置 |
US10609018B2 (en) * | 2016-12-05 | 2020-03-31 | Google Llc | Gesture-based access control in virtual environments |
KR102678242B1 (ko) * | 2017-02-01 | 2024-06-26 | 삼성전자주식회사 | 인증을 수행하는 전자 장치 및 방법 |
JP6778150B2 (ja) * | 2017-06-15 | 2020-10-28 | 株式会社ミクシィ | 頭部装着ディスプレイ装置、認証方法、及び認証プログラム |
JP7013757B2 (ja) * | 2017-09-20 | 2022-02-01 | 富士フイルムビジネスイノベーション株式会社 | 情報処理装置、情報処理システム及びプログラム |
EP3701408A1 (en) * | 2017-10-24 | 2020-09-02 | Orcam Technologies Ltd. | Wearable camera systems and methods for authenticating identity |
JP2019145009A (ja) | 2018-02-23 | 2019-08-29 | セイコーエプソン株式会社 | 頭部装着型表示装置、認証システム、及び頭部装着型表示装置の制御方法 |
US10893412B2 (en) | 2018-08-27 | 2021-01-12 | Apple Inc. | Authenticated device assisted user authentication |
JP2020135306A (ja) * | 2019-02-18 | 2020-08-31 | セイコーエプソン株式会社 | 表示システム、情報処理装置の制御プログラム、及び情報処理装置の制御方法 |
JP6795058B2 (ja) * | 2019-06-20 | 2020-12-02 | 株式会社ニコン | 撮像装置 |
CN110134197A (zh) * | 2019-06-26 | 2019-08-16 | 北京小米移动软件有限公司 | 可穿戴式控制设备、虚拟/增强现实***及控制方法 |
US11030459B2 (en) | 2019-06-27 | 2021-06-08 | Intel Corporation | Methods and apparatus for projecting augmented reality enhancements to real objects in response to user gestures detected in a real environment |
CN111368268B (zh) * | 2020-02-28 | 2023-12-01 | Oppo广东移动通信有限公司 | 用户识别方法、用户识别装置、存储介质与头戴式设备 |
JP7045633B2 (ja) * | 2020-10-30 | 2022-04-01 | 株式会社ミクシィ | 頭部装着ディスプレイ装置、認証方法、及び認証プログラム |
JP7167973B2 (ja) * | 2020-11-10 | 2022-11-09 | 株式会社ニコン | 電子機器 |
Family Cites Families (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06314259A (ja) | 1993-04-30 | 1994-11-08 | Casio Comput Co Ltd | データ処理装置 |
US20020036617A1 (en) * | 1998-08-21 | 2002-03-28 | Timothy R. Pryor | Novel man machine interfaces and applications |
US8745541B2 (en) * | 2003-03-25 | 2014-06-03 | Microsoft Corporation | Architecture for controlling a computer using hand gestures |
US7454717B2 (en) * | 2004-10-20 | 2008-11-18 | Microsoft Corporation | Delimiters for selection-action pen gesture phrases |
KR100713494B1 (ko) * | 2005-06-20 | 2007-04-30 | 삼성전자주식회사 | 카메라부를 이용한 사용자 인증 방법 및 이를 위한이동통신단말기 |
US8902154B1 (en) * | 2006-07-11 | 2014-12-02 | Dp Technologies, Inc. | Method and apparatus for utilizing motion user interface |
JP5228305B2 (ja) * | 2006-09-08 | 2013-07-03 | ソニー株式会社 | 表示装置、表示方法 |
JP5063118B2 (ja) * | 2007-01-09 | 2012-10-31 | 京セラドキュメントソリューションズ株式会社 | ジェスチャー認証方法及びジェスチャー認証装置 |
JP5521276B2 (ja) * | 2008-03-13 | 2014-06-11 | 富士通株式会社 | 認証装置、認証方法及び認証プログラム |
JP5012781B2 (ja) * | 2008-12-11 | 2012-08-29 | ブラザー工業株式会社 | ヘッドマウントディスプレイ |
US8436821B1 (en) * | 2009-11-20 | 2013-05-07 | Adobe Systems Incorporated | System and method for developing and classifying touch gestures |
EP2539759A1 (en) * | 2010-02-28 | 2013-01-02 | Osterhout Group, Inc. | Local advertising content on an interactive head-mounted eyepiece |
US20130120282A1 (en) * | 2010-05-28 | 2013-05-16 | Tim Kukulski | System and Method for Evaluating Gesture Usability |
JP5676982B2 (ja) * | 2010-08-31 | 2015-02-25 | キヤノン株式会社 | 画像生成装置、画像生成方法、及びプログラム |
EP2482219B1 (en) * | 2011-01-31 | 2015-10-14 | BlackBerry Limited | Blacklisting of frequently used gesture passwords |
WO2012104312A1 (en) * | 2011-01-31 | 2012-08-09 | Research In Motion Deutschland Gmbh | Method and apparatus for gesture authentication |
US8749485B2 (en) * | 2011-12-20 | 2014-06-10 | Microsoft Corporation | User control gesture detection |
US9202105B1 (en) * | 2012-01-13 | 2015-12-01 | Amazon Technologies, Inc. | Image analysis for user authentication |
US9021270B1 (en) * | 2012-05-31 | 2015-04-28 | Google Inc. | Combining wake-up and unlock into a single gesture |
JP6064464B2 (ja) * | 2012-09-10 | 2017-01-25 | セイコーエプソン株式会社 | 頭部装着型表示装置、頭部装着型表示装置の制御方法、および、認証システム |
-
2012
- 2012-09-10 JP JP2012198349A patent/JP6064464B2/ja active Active
-
2013
- 2013-08-26 US US13/975,799 patent/US9317126B2/en active Active
-
2016
- 2016-03-21 US US15/075,822 patent/US10191555B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US20160202486A1 (en) | 2016-07-14 |
JP2014052942A (ja) | 2014-03-20 |
US9317126B2 (en) | 2016-04-19 |
US20140071041A1 (en) | 2014-03-13 |
US10191555B2 (en) | 2019-01-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6064464B2 (ja) | 頭部装着型表示装置、頭部装着型表示装置の制御方法、および、認証システム | |
US10341113B2 (en) | Password management | |
JP6160154B2 (ja) | 頭部装着型表示装置を利用した情報表示システム、頭部装着型表示装置を利用した情報表示方法、および、頭部装着型表示装置 | |
JP6232763B2 (ja) | 頭部装着型表示装置および頭部装着型表示装置の制御方法 | |
CN106199963B (zh) | 显示装置及其控制方法以及计算机程序 | |
JP6217244B2 (ja) | 画像処理装置、これを有する頭部装着型表示装置、画像処理方法およびコンピュータープログラム | |
KR20160136013A (ko) | 이동 단말기 및 그 제어 방법 | |
JP6380091B2 (ja) | 頭部装着型表示装置、頭部装着型表示装置の制御方法、および、コンピュータープログラム | |
KR20170067058A (ko) | 이동 단말기 및 그 제어방법 | |
JP6488786B2 (ja) | 頭部装着型表示装置、頭部装着型表示装置の制御方法、および、コンピュータープログラム | |
JP2016004340A (ja) | 情報配信システム、頭部装着型表示装置、頭部装着型表示装置の制御方法、および、コンピュータープログラム | |
JP6303274B2 (ja) | 頭部装着型表示装置および頭部装着型表示装置の制御方法 | |
US20170132406A1 (en) | Information processing device, method of controlling information processing device, computer program, and information processing system | |
JP6252002B2 (ja) | 頭部装着型表示装置および頭部装着型表示装置の制御方法 | |
JP6476673B2 (ja) | 頭部装着型表示装置、頭部装着型表示装置の制御方法、および、コンピュータープログラム | |
JP6620417B2 (ja) | 表示装置およびその制御方法、並びにコンピュータープログラム | |
JP6467922B2 (ja) | 頭部装着型表示装置、頭部装着型表示装置の制御方法、情報システム、および、コンピュータープログラム | |
JP6582374B2 (ja) | 表示装置およびその制御方法、並びにコンピュータープログラム | |
JP6394108B2 (ja) | 頭部装着型表示装置およびその制御方法、並びにコンピュータープログラム | |
JP2016142966A (ja) | 頭部装着型表示装置、情報処理装置、画像表示装置、画像表示システム、頭部装着型表示装置の表示を共有する方法、コンピュータープログラム | |
JP6394174B2 (ja) | 頭部装着型表示装置、画像表示システム、頭部装着型表示装置を制御する方法、および、コンピュータープログラム | |
JP6375662B2 (ja) | 頭部装着型表示装置 | |
KR20180031240A (ko) | 이동 단말기 및 그 이동 단말기의 제어 방법 | |
JP2016119544A (ja) | 頭部装着型表示装置、頭部装着型表示装置を制御する方法、コンピュータープログラム | |
KR20240014988A (ko) | 생체 정보에 기반한 외부 표시 장치와의 연결 방법 및 전자 장치 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150608 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160328 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160419 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20160530 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160620 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20161122 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20161205 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6064464 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |