JP7105996B2 - 拡張現実環境内の使い捨てステッカー - Google Patents
拡張現実環境内の使い捨てステッカー Download PDFInfo
- Publication number
- JP7105996B2 JP7105996B2 JP2021517551A JP2021517551A JP7105996B2 JP 7105996 B2 JP7105996 B2 JP 7105996B2 JP 2021517551 A JP2021517551 A JP 2021517551A JP 2021517551 A JP2021517551 A JP 2021517551A JP 7105996 B2 JP7105996 B2 JP 7105996B2
- Authority
- JP
- Japan
- Prior art keywords
- sticker
- hmd
- determining
- registration information
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
- H04L9/08—Key distribution or management, e.g. generation, sharing or updating, of cryptographic keys or passwords
- H04L9/0861—Generation of secret information including derivation or calculation of cryptographic keys or passwords
- H04L9/0866—Generation of secret information including derivation or calculation of cryptographic keys or passwords involving user or device identifiers, e.g. serial number, physical or biometrical information, DNA, hand-signature or measurable physical characteristics
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/12—Synchronisation between the display unit and other units, e.g. other display units, video-disc players
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K19/00—Record carriers for use with machines and with at least a part designed to carry digital markings
- G06K19/06—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
- G06K19/06009—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking
- G06K19/06037—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking multi-dimensional coding
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K19/00—Record carriers for use with machines and with at least a part designed to carry digital markings
- G06K19/06—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
- G06K19/06009—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking
- G06K19/06046—Constructional details
- G06K19/06103—Constructional details the marking being embedded in a human recognizable image, e.g. a company logo with an embedded two-dimensional code
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
- G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
- G06K7/10544—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum
- G06K7/10712—Fixed beam scanning
- G06K7/10722—Photodetector array or CCD scanning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
- G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
- G06K7/14—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation using light without selection of wavelength, e.g. sensing reflected white light
- G06K7/1404—Methods for optical code recognition
- G06K7/1408—Methods for optical code recognition the method being specifically adapted for the type of code
- G06K7/1417—2D bar codes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
- H04L9/08—Key distribution or management, e.g. generation, sharing or updating, of cryptographic keys or passwords
- H04L9/0861—Generation of secret information including derivation or calculation of cryptographic keys or passwords
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W12/00—Security arrangements; Authentication; Protecting privacy or anonymity
- H04W12/04—Key management, e.g. using generic bootstrapping architecture [GBA]
- H04W12/041—Key generation or derivation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W12/00—Security arrangements; Authentication; Protecting privacy or anonymity
- H04W12/30—Security of mobile devices; Security of mobile applications
- H04W12/33—Security of mobile devices; Security of mobile applications using wearable devices, e.g. using a smartwatch or smart-glasses
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W12/00—Security arrangements; Authentication; Protecting privacy or anonymity
- H04W12/50—Secure pairing of devices
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30204—Marker
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2380/00—Specific applications
- G09G2380/08—Biomedical applications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L2209/00—Additional information or applications relating to cryptographic mechanisms or cryptographic arrangements for secret or secure communication H04L9/00
- H04L2209/80—Wireless
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L2209/00—Additional information or applications relating to cryptographic mechanisms or cryptographic arrangements for secret or secure communication H04L9/00
- H04L2209/88—Medical equipments
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/06—Network architectures or network communication protocols for network security for supporting key management in a packet data network
- H04L63/067—Network architectures or network communication protocols for network security for supporting key management in a packet data network using one-time keys
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W12/00—Security arrangements; Authentication; Protecting privacy or anonymity
- H04W12/60—Context-dependent security
- H04W12/69—Identity-dependent
- H04W12/77—Graphical identity
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Security & Cryptography (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Electromagnetism (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Toxicology (AREA)
- Artificial Intelligence (AREA)
- Multimedia (AREA)
- Computer Hardware Design (AREA)
- User Interface Of Digital Computer (AREA)
- Processing Or Creating Images (AREA)
Description
図1は、本発明のさまざまな実施形態によるシステム環境の図である。図1に図示されるシステム環境は、ステッカーシステム100と、ユーザー105のヘッドマウントデバイス(HMD)110と、例えば、1つまたは複数のネットワークアクセスポイント145を用いて、ネットワーク130を介して互いに通信可能に接続することが可能であるコンピューティングデバイス120とを含む。ネットワーク130は、無線および/または有線接続を含むことができる。他の実施形態において、システム環境は、任意の数のユーザーおよびHMDを含むことができる。図1のさまざまなエンティティによって実行される機能は、異なる実施形態において変化する場合がある。
HMD110は、画像センサーを用いて、ステッカー160を含むシーン140の画像を取得することができる。さらに、HMD110は、物理空間(例えば、2次元または3次元)におけるHMD110の位置または向きを判断する情報を取得するセンサー、ユーザーの音声入力を取得するマイクロフォン、音声出力を生成するスピーカー、ステッカー160において符号化されるデジタル情報を含む画像を取得する画像センサー、HMD110または他のタイプのデバイス間の情報(例えば、音声データまたは、位置もしくは向き情報などの他のセンサーデータ)と通信する無線手段、情報を格納する手段、およびHMD110間で通信される音声を計算または制御する1つまたは複数のプロセッサのうち、1つまたは複数を有する。ある実施形態において、1つまたは複数のHMD110は、MICROSOFT HOLOLENSであってよいが、医療環境用にカスタム設計されるHMD110を含むさまざまな他のタイプのHMD110も用いられることが可能である。センサーの例示は、とりわけ、加速度計、ジャイロスコープ、慣性計測装置(IMU)(HMD110の位置情報の判断用など)、深度カメラ、グローバルポジショニングシステム(GPS)センサー、超音波センサー、赤外線センサー、および近接センサーを含む。
ステッカー160は、1つまたは複数の応用のためにステッカーシステム100によって検出および使用されることが可能である情報を含む。ステッカー160は、1回限りの使用、使い捨て、および/または印刷タイプのステッカーであってよい。ステッカー160は、ステッカー160を表面に固定する接着剤を含むことができる。他の実施形態において、ステッカーは、必ずしも接着剤を有する必要はなく、むしろパッチに似ており、他のタイプの取り付け機構の中で、磁石、ベルクロ、おもり、ピン、クリップ、またはボタンなどの他の手段を用いて表面に固定されることができる。ステッカー160は、画像センサーに対するステッカー160の向きを確立するための1つまたは複数の手段と、例えば、QRコードまたはバーコードなどの基準マーカーである光学的に(例えば、デジタル)情報を符号化する手段とを含む。
ステッカーシステム100は、環境の中に存在する1つまたは複数のステッカー160を識別することができる。ステッカーシステム100は、センサーを用いてステッカー160を検出することが可能である、HMD110またはコンピューティングデバイス120からステッカー160に関連付けられる情報を受信することができる。情報は、ステッカー160において符号化されるデジタル情報、および/または取得されたシーン140についての他の情報、例えば、ステッカー160に近接する他のオブジェクトの存在、サイズ、および位置を含むことができる。一例示として、ステッカーシステム100は、受信した情報を用いることが可能であり、HMD110の位置からステッカー160の位置までの位置オフセット135を算定する。ステッカーシステム100は、オフセット135を用いることができ、HMD110および/またはステッカー160の位置に対するデジタルコンテンツ150を生成、修正、または表示する。
ある実施形態において、(例えば、HMD110によって)ステッカーシステム100は、ステッカー160に関連付けられる情報を用いることができ、暗号化キーを生成し、ネットワークアクセスポイント145と通信する。ある実施形態において、ステッカーシステム100は、対称鍵交換を含む公開鍵暗号の例示的なクラスである楕円曲線暗号(ECC)を用いる。ステッカーシステム100は、ECCを用いて暗号化キーを生成し、これは、ネットワークアクセスポイント145、または他のセキュリティデバイスもしくはシステムによって用いられることができ、HMD110またはコンピューティングデバイス120の真正性を検証する。ある実施形態において、ステッカー160は、ステッカーシステム100によって用いられる追加のトークンを提供することが可能であり、例えば、ECCの検証の後に、真正性を検証する。さまざまな実施形態において、ステッカー160が強化されたセキュリティを提供するのは、ステッカー160がHMD110に隣接して物理的に存在する必要があるためであり、それによって、HMD110がステッカー160の画像、例えば、具体的にステッカー160のQRコードを取得することが可能である。
あらゆる実施形態において、ステッカーシステム100は、例えば、医者および/または医療処置を実行する他の要員など、多様なHMD110および/またはユーザー105を含む使用例において、ステッカー160に関連付けられる情報を用いることができる。例えば、HMD110は、多様なHMD110間の共有座標系におけるネットワーク130を介して算定されたオフセット135をやりとりすることができ、他のHMD110のうちの1つもしくは複数(またはすべて)の補正を確立する。この態様において、1つまたは複数のHMD110は、少なくとも1つのHMD110がステッカー160を検出し、関連する符号化情報を取得したと判断するステッカーシステム100に応答して、デジタルコンテンツ150を表示または変更することができる。別の態様において、特定のHMD110は、位置または向きセンサーを用いて、ステッカー160のうちの少なくとも一部がHMD110の画像センサーの視野外にあるという判断に応答して、デジタルコンテンツ150を表示することができる。
図2は、本発明のさまざまな実施形態によるステッカーシステム100のデータフロー図である。ステッカーシステム100は、ステッカー160から取得されたデジタル情報を用いることができ、またはユーザーによって入力されることができ、1つまたは複数の位置および/または向きデータ、暗号化キー、および1回限りの使用手順コードを生成する。さまざまな実施形態において、(例えば、HMD110またはコンピューティングデバイス120の)画像センサー200は、ステッカー160によって符号化された情報を含む画像を取得する。ステッカーシステム100は、画像センサー200の較正パラメーター205、およびコード認識アルゴリズム210の座標系を用いることが可能であり、例えば、1つまたは複数のスケール、距離、および3次元までの角度情報である位置情報215を抽出する。距離および角度は、画像センサー200とステッカー160との間の相対位置を示すことができる。スケールは、画像センサー200、または別の基準によって取得された画像に対するステッカー160のサイズを示すことができる。ステッカーシステム100は、例えば、HMD110または他のディスプレイに3次元のARコンテンツを表示するために、位置情報215を用いることができ、(例えば、3次元)座標系220の原点を判断する。
図3は、本発明のさまざまな実施形態による例示的なステッカーの図である。ステッカー300は、QRコードに隣接する解剖学的用語を含むQRコードを含み、(例えば、外科的手術)台または別のオブジェクト上の患者に対するステッカー300を配置するためのヒントまたは指示として役立つ。ステッカー310は、ステッカー配置の正しい方向を示す人型、または(患者を表現する)漫画のアイコンを含むQRコードを含む。
図4は、本発明のさまざまな実施形態によるステッカーを用いるデバイス登録のプロセス400のフロー図である。さまざまな実施形態において、ステッカーシステム100は、HMD110(またはコンピューティングデバイス120)などのデバイスを登録することができ、医療または治療介入処置に関連付けられる情報を受信または提供するHMD110を許可する。追加的または代替的に、登録は、部屋または別の基準の境界に対して登録されたデバイスの位置を判断(または再較正)することに用いられることが可能である。ステッカーシステム100は、図1に図示されるシステム環境における方法400を実行することができる。
本発明の実施形態の前述の説明は、例示の目的で提示されており、網羅的であること、または開示された正確な形態に限定することは、意図されていない。関連技術分野における当業者は、上記の開示を考慮すると、多くの修正例および変形例が可能となることを理解することが可能である。
Claims (14)
- コンピューティングデバイスと、
ユーザーによって着用されるヘッドマウントデバイス(HMD)と、
基準マーカーを含むステッカーと、
命令を格納する非一時的なコンピュータ可読記憶媒体とを備え、前記命令が1つまたは複数のプロセッサによって実行された場合に、前記1つまたは複数のプロセッサに、
前記HMDの画像センサーによって取得された前記ステッカーの画像を受信するステップであって、前記画像は、前記基準マーカーを示しているステップと、
前記画像の中の前記基準マーカーを処理することによって登録情報を判断するステップと、
前記HMDの位置情報を判断するステップと、
前記登録情報および前記位置情報を用いて、前記HMDに対する前記ステッカーの位置を判断するステップと、
前記ステッカーの位置に基づいて前記ユーザーに提示するために前記HMDにグラフィックを提供するステップと、
医療処置のために前記登録情報を用いて暗号化キーを生成するステップであって、前記暗号化キーは、前記ステッカーに固有であるステップと、
前記HMDおよび前記コンピューティングデバイスが前記医療処置に用いられていることを判断するステップと、
前記HMDおよび前記コンピューティングデバイスが前記医療処置に用いられていることを判断するステップに応答して、前記位置情報を前記HMDから前記コンピューティングデバイスに前記暗号化キーを用いて無線ネットワーク通信を介して送信するステップとを含むステップを実行させる、
システム。 - 前記非一時的なコンピュータ可読記憶媒体は、前記1つまたは複数のプロセッサによって実行された場合に、前記1つまたは複数のプロセッサに、
前記ステッカーの前記基準マーカーを示す追加の画像を処理することによって追加の登録情報を判断するステップであって、前記追加の画像は、追加のHMDによって取得された、ステップと、
前記登録情報と前記追加の登録情報とを比較することによって、前記HMDおよび前記追加のHMDが前記医療処置に用いられていることを判断するステップとを含むステップを実行させるさらなる命令を格納する、
請求項1に記載のシステム。 - 前記非一時的なコンピュータ可読記憶媒体は、前記1つまたは複数のプロセッサによって実行された場合に、前記1つまたは複数のプロセッサに、
前記ステッカーと前記HMDとの間の距離および角度を3次元で判断することによって、前記HMDに対する前記ステッカーの位置を判断するステップを実行させるさらなる命令を格納する、
請求項1に記載のシステム。 - 前記グラフィックのサイズまたは向きは、前記距離および角度を用いて判断される、
請求項3に記載のシステム。 - 前記非一時的なコンピュータ可読記憶媒体は、前記1つまたは複数のプロセッサによって実行された場合に、前記1つまたは複数のプロセッサに、
前記グラフィックとして拡張現実のコンテンツを生成するステップであって、前記HMDは、前記拡張現実のコンテンツを提示するよう構成されるディスプレイを含むステップを実行させるさらなる命令を格納する、
請求項1に記載のシステム。 - 前記基準マーカーは、QRコードまたはバーコードである、
請求項1に記載のシステム。 - 画像センサーによって取得されたステッカーの画像を受信するステップであって、前記画像は、前記ステッカーの基準マーカーを示しているステップと、
前記画像の中の前記ステッカーの前記基準マーカーを処理することによって登録情報を判断するステップと、
ユーザーによって着用されるヘッドマウントデバイス(HMD)の位置情報を判断するステップと、
前記登録情報および前記位置情報を用いて、前記HMDに対する前記ステッカーの位置を判断するステップと、
前記ステッカーの位置に基づいて前記HMDによって前記ユーザーに提示するためにグラフィックを提供するステップと、
医療処置のために前記登録情報を用いて暗号化キーを生成するステップであって、前記暗号化キーは、前記ステッカーに固有であるステップと、
前記HMDおよびコンピューティングデバイスが前記医療処置に用いられていることを判断するステップと、
前記HMDおよび前記コンピューティングデバイスが前記医療処置に用いられていることを判断するステップに応答して、前記位置情報を前記HMDから前記コンピューティングデバイスに前記暗号化キーを用いて無線ネットワーク通信を介して送信するステップと
を備える、
方法。 - 前記ステッカーの前記基準マーカーを示す追加の画像を処理することによって、追加の登録情報を判断するステップであって、前記追加の画像は、追加のHMDによって取得された、ステップと、
前記登録情報と前記追加の登録情報とを比較することによって、前記HMDおよび前記追加のHMDが前記医療処置に用いられていることを判断するステップとをさらに備える、
請求項7に記載の方法。 - 前記HMDに対する前記ステッカーの位置を判断するステップは、
前記ステッカーと前記HMDとの間の距離および角度を3次元で判断するステップを含む、
請求項7に記載の方法。 - 前記グラフィックのサイズまたは向きは、前記距離および角度を用いて判断される、
請求項9に記載の方法。 - 前記グラフィックとして拡張現実のコンテンツを生成するステップであって、前記HMDは、前記拡張現実のコンテンツを提示するよう構成されるディスプレイを含むステップをさらに備える、
請求項7に記載の方法。 - 前記画像センサーは、前記HMDに結合されている、
請求項7に記載の方法。 - 前記基準マーカーは、QRコードまたはバーコードである、
請求項7に記載の方法。 - 非一時的なコンピュータ可読記憶媒体に格納される命令であって、前記命令が1つまたは複数のプロセッサによって実行された場合に、前記1つまたは複数のプロセッサに、
画像センサーによって取得されたステッカーの画像を受信するステップであって、前記画像は、前記ステッカーの基準マーカーを示しているステップと、
前記画像の中の前記ステッカーの前記基準マーカーを処理することによって登録情報を判断するステップと、
ユーザーによって着用されるヘッドマウントデバイス(HMD)の位置情報を判断するステップと、
前記登録情報および前記位置情報を用いて、前記HMDに対する前記ステッカーの位置を判断するステップと、
前記ステッカーの位置に基づいて前記ユーザーに提示するために前記HMDにグラフィックを提供するステップと、
医療処置のために前記登録情報を用いて暗号化キーを生成するステップであって、前記暗号化キーは、前記ステッカーに固有であるステップと、
前記HMDおよびコンピューティングデバイスが前記医療処置に用いられていることを判断するステップと、
前記HMDおよび前記コンピューティングデバイスが前記医療処置に用いられていることを判断するステップに応答して、前記位置情報を前記HMDから前記コンピューティングデバイスに前記暗号化キーを用いて無線ネットワーク通信を介して送信するステップとを含むステップを実行させる、
非一時的なコンピュータ可読記憶媒体。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201862677544P | 2018-05-29 | 2018-05-29 | |
US62/677,544 | 2018-05-29 | ||
PCT/US2019/033974 WO2019231849A1 (en) | 2018-05-29 | 2019-05-24 | Disposable sticker within augmented reality environment |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2021526701A JP2021526701A (ja) | 2021-10-07 |
JPWO2019231849A5 JPWO2019231849A5 (ja) | 2022-06-01 |
JP7105996B2 true JP7105996B2 (ja) | 2022-07-25 |
Family
ID=68694117
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021517551A Active JP7105996B2 (ja) | 2018-05-29 | 2019-05-24 | 拡張現実環境内の使い捨てステッカー |
Country Status (6)
Country | Link |
---|---|
US (2) | US10733960B2 (ja) |
EP (1) | EP3801344A4 (ja) |
JP (1) | JP7105996B2 (ja) |
AU (1) | AU2019277064A1 (ja) |
CA (1) | CA3101798A1 (ja) |
WO (1) | WO2019231849A1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11373742B2 (en) * | 2019-08-23 | 2022-06-28 | Change Healthcare Holdings Llc | Augmented reality pharmacy system and method |
US11538265B2 (en) * | 2020-03-11 | 2022-12-27 | Universal City Studios Llc | Orientation tag for providing orientation information |
KR102479477B1 (ko) * | 2021-09-07 | 2022-12-20 | 주식회사 한컴위드 | 실물 상품에 인쇄된 2차원 코드와의 연동을 통해 상기 실물 상품에 매칭되는 아이템을 메타버스 환경 상에 제공할 수 있는 메타버스 서비스를 운영하기 위한 블록체인 기반의 메타버스 서비스 운영 서버 및 그 동작 방법 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006121497A (ja) | 2004-10-22 | 2006-05-11 | Nec Corp | 近接する端末間における認証方法、秘匿情報の配送方法、装置、システム、及び、プログラム |
US20170354342A1 (en) | 2014-11-30 | 2017-12-14 | Elbit Systems Ltd. | Model registration system and method |
WO2018012207A1 (ja) | 2016-07-12 | 2018-01-18 | 富士フイルム株式会社 | 画像表示システム、並びにヘッドマウントディスプレイの制御装置とその作動方法および作動プログラム |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3558104B2 (ja) * | 1996-08-05 | 2004-08-25 | ソニー株式会社 | 3次元仮想物体表示装置および方法 |
JP4537104B2 (ja) * | 2004-03-31 | 2010-09-01 | キヤノン株式会社 | マーカ検出方法、マーカ検出装置、位置姿勢推定方法、及び複合現実空間提示方法 |
US20070244825A1 (en) * | 2006-04-14 | 2007-10-18 | Gilbert Semmer | Item, accessory kit, and method for software based medical resource activation |
US9483677B2 (en) | 2010-09-20 | 2016-11-01 | Hid Global Corporation | Machine-readable symbols |
US9886552B2 (en) | 2011-08-12 | 2018-02-06 | Help Lighting, Inc. | System and method for image registration of multiple video streams |
US9143402B2 (en) | 2012-02-24 | 2015-09-22 | Qualcomm Incorporated | Sensor based configuration and control of network devices |
US20130267838A1 (en) | 2012-04-09 | 2013-10-10 | Board Of Regents, The University Of Texas System | Augmented Reality System for Use in Medical Procedures |
US9105210B2 (en) | 2012-06-29 | 2015-08-11 | Microsoft Technology Licensing, Llc | Multi-node poster location |
US8990914B2 (en) | 2012-09-28 | 2015-03-24 | Intel Corporation | Device, method, and system for augmented reality security |
KR20150096948A (ko) * | 2014-02-17 | 2015-08-26 | 엘지전자 주식회사 | 증강 현실 사진 촬영 가이드를 디스플레이 하는 헤드 마운티드 디스플레이 디바이스 및 그 제어 방법 |
US9804813B2 (en) * | 2014-11-26 | 2017-10-31 | The United States Of America As Represented By Secretary Of The Navy | Augmented reality cross-domain solution for physically disconnected security domains |
KR102347827B1 (ko) * | 2015-02-12 | 2022-01-07 | 삼성전자주식회사 | 보안 메시지 전송 장치 및 그 처리 방법 |
JP6328579B2 (ja) * | 2015-03-13 | 2018-05-23 | 富士フイルム株式会社 | 仮想オブジェクト表示システムおよびその表示制御方法並びに表示制御プログラム |
-
2019
- 2019-05-24 US US16/422,404 patent/US10733960B2/en active Active
- 2019-05-24 AU AU2019277064A patent/AU2019277064A1/en active Pending
- 2019-05-24 CA CA3101798A patent/CA3101798A1/en active Pending
- 2019-05-24 JP JP2021517551A patent/JP7105996B2/ja active Active
- 2019-05-24 WO PCT/US2019/033974 patent/WO2019231849A1/en unknown
- 2019-05-24 EP EP19811017.3A patent/EP3801344A4/en active Pending
-
2020
- 2020-07-10 US US16/926,343 patent/US10964291B2/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006121497A (ja) | 2004-10-22 | 2006-05-11 | Nec Corp | 近接する端末間における認証方法、秘匿情報の配送方法、装置、システム、及び、プログラム |
US20170354342A1 (en) | 2014-11-30 | 2017-12-14 | Elbit Systems Ltd. | Model registration system and method |
WO2018012207A1 (ja) | 2016-07-12 | 2018-01-18 | 富士フイルム株式会社 | 画像表示システム、並びにヘッドマウントディスプレイの制御装置とその作動方法および作動プログラム |
Also Published As
Publication number | Publication date |
---|---|
US20190371272A1 (en) | 2019-12-05 |
WO2019231849A1 (en) | 2019-12-05 |
US20200342832A1 (en) | 2020-10-29 |
EP3801344A1 (en) | 2021-04-14 |
CA3101798A1 (en) | 2019-12-05 |
US10964291B2 (en) | 2021-03-30 |
EP3801344A4 (en) | 2022-03-09 |
JP2021526701A (ja) | 2021-10-07 |
AU2019277064A1 (en) | 2021-01-21 |
US10733960B2 (en) | 2020-08-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10964291B2 (en) | Disposable sticker within augmented reality environment | |
US11836284B2 (en) | Sensor fusion for electromagnetic tracking | |
JP7267209B2 (ja) | 滅菌野及び他の作業環境のためのユーザインターフェースシステム | |
TWI722280B (zh) | 用於多個自由度之控制器追蹤 | |
US11829526B2 (en) | Gaze based interface for augmented reality environment | |
Harders et al. | Calibration, registration, and synchronization for high precision augmented reality haptics | |
EP3593226B1 (en) | Medical augmented reality navigation | |
Andrews et al. | Registration techniques for clinical applications of three-dimensional augmented reality devices | |
US11474970B2 (en) | Artificial reality system with inter-processor communication (IPC) | |
EP2962237A1 (en) | Systems and methods for authenticating a user based on a biometric model associated with the user | |
CN113227879A (zh) | 用于电磁跟踪的环境电磁失真校正 | |
US20230404680A1 (en) | Method for determining the spatial position of objects | |
US11412050B2 (en) | Artificial reality system with virtual wireless channels | |
US20210200498A1 (en) | Method for information display, processing device, and display system | |
Bannis et al. | IDIoT: Multimodal framework for ubiquitous identification and assignment of human-carried wearable devices | |
Liu et al. | A portable projection mapping device for medical augmented reality in single-stage cranioplasty | |
De Luca et al. | Accurate Registration of 3D Models with Organs in Augmented Reality Through Inertial Sensors |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220524 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220524 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20220524 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220614 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220712 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7105996 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |