JP5765019B2 - 表示制御装置、表示制御方法、およびプログラム - Google Patents
表示制御装置、表示制御方法、およびプログラム Download PDFInfo
- Publication number
- JP5765019B2 JP5765019B2 JP2011078072A JP2011078072A JP5765019B2 JP 5765019 B2 JP5765019 B2 JP 5765019B2 JP 2011078072 A JP2011078072 A JP 2011078072A JP 2011078072 A JP2011078072 A JP 2011078072A JP 5765019 B2 JP5765019 B2 JP 5765019B2
- Authority
- JP
- Japan
- Prior art keywords
- display
- real
- real space
- image
- moving image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04842—Selection of displayed objects or displayed text elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
- G09G5/37—Details of the operation on graphic patterns
- G09G5/377—Details of the operation on graphic patterns for mixing or overlaying two or more graphic patterns
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2370/00—Aspects of data communication
- G09G2370/02—Networking aspects
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Library & Information Science (AREA)
- Computer Hardware Design (AREA)
- Multimedia (AREA)
- Software Systems (AREA)
- Computer Graphics (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- User Interface Of Digital Computer (AREA)
- Processing Or Creating Images (AREA)
- Controls And Circuits For Display Device (AREA)
- Ultra Sonic Daignosis Equipment (AREA)
- Apparatus For Radiation Diagnosis (AREA)
Description
1.ARシステムの概要
2.各実施形態の説明
2−1.第1の実施形態
2−2.第2の実施形態
2−3.第3の実施形態
2−4.第4の実施形態
3.むすび
本開示によるARシステムは、一例として「2−1.第1の実施形態」〜「2−4.第4の実施形態」において詳細に説明するように、多様な形態で実施され得る。また、各実施形態によるARシステムは、
A.実空間の動画を含む実空間動画と、実空間の静止画および当該静止画に含まれる実オブジェクトに対応する仮想オブジェクトを含む合成画と、の間で表示装置の表示を遷移させる制御部(241〜244)、
を備える表示制御装置(携帯端末20、ARサーバ30)を含む。
図3は、携帯端末20のハードウェア構成を示した説明図である。図3に示したように、携帯端末20は、CPU(Central Processing Unit)201と、ROM(Read Only Memory)202と、RAM(Random Access Memory)203と、入力装置208と、出力装置210と、ストレージ装置211と、ドライブ212と、撮像装置213と、通信装置215とを備える。
以上、図1〜図3を参照し、本開示によるARシステムの基本構成を説明した。以下、図4〜図15を参照し、本開示による第1の実施形態〜第4の実施形態について詳細に説明する。
(携帯端末の構成)
図4は、第1の実施形態による携帯端末20−1の構成を示した機能ブロック図である。図4に示したように、第1の実施形態による携帯端末20−1は、ディスプレイ26と、タッチパネル27と、撮像装置213と、特徴量DB220と、画像認識部224と、仮想オブジェクトDB228と、仮想オブジェクト取得部232と、制御部241と、を備える。
ここで、図5を参照し、リアルタイム認識画面および静止画操作画面の具体的構成を説明する。図5に示したように、リアルタイム認識モードにおいて生成されるリアルタイム認識画面P1は、実オブジェクトである駅案内板40、および駅案内板40に重畳された仮想オブジェクトであるタイムテーブル52の表示を含む。ユーザは、リアルタイム認識画面P1を維持するためには、図5に示したように携帯端末20−1の撮像方向を駅案内板40に向け続ける必要がある。
続いて、制御部241が動作モードを遷移するか否かを判断するための遷移基準について説明する。
(1−1)リアルタイム認識モードにおいて画像認識部224により実オブジェクトが認識されたこと。
(1−2)ユーザの指のような操作体がタッチパネル27に接触したこと。
(1−3)操作体がタッチパネル27から離隔したこと。
(1−4)操作体のタッチパネル27への接触または離隔が、実オブジェクトの判定領域内で検出されたこと。
(2−1)ユーザの指のような操作体がタッチパネル27に接触したこと。
(2−2)操作体がタッチパネル27から離隔したこと。
(2−3)操作体のタッチパネル27への接触または離隔が、実オブジェクトの判定領域外で検出されたこと。
(2−4)リターンキー66が選択されたこと。
続いて、図7および図8を参照し、第1の実施形態による携帯端末20−1の動作を説明する。図7および図8に示すように、携帯端末20−1は、認識処理プロセスおよびユーザIF系プロセスを並列的に実行することが可能である。
304)。そして、画像認識部224は、実空間画像が更新された場合、実空間画像に含まれる実オブジェクトの認識、および実オブジェクトの姿勢認識を試みる(S308)。S308において実オブジェクトが認識された場合、実オブジェクトに対応する仮想オブジェクトを仮想オブジェクト取得部232が仮想オブジェクトDB228から取得し、仮想オブジェクト取得部232により取得された仮想オブジェクトの表示を制御部241が生成する(S316)。なお、実空間画像が更新されていないと判断された場合(S304/no)、S308において実オブジェクトが認識されなかった場合(S312/no)、またはS316の処理の後には、S304からの処理が繰り返される。
以上、本開示の第1の実施形態を説明した。続いて、本開示の第2の実施形態を説明する。第1の実施形態では、動作モードの遷移基準としてユーザの指とタッチパネル26との接触または離隔などの明示的な操作を説明したが、第2の実施形態では、さらなる動作モードの遷移基準を提案する。
なお、モーションセンサ28により遷移基準を満たす動きが検出された時点で撮像された実空間画像には、ユーザの興味対象の実オブジェクトが含まれていない場合が考えられる。そこで、第2の実施形態による携帯端末20−2は、過去の所定期間に撮像された実空間画像を保持しておき、制御部242は、モーションセンサ28により遷移基準を満たす動きが検出される前の実空間画像を静止画操作画面のための静止画として用いてもよい。特に、動きパターンの開示時の実空間画像を静止画操作画面のための静止画として用いることが効果的である。
以上、本開示の第2の実施形態を説明した。続いて、本開示の第3の実施形態を説明する。本開示の第3の実施形態では、静止画操作画面により品質の高い静止画を用いるための構成を提案する。
以上、本開示の第3の実施形態を説明した。続いて、本開示の第4の実施形態を説明する。第1の〜第3の実施形態では携帯端末が単独でARを実現する例を説明したが、本開示の第4の実施形態のように、携帯端末とネットワーク側に配置されたサーバとが共同してARを実現することも可能である。
図13は、第4の実施形態の第1の動作例を示したシーケンス図である。なお、第1の動作例では、リアルタイム認識モードから静止画操作モードへの遷移基準が、ユーザがタッチパネル27をタップしたこと、すなわち、ユーザの指がタッチパネル27に接触した後にタッチパネル27から離隔したことである場合を考える。
図14は、第4の実施形態の第2の動作例を示したシーケンス図である。なお、第2の動作例では、リアルタイム認識モードから静止画操作モードへの遷移基準が、リアルタイム認識モードにおいて画像認識部224により実オブジェクトが認識されたこと、かつ、ユーザがタッチパネル27をタップしたことである場合を考える。
図15は、第4の実施形態の第3の動作例を示したシーケンス図である。なお、第3の動作例では、リアルタイム認識モードから静止画操作モードへの遷移基準が、ユーザの指がタッチパネルに接触し、かつ、携帯端末20−4の姿勢変化が検出されたことである場合を考える。
以上説明したように、本開示による携帯端末20は静止画操作モードを有するので、ユーザが携帯端末20の撮像方向を実オブジェクトに向け続けなくても、実空間の静止画に仮想オブジェクトが重畳された静止画操作画面をディスプレイ26に表示させることができる。このため、ユーザによる携帯端末20の使用感、および仮想オブジェクトの表示の操作性を向上することが可能である。
(1)
実空間の動画を含む実空間動画と、実空間の静止画および前記静止画に含まれる実オブジェクトに対応する仮想オブジェクトを含む合成画と、の間で表示装置の表示を遷移させる制御部を備える、表示制御装置。
(2)
前記実空間動画は、撮像装置により撮像中の実空間の動画を含む、(1)に記載の表示制御装置。
(3)
前記合成画に含まれる前記仮想オブジェクトの表示はユーザ操作により変化する、(1)または(2)に記載の表示制御装置。
(4)
前記表示制御装置は、前記実空間動画において前記実オブジェクトを認識する認識部をさらに備え、
前記制御部は、前記認識部により前記実オブジェクトが認識された場合に前記表示装置の表示を前記実空間動画から前記合成画に遷移させる、(1)〜(3)のいずれか一項に記載の表示制御装置。
(5)
前記表示制御装置は、ユーザ操作を検出する操作検出部をさらに備え、
前記制御部は、前記操作検出部により所定のユーザ操作が検出された場合に前記表示装置の表示を遷移させる、(1)〜(4)のいずれか一項に記載の表示制御装置。
(6)
前記操作検出部は、前記表示装置上に配置されるタッチパネルに対する前記所定のユーザ操作を検出する、(5)に記載の表示制御装置。
(7)
前記制御部は、前記タッチパネルに対する前記実オブジェクトの判定領域におけるユーザ操作が検出された場合、前記表示装置の表示を前記実空間動画から前記合成画に遷移させる、(6)に記載の表示制御装置。
(8)
前記制御部は、前記タッチパネルに対する前記実オブジェクトの判定領域以外におけるユーザ操作が検出された場合、前記表示装置の表示を前記合成画から前記実空間動画に遷移させる、(7)に記載の表示制御装置。
(9)
前記合成画は遷移操作ボタンを含み、
前記制御部は、前記タッチパネルに対する前記遷移操作ボタンにおけるユーザ操作が検出された場合、前記表示装置の表示を前記合成画から前記実空間動画に遷移させる、(8)に記載の表示制御装置。
(10)
前記操作検出部は前記表示制御装置の動きを検出する動きセンサを含み、
前記制御部は、前記動きセンサにより第1の動きパターンが検出された場合、前記表示装置の表示を前記実空間動画から前記合成画に遷移させる、(5)〜(9)のいずれか一項に記載の表示制御装置。
(11)
前記制御部は、前記動きセンサにより、前記第1の動きパターンと異なる第2の動きパターンが検出された場合、前記合成画を前記実空間動画に遷移させる、(10)に記載の表示制御装置。
(12)
前記表示制御装置は、ネットワーク上のサーバと通信する通信部をさらに備え、
前記通信部は、前記実オブジェクトに対応する前記仮想オブジェクトを前記サーバから受信する、(1)〜(11)のいずれか一項に記載の表示制御装置。
(13)
前記通信部は、前記操作検出部により前記所定のユーザ操作の一部が検出された場合に前記仮想オブジェクトの送信を前記サーバに要求し、
前記制御部は、前記操作検出部により前記所定のユーザ操作の全体が検出された後に前記表示装置の表示を前記合成画に遷移させる、(12)に記載の表示制御装置。
(14)
前記通信部は、前記認識部により前記実オブジェクトが認識された場合に前記仮想オブジェクトの送信を前記サーバに要求し、
前記制御部は、前記操作検出部により前記所定のユーザ操作が検出された後に前記表示装置の表示を前記合成画に遷移させる、(12)に記載の表示制御装置。
(15)
前記表示制御装置は、前記実空間動画を構成する各フレームの品質を測定する品質測定部をさらに備え、
前記制御部は、前記品質測定部による測定結果に基づいて前記実空間の動画を構成する1つのフレームを前記合成画に含める前記静止画として選択する、(1)〜(14)のいずれか一項に記載の表示制御装置。
(16)
実空間の動画を含む実空間動画と、実空間の静止画および前記静止画に含まれる実オブジェクトに対応する仮想オブジェクトを含む合成画と、の間で表示装置の表示を遷移させる、表示制御方法。
(17)
コンピュータを、
実空間の動画を含む実空間動画と、実空間の静止画および前記静止画に含まれる実オブジェクトに対応する仮想オブジェクトを含む合成画と、の間で表示装置の表示を遷移させる表示制御装置、として機能させるためのプログラム。
(18)
前記実空間動画は、撮像装置により撮像中の実空間の動画を含む、(17)に記載のプログラム。
(19)
前記合成画に含まれる前記仮想オブジェクトの表示はユーザ操作により変化する、(17)または(18)に記載のプログラム。
(20)
前記表示制御装置は、前記実空間動画において前記実オブジェクトを認識する認識部をさらに備え、
前記制御部は、前記認識部により前記実オブジェクトが認識された場合に前記表示装置の表示を前記実空間動画から前記合成画に遷移させる、(17)〜(19)のいずれか一項に記載のプログラム。
26 ディスプレイ
27 タッチパネル
28 モーションセンサ
30 ARサーバ
213 撮像装置
220 特徴量DB
224 画像認識部
228、328 仮想オブジェクトDB
232、332 仮想オブジェクト取得部
241〜244 制御部
250 ブレ測定部
260、360 通信部
Claims (18)
- 実空間の動画を含む実空間動画と、実空間の静止画および前記静止画に含まれる実オブジェクトに対応する仮想オブジェクトを含む合成画と、の間で、前記実空間動画から前記実オブジェクトが認識された場合に表示装置の表示を前記実空間動画から前記合成画に遷移させる制御部を備える、表示制御装置。
- 前記実空間動画は、撮像装置により撮像中の実空間の動画を含む、請求項1に記載の表示制御装置。
- 前記合成画に含まれる前記仮想オブジェクトの表示はユーザ操作により変化する、請求項1に記載の表示制御装置。
- 前記表示制御装置は、ユーザ操作を検出する操作検出部をさらに備え、
前記制御部は、前記操作検出部により所定のユーザ操作が検出された場合に前記表示装置の表示を遷移させる、請求項1に記載の表示制御装置。 - 前記操作検出部は、前記表示装置上に配置されるタッチパネルに対する前記所定のユーザ操作を検出する、請求項4に記載の表示制御装置。
- 前記制御部は、前記タッチパネルに対する前記実オブジェクトの判定領域におけるユーザ操作が検出された場合、前記表示装置の表示を前記実空間動画から前記合成画に遷移させる、請求項5に記載の表示制御装置。
- 前記制御部は、前記タッチパネルに対する前記実オブジェクトの判定領域以外におけるユーザ操作が検出された場合、前記表示装置の表示を前記合成画から前記実空間動画に遷移させる、請求項6に記載の表示制御装置。
- 前記合成画は遷移操作ボタンを含み、
前記制御部は、前記タッチパネルに対する前記遷移操作ボタンにおけるユーザ操作が検出された場合、前記表示装置の表示を前記合成画から前記実空間動画に遷移させる、請求項7に記載の表示制御装置。 - 前記操作検出部は前記表示制御装置の動きを検出する動きセンサを含み、
前記制御部は、前記動きセンサにより第1の動きパターンが検出された場合、前記表示装置の表示を前記実空間動画から前記合成画に遷移させる、請求項4に記載の表示制御装置。 - 前記制御部は、前記動きセンサにより、前記第1の動きパターンと異なる第2の動きパターンが検出された場合、前記合成画を前記実空間動画に遷移させる、請求項9に記載の表示制御装置。
- 前記表示制御装置は、ネットワーク上のサーバと通信する通信部をさらに備え、
前記通信部は、前記実オブジェクトに対応する前記仮想オブジェクトを前記サーバから受信する、請求項4に記載の表示制御装置。 - 前記通信部は、前記操作検出部により前記所定のユーザ操作の一部が検出された場合に前記仮想オブジェクトの送信を前記サーバに要求し、
前記制御部は、前記操作検出部により前記所定のユーザ操作の全体が検出された後に前記表示装置の表示を前記合成画に遷移させる、請求項11に記載の表示制御装置。 - 前記通信部は、前記実オブジェクトが認識された場合に前記仮想オブジェクトの送信を前記サーバに要求し、
前記制御部は、前記操作検出部により前記所定のユーザ操作が検出された後に前記表示装置の表示を前記合成画に遷移させる、請求項11に記載の表示制御装置。 - 前記表示制御装置は、前記実空間動画を構成する各フレームの品質を測定する品質測定部をさらに備え、
前記制御部は、前記品質測定部による測定結果に基づいて前記実空間の動画を構成する1つのフレームを前記合成画に含める前記静止画として選択する、請求項1に記載の表示制御装置。 - 実空間の動画を含む実空間動画と、実空間の静止画および前記静止画に含まれる実オブジェクトに対応する仮想オブジェクトを含む合成画と、の間で、前記実空間動画から前記実オブジェクトが認識された場合に表示装置の表示を前記実空間動画から前記合成画に遷移させる、表示制御方法。
- コンピュータを、
実空間の動画を含む実空間動画と、実空間の静止画および前記静止画に含まれる実オブジェクトに対応する仮想オブジェクトを含む合成画と、の間で、前記実空間動画から前記実オブジェクトが認識された場合に表示装置の表示を前記実空間動画から前記合成画に遷移させる表示制御装置、として機能させるためのプログラム。 - 前記実空間動画は、撮像装置により撮像中の実空間の動画を含む、請求項16に記載のプログラム。
- 前記合成画に含まれる前記仮想オブジェクトの表示はユーザ操作により変化する、請求項16に記載のプログラム。
Priority Applications (10)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011078072A JP5765019B2 (ja) | 2011-03-31 | 2011-03-31 | 表示制御装置、表示制御方法、およびプログラム |
EP12765510.8A EP2691835A4 (en) | 2011-03-31 | 2012-03-22 | DISPLAY CONTROL DEVICE, DISPLAY CONTROL PROCEDURE AND PROGRAM |
KR1020137018560A KR20140009285A (ko) | 2011-03-31 | 2012-03-22 | 표시 제어 장치, 표시 제어 방법 및 프로그램 |
RU2013143154/08A RU2013143154A (ru) | 2011-03-31 | 2012-03-22 | Устройство управления отображением, способ управления отображением и программа |
PCT/JP2012/001963 WO2012132334A1 (en) | 2011-03-31 | 2012-03-22 | Display control device, display control method, and program |
BR112013024386A BR112013024386A2 (pt) | 2011-03-31 | 2012-03-22 | aparelho, método, e, mídia legível por computador |
US14/006,856 US9373195B2 (en) | 2011-03-31 | 2012-03-22 | Display control device, display control method, and program |
CN2012201154018U CN203224887U (zh) | 2011-03-31 | 2012-03-23 | 显示控制设备 |
CN201210080649.XA CN102737228B (zh) | 2011-03-31 | 2012-03-23 | 显示控制设备、显示控制方法和程序 |
US15/097,409 US10198867B2 (en) | 2011-03-31 | 2016-04-13 | Display control device, display control method, and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011078072A JP5765019B2 (ja) | 2011-03-31 | 2011-03-31 | 表示制御装置、表示制御方法、およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012212343A JP2012212343A (ja) | 2012-11-01 |
JP5765019B2 true JP5765019B2 (ja) | 2015-08-19 |
Family
ID=46930118
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011078072A Active JP5765019B2 (ja) | 2011-03-31 | 2011-03-31 | 表示制御装置、表示制御方法、およびプログラム |
Country Status (8)
Country | Link |
---|---|
US (2) | US9373195B2 (ja) |
EP (1) | EP2691835A4 (ja) |
JP (1) | JP5765019B2 (ja) |
KR (1) | KR20140009285A (ja) |
CN (2) | CN203224887U (ja) |
BR (1) | BR112013024386A2 (ja) |
RU (1) | RU2013143154A (ja) |
WO (1) | WO2012132334A1 (ja) |
Families Citing this family (38)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9171384B2 (en) * | 2011-11-08 | 2015-10-27 | Qualcomm Incorporated | Hands-free augmented reality for wireless communication devices |
US20130297460A1 (en) | 2012-05-01 | 2013-11-07 | Zambala Lllp | System and method for facilitating transactions of a physical product or real life service via an augmented reality environment |
GB201216210D0 (en) * | 2012-09-12 | 2012-10-24 | Appeartome Ltd | Augmented reality apparatus and method |
JP6286123B2 (ja) * | 2012-12-27 | 2018-02-28 | サターン ライセンシング エルエルシーSaturn Licensing LLC | 情報処理装置、コンテンツ提供方法及びコンピュータプログラム |
EP2953099B1 (en) * | 2013-02-01 | 2019-02-13 | Sony Corporation | Information processing device, terminal device, information processing method, and programme |
US9367761B2 (en) * | 2013-02-15 | 2016-06-14 | Samsung Electronics Co., Ltd. | Electronic device and object recognition method in electronic device |
US9547917B2 (en) | 2013-03-14 | 2017-01-17 | Paypay, Inc. | Using augmented reality to determine information |
US9535496B2 (en) * | 2013-03-15 | 2017-01-03 | Daqri, Llc | Visual gestures |
JP2014191718A (ja) * | 2013-03-28 | 2014-10-06 | Sony Corp | 表示制御装置、表示制御方法および記録媒体 |
JP6304241B2 (ja) * | 2013-04-04 | 2018-04-04 | ソニー株式会社 | 表示制御装置、表示制御方法およびプログラム |
KR102165444B1 (ko) * | 2013-08-28 | 2020-10-14 | 엘지전자 주식회사 | 증강현실 이미지를 디스플레이하는 포터블 디바이스 및 그 제어 방법 |
JP6318542B2 (ja) * | 2013-10-24 | 2018-05-09 | 富士通株式会社 | 表示制御方法、表示制御プログラムおよび情報処理装置 |
JP6459972B2 (ja) * | 2013-11-13 | 2019-01-30 | ソニー株式会社 | 表示制御装置、表示制御方法、およびプログラム |
JP6303550B2 (ja) * | 2014-02-03 | 2018-04-04 | ブラザー工業株式会社 | 表示プログラムおよび表示装置 |
JP6323040B2 (ja) | 2014-02-12 | 2018-05-16 | 株式会社リコー | 画像処理装置、画像処理方法およびプログラム |
GB201404990D0 (en) * | 2014-03-20 | 2014-05-07 | Appeartome Ltd | Augmented reality apparatus and method |
CN103942049B (zh) | 2014-04-14 | 2018-09-07 | 百度在线网络技术(北京)有限公司 | 增强现实的实现方法、客户端装置和服务器 |
US9342743B2 (en) * | 2014-06-02 | 2016-05-17 | Tesa Sa | Method for supporting an operator in measuring a part of an object |
US9412205B2 (en) | 2014-08-25 | 2016-08-09 | Daqri, Llc | Extracting sensor data for augmented reality content |
JP6361432B2 (ja) * | 2014-10-01 | 2018-07-25 | 富士通株式会社 | 表示制御プログラム、表示制御方法および表示制御装置 |
KR102358548B1 (ko) | 2014-10-15 | 2022-02-04 | 삼성전자주식회사 | 디바이스를 이용한 화면 처리 방법 및 장치 |
KR20160070874A (ko) * | 2014-12-10 | 2016-06-21 | 브이앤아이 주식회사 | 모바일 기기를 이용한 위치기반 시설물 관리 시스템 |
RU2602386C1 (ru) * | 2015-05-26 | 2016-11-20 | Общество с ограниченной ответственностью "Лаборатория 24" | Способ визуализации объекта |
CN107710284B (zh) * | 2015-06-30 | 2021-11-23 | 奇跃公司 | 用于在虚拟图像生成***中更有效地显示文本的技术 |
JP2017016466A (ja) * | 2015-07-02 | 2017-01-19 | 富士通株式会社 | 端末制御方法、画像生成方法、端末制御プログラム、及び端末 |
CN105704383A (zh) * | 2016-03-24 | 2016-06-22 | 徐亚红 | 趣味图像拍摄方法 |
US11062383B2 (en) | 2016-05-10 | 2021-07-13 | Lowe's Companies, Inc. | Systems and methods for displaying a simulated room and portions thereof |
DE112016007015T5 (de) * | 2016-07-29 | 2019-03-21 | Mitsubishi Electric Corporation | Anzeigevorrichtung, anzeigesteuervorrichtung und anzeigesteuerverfahren |
CN106340215B (zh) * | 2016-11-09 | 2019-01-04 | 快创科技(大连)有限公司 | 基于ar增强现实和自适应识别的乐器辅助学习体验*** |
US10192115B1 (en) | 2017-12-13 | 2019-01-29 | Lowe's Companies, Inc. | Virtualizing objects using object models and object position data |
US10306394B1 (en) * | 2017-12-29 | 2019-05-28 | Samsung Electronics Co., Ltd. | Method of managing a plurality of devices |
EP3751422A4 (en) * | 2018-02-07 | 2021-04-21 | Sony Corporation | INFORMATION PROCESSING DEVICE, INFORMATION PROCESSING METHOD AND PROGRAM |
CN109144244A (zh) * | 2018-07-03 | 2019-01-04 | 世雅设计有限公司 | 一种增强现实辅助的方法、装置、***及增强现实设备 |
US11132841B2 (en) * | 2018-11-30 | 2021-09-28 | Facebook Technologies, Llc | Systems and methods for presenting digital assets within artificial environments via a loosely coupled relocalization service and asset management service |
CN109886199B (zh) * | 2019-02-21 | 2022-04-12 | 阿波罗智联(北京)科技有限公司 | 信息处理方法、装置、车辆及移动终端 |
JP7398201B2 (ja) * | 2019-03-29 | 2023-12-14 | 株式会社バンダイナムコエンターテインメント | プログラム、電子機器およびサーバシステム |
CN110677537B (zh) * | 2019-09-29 | 2021-05-11 | 维沃移动通信有限公司 | 便签信息显示方法、便签信息发送方法及电子设备 |
JP2022117599A (ja) * | 2021-02-01 | 2022-08-12 | キヤノン株式会社 | 画像処理装置、撮像装置、制御方法およびプログラム |
Family Cites Families (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3937506B2 (ja) * | 1997-05-12 | 2007-06-27 | 松下電器産業株式会社 | データ発信装置、データ受信表示記録装置、および情報カメラシステム |
DE10041104C1 (de) | 2000-08-22 | 2002-03-07 | Siemens Ag | Einrichtung und Verfahren zur Kommunikation zwischen einer mobilen Datenverarbeitungsvorrichtung und einer stationären Datenverarbeitungsvorrichtung |
JP2003323239A (ja) * | 2002-05-08 | 2003-11-14 | Sony Corp | 情報処理装置及び情報処理方法、記憶媒体、並びにコンピュータ・プログラム |
US20070035562A1 (en) * | 2002-09-25 | 2007-02-15 | Azuma Ronald T | Method and apparatus for image enhancement |
US7050078B2 (en) * | 2002-12-19 | 2006-05-23 | Accenture Global Services Gmbh | Arbitrary object tracking augmented reality applications |
US20060002590A1 (en) * | 2004-06-30 | 2006-01-05 | Borak Jason M | Method of collecting information for a geographic database for use with a navigation system |
US9530050B1 (en) | 2007-07-11 | 2016-12-27 | Ricoh Co., Ltd. | Document annotation sharing |
JP5032798B2 (ja) * | 2006-03-24 | 2012-09-26 | 富士フイルム株式会社 | 情報提供装置、情報提供システムおよび情報提供方法 |
JP4855130B2 (ja) * | 2006-04-27 | 2012-01-18 | 京セラ株式会社 | 情報処理装置およびデータ記録保存方法 |
JP4333704B2 (ja) * | 2006-06-30 | 2009-09-16 | アイシン・エィ・ダブリュ株式会社 | ナビゲーション装置 |
JP2008017109A (ja) * | 2006-07-05 | 2008-01-24 | Renesas Technology Corp | 携帯型撮像装置 |
US20080071559A1 (en) * | 2006-09-19 | 2008-03-20 | Juha Arrasvuori | Augmented reality assisted shopping |
US20090237546A1 (en) * | 2008-03-24 | 2009-09-24 | Sony Ericsson Mobile Communications Ab | Mobile Device with Image Recognition Processing Capability |
RU2495476C2 (ru) * | 2008-06-20 | 2013-10-10 | Инвенсис Системз, Инк. | Системы и способы для иммерсивного взаимодействия с действительными и/или имитируемыми техническими средствами для управления технологическим процессом, контроля состояния окружающей среды и производственного контроля |
JP5315111B2 (ja) | 2009-03-31 | 2013-10-16 | 株式会社エヌ・ティ・ティ・ドコモ | 端末装置、情報提示システム及び端末画面表示方法 |
KR101648339B1 (ko) | 2009-09-24 | 2016-08-17 | 삼성전자주식회사 | 휴대용 단말기에서 영상인식 및 센서를 이용한 서비스 제공 방법 및 장치 |
US20120120103A1 (en) * | 2010-02-28 | 2012-05-17 | Osterhout Group, Inc. | Alignment control in an augmented reality headpiece |
US8723888B2 (en) * | 2010-10-29 | 2014-05-13 | Core Wireless Licensing, S.a.r.l. | Method and apparatus for determining location offset information |
US8698843B2 (en) * | 2010-11-02 | 2014-04-15 | Google Inc. | Range of focus in an augmented reality application |
-
2011
- 2011-03-31 JP JP2011078072A patent/JP5765019B2/ja active Active
-
2012
- 2012-03-22 RU RU2013143154/08A patent/RU2013143154A/ru unknown
- 2012-03-22 EP EP12765510.8A patent/EP2691835A4/en not_active Ceased
- 2012-03-22 US US14/006,856 patent/US9373195B2/en active Active
- 2012-03-22 KR KR1020137018560A patent/KR20140009285A/ko not_active Application Discontinuation
- 2012-03-22 WO PCT/JP2012/001963 patent/WO2012132334A1/en active Application Filing
- 2012-03-22 BR BR112013024386A patent/BR112013024386A2/pt not_active IP Right Cessation
- 2012-03-23 CN CN2012201154018U patent/CN203224887U/zh not_active Expired - Lifetime
- 2012-03-23 CN CN201210080649.XA patent/CN102737228B/zh active Active
-
2016
- 2016-04-13 US US15/097,409 patent/US10198867B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
RU2013143154A (ru) | 2015-03-27 |
EP2691835A1 (en) | 2014-02-05 |
US10198867B2 (en) | 2019-02-05 |
BR112013024386A2 (pt) | 2019-09-24 |
JP2012212343A (ja) | 2012-11-01 |
US20160284133A1 (en) | 2016-09-29 |
CN102737228A (zh) | 2012-10-17 |
CN203224887U (zh) | 2013-10-02 |
US9373195B2 (en) | 2016-06-21 |
KR20140009285A (ko) | 2014-01-22 |
US20140009494A1 (en) | 2014-01-09 |
CN102737228B (zh) | 2017-12-12 |
EP2691835A4 (en) | 2014-12-17 |
WO2012132334A1 (en) | 2012-10-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5765019B2 (ja) | 表示制御装置、表示制御方法、およびプログラム | |
US11188187B2 (en) | Information processing apparatus, information processing method, and recording medium | |
JP5741160B2 (ja) | 表示制御装置、表示制御方法、およびプログラム | |
JP5802667B2 (ja) | ジェスチャ入力装置およびジェスチャ入力方法 | |
US11170580B2 (en) | Information processing device, information processing method, and recording medium | |
US9218781B2 (en) | Information processing apparatus, display control method, and program | |
EP2824905B1 (en) | Group recording method, machine-readable storage medium, and electronic device | |
CN111726536A (zh) | 视频生成方法、装置、存储介质及计算机设备 | |
US20150070247A1 (en) | Information processing apparatus, information processing method, and program | |
JPWO2005119591A1 (ja) | 表示制御方法および装置、プログラム、並びに携帯機器 | |
JP2013172432A (ja) | 機器制御装置、機器制御方法、機器制御プログラム、及び集積回路 | |
US11886643B2 (en) | Information processing apparatus and information processing method | |
JP5446700B2 (ja) | 情報処理装置、情報処理方法およびプログラム | |
US10133966B2 (en) | Information processing apparatus, information processing method, and information processing system | |
US20120327118A1 (en) | Display control apparatus, display control method and program | |
JPWO2014156257A1 (ja) | 表示制御装置、表示制御方法および記録媒体 | |
GB2533789A (en) | User interface for augmented reality | |
JP2010067090A (ja) | 情報端末装置 | |
JP2011123748A (ja) | 携帯端末、描画システム及び描画方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140226 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150203 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150323 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150519 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150601 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5765019 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |