JP2008040556A5 - - Google Patents

Download PDF

Info

Publication number
JP2008040556A5
JP2008040556A5 JP2006210255A JP2006210255A JP2008040556A5 JP 2008040556 A5 JP2008040556 A5 JP 2008040556A5 JP 2006210255 A JP2006210255 A JP 2006210255A JP 2006210255 A JP2006210255 A JP 2006210255A JP 2008040556 A5 JP2008040556 A5 JP 2008040556A5
Authority
JP
Japan
Prior art keywords
pointing
virtual
measuring
pointing position
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2006210255A
Other languages
English (en)
Other versions
JP4777182B2 (ja
JP2008040556A (ja
Filing date
Publication date
Application filed filed Critical
Priority to JP2006210255A priority Critical patent/JP4777182B2/ja
Priority claimed from JP2006210255A external-priority patent/JP4777182B2/ja
Priority to US11/830,356 priority patent/US20080030461A1/en
Publication of JP2008040556A publication Critical patent/JP2008040556A/ja
Publication of JP2008040556A5 publication Critical patent/JP2008040556A5/ja
Application granted granted Critical
Publication of JP4777182B2 publication Critical patent/JP4777182B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Claims (11)

  1. 撮像装置が撮像した現実画像に仮想画像を合成して提示する複合現実感提示装置であって、
    ポインティング装置が指示するポインティング位置を、当該ポインティング装置の位置姿勢情報に基づいて計測する第一計測手段と、
    前記ポインティング装置が指示するポインティング位置を前記撮像装置が撮像して得られる撮像画像中の前記ポインティング位置と、該撮像装置の位置姿勢情報に基づいて、該ポインティング位置を計測する第二計測手段と、
    前記第一計測手段と前記第二計測手段との計測結果に基づいて、前記ポインティング装置の現実ポインティング位置を計測する現実ポインティング位置計測手段と、
    前記現実ポインティング位置を計測するための基準と同一基準で、前記現実画像に合成する仮想画像を指示する仮想ポインティング装置を生成する生成手段と、
    前記仮想ポインティング装置が指示する仮想ポインティング位置を計測する仮想ポインティング位置計測手段と
    を備えることを特徴とする複合現実感提示装置。
  2. 前記現実ポインティング位置計測手段と前記仮想ポインティング位置計測手段との計測結果に基づいて、前記現実画像と前記仮想画像を合成して表示する表示手段を更に備える
    ことを特徴とする請求項1に記載の複合現実感提示装置。
  3. 前記表示手段は、更に、前記仮想ポインティング位置を示す指標を前記仮想画像上に表示する
    ことを特徴とする請求項に記載の複合現実感提示装置。
  4. 前記第二計測手段は、前記ポインティング装置が指示するポインティング位置を、複数の前記撮像装置それぞれが撮像して得られる撮像画像中の前記ポインティング位置と、該複数の撮像装置それぞれの位置姿勢情報に基づいて、計測する
    ことを特徴とする請求項1に記載の複合現実感提示装置。
  5. 前記現実ポインティング位置を示す位置情報と、前記仮想ポインティング位置を示す位置情報とを取得して、両者間の距離を算出する算出手段を更に備える
    ことを特徴とする請求項1に記載の複合現実感提示装置。
  6. 前記仮想ポインティング装置が指示する指示方向に前記仮想画像が存在するか否かを判定する判定手段と、
    前記判定手段の判定結果に基づいて、前記ポインティング装置の駆動、及び前記仮想ポインティング位置を示す指標の表示を制御する制御手段と
    を更に備えることを特徴とする請求項1に記載の複合現実感提示装置。
  7. 前記判定手段の判定の結果、前記仮想ポインティング装置が指示する指示方向に前記仮想画像が存在する場合、前記ポインティング装置の駆動を停止し、及び前記仮想ポインティング位置を示す指標を前記仮想画像上に表示する
    ことを特徴とする請求項に記載の複合現実感提示装置。
  8. 前記判定手段の判定の結果、前記仮想ポインティング装置が指示する指示方向に前記仮想画像が存在しない場合、前記ポインティング装置を駆動し、及び前記仮想ポインティング位置を示す指標の表示を禁止する
    ことを特徴とする請求項に記載の複合現実感提示装置。
  9. 前記判定手段の判定の結果、前記仮想ポインティング装置が指示する指示方向に前記仮想画像が存在しない場合、前記ポインティング装置を駆動し、及び前記仮想ポインティング位置を示す指標の表示形態を、前記仮想ポインティング装置が指示する指示方向に前記仮想画像が存在する場合の前記仮想ポインティング位置を示す指標の表示形態と異ならせて表示する
    ことを特徴とする請求項に記載の複合現実感提示装置。
  10. 撮像装置が撮像した現実画像に仮想画像を合成して提示する複合現実感提示装置の制御方法であって、
    第一計測手段が、ポインティング装置が指示するポインティング位置を、当該ポインティング装置の位置姿勢情報に基づいて計測する第一計測工程と、
    第二計測手段が、前記ポインティング装置が指示するポインティング位置を前記撮像装置が撮像して得られる撮像画像中の前記ポインティング位置と、該撮像装置の位置姿勢情報に基づいて、該ポインティング位置を計測する第二計測工程と、
    現実ポインティング位置計測手段が、前記第一計測工程と前記第二計測工程との計測結果に基づいて、前記ポインティング装置の現実ポインティング位置を計測する現実ポインティング位置計測工程と、
    生成手段が、前記現実ポインティング位置を計測するための基準と同一基準で、前記現実画像に合成する仮想画像を指示する仮想ポインティング装置を生成する生成工程と、
    仮想ポインティング位置計測手段が、前記仮想ポインティング装置が指示する仮想ポインティング位置を計測する仮想ポインティング位置計測工程と
    を備えることを特徴とする複合現実感提示装置の制御方法。
  11. 撮像装置が撮像した現実画像に仮想画像を合成して提示する複合現実感提示装置の制御をコンピュータに機能させるための、コンピュータ可読媒体に記憶されたプラグラムであって、
    前記コンピュータを、
    ポインティング装置が指示するポインティング位置を、当該ポインティング装置の位置姿勢情報に基づいて計測する第一計測手段と、
    前記ポインティング装置が指示するポインティング位置を前記撮像装置が撮像して得られる撮像画像中の前記ポインティング位置と、該撮像装置の位置姿勢情報に基づいて、該ポインティング位置を計測する第二計測手段と、
    前記第一計測手段と前記第二計測手段との計測結果に基づいて、前記ポインティング装置の現実ポインティング位置を計測する現実ポインティング位置計測手段と、
    前記現実ポインティング位置を計測するための基準と同一基準で、前記現実画像に合成する仮想画像を指示する仮想ポインティング装置を生成する生成手段と、
    前記仮想ポインティング装置が指示する仮想ポインティング位置を計測する仮想ポインティング位置計測手段
    して機能させることを特徴とするプログラム。
JP2006210255A 2006-08-01 2006-08-01 複合現実感提示装置及びその制御方法、プログラム Expired - Fee Related JP4777182B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2006210255A JP4777182B2 (ja) 2006-08-01 2006-08-01 複合現実感提示装置及びその制御方法、プログラム
US11/830,356 US20080030461A1 (en) 2006-08-01 2007-07-30 Mixed reality presentation apparatus and control method thereof, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006210255A JP4777182B2 (ja) 2006-08-01 2006-08-01 複合現実感提示装置及びその制御方法、プログラム

Publications (3)

Publication Number Publication Date
JP2008040556A JP2008040556A (ja) 2008-02-21
JP2008040556A5 true JP2008040556A5 (ja) 2009-07-16
JP4777182B2 JP4777182B2 (ja) 2011-09-21

Family

ID=39028649

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006210255A Expired - Fee Related JP4777182B2 (ja) 2006-08-01 2006-08-01 複合現実感提示装置及びその制御方法、プログラム

Country Status (2)

Country Link
US (1) US20080030461A1 (ja)
JP (1) JP4777182B2 (ja)

Families Citing this family (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
NL1035303C2 (nl) * 2008-04-16 2009-10-19 Virtual Proteins B V Interactieve virtuele reality eenheid.
US8397181B2 (en) * 2008-11-17 2013-03-12 Honeywell International Inc. Method and apparatus for marking a position of a real world object in a see-through display
KR101171660B1 (ko) * 2010-03-01 2012-08-09 이문기 증강현실의 포인팅 장치
WO2011156195A2 (en) * 2010-06-09 2011-12-15 Dynavox Systems Llc Speech generation device with a head mounted display unit
US20120005624A1 (en) 2010-07-02 2012-01-05 Vesely Michael A User Interface Elements for Use within a Three Dimensional Scene
US8643569B2 (en) * 2010-07-14 2014-02-04 Zspace, Inc. Tools for use within a three dimensional scene
JP5769392B2 (ja) * 2010-08-26 2015-08-26 キヤノン株式会社 情報処理装置およびその方法
DE102011104524A1 (de) * 2011-06-15 2012-12-20 Ifakt Gmbh Verfahren und Vorrichtung zum Ermitteln und Wiedergeben virtueller ortsbezogener Informationen für einen Raumbereich
US8638320B2 (en) 2011-06-22 2014-01-28 Apple Inc. Stylus orientation detection
WO2013019190A1 (en) 2011-07-29 2013-02-07 Hewlett-Packard Development Company, L.P. System and method of visual layering
BR112014002186B1 (pt) 2011-07-29 2020-12-29 Hewlett-Packard Development Company, L.P sistema de projeção de captura, meio executável de processamento e método de colaboração em espaço de trabalho
US9521276B2 (en) 2011-08-02 2016-12-13 Hewlett-Packard Development Company, L.P. Portable projection capture device
JP5762892B2 (ja) * 2011-09-06 2015-08-12 ビッグローブ株式会社 情報表示システム、情報表示方法、及び情報表示用プログラム
JP5966510B2 (ja) 2012-03-29 2016-08-10 ソニー株式会社 情報処理システム
US8937725B2 (en) * 2012-06-14 2015-01-20 Nikon Corporation Measurement assembly including a metrology system and a pointer that directs the metrology system
US20140168261A1 (en) * 2012-12-13 2014-06-19 Jeffrey N. Margolis Direct interaction system mixed reality environments
JP6149403B2 (ja) * 2013-01-07 2017-06-21 セイコーエプソン株式会社 表示装置、および、表示装置の制御方法
US9833697B2 (en) * 2013-03-11 2017-12-05 Immersion Corporation Haptic sensations as a function of eye gaze
US9607584B2 (en) * 2013-03-15 2017-03-28 Daqri, Llc Real world analytics visualization
JP6205189B2 (ja) * 2013-06-28 2017-09-27 オリンパス株式会社 情報提示システム及び情報提示システムの制御方法
JP2015037250A (ja) * 2013-08-14 2015-02-23 株式会社リコー 画像投影装置及びプレゼンテーションシステム
FR3011952B1 (fr) * 2013-10-14 2017-01-27 Suricog Procede d'interaction par le regard et dispositif associe
CN107079126A (zh) 2014-11-13 2017-08-18 惠普发展公司,有限责任合伙企业 图像投影
US10338687B2 (en) 2015-12-03 2019-07-02 Google Llc Teleportation in an augmented and/or virtual reality environment
EP3223208A1 (en) 2016-03-22 2017-09-27 Hexagon Technology Center GmbH Self control
JP6095191B1 (ja) * 2016-07-15 2017-03-15 ブレイニー株式会社 仮想現実システム、及び、情報処理システム
KR101853190B1 (ko) * 2016-07-19 2018-04-27 동의대학교 산학협력단 증강현실을 이용한 침구실습장치 및 방법
KR101806864B1 (ko) * 2016-10-05 2017-12-08 연세대학교 산학협력단 증강 현실 환경에서 3d 객체를 제어하기 위한 장치 및 그 방법
US20180210561A1 (en) * 2017-01-24 2018-07-26 Semiconductor Energy Laboratory Co., Ltd. Input unit, input method, input system, and input support system
CN107065195B (zh) * 2017-06-02 2023-05-02 那家全息互动(深圳)有限公司 一种模块化mr设备成像方法
US10930075B2 (en) * 2017-10-16 2021-02-23 Microsoft Technology Licensing, Llc User interface discovery and interaction for three-dimensional virtual environments
JP7102173B2 (ja) * 2018-03-09 2022-07-19 キヤノン株式会社 情報処理装置、情報処理方法、及びプログラム
WO2019244437A1 (ja) * 2018-06-18 2019-12-26 ソニー株式会社 情報処理装置、情報処理方法及びプログラム
CN110618753A (zh) * 2019-08-02 2019-12-27 常州锦瑟医疗信息科技有限公司 用于混合现实场景的指示设备、指示方法和混合现实***
JP7425641B2 (ja) * 2020-03-25 2024-01-31 鹿島建設株式会社 測距装置およびプログラム

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3287312B2 (ja) * 1998-08-13 2002-06-04 日本電気株式会社 ポインティング装置
JP2000102036A (ja) * 1998-09-22 2000-04-07 Mr System Kenkyusho:Kk 複合現実感提示システム、複合現実感提示方法、マン・マシーンインタフェース装置、およびマン・マシーンインタフェース方法
JP2003296757A (ja) * 2002-03-29 2003-10-17 Canon Inc 情報処理方法および装置
DE102005061211B4 (de) * 2004-12-22 2023-04-06 Abb Schweiz Ag Verfahren zum Erzeugen einer Mensch-Maschine-Benutzer-Oberfläche

Similar Documents

Publication Publication Date Title
JP2008040556A5 (ja)
JP4777182B2 (ja) 複合現実感提示装置及びその制御方法、プログラム
EP1881383A3 (en) Simulation device of robot system
JP2007042073A5 (ja)
US8994729B2 (en) Method for simulating operation of object and apparatus for the same
WO2008139354A3 (en) Targeting method, targeting device, computer readable medium and program element
JP2013179397A5 (ja)
JP2008123061A5 (ja)
JP2013105253A5 (ja)
EP2561799A4 (en) DEVICE FOR TESTING VISUAL FUNCTIONS
JP2011227875A5 (ja) 情報処理システム、情報処理方法及びプログラム
JP2008055101A5 (ja)
EP1878997A3 (en) Displacement sensor
US20180204387A1 (en) Image generation device, image generation system, and image generation method
JP2010055266A5 (ja)
WO2009069409A1 (ja) ゲームプログラム、ゲーム装置、およびゲーム制御方法
JP2011197358A5 (ja)
JP2013090122A5 (ja) 撮像装置、撮像方法、及びプログラム
JP2013007921A5 (ja)
JP2008293357A (ja) 情報処理方法および情報処理装置
EP2466440A3 (en) Display control program, display control apparatus, display control system, and display control method
EP2529813A3 (en) Image processing apparatus and image processing method for displaying video image capable of achieving improved operability and realism, and program for controlling image processing apparatus
JP5831151B2 (ja) 制御処理プログラム、画像表示装置、および画像表示方法
JP2017107349A5 (ja)
US20130234937A1 (en) Three-dimensional position specification method