WO2006056622A1 - Dispositivo personal con funciones de adquirir imágenes, para aplicación de recursos de realidad aumentada y método - Google Patents

Dispositivo personal con funciones de adquirir imágenes, para aplicación de recursos de realidad aumentada y método Download PDF

Info

Publication number
WO2006056622A1
WO2006056622A1 PCT/ES2004/000518 ES2004000518W WO2006056622A1 WO 2006056622 A1 WO2006056622 A1 WO 2006056622A1 ES 2004000518 W ES2004000518 W ES 2004000518W WO 2006056622 A1 WO2006056622 A1 WO 2006056622A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
images
unit
acquired
screen
Prior art date
Application number
PCT/ES2004/000518
Other languages
English (en)
French (fr)
Inventor
Ignacio Mondine Natucci
Original Assignee
Daem Interactive, Sl
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Daem Interactive, Sl filed Critical Daem Interactive, Sl
Priority to CNA2004800446106A priority Critical patent/CN101080762A/zh
Priority to JP2007542009A priority patent/JP2008521110A/ja
Priority to EP04798245A priority patent/EP1814101A1/en
Priority to PCT/ES2004/000518 priority patent/WO2006056622A1/es
Publication of WO2006056622A1 publication Critical patent/WO2006056622A1/es
Priority to US11/804,974 priority patent/US20070273644A1/en

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00323—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a measuring, monitoring or signaling apparatus, e.g. for transmitting measured information to a central location

Definitions

  • Personal device with functions to acquire images, for application of augmented reality resources and method
  • the present invention concerns a personal device with functions of acquiring images, for application of augmented reality resources, with a screen for displaying said images, and a method for applying augmented reality resources.
  • the technological evolution has led to overcome the already known virtual reality by the innovative augmented reality, which combines the virtual world with the real world, offering the observer virtual information superimposed on real information.
  • Augmented reality offers great advantages, such as (unlike what virtual reality did) not to isolate the user from its environment, but to improve or retouch it by adding virtual elements that do not exist in said environment.
  • the applications are numerous and focused on many fields. These can be passive, that is to say that they do not require the intervention of the user, such as those limited to show, for example in the field of architecture, three-dimensional images of what a house will be like when it is finished, mixing the current state of the house, still under construction, with the elements, still virtual, that it will appear when it is finished.
  • a representative proposal, by way of example, of the commented passive applications of the augmented reality is that contributed by the application US2002 / 0188959, which concerns a system and a method that allows television / video program viewers to automatically receive , or on demand, additional multimedia information synchronized in relation to television / video programs.
  • the proposed system comprises a display device to show the enlarged image to the user, a video-based tracking system to locate objects in the real world, a processor to determine the position and orientation of the user's vision based on the location of the objects of the real world and to project the virtual objects in the device displayed and an input device that includes a series of markers located in predetermined positions of the real world, in a scene seen by a user, and that are augmented to simulate physical push buttons .
  • These augmented markers can be physically manipulated by the user by placing, for example, their fingers on one of the markers, this action being recognized by the tracking system and properly processed.
  • Such input devices can replace more conventional peripherals, such as keyboards or mice.
  • Another class of applications take advantage of the existing wireless infrastructures in combination with the augmented reality to enable the enjoyment thereof in mobile devices that incorporate display means.
  • a representative example of such applications is that proposed in the patent application US2002 / 0167536, which concerns a system, a method and a portable electronic device comprising a display apparatus to enable seeing augmented reality by superimposing a generated scene by computer to a real scene.
  • a display device is capable of adopting two positions, in one of which it is possible to see a real scene with a virtual one superimposed. This is preferably achieved by means of a screen and a semi-transparent mirror pivotable with respect to the screen. Through the mirror (thanks to the semitransparency thereof) a user can see the real world and, depending on the position of the latter, it is possible that the virtual image shown on the screen is reflected in it and therefore overlaps, in the mirror, to the real image.
  • the aforementioned pattern to be identified is representative of a graphic element, in general part or all of a view of an entity or object.
  • said device depending on the exemplary embodiment, the most basic of which is that said second unit is included in the device itself or forms an assembly with said first unit.
  • the second unit is at a remote point
  • the device also includes a telecommunication unit capable of communicating at least with said second unit.
  • the components that make up said second unit are distributed between a remote point and the device itself, and said device also includes a telecommunication unit for communicating with at least the components located at said point. remote.
  • the said telecommunication unit is suitable for transmitting the acquired images to the second unit or to a part thereof, depending on the embodiment.
  • the second unit is also suitable to perform said processing of each of the acquired images received and to return to the device at least:
  • - a positional reference vector for each pattern identified. And preferably also: - an image with an associated mask for each positional reference vector returned, or:
  • the second unit or some of its components are located in the device, these components are suitable for generating said image, or set of images, sized (s) in a timely manner, depending on said positional reference vector or said mask returned to the device.
  • at least one of the components of said second unit located in said device has a series of images stored, and these are suitable for generating said image, or set of images, sized (s) in a timely manner by selecting it from among said series of stored images or to manipulate said stored images to generate said image, or set of images, sized (s) in a timely manner.
  • the device receives a positional reference vector or a mask of a series of components of the second unit, in relation to an image that has previously been sent from the first unit, another series of components of the second unit Either they select an image that they have stored associated with said vector or mask and they adequately dimension to finally superimpose it on the screen to the acquired image, thus producing the effect of augmented reality, or else they manage to produce said effect by generating a new image. from those that are stored (or another series of stored data that are not images) by, for example, the execution of a certain algorithm, and replacing the image acquired with said new image generated on the screen of the device.
  • the proposed device is capable of superimposing said returned or generated image, to one of said acquired images, or to replace it, depending on the example of embodiment, on said screen.
  • the aforementioned telecommunication unit is suitable for transmitting said acquired images to said second unit, in color, only in black and white, whole or in part.
  • the proposed device can be either a device designed solely for the application of augmented reality resources or to perform other different functions.
  • the screen that incorporates it is also suitable for displaying at least information related to personal device applications, and the same may be a touch screen that allows a user to interact and use said devices.
  • own personal device applications Such is the case of, for example, a mobile phone with a built-in camera, which in addition to its own functions (telephony, multimedia applications, etc.), uses the camera and the screen that it has for the application of reality resources increased, as described above.
  • the present invention concerns, in a second aspect, a personal device with image acquisition functions, for application of augmented reality resources, which comprises:
  • the contribution of information, associated with said acquired image, capable of generating an image, or set of images, sized (s) in a timely manner, suitable for being superimposed (s), on said screen, on said acquired image or to replace it .
  • said image sized in a timely manner is representative of a plain or perspective text message.
  • the present invention concerns, in a third aspect, a personal device with functions of acquiring images, for application of augmented reality resources which comprises:
  • - a screen capable of displaying said images in the same; - a second unit capable of performing: a processing of one or more of said acquired images for identification of at least one pattern; Y
  • telecommunication unit to transmit said acquired image or part thereof.
  • said second unit is also suitable for:
  • the second unit is adapted to receive and process information, associated with said acquired image, from said remote point, to generate an image, or set of images, sized (s) in a timely manner, taking into account said positional reference vector, suitable (s) to be superimposed (s), on said screen, to said acquired image or to replace it.
  • the present invention also concerns, in a fourth aspect, a method for applying augmented reality resources which comprises performing, by means of a personal device with functions of acquiring images, the following steps:
  • the method also includes performing all the stages for a set of images, both acquired and generated on the basis of said information provided.
  • said set of images form a video strip.
  • the method also comprises making said acquisition from different angles.
  • Fig. 1a shows the proposed device, for an exemplary embodiment, at the moment when it is acquiring a real world image
  • Fig. 1b shows, for the same example of embodiment of Fig. 2a, the proposed device, on whose screen said acquired image can be seen plus a superimposed virtual image received in relation to the acquired image,
  • Fig. 2a shows a magazine with articles represented therein intended to be acquired, or captured, by the personal device proposed by the present invention, for another embodiment
  • Fig. 2b shows part of the proposed personal device, on whose screen an image of one of the articles represented in the magazine of Fig. 1a can be seen, captured by the camera of the device, on which a three-dimensional virtual image is superimposed which represents a perspective of the same article,
  • Fig. 3a illustrates another example of embodiment, where the proposed device can be appreciated by acquiring a real world image while receiving, in real time, a virtual image, and showing both images, superimposed, on its screen, the Fig. 3b shows the images, with augmented reality characteristics, that appear on the screen of the proposed device, for the same example of embodiment of Fig. 3a, from a certain angle, and
  • Fig. 3c shows the same images of Fig. 3b, with augmented reality characteristics, which appear on the screen of the proposed device for the same example of embodiment of Fig. 3a, but from a different angle.
  • a personal device 1 with functions of acquiring images for application of augmented reality resources.
  • Said personal device 1 is for the illustrated exemplary embodiments a mobile telephone 1 (see Figs. 1b, 2b and 3a) that incorporates a camera (not shown), although it could be another type of personal device with the pointed characteristics that Ie occur to an expert in the field, such as an electronic agenda or a laptop.
  • Device 1 comprises: - a first unit for image acquisition, such as the aforementioned camera (not shown);
  • the second unit is included in the device 1 itself or forms an assembly with said first unit, at a remote point (not shown), or part in the device 1 and part at a remote point.
  • said device 1 also includes a telecommunication unit capable of communicating at least with the components located at said remote point.
  • said pattern is representative of a graphic element, preferably part or all of a view of an entity or object 5, such as the bus stop with an advertising sign of Fig. 1a, which is captured by the camera of the mobile phone 1 illustrated in the same figure and shown on its screen 2, or the magazine of Fig. 2a part of which has been captured and shown on screen 2 of mobile phone 1 of Fig. 2b.
  • the information capable of generating the timely sized image 4 comprises data to generate a virtual image and a real image, forming the superimposition, or mixture, of both the sized image 4 which is finally shown on screen 2.
  • the first unit of the device 1 has captured the image 3 of an advertisement for a product focusing on an advertising poster 5
  • the second unit has identified a pattern referring to said image 3
  • the generated image 5 would be different.
  • Fig. 1 b shows the mobile phone 1, on whose screen 2 the mentioned advertising poster 3 can be appreciated plus the mentioned virtual character 5 associated with it.
  • the acquired image 3 is the announcement of a product, in particular a sneaker, in a magazine 5
  • the generated image 4 is a three-dimensional perspective or representation of said shoe. It is possible to observe said three-dimensional image or representation 4 from different angles, for example by moving the magazine 5.
  • Figs. 3a, 3b and 3c show yet another embodiment, based on the same concept of the exemplary embodiment illustrated by Figs. 1a and 1b, but more advanced and in which the third generation technology UMTS (Universal Mobile Telecommunications System) makes it possible to work in real time, that is, the sending of the generated image 4 sized in a timely manner for its superposition (or replacement) to the image acquired 3 on the screen 2, be practically instantaneous.
  • UMTS Universal Mobile Telecommunications System
  • Fig. 3a the moment is observed in which a user captures the said product 5 by means of the camera of a mobile phone 1, but unlike the more basic embodiment mentioned in which he captured a still photo of the representation of the product in an advertising poster, here it does it directly from the real world, being able to photograph it from different angles or even acquire a set of images or video strip.
  • one or more images 4 (or video strip) associated with the image or images acquired 3 (or video strip) is or are generated, sent and shown on the screen 2 superimposed (or replacing) the (s) ) image (s) acquired.
  • Said images can also be different perspectives or views from different angles of a virtual object 4 (in this case an airplane), each of which is associated with a respective view from a certain angle of the acquired image 3.
  • calculation of the positional reference vector can vary the angle from which the product 5 is captured by means of the camera of the mobile phone, observing on the screen 2 how the view of the virtual image 4 also varies at the same time as it does.
  • Figs. 3b and 3c show the screen 2 of a mobile phone reflecting such situation from two different angles.
  • the generation of the images 4 opportunely sized can be carried out in different ways, from a simple selection between a series of images stored in the second unit, through the manipulation of said stored images to create a new one, until the generation of a new image 4 starting only from the acquired image 3 or part of it.
  • the personal device 1 can both be a device for applying only augmented reality resources, and preferably a device for which the application of said augmented reality resources is only one of its functions. Such is the case of mobile phones 1 illustrated.
  • the screen 2 is also capable of displaying information related to applications of the personal device 1 and can even be a touch screen that allows a user to interact and use said applications of the personal device 1, as is the case with electronic agendas .
  • the present invention concerns in a second aspect a personal device 1 differentiated from that proposed by the first aspect of the invention in which the second unit is only suitable for performing: - a processing of one or more of said acquired images 1 for identification of the less a pattern; Y
  • a timely sized image 4 is representative of a plain or perspective text message, which could be superimposed on a real image acquired 3 or replace it.
  • the present invention concerns in a third aspect a personal device with functions of acquiring images, for application of augmented reality resources which comprises:
  • a second unit capable of carrying out: a processing of one or more of said acquired images 3 for identification of at least one pattern; Y
  • telecommunication unit for transmitting said acquired image 3 or part thereof to a remote point.
  • the said second unit is also suitable for:
  • the second unit is adapted to receive and process information, associated with said acquired image 3, from said remote point, to generate an image 4, or set of images, sized (s) in due course, taking into account said pattern or said pattern and said positional reference vector, apt (s) to be superimposed (s), on said screen 2, to said acquired image 3 or to replace it.
  • the present invention concerns a method for applying augmented reality resources which comprises performing, by means of a personal device with functions of acquiring images, such as that proposed by the first aspect of the present invention, the following steps :
  • the proposed method comprises performing all the stages for a set of images, both those acquired 3 and those generated 4 on the basis of said information provided, said images of said set being preferably seen from different angles of the images 3, 4, for which said acquisition is made from different angles and said information provided comprises data to generate different views of said image appropriately sized 4, each from a respective angle.
  • Said set of images form, for an exemplary embodiment, a video strip.
  • the invention also concerns, in a fifth aspect, a method for applying augmented reality resources which comprises performing, by means of a personal device with functions of acquiring images, the following steps: - acquiring at least one image by means of a first unit,
  • said image 4 suitably sized is representative of a plain or perspective text message, which could be superimposed on a real image acquired 3 or replace it.
  • a person skilled in the art could introduce changes and modifications in the described embodiments without going beyond the scope of the invention as defined in the appended claims.

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)
  • Digital Computer Display Output (AREA)

Abstract

El dispositivo comprende: - una primera unidad para adquisición de imágenes; - una pantalla (2) capaz de mostrar en la misma unas imágenes adquiridas (3) por dicha primera unidad; - una conexión con una segunda unidad apta para realizar: - un procesado de dichas imágenes adquiridas (3) para identificación de un patrón; - el cálculo de un vector de referencia posicional, respecto a dicha primera unidad de adquisición de imágenes, del patrón identificado; y la aportación de información, asociada a dicha imagen adquirida (3), capaz de generar una imagen (4), o conjunto de imágenes, dimensionada(s) oportunamente, teniendo en cuenta dicho vector de referencia posicional, apta(s) para ser superpuesta(s), en dicha pantalla (2), a dicha imagen adquirida (3) ó para sustituirla. El método comprende utilizar un dispositivo como el propuesto para aplicación de recursos de realidad aumentada.

Description

Dispositivo personal con funciones de adquirir imágenes, para aplicación de recursos de realidad aumentada v método
Sector de Ia técnica La presente invención concierne a un dispositivo personal con funciones de adquirir imágenes, para aplicación de recursos de realidad aumentada, con una pantalla para mostrar dichas imágenes, y a un método para aplicación de recursos de realidad aumentada.
Estado de Ia técnica anterior
La evolución tecnológica ha llevado a superar Ia ya de sobras conocida realidad virtual por Ia innovadora realidad aumentada, Ia cual combina el mundo virtual con el mundo real, ofreciéndole al observador información virtual superpuesta a información real.
La realidad aumentada ofrece grandes ventajas, tal como (al contrario de Io que hacía Ia realidad virtual) no aislar al usuario de su entorno, sino mejorarlo o retocarlo mediante Ia adición de elementos virtuales no existentes en dicho entorno.
Las aplicaciones son numerosas y enfocadas a multitud de campos. Éstas pueden ser pasivas, es decir que no requieran Ia intervención del usuario, tales como las limitadas a mostrar, por ejemplo en el campo de Ia arquitectura, imágenes tridimensionales de como será una casa cuando esté acabada, mezclando el estado actual de Ia casa, todavía en construcción, con los elementos, todavía virtuales, de que constará Ia misma cuando esté acabada.
Una propuesta representativa, a modo de ejemplo, de las comentadas aplicaciones pasivas de Ia realidad aumentada es el aportado por Ia solicitud US2002/0188959, Ia cual concierne a un sistema y un método que permite que los telespectadores de programas de televisión/video reciban automáticamente, o bajo demanda, información multimedia suplementaria sincronizada con relación a los programas de televisión/video.
También existen aplicaciones que podrían considerarse activas, y que posibilitan que el usuario interactúe con los elementos que Ie son mostrados. En estas aplicaciones se puede prescindir, por ejemplo en el campo de Ia informática, de Ia mayoría de los periféricos de un ordenador, sustituyéndolos por elementos virtuales, tales como teclados, ratones o pulsadores para activar diferentes funciones, que impliquen una serie de movimientos por parte del usuario, dependientes de las funciones que desee activar, y los cuales sean reconocidos por el sistema mediante unos detectores adecuados (por ejemplo de posición relativa). Sirva como ejemplo de tales aplicaciones Ia propuesta realizada por Ia solicitud de patente US2004/0113885, Ia cual concierne a un sistema de realidad aumentada que utiliza un dispositivo de entrada para que un usuario pueda interactuar con el sistema. El sistema propuesto comprende un dispositivo de visualización para mostrar Ia imagen aumentada al usuario, un sistema de seguimiento basado en video para localizar objetos en el mundo real, un procesador para determinar Ia posición y orientación de Ia visión del usuario basándose en Ia localización de los objetos del mundo real y para proyectar los objetos virtuales en el dispositivo visualizados y un dispositivo de entrada que incluye una serie de marcadores situados en unas posiciones predeterminadas del mundo real, en una escena vista por un usuario, y que son aumentados para simular pulsadores físicos. Estos marcadores aumentados pueden ser físicamente manipulados por el usuario mediante Ia colocación, por ejemplo, de sus dedos en uno de los marcadores, siendo esta acción reconocida por el sistema de seguimiento y procesada debidamente. Tales dispositivos de entrada pueden sustituir a periféricos más convencionales, tales como teclados o ratones. Otra clase de aplicaciones aprovechan las infraestructuras inalámbricas existentes en combinación con Ia realidad aumentada para posibilitar el disfrute de Ia misma en dispositivos móviles que incorporen unos medios de visualización.
Un ejemplo representativo de tales aplicaciones es el propuesto en Ia solicitud de patente US2002/0167536, Ia cual concierne a un sistema, un método y un dispositivo electrónico portátil que comprende un aparato visualizador para posibilitar el ver realidad aumentada mediante Ia superposición de una escena generada por ordenador a una escena real. Tal aparato visualizador es capaz de adoptar dos posiciones, en una de las cuales es posible ver una escena real con una virtual superpuesta. Ello se consigue, preferentemente, mediante una pantalla y un espejo semitransparente pivotable respecto a Ia pantalla. A través del espejo (gracias a Ia semitransparencia del mismo) un usuario puede ver el mundo real y, dependiendo de Ia posición de éste, es posible que Ia imagen virtual mostrada en Ia pantalla se refleje en él y por tanto se superponga, en el espejo, a Ia imagen real.
Explicación de Ia invención
Aparece necesario ofrecer una alternativa al estado de Ia técnica que represente un paso evolutivo respecto al mismo, sobre todo respecto al último antecedente citado, sin Ia necesidad de utilizar unos medios de visualización tan específicos como el aparato visualizador propuesto en tal antecedente, sino una simple pantalla, ni de limitarlo a dispositivos portátiles, sino enfocado a cualquier clase de dispositivo personal. El anterior y otros objetivos se alcanzan, de acuerdo con Ia presente invención, aportando un dispositivo personal con funciones de adquirir imágenes, para aplicación de recursos de realidad aumentada, el cual en un primer aspecto comprende:
- una primera unidad para adquisición de imágenes; - una pantalla capaz de mostrar en Ia misma al menos unas imágenes adquiridas por dicha primera unidad;
- una conexión con una segunda unidad apta para realizar:
- un procesado de una o más de dichas imágenes adquiridas para identificación de al menos un patrón; - el cálculo de un vector de referencia posicional, respecto a dicha primera unidad de adquisición de imágenes, del patrón identificado; y
- Ia aportación de información, asociada a dicha imagen adquirida, capaz de generar una imagen, o conjunto de imágenes, dimensionada(s) oportunamente, teniendo en cuenta dicho vector de referencia posicional, apta(s) para ser superpuesta(s), en dicha pantalla, a dicha imagen adquirida ó para sustituirla.
El mencionado patrón a identificar es representativo de un elemento gráfico, en general parte o Ia totalidad de una vista de una entidad u objeto.
Son posibles diferentes disposiciones para dicho dispositivo, dependiendo del ejemplo de realización, Ia más básica de las cuales es que dicha segunda unidad esté incluida en el propio dispositivo o forme un conjunto con dicha primera unidad.
Para otra de dichas disposiciones Ia segunda unidad está en un punto remoto, y el dispositivo incluye, además, una unidad de telecomunicación apta para comunicar al menos con dicha segunda unidad. Para otro ejemplo de realización con aún otra clase de disposición, los componentes que integran dicha segunda unidad están repartidos entre un punto remoto y el propio dispositivo, y dicho dispositivo incluye además una unidad de telecomunicación para comunicar al menos con los componentes localizados en dicho punto remoto.
La mencionada unidad de telecomunicación es apta para transmitir las imágenes adquiridas a Ia segunda unidad o a una parte de Ia misma, dependiendo del ejemplo de realización.
La segunda unidad es apta también para realizar dicho procesado de cada una de las imágenes adquiridas recibidas y para retornar al dispositivo al menos:
- un vector de referencia posicional por cada patrón identificado. Y preferentemente además: - una imagen con una máscara asociada por cada vector de referencia posicional retornado, o:
- una máscara por cada vector de referencia posicional retornado, para permitir Ia generación de dicha imagen, o conjunto de imágenes, dimensionada(s) oportunamente.
Cuando Ia segunda unidad o algunos de sus componentes se encuentran localizados en el dispositivo, estos componentes son aptos para generar dicha imagen, o conjunto de imágenes, dimensionada(s) oportunamente, en función de dicho vector de referencia posicional o de dicha máscara retornados al dispositivo. Para ello al menos uno de los componentes de dicha segunda unidad localizados en dicho dispositivo tienen almacenadas una serie de imágenes, y éstos son aptos para generar dicha imagen, o conjunto de imágenes, dimensionada(s) oportunamente mediante su selección de entre dicha serie de imágenes almacenadas o para manipular dichas imágenes almacenadas para generar dicha imagen, o conjunto de imágenes, dimensionada(s) oportunamente. Es decir que una vez que el dispositivo recibe un vector de referencia posicional o una máscara de una serie de componentes de Ia segunda unidad, en relación a una imagen que previamente se ha enviado desde Ia primera unidad, otra serie de componentes de Ia segunda unidad o bien seleccionan una imagen que tienen almacenada asociada a dicho vector o máscara y Ia dimensionan adecuadamente para finalmente superponerla en Ia pantalla a Ia imagen adquirida, produciendo así el efecto de realidad aumentada, o bien consiguen producir dicho efecto mediante Ia generación de una imagen nueva a partir de las que se encuentran almacenadas (u otra serie de datos almacenados que no sean imágenes) mediante, por ejemplo, Ia ejecución de un determinado algoritmo, y sustituyendo Ia imagen adquirida con dicha imagen nueva generada en Ia pantalla del dispositivo.
El dispositivo propuesto es apto para superponer dicha imagen retornada o generada, a una de dichas imágenes adquiridas, o para sustituirla, dependiendo del ejemplo de realización, en dicha pantalla.
La anteriormente citada unidad de telecomunicación es apta para transmitir dichas imágenes adquiridas a dicha segunda unidad, en color, únicamente en blanco y negro, enteras o en parte.
El dispositivo propuesto puede ser tanto un dispositivo únicamente diseñado para Ia aplicación de recursos de realidad aumentada o para además realizar otras funciones diferentes. En este último caso Ia pantalla que incorpora el mismo es apta también para mostrar al menos información relativa a aplicaciones propias del dispositivo personal, y Ia misma puede ser una pantalla táctil que permite a un usuario interactuar y utilizar dichas aplicaciones propias del dispositivo personal. Tal es el caso de, por ejemplo, un teléfono móvil con cámara incorporada, que además de las funciones propias del mismo (telefonía, aplicaciones multimedia, etc.), utiliza Ia cámara y Ia pantalla de que dispone para Ia aplicación de recursos de realidad aumentada, tal como se han descrito anteriormente. La presente invención concierne, en un segundo aspecto, a un dispositivo personal con funciones de adquisición de imágenes, para aplicación de recursos de realidad aumentada, el cual comprende:
- una primera unidad para adquisición de imágenes;
- una pantalla capaz de mostrar en Ia misma al menos unas imágenes adquiridas por dicha primera unidad;
- una conexión con una segunda unidad apta para realizar:
- un procesado de una o más de dichas imágenes adquiridas para identificación de al menos un patrón; y
Ia aportación de información, asociada a dicha imagen adquirida, capaz de generar una imagen, o conjunto de imágenes, dimensionada(s) oportunamente, apta(s) para ser superpuesta(s), en dicha pantalla, a dicha imagen adquirida ó para sustituirla.
Para un ejemplo de realización dicha imagen dimensionada oportunamente es representativa de un mensaje de texto plano o en perspectiva. La presente invención concierne, en un tercer aspecto, a un dispositivo personal con funciones de adquirir imágenes, para aplicación de recursos de realidad aumentada el cual comprende:
- una primera unidad para adquisición de imágenes;
- una pantalla capaz de mostrar en Ia misma dichas imágenes; - una segunda unidad apta para realizar: un procesado de una ó más de dichas imágenes adquiridas para identificación de al menos un patrón; y
- una unidad de telecomunicación para transmitir dicha imagen adquirida o parte de ella.
Preferentemente dicha segunda unidad es apta para realizar también:
- el cálculo de un vector de referencia posicional respecto a dicha unidad de adquisición de imágenes, del patrón identificado; y dicha unidad de telecomunicación está adaptada para transmitir también dicho vector de referencia posicional a dicho punto remoto. La segunda unidad está adaptada para recibir y tratar una información, asociada a dicha imagen adquirida, provinente de dicho punto remoto, para generar una imagen, o conjunto de imágenes, dimensionada(s) oportunamente, teniendo en cuenta dicho vector de referencia posicional, apta(s) para ser superpuesta(s), en dicha pantalla, a dicha imagen adquirida ó para sustituirla.
La presente invención concierne también, en un cuarto aspecto, a un método para aplicación de recursos de realidad aumentada el cual comprende realizar, mediante un dispositivo personal con funciones de adquirir imágenes, las siguientes etapas:
- adquirir al menos una imagen mediante una primera unidad, - mostrar dicha imagen adquirida , que es al menos una, en una pantalla de dicho dispositivo,
- enviar dicha imagen adquirida a una segunda unidad,
- realizar en dicha segunda unidad al menos:
- un procesado de una o más de dichas imágenes adquiridas para identificación de al menos un patrón,
- el cálculo de un vector de referencia posicional, respecto a dicha primera unidad de adquisición de imágenes, del patrón identificado,
- Ia aportación de información, asociada a dicha imagen adquirida, capaz de generar una imagen, o conjunto de imágenes, dimensionada(s) oportunamente, teniendo en cuenta dicho vector de referencia posicional, apta(s) para ser superpuesta(s), en dicha pantalla, a dicha imagen adquirida ó para sustituirla, y
- mostrar en dicha pantalla dicha imagen, o conjunto de imágenes, dimensionada(s) oportunamente, superpuesta(s) a Ia imagen adquirida o sustituyéndola.
Comprende además realizar todas las etapas para un conjunto de imágenes, tanto adquiridas como generadas sobre Ia base de dicha información aportada. En general dicho conjunto de imágenes forman una tira de video. El método comprende también realizar dicha adquisición desde diferentes ángulos. Mediante su aplicación es posible, por ejemplo y entre un gran número de combinaciones, adquirir y enviar una imagen fija y recibir una imagen tridimensional que pueda verse en Ia pantalla del dispositivo superpuesta, o sustituyendo, a dicha imagen fija, con Ia posibilidad de verla desde diferentes ángulos.
Breve descripción de los dibujos
Las anteriores y otras características y ventajas de Ia invención aparecerán con una mayor claridad a partir de Ia descripción que sigue de una serie de ejemplos de realización, algunos de los cuales se ilustran en los dibujos adjuntos y que deben tomarse a título ilustrativo y no limitativo. En dichos dibujos:
Ia Fig. 1a muestra el dispositivo propuesto, para un ejemplo de realización, en el momento en que está adquiriendo una imagen del mundo real,
Ia Fig. 1 b muestra, para el mismo ejemplo de realización de Ia Fig. 2a, el dispositivo propuesto, en cuya pantalla puede apreciarse dicha imagen adquirida más una imagen virtual superpuesta recibida en relación a Ia imagen adquirida,
Ia Fig. 2a muestra una revista con unos artículos representados en Ia misma destinados a ser adquiridos, o captados, por el dispositivo personal propuesto por Ia presente invención, para otro ejemplo de realización,
Ia Fig. 2b muestra parte del dispositivo personal propuesto, en cuya pantalla puede apreciarse una imagen de uno de los artículos representados en Ia revista de Ia Fig. 1a, captada por Ia cámara del dispositivo, sobre Ia cual se halla superpuesta una imagen virtual tridimensional que representa una perspectiva del mismo artículo,
Ia Fig. 3a ilustra otro ejemplo de realización más, donde puede apreciarse el dispositivo propuesto adquiriendo una imagen del mundo real a Ia vez que recibe, en tiempo real, una imagen virtual, y muestra a ambas imágenes, superpuestas, en su pantalla, Ia Fig. 3b muestra las imágenes, con características de realidad aumentada, que aparecen en Ia pantalla del dispositivo propuesto, para el mismo ejemplo de realización de Ia Fig. 3a, desde un determinado ángulo, y
Ia Fig. 3c muestra las mismas imágenes de Ia Fig. 3b, con características de realidad aumentada, que aparecen en Ia pantalla del dispositivo propuesto para el mismo ejemplo de realización de Ia Fig. 3a, pero desde un ángulo distinto.
Descripción detallada de unos ejemplos de realización
Tal como muestran las figuras, Ia presente invención concierne, en un primer aspecto, a un dispositivo personal 1 con funciones de adquirir imágenes para aplicación de recursos de realidad aumentada. Dicho dispositivo personal 1 es para los ejemplos de realización ilustrados un teléfono móvil 1 (ver Figs. 1 b, 2b y 3a) que incorpora una cámara (no mostrada), aunque podría ser otro tipo de dispositivo personal con las características apuntadas que se Ie ocurriese a un experto en Ia materia, tal como una agenda electrónica o un ordenador portátil. El dispositivo 1 comprende: - una primera unidad para adquisición de imágenes, tal como Ia mencionada cámara (no mostrada);
- una pantalla 2 capaz de mostrar en Ia misma al menos unas imágenes adquiridas
3 por dicha primera unidad; - una conexión con una segunda unidad apta para realizar:
- un procesado de una o más de dichas imágenes adquiridas 3 para identificación de al menos un patrón;
- el cálculo de un vector de referencia posicional, respecto a dicha primera unidad de adquisición de imágenes, del patrón identificado; y - Ia aportación de información, asociada a dicha imagen adquirida 3, capaz de generar una imagen 4, o conjunto de imágenes, dimensionada(s) oportunamente, teniendo en cuenta dicho vector de referencia posicional, apta(s) para ser superpuesta(s), en dicha pantalla 2, a dicha imagen adquirida 3 ó para sustituirla. Dependiendo del ejemplo de realización Ia segunda unidad está incluida en el propio dispositivo 1 o forme un conjunto con dicha primera unidad, en un punto remoto (no mostrado), o parte en el dispositivo 1 y parte en un punto remoto. Para estos dos últimos casos dicho dispositivo 1 incluye además una unidad de telecomunicación apta para comunicar al menos con los componentes localizados en dicho punto remoto. En general dicho patrón es representativo de un elemento gráfico, preferentemente parte o Ia totalidad de una vista de una entidad u objeto 5, tal como Ia parada de autobús con una cartel publicitario de Ia Fig. 1a, Ia cual es capturada por Ia cámara del teléfono móvil 1 ilustrado en Ia misma figura y mostrada en su pantalla 2, o Ia revista de Ia Fig. 2a parte de Ia cual ha sido capturada y mostrada en Ia pantalla 2 del teléfono móvil 1 de Ia Fig. 2b.
En los ejemplos de realización mostrados (ver Figs. 1b, 2b, 3a, 3b y 3c) Ia imagen
4 generada y dimensionada oportunamente, es completamente virtual y ha sido superpuesta, en Ia pantalla 2, a Ia imagen real 3 capturada por Ia cámara.
El anteriormente comentado es el caso preferido, aunque existen otros ejemplos de realización (no mostrados) en los que Ia imagen generada 4 sustituye a Ia imagen adquirida 3, y por tanto es Ia imagen generada 4 Ia única que se muestra en Ia pantalla 2.
Para estos casos Ia información capaz de generar Ia imagen dimensionada oportunamente 4 comprende datos para generar una imagen virtual y una imagen real, formando Ia superposición, o mezcla, de ambas Ia imagen dimensionada 4 que finalmente se muestra en Ia pantalla 2. Para el ejemplo de realización ilustrado por las Figs. 1a y 1b Ia primera unidad del dispositivo 1 ha capturado Ia imagen 3 de un anuncio de un producto enfocando un cartel publicitario 5, Ia segunda unidad ha identificado un patrón referente a dicha imagen 3, ha calculado el mencionado vector de referencia posicional del patrón respecto a Ia primera unidad de adquisición de imágenes, y ha generado (o posibilitado Ia generación) una imagen 4 asociada a Ia imagen adquirida 3 que en las figuras es un personaje virtual que, por ejemplo, comunica un premio asociado a dicho cartel publicitario 5. Para otros carteles publicitarios 5 no premiados, Ia imagen generada 5 sería distinta.
El resultado puede apreciarse en Ia Fig. 1 b, que muestra el teléfono móvil 1 , en cuya pantalla 2 puede apreciarse el mencionado cartel publicitario 3 más el mencionado personaje virtual 5 asociado a él.
Para el ejemplo de realización representado en las Figs. 2a y 2b, se muestra otra aplicación de un nuevo concepto de publicidad en el que es posible Ia interacción, o publicidad dinámica. En este caso Ia imagen adquirida 3 es el anuncio de un producto, en concreto una zapatilla de deporte, en una revista 5, y Ia imagen generada 4 es una perspectiva o representación tridimensional de dicha zapatilla. Es posible observar dicha imagen o representación tridimensional 4 desde diferentes ángulos, por ejemplo al mover Ia revista 5.
En las Figs. 3a, 3b y 3c se muestra otro ejemplo de realización más, basado en el mismo concepto del ejemplo de realización ilustrado por las Figs. 1a y 1b, pero más avanzado y en el que Ia tecnología de tercera generación UMTS (Sistema universal de telecomunicaciones móviles) posibilita el trabajar en tiempo real, es decir que el envío de Ia imagen generada 4 dimensionada oportunamente para su superposición (o sustitución) a Ia imagen adquirida 3 en Ia pantalla 2, sea prácticamente instantáneo. Otra de las ventajas de Ia utilización de tal tecnología (o de otra similar si el dispositivo personal 1 es otro que no sea un teléfono móvil) es que posibilita que circulen una gran cantidad de datos, debido a su mayor ancho de banda, Io que hace que las imágenes adquiridas 3, así como las generadas 4, puedan tener mayor complejidad que las del ejemplo de realización más básico de las Figs. 1a, 1b. En Ia Fig. 3a se observa el momento en el que un usuario captura mediante Ia cámara de un teléfono móvil 1 el citado producto 5, pero a diferencia de Ia realización más básica comentada en el que capturaba una foto fija de Ia representación del producto en un cartel publicitario, aquí Io hace directamente del mundo real, pudiendo fotografiarlo desde diferentes ángulos o incluso adquirir un conjunto de imágenes o tira de video. En tiempo real una o más imágenes 4 (o tira de video) asociadas a Ia imagen o imágenes adquiridas 3 (o tira de video), es o son generadas, enviadas y mostradas en Ia pantalla 2 superpuestas (o sustituyendo) a la(s) imagen(es) adquirida(s). Dichas imágenes también pueden ser diferentes perspectivas o vistas desde diferentes ángulos de un objeto virtual 4 (en este caso un avión), cada una de las cuales está asociada a una respectiva vista desde un determinado ángulo de Ia imagen adquirida 3. Gracias al, explicado arriba, cálculo del vector de referencia posicional puede variarse el ángulo desde el cual se captura, mediante Ia cámara del teléfono móvil, el producto 5, observando en Ia pantalla 2 cómo Ia vista de Ia imagen virtual 4 también varía a Ia vez que Io hace Ia imagen adquirida 3. Las Figs. 3b y 3c muestran Ia pantalla 2 de un teléfono móvil reflejando tal situación desde dos ángulos distintos.
La generación de las imágenes 4 dimensionadas oportunamente puede realizarse de distintas maneras, desde una simple selección entre una serie de imágenes almacenadas en Ia segunda unidad, pasando por Ia manipulación de dichas imágenes almacenadas para crear una nueva, hasta Ia generación de una nueva imagen 4 partiendo únicamente de Ia imagen adquirida 3 o de parte de ella.
El dispositivo personal 1 tanto puede ser un dispositivo para aplicar únicamente recursos de realidad aumentada, como, preferentemente a un dispositivo para el que Ia aplicación de dichos recursos de realidad aumentada sea solo una de sus funciones. Tal es el caso de los teléfonos móviles 1 ilustrados. En este caso Ia pantalla 2 es apta para mostrar también información relativa a aplicaciones propias del dispositivo personal 1 y puede incluso ser una pantalla táctil que permita a un usuario interactuar y utilizar dichas aplicaciones propias del dispositivo personal 1 , tal como sucede con las agendas electrónicas.
La presente invención concierne en un segundo aspecto a un dispositivo personal 1 diferenciado del propuesto por el primer aspecto de Ia invención en que Ia segunda unidad solamente es apta para realizar: - un procesado de una o más de dichas imágenes adquiridas 1 para identificación de al menos un patrón; y
Ia aportación de información, asociada a dicha imagen adquirida 3, capaz de generar una imagen 4, o conjunto de imágenes, dimensionada(s) oportunamente, apta(s) para ser superpuesta(s), en dicha pantalla 2, a dicha imagen adquirida 3 ó para sustituirla.
Es decir que no es necesario el cálculo de ningún vector de referencia posicional para generar una imagen dimensionada respecto a él, sino que dicha generación y dimensionado se realiza simplemente en base al patrón identificado. Para un ejemplo de realización (no mostrado) del segundo aspecto de Ia invención tal imagen 4 dimensionada oportunamente es representativa de un mensaje de texto plano o en perspectiva, el cual podría superponerse a una imagen real adquirida 3 o sustituir a Ia misma. La presente invención concierne en un tercer aspecto a un dispositivo personal con funciones de adquirir imágenes, para aplicación de recursos de realidad aumentada el cual comprende:
- una primera unidad para adquisición de imágenes; - una pantalla 2 capaz de mostrar en Ia misma al menos unas imágenes adquiridas
3 por dicha primera unidad 1 ;
- una segunda unidad apta para realizar: un procesado de una ó más de dichas imágenes adquiridas 3 para identificación de al menos un patrón; y
- una unidad de telecomunicación para transmitir dicha imagen adquirida 3 o parte de ella a un punto remoto.
La mencionada segunda unidad es apta para realizar también:
- el cálculo de un vector de referencia posicional respecto a dicha unidad de adquisición de imágenes, del patrón identificado; y dicha unidad de telecomunicación está adaptada para transmitir también dicho vector de referencia posicional a dicho punto remoto.
La segunda unidad está adaptada para recibir y tratar una información, asociada a dicha imagen adquirida 3, provinente de dicho punto remoto, para generar una imagen 4, o conjunto de imágenes, dimensionada(s) oportunamente, teniendo en cuenta dicho patrón o dicho patrón y dicho vector de referencia posicional, apta(s) para ser superpuesta(s), en dicha pantalla 2, a dicha imagen adquirida 3 ó para sustituirla.
En un cuarto aspecto, Ia presente invención concierne a un método para aplicación de recursos de realidad aumentada el cual comprende realizar, mediante un dispositivo personal con funciones de adquirir imágenes, tal como el propuesto por el primer aspecto de Ia presente invención, las siguientes etapas:
- adquirir al menos una imagen mediante una primera unidad,
- mostrar dicha imagen adquirida 3, que es al menos una, en una pantalla 2 de dicho dispositivo 1 , - enviar dicha imagen adquirida 3 a una segunda unidad,
- realizar en dicha segunda unidad al menos:
- un procesado de una o más de dichas imágenes adquiridas 3 para identificación de al menos un patrón,
- el cálculo de un vector de referencia posicional, respecto a dicha primera unidad de adquisición de imágenes, del patrón identificado, - Ia aportación de información, asociada a dicha imagen adquirida 3, capaz de generar una imagen 4, o conjunto de imágenes, dimensionada(s) oportunamente, teniendo en cuenta dicho vector de referencia posicional, apta(s) para ser superpuesta(s), en dicha pantalla 2, a dicha imagen adquirida 3 ó para sustituirla, y
- mostrar en dicha pantalla 2 dicha imagen dimensionada oportunamente 4 superpuesta a Ia imagen adquirida 3 o sustituyéndola.
El método propuesto comprende realizar todas las etapas para un conjunto de imágenes, tanto las adquiridas 3 como las generadas 4 sobre Ia base de dicha información aportada, siendo dichas imágenes de dicho conjunto, preferentemente, vistas desde distintos ángulos de las imágenes 3, 4, para Io cual dicha adquisición se realiza desde diferentes ángulos y dicha información aportada comprende datos para generar diferentes vistas de dicha imagen dimensionada oportunamente 4, cada una de ellas desde un respectivo ángulo. Dicho conjunto de imágenes forman, para un ejemplo de realización, una tira de video.
La invención también concierne, en un quinto aspecto, a un método para aplicación de recursos de realidad aumentada el cual comprende realizar, mediante un dispositivo personal con funciones de adquirir imágenes, las siguientes etapas: - adquirir al menos una imagen mediante una primera unidad,
- mostrar dicha imagen adquirida 3, que es al menos una, en una pantalla 2 de dicho dispositivo 1 ,
- enviar dicha imagen adquirida 3 a una segunda unidad,
- realizar en dicha segunda unidad al menos: - un procesado de una o más de dichas imágenes adquiridas 3 para identificación de al menos un patrón,
- Ia aportación de información, asociada a dicha imagen adquirida 3, capaz de generar una imagen 4, o conjunto de imágenes, dimensionada(s) oportunamente, apta(s) para ser superpuesta(s), en dicha pantalla 2, a dicha imagen adquirida 3 ó para sustituirla, y
- mostrar en dicha pantalla 2 dicha imagen 4, o conjunto de imágenes, dimensionada(s) oportunamente superpuesta(s) a Ia imagen adquirida 3 o sustituyéndola.
Para un ejemplo de realización dicha imagen 4 dimensionada oportunamente es representativa de un mensaje de texto plano o en perspectiva, el cual podría superponerse a una imagen real adquirida 3 o sustituir a Ia misma. .Un experto en Ia materia podría introducir cambios y modificaciones en los ejemplos de realización descritos sin salirse del alcance de Ia invención según está definido en las reivindicaciones adjuntas.

Claims

Reivindicaciones
1.- Dispositivo personal con funciones de adquirir imágenes, para aplicación de recursos de realidad aumentada, el cual comprende: - una primera unidad para adquisición de imágenes;
- al menos una pantalla (2) capaz de mostrar en Ia misma al menos unas imágenes adquiridas (3) por dicha primera unidad;
- una conexión con una segunda unidad apta para realizar:
- un procesado de una o más de dichas imágenes adquiridas (3) para identificación de al menos un patrón;
- el cálculo de un vector de referencia posicional, respecto a dicha primera unidad de adquisición de imágenes, del patrón identificado; y
- Ia aportación de información, asociada a dicha imagen adquirida (3), capaz de generar una imagen (4), o conjunto de imágenes, dimensionada(s) oportunamente, teniendo en cuenta dicho vector de referencia posicional, apta(s) para ser superpuesta(s), en dicha pantalla (2), a dicha imagen adquirida (3) ó para sustituirla.
2.- Dispositivo, según Ia reivindicación 1 , caracterizado porque dicha segunda unidad está incluida en el propio dispositivo (1) o forma un conjunto con dicha primera unidad.
3.- Dispositivo, según Ia reivindicación 1 , caracterizado porque dicha segunda unidad está en un punto remoto, y porque dicho dispositivo (1) incluye además una unidad de telecomunicación apta para comunicar al menos con dicha segunda unidad.
4.- Dispositivo, según Ia reivindicación 1 , caracterizado porque los componentes que integran dicha segunda unidad están divididos entre un punto remoto y el propio dispositivo (1), y porque dicho dispositivo (1) incluye además una unidad de telecomunicación para comunicar al menos con los componentes localizados en dicho punto remoto.
5.- Dispositivo, según Ia reivindicación 1 , caracterizado porque dicho patrón es representativo de un elemento gráfico.
6.- Dispositivo, según Ia reivindicación 5, caracterizado porque dicho elemento gráfico es una parte de una vista de una entidad (5).
7.- Dispositivo, según Ia reivindicación 5, caracterizado porque dicho elemento gráfico es Ia totalidad de una vista de una entidad (5).
8.- Dispositivo, según Ia reivindicación 1, caracterizado porque cuando dicha información, capaz de generar una imagen (4), o conjunto de imágenes, dimensionada(s) oportunamente, es apta para sustituir a dicha imagen adquirida (3), comprende datos para generar una imagen virtual y una imagen real, formando Ia superposición, o mezcla, de ambas dicha imagen dimensionada (4).
9.- Dispositivo, según Ia reivindicación 1 , caracterizado porque dicha información, capaz de generar una imagen (4), o conjunto de imágenes, dimensionada(s) oportunamente, comprende datos para generar una imagen tridimensional o en perspectiva.
10.- Dispositivo, según Ia reivindicación 3 ó 4, caracterizado porque dicha unidad de telecomunicación es apta para transmitir las imágenes adquiridas (3) a dicha segunda unidad o a una parte de Ia misma.
11.- Dispositivo, según Ia reivindicación 10, caracterizado porque dicha segunda unidad es apta para realizar dicho procesado de cada una de las imágenes adquiridas (3) recibidas y para retornar al dispositivo (1) al menos:
- un vector de referencia posicional por cada patrón identificado.
12.- Dispositivo según Ia reivindicación 11 , caracterizado porque dicha segunda unidad es apta para retornar al dispositivo (1) además:
- una imagen (4) con una máscara asociada por cada vector de referencia posicional retornado.
13.- Dispositivo según Ia reivindicación 11 , caracterizado porque dicha segunda unidad es apta para retornar al dispositivo (1) además:
- una máscara por cada vector de referencia posicional retornado, para permitir Ia generación de dicha imagen (4), o conjunto de imágenes, dimensionada(s) oportunamente.
14.- Dispositivo según Ia reivindicación 11 ó 13, caracterizado porque los componentes de dicha segunda unidad localizados en dicho dispositivo (1) son aptos para generar dicha imagen (4), o conjunto de imágenes, dimensionada(s) oportunamente, en función de dicho vector de referencia posicional o de dicha máscara retornados al dispositivo (1).
15.- Dispositivo según Ia reivindicación 14, caracterizado porque al menos uno de los componentes de dicha segunda unidad localizados en dicho dispositivo (1) tienen almacenadas una serie de imágenes, y dichos componentes son aptos para generar dicha imagen (4), o conjunto de imágenes, dimensionada(s) oportunamente mediante su selección de entre dicha serie de imágenes almacenadas.
16.- Dispositivo según Ia reivindicación 15, caracterizado porque los componentes de dicha segunda unidad localizados en dicho dispositivo (1) son aptos para manipular dichas imágenes almacenadas para generar dicha imagen (4), o conjunto de imágenes, dimensionada(s) oportunamente.
17.- Dispositivo según Ia reivindicación 12 ó 14, caracterizado porque es apto para Ia superposición de dicha imagen retornada o generada (4), con una de dichas imágenes adquiridas (3), en dicha pantalla (2).
18.- Dispositivo según Ia reivindicación 12 ó 13, caracterizado porque es apto para Ia sustitución de una de dichas imágenes adquiridas (3) mediante dicha imagen retornada o generada (4), en dicha pantalla (2).
19.- Dispositivo, según Ia reivindicación 10, caracterizado porque dicha unidad de telecomunicación es apta para transmitir dichas imágenes adquiridas (3) a dicha segunda unidad, al menos en parte o únicamente en blanco y negro.
20.- Dispositivo, según Ia reivindicación 10, caracterizado porque dicha unidad de telecomunicación es apta para transmitir dichas imágenes adquiridas (3) a dicha segunda unidad, enteras o en parte.
21- Dispositivo según Ia reivindicación 1 , caracterizado porque dicha pantalla (2) es apta para mostrar al menos información relativa a aplicaciones propias del dispositivo personal (1).
22.- Dispositivo según Ia reivindicación 21 , caracterizado porque dicha pantalla (2) es una pantalla táctil que permite a un usuario interactuar y utilizar dichas aplicaciones propias del dispositivo personal (1).
23.- Dispositivo personal con funciones de adquirir imágenes, para aplicación de recursos de realidad aumentada, el cual comprende:
- una primera unidad para adquisición de imágenes;
- al menos una pantalla (2) capaz de mostrar en Ia misma al menos unas imágenes adquiridas (3) por dicha primera unidad (1);
- una conexión con una segunda unidad apta para realizar:
- un procesado de una o más de dichas imágenes adquiridas (1) para identificación de al menos un patrón; y
- Ia aportación de información, asociada a dicha imagen adquirida (3), capaz de generar una imagen (4), o conjunto de imágenes, dimensionada(s) oportunamente, apta(s) para ser superpuesta(s), en dicha pantalla (2), a dicha imagen adquirida (3) ó para sustituirla.
24.- Dispositivo según Ia reivindicación 23, caracterizado porque dicha imagen (4) dimensionada oportunamente es representativa de un mensaje de texto plano o en perspectiva.
25.- Dispositivo personal con funciones de adquirir imágenes, para aplicación de recursos de realidad aumentada el cual comprende:
- una primera unidad para adquisición de imágenes;
- al menos una pantalla (2) capaz de mostrar en Ia misma al menos unas imágenes adquiridas (3) por dicha primera unidad (1);
- una segunda unidad apta para realizar: un procesado de una ó más de dichas imágenes adquiridas (3) para identificación de al menos un patrón; y - una unidad de telecomunicación para transmitir dicha imagen adquirida (3) o parte de ella a un punto remoto.
26.- Dispositivo según Ia reivindicación 25, caracterizado porque dicha segunda unidad es apta para realizar también:
- el cálculo de un vector de referencia posicional respecto a dicha unidad de adquisición de imágenes, del patrón identificado; y dicha unidad de telecomunicación está adaptada para transmitir también dicho vector de referencia posicional a dicho punto remoto.
27.- Dispositivo según Ia reivindicación 26, caracterizado porque dicha segunda unidad está adaptada para recibir y tratar una información, asociada a dicha imagen adquirida (3), provinente de dicho punto remoto, para generar una imagen (4), o conjunto de imágenes, dimensionada(s) oportunamente, teniendo en cuenta dicho vector de referencia posicional, apta(s) para ser superpuesta(s), en dicha pantalla (2), a dicha imagen adquirida (3) ó para sustituirla. .
28.- Método para aplicación de recursos de realidad aumentada el cual comprende realizar, mediante un dispositivo personal con funciones de adquirir imágenes, las siguientes etapas:
- adquirir al menos una imagen mediante una primera unidad,
- mostrar dicha imagen adquirida (3), que es al menos una, en una pantalla (2) de dicho dispositivo (1 ), - enviar dicha imagen adquirida (3) a una segunda unidad,
- realizar en dicha segunda unidad al menos:
- un procesado de una o más de dichas imágenes adquiridas (3) para identificación de al menos un patrón,
- el cálculo de un vector de referencia posicional, respecto a dicha primera unidad de adquisición de imágenes, del patrón identificado, - Ia aportación de información, asociada a dicha imagen adquirida (3), capaz de generar una imagen (4), o conjunto de imágenes, dimensionada(s) oportunamente, teniendo en cuenta dicho vector de referencia posicional, apta(s) para ser superpuesta(s), en dicha pantalla (2), a dicha imagen adquirida (3) ó para sustituirla, y
- mostrar en dicha pantalla (2) dicha imagen (4), o conjunto de imágenes, dimensionada(s) oportunamente superpuesta(s) a Ia imagen adquirida (3) o sustituyéndola.
29.- Método según Ia reivindicación 28, caracterizado porque comprende realizar todas las etapas para un conjunto de imágenes, tanto adquiridas (3) como generadas (4) sobre Ia base de dicha información aportada.
30.- Método según Ia reivindicación 29, caracterizado porque dicho conjunto de imágenes forman una tira de video.
31.- Método según Ia reivindicación 28, caracterizado porque comprende realizar dicha adquisición desde diferentes ángulos.
32.- Método según Ia reivindicación 28 ó 29, caracterizado porque dicha información aportada comprende datos para generar diferentes vistas de dicha imagen (4), o conjunto de imágenes, dimensionada(s) oportunamente, cada una de ellas desde un respectivo ángulo.
33.- Método para aplicación de recursos de realidad aumentada el cual comprende realizar, mediante un dispositivo personal con funciones de adquirir imágenes, las siguientes etapas:
- adquirir al menos una imagen mediante una primera unidad,
- mostrar dicha imagen adquirida (3), que es al menos una, en una pantalla (2) de diGho dispositivo (1),
- enviar dicha imagen adquirida (3) a una segunda unidad,
- realizar en dicha segunda unidad al menos:
- un procesado de una o más de dichas imágenes adquiridas (3) para identificación de al menos un patrón, - Ia aportación de información, asociada a dicha imagen adquirida (3), capaz de generar una imagen (4), o conjunto de imágenes, dimensionada(s) oportunamente, apta(s) para ser superpuesta(s), en dicha pantalla (2), a dicha imagen adquirida (3) ó para sustituirla, y
- mostrar en dicha pantalla (2) dicha imagen (4), o conjunto de imágenes, dimensionada(s) oportunamente superpuesta(s) a Ia imagen adquirida (3) o sustituyéndola.
34.- Dispositivo según Ia reivindicación 33, caracterizado porque dicha imagen (4) dimensionada oportunamente es representativa de un mensaje de texto plano o en perspectiva.
PCT/ES2004/000518 2004-11-19 2004-11-19 Dispositivo personal con funciones de adquirir imágenes, para aplicación de recursos de realidad aumentada y método WO2006056622A1 (es)

Priority Applications (5)

Application Number Priority Date Filing Date Title
CNA2004800446106A CN101080762A (zh) 2004-11-19 2004-11-19 具有图像获取功能、应用于扩充现实性资源的个人装置和方法
JP2007542009A JP2008521110A (ja) 2004-11-19 2004-11-19 ＡｕｇｍｅｎｔｅｄＲｅａｌｉｔｙＲｅｓｏｕｒｃｅｓのアプリケーション用に画像取り込み機能を具備した個人用装置とその方法
EP04798245A EP1814101A1 (en) 2004-11-19 2004-11-19 Personal device with image-acquisition functions for the application of augmented reality resources and corresponding method
PCT/ES2004/000518 WO2006056622A1 (es) 2004-11-19 2004-11-19 Dispositivo personal con funciones de adquirir imágenes, para aplicación de recursos de realidad aumentada y método
US11/804,974 US20070273644A1 (en) 2004-11-19 2007-05-21 Personal device with image-acquisition functions for the application of augmented reality resources and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/ES2004/000518 WO2006056622A1 (es) 2004-11-19 2004-11-19 Dispositivo personal con funciones de adquirir imágenes, para aplicación de recursos de realidad aumentada y método

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US11/804,974 Continuation-In-Part US20070273644A1 (en) 2004-11-19 2007-05-21 Personal device with image-acquisition functions for the application of augmented reality resources and method

Publications (1)

Publication Number Publication Date
WO2006056622A1 true WO2006056622A1 (es) 2006-06-01

Family

ID=36497755

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/ES2004/000518 WO2006056622A1 (es) 2004-11-19 2004-11-19 Dispositivo personal con funciones de adquirir imágenes, para aplicación de recursos de realidad aumentada y método

Country Status (5)

Country Link
US (1) US20070273644A1 (es)
EP (1) EP1814101A1 (es)
JP (1) JP2008521110A (es)
CN (1) CN101080762A (es)
WO (1) WO2006056622A1 (es)

Families Citing this family (64)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8817045B2 (en) 2000-11-06 2014-08-26 Nant Holdings Ip, Llc Interactivity via mobile image recognition
US20140019542A1 (en) * 2003-08-20 2014-01-16 Ip Holdings, Inc. Social Networking System and Behavioral Web
WO2007027738A2 (en) 2005-08-29 2007-03-08 Evryx Technologies, Inc. Interactivity via mobile image recognition
US9013505B1 (en) * 2007-11-27 2015-04-21 Sprint Communications Company L.P. Mobile system representing virtual objects on live camera image
US8769437B2 (en) * 2007-12-12 2014-07-01 Nokia Corporation Method, apparatus and computer program product for displaying virtual media items in a visual media
US8239132B2 (en) 2008-01-22 2012-08-07 Maran Ma Systems, apparatus and methods for delivery of location-oriented information
KR100963238B1 (ko) * 2008-02-12 2010-06-10 광주과학기술원 개인화 및 협업을 위한 테이블탑-모바일 증강현실 시스템과증강현실을 이용한 상호작용방법
FR2928805B1 (fr) * 2008-03-14 2012-06-01 Alcatel Lucent Procede permettant la mise en oeuvre de la video enrichie sur les terminaux mobiles.
DE102008015527A1 (de) * 2008-03-25 2009-10-01 Volkswagen Ag Verfahren und Einrichtung zum Erzeugen eines Augmented-Reality-Bildes
US20090300101A1 (en) * 2008-05-30 2009-12-03 Carl Johan Freer Augmented reality platform and method using letters, numbers, and/or math symbols recognition
US20100008265A1 (en) * 2008-07-14 2010-01-14 Carl Johan Freer Augmented reality method and system using logo recognition, wireless application protocol browsing and voice over internet protocol technology
US20100009713A1 (en) * 2008-07-14 2010-01-14 Carl Johan Freer Logo recognition for mobile augmented reality environment
US9824495B2 (en) 2008-09-11 2017-11-21 Apple Inc. Method and system for compositing an augmented reality scene
US20100191728A1 (en) * 2009-01-23 2010-07-29 James Francis Reilly Method, System Computer Program, and Apparatus for Augmenting Media Based on Proximity Detection
TWI514337B (zh) * 2009-02-20 2015-12-21 尼康股份有限公司 Carrying information machines, photographic devices, and information acquisition systems
DE102009058802B4 (de) * 2009-12-18 2018-03-29 Airbus Operations Gmbh Anordnung zur kombinierten Darstellung eines realen und eines virtuellen Modells
EP2355526A3 (en) 2010-01-14 2012-10-31 Nintendo Co., Ltd. Computer-readable storage medium having stored therein display control program, display control apparatus, display control system, and display control method
JP5898842B2 (ja) 2010-01-14 2016-04-06 任天堂株式会社 携帯型情報処理装置、携帯型ゲーム装置
US8866845B2 (en) * 2010-03-10 2014-10-21 Empire Technology Development Llc Robust object recognition by dynamic modeling in augmented reality
JP5800501B2 (ja) 2010-03-12 2015-10-28 任天堂株式会社 表示制御プログラム、表示制御装置、表示制御システム、及び、表示制御方法
JP4971483B2 (ja) * 2010-05-14 2012-07-11 任天堂株式会社 画像表示プログラム、画像表示装置、画像表示システム、および画像表示方法
US8633947B2 (en) 2010-06-02 2014-01-21 Nintendo Co., Ltd. Computer-readable storage medium having stored therein information processing program, information processing apparatus, information processing system, and information processing method
US8384770B2 (en) 2010-06-02 2013-02-26 Nintendo Co., Ltd. Image display system, image display apparatus, and image display method
EP2395769B1 (en) 2010-06-11 2015-03-04 Nintendo Co., Ltd. Image display program, image display system, and image display method
EP2395474A3 (en) 2010-06-11 2014-03-26 Nintendo Co., Ltd. Storage medium having image recognition program stored therein, image recognition apparatus, image recognition system, and image recognition method
JP5647819B2 (ja) 2010-06-11 2015-01-07 任天堂株式会社 携帯型電子機器
JP5769392B2 (ja) * 2010-08-26 2015-08-26 キヤノン株式会社 情報処理装置およびその方法
JP5814532B2 (ja) * 2010-09-24 2015-11-17 任天堂株式会社 表示制御プログラム、表示制御装置、表示制御システム及び表示制御方法
JP5739674B2 (ja) 2010-09-27 2015-06-24 任天堂株式会社 情報処理プログラム、情報処理装置、情報処理システム、および、情報処理方法
US8854356B2 (en) 2010-09-28 2014-10-07 Nintendo Co., Ltd. Storage medium having stored therein image processing program, image processing apparatus, image processing system, and image processing method
EP2649504A1 (en) * 2010-12-10 2013-10-16 Sony Ericsson Mobile Communications AB Touch sensitive haptic display
US8913085B2 (en) 2010-12-22 2014-12-16 Intel Corporation Object mapping techniques for mobile augmented reality applications
US10242456B2 (en) 2011-06-23 2019-03-26 Limitless Computing, Inc. Digitally encoded marker-based augmented reality (AR)
US9606992B2 (en) * 2011-09-30 2017-03-28 Microsoft Technology Licensing, Llc Personal audio/visual apparatus providing resource management
JP6121647B2 (ja) 2011-11-11 2017-04-26 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
US9277367B2 (en) 2012-02-28 2016-03-01 Blackberry Limited Method and device for providing augmented reality output
EP2635013A1 (en) * 2012-02-28 2013-09-04 BlackBerry Limited Method and device for providing augmented reality output
US20130298001A1 (en) * 2012-05-04 2013-11-07 Quad/Graphics, Inc. Presenting actionable elements on a device relating to an object
CN103428430B (zh) * 2012-05-23 2019-11-12 杭州阿尔法红外检测技术有限公司 影像摄影装置和影像摄影方法
US20130314443A1 (en) * 2012-05-28 2013-11-28 Clayton Grassick Methods, mobile device and server for support of augmented reality on the mobile device
JP6192264B2 (ja) * 2012-07-18 2017-09-06 株式会社バンダイ 携帯端末装置、端末プログラム、拡張現実感システム、および衣類
KR102009928B1 (ko) * 2012-08-20 2019-08-12 삼성전자 주식회사 협업 구현 방법 및 장치
WO2014091824A1 (ja) 2012-12-10 2014-06-19 ソニー株式会社 表示制御装置、表示制御方法およびプログラム
US20140168264A1 (en) 2012-12-19 2014-06-19 Lockheed Martin Corporation System, method and computer program product for real-time alignment of an augmented reality device
US9613448B1 (en) * 2014-03-14 2017-04-04 Google Inc. Augmented display of information in a device view of a display screen
US9886698B2 (en) * 2014-07-25 2018-02-06 Dreamwell, Ltd. Augmented reality product brochure application
US9350924B2 (en) * 2014-08-25 2016-05-24 John G. Posa Portable electronic devices with integrated image/video compositing
AU2016225963B2 (en) 2015-03-05 2021-05-13 Magic Leap, Inc. Systems and methods for augmented reality
US10838207B2 (en) * 2015-03-05 2020-11-17 Magic Leap, Inc. Systems and methods for augmented reality
JP6065084B2 (ja) * 2015-10-30 2017-01-25 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
WO2017096396A1 (en) 2015-12-04 2017-06-08 Magic Leap, Inc. Relocalization systems and methods
AU2017305227B2 (en) 2016-08-02 2021-12-16 Magic Leap, Inc. Fixed-distance virtual and augmented reality systems and methods
US10812936B2 (en) 2017-01-23 2020-10-20 Magic Leap, Inc. Localization determination for mixed reality systems
US10861237B2 (en) 2017-03-17 2020-12-08 Magic Leap, Inc. Mixed reality system with multi-source virtual content compositing and method of generating virtual content using same
CN117873313A (zh) 2017-03-17 2024-04-12 奇跃公司 具有彩色虚拟内容扭曲的混合现实***及使用该***生成虚拟内容的方法
JP7055815B2 (ja) 2017-03-17 2022-04-18 マジック リープ， インコーポレイテッド 仮想コンテンツをワーピングすることを伴う複合現実システムおよびそれを使用して仮想コンテンツを生成する方法
US10591730B2 (en) 2017-08-25 2020-03-17 II Jonathan M. Rodriguez Wristwatch based interface for augmented reality eyewear
US10777009B2 (en) * 2018-02-18 2020-09-15 CN2, Inc. Dynamically forming an immersive augmented reality experience through collaboration between a consumer and a remote agent
WO2020023383A1 (en) 2018-07-23 2020-01-30 Magic Leap, Inc. Mixed reality system with virtual content warping and method of generating virtual content using same
US10964112B2 (en) 2018-10-12 2021-03-30 Mapbox, Inc. Candidate geometry displays for augmented reality
US11461976B2 (en) * 2018-10-17 2022-10-04 Mapbox, Inc. Visualization transitions for augmented reality
US11423620B2 (en) * 2020-03-05 2022-08-23 Wormhole Labs, Inc. Use of secondary sources for location and behavior tracking
US11410359B2 (en) * 2020-03-05 2022-08-09 Wormhole Labs, Inc. Content and context morphing avatars
US20240143067A1 (en) * 2022-11-01 2024-05-02 Samsung Electronics Co., Ltd. Wearable device for executing application based on information obtained by tracking external object and method thereof

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5815411A (en) * 1993-09-10 1998-09-29 Criticom Corporation Electro-optic vision system which exploits position and attitude
US20020163499A1 (en) * 2001-03-29 2002-11-07 Frank Sauer Method and apparatus for augmented reality visualization
US20030179218A1 (en) * 2002-03-22 2003-09-25 Martins Fernando C. M. Augmented reality system
JP2004341642A (ja) * 2003-05-13 2004-12-02 Nippon Telegr & Teleph Corp <Ntt> 画像合成表示方法、画像合成表示プログラム、並びにこの画像合成表示プログラムを記録した記録媒体

Family Cites Families (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6054999A (en) * 1988-03-22 2000-04-25 Strandberg; Oerjan Method and apparatus for computer supported animation
US5252950A (en) * 1991-12-20 1993-10-12 Apple Computer, Inc. Display with rangefinder
US5625765A (en) * 1993-09-03 1997-04-29 Criticom Corp. Vision systems including devices and methods for combining images for extended magnification schemes
US6037936A (en) * 1993-09-10 2000-03-14 Criticom Corp. Computer vision system with a graphic user interface and remote camera control
US5850352A (en) * 1995-03-31 1998-12-15 The Regents Of The University Of California Immersive video, including video hypermosaicing to generate from multiple video views of a scene a three-dimensional video mosaic from which diverse virtual video scene images are synthesized, including panoramic, scene interactive and stereoscopic images
US6282362B1 (en) * 1995-11-07 2001-08-28 Trimble Navigation Limited Geographical position/image digital recording and display system
US6222583B1 (en) * 1997-03-27 2001-04-24 Nippon Telegraph And Telephone Corporation Device and system for labeling sight images
US6173239B1 (en) * 1998-09-30 2001-01-09 Geo Vector Corporation Apparatus and methods for presentation of information relating to objects being addressed
US20010034668A1 (en) * 2000-01-29 2001-10-25 Whitworth Brian L. Virtual picture hanging via the internet
US20030210228A1 (en) * 2000-02-25 2003-11-13 Ebersole John Franklin Augmented reality situational awareness system and method
AU2001264954A1 (en) * 2000-05-25 2001-12-03 Realitybuy, Inc. A real time, three-dimensional, configurable, interactive product display systemand method
JP3406965B2 (ja) * 2000-11-24 2003-05-19 キヤノン株式会社 複合現実感提示装置及びその制御方法
US7007243B2 (en) * 2000-12-20 2006-02-28 Eastman Kodak Company Method and apparatus for producing digital images with embedded image capture location icons
AU2002303082A1 (en) * 2001-01-26 2002-09-12 Zaxel Systems, Inc. Real-time virtual viewpoint in simulated reality environment
EP1377870A2 (en) * 2001-03-30 2004-01-07 Koninklijke Philips Electronics N.V. Method, system and device for augmented reality
US7215322B2 (en) * 2001-05-31 2007-05-08 Siemens Corporate Research, Inc. Input devices for augmented reality applications
US20020188959A1 (en) * 2001-06-12 2002-12-12 Koninklijke Philips Electronics N.V. Parallel and synchronized display of augmented multimedia information
US8750480B2 (en) * 2001-08-03 2014-06-10 Nokia Corporation Mobile browsing
US20030218638A1 (en) * 2002-02-06 2003-11-27 Stuart Goose Mobile multimodal user interface combining 3D graphics, location-sensitive speech interaction and tracking technologies
JP2004102835A (ja) * 2002-09-11 2004-04-02 Univ Waseda 情報提供方法およびそのシステム、携帯型端末装置、頭部装着装置、並びにプログラム
US6985240B2 (en) * 2002-12-23 2006-01-10 International Business Machines Corporation Method and apparatus for retrieving information about an object of interest to an observer
US20040130566A1 (en) * 2003-01-07 2004-07-08 Prashant Banerjee Method for producing computerized multi-media presentation
JP2006513509A (ja) * 2003-02-03 2006-04-20 シーメンス　アクチエンゲゼルシヤフト 合成情報の投影
US6795768B2 (en) * 2003-02-20 2004-09-21 Motorola, Inc. Handheld object selector
US7872669B2 (en) * 2004-01-22 2011-01-18 Massachusetts Institute Of Technology Photo-based mobile deixis system and related techniques
US20050253840A1 (en) * 2004-05-11 2005-11-17 Kwon Ryan Y W Method and system for interactive three-dimensional item display
US20050285878A1 (en) * 2004-05-28 2005-12-29 Siddharth Singh Mobile platform
DE102005061211B4 (de) * 2004-12-22 2023-04-06 Abb Schweiz Ag Verfahren zum Erzeugen einer Mensch-Maschine-Benutzer-Oberfläche
US7720436B2 (en) * 2006-01-09 2010-05-18 Nokia Corporation Displaying network objects in mobile devices based on geolocation
US20060190812A1 (en) * 2005-02-22 2006-08-24 Geovector Corporation Imaging systems including hyperlink associations
US20080071559A1 (en) * 2006-09-19 2008-03-20 Juha Arrasvuori Augmented reality assisted shopping

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5815411A (en) * 1993-09-10 1998-09-29 Criticom Corporation Electro-optic vision system which exploits position and attitude
US20020163499A1 (en) * 2001-03-29 2002-11-07 Frank Sauer Method and apparatus for augmented reality visualization
US20030179218A1 (en) * 2002-03-22 2003-09-25 Martins Fernando C. M. Augmented reality system
JP2004341642A (ja) * 2003-05-13 2004-12-02 Nippon Telegr & Teleph Corp <Ntt> 画像合成表示方法、画像合成表示プログラム、並びにこの画像合成表示プログラムを記録した記録媒体

Also Published As

Publication number Publication date
CN101080762A (zh) 2007-11-28
US20070273644A1 (en) 2007-11-29
JP2008521110A (ja) 2008-06-19
EP1814101A1 (en) 2007-08-01

Similar Documents

Publication Publication Date Title
WO2006056622A1 (es) Dispositivo personal con funciones de adquirir imágenes, para aplicación de recursos de realidad aumentada y método
Chen et al. An overview of augmented reality technology
Billinghurst et al. The magicbook-moving seamlessly between reality and virtuality
Schmalstieg et al. Augmented reality: principles and practice
Azuma et al. Recent advances in augmented reality
US9584766B2 (en) Integrated interactive space
Carmigniani et al. Augmented reality: an overview
US9595127B2 (en) Three-dimensional collaboration
US9747722B2 (en) Methods for teaching and instructing in a virtual world including multiple views
Siriborvornratanakul Enhancing User Experiences of Mobile‐Based Augmented Reality via Spatial Augmented Reality: Designs and Architectures of Projector‐Camera Devices
US20050289590A1 (en) Marketing platform
Asai et al. Augmented instructions-a fusion of augmented reality and printed learning materials
Pucihar et al. Exploring the evolution of mobile augmented reality for future entertainment systems
Sukan et al. Quick viewpoint switching for manipulating virtual objects in hand-held augmented reality using stored snapshots
CN102540464A (zh) 提供环绕视频的头戴式显示设备
Tatzgern et al. Exploring real world points of interest: Design and evaluation of object-centric exploration techniques for augmented reality
Hoberman et al. Immersive training games for smartphone-based head mounted displays
Lai et al. Mobile edutainment with interactive augmented reality using adaptive marker tracking
WO2004012141A2 (en) Virtual reality immersion system
Bergig et al. In-place augmented reality
Agarwal et al. The evolution and future scope of augmented reality
Loijens et al. What is augmented reality?
Mackamul et al. A Look at the Effects of Handheld and Projected Augmented-reality on a Collaborative Task
Parashar Augmented Reality a New Era in Education
Simões et al. Creativity support in projection-based augmented environments

Legal Events

Date Code Title Description
AK Designated states

Kind code of ref document: A1

Designated state(s): AE AG AL AM AT AU AZ BA BB BG BR BW BY BZ CA CH CN CO CR CU CZ DE DK DM DZ EC EE EG ES FI GB GD GE GH GM HR HU ID IL IN IS JP KE KG KP KR KZ LC LK LR LS LT LU LV MA MD MG MK MN MW MX MZ NA NI NO NZ OM PG PH PL PT RO RU SC SD SE SG SK SL SY TJ TM TN TR TT TZ UA UG US UZ VC VN YU ZA ZM ZW

AL Designated countries for regional patents

Kind code of ref document: A1

Designated state(s): BW GH GM KE LS MW MZ NA SD SL SZ TZ UG ZM ZW AM AZ BY KG KZ MD RU TJ TM AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HU IE IS IT LU MC NL PL PT RO SE SI SK TR BF BJ CF CG CI CM GA GN GQ GW ML MR NE SN TD TG

121 Ep: the epo has been informed by wipo that ep was designated in this application
WWE Wipo information: entry into national phase

Ref document number: 2007542009

Country of ref document: JP

Ref document number: 1020077011366

Country of ref document: KR

WWE Wipo information: entry into national phase

Ref document number: 2004798245

Country of ref document: EP

Ref document number: 11804974

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 200480044610.6

Country of ref document: CN

WWP Wipo information: published in national office

Ref document number: 2004798245

Country of ref document: EP

WWP Wipo information: published in national office

Ref document number: 11804974

Country of ref document: US