WO2024136383A1 - 외부 전자 장치에 의해 제공되는 멀티미디어 콘텐트를 표시하기 위한 웨어러블 장치 및 그 방법 - Google Patents

외부 전자 장치에 의해 제공되는 멀티미디어 콘텐트를 표시하기 위한 웨어러블 장치 및 그 방법 Download PDF

Info

Publication number
WO2024136383A1
WO2024136383A1 PCT/KR2023/020920 KR2023020920W WO2024136383A1 WO 2024136383 A1 WO2024136383 A1 WO 2024136383A1 KR 2023020920 W KR2023020920 W KR 2023020920W WO 2024136383 A1 WO2024136383 A1 WO 2024136383A1
Authority
WO
WIPO (PCT)
Prior art keywords
wearable device
display
external electronic
electronic device
multimedia content
Prior art date
Application number
PCT/KR2023/020920
Other languages
English (en)
French (fr)
Inventor
남명우
손동일
이보나
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020230000812A external-priority patent/KR20240097658A/ko
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Publication of WO2024136383A1 publication Critical patent/WO2024136383A1/ko

Links

Images

Definitions

  • This disclosure relates to a wearable device and method for displaying multimedia content provided by an external electronic device.
  • the electronic device may be a wearable device that can be worn by a user.
  • the electronic device may be AR glasses and/or a head-mounted device (HMD).
  • HMD head-mounted device
  • a wearable device may include a communication circuit, a display, a camera, a memory for storing instructions, and a processor.
  • the instructions when executed by the processor, may be configured to cause the wearable device to identify an external electronic device based on a first object in an image acquired using the camera.
  • the instructions when executed by the processor, provide information for the wearable device to display multimedia content being provided through the external electronic device to the external electronic device through the communication circuit, based on the identification. It can be configured to request.
  • the instructions, when executed by the processor include a second command for informing the wearable device that the external electronic device is selectable in response to the wearable device receiving the information transmitted from the external electronic device through the communication circuit. It may be configured to display an object in connection with the first object.
  • the instructions when executed by the processor, the instructions cause the wearable device to display the multimedia content obtained from the external electronic device based on the information, based on whether a user input for the first object is detected. It may be configured to display through a display.
  • a method of using a wearable device may include identifying an external electronic device based on a first object in an image acquired using a camera.
  • the method may include an operation of requesting information for displaying multimedia content being provided through the external electronic device to the external device through a communication circuit, based on the identification.
  • the method includes, in response to receiving the information transmitted from the external electronic device through the communication circuit, a second object for indicating that the external electronic device is selectable, displayed in association with the first object.
  • the method may include displaying the multimedia content obtained from the external electronic device through a display based on the information, based on whether a user input for the first object is detected.
  • a computer-readable storage medium storing one or more programs
  • the one or more programs when executed by a processor of a wearable device, display a first object in an image acquired using a camera. Based on this, it may cause the processor of the wearable device to identify an external electronic device.
  • the one or more programs, when executed by the processor of the wearable device are configured to request information for displaying multimedia content being provided through the external electronic device to the external device through a communication circuit, based on the identification. , may cause the processor of the wearable device.
  • the one or more programs when executed by the processor of the wearable device, in response to receiving the information transmitted from the external electronic device through the communication circuit, a second program for notifying that the external electronic device is selectable.
  • the processor of the wearable device may cause the processor of the wearable device to display an object in association with the first object.
  • the one or more programs display the multimedia content obtained from the external electronic device based on the information, based on whether a user input for the first object is detected. may cause the processor of the wearable device to cause the processor of the wearable device to display through .
  • Figure 1 shows an example of a use state of a wearable device, according to an embodiment.
  • Figure 2 shows an example of a block diagram of a wearable device, according to an embodiment.
  • FIG. 3A shows an example of a perspective view of a wearable device, according to an embodiment.
  • FIG. 3B shows an example of one or more hardware deployed within a wearable device, according to one embodiment.
  • 4A to 4B show an example of the appearance of a wearable device, according to an embodiment.
  • Figure 5 shows an example of a screen displayed through a display of a wearable device, according to an embodiment.
  • Figure 6 shows an example of a screen displayed through a display of a wearable device, according to an embodiment.
  • Figure 7 shows an example of a screen displayed through a display of a wearable device, according to an embodiment.
  • Figure 8 shows an example of a use state of a wearable device, according to an embodiment.
  • FIG. 9 illustrates an example of a screen displayed through a display of a wearable device, according to an embodiment.
  • FIG. 10 illustrates an example of a screen displayed through a display of a wearable device, according to an embodiment.
  • FIG. 11 shows an example of a flowchart regarding the operation of a wearable device, according to an embodiment.
  • Figure 12 shows an example of a signal flow diagram related to the operation of a wearable device, according to an embodiment.
  • Figure 13 is an example diagram of a network environment in which metaverse services are provided through a server.
  • the components are not limited. When a component (e.g., a first) component is said to be “connected (functionally or communicatively)" or “connected” to another (e.g., second) component, it means that the component is connected to the other component. It may be connected directly to the component or may be connected through another component (e.g., a third component).
  • module used in this document includes a unit comprised of hardware, software, or firmware, and may be used interchangeably with terms such as logic, logic block, component, or circuit, for example.
  • a module may be an integrated part, a minimum unit that performs one or more functions, or a part thereof.
  • a module may be comprised of an application-specific integrated circuit (ASIC).
  • ASIC application-specific integrated circuit
  • FIG. 1 shows an example of a use state of a wearable device, according to an embodiment.
  • a wearable device 101 may include a head-mounted display (HMD) that is wearable on the user's head.
  • HMD head-mounted display
  • FIGS. 3A to 3B and/or 4A to 4B An example of the structure of the wearable device 101 that can be worn on the user's head is described with reference to FIGS. 3A to 3B and/or 4A to 4B.
  • One or more pieces of hardware included in the wearable device 101 are exemplarily described with reference to FIG. 2 .
  • the first object 110 (eg, external electronic device) in FIG. 1 may include a terminal that is owned by a user.
  • the first object 110 may include smart accessories such as a smartphone, a smartpad, a tablet person computer, and a smartwatch.
  • the external electronic device may include a controller connected to the wearable device 101 through a communication circuit.
  • the wearable device 101 may execute functions related to augmented reality (AR) and/or mixed reality (MR).
  • AR augmented reality
  • MR mixed reality
  • the wearable device 101 may include at least one lens disposed adjacent to the user's eyes.
  • the wearable device 101 may combine light emitted from the display of the wearable device 101 with ambient light passing through the lens.
  • the display area of the display may be formed within a lens through which ambient light passes. Because the wearable device 101 combines the ambient light and the light emitted from the display, the user can perceive a real object perceived by the ambient light and a virtual object formed by the light emitted from the display. You can see an image that is a mixture of (virtual objects).
  • the wearable device 101 may execute functions related to video see-through (VST) and/or virtual reality (VR).
  • VST video see-through
  • VR virtual reality
  • the wearable device 101 may include a housing that covers the user's eyes.
  • the wearable device 101 may include a display disposed on a first side facing the eye.
  • the wearable device 101 may include a camera disposed on a second side opposite to the first side. Using the camera, the wearable device 101 can obtain frames containing ambient light.
  • the wearable device 101 may output the frames in a display disposed on the first side, allowing the user to recognize the ambient light through the display.
  • the display area of the display disposed on the first side may be formed by one or more pixels included in the display.
  • the wearable device 101 may synthesize a virtual object within frames output through the display, allowing the user to recognize the virtual object along with the real object recognized by ambient light.
  • the wearable device 101 may acquire an image using a camera.
  • the wearable device 101 may display a screen 100 representing the image.
  • the wearable device 101 may identify the first object 110 in an image acquired using the camera.
  • the wearable device 101 may identify an external object corresponding to the first object 110 based on identifying the first object.
  • the external object may be an external electronic device.
  • the wearable device 101 is configured to display multimedia content being provided through the external electronic device to the external electronic device through a communication circuit, based on identifying the first object 110. You can request information. For example, the wearable device 101 displays the multimedia content on the first external electronic device through a second external electronic device (e.g., server) that is different from the external electronic device that is the first external electronic device. You can request information for:
  • the first external electronic device may be a device including a display, such as a TV or a computer monitor.
  • the first external electronic device may be a device including a display, such as a smartphone, smart pad, or tablet PC.
  • the first external electronic device may be a device that can provide multimedia content through the display.
  • the wearable device 101 identifies first user information logged in to a first external electronic device corresponding to the first object 110 and second user information logged in to the wearable device 101. can do.
  • the wearable device 101 may identify the identity of the first user information and the second user information.
  • the wearable device 101 may request information for displaying multimedia content being provided by the external electronic device based on the identity of the first user information and the second user information.
  • the wearable device 101 may request the information based on the fact that the first user information and the second user information are at least partially the same.
  • the wearable device 101 may receive the information transmitted from the first external electronic device based at least in part on a request for information for displaying multimedia content. For example, the wearable device 101 may receive the information through a communication circuit. For example, the wearable device 101 may receive information transmitted from a first external electronic device through a second external electronic device. In response to receiving the information, the wearable device 101 may display a second object 115 to notify that the external electronic device is selectable. For example, the wearable device 101 may display the second object 115 in connection with the first object 110. For example, the wearable device 101 notifies that the first object 110 is selectable through the first object 110 or a third object 120 that is different from the first object 110. You can.
  • the third object 120 may be displayed in a different area from the first object 110 and the second object 120.
  • the second object 115 may be displayed along the edge of the first object 110.
  • the second object 115 is displayed as a border of the first object 110, but the second object 115 may be an object that overlaps the first object 110.
  • the wearable device 101 may be displayed by blinking the second object 115 overlaid on the first object 110.
  • the wearable device 101 may display the second object 115 along the edge of the first object 110.
  • the wearable device 101 may overlap the second object 115 on the first object 110 and display it by blinking.
  • the wearable device 101 may emphasize that the first object 110 is selectable through the third object 120.
  • the third object 120 may be displayed on a different area from the first object 110.
  • the first object 110 may be visually emphasized relative to at least one third object in the image.
  • the wearable device 101 may highlight the third object 120 while requesting information for displaying multimedia content provided from an external electronic device.
  • the wearable device 101 indicates that an external electronic device can be selected by flashing the third object 120 or changing the third object 120 to a different color. You can.
  • the wearable device 101 may receive an input about the first object 110.
  • the wearable device 101 can identify the input to the third object 120.
  • the wearable device 101 may display the multimedia content through a display based on information for displaying the multimedia content in response to an input to the first object 110 and/or the third object 120.
  • the wearable device 101 may provide multimedia content through a display following multimedia content provided through an external electronic device. The operation of displaying multimedia content through a display will be described later with reference to FIG. 5 .
  • the wearable device 101 may identify the first object 110 in an image acquired using a camera.
  • the wearable device 101 may identify an external electronic device corresponding to the first object 110 based on the first object 110 . Based on the identification, the wearable device 101 may request information for displaying multimedia content being provided through the first external electronic device from the first external electronic device through a communication circuit.
  • the wearable device 101 displays a first external electronic device for notifying that the first external electronic device is selectable.
  • the second object 115 and/or the third object 120 may be displayed.
  • the wearable device 101 may respond to an input received for the first object 110 and/or the third object 120 and display the multimedia content through a display based on the information. For example, the wearable device 101 may display the multimedia content based on the entire area of the display and/or an area that exceeds a specified ratio of the entire area. The wearable device 101 may enhance the user experience of the wearable device 101 by displaying the multimedia content based on receiving information related to the multimedia content provided from the first external electronic device.
  • FIG. 2 shows an example of a block diagram of a wearable device, according to an embodiment.
  • the wearable device 101 of FIG. 2 may include the wearable device 101 of FIG. 1 .
  • the wearable device 101 includes at least one of a processor 210, a memory 220, a display 230, a communication circuit 240, and a camera 250. can do.
  • the processor 210, memory 220, display 230, communication circuit 240, and camera 250 are electrically connected to each other by electronic components such as a communication bus 205. and/or may be operably coupled with each other.
  • hardware being operatively combined may mean that a direct connection or an indirect connection between the hardware is established wired or wirelessly so that the second hardware is controlled by the first hardware among the hardware. Although shown in different blocks, the embodiment is not limited thereto.
  • the type and/or number of hardware included in the wearable device 101 is not limited to that shown in FIG. 2 .
  • the wearable device 101 may include only some of the hardware shown in FIG. 2 .
  • the wearable device 101 may include hardware for processing data based on one or more instructions.
  • hardware for processing data may include the processor 210.
  • hardware for processing data may include an arithmetic and logic unit (ALU), a floating point unit (FPU), a field programmable gate array (FPGA), a central processing unit (CPU), and/or an application processor (AP).
  • ALU arithmetic and logic unit
  • FPU floating point unit
  • FPGA field programmable gate array
  • CPU central processing unit
  • AP application processor
  • the processor 210 has the structure of a single-core processor, or is a multi-core processor such as dual core, quad core, hexa core, or octa core. It can have a structure of The operations of FIG. 1 and/or the operations described below may be performed by the processor 210.
  • the memory 220 of the wearable device 101 may include components for storing data and/or instructions input and/or output to the processor 210 of the wearable device 101.
  • the memory 220 may include volatile memory such as random-access memory (RAM) and/or non-volatile memory such as read-only memory (ROM).
  • volatile memory may include at least one of dynamic RAM (DRAM), static RAM (SRAM), cache RAM, and pseudo SRAM (PSRAM).
  • non-volatile memory includes programmable ROM (PROM), erasable PROM (EPROM), electrically erasable PROM (EEPROM), flash memory, hard disk, compact disk, solid state drive (SSD), and embedded multi-media (eMMC). card) may be included.
  • the display 230 of the wearable device 101 may output visualized information to the user.
  • the display 230 is controlled by the processor 210 including a circuit such as a graphic processing unit (GPU), and can output visualized information to the user.
  • the display 230 may include a flat panel display (FPD) and/or electronic paper.
  • the FPD may include a liquid crystal display (LCD), a plasma display panel (PDP), and/or one or more light emitting diodes (LED).
  • the LED may include an organic LED (OLED).
  • the wearable device 101 may provide virtual reality and/or actual reality through the display 230.
  • the virtual reality may include a virtual object synthesized on an image acquired through the camera 250.
  • the virtual reality may include mixed reality.
  • the wearable device 101 may display an image acquired through the camera 250 through the display 230.
  • the operation of displaying an image acquired through the camera 250 may be referred to as a video see-through (VST) mode.
  • VST video see-through
  • the communication circuit 240 of the wearable device 101 may include hardware components to support transmission and/or reception of electrical signals between the wearable device 101 and the external electronic device 103.
  • the communication circuit 240 may include at least one of a modem (MODEM), an antenna, and an optical/electronic (O/E) converter.
  • the communication circuit 240 includes Ethernet, LAN (local area network), WAN (wide area network), WiFi (wireless fidelity), Bluetooth, BLE (Bluetooth low energy), ZigBee, and LTE (long term). evolution) and 5G NR (5th generation ne radio) may support transmission and/or reception of electrical signals based on various types of protocols.
  • the wearable device 101 may establish a communication link with an external electronic device through the communication circuit 240. For example, the wearable device 101 may transmit and/or receive an electrical signal for requesting information through the communication circuit 240. For example, the wearable device 101 may request information to display multimedia content being provided through the external electronic device from an external electronic device through the communication circuit 240. The wearable device 101 may transmit second user information logged into the wearable device 101 to the external electronic device in order to request information about the first user logged into the external electronic device. The wearable device 101 may encrypt the second user information and transmit it to an external electronic device. The external electronic device may identify the identity of the first user information and the second user information based on receiving the second user information.
  • the wearable device 101 may identify the identity of the first user information and the second user information by decoding the second user information.
  • the external electronic device and wearable device 101 may establish a communication link based on identification of the identity of the first user information and the second user information.
  • the external electronic device may transmit information related to multimedia content transmitted from the wearable device 101 and provided by the external electronic device to the wearable device 101 based on the identification of the identity.
  • the wearable device 101 may display the multimedia content through the display 230 based on receiving information related to the multimedia content.
  • the information related to the multimedia content may include information related to the provision of the multimedia content, such as the name of the multimedia content and/or the playback time of the multimedia content.
  • the camera 250 of the wearable device 101 may include a lens assembly or an image sensor.
  • the lens assembly may collect light emitted from a subject that is the target of image capture.
  • a lens assembly may include one or more lenses.
  • the camera 250 may include a plurality of lens assemblies.
  • the camera 250 may include some of the plurality of lens assemblies having the same lens properties (e.g., angle of view, focal length, autofocus, f number, or optical zoom) or at least one
  • a lens assembly may have one or more lens properties that are different from the lens properties of another lens assembly.
  • the lens assembly may include a wide-angle lens or a telephoto lens.
  • the image sensor is, for example, an image sensor selected from among image sensors with different properties, such as an RGB sensor, a BW (black and white) sensor, an IR sensor, or a UV sensor, and has the same properties. It may include a plurality of image sensors, or a plurality of image sensors with different properties. Each image sensor included in the image sensor may be implemented using, for example, a charged coupled device (CCD) sensor or a complementary metal oxide semiconductor (CMOS) sensor.
  • the wearable device 101 may acquire an image through the camera 250. The wearable device 101 may perform an operation of displaying an image acquired through the camera 250.
  • the operation of the wearable device 101 displaying an image acquired through the camera 250 within a VR environment may be referred to as VST mode.
  • the wearable device 101 may display a visual object on at least part of the image while operating in the VST mode.
  • the visual object may be a virtual object created by the processor 210 of the wearable device 101.
  • the wearable device 101 may display the visual object and/or virtual object by overlapping the image.
  • the wearable device 101 can identify the actual object identified in the image.
  • the wearable device 101 may display a visual object overlapping with the real object to inform that the real object is selectable.
  • the wearable device 101 may provide actual reality through the display 230.
  • the wearable device 101 may provide actual reality viewed through the display 230.
  • the wearable device 101 may display a virtual object on the display 230 within the AR environment.
  • the wearable device 101 sends a second object (e.g., the second object 115 in FIG. 1) to notify that an external electronic device can be selected, and a first object corresponding to the external electronic device. It can be displayed in connection with an object (eg, the first object 110 in FIG. 1).
  • the wearable device 101 may receive an input for the first object based on the display of the second object.
  • the wearable device 101 may receive an input for the first object using a controller with which a communication link is established with the wearable device 101.
  • the wearable device 101 may receive an input about the first object based on tracking the user's gaze.
  • the wearable device 101 may display multimedia content provided by the external electronic device through the display 230. Input to the first object is not limited to the above.
  • the wearable device 101 may acquire an image through the camera 250.
  • the wearable device 101 may identify an external electronic device corresponding to the first object included in the image. Based on the identification, the wearable device 101 may request information for displaying multimedia content being provided through the external electronic device through the communication circuit 240 to the external electronic device.
  • the wearable device 101 may receive the information transmitted from the external electronic device based at least in part on the request.
  • the wearable device 101 may display a second object in association with the first object to notify that the external electronic device is selectable.
  • the wearable device 101 may display the multimedia content based on the information in response to an input received for the first object associated with the second object.
  • the wearable device 101 may display multimedia content being provided by the external electronic device corresponding to the first object in conjunction with the external electronic device.
  • the wearable device 101 can provide the multimedia content from the time the multimedia content is being played on an external electronic device.
  • the wearable device 101 can enhance the user experience of the wearable device 101 by continuing to provide multimedia content being provided by an external electronic device.
  • FIG. 3A shows an example of a perspective view of a wearable device, according to an embodiment.
  • FIG. 3B shows an example of one or more hardware deployed within a wearable device, according to one embodiment.
  • the wearable device 300 of FIGS. 3A to 3B may include the wearable device 101 of FIGS. 1 and/or 2 .
  • 3A (as shown in), according to one embodiment, the wearable device 300 may include at least one display 350 and a frame supporting the at least one display 350. .
  • the wearable device 300 may be worn on a part of the user's body.
  • the wearable device 300 provides the user wearing the wearable device 300 with augmented reality (AR), virtual reality (VR), or a mixed reality that combines augmented reality and virtual reality.
  • AR augmented reality
  • VR virtual reality
  • MR mixed reality that combines augmented reality and virtual reality.
  • the wearable device 300 outputs a virtual reality image to the user through at least one display 350 in response to the user's designated gesture acquired through the motion recognition camera 340-2 of FIG. 3B. can do.
  • At least one display 350 in the wearable device 300 may provide visual information to the user.
  • the at least one display 350 may include the display 230 of FIG. 2 .
  • at least one display 350 may include a transparent or translucent lens.
  • At least one display 350 may include a first display 350-1 and/or a second display 350-2 spaced apart from the first display 350-1.
  • the first display 350-1 and the second display 350-2 may be placed at positions corresponding to the user's left eye and right eye, respectively.
  • At least one display 350 forms a display area on the lens to display visual information included in external light passing through the lens to a user wearing the wearable device 300. It can provide other visual information that is distinct from visual information.
  • the lens may be formed based on at least one of a Fresnel lens, a pancake lens, or a multi-channel lens.
  • the display area formed by at least one display 350 may be formed on the first side 331 and the second side 332 of the second side 332 of the lens.
  • At least one display 350 may display a virtual reality image to be combined with a real screen transmitted through external light.
  • the virtual reality image output from at least one display 350 includes one or more hardware (e.g., optical devices 382, 384, and/or at least one waveguides) included in the wearable device 300. )(333, 334)), it can be transmitted to the user's eyes.
  • the wearable device 300 includes waveguides 333 that diffract light transmitted from at least one display 350 and relayed by the optical devices 382 and 384 and deliver it to the user. , 334).
  • the waveguides 333 and 334 may be formed based on at least one of glass, plastic, or polymer.
  • a nanopattern may be formed on the outside or at least a portion of the inside of the waveguides 333 and 334.
  • the nanopattern may be formed based on a polygonal and/or curved grating structure. Light incident on one end of the waveguides 333 and 334 may propagate to the other end of the waveguides 333 and 334 by the nanopattern.
  • the waveguides 333 and 334 may include at least one of a diffractive element (eg, a diffractive optical element (DOE) or a holographic optical element (HOE)) or a reflective element (eg, a reflective mirror).
  • a diffractive element eg, a diffractive optical element (DOE) or a holographic optical element (HOE)
  • a reflective element eg, a reflective mirror.
  • the waveguides 333 and 334 may be disposed within the wearable device 300 to guide the screen displayed by at least one display 350 to the user's eyes.
  • the screen may be transmitted to the user's eyes based on total internal reflection (TIR) generated within the waveguides 333 and 334.
  • TIR total internal reflection
  • the wearable device 300 analyzes objects included in the real-life image collected through the shooting camera 340-1, and selects an object that is the target of providing augmented reality from among the analyzed objects. Corresponding virtual objects can be combined and displayed on at least one display 350.
  • the virtual object may include at least one of text and images for various information related to the object included in the real image.
  • the wearable device 300 can analyze objects based on multi-cameras, such as stereo cameras. For the object analysis, the wearable device 300 may execute time-of-flight (ToF) and/or simultaneous localization and mapping (SLAM) supported by multi-cameras. A user wearing the wearable device 300 can watch images displayed on at least one display 350.
  • ToF time-of-flight
  • SLAM simultaneous localization and mapping
  • the frame may be made of a physical structure that allows the wearable device 300 to be worn on the user's body.
  • the frame allows the first display 350-1 and the second display 350-2 to be positioned to correspond to the user's left eye and right eye when the user wears the wearable device 300. It can be configured so that The frame may support at least one display 350.
  • the frame may support the first display 350-1 and the second display 350-2 to be positioned at positions corresponding to the user's left and right eyes.
  • the frame when the user wears the wearable device 300, the frame may include an area 320 at least partially in contact with a portion of the user's body.
  • the area 320 of the frame in contact with a part of the user's body includes an area in contact with a part of the user's nose, a part of the user's ear, and a side part of the user's face that the wearable device 300 touches. can do.
  • the frame may include a nose pad 310 that contacts a part of the user's body. When the wearable device 300 is worn by a user, the nose pad 310 may be in contact with a portion of the user's nose.
  • the frame may include a first temple 304 and a second temple 305 that are in contact with another part of the user's body that is distinct from the part of the user's body.
  • the frame includes a first rim 301 surrounding at least a portion of the first display 350-1 and a second rim 302 surrounding at least a portion of the second display 350-2. , a bridge 303 disposed between the first rim 301 and the second rim 302, a first pad disposed along a portion of the edge of the first rim 301 from one end of the bridge 303 ( 311), a second pad 312 disposed along a portion of the edge of the second rim 302 from the other end of the bridge 303, a first temple extending from the first rim 301 and fixed to a portion of the wearer's ear ( 304), and a second temple 305 extending from the second rim 302 and fixed to a portion of the ear opposite the ear.
  • the first pad 311 and the second pad 312 may be in contact with a portion of the user's nose, and the first temple 304 and the second temple 305 may be in contact with a portion of the user's face and a portion of the ear. may come into contact with.
  • the temples 304, 305 may be rotatably connected to the rim via the hinge units 306, 307 of FIG. 3B.
  • the first temple 304 may be rotatably connected to the first rim 301 through a first hinge unit 306 disposed between the first rim 301 and the first temple 304.
  • the second temple 305 may be rotatably connected to the second rim 302 through a second hinge unit 307 disposed between the second rim 302 and the second temple 305.
  • the wearable device 300 detects an external object (e.g., a user's fingertip) touching the frame using a touch sensor, a grip sensor, and/or a proximity sensor formed on at least a portion of the surface of the frame. fingertip)), and/or a gesture performed by the external object may be identified.
  • an external object e.g., a user's fingertip
  • the wearable device 300 may include hardware (eg, hardware described above based on the block diagram of FIG. 2) that performs various functions.
  • the hardware includes a battery module 370, an antenna module 375, optical devices 382, 384, speakers 392-1, 392-2, and microphones 394-1, 394- 2, 394-3), a light emitting module (not shown), and/or a printed circuit board 390.
  • Various hardware can be placed within the frame.
  • the microphones 394-1, 394-2, and 394-3 of the wearable device 300 may be disposed in at least a portion of the frame to obtain a sound signal.
  • microphones 394-3 are shown in FIG. 3B, the number and placement of microphones 394 are not limited to the embodiment of FIG. 3B. If the number of microphones 394 included in the wearable device 300 is two or more, the wearable device 300 can identify the direction of the sound signal using a plurality of microphones disposed on different parts of the frame. there is.
  • the optical devices 382 and 384 may transmit a virtual object transmitted from at least one display 350 to the wave guides 333 and 334.
  • optical devices 382 and 384 may be projectors.
  • the optical devices 382 and 384 may be disposed adjacent to the at least one display 350 or may be included within the at least one display 350 as part of the at least one display 350 .
  • the first optical device 382 may correspond to the first display 350-1
  • the second optical device 384 may correspond to the second display 350-2.
  • the first optical device 382 can transmit the light output from the first display 350-1 to the first waveguide 333
  • the second optical device 384 can transmit the light output from the first display 350-1 to the first waveguide 333.
  • the light output from -2) can be transmitted to the second waveguide 334.
  • the camera 340 may include an eye tracking camera (ET CAM) 340-1, a motion recognition camera 340-2, and/or an imaging camera 340-3. You can.
  • the shooting camera 340-3, the eye tracking camera 340-1, and the motion recognition camera 340-2 may be placed at different positions on the frame and perform different functions.
  • the shooting camera 340-3, eye tracking camera 340-1, and motion recognition camera 340-2 may be examples of the camera 225 of FIG. 2.
  • the gaze tracking camera 340-1 may output data representing the gaze of the user wearing the wearable device 300.
  • the wearable device 300 may detect the gaze from an image including the user's pupils obtained through the gaze tracking camera 340-1.
  • FIG. 3B An example in which the gaze tracking camera 340-1 is positioned toward the user's right eye is shown in FIG. 3B, but the embodiment is not limited thereto, and the gaze tracking camera 340-1 is positioned solely toward the user's left eye. It may be placed towards, or towards both eyes.
  • the capturing camera 340-3 may capture a real image or background to be matched with a virtual image to implement augmented reality or mixed reality content.
  • the capturing camera may capture an image of a specific object that exists at a location where the user is looking and provide the image to at least one display 350.
  • At least one display 350 is one in which a real image or background information including the image of the specific object obtained using a photographing camera and a virtual image provided through the optical devices 382 and 384 are overlapped.
  • the video can be displayed.
  • the imaging camera may be placed on the bridge 303 disposed between the first rim 301 and the second rim 302.
  • the gaze tracking camera 340-1 tracks the gaze of a user wearing the wearable device 300, thereby tracking the user's gaze and visual information provided to at least one display 350. By matching them, a more realistic augmented reality can be realized. For example, when the user looks forward, the wearable device 300 may naturally display environmental information related to the user's front view on at least one display 350 at the location where the user is located.
  • the gaze tracking camera 340-1 may be configured to capture an image of the user's pupil to determine the user's gaze. For example, the gaze tracking camera 340-1 may receive gaze detection light reflected from the user's pupil and track the user's gaze based on the position and movement of the received gaze detection light.
  • the eye tracking camera 340-1 may be placed at positions corresponding to the user's left and right eyes.
  • the eye tracking camera 340-1 may be placed within the first rim 301 and/or the second rim 302 to face the direction in which the user wearing the wearable device 300 is located. You can.
  • the motion recognition camera 340-2 recognizes the movement of the entire or part of the user's body, such as the user's torso, hands, or face, and displays a specific event on the screen provided on at least one display 350. can be provided.
  • the gesture recognition camera 340-2 may recognize a user's gesture, obtain a signal corresponding to the gesture, and provide a display corresponding to the signal to at least one display 350.
  • the processor may identify a signal corresponding to the operation and perform a designated function based on the identification.
  • the motion recognition camera 340-2 may be disposed on the first rim 301 and/or the second rim 302.
  • the camera 340 included in the wearable device 300 is not limited to the eye tracking camera 340-1 and the motion recognition camera 340-2 described above.
  • the wearable device 300 may identify an external object included within the user's FoV using the capturing camera 340-3 disposed toward the user's FoV.
  • the wearable device 300 identifies an external object based on a sensor for identifying the distance between the wearable device 300 and the external object, such as a depth sensor and/or a time of flight (ToF) sensor. It can be.
  • the camera 340 disposed toward the FoV may support an autofocus function and/or an optical image stabilization (OIS) function.
  • the wearable device 300 includes a camera 340 (e.g., a face tracking (FT) camera) disposed toward the face of a user wearing the wearable device 300 to obtain an image including the face. ) may include.
  • FT face tracking
  • the wearable device 300 radiates light toward a subject (e.g., the user's eyes, face, and/or an external object within the FoV) captured using the camera 340. It may further include a light source (eg, LED).
  • the light source may include an LED at an infrared wavelength.
  • the light source may be placed in at least one of the frame and hinge units 306 and 307.
  • the battery module 370 may supply power to electronic components of the wearable device 300.
  • the battery module 370 may be disposed within the first temple 304 and/or the second temple 305.
  • the battery module 370 may be a plurality of battery modules 370 .
  • a plurality of battery modules 370 may be disposed on the first temple 304 and the second temple 305, respectively.
  • the battery module 370 may be disposed at an end of the first temple 304 and/or the second temple 305.
  • the antenna module 375 may transmit a signal or power to the outside of the wearable device 300, or may receive a signal or power from the outside.
  • the antenna module 375 may be electrically and/or operationally connected to a communication circuit (eg, the communication circuit 235 of FIG. 2) within the wearable device 300.
  • the antenna module 375 may be disposed within the first temple 304 and/or the second temple 305.
  • the antenna module 375 may be placed close to one surface of the first temple 304 and/or the second temple 305.
  • the speakers 392-1 and 392-2 may output sound signals to the outside of the wearable device 300.
  • the sound output module may be referred to as a speaker.
  • the speakers 392-1 and 392-2 are disposed adjacent to the ears of the user wearing the wearable device 300, the first temple 304, and/or the second temple 305. ) can be placed within.
  • the wearable device 300 is disposed within the first temple 304 and the second speaker 392-2, which is disposed adjacent to the user's left ear, and the second temple 305 to listen to the user's hearing. It may include a first speaker 392-1, which is disposed adjacent to the right ear.
  • a light emitting module may include at least one light emitting device.
  • the light emitting module may emit light in a color corresponding to a specific state or emit light in an operation corresponding to the specific state. For example, when the wearable device 300 requires charging, it may repeatedly emit red light at designated times.
  • the light emitting module may be disposed on the first rim 301 and/or the second rim 302.
  • the wearable device 300 may include a printed circuit board (PCB) 390.
  • the PCB 390 may be included in at least one of the first temple 304 or the second temple 305.
  • the PCB 390 may include an interposer disposed between at least two sub-PCBs.
  • one or more hardware included in the wearable device 300 eg, hardware shown by the blocks described above with reference to FIG. 2 may be disposed.
  • the wearable device 300 may include a flexible PCB (FPCB) for interconnecting the hardware.
  • FPCB flexible PCB
  • the wearable device 300 includes a gyro sensor for detecting the posture of the wearable device 300 and/or the posture of a body part (e.g., head) of a user wearing the wearable device 300, It may include at least one of a gravity sensor and/or an acceleration sensor.
  • the gravity sensor and acceleration sensor may each measure gravitational acceleration and/or acceleration based on designated three-dimensional axes (eg, x-axis, y-axis, and z-axis) that are perpendicular to each other.
  • a gyro sensor can measure the angular velocity of each of designated three-dimensional axes (e.g., x-axis, y-axis, and z-axis).
  • At least one of the gravity sensor, the acceleration sensor, and the gyro sensor may be referred to as an inertial measurement unit (IMU).
  • the wearable device 300 may identify a user's motion and/or gesture performed to execute or stop a specific function of the wearable device 300 based on the IMU.
  • the wearable device 300 may identify the first object (eg, the first object 110 in FIG. 1) displayed through the display 350.
  • the wearable device 300 may identify an external electronic device corresponding to the first object.
  • the wearable device 300 may request information related to multimedia content provided through the external electronic device based on identifying the external electronic device.
  • the wearable device 300 may display a second object in association with the first object to notify that the external electronic device is selectable.
  • the wearable device 300 may receive an input about the first object associated with the second object.
  • the wearable device 300 may identify the input using the camera 340.
  • the wearable device 300 may identify the input based on the user's gaze tracked using the camera 340.
  • the wearable device 300 may identify the input based on the user's gesture identified using the camera 340.
  • the user's gesture may include a gesture indicating the external electronic device or a first object corresponding to the external electronic device.
  • the user's gesture may include an air-gesture to indicate the first object.
  • the wearable device 300 may display the multimedia content through the display 350 based on information related to the multimedia content transmitted from an external electronic device in response to the input for the first object. For example, the wearable device 300 may display multimedia content being provided at the time the input is identified.
  • FIGS. 4A to 4B show an example of the appearance of a wearable device 400, according to an embodiment.
  • the wearable device 400 of FIGS. 4A to 4B may include the wearable device 101 of FIGS. 1 and 2 .
  • An example of the appearance of the first side 410 of the housing of the wearable device 400, according to one embodiment, is shown in FIG. 4A, and the second side 420 is opposite to the first side 410. ) can be shown in Figure 4b.
  • the first surface 410 of the wearable device 400 may have a form attachable to a user's body part (e.g., the user's face).
  • the wearable device 400 may include a strap for securing to a portion of the user's body, and/or one or more temples (e.g., the first temple 304 of FIGS. 3A-3B , and/or the first temple 304 of FIGS. 3A-3B It may further include 2 temples (305).
  • a first display 350-1 for outputting an image to the left eye of both eyes of the user, and a second display 350-2 for outputting an image to the right eye of the user's both eyes, have a first surface 410 It can be placed on top.
  • the wearable device 400 is formed on the first surface 410 and emits light (e.g., external light (e.g., external light) different from the light emitted from the first display 350-1 and the second display 350-2. Rubber or silicone packing may be further included to prevent interference due to ambient light.
  • the wearable device 400 includes a camera for photographing and/or tracking both eyes of a user adjacent to each of the first display 350-1 and the second display 350-2. It may include (440-1, 440-2). The cameras 440-1 and 440-2 may be referred to as ET cameras. According to one embodiment, the wearable device 400 may include cameras 440-3 and 440-4 for photographing and/or recognizing the user's face. The cameras 440-3 and 440-4 may be referred to as FT cameras.
  • a camera for acquiring information related to the external environment of the wearable device 400 -5, 440-6, 440-7, 440-8, 440-9, 440-10)
  • a sensor e.g., depth sensor 430
  • the cameras 440-5, 440-6, 440-7, 440-8, 440-9, and 440-10 are configured to recognize external objects different from the wearable device 400. It may be placed on (420).
  • the wearable device 400 may obtain images and/or media to be transmitted to each of the user's eyes.
  • the camera 440-9 will be disposed on the second side 420 of the wearable device 400 to acquire an image to be displayed through the second display 350-2 corresponding to the right eye among the two eyes. You can.
  • the camera 440-10 may be disposed on the second side 420 of the wearable device 400 to acquire an image to be displayed through the first display 350-1 corresponding to the left eye among the two eyes. there is.
  • the wearable device 400 may include a depth sensor 430 disposed on the second surface 420 to identify the distance between the wearable device 400 and an external object. Using the depth sensor 430, the wearable device 400 acquires spatial information (e.g., depth map) about at least a portion of the FoV of the user wearing the wearable device 400. can do.
  • spatial information e.g., depth map
  • a microphone for acquiring sound output from an external object may be disposed on the second side 420 of the wearable device 400.
  • the number of microphones may be one or more depending on the embodiment.
  • the wearable device 400 uses the cameras 440-5, 440-6, 440-7, 440-8, 440-9, and 440- through the display 350.
  • the image acquired through 10) can be displayed.
  • the wearable device 400 may display a first object (eg, the first object 110 in FIG. 1) within the image.
  • the wearable device 400 may identify an external electronic device corresponding to the first object. Based on identifying the external electronic device, the wearable device 400 provides information for displaying multimedia content being provided through the external electronic device through a communication circuit (e.g., the communication circuit 240 of FIG. 2). You can request.
  • the wearable device 400 may receive the information transmitted from an external electronic device based at least in part on the request.
  • the wearable device 400 displays a second object (e.g., the second object 115 in FIG. 2) in association with the first object to indicate that the external electronic device is selectable. can do.
  • the wearable device 400 may receive an input for the first object while displaying the first object and the second object.
  • input to the first object may be identified based on cameras 440-1 and 440-2.
  • the wearable device 400 receives an input for the first object based on tracking the gaze of the user of the wearable device 400 using the cameras 440-1 and 440-2. can be identified.
  • the wearable device 400 is based on the cameras 440-5, 440-6, 440-7, 440-8, 440-9, and 440-10. Gestures can be identified.
  • the wearable device 400 may identify an input for the first object based on the user's gesture.
  • the wearable device 400 may display multimedia content based on the input and information transmitted from the external electronic device.
  • the wearable device 400 may provide multimedia content at a viewpoint corresponding to the input.
  • the wearable device 400 can enhance the user experience of the wearable device 400 by providing multimedia content being played at the time corresponding to the input.
  • Figure 5 shows an example of a screen displayed through a display of a wearable device, according to an embodiment.
  • the wearable device 101 of FIG. 5 may include the wearable device 101 of FIG. 1 and/or FIG. 2 .
  • the wearable device 101 of FIG. 5 may include the wearable device 300 of FIGS. 3A and 3B and/or the wearable device 400 of FIGS. 4A and 4B.
  • the operations of FIG. 5 may be performed by the processor 210 of FIG. 2.
  • the wearable device 101 displays (e.g., FIG. It can be displayed through the display 230 of 2.
  • the wearable device 101 may identify the first object 110 within the image. For example, the wearable device 101 may identify an external electronic device corresponding to the first object 110 based on identifying the first object 110 . Based on identifying the external electronic device, the wearable device 101 may display a second object (eg, the second object 115 in FIG. 2) in association with the first object 110. For example, the wearable device 101 may display a second object in connection with the first object 110 to indicate that the first object 110 can be selected. The wearable device 101 may identify an input to the first object 110 while displaying the first object 110 and/or the second object 115 .
  • the wearable device 101 may identify an input for the first object 110 and/or the second object 115.
  • the wearable device 101 provides multimedia content through an external electronic device corresponding to the first object 110 in response to an input to the first object 110 and/or the second object 115.
  • the screen 520 may represent substantially the same viewpoint as the multimedia content provided through the external electronic device.
  • the wearable device 101 may identify an input for the first object 110 and/or the second object 115.
  • the input may be identified based on the user's gesture of the wearable device 101.
  • the input may be received based on the controller of the wearable device 101.
  • the wearable device 101 may identify an input for dragging the first object 110 and/or the second object 115 .
  • the dragging input maintains the input of pressing the first object 110 and/or the second object 115 using a controller, and the first object 110 and/or the second object 115 are pressed. It may include an input for moving the second object 115.
  • Input to the first object 110 and/or the second object 115 is not limited to the examples described above.
  • the wearable device 101 may display a screen 520 through a display in response to the input.
  • the wearable device 101 may display a screen 520 related to multimedia content provided through an external electronic device corresponding to the first object 110.
  • the wearable device 101 includes multimedia content provided by an external electronic device corresponding to the first object 110, based on identifying the input to the first object 110.
  • the related screen can be displayed on at least part of the display.
  • the wearable device 101 may display a third object 510 related to the multimedia content on at least part of the display.
  • the third object 510 may be a visual object and/or a virtual object for displaying the multimedia content.
  • the wearable device 101 may identify an input to a third object 510 related to multimedia content.
  • the wearable device 101 may identify the input to the third object 510 based on a signal received from the controller.
  • the controller may transmit signals to indicate virtual objects, such as pointers, and/or visual objects within the display.
  • the wearable device 101 may identify an input to the third object 510 based on tracking the user's gaze.
  • the wearable device 101 may display the multimedia content based on the entire area of the display based on identifying the input.
  • the wearable device 101 may display multimedia content through the screen 520 of the display.
  • the wearable device 101 may change to the second example 505 so that the multimedia content being provided in the first example 500 can be continued to be viewed.
  • the wearable device 101 may display a fourth object 530 for switching to the first example 500 within the screen 520.
  • the wearable device 101 may display the fourth object 530 overlapping with the screen 520 related to multimedia content. While displaying the screen 520, the wearable device 101 may stop displaying the fourth object 530 based on exceeding a specified duration. For example, the wearable device 101 may at least temporarily stop displaying the fourth object 530 to provide multimedia content through the entire display area.
  • the wearable device 101 can identify an external electronic device while operating in VST mode.
  • the wearable device 101 may display a second object to inform the external electronic device that the first object 110 can be selected.
  • the wearable device 101 displays multimedia content provided by an external electronic device corresponding to the first object 110 in at least a partial area of the display. It can be displayed.
  • the wearable device 101 may display the multimedia content through a visual object such as the third object 510.
  • the wearable device 101 may display a screen 520 related to multimedia content based on the input to the third object 510.
  • the screen 520 related to the multimedia content may be the entire display area.
  • the wearable device 101 may display a fourth object 530 to reduce the size of the screen 520.
  • the wearable device 101 may change the size of the screen 520 to the size of the third object 510 based on the input for the fourth object 530.
  • the size of the screen 520, the size of the third object 510, and/or the location of the third object 510 are not limited.
  • the wearable device 101 can switch the third object 510 and the screen 520.
  • the wearable device 101 may enhance the user experience of the wearable device 101 by performing the transition based on the user's input.
  • Figure 6 shows an example of a screen displayed through a display of a wearable device, according to an embodiment.
  • the wearable device 101 of FIG. 6 may include the wearable device 101 of FIGS. 1, 2, and/or 5.
  • the wearable device 101 of FIG. 6 may include the wearable device 300 of FIGS. 3A and 3B and/or the wearable device 400 of FIGS. 4A and 4B.
  • the operations of FIG. 6 may be performed by the processor 210 of FIG. 2.
  • the wearable device 101 may acquire an image through a camera.
  • the wearable device 101 may identify the first object 110 in the image.
  • the wearable device 101 may identify an external electronic device corresponding to the first object 110.
  • the wearable device 101 may identify a second object 620 and/or a third object 630 that are different from the first object.
  • the second object 620 and/or the third object 630 may be objects displayed based on execution of a software application.
  • the wearable device 101 uses the second object 620 and/or the third object 630 while the external electronic device corresponding to the first object 110 provides multimedia content. can be identified.
  • Nested objects can be moved. For example, within the first example 600, the wearable device 101 may move the third object 630 that overlaps the first object 110. For example, the wearable device 101 may move the third object 630 based on identifying the overlapping area 610 of the first object 110 and the third object 630.
  • the second example 605 may be an example of moving the third object 630 that overlaps the first object 110.
  • the wearable device 101 may move the third object 630 to an area 635 where the overlapped area 610 is not identified.
  • the wearable device 101 may identify a plurality of objects 620 and 630.
  • the wearable device 101 may highlight and display a third object 630 including an area 610 that overlaps the first object 110 among the plurality of objects 620 and 630.
  • the operation of highlighting and displaying may include an operation of blinking the third object 630.
  • the operation of emphasizing display may include an operation of displaying the third object 630 in a different color. But it is not limited to this.
  • the wearable device 101 may receive an input for the third object 630 while emphasizing and displaying the third object 630.
  • the input may include an input for dragging the third object 630.
  • the wearable device 101 may move the third object 630 based on the input.
  • the wearable device 101 may identify the first object 110 corresponding to an external electronic device providing multimedia content.
  • the wearable device 101 may identify a third object 630 that at least partially overlaps the first object 110.
  • the wearable device 101 may move the third object 630 to an area 635 that does not overlap the first object 110 .
  • the wearable device 101 may move the third object 630 based on an input to the third object 630.
  • the wearable device 101 can provide multimedia content provided from an external electronic device corresponding to the first object 110 to the user by moving the third object 630 that overlaps the first object 110. .
  • the wearable device 101 assists the user in viewing multimedia content provided through an external electronic device corresponding to the first object 110 by moving the third object 630 that overlaps the first object 110. can be given.
  • Figure 7 shows an example of a screen displayed through a display of a wearable device, according to an embodiment.
  • the wearable device 101 of FIG. 7 may include the wearable device 101 of FIGS. 1, 2, 5, and/or 6.
  • the wearable device 101 of FIG. 7 may include the wearable device 300 of FIGS. 3A and 3B and/or the wearable device 400 of FIGS. 4A and 4B.
  • the operations of FIG. 7 may be performed by the processor 210 of FIG. 2 .
  • the wearable device 101 may acquire an image through a camera (eg, camera 250 of FIG. 2).
  • the wearable device 101 may display objects created by a processor (eg, processor 210 of FIG. 2) along with the image.
  • the wearable device 101 may identify the first object 110 within the image.
  • the wearable device 101 may identify an external electronic device corresponding to the first object 110 based on the first object 110 . Based on the identification, the wearable device 101 may request information to display multimedia content being provided through the external electronic device to the external electronic device.
  • the wearable device 101 may receive the information transmitted from the external electronic device based at least in part on the request.
  • the wearable device 101 may display a second object 115 to notify that the external electronic device is selectable. For example, the wearable device 101 may display the second object 115 in connection with the first object 110. For example, the wearable device 101 may display the second object 115 along the edge of the first object 110.
  • the wearable device 101 may identify an input for the first object 110 and/or the second object 115.
  • the wearable device 101 displays a third object 710 and a third object 710 within at least a partial area 730 of the display based on an input to the first object 110 and/or the second object 115.
  • 4 objects 720 can be displayed.
  • the third object 710 at least temporarily stops multimedia content provided by an external electronic device corresponding to the first object 110 and displays the multimedia content through the display of the wearable device 101. It may be a button to start performing an operation to display .
  • the third object 710 may include text such as ‘Continue in App’.
  • the fourth object 720 may be a button for simultaneously providing multimedia content through the display of the external electronic device and the wearable device 101 corresponding to the first object 110.
  • the fourth object 720 may include text such as ‘TV/App simultaneous playback’.
  • a third object 710 and a fourth object 720 are shown, but are not limited thereto.
  • the wearable device 101 may display an image including visual information within the third object 710 and/or the fourth object 720 .
  • the wearable device 101 may perform designated functions of objects displayed on the screen.
  • the wearable device 101 may display the first object 110 and/or the second object 115 corresponding to an external electronic device.
  • the wearable device 101 may identify inputs to the first object 110 and/or the second object 115 .
  • the wearable device 101 is an object (or objects 710, 720) for performing a function (or operation) based on an input to the first object 110 and/or the second object 115. )) can be displayed.
  • the wearable device 101 may perform an operation corresponding to the function represented by the object, based on the input to the object.
  • the wearable device 101 provides multimedia content through the wearable device 101 or provides multimedia content through the wearable device 101 and an external electronic device by performing a function (or operation) corresponding to the object. You can.
  • the wearable device 101 may enhance the user experience of the wearable device 101 by providing the multimedia content.
  • FIG. 8 shows an example of a use state of a wearable device, according to an embodiment.
  • the wearable device 101 of FIG. 8 may include the wearable device 101 of FIGS. 1, 2, 5, 6, and/or 7.
  • the wearable device 101 of FIG. 8 may include the wearable device 300 of FIGS. 3A and 3B and/or the wearable device 400 of FIGS. 4A and 4B.
  • the operations of FIG. 8 may be performed by the processor 210 of FIG. 2.
  • the wearable device 101 can identify the location of the wearable device 101.
  • the wearable device 101 may identify the location of the wearable device 101 based on a GPS sensor.
  • the wearable device 101 may identify the location of the wearable device 101 based on scene recognition.
  • the wearable device 101 may perform the scene recognition based on identifying a designated event.
  • the designated event may include the initiation of an operation to provide multimedia content 820.
  • the wearable device 101 may store the identified scene 810 in memory (eg, memory 220 in FIG. 2) when providing multimedia content 820.
  • the wearable device 101 when providing the multimedia content 820, displays the multimedia content 820 at the location where the scene 810 is recognized, based on identifying the identified scene 810 a specified number of times. ) can be provided. For example, the wearable device 101 may identify whether the stored scene 810 and the image acquired through the camera are the same when providing the multimedia content 820. For example, the wearable device 101 may provide multimedia content 820 based on the scene 810 and the image being the same.
  • the wearable device 101 may identify the location of the wearable device 101 based on simultaneous localization and mapping (SLAM). For example, the wearable device 101 may identify the location of the wearable device 101 when providing multimedia content 820 based on the SLAM. The wearable device 101 may repeatedly identify a location providing the multimedia content 820 based on SLAM and/or scene recognition. The wearable device 101 may repeatedly store a location in the memory where the multimedia content 820 is provided. Although not shown in FIG. 8, the wearable device 101 includes an object for guiding the provision of multimedia content 820 based on identifying the location of the wearable device 101 corresponding to the location stored in the memory. It can be displayed. For example, the wearable device 101 may provide multimedia content 820 based on an input for an object to guide provision of the multimedia content 820.
  • SLAM simultaneous localization and mapping
  • the wearable device 101 may identify the first location of the wearable device 101 based on an image acquired through a camera.
  • the wearable device 101 may display multimedia content based on identifying the first location corresponding to the second location stored in the memory.
  • the second location may be a location where multimedia content is repeatedly provided.
  • the wearable device 101 can identify the location of the wearable device 101.
  • the wearable device 101 may identify the location of the wearable device 101 based on the repeatedly identified scene 810 and/or SLAM.
  • the wearable device 101 may identify the location of the wearable device 101 when providing multimedia content 820.
  • the wearable device 101 may store the location of the wearable device 101 when providing the multimedia content 820 in its memory.
  • the wearable device 101 may provide multimedia content 820 based on identifying the location of the wearable device 101 corresponding to the location stored in the memory.
  • the wearable device 101 may display an object to guide the provision of multimedia content 820 based on identifying the location of the wearable device 101 corresponding to the location stored in the memory.
  • the wearable device 101 provides multimedia content 820 based on the location of the wearable device 101 corresponding to the location stored in the memory, thereby helping the user to easily receive the multimedia content 820. I can give it.
  • the wearable device 101 may enhance the user experience of the wearable device 101 by providing multimedia content 820 based on identifying the location of the wearable device 101 identified at a designated location.
  • FIG. 9 illustrates an example of a screen displayed through a display of a wearable device, according to an embodiment.
  • the wearable device 101 of FIG. 9 may include the wearable device 101 of FIGS. 1, 2, 5, 6, 7, and/or 8.
  • the wearable device 101 of FIG. 9 may include the wearable device 300 of FIGS. 3A and 3B and/or the wearable device 400 of FIGS. 4A and 4B.
  • the operations of FIG. 9 may be performed by the processor 210 of FIG. 2.
  • the wearable device 101 may provide multimedia content 910.
  • the first example 900 may be an example in which a user of the wearable device 101 receives multimedia content 910 while wearing the wearable device 101 and not moving.
  • the wearable device 101 can display the multimedia content 910 through a display (eg, display 230 in FIG. 2).
  • the wearable device 101 may identify that the location of the wearable device 101 changes while providing the multimedia content 910.
  • the wearable device 101 may identify movement of the wearable device 101 based on an image acquired through a camera (eg, camera 250 in FIG. 2).
  • the wearable device 101 may identify movement of the wearable device 101 based on different images obtained through cameras.
  • the wearable device 101 may identify movement of the wearable device 101 based on a GPS sensor.
  • the wearable device 101 may reduce the size of the multimedia content 910 based on identifying the movement of the wearable device 101.
  • the wearable device 101 may display a screen like the second example 905.
  • the wearable device 101 may display an object 930 corresponding to the multimedia content 910 by reducing the size of the multimedia content 910 based on the movement of the wearable device 101.
  • the wearable device 101 may display an image 920 acquired through a camera while displaying a reduced object 930 of the multimedia content 910.
  • the wearable device 101 may display an object 930 superimposed on the image 920.
  • the wearable device 101 may provide multimedia content 910 through the object 930.
  • the wearable device 101 can adjust the size of the object 930.
  • the wearable device 101 may adjust the size of the object 930 based on an input about the object 930.
  • an input to the object 930 may include an action of dragging the object 930.
  • an input to the object 930 may include a pinch-to-zoom operation of the object 930.
  • Input for the object 930 may be received by a controller.
  • Input to the object 930 may be received through a user's gesture through the camera of the wearable device 101.
  • the wearable device 101 may enlarge or reduce the size of the object 930 based on the input.
  • the wearable device 101 can display multimedia content 910.
  • the wearable device 101 may identify movement of the wearable device 101 while displaying the multimedia content 910 .
  • the wearable device 101 may display an image 920 acquired through a camera based on identifying the movement.
  • the wearable device 101 may display an object 930 corresponding to the multimedia content 910 by overlapping it on the image 920.
  • the wearable device 101 may provide the multimedia content 910 through the object 930.
  • the wearable device 101 converts the multimedia content 910 into an object 930 based on identifying the user's movement and displays an image 920 acquired through a camera, thereby It can help users receive multimedia content 910 in a safe state.
  • FIG. 10 illustrates an example of a screen displayed through a display of a wearable device, according to an embodiment.
  • the wearable device 101 of FIG. 10 may include the wearable device 101 of FIGS. 1, 2, 5, 6, 7, 8, and/or 9.
  • the wearable device 101 of FIG. 10 may include the wearable device 300 of FIGS. 3A and 3B and/or the wearable device 400 of FIGS. 4A and 4B.
  • the operations of FIG. 10 may be performed by the processor 210 of FIG. 2.
  • the wearable device 101 may provide a screen 1010 through a display (e.g., display 230 of FIG. 2) within the first location 1000.
  • the screen 1010 may be provided based on an image acquired through a camera of the wearable device 101 (eg, camera 220 in FIG. 2) in a VR state.
  • the screen 1010 may be a screen provided through a display in an AR state.
  • the wearable device 101 may identify multimedia content 1020 provided by the first external electronic device while providing the screen 1010.
  • the wearable device 101 may receive an input for an area including the multimedia content 1020 based on identifying the multimedia content 1020.
  • the input may be identified based on the gaze of the controller of the wearable device 101 and/or the user of the wearable device 101.
  • the wearable device 101 may track the user's gaze using a gaze tracking camera and identify input to an area containing the multimedia content 1020.
  • the wearable device 101 may search the multimedia content 1020 using a second external electronic device (eg, server).
  • the wearable device 101 may display the multimedia content 1020 in at least a portion of the screen 1010 based on searching for the multimedia content 1020.
  • the wearable device 101 may display an object 1030 for providing the multimedia content 1020 on the screen 1010 while the position of the wearable device 101 is changed.
  • the wearable device 101 may display multimedia content 1020 using the object 1030 in a second location 1005 that is different from the first location 1000.
  • the wearable device 101 may receive an input for adjusting the size of the object 1030 while displaying the object 1030 .
  • an input for adjusting the size of the object 1030 may include an operation of dragging the object 1030.
  • an input for adjusting the size of the object 1030 may include pinching and zooming the object 1030.
  • the wearable device 101 may adjust the size of the object 1030 based on the input.
  • the wearable device 101 can identify multimedia content 1020 provided from the first external electronic device.
  • the wearable device 101 may receive an input for an area including the multimedia content 1020 based on identifying the multimedia content 1020.
  • the wearable device 101 may search the multimedia content 1020 using a second external electronic device that is different from the first external electronic device.
  • the wearable device 101 may display the multimedia content 1020 in at least a portion of the screen 1010 based on the search for the multimedia content 1020.
  • the wearable device 101 may enhance the user experience of the wearable device 101 by providing multimedia content 1020 identified within the screen 1010 based on the user's input.
  • FIG. 11 shows an example of a flowchart regarding the operation of a wearable device, according to an embodiment.
  • the wearable device of FIG. 11 may include the wearable device 101 of FIGS. 1, 2, 5, 6, 7, 8, 9, and/or 10.
  • the wearable device of FIG. 11 may include the wearable device 300 of FIGS. 3A and 3B and/or the wearable device 400 of FIGS. 4A and 4B.
  • the operations of FIG. 11 may be performed by the processor 210 of FIG. 2.
  • the wearable device selects a first object (e.g., the first object in FIG. 1) in an image acquired using a camera (e.g., the camera 250 in FIG. 2). Based on the object 110, an external electronic device can be identified. For example, the wearable device 101 may identify an external electronic device corresponding to the first object 110.
  • a first object e.g., the first object in FIG. 1
  • a camera e.g., the camera 250 in FIG. 2
  • an external electronic device can be identified.
  • the wearable device 101 may identify an external electronic device corresponding to the first object 110.
  • the wearable device may request information to display multimedia content provided through the external electronic device based on the identification of the external electronic device.
  • the wearable device is configured to display multimedia content being provided through the external electronic device corresponding to the first object through a communication circuit (e.g., the communication circuit 240 of FIG. 2). You can request information.
  • the wearable device may receive information transmitted from an external electronic device based at least in part on a request for information for displaying multimedia content. For example, a wearable device can receive the information through a communication circuit. In response to receiving the information, the wearable device may display a second object in association with the first object to notify that an external electronic device is selectable. For example, the wearable device may display the second object along an edge of the first object. For example, the wearable device may display the second object by overlapping it on the first object and flashing it.
  • the wearable device may identify an input received for a first object associated with a second object. For example, the input received for the first object may be received based on a controller establishing a communication link with the wearable device. For example, the input received for the first object may be received based on identifying the gaze of the user of the wearable device.
  • the wearable device may display the multimedia content through a display (eg, display 230 in FIG. 2) based on information for displaying the multimedia content transmitted from an external electronic device.
  • a wearable device may identify an external electronic device based on the first object in an image acquired using a camera. Based on the identification of the external electronic device, the wearable device may request information to display multimedia content being provided through the external electronic device to the external electronic device through a communication circuit. In response to receiving information transmitted from an external electronic device based on at least a portion of the request through a communication circuit, the wearable device establishes a second object for notifying that the external electronic device is selectable in association with the first object. It can be displayed. The wearable device may display multimedia content through a display based on the information in response to an input received for the first object associated with the second object. The wearable device can enhance the user experience of the wearable device by receiving information related to multimedia content provided through the external electronic device and providing the multimedia content.
  • FIG. 12 shows an example of a signal flow diagram related to the operation of a wearable device, according to an embodiment.
  • the wearable device 101 of FIG. 12 is the wearable device 101 of FIGS. 1, 2, 5, 6, 7, 8, 9, and/or 10, and/or the wearable of FIG. 11. May include devices.
  • the wearable device 101 of FIG. 12 may include the wearable device 300 of FIGS. 3A and 3B and/or the wearable device 400 of FIGS. 4A and 4B.
  • the operations of FIG. 12 may be performed by the processor 210 of FIG. 2.
  • the first external electronic device 1201 of FIG. 12 may include a device for providing multimedia content through a display included in the first external electronic device 1201.
  • the second external electronic device 1203 of FIG. 12 may be referred to as a server.
  • the wearable device 101 selects a first object (e.g., the first object in FIG. 1) in an image acquired through a camera (e.g., the camera 250 in FIG. 2).
  • the type of the first object 110 and the multimedia content being provided through the first object can be identified.
  • the first object may be referred to as the first external electronic device 1201.
  • the wearable device 101 may encrypt the shape of the first object based on identifying the shape of the first object.
  • the wearable device 101 may use the first object to identify a match between first user account information logged into the first external electronic device and second user account information logged into the wearable device 101. Encryption can be performed on the form of .
  • the first external electronic device 1201 may transmit first user account information to the second external electronic device 1203.
  • the first external electronic device 1201 may encrypt the first user account information.
  • the first external electronic device 1201 may transmit the encrypted first user account information to the second external electronic device 1203.
  • the first external electronic device 1201 may transmit information related to the type of the first external electronic device to the second external electronic device 1203 along with the first user account information.
  • the wearable device 101 may transmit a signal for identifying the match between the first user account and the second user account to the second external electronic device 1203.
  • the signal may include information related to the shape of the first object and user information logged in to the wearable device 101.
  • the signal may include a signal for requesting user account information of the first external electronic device 1201 transmitted to the second external electronic device 1203.
  • the wearable device 101 may receive a signal for identifying a match of the user account.
  • a signal for identifying a match of the account may include first user information logged into the first external electronic device 1201 by the second external electronic device 1203 and information logged into the wearable device 101. It may be transmitted based on a match of the second user information.
  • the second external electronic device 1203 may decode information (or signals) transmitted from the wearable device 101 and the first external electronic device 1201. The second external electronic device 1203 may identify a match between the first user information and the second user information based on decoding the information.
  • the second external electronic device 1203 may include information related to the shape of the first object transmitted from the wearable device 101 and the first external electronic device 1201 transmitted from the first external electronic device 1201. Based on the match of the information related to the form, an operation to identify the match of the user information may be initiated. Based on the above disclosure, the second external electronic device 1203 may identify a match between the second user information of the wearable device 101 and the first user information of the first external electronic device. The second external electronic device 1203 may transmit a signal to confirm the user account match to the wearable device 101 based on the match.
  • the wearable device 101 determines the first user information.
  • a second object e.g., the second object 115 in FIG. 1 to indicate that an external electronic device can be selected may be displayed in connection with the first object.
  • the wearable device 101 may display a second object along an edge of the first object.
  • the wearable device 101 may display the second object overlapping with the first object.
  • the wearable device 101 may receive an input for a first object.
  • the wearable device 101 may display multimedia content provided through the first external electronic device 1201 in response to an input received for the first object.
  • the wearable device 101 identifies a match between the first user information logged in to the first external electronic device 1201 and the second user information logged in to the wearable device 101.
  • the wearable device 101 may make a request to the second external electronic device 1203 to identify a match between the first user information and the second user information.
  • the wearable device 101 may display multimedia content provided through the first external electronic device 1201 based on the match between the first user information and the second user information.
  • the wearable device 101 may enhance the user experience of the wearable device 101 by displaying multimedia content provided through the first external electronic device 1201.
  • Metaverse is a compound word of the English word 'Meta', meaning 'virtual' or 'transcendence', and 'Universe', meaning universe. It is a combination of social, economic and cultural activities similar to the real world. It refers to a three-dimensional virtual world. Metaverse is a concept that is one step more advanced than virtual reality (VR, a cutting-edge technology that allows people to experience life-like experiences in a computer-generated virtual world), using avatars to simply enjoy games or virtual reality. Not only that, but it has the characteristic of being able to engage in social and cultural activities similar to actual reality.
  • the Metaverse service is based on augmented reality (AR), virtual reality environment (VR), mixed reality (MR), and/or extended reality (XR), and creates the virtual world. Media content can be provided to enhance immersion.
  • media content provided by the metaverse service may include social interaction content including avatar-based games, concerts, parties, and/or meetings.
  • the media content may include advertisements, user created content, and/or information for economic activities such as selling products and/or shopping. Ownership of the user-generated content may be proven by a blockchain-based non-fungible token (NFT).
  • NFT non-fungible token
  • Metaverse services can support economic activities based on real currency and/or cryptocurrency. Through the metaverse service, virtual content linked to the real world, such as digital twin or life logging, can be provided.
  • FIG. 13 is an example diagram of a network environment 1301 in which metaverse services are provided through the server 1310.
  • the network environment 1301 includes a server 1310, a user terminal 1320 (e.g., a first terminal 1320-1 and a second terminal 1320-2), and a server 1310. It may include a network connecting the user terminal 1320.
  • the server 1310 may provide a metaverse service to the user terminal 1320.
  • the network may be formed by at least one intermediate node 1330 including an access point (AP) and/or a base station.
  • the user terminal 1320 may connect to the server 1320 through a network and output a user interface (UI) related to the metaverse service to the user of the user terminal 1320. Based on the UI, the user terminal 1320 can obtain information to be input to the metaverse service from the user, or output information (eg, multimedia content) related to the metaverse service to the user.
  • UI user interface
  • the server 1310 provides a virtual space so that the user terminal 1320 can perform activities in the virtual space.
  • the user terminal 1320 installs a S/W agent to access the virtual space provided by the server 1310 to express information provided by the server 1310 to the user, or to express information that the user wishes to express in the virtual space. Transmit information to the server.
  • the S/W agent can be provided directly through the server 1310, downloaded from a public server, or embedded when purchasing a terminal.
  • the metaverse service may be provided to the user terminal 1320 and/or the user using the server 1310.
  • the embodiment is not limited to this, and the metaverse service may be provided through individual contact between users.
  • the metaverse service can be provided by a direct connection between the first terminal 1320-1 and the second terminal 1320-2, independently of the server 1310. there is.
  • the first terminal 1320-1 and the second terminal 1320-2 may be connected to each other through a network formed by at least one intermediate node 1330.
  • one of the first terminal 1320-1 and the second terminal 1320-2 is: It can perform the role of the server 1310.
  • a metaverse environment can be formed solely by device-to-device connection (e.g., peer-to-peer (P2P) connection).
  • P2P peer-to-peer
  • the user terminal 1320 may be made in various form factors and may provide images to the user. or/and an output device for providing sound and an input device for inputting information into the metaverse service.
  • various form factors of the user terminal 1320 include a smartphone (e.g., the second terminal (1320-2)), an AR device (e.g., the first terminal (1320-1)), a VR device, an MR device, and a VST ( It may include a Video See Through (Video See Through) device, an OST (Optical See Through) device, a smart lens, a smart mirror, and a TV or projector capable of input/output.
  • the network (e.g., a network formed by at least one intermediate node 1330) includes various broadband networks including 3G, 4G, and 5G and a short-range network including Wifi and BT (e.g., the first terminal 1320-1, and a wired network or wireless network directly connecting the second terminal (1320-2).
  • various broadband networks including 3G, 4G, and 5G and a short-range network including Wifi and BT (e.g., the first terminal 1320-1, and a wired network or wireless network directly connecting the second terminal (1320-2).
  • the wearable device 101 includes a communication circuit 240, a display 230, a camera 250, a memory 220 for storing instructions, and a processor ( 210) may be included.
  • the instructions, when executed by the processor may be configured to cause the wearable device to identify an external electronic device based on the first object 110 in an image acquired using the camera 250.
  • the instructions, when executed by the processor cause the wearable device to display multimedia content being provided through the external electronic device to the external electronic device through the communication circuit 240, based on the identification.
  • the instructions when executed by the processor, inform the wearable device that the external electronic device is selectable in response to receiving the information transmitted from the external electronic device through the communication circuit 240. It may be configured to display the second object 115 in connection with the first object 110. When executed by the processor, the instructions allow the wearable device to display the multimedia information acquired from the external electronic device based on the information, based on whether a user input to the first object 110 is detected. It may be configured to display content through the display 230.
  • the first object 110 associated with the second object 115 is displayed in a different area from the first object 110, and at least one third object 120 in the image ) can be visually emphasized.
  • the second object 115 may be displayed along the edge of the first object 110, or may be displayed by overlapping and blinking on the first object 110.
  • the processor 210 may display a fourth object 720 that receives an input for providing the multimedia content in conjunction with the external electronic device.
  • the instructions when executed by the processor, cause the wearable device to identify the first location of the wearable device 101 based on the image acquired through the camera 250. , can be configured.
  • the instructions when executed by the processor, cause the wearable device to display the multimedia content to the display 230 based on identifying a first location that corresponds to a second location stored within the wearable device 101. It can be configured to display through.
  • the second location may be a location set to repeatedly provide the multimedia content.
  • the instructions when executed by the processor, cause the wearable device to identify a match between the first user account of the wearable device 101 and the second user account of the external electronic device. Based on this, the second object 115 may be configured to be displayed in connection with the first object 110.
  • the instructions when executed by the processor, cause the wearable device to display the multimedia content based on identifying the user's movement while displaying the multimedia content. It may be configured to display in part of .
  • the method of the wearable device 101 identifies an external electronic device based on the first object 110 in the image acquired using the camera 250. It may include actions such as: The method may include an operation of requesting information for displaying multimedia content being provided through the external electronic device to the external device through the communication circuit 240, based on the identification. The method includes, in response to receiving the information transmitted from the external electronic device through the communication circuit 240, a second object 115 for notifying that the external electronic device is selectable, and the first object. In conjunction with (110), a display operation may be included. The method includes the operation of displaying the multimedia content obtained from the external electronic device based on the information based on whether a user input for the first object 110 is detected through the display 230. can do.
  • the first object 110 associated with the second object 115 is displayed in a different area from the first object 110, and at least one third object 120 in the image ) can be visually emphasized.
  • the second object 115 may be displayed along the edge of the first object 110, or may be displayed by overlapping and blinking on the first object 110.
  • the method may include displaying a fourth object that receives an input for providing the multimedia content in conjunction with the external electronic device.
  • the second location may be a location that repeatedly provides the multimedia content.
  • the method is based on identifying a match between the first user account of the wearable device 101 and the second user account of the external electronic device, and the second object 115. It may include an operation of displaying in connection with the first object 110.
  • the method displays the multimedia content on a portion of the display 230 based on identifying the user's movement while displaying the multimedia content, and displays the multimedia content through the camera 250. It may include an operation of displaying the acquired image.
  • the processor 210 of the wearable device 101 may be caused to identify an external electronic device.
  • the one or more programs, when executed by the processor 210 of the wearable device 101, are provided to the external device through the communication circuit 240 through the external electronic device, based on the identification. This may cause the processor 210 of the wearable device 101 to request information for displaying multimedia content.
  • the one or more programs when executed by the processor 210 of the wearable device 101, in response to receiving the information transmitted from the external electronic device through the communication circuit 240, This may cause the processor 210 of the wearable device 101 to display, in conjunction with the first object 110, a second object 115 for notifying that an external electronic device is selectable.
  • the one or more programs, when executed by the processor 210 of the wearable device 101, are based on whether a user input for the first object 110 is detected and based on the information.
  • the processor 210 of the wearable device 101 may be triggered to display the multimedia content obtained from an external electronic device through the display 230.
  • the first object 110 associated with the second object 115 is displayed in a different area from the first object 110, and at least one third object 120 in the image ) can be visually emphasized.
  • the one or more programs when executed by the processor 210 of the wearable device 101, are a fourth object that receives input for providing the multimedia content in conjunction with the external electronic device. This may cause the processor 210 of the wearable device 101 to display .
  • Electronic devices may be of various types.
  • Electronic devices may include, for example, portable communication devices (e.g., smartphones), computer devices, portable multimedia devices, portable medical devices, cameras, electronic devices, or home appliances.
  • Electronic devices according to embodiments of this document are not limited to the above-described devices.
  • first, second, or first or second may be used simply to distinguish one component from another, and to refer to those components in other respects (e.g., importance or order) is not limited.
  • One (e.g., first) component is said to be “coupled” or “connected” to another (e.g., second) component, with or without the terms “functionally” or “communicatively.”
  • module used in various embodiments of this document may include a unit implemented in hardware, software, or firmware, and is interchangeable with terms such as logic, logic block, component, or circuit, for example. It can be used as A module may be an integrated part or a minimum unit of the parts or a part thereof that performs one or more functions. For example, according to one embodiment, the module may be implemented in the form of an application-specific integrated circuit (ASIC).
  • ASIC application-specific integrated circuit
  • Various embodiments of this document may be implemented as software including one or more instructions stored in a storage medium (e.g., memory 220) that can be read by a machine (e.g., wearable device 101).
  • a processor e.g., processor 210) of a device (e.g., wearable device 101) may call at least one command among one or more commands stored from a storage medium and execute it. This allows the device to be operated to perform at least one function according to the at least one instruction called.
  • the one or more instructions may include code generated by a compiler or code that can be executed by an interpreter.
  • a storage medium that can be read by a device may be provided in the form of a non-transitory storage medium.
  • 'non-transitory' only means that the storage medium is a tangible device and does not contain signals (e.g. electromagnetic waves). This term refers to cases where data is stored semi-permanently in the storage medium. There is no distinction between temporary storage cases.
  • each component (e.g., module or program) of the above-described components may include a single or plural entity, and some of the plurality of entities may be separately placed in other components. there is.
  • one or more of the components or operations described above may be omitted, or one or more other components or operations may be added.
  • multiple components eg, modules or programs
  • the integrated component may perform one or more functions of each component of the plurality of components identically or similarly to those performed by the corresponding component of the plurality of components prior to the integration. .
  • operations performed by a module, program, or other component may be executed sequentially, in parallel, iteratively, or heuristically, or one or more of the operations may be executed in a different order, or omitted. Alternatively, one or more other operations may be added.

Landscapes

  • User Interface Of Digital Computer (AREA)

Abstract

일 실시 예에 따른, 웨어러블 장치의 프로세서는, 카메라를 이용하여 획득된 이미지 내의 제1 객체에 기반하여, 외부 전자 장치를 식별할 수 있다. 상기 프로세서는, 상기 식별에 기반하여, 상기 통신 회로를 통해 상기 외부 전자 장치에게 상기 외부 전자 장치를 통해 제공되고 있는 멀티미디어 콘텐트를 표시하기 위한 정보를 요청할 수 있다. 상기 프로세서는, 상기 외부 전자 장치로부터 송신된 상기 정보를 통신 회로를 통해 수신하는 것에 응답하여, 상기 외부 전자 장치가 선택가능함을 알리기 위한 제2 객체를, 상기 제1 객체와 연계로, 표시할 수 있다. 상기 프로세서는, 상기 제1 객체에 대한 사용자 입력이 감지되는지 여부에 기반하여, 상기 정보에 기반하여 상기 외부 전자 장치로부터 획득된 상기 멀티미디어 콘텐트를 디스플레이를 통하여 표시할 수 있다.

Description

외부 전자 장치에 의해 제공되는 멀티미디어 콘텐트를 표시하기 위한 웨어러블 장치 및 그 방법
본 개시(present disclosure)는, 외부 전자 장치에 의해 제공되는 멀티미디어 콘텐트를 표시하기 위한 웨어러블 장치 및 그 방법에 관한 것이다.
강화된(enhanced) 사용자 경험(user experience)을 제공하기 위해, 실제 세계(real-world) 내 외부 객체와 연계로 컴퓨터에 의해 생성된 정보를 표시하는 증강 현실(augmented reality, AR) 서비스를 제공하는 전자 장치가 개발되고 있다. 상기 전자 장치는, 사용자에 의해 착용될 수 있는 웨어러블 장치일 수 있다. 예를 들면, 상기 전자 장치는, AR 안경(glasses), 및/또는 머리 착용형 장치(head-mounted device, HMD)일 수 있다.
일 실시 예(an embodiment)에 따른, 웨어러블 장치(wearable device)는, 통신 회로, 디스플레이, 카메라, 인스트럭션들을 저장하는 메모리, 및 프로세서를 포함할 수 있다. 상기 인스트럭션들은, 상기 프로세서에 의해 실행될 시에, 상기 웨어러블 장치가, 상기 카메라를 이용하여 획득된 이미지 내의 제1 객체에 기반하여, 외부 전자 장치를 식별하도록, 구성될 수 있다. 상기 인스트럭션들은, 상기 프로세서에 의해 실행될 시에, 상기 웨어러블 장치가, 상기 식별에 기반하여, 상기 통신 회로를 통해 상기 외부 전자 장치에게 상기 외부 전자 장치를 통해 제공되고 있는 멀티미디어 콘텐트를 표시하기 위한 정보를 요청하도록, 구성될 수 있다. 상기 인스트럭션들은, 상기 프로세서에 의해 실행될 시에, 상기 웨어러블 장치가, 상기 외부 전자 장치로부터 송신된 상기 정보를 상기 통신 회로를 통해 수신하는 것에 응답하여, 상기 외부 전자 장치가 선택가능함을 알리기 위한 제2 객체를, 상기 제1 객체와 연계로, 표시하도록, 구성될 수 있다. 상기 인스트럭션들은, 상기 프로세서에 의해 실행될 시에, 상기 웨어러블 장치가, 상기 제1 객체에 대한 사용자 입력이 감지되는지 여부에 기반하여, 상기 정보에 기반하여 상기 외부 전자 장치로부터 획득된 상기 멀티미디어 콘텐트를 상기 디스플레이를 통하여 표시하도록, 구성될 수 있다.
일 실시 예에 따른, 웨어러블 장치(wearable device)의 방법은, 카메라를 이용하여 획득된 이미지 내의 제1 객체에 기반하여, 외부 전자 장치를 식별하는 동작을 포함할 수 있다. 상기 방법은, 상기 식별에 기반하여, 통신 회로를 통해 상기 외부 장치에게 상기 외부 전자 장치를 통해 제공되고 있는 멀티미디어 콘텐트를 표시하기 위한 정보를 요청하는 동작을 포함할 수 있다. 상기 방법은, 상기 외부 전자 장치로부터 송신된 상기 정보를 상기 통신 회로를 통해 수신하는 것에 응답하여, 상기 외부 전자 장치가 선택가능함을 알리기 위한 제2 객체를, 상기 제1 객체와 연계로, 표시하는 동작을 포함할 수 있다. 상기 방법은, 상기 제1 객체에 대한 사용자 입력이 감지되는지 여부에 기반하여, 상기 정보에 기반하여 상기 외부 전자 장치로부터 획득된 상기 멀티미디어 콘텐트를 디스플레이를 통하여 표시하는 동작을 포함할 수 있다.
일 실시 예에 따른, 하나 이상의 프로그램들을 저장하는 컴퓨터 판독가능 저장 매체에 있어서, 상기 하나 이상의 프로그램들은, 웨어러블 장치(wearable device)의 프로세서에 의해 실행될 때에, 카메라를 이용하여 획득된 이미지 내의 제1 객체에 기반하여, 외부 전자 장치를 식별하도록, 상기 웨어러블 장치의 상기 프로세서를 야기할 수 있다. 상기 하나 이상의 프로그램들은, 상기 웨어러블 장치의 상기 프로세서에 의해 실행될 때에, 상기 식별에 기반하여, 통신 회로를 통해 상기 외부 장치에게 상기 외부 전자 장치를 통해 제공되고 있는 멀티미디어 콘텐트를 표시하기 위한 정보를 요청하도록, 상기 웨어러블 장치의 상기 프로세서를 야기할 수 있다. 상기 하나 이상의 프로그램들은, 상기 웨어러블 장치의 상기 프로세서에 의해 실행될 때에, 상기 외부 전자 장치로부터 송신된 상기 정보를 상기 통신 회로를 통해 수신하는 것에 응답하여, 상기 외부 전자 장치가 선택가능함을 알리기 위한 제2 객체를, 상기 제1 객체와 연계로, 표시하도록, 상기 웨어러블 장치의 상기 프로세서를 야기할 수 있다. 상기 하나 이상의 프로그램들은, 상기 웨어러블 장치의 상기 프로세서에 의해 실행될 때에, 상기 제1 객체에 대한 사용자 입력이 감지되는지 여부에 기반하여, 상기 정보에 기반하여 상기 외부 전자 장치로부터 획득된 상기 멀티미디어 콘텐트를 디스플레이를 통하여 표시하도록, 상기 웨어러블 장치의 상기 프로세서를 야기하도록, 상기 웨어러블 장치의 상기 프로세서를 야기할 수 있다.
도 1은, 일 실시 예에 따른, 웨어러블 장치의 사용 상태의 일 예를 도시한다.
도 2는, 일 실시 예에 따른, 웨어러블 장치의 블록도(block diagram)의 일 예를 도시한다.
도 3a는, 일 실시예에 따른, 웨어러블 장치의 사시도(perspective view)의 일 예를 도시한다.
도 3b는, 일 실시예에 따른, 웨어러블 장치 내에 배치된 하나 이상의 하드웨어들의 일 예를 도시한다.
도 4a 내지 도 4b는, 일 실시예에 따른, 웨어러블 장치의 외관의 일 예를 도시한다.
도 5는, 일 실시 예에 따른, 웨어러블 장치의 디스플레이를 통해 표시되는 화면의 일 예를 도시한다.
도 6은, 일 실시 예에 따른, 웨어러블 장치의 디스플레이를 통해 표시되는 화면의 일 예를 도시한다.
도 7은, 일 실시 예에 따른, 웨어러블 장치의 디스플레이를 통해 표시되는 화면의 일 예를 도시한다.
도 8은, 일 실시 예에 따른, 웨어러블 장치의 사용 상태의 일 예를 도시한다.
도 9는, 일 실시 예에 따른, 웨어러블 장치의 디스플레이를 통해 표시되는 화면의 일 예를 도시한다.
도 10은, 일 실시 예에 따른, 웨어러블 장치의 디스플레이를 통해 표시되는 화면의 일 예를 도시한다.
도 11은, 일 실시 예에 따른, 웨어러블 장치의 동작에 관한 흐름도의 일 예를 도시한다.
도 12는, 일 실시 예에 따른, 웨어러블 장치의 동작에 관한 신호 흐름도의 일 예를 도시한다.
도 13은, 서버를 통해 메타버스 서비스를 제공받는 네트워크 환경에 대한 예시도이다.
이하, 본 문서의 다양한 실시예들이 첨부된 도면을 참조하여 설명된다.
본 문서의 다양한 실시 예들 및 이에 사용된 용어들은 본 문서에 기재된 기술을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 해당 실시 예의 다양한 변경, 균등물, 및/또는 대체물을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함할 수 있다. 본 문서에서, "A 또는 B", "A 및/또는 B 중 적어도 하나", "A, B 또는 C" 또는 "A, B 및/또는 C 중 적어도 하나" 등의 표현은 함께 나열된 항목들의 모든 가능한 조합을 포함할 수 있다. "제 1", "제 2", "첫째" 또는 "둘째" 등의 표현들은 해당 구성요소들을, 순서 또는 중요도에 상관없이 수식할 수 있고, 한 구성요소를 다른 구성요소와 구분하기 위해 사용될 뿐 해당 구성요소들을 한정하지 않는다. 어떤(예: 제 1) 구성요소가 다른(예: 제 2) 구성요소에 "(기능적으로 또는 통신적으로) 연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로 연결되거나, 다른 구성요소(예: 제 3 구성요소)를 통하여 연결될 수 있다.
본 문서에서 사용된 용어 "모듈"은 하드웨어, 소프트웨어 또는 펌웨어로 구성된 유닛을 포함하며, 예를 들면, 로직, 논리 블록, 부품, 또는 회로 등의 용어와 상호 호환적으로 사용될 수 있다. 모듈은, 일체로 구성된 부품 또는 하나 또는 그 이상의 기능을 수행하는 최소 단위 또는 그 일부가 될 수 있다. 예를 들면, 모듈은 ASIC(application-specific integrated circuit)으로 구성될 수 있다.
도 1은, 일 실시 예에 따른, 웨어러블 장치의 사용 상태의 일 예를 도시한다. 도 1을 참고하면, 일 실시예에 따른 웨어러블 장치(101)는 사용자의 머리에 착용 가능한(wearable on) HMD(head-mounted display)를 포함할 수 있다. 비록 안경의 형태를 가지는 웨어러블 장치(101)의 외형이 도시되지만, 실시예가 이에 제한되는 것은 아니다. 사용자의 머리에 착용가능한 웨어러블 장치(101)의 구조의 일 예가 도 3a 내지 도 3b 및/또는 도 4a 내지 도 4b를 참고하여 설명된다. 웨어러블 장치(101) 내에 포함된 하나 이상의 하드웨어들이, 도 2를 참고하여 예시적으로 설명된다. 도 1의 제1 객체(110)(예, 외부 전자 장치)는, 사용자에 의해 소유되는(be owned by) 단말을 포함할 수 있다. 예를 들어, 제1 객체(110) 는, 스마트폰(smartphone), 스마트패드(smartpad), 태블릿 PC(person computer), 및 스마트워치(smartwatch)와 같은 스마트 액세서리를 포함할 수 있다. 예를 들어, 외부 전자 장치는, 웨어러블 장치(101)와 통신 회로를 통하여 연결된 컨트롤러를 포함할 수 있다.
일 실시예에 따른, 웨어러블 장치(101)는 증강 현실(augmented reality, AR), 및/또는 혼합 현실(mixed reality, MR)과 관련된 기능을 실행할 수 있다. 도 1을 참고하면, 사용자가 웨어러블 장치(101)를 착용한 상태 내에서, 웨어러블 장치(101)는 사용자의 눈에 인접하게 배치된 적어도 하나의 렌즈를 포함할 수 있다. 웨어러블 장치(101)는 렌즈를 통과하는 주변 광(ambient light)에, 웨어러블 장치(101)의 디스플레이로부터 방사된 광을 결합할 수 있다. 상기 디스플레이의 표시 영역은, 주변 광이 통과되는 렌즈 내에서 형성될 수 있다. 웨어러블 장치(101)가 상기 주변 광 및 상기 디스플레이로부터 방사된 상기 광을 결합하기 때문에, 사용자는 상기 주변 광에 의해 인식되는 실제 객체(real object) 및 상기 디스플레이로부터 방사된 상기 광에 의해 형성된 가상 객체(virtual object)가 혼합된 상(image)을 볼 수 있다.
일 실시예에 따른, 웨어러블 장치(101)는 VST(video see-through) 및/또는 가상 현실(virtual reality, VR)과 관련된 기능을 실행할 수 있다. 도 1을 참고하면, 사용자가 웨어러블 장치(101)를 착용한 상태 내에서, 웨어러블 장치(101)는 사용자의 눈을 덮는 하우징을 포함할 수 있다. 웨어러블 장치(101)는, 상기 상태 내에서, 상기 눈을 향하는 제1 면에 배치된 디스플레이를 포함할 수 있다. 웨어러블 장치(101)는 상기 제1 면과 반대인 제2 면 상에 배치된 카메라를 포함할 수 있다. 상기 카메라를 이용하여, 웨어러블 장치(101)는 주변 광이 포함된 프레임들을 획득할 수 있다. 웨어러블 장치(101)는 상기 제1 면에 배치된 디스플레이 내에, 상기 프레임들을 출력하여, 사용자가 상기 디스플레이를 통해 상기 주변 광을 인식하게 만들 수 있다. 상기 제1 면에 배치된 디스플레이의 표시 영역은, 상기 디스플레이에 포함된 하나 이상의 픽셀들에 의해 형성될 수 있다. 웨어러블 장치(101)는 상기 디스플레이를 통해 출력되는 프레임들 내에 가상 객체를 합성하여, 사용자가 주변 광에 의해 인식되는 실제 객체와 함께 상기 가상 객체를 인식하게 만들 수 있다.
도 1을 참고하면, 일 실시 예에 따른, 웨어러블 장치(101)는, 카메라를 이용하여 이미지를 획득할 수 있다. 웨어러블 장치(101)는, 상기 이미지를 표현한 화면(100)을 표시할 수 있다. 웨어러블 장치(101)는, 상기 카메라를 이용하여 획득된 이미지 내에서 제1 객체(110)를 식별할 수 있다. 웨어러블 장치(101)는, 상기 제1 객체를 식별한 것에 기반하여, 상기 제1 객체(110)에 대응하는 외부 객체를 식별할 수 있다. 예를 들어, 상기 외부 객체는, 외부 전자 장치일 수 있다.
일 실시 예에 따른, 웨어러블 장치(101)는, 제1 객체(110)를 식별한 것에 기반하여, 통신 회로를 통해 상기 외부 전자 장치에게 상기 외부 전자 장치를 통해 제공되고 있는 멀티미디어 콘텐트를 표시하기 위한 정보를 요청할 수 있다. 예를 들어, 웨어러블 장치(101)는, 제1 외부 전자 장치인 상기 외부 전자 장치와 상이한 제2 외부 전자 장치(예, 서버)를 통하여, 상기 제1 외부 전자 장치로, 상기 멀티미디어 콘텐트를 표시하기 위한 정보를 요청할 수 있다. 예를 들어, 상기 제1 외부 전자 장치는, TV, 컴퓨터의 모니터와 같은 디스플레이를 포함하는 장치일 수 있다. 예를 들어, 상기 제1 외부 전자 장치는, 스마트폰, 스마트패드, 태블릿 PC와 같은 디스플레이를 포함하는 장치일 수 있다. 예를 들어, 상기 제1 외부 전자 장치는, 상기 디스플레이를 통하여 멀티미디어 콘텐트를 제공할 수 있는 장치일 수 있다. 하지만, 이에 제한되지 않는다. 일 실시 예에 따른, 웨어러블 장치(101)는, 제1 객체(110)에 대응하는 제1 외부 전자 장치로 로그인된 제1 사용자 정보 및 상기 웨어러블 장치(101)로 로그인된 제2 사용자 정보를 식별할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 제1 사용자 정보 및 상기 제2 사용자 정보의 동일성을 식별할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 제1 사용자 정보 및 상기 제2 사용자 정보의 동일성에 기반하여, 상기 외부 전자 장치에 의해 제공되고 있는 멀티미디어 콘텐트를 표시하기 위한 정보를 요청할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 제1 사용자 정보 및 상기 제2 사용자 정보가 적어도 부분적으로 동일한 것에 기반하여, 상기 정보를 요청할 수 있다.
일 실시 예에 따른, 웨어러블 장치(101)는, 멀티미디어 콘텐트를 표시하기 위한 정보의 요청에 적어도 일부 기반하여 제1 외부 전자 장치로부터 송신된 상기 정보를 수신할 수 있다. 예를 들어, 웨어러블 장치(101)는, 통신 회로를 통하여 상기 정보를 수신할 수 있다. 예를 들어, 웨어러블 장치(101)는, 제1 외부 전자 장치로부터 제2 외부 전자 장치를 통하여 송신된 정보를 수신할 수 있다. 웨어러블 장치(101)는, 상기 정보를 수신하는 것에 응답하여, 상기 외부 전자 장치가 선택가능함을 알리기 위한 제2 객체(115)를 표시할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 제2 객체(115)를, 제1 객체(110)와 연계로 표시할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 제1 객체(110) 또는 상기 제1 객체(110)와 상이한 제3 객체(120)를 통하여, 상기 제1 객체(110)에 대해 선택가능함을 알릴 수 있다. 예를 들어, 상기 제3 객체(120)는, 상기 제1 객체(110) 및 상기 제2 객체(120)와 상이한 영역에 표시될 수 있다. 예를 들어, 제2 객체(115)는, 제1 객체(110)의 가장자리를 따라(along) 표시될 수 있다. 예를 들어, 도 1 내에서 제2 객체(115)가 제1 객체(110)의 테두리와 같이 표시되었으나, 제2 객체(115)는 상기 제1 객체(110) 상에 중첩되는 객체일 수 있다. 웨어러블 장치(101)는, 상기 제1 객체(110) 상에 중첩된 상기 제2 객체(115)를 점멸하여 표시될 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 제1 객체(110)의 가장자리를 따라 상기 제2 객체(115)를 표시할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 제2 객체(115)를, 상기 제1 객체(110) 상에 중첩하고, 점멸하여 표시할 수 있다. 웨어러블 장치(101)는, 제3 객체(120)를 통하여, 상기 제1 객체(110)가 선택가능함을 강조할 수 있다. 예를 들어, 상기 제3 객체(120)는, 상기 제1 객체(110)와 상이한 영역 상에 표시될 수 있다. 예를 들어, 제1 객체(110)는, 상기 이미지 내의 적어도 하나의 제3 객체에 대하여 시각적으로 강조될 수 있다. 예를 들어, 웨어러블 장치(101)는, 외부 전자 장치로부터 제공되는 멀티미디어 콘텐트를 표시하기 위한 정보를 요청할 수 있는 상태 내에서, 상기 제3 객체(120)를 강조할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 상태 내에서, 상기 제3 객체(120)를 점멸하거나, 상기 제3 객체(120)를 상이한 색상으로 변경함으로써, 외부 전자 장치를 선택할 수 있음을 나타낼 수 있다.
일 실시 예에 따른, 웨어러블 장치(101)는, 제1 객체(110)에 대한 입력을 수신할 수 있다. 웨어러블 장치(101)는, 제3 객체(120)에 대한 입력을 식별할 수 있다. 웨어러블 장치(101)는, 제1 객체(110) 및/또는 제3 객체(120)에 대한 입력에 응답하여, 멀티미디어 콘텐트를 표시하기 위한 정보에 기반하여 상기 멀티미디어 콘텐트를 디스플레이를 통하여 표시할 수 있다. 예를 들어, 웨어러블 장치(101)는, 외부 전자 장치를 통하여 제공되는 멀티미디어 콘텐트에 이어서, 디스플레이를 통하여 멀티미디어 콘텐트를 제공할 수 있다. 디스플레이를 통하여 멀티미디어 콘텐트를 표시하는 동작은 도 5에서 후술된다.
상술한 바와 같이, 일 실시 예에 따른, 웨어러블 장치(101)는, 카메라를 이용하여 획득된 이미지 내의 제1 객체(110)를 식별할 수 있다. 웨어러블 장치(101)는, 상기 제1 객체(110)에 기반하여 상기 제1 객체(110)에 대응하는 외부 전자 장치를 식별할 수 있다. 웨어러블 장치(101)는, 상기 식별에 기반하여, 통신 회로를 통해 제1 외부 전자 장치에게 상기 제1 외부 전자 장치를 통해 제공되고 있는 멀티미디어 콘텐트를 표시하기 위한 정보를 요청할 수 있다. 웨어러블 장치(101)는, 상기 요청에 적어도 일부 기반하여 상기 제1 외부 전자 장치로부터 송신된 상기 정보를 상기 통신 회로를 통해 수신하는 것에 응답하여, 상기 제1 외부 전자 장치가 선택가능함을 알리기 위한 제2 객체(115) 및/또는 제3 객체(120)를 표시할 수 있다. 웨어러블 장치(101)는, 상기 제1 객체(110), 및/또는 제3 객체(120)에 대하여 수신되는 입력에 응답하여, 상기 정보에 기반하여 상기 멀티미디어 콘텐트를 디스플레이를 통하여 표시할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 디스플레이의 전체 영역, 및/또는 상기 전체 영역 중 지정된 비율을 초과하는 영역에 기반하여, 상기 멀티미디어 콘텐트를 표시할 수 있다. 웨어러블 장치(101)는, 제1 외부 전자 장치로부터 제공되는 멀티미디어 콘텐트와 관련된 정보를 수신한 것에 기반하여, 상기 멀티미디어 콘텐트를 표시함으로써, 웨어러블 장치(101)의 사용자 경험을 강화할 수 있다.
도 2는, 일 실시 예에 따른, 웨어러블 장치의 블록도(block diagram)의 일 예를 도시한다. 도 2의 웨어러블 장치(101)는, 도 1의 웨어러블 장치(101)를 포함할 수 있다.
도 2를 참고하면, 일 실시 예에 따른, 웨어러블 장치(101)는, 프로세서(210), 메모리(220), 디스플레이(230), 통신 회로(240), 또는 카메라(250) 중 적어도 하나를 포함할 수 있다. 프로세서(210), 메모리(220), 디스플레이(230), 통신 회로(240), 및 카메라(250)는 통신 버스(a communication bus)(205)와 같은 전자 부품(electronical component)에 의해 서로 전기적으로 및/또는 작동적으로 연결될 수 있다(electronically and/or operably coupled with each other). 이하에서, 하드웨어들이 작동적으로 결합된 것은 하드웨어들 중 제1 하드웨어에 의해 제2 하드웨어가 제어되도록, 하드웨어들 사이의 직접적인 연결 또는 간접적인 연결이 유선으로 또는 무선으로 수립된 것을 의미할 수 있다. 상이한 블록들에 도시되었으나, 실시 예가 이에 한정되는 것은 아니다. 도 2의 하드웨어들 중 일부분(예, 프로세서(210), 메모리(220), 및 통신 회로(240)의 적어도 일부분)이 SoC(system on a chip)와 같이 단일 집적 회로(single integrated circuit)에 포함될 수 있다. 웨어러블 장치(101) 내에 포함된 하드웨어의 타입 및/또는 개수는, 도 2에 도시된 바에 제한되지 않는다. 예를 들어, 웨어러블 장치(101)는, 도 2에 도시된 하드웨어 중 일부만 포함할 수 있다.
일 실시 예에 따른, 웨어러블 장치(101)는, 하나 이상의 인스트럭션들에 기반하여 데이터를 처리하기 위한 하드웨어를 포함할 수 있다. 예를 들어, 데이터를 처리하기 위한 하드웨어는, 프로세서(210)를 포함할 수 있다. 예를 들어, 데이터를 처리하기 위한 하드웨어는, ALU(arithmetic and logic unit), FPU(floating point unit), FPGA(field programmable gate array), CPU(central processing unit), 및/또는 AP(application processor)를 포함할 수 있다. 프로세서(210)는, 싱글-코어 프로세서의 구조를 가지거나, 또는 듀얼 코어(dual core), 쿼드 코어(quad core), 헥사 코어(hexa core), 옥타 코어(octa core)와 같은 멀티-코어 프로세서의 구조를 가질 수 있다. 도 1의 동작들 및/또는 후술되는 동작들은, 프로세서(210)에 의해 수행될 수 있다.
일 실시 예에 따른, 웨어러블 장치(101)의 메모리(220)는, 웨어러블 장치(101)의 프로세서(210)에 입력 및/또는 출력되는 데이터, 및/또는 인스트럭션을 저장하기 위한 컴포넌트를 포함할 수 있다. 예를 들어, 메모리(220)는, RAM(random-access memory)와 같은 휘발성 메모리(volatile memory) 및/또는 ROM(read-only memory)와 같은 비휘발성 메모리(non-volatile memory)를 포함할 수 있다. 예를 들어, 휘발성 메모리는, DRAM(dynamic RAM), SRAM(static RAM), Cache RAM, PSRAM(pseudo SRAM) 중 적어도 하나를 포함할 수 있다. 예를 들어, 비휘발성 메모리는, PROM(programmable ROM), EPROM(erasable PROM), EEPROM(electrically erasable PROM), 플래시 메모리, 하드디스크, 컴팩트 디스크, SSD(solid state drive), eMMC(embedded multi-media card) 중 적어도 하나를 포함할 수 있다.
일 실시 예에 따른, 웨어러블 장치(101)의 디스플레이(230)는, 사용자에게 시각화된 정보(visualized information)를 출력할 수 있다. 예를 들어, 디스플레이(230)는, GPU(graphic processing unit)와 같은 회로를 포함하는 프로세서(210)에 의해 제어되어, 사용자에게 시각화된 정보를 출력할 수 있다. 디스플레이(230)는, FPD(flat panel display) 및/또는 전자 종이(electronic paper)를 포함할 수 있다. 상기 FPD는, LCD(liquid crystal display), PDP(plasma display panel), 및/또는 하나 이상의 LED(light emitting diode)를 포함할 수 있다. 상기 LED는, OLED(organic LED)를 포함할 수 있다. 일 실시 예에 따른, 웨어러블 장치(101)는, 디스플레이(230)를 통하여, 가상 현실, 및/또는 실제 현실(actual reality)을 제공할 수 있다. 상기 가상 현실은, 카메라(250)를 통하여 획득된 이미지 상에 가상 객체를 합성한 것을 포함할 수 있다. 예를 들어, 상기 가상 현실은, 혼합 현실(mixed reality)을 포함할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 디스플레이(230)를 통하여, 카메라(250)를 통하여 획득된 이미지를 표시할 수 있다. 예를 들어, 상기 카메라(250)를 통하여 획득된 이미지를 표시하는 동작은, VST(video see-through) 모드로 참조될 수 있다.
일 실시 예에 따른, 웨어러블 장치(101)의 통신 회로(240)는, 웨어러블 장치(101) 및 외부 전자 장치(103) 사이의 전기 신호의 송신 및/또는 수신을 지원하기 위한 하드웨어 컴포넌트를 포함할 수 있다. 예를 들어, 통신 회로(240)는, 모뎀(MODEM), 안테나, 및 O/E(optic/electronic) 변환기 중 적어도 하나를 포함할 수 있다. 통신 회로(240)는, 이더넷(ethernet), LAN(local area network), WAN(wide area network), WiFi(wireless fidelity), 블루투스(Bluetooth), BLE(Bluetooth low energy), ZigBee, LTE(long term evolution), 5G NR(5th generation ne radio)와 같은 다양한 타입의 프로토콜에 기반하여 전기 신호의 송신, 및/또는 수신을 지원할 수 있다. 웨어러블 장치(101)는, 상기 통신 회로(240)를 통하여 외부 전자 장치와 통신 링크를 수립할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 통신 회로(240)를 통하여 정보를 요청하기 위한 전기 신호를 송신, 및/또는 수신할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 통신 회로(240)를 통해 외부 전자 장치에게 상기 외부 전자 장치를 통해 제공되고 있는 멀티미디어 콘텐트를 표시하기 위한 정보를 요청할 수 있다. 웨어러블 장치(101)는, 외부 전자 장치에 로그인된 제1 사용자 정보를 요청하기 위해, 웨어러블 장치(101)에 로그인된 제2 사용자 정보를, 상기 외부 전자 장치로 송신할 수 있다. 웨어러블 장치(101)는, 상기 제2 사용자 정보를 암호화하여 외부 전자 장치로 송신할 수 있다. 외부 전자 장치는, 상기 제2 사용자 정보를 수신한 것에 기반하여, 상기 제1 사용자 정보 및 상기 제2 사용자 정보의 동일성을 식별할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 제2 사용자 정보를 복호화하여 상기 제1 사용자 정보 및 상기 제2 사용자 정보의 동일성을 식별할 수 있다. 외부 전자 장치 및 웨어러블 장치(101)는, 상기 제1 사용자 정보 및 상기 제2 사용자 정보의 동일성의 식별에 기반하여, 통신 링크를 수립할 수 있다. 외부 전자 장치는, 상기 동일성의 식별에 기반하여, 웨어러블 장치(101)로부터 송신된, 외부 전자 장치에서 제공되고 있는 멀티미디어 콘텐트와 관련된 정보를 웨어러블 장치(101)로 송신할 수 있다. 웨어러블 장치(101)는, 상기 멀티미디어 콘텐트와 관련된 정보를 수신한 것에 기반하여, 상기 멀티미디어 콘텐트를 디스플레이(230)를 통하여 표시할 수 있다. 예를 들어, 상기 멀티미디어 콘텐트와 관련된 정보는, 상기 멀티미디어 콘텐트의 명칭, 및/또는 상기 멀티미디어 콘텐트의 재생 시간과 같은, 상기 멀티미디어 콘텐트의 제공과 관련된 정보를 포함할 수 있다.
일 실시 예에 따른, 웨어러블 장치(101)의 카메라(250)는, 렌즈 어셈블리(assembly), 또는 이미지 센서를 포함할 수 있다. 상기 렌즈 어셈블리는 이미지 촬영의 대상인 피사체로부터 방출되는 빛을 수집할 수 있다. 렌즈 어셈블리는 하나 또는 그 이상의 렌즈들을 포함할 수 있다. 일 실시 예에 따른, 카메라(250)는, 복수의 렌즈 어셈블리들을 포함할 수 있다. 예를 들어, 카메라(250)는, 복수의 렌즈 어셈블리들 중 일부는 동일한 렌즈 속성(예, 화각, 초점 거리, 자동 초점, f 넘버(f number), 또는 광학 줌)을 갖거나 또는 적어도 하나의 렌즈 어셈블리는 다른 렌즈 어셈블리의 렌즈 속성들과 상이한 하나 이상의 렌즈 속성들을 가질 수 있다. 렌즈 어셈블리는, 광각 렌즈, 또는 망원 렌즈를 포함할 수 있다. 일 실시 예에 따른, 이미지 센서는, 예를 들면, RGB 센서, BW(black and white) 센서, IR 센서, 또는 UV 센서와 같이 속성이 다른 이미지 센서들 중 선택된 하나의 이미지 센서, 동일한 속성을 갖는 복수의 이미지 센서들, 또는 다른 속성을 갖는 복수의 이미지 센서들을 포함할 수 있다. 이미지 센서에 포함된 각각의 이미지 센서는, 예를 들면, CCD(charged coupled device) 센서 또는 CMOS(complementary metal oxide semiconductor) 센서를 이용하여 구현될 수 있다. 일 실시 예에 따른, 웨어러블 장치(101)는, 상기 카메라(250)를 통하여 이미지를 획득할 수 있다. 웨어러블 장치(101)는, 상기 카메라(250)를 통하여 획득된 이미지를 표시하는 동작을 수행할 수 있다. 예를 들어, VR 환경 내에서 웨어러블 장치(101)가 상기 카메라(250)를 통하여 획득된 이미지를 표시하는 동작은, VST 모드로 참조될 수 있다. 웨어러블 장치(101)는, 상기 VST 모드로 동작하는 동안, 상기 이미지의 적어도 일부에 시각적 객체를 표시할 수 있다. 예를 들어, 상기 시각적 객체는, 웨어러블 장치(101)의 프로세서(210)에 의해 생성되는 가상 객체일 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 시각적 객체, 및/또는 가상 객체를, 상기 이미지와 중첩하여 표시할 수 있다. 웨어러블 장치(101)는, 상기 이미지 내에서 식별된 실제 객체를 식별할 수 있다. 웨어러블 장치(101)는, 상기 실제 객체와 중첩하여, 상기 실제 객체에 대해 선택가능함을 알리기 위한 시각적 객체를 표시할 수 있다. 일 실시 예에 따른, 웨어러블 장치(101)는, 디스플레이(230)를 통하여 실제 현실을 제공할 수 있다. 예를 들어, AR 환경 내에서, 상기 웨어러블 장치(101)는, 디스플레이(230)를 투과하여 보여지는 실제 현실을 제공할 수 있다. 웨어러블 장치(101)는, 상기 AR 환경 내에서, 디스플레이(230) 내에 가상 객체를 표시할 수 있다.
일 실시 예에 따른, 웨어러블 장치(101)는, 외부 전자 장치에 대해 선택가능함을 알리기 위한 제2 객체(예, 도 1의 제2 객체(115))를, 상기 외부 전자 장치에 대응하는 제1 객체(예, 도 1의 제1 객체(110))와 연계로 표시할 수 있다. 웨어러블 장치(101)는, 상기 제2 객체의 표시에 기반하여, 상기 제1 객체에 대한 입력을 수신할 수 있다. 예를 들어, 웨어러블 장치(101)는, 웨어러블 장치(101)와 통신 링크가 수립된 컨트롤러를 이용하여, 상기 제1 객체에 대한 입력을 수신할 수 있다. 예를 들어, 웨어러블 장치(101)는, 사용자의 시선을 추적한 것에 기반하여, 상기 제1 객체에 대한 입력을 수신할 수 있다. 웨어러블 장치(101)는, 상기 입력을 수신한 것에 응답하여, 외부 전자 장치로부터 상기 외부 전자 장치에 의해 제공되는 멀티미디어 콘텐트를, 디스플레이(230)를 통하여 표시할 수 있다. 상기 제1 객체에 대한 입력은, 상술한 바에 제한되지 않는다.
상술한 바와 같이, 일 실시 예에 따른, 웨어러블 장치(101)는, 카메라(250)를 통하여 이미지를 획득할 수 있다. 웨어러블 장치(101)는, 상기 이미지 내에 포함된 제1 객체에 기반하여, 상기 제1 객체에 대응하는 외부 전자 장치를 식별할 수 있다. 웨어러블 장치(101)는, 상기 식별에 기반하여, 통신 회로(240)를 통하여 외부 전자 장치로, 상기 외부 전자 장치를 통해 제공되고 있는 멀티미디어 콘텐트를 표시하기 위한 정보를 요청할 수 있다. 웨어러블 장치(101)는, 상기 요청에 적어도 일부 기반하여 상기 외부 전자 장치로부터 송신된 상기 정보를 수신할 수 있다. 웨어러블 장치(101)는, 상기 정보를 수신하는 것에 응답하여, 상기 외부 전자 장치가 선택가능함을 알리기 위한 제2 객체를, 상기 제1 객체와 연계로 표시할 수 있다. 웨어러블 장치(101)는, 상기 제2 객체와 연계된 제1 객체에 대하여 수신되는 입력에 응답하여, 상기 정보에 기반하여 상기 멀티미디어 콘텐트를 표시할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 제1 객체에 대응하는 상기 외부 전자 장치에서 제공 중인 멀티미디어 콘텐트를, 상기 외부 전자 장치와 연동하여 표시할 수 있다. 웨어러블 장치(101)는, 상기 멀티미디어 콘텐트를 외부 전자 장치에서 재생 중인 시점으로부터 상기 멀티미디어 콘텐트를 제공할 수 있다. 웨어러블 장치(101)는, 외부 전자 장치에서 제공 중인 멀티미디어 콘텐트를 이어서 제공함으로써, 웨어러블 장치(101)의 사용자 경험을 강화할 수 있다.
도 3a는, 일 실시예에 따른, 웨어러블 장치의 사시도(perspective view)의 일 예를 도시한다. 도 3b는, 일 실시예에 따른, 웨어러블 장치 내에 배치된 하나 이상의 하드웨어들의 일 예를 도시한다. 도 3a 내지 도 3b의 웨어러블 장치(300)는, 도 1, 및/또는 도 2의 웨어러블 장치(101)를 포함할 수 있다. 도 3a의 도시 내에서(as shown in), 일 실시예에 따른, 웨어러블 장치(300)는, 적어도 하나의 디스플레이(350), 및 적어도 하나의 디스플레이(350)를 지지하는 프레임을 포함할 수 있다.
일 실시예에 따른, 웨어러블 장치(300)는 사용자의 신체의 일부 상에 착용될 수 있다. 웨어러블 장치(300)는, 웨어러블 장치(300)를 착용한 사용자에게, 증강 현실(augmented reality, AR), 가상 현실(virtual reality, VR), 또는 증강 현실과 가상 현실을 혼합한 혼합 현실(mixed reality, MR)을 제공할 수 있다. 예를 들면, 웨어러블 장치(300)는, 도 3b의 동작 인식 카메라(340-2)를 통해 획득된 사용자의 지정된 제스처에 응답하여, 적어도 하나의 디스플레이(350)를 통하여 사용자에게 가상 현실 영상을 출력할 수 있다.
일 실시예에 따른, 웨어러블 장치(300) 내 적어도 하나의 디스플레이(350)는, 사용자에게 시각 정보를 제공할 수 있다. 상기 적어도 하나의 디스플레이(350)는, 도 2의 디스플레이(230)를 포함할 수 있다. 예를 들면, 적어도 하나의 디스플레이(350)는, 투명 또는 반투명한 렌즈를 포함할 수 있다. 적어도 하나의 디스플레이(350)는, 제1 디스플레이(350-1) 및/또는 제1 디스플레이(350-1)로부터 이격된 제2 디스플레이(350-2)를 포함할 수 있다. 예를 들면, 제1 디스플레이(350-1), 및 제2 디스플레이(350-2)는, 사용자의 좌안과 우안에 각각 대응되는 위치에 배치될 수 있다.
도 3b를 참조하면, 적어도 하나의 디스플레이(350)는, 렌즈 상에 표시 영역을 형성하여, 웨어러블 장치(300)를 착용한 사용자에게, 렌즈를 통과하는 외부 광에 포함된 시각적 정보와 함께, 상기 시각적 정보와 구별되는, 다른 시각적 정보를 제공할 수 있다. 상기 렌즈는, 프레넬(fresnel) 렌즈, 팬케이크(pancake) 렌즈, 또는 멀티-채널 렌즈 중 적어도 하나에 기반하여 형성될 수 있다. 적어도 하나의 디스플레이(350)에 의해 형성된 표시 영역은, 렌즈의 제1 면(331), 및 제2 면(332) 중 제2 면(332) 상에 형성될 수 있다. 사용자가 웨어러블 장치(300)를 착용하였을 때, 외부 광은 제1 면(331)으로 입사되고, 제2 면(332)을 통해 투과됨으로써, 사용자에게 전달될 수 있다. 다른 예를 들면, 적어도 하나의 디스플레이(350)는, 외부 광을 통해 전달되는 현실 화면에 결합될 가상 현실 영상을 표시할 수 있다. 적어도 하나의 디스플레이(350)로부터 출력된 상기 가상 현실 영상은, 웨어러블 장치(300)에 포함된 하나 이상의 하드웨어(예, 광학 장치들(382, 384), 및/또는 적어도 하나의 웨이브가이드들(waveguides)(333, 334))를 통하여, 사용자의 눈으로 송신될 수 있다.
일 실시예에 따른, 웨어러블 장치(300)는 적어도 하나의 디스플레이(350)로부터 송신되고, 광학 장치들(382, 384)에 의해 릴레이된 광을 회절시켜, 사용자에게 전달하는, 웨이브가이드들(333, 334)을 포함할 수 있다. 웨이브가이드들(333, 334)은, 글래스, 플라스틱, 또는 폴리머 중 적어도 하나에 기반하여 형성될 수 있다. 웨이브가이드들(333, 334)의 외부, 또는 내부의 적어도 일부분에, 나노 패턴이 형성될 수 있다. 상기 나노 패턴은, 다각형, 및/또는 곡면 형상의 격자 구조(grating structure)에 기반하여 형성될 수 있다. 웨이브가이드들(333, 334)의 일 단으로 입사된 광은, 상기 나노 패턴에 의해 웨이브가이드들(333, 334)의 타 단으로 전파될 수 있다. 웨이브가이드들(333, 334)은 적어도 하나의 회절 요소(예: DOE(diffractive optical element), HOE(holographic optical element)), 반사 요소(예: 반사 거울) 중 적어도 하나를 포함할 수 있다. 예를 들어, 웨이브가이드들(333, 334)은, 적어도 하나의 디스플레이(350)에 의해 표시되는 화면을, 사용자의 눈으로 가이드하기 위하여, 웨어러블 장치(300) 내에 배치될 수 있다. 예를 들어, 상기 화면은, 웨이브가이드들(333, 334) 내에서 발생되는 전반사(total internal reflection, TIR)에 기반하여, 사용자의 눈으로 송신될 수 있다.
일 실시예에 따른, 웨어러블 장치(300)는, 촬영 카메라(340-1)를 통해 수집된 현실 영상에 포함된 오브젝트(object)를 분석하고, 분석된 오브젝트 중에서 증강 현실 제공의 대상이 되는 오브젝트에 대응되는 가상 오브젝트(virtual object)를 결합하여, 적어도 하나의 디스플레이(350)에 표시할 수 있다. 가상 오브젝트는, 현실 영상에 포함된 오브젝트에 관련된 다양한 정보에 대한 텍스트, 및 이미지 중 적어도 하나를 포함할 수 있다. 웨어러블 장치(300)는, 스테레오 카메라와 같은 멀티-카메라에 기반하여, 오브젝트를 분석할 수 있다. 상기 오브젝트 분석을 위하여, 웨어러블 장치(300)는 멀티-카메라에 의해 지원되는, ToF(time-of-flight), 및/또는 SLAM(simultaneous localization and mapping)을 실행할 수 있다. 웨어러블 장치(300)를 착용한 사용자는, 적어도 하나의 디스플레이(350)에 표시되는 영상을 시청할 수 있다.
일 실시예에 따르면, 프레임은, 웨어러블 장치(300)가 사용자의 신체 상에 착용될 수 있는 물리적인 구조로 이루어질 수 있다. 일 실시예에 따르면, 프레임은, 사용자가 웨어러블 장치(300)를 착용하였을 때, 제1 디스플레이(350-1) 및 제2 디스플레이(350-2)가 사용자의 좌안 및 우안에 대응되는 위치할 수 있도록, 구성될 수 있다. 프레임은, 적어도 하나의 디스플레이(350)를 지지할 수 있다. 예를 들면, 프레임은, 제1 디스플레이(350-1) 및 제2 디스플레이(350-2)를 사용자의 좌안 및 우안에 대응되는 위치에 위치되도록 지지할 수 있다.
도 3a를 참조하면, 프레임은, 사용자가 웨어러블 장치(300)를 착용한 경우, 적어도 일부가 사용자의 신체의 일부분과 접촉되는 영역(320)을 포함할 수 있다. 예를 들면, 프레임의 사용자의 신체의 일부분과 접촉되는 영역(320)은, 웨어러블 장치(300)가 접하는 사용자의 코의 일부분, 사용자의 귀의 일부분 및 사용자의 얼굴의 측면 일부분과 접촉하는 영역을 포함할 수 있다. 일 실시예에 따르면, 프레임은, 사용자의 신체의 일부 상에 접촉되는 노즈 패드(310)를 포함할 수 있다. 웨어러블 장치(300)가 사용자에 의해 착용될 시, 노즈 패드(310)는, 사용자의 코의 일부 상에 접촉될 수 있다. 프레임은, 상기 사용자의 신체의 일부와 구별되는 사용자의 신체의 다른 일부 상에 접촉되는 제1 템플(temple)(304) 및 제2 템플(305)을 포함할 수 있다.
일 실시예에서, 프레임은, 제1 디스플레이(350-1)의 적어도 일부를 감싸는 제1 림(rim)(301), 제2 디스플레이(350-2)의 적어도 일부를 감싸는 제2 림(302), 제1 림(301)과 제2 림(302) 사이에 배치되는 브릿지(bridge)(303), 브릿지(303)의 일단으로부터 제1 림(301)의 가장자리 일부를 따라 배치되는 제1 패드(311), 브릿지(303)의 타단으로부터 제2 림(302)의 가장자리 일부를 따라 배치되는 제2 패드(312), 제1 림(301)으로부터 연장되어 착용자의 귀의 일부분에 고정되는 제1 템플(304), 및 제2 림(302)으로부터 연장되어 상기 귀의 반대측 귀의 일부분에 고정되는 제2 템플(305)을 포함할 수 있다. 제1 패드(311), 및 제2 패드(312)는, 사용자의 코의 일부분과 접촉될 수 있고, 제1 템플(304) 및 제2 템플(305)은, 사용자의 안면의 일부분 및 귀의 일부분과 접촉될 수 있다. 템플들(304, 305)은, 도 3b의 힌지 유닛들(306, 307)을 통해 림과 회전 가능하게(rotatably) 연결될 수 있다. 제1 템플(304)은, 제1 림(301)과 제1 템플(304)의 사이에 배치된 제1 힌지 유닛(306)을 통해, 제1 림(301)에 대하여 회전 가능하게 연결될 수 있다. 제2 템플(305)은, 제2 림(302)과 제2 템플(305)의 사이에 배치된 제2 힌지 유닛(307)을 통해 제2 림(302)에 대하여 회전 가능하게 연결될 수 있다. 일 실시예에 따른, 웨어러블 장치(300)는 프레임의 표면의 적어도 일부분 상에 형성된, 터치 센서, 그립 센서, 및/또는 근접 센서를 이용하여, 프레임을 터치하는 외부 객체(예, 사용자의 손끝(fingertip)), 및/또는 상기 외부 객체에 의해 수행된 제스쳐를 식별할 수 있다.
일 실시예에 따르면, 웨어러블 장치(300)는, 다양한 기능들을 수행하는 하드웨어들(예, 도 2의 블록도에 기반하여 상술된 하드웨어들)을 포함할 수 있다. 예를 들면, 상기 하드웨어들은, 배터리 모듈(370), 안테나 모듈(375), 광학 장치들(382, 384), 스피커들(392-1, 392-2), 마이크들(394-1, 394-2, 394-3), 발광 모듈(미도시), 및/또는 인쇄 회로 기판(390)을 포함할 수 있다. 다양한 하드웨어들은, 프레임 내에 배치될 수 있다.
일 실시예에 따른, 웨어러블 장치(300)의 마이크들(394-1, 394-2, 394-3)은, 프레임의 적어도 일부분에 배치되어, 소리 신호를 획득할 수 있다. 노즈 패드(310) 상에 배치된 제1 마이크(394-1), 제2 림(302) 상에 배치된 제2 마이크(394-2), 및 제1 림(301) 상에 배치된 제3 마이크(394-3)가 도 3b 내에 도시되지만, 마이크(394)의 개수, 및 배치가 도 3b의 일 실시예에 제한되는 것은 아니다. 웨어러블 장치(300) 내에 포함된 마이크(394)의 개수가 두 개 이상인 경우, 웨어러블 장치(300)는 프레임의 상이한 부분들 상에 배치된 복수의 마이크들을 이용하여, 소리 신호의 방향을 식별할 수 있다.
일 실시예에 따르면, 광학 장치들(382, 384)은, 적어도 하나의 디스플레이(350)로부터 송신된 가상 오브젝트를, 웨이브 가이드들(333, 334)로 송신할 수 있다. 예를 들면, 광학 장치들(382, 384)은, 프로젝터일 수 있다. 광학 장치들(382, 384)은, 적어도 하나의 디스플레이(350)에 인접하여 배치되거나, 적어도 하나의 디스플레이(350)의 일부로써, 적어도 하나의 디스플레이(350) 내에 포함될 수 있다. 제1 광학 장치(382)는, 제1 디스플레이(350-1)에 대응하고, 제2 광학 장치(384)는, 제2 디스플레이(350-2)에 대응할 수 있다. 제1 광학 장치(382)는, 제1 디스플레이(350-1)로부터 출력된 광을, 제1 웨이브가이드(333)로 송출할 수 있고, 제2 광학 장치(384)는, 제2 디스플레이(350-2)로부터 출력된 광을, 제2 웨이브가이드(334)로 송출할 수 있다.
일 실시예에서, 카메라(340)는, 시선 추적 카메라(eye tracking camera, ET CAM)(340-1), 동작 인식 카메라(340-2), 및/또는 촬영 카메라(340-3)를 포함할 수 있다. 촬영 카메라(340-3), 시선 추적 카메라(340-1) 및 동작 인식 카메라(340-2)는, 프레임 상에서 서로 다른 위치에 배치될 수 있고, 서로 다른 기능을 수행할 수 있다. 촬영 카메라(340-3), 시선 추적 카메라(340-1) 및 동작 인식 카메라(340-2)는 도 2의 카메라(225)의 일 예일 수 있다. 시선 추적 카메라(340-1)는, 웨어러블 장치(300)를 착용한 사용자의 시선(gaze)을 나타내는 데이터를 출력할 수 있다. 예를 들어, 웨어러블 장치(300)는 시선 추적 카메라(340-1)를 통하여 획득된, 사용자의 눈동자가 포함된 이미지로부터, 상기 시선을 탐지할 수 있다. 시선 추적 카메라(340-1)가 사용자의 우측 눈을 향하여 배치된 일 예가 도 3b 내에 도시되지만, 실시예가 이에 제한되는 것은 아니며, 시선 추적 카메라(340-1)는, 사용자의 좌측 눈을 향하여 단독으로 배치되거나, 또는 양 눈들 전부를 향하여 배치될 수 있다.
일 실시예에서, 촬영 카메라(340-3)는, 증강 현실 또는 혼합 현실 콘텐츠를 구현하기 위해서 가상의 이미지와 정합될 실제의 이미지나 배경을 촬영할 수 있다. 촬영 카메라는, 사용자가 바라보는 위치에 존재하는 특정 사물의 이미지를 촬영하고, 그 이미지를 적어도 하나의 디스플레이(350)로 제공할 수 있다. 적어도 하나의 디스플레이(350)는, 촬영 카메라를 이용해 획득된 상기 특정 사물의 이미지를 포함하는 실제의 이미지나 배경에 관한 정보와, 광학 장치들(382, 384)을 통해 제공되는 가상 이미지가 겹쳐진 하나의 영상을 표시할 수 있다. 일 실시예에서, 촬영 카메라는, 제1 림(301) 및 제2 림(302) 사이에 배치되는 브릿지(303) 상에 배치될 수 있다.
일 실시예에서, 시선 추적 카메라(340-1)는, 웨어러블 장치(300)를 착용한 사용자의 시선(gaze)을 추적함으로써, 사용자의 시선과 적어도 하나의 디스플레이(350)에 제공되는 시각 정보를 일치시켜 보다 현실적인 증강 현실을 구현할 수 있다. 예를 들어, 웨어러블 장치(300)는, 사용자가 정면을 바라볼 때, 사용자가 위치한 장소에서 사용자의 정면에 관련된 환경 정보를 자연스럽게 적어도 하나의 디스플레이(350)에 표시할 수 있다. 시선 추적 카메라(340-1)는, 사용자의 시선을 결정하기 위하여, 사용자의 동공의 이미지를 캡쳐하도록, 구성될 수 있다. 예를 들면, 시선 추적 카메라(340-1)는, 사용자의 동공에서 반사된 시선 검출 광을 수신하고, 수신된 시선 검출 광의 위치 및 움직임에 기반하여, 사용자의 시선을 추적할 수 있다. 일 실시예에서, 시선 추적 카메라(340-1)는, 사용자의 좌안과 우안에 대응되는 위치에 배치될 수 있다. 예를 들면, 시선 추적 카메라(340-1)는, 제1 림(301) 및/또는 제2 림(302) 내에서, 웨어러블 장치(300)를 착용한 사용자가 위치하는 방향을 향하도록 배치될 수 있다.
일 실시예에서, 동작 인식 카메라(340-2)는, 사용자의 몸통, 손, 또는 얼굴 등 사용자의 신체 전체 또는 일부의 움직임을 인식함으로써, 적어도 하나의 디스플레이(350)에 제공되는 화면에 특정 이벤트를 제공할 수 있다. 동작 인식 카메라(340-2)는, 사용자의 동작을 인식(gesture recognition)하여 상기 동작에 대응되는 신호를 획득하고, 상기 신호에 대응되는 표시를 적어도 하나의 디스플레이(350)에 제공할 수 있다. 프로세서는, 상기 동작에 대응되는 신호를 식별하고, 상기 식별에 기반하여, 지정된 기능을 수행할 수 있다. 일 실시예에서, 동작 인식 카메라(340-2)는, 제1 림(301) 및/또는 제2 림(302)상에 배치될 수 있다.
일 실시예에서, 웨어러블 장치(300) 내에 포함된 카메라(340)는, 상술된 시선 추적 카메라(340-1), 동작 인식 카메라(340-2)에 제한되지 않는다. 예를 들어, 웨어러블 장치(300)는 사용자의 FoV를 향하여 배치된 촬영 카메라(340-3)를 이용하여, 상기 FoV 내에 포함된 외부 객체를 식별할 수 있다. 웨어러블 장치(300)가 외부 객체를 식별하는 것은, 깊이 센서, 및/또는 ToF(time of flight) 센서와 같이, 웨어러블 장치(300), 및 외부 객체 사이의 거리를 식별하기 위한 센서에 기반하여 수행될 수 있다. 상기 FoV를 향하여 배치된 상기 카메라(340)는, 오토포커스 기능, 및/또는 OIS(optical image stabilization) 기능을 지원할 수 있다. 예를 들어, 웨어러블 장치(300)는, 웨어러블 장치(300)를 착용한 사용자의 얼굴을 포함하는 이미지를 획득하기 위하여, 상기 얼굴을 향하여 배치된 카메라(340)(예, FT(face tracking) 카메라)를 포함할 수 있다.
비록 도시되지 않았지만, 일 실시예에 따른, 웨어러블 장치(300)는, 카메라(340)를 이용하여 촬영되는 피사체(예, 사용자의 눈, 얼굴, 및/또는 FoV 내 외부 객체)를 향하여 빛을 방사하는 광원(예, LED)을 더 포함할 수 있다. 상기 광원은 적외선 파장의 LED를 포함할 수 있다. 상기 광원은, 프레임, 힌지 유닛들(306, 307) 중 적어도 하나에 배치될 수 있다.
일 실시예에 따르면, 배터리 모듈(370)은, 웨어러블 장치(300)의 전자 부품들에 전력을 공급할 수 있다. 일 실시예에서, 배터리 모듈(370)은, 제1 템플(304) 및/또는 제2 템플(305) 내에 배치될 수 있다. 예를 들면, 배터리 모듈(370)은, 복수의 배터리 모듈(370)들일 수 있다. 복수의 배터리 모듈(370)들은, 각각 제1 템플(304)과 제2 템플(305) 각각에 배치될 수 있다. 일 실시예에서, 배터리 모듈(370)은 제1 템플(304) 및/또는 제2 템플(305)의 단부에 배치될 수 있다.
일 실시예에서, 안테나 모듈(375)은, 신호 또는 전력을 웨어러블 장치(300)의 외부로 송신하거나, 외부로부터 신호 또는 전력을 수신할 수 있다. 안테나 모듈(375)은, 웨어러블 장치(300) 내 통신 회로(예, 도 2의 통신 회로(235))와 전기적으로, 및/또는 작동적으로 연결될 수 있다. 일 실시예에서, 안테나 모듈(375)은, 제1 템플(304) 및/또는 제2 템플(305) 내에 배치될 수 있다. 예를 들면, 안테나 모듈(375)은, 제1 템플(304), 및/또는 제2 템플(305)의 일면에 가깝게 배치될 수 있다.
일 실시예에서, 스피커들(392-1, 392-2)은, 음향 신호를 웨어러블 장치(300)의 외부로 출력할 수 있다. 음향 출력 모듈은, 스피커로 참조될 수 있다. 일 실시예에서, 스피커들(392-1, 392-2)은, 웨어러블 장치(300)를 착용한 사용자의 귀에 인접하게 배치되기 위하여, 제1 템플(304), 및/또는 제2 템플(305) 내에 배치될 수 있다. 예를 들면, 웨어러블 장치(300)는, 제1 템플(304) 내에 배치됨으로써 사용자의 좌측 귀에 인접하게 배치되는, 제2 스피커(392-2), 및 제2 템플(305) 내에 배치됨으로써 사용자의 우측 귀에 인접하게 배치되는, 제1 스피커(392-1)를 포함할 수 있다.
일 실시예에서, 발광 모듈(미도시)은, 적어도 하나의 발광 소자를 포함할 수 있다. 발광 모듈은, 웨어러블 장치(300)의 특정 상태에 관한 정보를 사용자에게 시각적으로 제공하기 위하여, 특정 상태에 대응되는 색상의 빛을 방출하거나, 특정 상태에 대응되는 동작으로 빛을 방출할 수 있다. 예를 들면, 웨어러블 장치(300)가, 충전이 필요한 경우, 적색 광의 빛을 지정된 시점에 반복적으로 방출할 수 있다. 일 실시예에서, 발광 모듈은, 제1 림(301) 및/또는 제2 림(302) 상에 배치될 수 있다.
도 3b를 참고하면, 일 실시예에 따른, 웨어러블 장치(300)는 PCB(printed circuit board)(390)을 포함할 수 있다. PCB(390)는, 제1 템플(304), 또는 제2 템플(305) 중 적어도 하나에 포함될 수 있다. PCB(390)는, 적어도 두 개의 서브 PCB들 사이에 배치된 인터포저를 포함할 수 있다. PCB(390) 상에서, 웨어러블 장치(300)에 포함된 하나 이상의 하드웨어들(예, 도 2를 참고하여 상술된 블록들에 의하여 도시된 하드웨어들)이 배치될 수 있다. 웨어러블 장치(300)는, 상기 하드웨어들을 상호연결하기 위한, FPCB(flexible PCB)를 포함할 수 있다.
일 실시예에 따른, 웨어러블 장치(300)는, 웨어러블 장치(300)의 자세, 및/또는 웨어러블 장치(300)를 착용한 사용자의 신체 부위(예, 머리)의 자세를 탐지하기 위한 자이로 센서, 중력 센서, 및/또는 가속도 센서 중 적어도 하나를 포함할 수 있다. 중력 센서, 및 가속도 센서 각각은, 서로 수직인 지정된 3차원 축들(예, x축, y축 및 z축)에 기반하여 중력 가속도, 및/또는 가속도를 측정할 수 있다. 자이로 센서는 지정된 3차원 축들(예, x축, y축 및 z축) 각각의 각속도를 측정할 수 있다. 상기 중력 센서, 상기 가속도 센서, 및 상기 자이로 센서 중 적어도 하나가, IMU(inertial measurement unit)로 참조될 수 있다. 일 실시예에 따른, 웨어러블 장치(300)는 IMU에 기반하여 웨어러블 장치(300)의 특정 기능을 실행하거나, 또는 중단하기 위해 수행된 사용자의 모션, 및/또는 제스쳐를 식별할 수 있다.
상술한 바와 같이, 일 실시 예에 따른, 웨어러블 장치(300)는, 디스플레이(350)를 통하여 표시되는 제1 객체(예, 도 1의 제1 객체(110))를 식별할 수 있다. 웨어러블 장치(300)는, 상기 제1 객체에 대응하는 외부 전자 장치를 식별할 수 있다. 웨어러블 장치(300)는, 상기 외부 전자 장치를 식별한 것에 기반하여, 상기 외부 전자 장치를 통하여 제공되는 멀티미디어 콘텐트와 관련된 정보를 요청할 수 있다. 웨어러블 장치(300)는, 상기 정보의 수신에 응답하여, 상기 외부 전자 장치가 선택가능함을 알리기 위한 제2 객체를, 상기 제1 객체와 연계로 표시할 수 있다. 웨어러블 장치(300)는, 상기 제2 객체와 연계된 상기 제1 객체에 대한 입력을 수신할 수 있다. 예를 들어, 상기 웨어러블 장치(300)는, 카메라(340)를 이용하여 상기 입력을 식별할 수 있다. 예를 들어, 웨어러블 장치(300)는, 상기 카메라(340)를 이용하여 추적된 사용자의 시선에 기반하여, 상기 입력을 식별할 수 있다. 예를 들어, 웨어러블 장치(300)는, 상기 카메라(340)를 이용하여 식별된 사용자의 제스쳐에 기반하여, 상기 입력을 식별할 수 있다. 예를 들어, 상기 사용자의 제스쳐는, 상기 외부 전자 장치 또는 상기 외부 전자 장치에 대응하는 제1 객체를 지시하는 제스쳐를 포함할 수 있다. 예를 들어, 상기 사용자의 제스쳐는, 상기 제1 객체를 지시하기 위한 에어-제스쳐(air-gesture)를 포함할 수 있다. 웨어러블 장치(300)는, 상기 제1 객체에 대한 입력에 응답하여, 외부 전자 장치로부터 송신된 멀티미디어 콘텐트와 관련된 정보에 기반하여, 상기 멀티미디어 콘텐트를 디스플레이(350)를 통하여 표시할 수 있다. 예를 들어, 웨어러블 장치(300)는, 상기 입력이 식별된 시점에 제공 중인 멀티미디어 콘텐트를 표시할 수 있다.
도 4a 내지 도 4b는, 일 실시예에 따른, 웨어러블 장치(400)의 외관의 일 예를 도시한다. 도 4a 내지 도 4b의 웨어러블 장치(400)는, 도 1, 도 2의 웨어러블 장치(101)를 포함할 수 있다. 일 실시예에 따른, 웨어러블 장치(400)의 하우징의 제1 면(410)의 외관의 일 예가 도 4a에 도시되고, 상기 제1 면(410)의 반대되는(opposite to) 제2 면(420)의 외관의 일 예가 도 4b에 도시될 수 있다.
도 4a를 참고하면, 일 실시예에 따른, 웨어러블 장치(400)의 제1 면(410)은, 사용자의 신체 부위(예, 상기 사용자의 얼굴) 상에 부착가능한(attachable) 형태를 가질 수 있다. 비록 도시되지 않았지만, 웨어러블 장치(400)는, 사용자의 신체 부위 상에 고정되기 위한 스트랩, 및/또는 하나 이상의 템플들(예, 도 3a 내지 도 3b의 제1 템플(304), 및/또는 제2 템플(305))을 더 포함할 수 있다. 사용자의 양 눈들 중에서 좌측 눈으로 이미지를 출력하기 위한 제1 디스플레이(350-1), 및 상기 양 눈들 중에서 우측 눈으로 이미지를 출력하기 위한 제2 디스플레이(350-2)가 제1 면(410) 상에 배치될 수 있다. 웨어러블 장치(400)는 제1 면(410) 상에 형성되고, 상기 제1 디스플레이(350-1), 및 상기 제2 디스플레이(350-2)로부터 방사되는 광과 상이한 광(예, 외부 광(ambient light))에 의한 간섭을 방지하기 위한, 고무, 또는 실리콘 패킹(packing)을 더 포함할 수 있다.
일 실시예에 따른, 웨어러블 장치(400)는, 상기 제1 디스플레이(350-1), 및 상기 제2 디스플레이(350-2) 각각에 인접한 사용자의 양 눈들을 촬영, 및/또는 추적하기 위한 카메라들(440-1, 440-2)을 포함할 수 있다. 상기 카메라들(440-1, 440-2)은, ET 카메라로 참조될 수 있다. 일 실시예에 따른, 웨어러블 장치(400)는, 사용자의 얼굴을 촬영, 및/또는 인식하기 위한 카메라들(440-3, 440-4)을 포함할 수 있다. 상기 카메라들(440-3, 440-4)은, FT 카메라로 참조될 수 있다.
도 4b를 참고하면, 도 4a의 제1 면(410)과 반대되는 제2 면(420) 상에, 웨어러블 장치(400)의 외부 환경과 관련된 정보를 획득하기 위한 카메라(예, 카메라들(440-5, 440-6, 440-7, 440-8, 440-9, 440-10)), 및/또는 센서(예, 깊이 센서(430))가 배치될 수 있다. 예를 들어, 카메라들(440-5, 440-6, 440-7, 440-8, 440-9, 440-10)은, 웨어러블 장치(400)와 상이한 외부 객체를 인식하기 위하여, 제2 면(420) 상에 배치될 수 있다. 예를 들어, 카메라들(440-9, 440-10)을 이용하여, 웨어러블 장치(400)는 사용자의 양 눈들 각각으로 송신될 이미지, 및/또는 미디어를 획득할 수 있다. 카메라(440-9)는, 상기 양 눈들 중에서 우측 눈에 대응하는 제2 디스플레이(350-2)를 통해 표시될 이미지를 획득하도록, 웨어러블 장치(400)의 제2 면(420) 상에 배치될 수 있다. 카메라(440-10)는, 상기 양 눈들 중에서 좌측 눈에 대응하는 제1 디스플레이(350-1)를 통해 표시될 이미지를 획득하도록, 웨어러블 장치(400)의제2 면(420) 상에 배치될 수 있다.
일 실시예에 따른, 웨어러블 장치(400)는, 웨어러블 장치(400), 및 외부 객체 사이의 거리를 식별하기 위하여 제2 면(420) 상에 배치된 깊이 센서(430)를 포함할 수 있다. 깊이 센서(430)를 이용하여, 웨어러블 장치(400)는, 웨어러블 장치(400)를 착용한 사용자의 FoV의 적어도 일부분에 대한 공간 정보(spatial information)(예, 깊이 맵(depth map))를 획득할 수 있다.
비록 도시되지 않았지만, 웨어러블 장치(400)의 제2 면(420) 상에, 외부 객체로부터 출력된 소리를 획득하기 위한 마이크가 배치될 수 있다. 마이크의 개수는, 실시예에 따라 하나 이상일 수 있다.
상술한 바와 같이, 일 실시 예에 따른, 웨어러블 장치(400)는, 디스플레이(350)를 통하여, 카메라들(440-5, 440-6, 440-7, 440-8, 440-9, 440-10)을 통하여 획득되는 이미지를 표시할 수 있다. 웨어러블 장치(400)는, 상기 이미지 내에서 제1 객체(예, 도 1의 제1 객체(110))를 표시할 수 있다. 웨어러블 장치(400)는, 상기 제1 객체에 대응하는 외부 전자 장치를 식별할 수 있다. 웨어러블 장치(400)는, 상기 외부 전자 장치를 식별한 것에 기반하여, 통신 회로(예, 도 2의 통신 회로(240))를 통하여 상기 외부 전자 장치를 통해 제공되고 있는 멀티미디어 콘텐트를 표시하기 위한 정보를 요청할 수 있다. 예를 들어, 웨어러블 장치(400)는, 상기 요청에 적어도 일부 기반하여 외부 전자 장치로부터 송신된 상기 정보를 수신할 수 있다. 웨어러블 장치(400)는, 상기 정보의 수신에 응답하여, 상기 외부 전자 장치가 선택가능함을 알리기 위한 제2 객체(예, 도 2의 제2 객체(115))를, 제1 객체와 연계로 표시할 수 있다. 웨어러블 장치(400)는, 상기 제1 객체 및 상기 제2 객체를 표시하는 동안, 상기 제1 객체에 대한 입력을 수신할 수 있다. 예를 들어, 상기 제1 객체에 대한 입력은, 카메라들(440-1, 440-2)에 기반하여 식별될 수 있다. 예를 들어, 웨어러블 장치(400)는, 상기 카메라들(440-1, 440-2)를 이용하여 웨어러블 장치(400)의 사용자의 시선을 추적하는 것에 기반하여, 상기 제1 객체에 대한 입력을 식별할 수 있다. 예를 들어, 웨어러블 장치(400)는, 카메라들(440-5, 440-6, 440-7, 440-8, 440-9, 440-10)에 기반하여, 웨어러블 장치(400)의 사용자의 제스쳐를 식별할 수 있다. 웨어러블 장치(400)는, 상기 사용자의 제스쳐에 기반하여, 상기 제1 객체에 대한 입력을 식별할 수 있다. 웨어러블 장치(400)는 상기 입력에 기반하여, 상기 외부 전자 장치로부터 송신된 정보에 기반하여, 멀티미디어 콘텐트를 표시할 수 있다. 웨어러블 장치(400)는, 상기 멀티미디어 콘텐트를 표시할 때에, 상기 입력에 대응하는 시점의 멀티미디어 콘텐트를 제공할 수 있다. 웨어러블 장치(400)는, 상기 입력에 대응하는 시점에 재생 중인 멀티미디어 콘텐트를 제공함으로써, 웨어러블 장치(400)의 사용자 경험을 강화할 수 있다.
도 5는, 일 실시 예에 따른, 웨어러블 장치의 디스플레이를 통해 표시되는 화면의 일 예를 도시한다. 도 5의 웨어러블 장치(101)는, 도 1, 및/또는 도 2의 웨어러블 장치(101)를 포함할 수 있다. 도 5의 웨어러블 장치(101)는, 도 3a 내지 도 3b의 웨어러블 장치(300), 및/또는 도 4a 내지 도 4b의 웨어러블 장치(400)를 포함할 수 있다. 도 5의 동작들은, 도 2의 프로세서(210)에 의해 수행될 수 있다.
도 5를 참고하면, 일 실시 예에 따른, 웨어러블 장치(101)는, 제1 예시(500)에서, 카메라(예, 도 2의 카메라(250))를 통하여 획득된 이미지를 디스플레이(예, 도 2의 디스플레이(230))를 통하여 표시할 수 있다. 웨어러블 장치(101)는, 상기 이미지 내에서 제1 객체(110)를 식별할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 제1 객체(110)를 식별한 것에 기반하여, 상기 제1 객체(110)에 대응하는 외부 전자 장치를 식별할 수 있다. 웨어러블 장치(101)는, 상기 외부 전자 장치를 식별한 것에 기반하여, 상기 제1 객체(110)와 연계로 제2 객체(예, 도 2의 제2 객체(115))를 표시할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 제1 객체(110)에 대한 선택가능함을 알리기 위한 제2 객체를, 상기 제1 객체(110)와 연계로 표시할 수 있다. 웨어러블 장치(101)는, 상기 제1 객체(110), 및/또는 상기 제2 객체(115)를 표시하는 동안, 상기 제1 객체(110)에 대한 입력을 식별할 수 있다.
일 실시 예에 따른, 웨어러블 장치(101)는, 상기 제1 객체(110), 및/또는 제2 객체(115)에 대한 입력을 식별할 수 있다. 웨어러블 장치(101)는, 상기 제1 객체(110) 및/또는 상기 제2 객체(115)에 대한 입력에 응답하여, 상기 제1 객체(110)에 대응하는 외부 전자 장치를 통하여 제공되는 멀티미디어 콘텐트를 표시하기 위한 화면(520)으로 전환할 수 있다. 상기 화면(520)은, 상기 외부 전자 장치를 통하여 제공되는 멀티미디어 콘텐트와 실질적으로 동일한 시점을 표현할 수 있다.
일 실시 예에 따른, 웨어러블 장치(101)는, 상기 제1 객체(110), 및/또는 제2 객체(115)에 대한 입력을 식별할 수 있다. 예를 들어, 상기 입력은, 웨어러블 장치(101)의 사용자의 제스쳐에 기반하여 식별될 수 있다. 예를 들어, 상기 입력은, 웨어러블 장치(101)의 컨트롤러에 기반하여 수신될 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 제1 객체(110), 및/또는 상기 제2 객체(115)를 드래그하는 입력을 식별할 수 있다. 예를 들어, 상기 드래그하는 입력은, 컨트롤러를 이용하여, 상기 제1 객체(110) 및/또는 상기 제2 객체(115)를 누르는 입력을 유지하고, 상기 제1 객체(110) 및/또는 상기 제2 객체(115)를 이동하는 입력을 포함할 수 있다. 제1 객체(110) 및/또는 제2 객체(115)에 대한 입력은, 상술한 예에 제한되지 않는다. 웨어러블 장치(101)는, 상기 입력에 응답하여, 디스플레이를 통하여, 화면(520)을 표시할 수 있다. 웨어러블 장치(101)는, 제1 객체(110)에 대응하는 외부 전자 장치를 통하여 제공되는 멀티미디어 콘텐트와 관련된 화면(520)을 표시할 수 있다.
일 실시 예에 따른, 웨어러블 장치(101)는, 상기 제1 객체(110)에 대한 입력을 식별한 것에 기반하여, 상기 제1 객체(110)에 대응하는 외부 전자 장치에 의해 제공되는 멀티미디어 콘텐트와 관련된 화면을, 디스플레이의 적어도 일부에 표시할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 디스플레이의 적어도 일부에 상기 멀티미디어 콘텐트와 관련된 제3 객체(510)를 표시할 수 있다. 예를 들어, 상기 제3 객체(510)는, 상기 멀티미디어 콘텐트를 표시하기 위한 시각적 객체, 및/또는 가상 객체일 수 있다.
일 실시 예에 따른, 웨어러블 장치(101)는, 멀티미디어 콘텐트와 관련된 제3 객체(510)에 대한 입력을 식별할 수 있다. 웨어러블 장치(101)는, 컨트롤러로부터 수신된 신호에 기반하여, 상기 제3 객체(510)에 대한 입력을 식별할 수 있다. 예를 들어, 상기 컨트롤러는, 상기 디스플레이 내에, 포인터와 같은, 가상 객체, 및/또는 시각적 객체를 지시하기 위한 신호를 송신할 수 있다. 일 실시 예에 따른, 웨어러블 장치(101)는, 사용자의 시선을 추적한 것에 기반하여, 상기 제3 객체(510)에 대한 입력을 식별할 수 있다. 웨어러블 장치(101)는, 상기 입력을 식별한 것에 기반하여, 상기 멀티미디어 콘텐트를 디스플레이의 전체 영역에 기반하여 표시할 수 있다.
제2 예시(505)를 참고하면, 일 실시 예에 따른, 웨어러블 장치(101)는, 디스플레이의 화면(520)을 통하여, 멀티미디어 콘텐트를 표시할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 제1 예시(500)에서 제공 중인 멀티미디어 콘텐트를 이어서 시청할 수 있도록, 상기 제2 예시(505)로 변경할 수 있다. 일 실시 예에 따른, 웨어러블 장치(101)는, 상기 화면(520) 내에, 상기 제1 예시(500)로 전환하기 위한 제4 객체(530)를 표시할 수 있다. 예를 들어, 웨어러블 장치(101)는, 멀티미디어 콘텐트와 관련된 화면(520)과 중첩하여 제4 객체(530)를 표시할 수 있다. 웨어러블 장치(101)는, 상기 화면(520)을 표시하는 동안, 지정된 기간(duration)을 초과하는 것에 기반하여 상기 제4 객체(530)의 표시를 중단할 수 있다. 예를 들어, 웨어러블 장치(101)는, 멀티미디어 콘텐트를 디스플레이의 전체 영역을 통하여 제공하기 위해 상기 제4 객체(530)의 표시를 적어도 일시적으로 중단할 수 있다.
상술한 바와 같이, 일 실시 예에 따른, 웨어러블 장치(101)는, VST 모드로 동작하는 동안, 외부 전자 장치를 식별할 수 있다. 웨어러블 장치(101)는, 외부 전자 장치에 대한 제1 객체(110)에 대한 선택가능함을 알리기 위한 제2 객체를 표시할 수 있다. 웨어러블 장치(101)는, 상기 제1 객체(110)에 대한 입력을 식별한 것에 기반하여, 상기 제1 객체(110)에 대응하는 외부 전자 장치에 의해 제공되는 멀티미디어 콘텐트를 디스플레이의 적어도 일부 영역 내에 표시할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 멀티미디어 콘텐트를 제3 객체(510)와 같은 시각적 객체를 통하여 표시할 수 있다. 웨어러블 장치(101)는, 상기 제3 객체(510)에 대한 입력에 기반하여, 멀티미디어 콘텐트와 관련된 화면(520)을 표시할 수 있다. 예를 들어, 상기 멀티미디어 콘텐트와 관련된 화면(520)은, 디스플레이의 전체 영역일 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 화면(520)을 표시하는 동안, 상기 화면(520)의 사이즈를 축소하기 위한 제4 객체(530)를 표시할 수 있다. 웨어러블 장치(101)는, 상기 제4 객체(530)에 대한 입력에 기반하여, 상기 화면(520)의 사이즈를 상기 제3 객체(510)의 사이즈로 변경할 수 있다. 상기 화면(520)의 사이즈, 상기 제3 객체(510)의 사이즈, 및/또는 상기 제3 객체(510)의 위치는 제한되지 않는다. 웨어러블 장치(101)는, 제3 객체(510) 및 화면(520)의 전환을 수행할 수 있다. 웨어러블 장치(101)는, 사용자의 입력에 기반하여 상기 전환을 수행함으로써, 웨어러블 장치(101)의 사용자 경험을 강화할 수 있다.
도 6은, 일 실시 예에 따른, 웨어러블 장치의 디스플레이를 통해 표시되는 화면의 일 예를 도시한다. 도 6의 웨어러블 장치(101)는, 도 1, 도 2, 및/또는 도 5의 웨어러블 장치(101)를 포함할 수 있다. 도 6의 웨어러블 장치(101)는, 도 3a 내지 도 3b의 웨어러블 장치(300) 및/또는 도 4a 내지 도 4b의 웨어러블 장치(400)를 포함할 수 있다. 도 6의 동작들은, 도 2의 프로세서(210)에 의해 수행될 수 있다.
도 7을 참고하면, 일 실시 예에 따른, 웨어러블 장치(101)는, 제1 예시(600) 내에서, 웨어러블 장치(101)는, 카메라를 통하여 이미지를 획득할 수 있다. 웨어러블 장치(101)는, 상기 이미지 내의 제1 객체(110)를 식별할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 제1 객체(110)에 대응하는 외부 전자 장치를 식별할 수 있다. 웨어러블 장치(101)는, 상기 제1 객체(110)를 객체를 식별한 동안, 상기 제1 객체와 상이한 제2 객체(620), 및/또는 제3 객체(630)를 식별할 수 있다. 예를 들어, 상기 제2 객체(620), 및/또는 상기 제3 객체(630)는, 소프트웨어 어플리케이션의 실행에 기반하여 표시되는 객체일 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 제1 객체(110)에 대응하는 외부 전자 장치가 멀티미디어 콘텐트를 제공하는 동안, 상기 제2 객체(620), 및/또는 제3 객체(630)를 식별할 수 있다. 웨어러블 장치(101)는, 멀티미디어 콘텐트가 제공되는 외부 전자 장치에 대응하는 제1 객체(110)와 중첩된 제2 객체(620), 및/또는 제3 객체(630)를 식별한 것에 기반하여, 중첩된 객체를 이동할 수 있다. 예를 들어, 제1 예시(600) 내에서, 웨어러블 장치(101)는, 제1 객체(110)와 중첩된 제3 객체(630)를 이동할 수 있다. 예를 들어, 웨어러블 장치(101)는, 제1 객체(110) 및 제3 객체(630)의 중첩된 영역(610)을 식별한 것에 기반하여, 상기 제3 객체(630)를 이동할 수 있다. 제2 예시(605)는, 제1 객체(110)와 중첩된 제3 객체(630)를 이동한 예시일 수 있다. 웨어러블 장치(101)는, 제3 객체(630)를 중첩된 영역(610)이 식별되지 않는 영역(635)으로 이동할 수 있다.
일 실시 예에 따른, 웨어러블 장치(101)는, 복수의 객체들(620, 630)을 식별할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 복수의 객체들(620, 630) 중 제1 객체(110)와 중첩된 영역(610)을 포함하는 제3 객체(630)를 강조하여 표시할 수 있다. 예를 들어, 상기 강조하여 표시하는 동작은, 상기 제3 객체(630)를 점멸하는 동작을 포함할 수 있다. 예를 들어, 상기 강조하여 표시하는 동작은, 상기 제3 객체(630)를 상이한 색상으로 표시하는 동작을 포함할 수 있다. 하지만 이에 제한되지 않는다. 일 실시 예에 따른, 웨어러블 장치(101)는, 제3 객체(630)를 강조하여 표시하는 동안, 상기 제3 객체(630)에 대한 입력을 수신할 수 있다. 예를 들어, 상기 입력은, 상기 제3 객체(630)를 드래그하는 입력을 포함할 수 있다. 웨어러블 장치(101)는, 상기 입력에 기반하여, 상기 제3 객체(630)를 이동시킬 수 있다.
상술한 바와 같이, 일 실시 예에 따른, 웨어러블 장치(101)는, 멀티미디어 콘텐트를 제공 중인 외부 전자 장치에 대응하는 제1 객체(110)를 식별할 수 있다. 웨어러블 장치(101)는, 상기 제1 객체(110)와 적어도 일부 중첩된 제3 객체(630)를 식별할 수 있다. 웨어러블 장치(101)는, 상기 제3 객체(630)를 상기 제1 객체(110)와 중첩하지 않는 영역(635)으로 이동할 수 있다. 웨어러블 장치(101)는, 상기 제3 객체(630)에 대한 입력에 기반하여, 상기 제3 객체(630)를 이동할 수 있다. 웨어러블 장치(101)는, 제1 객체(110)와 중첩된 제3 객체(630)를 이동함으로써, 제1 객체(110)에 대응하는 외부 전자 장치로부터 제공되는 멀티미디어 콘텐트를 사용자에게 제공할 수 있다. 웨어러블 장치(101)는, 제1 객체(110)와 중첩된 제3 객체(630)를 이동함으로써, 사용자에게 제1 객체(110)에 대응하는 외부 전자 장치를 통해 제공되는 멀티미디어 콘텐트의 시청에 도움을 줄 수 있다.
도 7은, 일 실시 예에 따른, 웨어러블 장치의 디스플레이를 통해 표시되는 화면의 일 예를 도시한다. 도 7의 웨어러블 장치(101)는, 도 1, 도 2, 도 5, 및/또는 도 6의 웨어러블 장치(101)를 포함할 수 있다. 도 7의 웨어러블 장치(101)는, 도 3a 내지 도 3b의 웨어러블 장치(300), 및/또는 도 4a 내지 도 4b의 웨어러블 장치(400)를 포함할 수 있다. 도 7의 동작들은, 도 2의 프로세서(210)에 의해 수행될 수 있다.
도 7을 참고하면, 일 실시 예에 따른, 웨어러블 장치(101)는, 카메라(예, 도 2의 카메라(250))를 통하여 이미지를 획득할 수 있다. 제1 예시(700)를 참고하면, 웨어러블 장치(101)는, 상기 이미지와 함께, 프로세서(예, 도 2의 프로세서(210))에 의해 생성된 객체들을 표시할 수 있다.
웨어러블 장치(101)는, 상기 이미지 내에서 제1 객체(110)를 식별할 수 있다. 웨어러블 장치(101)는, 상기 제1 객체(110)에 기반하여, 상기 제1 객체(110)에 대응하는 외부 전자 장치를 식별할 수 있다. 웨어러블 장치(101)는, 상기 식별에 기반하여, 외부 전자 장치로 상기 외부 전자 장치를 통해 제공되고 있는 멀티미디어 콘텐트를 표시하기 위한 정보를 요청할 수 있다. 웨어러블 장치(101)는, 상기 요청에 적어도 일부 기반하여 상기 외부 전자 장치로부터 송신된 상기 정보를 수신할 수 있다. 웨어러블 장치(101)는, 상기 정보를 수신하는 것에 응답하여, 상기 외부 전자 장치가 선택가능함을 알리기 위한 제2 객체(115)를 표시할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 제2 객체(115)를 상기 제1 객체(110)와 연계로 표시할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 제1 객체(110)의 가장자리를 따라 상기 제2 객체(115)를 표시할 수 있다.
일 실시 예에 따른, 웨어러블 장치(101)는, 제1 객체(110) 및/또는 제2 객체(115)에 대한 입력을 식별할 수 있다. 웨어러블 장치(101)는, 상기 제1 객체(110), 및/또는 상기 제2 객체(115)에 대한 입력에 기반하여, 디스플레이의 적어도 일부 영역(730) 내에, 제3 객체(710) 및 제4 객체(720)를 표시할 수 있다. 예를 들어, 상기 제3 객체(710)는, 제1 객체(110)에 대응하는 외부 전자 장치에 의해 제공되는 멀티미디어 콘텐트를 적어도 일시적으로 중지하고, 웨어러블 장치(101)의 디스플레이를 통하여 상기 멀티미디어 콘텐트를 표시하기 위한 동작의 수행을 개시하기 위한 버튼일 수 있다. 예를 들어, 상기 제3 객체(710)는, 'App에서 이어보기'와 같은 텍스트를 포함할 수 있다. 예를 들어, 제4 객체(720)는, 제1 객체(110)에 대응하는 외부 전자 장치 및 웨어러블 장치(101)의 디스플레이를 통하여 멀티미디어 콘텐트를 동시에 제공하기 위한 버튼일 수 있다. 예를 들어, 상기 제4 객체(720)는, 'TV/App 동시 재생'과 같은 텍스트를 포함할 수 있다. 도 7의 예시(700) 내에서, 제3 객체(710) 및 제4 객체(720)로 도시되었으나 이에 제한되지 않는다. 예를 들어, 웨어러블 장치(101)는, 상기 제3 객체(710) 및/또는 제4 객체(720) 내에 시각적 정보를 포함하는 이미지를 표시할 수 있다. 예를 들어, 웨어러블 장치(101)는, 화면 내에 표시된 객체들의 지정된 기능을 수행할 수 있다.
상술한 바와 같이, 일 실시 예에 따른, 웨어러블 장치(101)는, 외부 전자 장치에 대응하는 제1 객체(110), 및/또는 제2 객체(115)를 표시할 수 있다. 웨어러블 장치(101)는, 상기 제1 객체(110), 및/또는 제2 객체(115)에 대한 입력을 식별할 수 있다. 웨어러블 장치(101)는, 상기 제1 객체(110), 및/또는 상기 제2 객체(115)에 대한 입력에 기반하여, 기능(또는 동작)을 수행하기 위한 객체(또는 객체들(710, 720))를 표시할 수 있다. 웨어러블 장치(101)는, 상기 객체에 대한 입력에 기반하여, 상기 객체가 나타내는 기능에 대응하는 동작을 수행할 수 있다. 웨어러블 장치(101)는, 상기 객체에 대응하는 기능(또는 동작)을 수행함으로써, 웨어러블 장치(101)를 통하여 멀티미디어 콘텐트를 제공하거나, 웨어러블 장치(101) 및 외부 전자 장치를 통하여 멀티미디어 콘텐트를 제공할 수 있다. 웨어러블 장치(101)는, 상기 멀티미디어 콘텐트를 제공함으로써, 웨어러블 장치(101)의 사용자 경험을 강화할 수 있다.
도 8은, 일 실시 예에 따른, 웨어러블 장치의 사용 상태의 일 예를 도시한다. 도 8의 웨어러블 장치(101)는, 도 1, 도 2, 도 5, 도 6, 및/또는 도 7의 웨어러블 장치(101)를 포함할 수 있다. 도 8의 웨어러블 장치(101)는, 도 3a 내지 도 3b의 웨어러블 장치(300), 및/또는 도 4a 내지 도 4b의 웨어러블 장치(400)를 포함할 수 있다. 도 8의 동작들은, 도 2의 프로세서(210)에 의해 수행될 수 있다.
도 8을 참고하면, 일 실시 예에 따른, 웨어러블 장치(101)는, 웨어러블 장치(101)의 위치를 식별할 수 있다. 예를 들어, 웨어러블 장치(101)는, GPS 센서에 기반하여, 상기 웨어러블 장치(101)의 위치를 식별할 수 있다. 예를 들어, 웨어러블 장치(101)는, 장면 인식에 기반하여 상기 웨어러블 장치(101)의 위치를 식별할 수 있다. 예를 들어, 웨어러블 장치(101)는, 지정된 이벤트를 식별한 것에 기반하여, 상기 장면 인식을 수행할 수 있다. 예를 들어, 상기 지정된 이벤트는, 멀티미디어 콘텐트(820)를 제공하는 동작의 개시를 포함할 수 있다. 예를 들어, 웨어러블 장치(101)는, 멀티미디어 콘텐트(820)를 제공하는 때에 식별된 장면(810)을 메모리(예, 도 2의 메모리(220)) 내에 저장할 수 있다. 예를 들어, 웨어러블 장치(101)는, 멀티미디어 콘텐트(820)를 제공하는 때에 식별된 장면(810)을 지정된 횟수 이상 식별한 것에 기반하여, 상기 장면(810)이 인식된 위치에서 멀티미디어 콘텐트(820)를 제공할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 멀티미디어 콘텐트(820)를 제공하는 때에 저장된 장면(810) 및 상기 카메라를 통하여 획득된 이미지가 동일한지 여부를 식별할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 장면(810) 및 상기 이미지가 동일한 것에 기반하여 멀티미디어 콘텐트(820)를 제공할 수 있다.
일 실시 예에 따른, 웨어러블 장치(101)는, SLAM(simultaneous localization and mapping)에 기반하여, 웨어러블 장치(101)의 위치를 식별할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 SLAM에 기반하여, 멀티미디어 콘텐트(820)를 제공하는 때에, 웨어러블 장치(101)의 위치를 식별할 수 있다. 웨어러블 장치(101)는, SLAM 및/또는 장면 인식에 기반하여, 상기 멀티미디어 콘텐트(820)를 반복적으로 멀티미디어 콘텐트(820)를 제공하는 위치를 식별할 수 있다. 웨어러블 장치(101)는, 반복적으로 멀티미디어 콘텐트(820)를 제공하는 위치를 메모리 내에 저장할 수 있다. 비록 도 8 내에 도시되지 않았으나, 웨어러블 장치(101)는, 상기 메모리 내에 저장된 위치에 대응하는 웨어러블 장치(101)의 위치를 식별한 것에 기반하여, 멀티미디어 콘텐트(820)의 제공을 가이드하기 위한 객체를 표시할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 멀티미디어 콘텐트(820)의 제공을 가이드하기 위한 객체에 대한 입력에 기반하여, 멀티미디어 콘텐트(820)를 제공할 수 있다.
일 실시 예에 따른, 웨어러블 장치(101)는, 카메라를 통하여 획득된 이미지에 기반하여, 상기 웨어러블 장치(101)의 제1 위치를 식별할 수 있다. 웨어러블 장치(101)는, 메모리 내에 저장된 제2 위치에 대응하는 제1 위치를 식별한 것에 기반하여, 멀티미디어 콘텐트를 표시할 수 있다. 예를 들어, 상기 제2 위치는, 멀티미디어 콘텐트가 반복적으로 제공된 위치일 수 있다.
상술한 바와 같이, 일 실시 예에 따른, 웨어러블 장치(101)는, 웨어러블 장치(101)의 위치를 식별할 수 있다. 웨어러블 장치(101)는, 반복적으로 식별된 장면(810), 및/또는 SLAM에 기반하여, 웨어러블 장치(101)의 위치를 식별할 수 있다. 웨어러블 장치(101)는, 멀티미디어 콘텐트(820)를 제공하는 때의 웨어러블 장치(101)의 위치를 식별할 수 있다. 웨어러블 장치(101)는, 상기 멀티미디어 콘텐트(820)를 제공하는 때의 웨어러블 장치(101)의 위치를 메모리 내에 저장할 수 있다. 웨어러블 장치(101)는, 상기 메모리 내에 저장된 위치에 대응하는 웨어러블 장치(101)의 위치를 식별한 것에 기반하여, 멀티미디어 콘텐트(820)를 제공할 수 있다. 웨어러블 장치(101)는, 상기 메모리 내에 저장된 위치에 대응하는 웨어러블 장치(101)의 위치를 식별한 것에 기반하여, 멀티미디어 콘텐트(820)의 제공을 가이드하기 위한 객체를 표시할 수 있다. 웨어러블 장치(101)는, 메모리 내에 저장된 위치에 대응하는 웨어러블 장치(101)의 위치에 기반하여, 멀티미디어 콘텐트(820)를 제공함으로써, 사용자가 용이하게 멀티미디어 콘텐트(820)를 제공받을 수 있도록 도움을 줄 수 있다. 웨어러블 장치(101)는, 지정된 위치에서 식별된 웨어러블 장치(101)의 위치를 식별한 것에 기반하여, 멀티미디어 콘텐트(820)를 제공함으로써, 웨어러블 장치(101)의 사용자 경험을 강화할 수 있다.
도 9는, 일 실시 예에 따른, 웨어러블 장치의 디스플레이를 통해 표시되는 화면의 일 예를 도시한다. 도 9의 웨어러블 장치(101)는, 도 1, 도 2, 도 5, 도 6, 도 7, 및/또는 도 8의 웨어러블 장치(101)를 포함할 수 있다. 도 9의 웨어러블 장치(101)는, 도 3a 내지 도 3b의 웨어러블 장치(300), 및/또는 도 4a 내지 도 4b의 웨어러블 장치(400)를 포함할 수 있다. 도 9의 동작들은, 도 2의 프로세서(210)에 의해 수행될 수 있다.
도 9를 참고하면, 제1 예시(900)에서, 일 실시 예에 따른, 웨어러블 장치(101)는, 멀티미디어 콘텐트(910)를 제공할 수 있다. 예를 들어, 제1 예시(900)는, 웨어러블 장치(101)의 사용자가 웨어러블 장치(101)를 착용하고, 이동을 하지 않은 상태 내에서 멀티미디어 콘텐트(910)를 제공받는 일 예일 수 있다. 웨어러블 장치(101)는, 상기 멀티미디어 콘텐트(910)를 디스플레이(예, 도 2의 디스플레이(230))를 통하여 표시할 수 있다. 일 실시 예에 따른, 웨어러블 장치(101)는, 상기 멀티미디어 콘텐트(910)를 제공하는 동안, 웨어러블 장치(101)의 위치가 변경됨을 식별할 수 있다. 예를 들어, 웨어러블 장치(101)는, 카메라(예, 도 2의 카메라(250))를 통하여 획득된 이미지에 기반하여, 상기 웨어러블 장치(101)의 이동을 식별할 수 있다. 예를 들어, 웨어러블 장치(101)는, 카메라를 통하여 획득된 이미지가 상이한 것에 기반하여, 상기 웨어러블 장치(101)의 이동을 식별할 수 있다. 예를 들어, 웨어러블 장치(101)는, GPS 센서에 기반하여, 상기 웨어러블 장치(101)의 이동을 식별할 수 있다.
일 실시 예에 따른, 웨어러블 장치(101)는, 웨어러블 장치(101)의 이동을 식별한 것에 기반하여, 상기 멀티미디어 콘텐트(910)의 사이즈를 축소할 수 있다. 예를 들어, 웨어러블 장치(101)는, 제2 예시(905)와 같은 화면을 표시할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 웨어러블 장치(101)의 이동에 기반하여, 멀티미디어 콘텐트(910)의 사이즈를 축소하여 상기 멀티미디어 콘텐트(910)에 대응하는 객체(930)를 표시할 수 있다. 웨어러블 장치(101)는, 상기 멀티미디어 콘텐트(910)를 축소한 객체(930)를 표시하는 동안, 카메라를 통하여 획득된 이미지(920)를 표시할 수 있다. 웨어러블 장치(101)는, 상기 이미지(920) 상에 중첩한 객체(930)를 표시할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 객체(930)를 통하여 멀티미디어 콘텐트(910)를 제공할 수 있다.
일 실시 예에 따른, 웨어러블 장치(101)는, 상기 객체(930)의 사이즈를 조절할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 객체(930)에 대한 입력에 기반하여, 상기 객체(930)의 사이즈를 조절할 수 있다. 예를 들어, 상기 객체(930)에 대한 입력은, 상기 객체(930)를 드래그하는 동작을 포함할 수 있다. 예를 들어, 상기 객체(930)에 대한 입력은, 상기 객체(930)를 핀치 투 줌(pinch-to-zoom)하는 동작을 포함할 수 있다. 상기 객체(930)에 대한 입력은, 컨트롤러에 의해 수신될 수 있다. 상기 객체(930)에 대한 입력은, 웨어러블 장치(101)의 카메라를 통하여 사용자의 제스쳐에 의해 수신될 수 있다. 웨어러블 장치(101)는, 상기 입력에 기반하여, 상기 객체(930)의 사이즈를 확대하거나 축소할 수 있다.
상술한 바와 같이, 일 실시 예에 따른, 웨어러블 장치(101)는, 멀티미디어 콘텐트(910)를 표시할 수 있다. 웨어러블 장치(101)는, 상기 멀티미디어 콘텐트(910)를 표시하는 동안, 웨어러블 장치(101)의 이동을 식별할 수 있다. 웨어러블 장치(101)는, 상기 이동을 식별한 것에 기반하여, 카메라를 통하여 획득된 이미지(920)를 표시할 수 있다. 웨어러블 장치(101)는, 상기 이미지(920)를 표시하는 동안, 상기 멀티미디어 콘텐트(910)에 대응하는 객체(930)를, 이미지(920) 상에 중첩하여 표시할 수 있다. 웨어러블 장치(101)는, 상기 객체(930)를 통하여 상기 멀티미디어 콘텐트(910)를 제공할 수 있다. 웨어러블 장치(101)는, 사용자의 이동을 식별한 것에 기반하여 상기 멀티미디어 콘텐트(910)를 객체(930)로 전환하고, 카메라를 통하여 획득한 이미지(920)를 표시함으로써, 웨어러블 장치(101)의 사용자가 안전한 상태에서 멀티미디어 콘텐트(910)를 제공받을 수 있도록 도움을 줄 수 있다.
도 10은, 일 실시 예에 따른, 웨어러블 장치의 디스플레이를 통해 표시되는 화면의 일 예를 도시한다. 도 10의 웨어러블 장치(101)는, 도 1, 도 2, 도 5, 도 6, 도 7, 도 8, 및/또는 도 9의 웨어러블 장치(101)를 포함할 수 있다. 도 10의 웨어러블 장치(101)는, 도 3a 내지 도 3b의 웨어러블 장치(300), 및/또는 도 4a 내지 도 4b의 웨어러블 장치(400)를 포함할 수 있다. 도 10의 동작들은, 도 2의 프로세서(210)에 의해 수행될 수 있다.
도 10을 참고하면, 일 실시 예에 따른, 웨어러블 장치(101)는, 제1 장소(1000) 내에서, 디스플레이(예, 도 2의 디스플레이(230))를 통하여 화면(1010)을 제공할 수 있다. 예를 들어, 상기 화면(1010)은, VR 상태 내에서, 웨어러블 장치(101)의 카메라(예, 도 2의 카메라(220))를 통하여 획득된 이미지에 기반하여 제공될 수 있다. 예를 들어, 상기 화면(1010)은, AR 상태 내에서, 디스플레이를 투과하여 제공되는 화면일 수 있다. 웨어러블 장치(101)는, 상기 화면(1010)을 제공하는 동안, 제1 외부 전자 장치에 의해 제공되는 멀티미디어 콘텐트(1020)를 식별할 수 있다. 웨어러블 장치(101)는, 상기 멀티미디어 콘텐트(1020)를 식별한 것에 기반하여, 상기 멀티미디어 콘텐트(1020)를 포함하는 영역에 대한 입력을 수신할 수 있다. 예를 들어, 상기 입력은, 웨어러블 장치(101)의 컨트롤러, 및/또는 웨어러블 장치(101)의 사용자의 시선에 기반하여 식별될 수 있다. 예를 들어, 웨어러블 장치(101)는, 시선 추적 카메라를 이용하여 상기 사용자의 시선을 추적하여, 상기 멀티미디어 콘텐트(1020)를 포함하는 영역에 대한 입력을 식별할 수 있다. 웨어러블 장치(101)는, 상기 입력에 기반하여, 제2 외부 전자 장치(예, 서버)를 이용하여 상기 멀티미디어 콘텐트(1020)를 검색할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 멀티미디어 콘텐트(1020)를 검색한 것에 기반하여, 상기 멀티미디어 콘텐트(1020)를 화면(1010)의 적어도 일부 영역 내에 표시할 수 있다.
일 실시 예에 따른, 웨어러블 장치(101)는, 웨어러블 장치(101)의 위치의 변경 동안, 화면(1010) 내에 상기 멀티미디어 콘텐트(1020)를 제공하기 위한 객체(1030)를 표시할 수 있다. 예를 들어, 웨어러블 장치(101)는, 제1 장소(1000)와 상이한 제2 장소(1005) 내에서 상기 객체(1030)를 이용하여 멀티미디어 콘텐트(1020)를 표시할 수 있다. 웨어러블 장치(101)는, 상기 객체(1030)를 표시하는 동안, 상기 객체(1030)의 사이즈를 조절하는 입력을 수신할 수 있다. 예를 들어, 상기 객체(1030)의 사이즈를 조절하는 입력은, 상기 객체(1030)를 드래그하는 동작을 포함할 수 있다. 예를 들어, 상기 객체(1030)의 사이즈를 조절하는 입력은, 상기 객체(1030)를 핀치 투 줌 하는 동작을 포함할 수 있다. 웨어러블 장치(101)는, 상기 입력에 기반하여, 상기 객체(1030)의 사이즈를 조절할 수 있다.
상술한 바와 같이, 일 실시 예에 따른, 웨어러블 장치(101)는, 제1 외부 전자 장치에서 제공되는 멀티미디어 콘텐트(1020)를 식별할 수 있다. 웨어러블 장치(101)는, 상기 멀티미디어 콘텐트(1020)를 식별한 것에 기반하여, 상기 멀티미디어 콘텐트(1020)를 포함하는 영역에 대한 입력을 수신할 수 있다. 웨어러블 장치(101)는, 상기 입력에 응답하여, 상기 제1 외부 전자 장치와 상이한 제2 외부 전자 장치를 이용하여 상기 멀티미디어 콘텐트(1020)를 검색할 수 있다. 웨어러블 장치(101)는, 상기 멀티미디어 콘텐트(1020)를 검색한 것에 기반하여, 상기 멀티미디어 콘텐트(1020)를 화면(1010)의 적어도 일부 영역 내에 표시할 수 있다. 웨어러블 장치(101)는, 화면(1010) 내에서 식별된 멀티미디어 콘텐트(1020)를 사용자의 입력에 기반하여 제공함으로써, 웨어러블 장치(101)의 사용자 경험을 강화할 수 있다.
도 11은, 일 실시 예에 따른, 웨어러블 장치의 동작에 관한 흐름도의 일 예를 도시한다. 도 11의 웨어러블 장치는, 도 1, 도 2, 도 5, 도 6, 도 7, 도 8, 도 9, 및/또는 도 10의 웨어러블 장치(101)를 포함할 수 있다. 도 11의 웨어러블 장치는, 도 3a 내지 도 3b의 웨어러블 장치(300), 및/또는 도 4a 내지 도 4b의 웨어러블 장치(400)를 포함할 수 있다. 도 11의 동작들은, 도 2의 프로세서(210)에 의해 수행될 수 있다.
도 11을 참고하면, 동작 1101에서, 일 실시 예에 따른, 웨어러블 장치는, 카메라(예, 도 2의 카메라(250))를 이용하여 획득된 이미지 내의 제1 객체(예, 도 1의 제1 객체(110))에 기반하여, 외부 전자 장치를 식별할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 제1 객체(110)에 대응하는 외부 전자 장치를 식별할 수 있다.
동작 1103에서, 일 실시 예에 따른, 웨어러블 장치는, 외부 전자 장치의 식별에 기반하여, 상기 외부 전자 장치를 통해 제공되고 있는 멀티미디어 콘텐트를 표시하기 위한 정보를 요청할 수 있다. 예를 들어, 웨어러블 장치는, 통신 회로(예, 도 2의 통신 회로(240))를 통하여, 제1 객체에 대응하는 외부 전자 장치에게 상기 외부 전자 장치를 통해 제공되고 있는 멀티미디어 콘텐트를 표시하기 위한 정보를 요청할 수 있다.
동작 1105에서, 일 실시 예에 따른, 웨어러블 장치는, 멀티미디어 콘텐트를 표시하기 위한 정보의 요청에 적어도 일부 기반하여 외부 전자 장치로부터 송신된 정보를 수신할 수 있다. 예를 들어, 웨어러블 장치는, 통신 회로를 통하여 상기 정보를 수신할 수 있다. 웨어러블 장치는, 상기 정보를 수신하는 것에 응답하여, 외부 전자 장치가 선택가능함을 알리기 위한 제2 객체를, 제1 객체와 연계로 표시할 수 있다. 예를 들어, 웨어러블 장치는, 상기 제2 객체를, 상기 제1 객체의 가장자리를 따라 표시할 수 있다. 예를 들어, 웨어러블 장치는, 상기 제2 객체를, 상기 제1 객체 상에 중첩하고, 점멸하여 표시할 수 있다.
동작 1107에서, 일 실시 예에 따른, 웨어러블 장치는, 제2 객체와 연계된 제1 객체에 대하여 수신되는 입력을 식별할 수 있다. 예를 들어, 상기 제1 객체에 대하여 수신되는 상기 입력은, 웨어러블 장치와 통신 링크를 수립한 컨트롤러에 기반하여 수신될 수 있다. 예를 들어, 상기 제1 객체에 대하여 수신되는 상기 입력은, 웨어러블 장치의 사용자의 시선을 식별한 것에 기반하여 수신될 수 있다. 웨어러블 장치는, 상기 입력에 응답하여, 외부 전자 장치로부터 송신된 멀티미디어 콘텐트를 표시하기 위한 정보에 기반하여, 상기 멀티미디어 콘텐트를 디스플레이(예, 도 2의 디스플레이(230))를 통하여 표시할 수 있다.
상술한 바와 같이, 일 실시 예에 따른, 웨어러블 장치는, 카메라를 이용하여 획득된 이미지 내의 제1 객체에 기반하여, 외부 전자 장치를 식별할 수 있다. 웨어러블 장치는, 상기 외부 전자 장치의 식별에 기반하여, 통신 회로를 통해 외부 전자 장치에게 상기 외부 전자 장치를 통해 제공되고 있는 멀티미디어 콘텐트를 표시하기 위한 정보를 요청할 수 있다. 웨어러블 장치는, 상기 요청의 적어도 일부에 기반하여 외부 전자 장치로부터 송신된 정보를 통신 회로를 통해 수신하는 것에 응답하여, 외부 전자 장치가 선택가능함을 알리기 위한 제2 객체를, 제1 객체와 연계로 표시할 수 있다. 웨어러블 장치는, 상기 제2 객체와 연계된 제1 객체에 대하여 수신되는 입력에 응답하여, 상기 정보에 기반하여 멀티미디어 콘텐트를 디스플레이를 통하여 표시할 수 있다. 웨어러블 장치는, 상기 외부 전자 장치를 통해 제공되는 멀티미디어 콘텐트와 관련된 정보를 수신하여, 상기 멀티미디어 콘텐트를 제공함으로써, 웨어러블 장치의 사용자 경험을 강화할 수 있다.
도 12는, 일 실시 예에 따른, 웨어러블 장치의 동작에 관한 신호 흐름도의 일 예를 도시한다. 도 12의 웨어러블 장치(101)는, 도 1, 도 2, 도 5, 도 6, 도 7, 도 8, 도 9, 및/또는 도 10의 웨어러블 장치(101), 및/또는 도 11의 웨어러블 장치를 포함할 수 있다. 도 12의 웨어러블 장치(101)는, 도 3a 내지 도 3b의 웨어러블 장치(300), 및/또는 도 4a 내지 도 4b의 웨어러블 장치(400)를 포함할 수 있다. 도 12의 동작들은, 도 2의 프로세서(210)에 의해 수행될 수 있다. 도 12의 제1 외부 전자 장치(1201)는, 상기 제1 외부 전자 장치(1201)에 포함된 디스플레이를 통하여 멀티미디어 콘텐트를 제공하기 위한 장치를 포함할 수 있다. 도 12의 제2 외부 전자 장치(1203)는, 서버로 참조될 수 있다.
도 12를 참고하면, 동작 1210에서, 일 실시 예에 따른, 웨어러블 장치(101)는, 카메라(예, 도 2의 카메라(250))를 통하여 획득된 이미지 내의 제1 객체(예, 도 1의 제1 객체(110))의 형태 및 상기 제1 객체를 통해 제공되고 있는 멀티미디어 콘텐트를 식별할 수 있다. 예를 들어, 상기 제1 객체는, 제1 외부 전자 장치(1201)로 참조될 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 제1 객체의 형태를 식별한 것에 기반하여, 상기 제1 객체의 형태를 암호화할 수 있다. 예를 들어, 웨어러블 장치(101)는, 상기 제1 외부 전자 장치에 로그인된 제1 사용자 계정 정보 및 웨어러블 장치(101)에 로그인된 제2 사용자 계정 정보의 일치를 식별하기 위한, 상기 제1 객체의 형태에 대한 암호화를 수행할 수 있다.
동작 1220에서, 일 실시 예에 따른, 제1 외부 전자 장치(1201)는, 제1 사용자 계정 정보를 제2 외부 전자 장치(1203)로 송신할 수 있다. 예를 들어, 제1 외부 전자 장치(1201)는, 상기 제1 사용자 계정 정보를 암호화할 수 있다. 제1 외부 전자 장치(1201)는, 상기 암호화된 제1 사용자 계정 정보를 제2 외부 전자 장치(1203)로 송신할 수 있다. 예를 들어, 제1 외부 전자 장치(1201)는, 상기 제1 사용자 계정 정보와 함께, 상기 제1 외부 전자 장치의 형태와 관련된 정보를 제2 외부 전자 장치(1203)로 송신할 수 있다.
동작 1230에서, 일 실시 예에 따른, 웨어러블 장치(101)는, 제1 사용자 계정 및 제2 사용자 계정의 일치를 식별하기 위한 신호를, 제2 외부 전자 장치(1203)로 송신할 수 있다. 예를 들어, 상기 신호는, 제1 객체의 형태와 관련된 정보 및 웨어러블 장치(101)에 로그인된 사용자 정보를 포함할 수 있다. 예를 들어, 상기 신호는, 제2 외부 전자 장치(1203)로 송신된 제1 외부 전자 장치(1201)의 사용자 계정 정보를 요청하기 위한 신호를 포함할 수 있다.
동작 1240에서, 일 실시 예에 따른, 웨어러블 장치(101)는, 사용자 계정의 일치를 식별하기 위한 신호를 수신할 수 있다. 예를 들어, 상기 계정의 일치를 식별하기 위한 신호는, 상기 제2 외부 전자 장치(1203)에 의해 제1 외부 전자 장치(1201)에 로그인된 제1 사용자 정보 및 웨어러블 장치(101)에 로그인된 제2 사용자 정보의 일치에 기반하여 송신될 수 있다. 예를 들어, 제2 외부 전자 장치(1203)는, 웨어러블 장치(101) 및 제1 외부 전자 장치(1201)로부터 송신된 정보(또는 신호)를 복호화할 수 있다. 제2 외부 전자 장치(1203)는, 상기 정보를 복호화한 것에 기반하여, 제1 사용자 정보 및 제2 사용자 정보의 일치를 식별할 수 있다. 예를 들어, 제2 외부 전자 장치(1203)는, 웨어러블 장치(101)로부터 송신된 제1 객체의 형태와 관련된 정보 및 제1 외부 전자 장치(1201)로부터 송신된 제1 외부 전자 장치(1201)의 형태와 관련된 정보의 일치에 기반하여, 사용자 정보의 일치를 식별하기 위한 동작을 개시할 수 있다. 제2 외부 전자 장치(1203)는, 상기 개시에 기반하여, 웨어러블 장치(101)의 제2 사용자 정보 및 제1 외부 전자 장치의 제1 사용자 정보의 일치를 식별할 수 있다. 제2 외부 전자 장치(1203)는, 상기 일치에 기반하여, 웨어러블 장치(101)로 사용자 계정의 일치를 확인하기 위한 신호를 송신할 수 있다.
동작 1250에서, 일 실시 예에 따른, 웨어러블 장치(101)는, 웨어러블 장치(101)의 제2 사용자 정보 및 제1 외부 전자 장치(1201)의 제1 사용자 정보의 일치에 기반하여, 상기 제1 외부 전자 장치가 선택가능함을 알리기 위한 제2 객체(예, 도 1의 제2 객체(115))를 제1 객체와 연계로 표시할 수 있다. 웨어러블 장치(101)는, 상기 제1 객체의 가장자리를 따라 제2 객체를 표시할 수 있다. 웨어러블 장치(101)는, 상기 제1 객체와 중첩하여 상기 제2 객체를 표시할 수 있다.
동작 1260에서, 일 실시 예에 따른, 웨어러블 장치(101)는, 제1 객체에 대한 입력을 수신할 수 있다. 웨어러블 장치(101)는, 상기 제1 객체에 대하여 수신되는 입력에 응답하여, 제1 외부 전자 장치(1201)를 통해 제공되는 멀티미디어 콘텐트를 표시할 수 있다.
상술한 바와 같이, 일 실시 예에 따른, 웨어러블 장치(101)는, 제1 외부 전자 장치(1201)에 로그인된 제1 사용자 정보 및 웨어러블 장치(101)에 로그인된 제2 사용자 정보의 일치를 식별하기 위한 동작을 수행할 수 있다. 웨어러블 장치(101)는, 제2 외부 전자 장치(1203)로, 제1 사용자 정보 및 제2 사용자 정보의 일치를 식별하기 위한 요청을 수행할 수 있다. 웨어러블 장치(101)는, 제1 사용자 정보 및 제2 사용자 정보의 일치에 기반하여, 제1 외부 전자 장치(1201)를 통하여 제공되는 멀티미디어 콘텐트를 표시할 수 있다. 웨어러블 장치(101)는, 상기 제1 외부 전자 장치(1201)를 통해 제공되는 멀티미디어 콘텐트를 표시함으로써, 웨어러블 장치(101)의 사용자 경험을 강화할 수 있다.
메타버스(Metaverse)는 '가상', '초월'을 뜻하는 영어 단어 '메타'(Meta)와 우주를 뜻하는 '유니버스'(Universe)의 합성어로, 현실세계와 같은 사회·경제·문화 활동이 이뤄지는 3차원의 가상세계를 가리킨다. 메타버스는 가상현실(VR, 컴퓨터로 만들어 놓은 가상의 세계에서 사람이 실제와 같은 체험을 할 수 있도록 하는 최첨단 기술)보다 한 단계 더 진화한 개념으로, 아바타를 활용해 단지 게임이나 가상현실을 즐기는 데 그치지 않고 실제 현실과 같은 사회·문화적 활동을 할 수 있다는 특징이 있다. 메타버스 서비스는, 증강 현실(augmented reality, AR), 가상 현실(virtual reality environment, VR), 혼합 현실(mixed environment, MR) 및/또는 확장 현실(extended reality, XR)에 기반하여, 상기 가상 세계에 대한 몰입을 강화하기 위한 미디어 콘텐트를 제공할 수 있다.
예를 들어, 메타버스 서비스에 의해 제공되는 미디어 콘텐트는, 아바타에 기반하는 게임, 콘서트, 파티 및/또는 회의를 포함하는 소셜 인터랙션(social interaction) 콘텐트를 포함할 수 있다. 예를 들어, 상기 미디어 콘텐트는, 광고, 사용자 제작 콘텐트(user created content) 및/또는 제작물의 판매 및/또는 쇼핑과 같은 경제 활동을 위한 정보를 포함할 수 있다. 상기 사용자 제작 콘텐트의 소유권은 블록체인 기반의 NFT(non-fungible token)에 의하여 증명될 수도 있다. 메타버스 서비스는, 실물 화폐 및/또는 암호 화폐에 기반하는 경제 활동을 지원할 수 있다. 메타버스 서비스에 의하여, 디지털 트윈(digital twin) 또는 라이프 로깅(life logging)과 같이, 현실 세계와 연계된 가상 콘텐트가 제공될 수 있다.
도 13은, 서버(1310)를 통해 메타버스 서비스를 제공받는 네트워크 환경(1301)에 대한 예시도이다.
도 13을 보면, 네트워크 환경(1301)은, 서버(1310), 사용자 단말(1320)(예, 제1 단말(1320-1) 및 제2 단말(1320-2)), 및 서버(1310) 와 사용자 단말(1320)을 연결하는 네트워크를 포함할 수 있다. 네트워크 환경(1301) 내에서, 서버(1310)는 사용자 단말(1320)로 메타버스 서비스를 제공할 수 있다. 네트워크는, AP(access point), 및/또는 기지국을 포함하는 적어도 하나의 중간 노드(1330)에 의해 형성될 수 있다. 사용자 단말(1320)은, 네트워크를 통해 서버(1320)로 접속하여, 사용자 단말(1320)의 사용자에게 메타버스 서비스와 관련된 UI(user interface)를 출력할 수 있다. 상기 UI에 기반하여, 사용자 단말(1320)은 사용자로부터 메타버스 서비스로 입력될 정보를 획득하거나, 또는 사용자에게 메타버스 서비스와 관련된 정보(예, 멀티미디어 콘텐트)를 출력할 수 있다.
이때, 서버(1310)는 가상 공간을 제공하여 사용자 단말(1320)이 가상 공간에서 활동을 할 수 있도록 한다. 또한, 사용자 단말(1320)은 서버(1310)가 제공하는 가상 공간에 접속하기 위한 S/W 에이전트를 설치하여 서버(1310)가 사용자에게 제공하는 정보를 표현하거나, 사용자가 가상 공간에서 표현하고자 하는 정보를 서버로 전송한다. 상기 S/W 에이전트는 서버(1310)를 통해서 직접 제공받거나, 공용 서버로부터 다운로드받거나, 단말 구매시에 임베딩되어 제공될 수 있다.
일 실시예에서, 메타버스 서비스는, 서버(1310)를 이용하여 사용자 단말(1320) 및/또는 사용자에게 서비스가 제공될 수 있다. 실시예가 이에 제한되는 것은 아니며, 메타버스 서비스는 사용자들 사이의 개별적인 접촉을 통해 제공될 수 있다. 예를 들어, 네트워크 환경(1301) 내에서, 메타버스 서비스는 서버(1310)와 독립적으로, 제1 단말(1320-1) 및 제2 단말(1320-2) 사이의 직접적인 연결에 의해 제공될 수 있다. 도 13을 참고하면, 네트워크 환경(1301) 내에서, 제1 단말(1320-1) 및 제2 단말(1320-2)은 적어도 하나의 중간 노드(1330)에 의해 형성된 네트워크를 통해 서로 연결될 수 있다. 제1 단말(1320-1) 및 제2 단말(1320-2)이 직접적으로 연결된 일 실시예에서, 제1 단말(1320-1) 및 제2 단말(1320-2) 중 어느 한 사용자 단말이, 서버(1310)의 역할을 수행할 수 있다. 예를 들어, 디바이스와 디바이스의 연결(예, P2P(peer-to-peer) 연결)만으로 메타버스 환경이 구성될 수 있다.
일 실시예에서, 사용자 단말(1320)(혹은 제 1 단말(1320-1), 제 2 단말(1320-2)을 포함하는 사용자 단말(1320))은 다양한 폼팩터로 만들어질 수 있으며, 사용자에게 영상 또는/및 소리를 제공하는 출력 장치와 메타버스 서비스에 정보를 입력하기 위한 입력 장치를 포함하는 것을 특징으로 한다. 사용자 단말(1320)의 다양한 폼팩터를 예시하면, 스마트폰(예, 제2 단말(1320-2)), AR 기기(예, 제1 단말(1320-1)), VR 기기, MR 기기, VST(Video See Through) 기기, OST(Optical See Through) 장치, 스마트 렌즈, 스마트 미러, 입출력 가능한 TV 또는 프로젝터를 포함할 수 있다.
네트워크(예, 적어도 하나의 중간 노드(1330)에 의해 형성된 네트워크)는 3G, 4G, 5G를 포함하는 다양한 광대역 네트워크와 Wifi, BT를 포함하는 근거리 네트워크(예, 제1 단말(1320-1), 및 제2 단말(1320-2)을 직접적으로 연결하는 유선 네트워크 또는 무선 네트워크)를 다 포함한다.
외부 전자 장치를 통해 제공되는 멀티미디어 콘텐트를 표시하기 위한 방안이 요구될 수 있다. 상술한 바와 같이, 일 실시 예에 따른, 웨어러블 장치(101)(wearable device)는, 통신 회로(240), 디스플레이(230), 카메라(250), 인스트럭션들을 저장하는 메모리(220), 및 프로세서(210)를 포함할 수 있다. 상기 인스트럭션들은, 상기 프로세서에 의해 실행될 시에, 상기 웨어러블 장치가, 상기 카메라(250)를 이용하여 획득된 이미지 내의 제1 객체(110)에 기반하여, 외부 전자 장치를 식별하도록, 구성될 수 있다. 상기 인스트럭션들은, 상기 프로세서에 의해 실행될 시에, 상기 웨어러블 장치가, 상기 식별에 기반하여, 상기 통신 회로(240)를 통해 상기 외부 전자 장치에게 상기 외부 전자 장치를 통해 제공되고 있는 멀티미디어 콘텐트를 표시하기 위한 정보를 요청하도록, 구성될 수 있다. 상기 인스트럭션들은, 상기 프로세서에 의해 실행될 시에, 상기 웨어러블 장치가, 상기 외부 전자 장치로부터 송신된 상기 정보를 상기 통신 회로(240)를 통해 수신하는 것에 응답하여, 상기 외부 전자 장치가 선택가능함을 알리기 위한 제2 객체(115)를, 상기 제1 객체(110)와 연계로, 표시하도록, 구성될 수 있다. 상기 인스트럭션들은, 상기 프로세서에 의해 실행될 시에, 상기 웨어러블 장치가, 상기 제1 객체(110)에 대한 사용자 입력이 감지되는지 여부에 기반하여, 상기 정보에 기반하여 상기 외부 전자 장치로부터 획득된 상기 멀티미디어 콘텐트를 상기 디스플레이(230)를 통하여 표시하도록, 구성될 수 있다.
일 실시 예에 따른, 상기 제2 객체(115)와 연계된 상기 제1 객체(110)는, 상기 제1 객체(110)와 상이한 영역 내에 표시되고, 상기 이미지 내의 적어도 하나의 제3 객체(120)에 대하여 시각적으로 강조될 수 있다.
일 실시 예에 따른, 상기 제2 객체(115)는, 상기 제1 객체(110)의 가장자리를 따라 표시되거나, 상기 제1 객체(110) 상에 중첩되고 점멸하여 표시될 수 있다.
일 실시 예에 따른, 상기 프로세서(210)는, 상기 외부 전자 장치와 연계로 상기 멀티미디어 콘텐트를 제공하기 위한 입력을 수신하는 제4 객체(720)를 표시할 수 있다.
일 실시 예에 따른, 상기 인스트럭션들은, 상기 프로세서에 의해 실행될 시에, 상기 웨어러블 장치가, 상기 카메라(250)를 통하여 획득된 이미지에 기반하여, 상기 웨어러블 장치(101)의 제1 위치를 식별하도록, 구성될 수 있다. 상기 인스트럭션들은, 상기 프로세서에 의해 실행될 시에, 상기 웨어러블 장치가, 상기 웨어러블 장치(101) 내에 저장된 제2 위치에 대응하는 제1 위치를 식별한 것에 기반하여, 상기 멀티미디어 콘텐트를 상기 디스플레이(230)를 통하여 표시하도록, 구성될 수 있다.
일 실시 예에 따른, 상기 제2 위치는, 상기 멀티미디어 콘텐트를 반복적으로 제공하도록 설정된 위치일 수 있다.
일 실시 예에 따른, 상기 인스트럭션들은, 상기 프로세서에 의해 실행될 시에, 상기 웨어러블 장치가, 상기 웨어러블 장치(101)의 제1 사용자 계정 및 상기 외부 전자 장치의 제2 사용자 계정의 일치를 식별한 것에 기반하여, 상기 제2 객체(115)를, 상기 제1 객체(110)와 연계로 표시하도록, 구성될 수 있다.
일 실시 예에 따른, 상기 인스트럭션들은, 상기 프로세서에 의해 실행될 시에, 상기 웨어러블 장치가, 상기 멀티미디어 콘텐트를 표시하는 동안, 사용자의 이동을 식별한 것에 기반하여, 상기 멀티미디어 콘텐트를 상기 디스플레이(230)의 일부에 표시하도록, 구성될 수 있다.
상술한 바와 같이, 일 실시 예에 따른, 웨어러블 장치(101)(wearable device)의 방법은, 카메라(250)를 이용하여 획득된 이미지 내의 제1 객체(110)에 기반하여, 외부 전자 장치를 식별하는 동작을 포함할 수 있다. 상기 방법은, 상기 식별에 기반하여, 통신 회로(240)를 통해 상기 외부 장치에게 상기 외부 전자 장치를 통해 제공되고 있는 멀티미디어 콘텐트를 표시하기 위한 정보를 요청하는 동작을 포함할 수 있다. 상기 방법은, 상기 외부 전자 장치로부터 송신된 상기 정보를 상기 통신 회로(240)를 통해 수신하는 것에 응답하여, 상기 외부 전자 장치가 선택가능함을 알리기 위한 제2 객체(115)를, 상기 제1 객체(110)와 연계로, 표시하는 동작을 포함할 수 있다. 상기 방법은, 상기 제1 객체(110)에 대한 사용자 입력이 감지되는지 여부에 기반하여, 상기 정보에 기반하여 상기 외부 전자 장치로부터 획득된 상기 멀티미디어 콘텐트를 디스플레이(230)를 통하여 표시하는 동작을 포함할 수 있다.
일 실시 예에 따른, 상기 제2 객체(115)와 연계된 상기 제1 객체(110)는, 상기 제1 객체(110)와 상이한 영역 내에 표시되고, 상기 이미지 내의 적어도 하나의 제3 객체(120)에 대하여 시각적으로 강조될 수 있다.
일 실시 예에 따른, 상기 제2 객체(115)는, 상기 제1 객체(110)의 가장자리를 따라 표시되거나, 상기 제1 객체(110) 상에 중첩되고 점멸하여 표시될 수 있다.
일 실시 예에 따른, 상기 방법은, 상기 외부 전자 장치와 연계로 상기 멀티미디어 콘텐트를 제공하기 위한 입력을 수신하는 제4 객체를 표시하는 동작을 포함할 수 있다.
일 실시 예에 따른, 상기 방법은, 상기 카메라(250)를 통하여 획득된 이미지에 기반하여, 상기 웨어러블 장치(101)의 제1 위치를 식별하는 동작을 포함할 수 있다. 상기 방법은, 상기 웨어러블 장치(101) 내에 저장된 제2 위치에 대응하는 제1 위치를 식별한 것에 기반하여, 상기 멀티미디어 콘텐트를 상기 디스플레이(230)를 통하여 표시하는 동작을 포함할 수 있다.
일 실시 예에 따른, 상기 제2 위치는, 상기 멀티미디어 콘텐트를 반복적으로 제공하는 위치일 수 있다.
일 실시 예에 따른, 상기 방법은, 상기 웨어러블 장치(101)의 제1 사용자 계정 및 상기 외부 전자 장치의 제2 사용자 계정의 일치를 식별한 것에 기반하여, 상기 제2 객체(115)를, 상기 제1 객체(110)와 연계로 표시하는 동작을 포함할 수 있다.
일 실시 예에 따른, 상기 방법은, 상기 멀티미디어 콘텐트를 표시하는 동안, 사용자의 이동을 식별한 것에 기반하여, 상기 멀티미디어 콘텐트를 상기 디스플레이(230)의 일부에 표시하고, 상기 카메라(250)를 통하여 획득된 이미지를 표시하는 동작을 포함할 수 있다.
상술한 바와 같이, 일 실시 예에 따른, 하나 이상의 프로그램들을 저장하는 컴퓨터 판독가능 저장 매체에 있어서, 상기 하나 이상의 프로그램들은, 웨어러블 장치(101)(wearable device)의 프로세서(210)에 의해 실행될 때에, 카메라(250)를 이용하여 획득된 이미지 내의 제1 객체(110)에 기반하여, 외부 전자 장치를 식별하도록, 상기 웨어러블 장치(101)의 상기 프로세서(210)를 야기할 수 있다. 상기 하나 이상의 프로그램들은, 웨어러블 장치(101)(wearable device)의 프로세서(210)에 의해 실행될 때에, 상기 식별에 기반하여, 통신 회로(240)를 통해 상기 외부 장치에게 상기 외부 전자 장치를 통해 제공되고 있는 멀티미디어 콘텐트를 표시하기 위한 정보를 요청하도록, 상기 웨어러블 장치(101)의 상기 프로세서(210)를 야기할 수 있다. 상기 하나 이상의 프로그램들은, 웨어러블 장치(101)(wearable device)의 프로세서(210)에 의해 실행될 때에, 상기 외부 전자 장치로부터 송신된 상기 정보를 상기 통신 회로(240)를 통해 수신하는 것에 응답하여, 상기 외부 전자 장치가 선택가능함을 알리기 위한 제2 객체(115)를, 상기 제1 객체(110)와 연계로, 표시하도록, 상기 웨어러블 장치(101)의 상기 프로세서(210)를 야기할 수 있다. 상기 하나 이상의 프로그램들은, 웨어러블 장치(101)(wearable device)의 프로세서(210)에 의해 실행될 때에, 상기 제1 객체(110)에 대한 사용자 입력이 감지되는지 여부에 기반하여, 상기 정보에 기반하여 상기 외부 전자 장치로부터 획득된 상기 멀티미디어 콘텐트를 디스플레이(230)를 통하여 표시하도록, 상기 웨어러블 장치(101)의 상기 프로세서(210)를 야기할 수 있다.
일 실시 예에 따른, 상기 제2 객체(115)와 연계된 상기 제1 객체(110)는, 상기 제1 객체(110)와 상이한 영역 내에 표시되고, 상기 이미지 내의 적어도 하나의 제3 객체(120)에 대하여 시각적으로 강조될 수 있다.
일 실시 예에 따른, 상기 제2 객체(115)는, 상기 제1 객체(110)의 가장자리를 따라 표시되거나, 상기 제1 객체(110) 상에 중첩되고 점멸하여 표시될 수 있다.
일 실시 예에 따른, 상기 하나 이상의 프로그램들은, 상기 웨어러블 장치(101)의 상기 프로세서(210)에 의해 실행될 때에, 상기 외부 전자 장치와 연계로 상기 멀티미디어 콘텐트를 제공하기 위한 입력을 수신하는 제4 객체를 표시하도록, 상기 웨어러블 장치(101)의 상기 프로세서(210)를 야기할 수 있다.
본 문서에 개시된 다양한 실시예들에 따른 전자 장치는 다양한 형태의 장치가 될 수 있다. 전자 장치는, 예를 들면, 휴대용 통신 장치(예: 스마트폰), 컴퓨터 장치, 휴대용 멀티미디어 장치, 휴대용 의료 기기, 카메라, 전자 장치, 또는 가전 장치를 포함할 수 있다. 본 문서의 실시예에 따른 전자 장치는 전술한 기기들에 한정되지 않는다.
본 문서의 다양한 실시예들 및 이에 사용된 용어들은 본 문서에 기재된 기술적 특징들을 특정한 실시예들로 한정하려는 것이 아니며, 해당 실시예의 다양한 변경, 균등물, 또는 대체물을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 또는 관련된 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다. 아이템에 대응하는 명사의 단수 형은 관련된 문맥상 명백하게 다르게 지시하지 않는 한, 상기 아이템 한 개 또는 복수 개를 포함할 수 있다. 본 문서에서, "A 또는 B", "A 및 B 중 적어도 하나", "A 또는 B 중 적어도 하나", "A, B 또는 C", "A, B 및 C 중 적어도 하나", 및 "A, B, 또는 C 중 적어도 하나"와 같은 문구들 각각은 그 문구들 중 해당하는 문구에 함께 나열된 항목들 중 어느 하나, 또는 그들의 모든 가능한 조합을 포함할 수 있다. "제 1", "제 2", 또는 "첫째" 또는 "둘째"와 같은 용어들은 단순히 해당 구성요소를 다른 해당 구성요소와 구분하기 위해 사용될 수 있으며, 해당 구성요소들을 다른 측면(예: 중요성 또는 순서)에서 한정하지 않는다. 어떤(예: 제 1) 구성요소가 다른(예: 제 2) 구성요소에, "기능적으로" 또는 "통신적으로"라는 용어와 함께 또는 이런 용어 없이, "커플드" 또는 "커넥티드"라고 언급된 경우, 그것은 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로(예: 유선으로), 무선으로, 또는 제 3 구성요소를 통하여 연결될 수 있다는 것을 의미한다.
본 문서의 다양한 실시예들에서 사용된 용어 "모듈"은 하드웨어, 소프트웨어 또는 펌웨어로 구현된 유닛을 포함할 수 있으며, 예를 들면, 로직, 논리 블록, 부품, 또는 회로와 같은 용어와 상호 호환적으로 사용될 수 있다. 모듈은, 일체로 구성된 부품 또는 하나 또는 그 이상의 기능을 수행하는, 상기 부품의 최소 단위 또는 그 일부가 될 수 있다. 예를 들면, 일실시예에 따르면, 모듈은 ASIC(application-specific integrated circuit)의 형태로 구현될 수 있다.
본 문서의 다양한 실시예들은 기기(machine)(예: 웨어러블 장치(101)) 의해 읽을 수 있는 저장 매체(storage medium)(예: 메모리(220))에 저장된 하나 이상의 명령어들을 포함하는 소프트웨어로서 구현될 수 있다. 예를 들면, 기기(예: 웨어러블 장치(101))의 프로세서(예: 프로세서(210))는, 저장 매체로부터 저장된 하나 이상의 명령어들 중 적어도 하나의 명령을 호출하고, 그것을 실행할 수 있다. 이것은 기기가 상기 호출된 적어도 하나의 명령어에 따라 적어도 하나의 기능을 수행하도록 운영되는 것을 가능하게 한다. 상기 하나 이상의 명령어들은 컴파일러에 의해 생성된 코드 또는 인터프리터에 의해 실행될 수 있는 코드를 포함할 수 있다. 기기로 읽을 수 있는 저장 매체는, 비일시적(non-transitory) 저장 매체의 형태로 제공될 수 있다. 여기서, '비일시적'은 저장 매체가 실재(tangible)하는 장치이고, 신호(signal)(예: 전자기파)를 포함하지 않는다는 것을 의미할 뿐이며, 이 용어는 데이터가 저장 매체에 반영구적으로 저장되는 경우와 임시적으로 저장되는 경우를 구분하지 않는다.
일 실시예에 따르면, 본 문서에 개시된 다양한 실시예들에 따른 방법은 컴퓨터 프로그램 제품(computer program product)에 포함되어 제공될 수 있다. 컴퓨터 프로그램 제품은 상품으로서 판매자 및 구매자 간에 거래될 수 있다. 컴퓨터 프로그램 제품은 기기로 읽을 수 있는 저장 매체(예: compact disc read only memory(CD-ROM))의 형태로 배포되거나, 또는 어플리케이션 스토어(예: 플레이 스토어TM)를 통해 또는 두 개의 사용자 장치들(예: 스마트 폰들) 간에 직접, 온라인으로 배포(예: 다운로드 또는 업로드)될 수 있다. 온라인 배포의 경우에, 컴퓨터 프로그램 제품의 적어도 일부는 제조사의 서버, 어플리케이션 스토어의 서버, 또는 중계 서버의 메모리와 같은 기기로 읽을 수 있는 저장 매체에 적어도 일시 저장되거나, 임시적으로 생성될 수 있다.
다양한 실시예들에 따르면, 상기 기술한 구성요소들의 각각의 구성요소(예: 모듈 또는 프로그램)는 단수 또는 복수의 개체를 포함할 수 있으며, 복수의 개체 중 일부는 다른 구성요소에 분리 배치될 수도 있다. 다양한 실시예들에 따르면, 전술한 해당 구성요소들 중 하나 이상의 구성요소들 또는 동작들이 생략되거나, 또는 하나 이상의 다른 구성요소들 또는 동작들이 추가될 수 있다. 대체적으로 또는 추가적으로, 복수의 구성요소들(예: 모듈 또는 프로그램)은 하나의 구성요소로 통합될 수 있다. 이런 경우, 통합된 구성요소는 상기 복수의 구성요소들 각각의 구성요소의 하나 이상의 기능들을 상기 통합 이전에 상기 복수의 구성요소들 중 해당 구성요소에 의해 수행되는 것과 동일 또는 유사하게 수행할 수 있다. 다양한 실시예들에 따르면, 모듈, 프로그램 또는 다른 구성요소에 의해 수행되는 동작들은 순차적으로, 병렬적으로, 반복적으로, 또는 휴리스틱하게 실행되거나, 상기 동작들 중 하나 이상이 다른 순서로 실행되거나, 생략되거나, 또는 하나 이상의 다른 동작들이 추가될 수 있다.

Claims (15)

  1. 웨어러블 장치(wearable device)에 있어서,
    통신 회로;
    디스플레이;
    카메라;
    인스트럭션들을 저장하는 메모리; 및
    프로세서를 포함하고,
    상기 인스트럭션들은, 상기 프로세서에 의해 실행될 시에, 상기 웨어러블 장치가,
    상기 카메라를 이용하여 획득된 이미지 내의 제1 객체에 기반하여, 외부 전자 장치를 식별하고;
    상기 식별에 기반하여, 상기 통신 회로를 통해 상기 외부 전자 장치에게 상기 외부 전자 장치를 통해 제공되고 있는 멀티미디어 콘텐트를 표시하기 위한 정보를 요청하고;
    상기 외부 전자 장치로부터 송신된 상기 정보를 상기 통신 회로를 통해 수신하는 것에 응답하여, 상기 외부 전자 장치가 선택가능함을 알리기 위한 제2 객체를, 상기 제1 객체와 연계로, 표시하고; 및
    상기 제1 객체에 대한 사용자 입력이 감지되는지 여부에 기반하여, 상기 정보에 기반하여 상기 외부 전자 장치로부터 획득된, 상기 멀티미디어 콘텐트를 상기 디스플레이를 통하여 표시하도록, 구성된,
    웨어러블 장치.
  2. 제1 항에 있어서,
    상기 제2 객체와 연계된 상기 제1 객체는,
    상기 제1 객체와 상이한 영역 내에 표시되고, 상기 이미지 내의 적어도 하나의 제3 객체에 대하여 시각적으로 강조되는,
    웨어러블 장치.
  3. 제2 항에 있어서,
    상기 제2 객체는,
    상기 제1 객체의 가장자리를 따라 표시되거나, 상기 제1 객체 상에 중첩되고 점멸하여 표시되는,
    웨어러블 장치.
  4. 제1 항에 있어서,
    상기 인스트럭션들은, 상기 프로세서에 의해 실행될 시에, 상기 웨어러블 장치가,
    상기 외부 전자 장치와 연계로 상기 멀티미디어 콘텐트를 제공하기 위한 입력을 수신하는 제4 객체를 표시하도록, 구성된,
    웨어러블 장치.
  5. 제1 항에 있어서,
    상기 인스트럭션들은, 상기 프로세서에 의해 실행될 시에, 상기 웨어러블 장치가,
    상기 카메라를 통하여 획득된 이미지에 기반하여, 상기 웨어러블 장치의 제1 위치를 식별하고;
    상기 웨어러블 장치 내에 저장된 제2 위치에 대응하는 제1 위치를 식별한 것에 기반하여, 상기 멀티미디어 콘텐트를 상기 디스플레이를 통하여 표시하도록, 구성된,
    웨어러블 장치.
  6. 제5 항에 있어서,
    상기 제2 위치는,
    상기 멀티미디어 콘텐트를 반복적으로 제공하도록 설정된 위치인,
    웨어러블 장치.
  7. 제1 항에 있어서,
    상기 인스트럭션들은, 상기 프로세서에 의해 실행될 시에, 상기 웨어러블 장치가,
    상기 웨어러블 장치의 제1 사용자 계정 및 상기 외부 전자 장치의 제2 사용자 계정의 일치를 식별한 것에 기반하여, 상기 제2 객체를, 상기 제1 객체와 연계로 표시하도록, 구성된,
    웨어러블 장치.
  8. 제1 항에 있어서,
    상기 인스트럭션들은, 상기 프로세서에 의해 실행될 시에, 상기 웨어러블 장치가,
    상기 멀티미디어 콘텐트를 표시하는 동안, 사용자의 이동을 식별한 것에 기반하여, 상기 멀티미디어 콘텐트를 상기 디스플레이의 일부에 표시하도록, 구성된,
    웨어러블 장치.
  9. 웨어러블 장치(wearable device)의 방법에 있어서,
    카메라를 이용하여 획득된 이미지 내의 제1 객체에 기반하여, 외부 전자 장치를 식별하는 동작;
    상기 식별에 기반하여, 통신 회로를 통해 상기 외부 장치에게 상기 외부 전자 장치를 통해 제공되고 있는 멀티미디어 콘텐트를 표시하기 위한 정보를 요청하는 동작;
    상기 외부 전자 장치로부터 송신된 상기 정보를 상기 통신 회로를 통해 수신하는 것에 응답하여, 상기 외부 전자 장치가 선택가능함을 알리기 위한 제2 객체를, 상기 제1 객체와 연계로, 표시하는 동작; 및
    상기 제1 객체에 대한 사용자 입력이 감지되는지 여부에 기반하여, 상기 정보에 기반하여 상기 외부 전자 장치로부터 획득된 상기 멀티미디어 콘텐트를 디스플레이를 통하여 표시하는 동작을 포함하는,
    방법.
  10. 제9 항에 있어서,
    상기 제2 객체와 연계된 상기 제1 객체는,
    상기 제1 객체와 상이한 영역 내에 표시되고, 상기 이미지 내의 적어도 하나의 제3 객체에 대하여 시각적으로 강조되는,
    방법.
  11. 제10 항에 있어서,
    상기 제2 객체는,
    상기 제1 객체의 가장자리를 따라 표시되거나, 상기 제1 객체 상에 중첩되고 점멸하여 표시되는,
    방법.
  12. 제9 항에 있어서,
    상기 방법은,
    상기 외부 전자 장치와 연계로 상기 멀티미디어 콘텐트를 제공하기 위한 입력을 수신하는 제4 객체를 표시하는 동작을 포함하는,
    방법.
  13. 제9 항에 있어서,
    상기 방법은,
    상기 카메라를 통하여 획득된 이미지에 기반하여, 상기 웨어러블 장치의 제1 위치를 식별하는 동작; 및
    상기 웨어러블 장치 내에 저장된 제2 위치에 대응하는 제1 위치를 식별한 것에 기반하여, 상기 멀티미디어 콘텐트를 상기 디스플레이를 통하여 표시하는 동작을 포함하는,
    방법.
  14. 제13 항에 있어서,
    상기 제2 위치는,
    상기 멀티미디어 콘텐트를 반복적으로 제공하는,
    방법.
  15. 제9 항에 있어서,
    상기 방법은,
    상기 웨어러블 장치의 제1 사용자 계정 및 상기 외부 전자 장치의 제2 사용자 계정의 일치를 식별한 것에 기반하여, 상기 제2 객체를, 상기 제1 객체와 연계로 표시하는 동작을 포함하는,
    방법.
PCT/KR2023/020920 2022-12-20 2023-12-18 외부 전자 장치에 의해 제공되는 멀티미디어 콘텐트를 표시하기 위한 웨어러블 장치 및 그 방법 WO2024136383A1 (ko)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR10-2022-0179815 2022-12-20
KR20220179815 2022-12-20
KR10-2023-0000812 2023-01-03
KR1020230000812A KR20240097658A (ko) 2022-12-20 2023-01-03 외부 전자 장치에 의해 제공되는 멀티미디어 콘텐트를 표시하기 위한 웨어러블 장치 및 그 방법

Publications (1)

Publication Number Publication Date
WO2024136383A1 true WO2024136383A1 (ko) 2024-06-27

Family

ID=91589488

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2023/020920 WO2024136383A1 (ko) 2022-12-20 2023-12-18 외부 전자 장치에 의해 제공되는 멀티미디어 콘텐트를 표시하기 위한 웨어러블 장치 및 그 방법

Country Status (1)

Country Link
WO (1) WO2024136383A1 (ko)

Similar Documents

Publication Publication Date Title
WO2019164092A1 (ko) 디스플레이를 통해 표시된 제 1 콘텐트에 대해 제 2 콘텐트를 외부 객체의 움직임에 따라 제공하기 위한 전자 장치 및 그의 동작 방법
KR102212031B1 (ko) 글래스 타입 단말기
WO2017007101A1 (ko) 스마트 디바이스 및 이의 제어방법
WO2018052231A1 (ko) 플렉서블 디스플레이를 포함하는 전자 장치
WO2024136383A1 (ko) 외부 전자 장치에 의해 제공되는 멀티미디어 콘텐트를 표시하기 위한 웨어러블 장치 및 그 방법
WO2022149829A1 (ko) 웨어러블 전자 장치 및 모션 센서를 이용한 입력 구조물
WO2022169255A1 (ko) 전자 장치 및 그의 사용자 시선을 추적하고 증강 현실 서비스를 제공하는 방법
WO2022145888A1 (ko) 증강 현실 장치를 제어하는 방법 및 이를 수행하는 증강 현실 장치
WO2024122801A1 (ko) 외부 전자 장치의 위치에 기반하여 시각적 객체를 표시하기 위한 전자 장치 및 그 방법
WO2024136382A2 (ko) 외부 전자 장치로부터 획득된 생체 데이터에 기반하여 화면을 전환하기 위한 웨어러블 장치 및 그 방법
WO2024117524A1 (ko) 미디어 콘텐트를 표시하기 위한 전자 장치 및 그 방법
WO2024136381A1 (ko) 시각적 객체를 표시하기 위한 웨어러블 장치 및 그 방법
WO2024122836A1 (ko) 외부 전자 장치의 제어와 관련된 사용자 인터페이스를 표시하기 위한 웨어러블 장치 및 그 방법
WO2024101579A1 (ko) 멀티미디어 콘텐트를 표시하기 위한 전자 장치 및 그 방법
WO2024128728A1 (ko) 임계 거리 내에 포함된 시각적 객체들을 표시하기 위한 전자 장치, 방법, 및 컴퓨터 판독 가능 저장 매체
WO2024122992A1 (ko) 복수의 가상 공간들로 진입하기 위한 시각적 객체들을 표시하기 위한 웨어러블 장치 및 그 방법
WO2024128843A1 (ko) 사용자의 신체 정보에 기반하여 형성된 영역을 이용하여 어플리케이션을 나타내는 시각적 객체를 표시하기 위한 전자 장치, 방법, 및 컴퓨터 판독 가능 저장 매체
KR20240097658A (ko) 외부 전자 장치에 의해 제공되는 멀티미디어 콘텐트를 표시하기 위한 웨어러블 장치 및 그 방법
WO2024117649A1 (ko) 외부 객체에 대한 그립 형태에 기반하여 미디어 콘텐트를 표시하기 위한 웨어러블 장치 및 그 방법
WO2024053845A1 (ko) 오브젝트에 기초한 컨텐츠 공유를 제공하는 전자 장치 및 방법
WO2024128512A1 (ko) 화면을 투사하는 동안 외부 객체를 식별하기 위한 전자 장치 및 그 방법
WO2024090825A1 (ko) 센서에 의해 식별된 데이터를 이용하여 시각적 객체를 변경하기 위한 웨어러블 장치 및 그 방법
WO2024101593A1 (ko) 웨어러블 장치를 착용한 사용자의 정보를 송신하기 위한 웨어러블 장치, 및 방법
WO2024058439A1 (ko) 가상 공간에 배치되는 아바타 오브젝트의 페르소나를 결정하는 방법 및 장치
WO2022196869A1 (ko) 머리 착용형 디스플레이 장치, 그 장치에서의 동작 방법 및 저장매체