KR102489402B1 - 디스플레이 장치 및 그의 영상 표시 방법 - Google Patents

디스플레이 장치 및 그의 영상 표시 방법 Download PDF

Info

Publication number
KR102489402B1
KR102489402B1 KR1020150153243A KR20150153243A KR102489402B1 KR 102489402 B1 KR102489402 B1 KR 102489402B1 KR 1020150153243 A KR1020150153243 A KR 1020150153243A KR 20150153243 A KR20150153243 A KR 20150153243A KR 102489402 B1 KR102489402 B1 KR 102489402B1
Authority
KR
South Korea
Prior art keywords
display device
image
display
wall surface
user
Prior art date
Application number
KR1020150153243A
Other languages
English (en)
Other versions
KR20170050995A (ko
Inventor
허재명
김혜숙
박종진
안재성
윤현규
이명일
이봉석
조대우
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020150153243A priority Critical patent/KR102489402B1/ko
Priority to CN201680027366.5A priority patent/CN107534751B/zh
Priority to PCT/KR2016/012416 priority patent/WO2017078356A1/ko
Priority to US15/761,692 priority patent/US10467933B2/en
Priority to EP16862372.6A priority patent/EP3337161B1/en
Publication of KR20170050995A publication Critical patent/KR20170050995A/ko
Application granted granted Critical
Publication of KR102489402B1 publication Critical patent/KR102489402B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/80Geometric correction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/60Analysis of geometric attributes
    • G06T7/62Analysis of geometric attributes of area, perimeter, diameter or volume
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • G06T7/74Determining position or orientation of objects or cameras using feature-based methods involving reference images or patches
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/90Determination of colour characteristics
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/10Intensity circuits
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42202Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] environmental sensors, e.g. for detecting temperature, luminosity, pressure, earthquakes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223Cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • H04N21/44218Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/4448Receiver circuitry for the reception of television signals according to analogue transmission standards for frame-grabbing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/57Control of contrast or brightness
    • H04N5/58Control of contrast or brightness in dependence upon ambient light
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10024Color image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00Aspects of interface with display user
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00Aspects of the architecture of display systems
    • G09G2360/14Detecting light within display terminals, e.g. using a single or a plurality of photosensors
    • G09G2360/144Detecting light within display terminals, e.g. using a single or a plurality of photosensors the light being ambient light

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Social Psychology (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Hardware Design (AREA)
  • Ecology (AREA)
  • Business, Economics & Management (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Biodiversity & Conservation Biology (AREA)
  • Databases & Information Systems (AREA)
  • Emergency Management (AREA)
  • Environmental & Geological Engineering (AREA)
  • Environmental Sciences (AREA)
  • Remote Sensing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Geometry (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

디스플레이 장치가 개시된다. 본 개시의 일 실시예에 따른 디스플레이 장치는, 디스플레이 장치의 전면에 위치한 디스플레이, 디스플레이 장치의 전방에 위치한 사용자를 촬영하는 전방 카메라, 디스플레이 장치의 후방에 위치한 벽면을 촬영하는 후방 카메라, 디스플레이 장치와 벽면 사이의 거리를 측정하는 센서부 및 사용자를 촬영한 영상에 기초하여 사용자의 위치를 판단하고, 사용자의 위치 및 디스플레이 장치와 벽면 사이의 거리에 기초하여, 촬영된 벽면의 영상 중 사용자의 위치를 기준으로 디스플레이 장치가 위치하는 방향에 존재하는 벽면의 일부 영역에 대응하는 영상을 표시하도록 디스플레이를 제어하는 프로세서를 포함한다.

Description

디스플레이 장치 및 그의 영상 표시 방법{DISPLAY APPARATUS AND VISUAL DISPLAY METHOD THEREOF}
본 발명은 디스플레이 장치 및 그의 영상 표시 방법에 관한 것으로서, 보다 상세하게는 설치된 디스플레이 장치의 주변과 조화하기 위한 영상을 표시하는 디스플레이 장치 및 그 영상 표시 방법에 관한 것이다.
영상을 표시하는 디스플레이 장치는 텔레비전, 모니터, 홈시어터와 같은 가정용 기기로서 널리 사용되고 있다. 그리고, 디스플레이 장치에 대한 기술의 발전은, 디스플레이 장치에서 보다 높은 고화질의 보다 큰 화면을 출력하는 방향으로 전개되었다.
이러한, 디스플레이 장치의 우수한 고해상도 화질 및 화면 크기의 대형화는 영상을 시청하는 사용자에게 깊은 몰입감을 줄 수 있었다. 반대로, 영상을 시청하지 않는 동안 꺼진 디스플레이 장치의 흑색의 큰 화면은 주변 환경과 동화되지 않고 사용자에게 상당한 위화감을 안겨주는 문제가 있었다.
본 개시는 상술한 문제로부터의 개선을 위한 발명된 것으로서, 본 개시의 목적은 디스플레이 장치의 주변과 조화로운 영상을 표시하는 디스플레이 장치 및 그 영상 표시 방법을 제공하는 데 있다.
상술한 목적을 달성하기 위한 본 개시의 일 실시예에 따른 디스플레이 장치는, 상기 디스플레이 장치의 전면에 위치한 디스플레이, 상기 디스플레이 장치의 전방에 위치한 사용자를 촬영하는 전방 카메라, 상기 디스플레이 장치의 후방에 위치한 벽면을 촬영하는 후방 카메라, 상기 디스플레이 장치와 상기 벽면 사이의 거리를 측정하는 센서부 및 상기 사용자를 촬영한 영상에 기초하여 상기 사용자의 위치를 판단하고, 상기 사용자의 위치 및 상기 디스플레이 장치와 상기 벽면 사이의 거리에 기초하여, 상기 촬영된 벽면의 영상 중 상기 사용자의 위치를 기준으로 상기 디스플레이 장치가 위치하는 방향에 존재하는 상기 벽면의 일부 영역에 대응하는 영상을 표시하도록 상기 디스플레이를 제어하는 프로세서를 포함한다.
이 경우, 상기 벽면의 일부 영역은, 상기 사용자의 위치를 기준으로 상기 디스플레이 장치가 위치하는 방향에 존재하는 상기 벽면 중에서, 상기 디스플레이 장치에 의해 가려진 상기 벽면의 일부 영역일 수 있다.
한편, 상기 프로세서는, 상기 사용자를 촬영한 영상에 기초하여, 상기 디스플레이 장치로부터 상기 사용자의 위치까지의 방향 및 거리를 계산하고, 상기 계산된 사용자의 방향으로부터 상기 촬영된 벽면의 영상 중 상기 벽면의 일부 영역에 대응하는 영상의 위치를 결정하고, 상기 계산된 사용자의 거리 및 상기 디스플레이 장치의 전면의 넓이의 비로부터, 상기 측정된 벽면까지의 거리를 이용하여, 상기 촬영된 벽면의 영상 중 상기 벽면의 일부 영역에 대응하는 영상의 크기를 결정하고, 상기 결정된 위치 및 크기에 따른 영상을 표시하도록 상기 디스플레이를 제어할 수 있다.
한편, 상기 프로세서는, 상기 사용자를 촬영한 영상에 기초하여, 상기 디스플레이의 중심을 기준으로, 상기 디스플레이의 접평면의 수직축으로부터 상기 사용자의 위치의 방향으로 회전한 각도 및 상기 디스플레이의 중심으로부터 상기 사용자의 위치까지의 거리를 계산하고, 상기 수직축 상의 상기 계산된 거리에서 상기 디스플레이 장치의 전면 전체를 바라보는 시야각을 계산하고, 상기 계산된 시야각에서 상기 회전한 각도를 가산하였을 때의 상기 디스플레이 장치에 의해 가려진 상기 벽면의 일부 영역의 너비와 높이를 계산하고, 상기 촬영된 영상 중 상기 계산된 너비와 높이에 대응하는 크기의 영상을 표시하도록 상기 디스플레이를 제어할 수 있다.
한편, 상기 후방 카메라는 광각 렌즈를 포함하고, 상기 프로세서는, 상기 광각 렌즈로 인한 상기 촬영된 벽면의 영상의 배럴 왜곡(barrel distortion)을 보정하고, 상기 보정된 벽면의 영상 중 상기 벽면의 일부 영역에 대응하는 영상을 표시하도록 상기 디스플레이를 제어할 수 있다.
한편, 상기 후방 카메라는 상기 디스플레이의 접평면의 수직축과 각을 이루는 방향으로 상기 디스플레이 장치의 후방을 촬영하고, 상기 프로세서는, 상기 촬영 방향으로 인한 상기 촬영된 벽면의 영상의 키스톤 왜곡을 보정하고, 상기 보정된 벽면의 영상 중 상기 벽면의 일부 영역에 대응하는 영상을 표시하도록 상기 디스플레이를 제어할 수 있다.
한편, 상기 프로세서는, 상기 촬영된 벽면의 영상으로부터 상기 벽면의 무늬 및 색상을 분석하고, 상기 분석된 색상의 상기 분석된 무늬를 포함하는 영상을 생성하고, 상기 사용자의 위치 및 상기 디스플레이 장치와 상기 벽면 사이의 거리에 기초하여, 상기 생성된 영상 중 상기 사용자의 위치를 기준으로 상기 디스플레이 장치가 위치하는 방향에 존재하는 상기 벽면의 일부 영역에 대응하는 영상을 표시하도록 상기 디스플레이를 제어할 수 있다.
한편, 상기 프로세서는, 상기 촬영된 벽면의 영상으로부터 상기 벽면의 무늬 및 색상을 분석하고, 기저장된 영상 중 상기 분석된 무늬를 갖는 영상을 검색하고, 상기 사용자의 위치 및 상기 디스플레이 장치와 상기 벽면 사이의 거리에 기초하여, 상기 검색된 영상 중 상기 사용자의 위치를 기준으로 상기 디스플레이 장치가 위치하는 방향에 존재하는 상기 벽면의 일부 영역에 대응하는 영상을 표시하도록 상기 디스플레이를 제어할 수 있다.
한편, 상기 프로세서는, 상기 벽면의 일부 영역에 대응하는 영상을 배경으로 하는 그림이나 애니메이션 또는 특정 어플리케이션을 실행한 위젯을 포함하는 화면을 표시하도록 상기 디스플레이를 제어할 수 있다.
한편, 상기 디스플레이 장치는, 광량을 감지하는 조도 센서를 더 포함하고, 상기 프로세서는 상기 감지된 광량에 따라 상기 벽면의 일부 영역에 대응하는 영상을 표시하는 밝기를 조절하도록 상기 디스플레이를 제어할 수 있다.
한편, 본 개시의 일 실시예에 따른 디스플레이 장치의 영상 표시 방법은, 상기 디스플레이 장치의 전방에 위치한 사용자 및 상기 디스플레이 장치의 후방에 위치한 벽면을 촬영하는 단계, 상기 디스플레이 장치와 상기 벽면 사이의 거리를 측정하는 단계, 상기 사용자를 촬영한 영상에 기초하여 상기 사용자의 위치를 판단하는 단계 및 상기 사용자의 위치 및 상기 디스플레이 장치와 상기 벽면 사이의 거리에 기초하여, 상기 촬영된 벽면의 영상 중 상기 사용자의 위치를 기준으로 상기 디스플레이 장치가 위치하는 방향에 존재하는 상기 벽면의 일부 영역에 대응하는 영상을 표시하는 단계를 포함한다.
이 경우, 상기 벽면의 일부 영역은, 상기 사용자의 위치를 기준으로 상기 디스플레이 장치가 위치하는 방향에 존재하는 상기 벽면 중에서, 상기 디스플레이 장치에 의해 가려진 상기 벽면의 일부 영역일 수 있다.
한편, 상기 사용자의 위치를 판단하는 단계는, 상기 사용자를 촬영한 영상에 기초하여, 상기 디스플레이 장치로부터 상기 사용자의 위치까지의 방향 및 거리를 계산하는 단계를 포함하고, 상기 표시하는 단계는, 상기 계산된 사용자의 방향으로부터 상기 촬영된 벽면의 영상 중 상기 벽면의 일부 영역에 대응하는 영상의 위치를 결정하고, 상기 계산된 사용자의 거리 및 상기 디스플레이 장치의 전면의 넓이의 비로부터, 상기 측정된 벽면까지의 거리를 이용하여, 상기 촬영된 벽면의 영상 중 상기 벽면의 일부 영역에 대응하는 영상의 크기를 결정하고, 상기 결정된 위치 및 크기에 따른 영상을 표시할 수 있다.
한편, 상기 사용자의 위치를 판단하는 단계는, 상기 사용자를 촬영한 영상에 기초하여, 상기 디스플레이의 중심을 기준으로, 상기 디스플레이의 접평면의 수직축으로부터 상기 사용자의 위치의 방향으로 회전한 각도 및 상기 디스플레이의 중심으로부터 상기 사용자의 위치까지의 거리를 계산하고, 상기 표시하는 단계는, 상기 수직축 상의 상기 계산된 거리에서 상기 디스플레이 장치의 전면 전체를 바라보는 시야각을 계산하고, 상기 계산된 시야각에서 상기 회전한 각도를 가산하였을 때의 상기 디스플레이 장치에 의해 가려진 상기 벽면의 일부 영역의 너비와 높이를 계산하고, 상기 촬영된 영상 중 상기 계산된 너비와 높이에 대응하는 크기의 영상을 표시할 수 있다.
한편, 상기 벽면은 광각 렌즈를 포함하는 후방 카메라에 의해 촬영되고, 상기 표시하는 단계는, 상기 광각 렌즈로 인한 상기 촬영된 벽면의 영상의 배럴 왜곡(barrel distortion)을 보정하고, 상기 보정된 벽면의 영상 중 상기 벽면의 일부 영역에 대응하는 영상을 표시할 수 있다.
한편, 상기 촬영하는 단계는, 상기 디스플레이 장치의 전면에 위치한 디스플레이의 접평면의 수직축과 각을 이루는 방향으로 상기 디스플레이 장치의 후방을 촬영하고, 상기 표시하는 단계는, 상기 촬영 방향으로 인한 상기 촬영된 벽면의 영상의 키스톤 왜곡을 보정하고, 상기 보정된 벽면의 영상 중 상기 벽면의 일부 영역에 대응하는 영상을 표시할 수 있다.
한편, 상기 표시하는 단계는, 상기 촬영된 벽면의 영상으로부터 상기 벽면의 무늬 및 색상을 분석하고, 상기 분석된 색상의 상기 분석된 무늬를 포함하는 영상을 생성하고, 상기 사용자의 위치 및 상기 디스플레이 장치와 상기 벽면 사이의 거리에 기초하여, 상기 생성된 영상 중 상기 사용자의 위치를 기준으로 상기 디스플레이 장치가 위치하는 방향에 존재하는 상기 벽면의 일부 영역에 대응하는 영상을 표시할 수 있다.
한편, 상기 표시하는 단계는, 상기 촬영된 벽면의 영상으로부터 상기 벽면의 무늬 및 색상을 분석하고, 기저장된 영상 중 상기 분석된 무늬를 갖는 영상을 검색하고, 상기 사용자의 위치 및 상기 디스플레이 장치와 상기 벽면 사이의 거리에 기초하여, 상기 검색된 영상 중 상기 사용자의 위치를 기준으로 상기 디스플레이 장치가 위치하는 방향에 존재하는 상기 벽면의 일부 영역에 대응하는 영상을 표시할 수 있다.
한편, 상기 표시하는 단계는, 상기 벽면의 일부 영역에 대응하는 영상을 배경으로 하는 그림이나 애니메이션 또는 특정 어플리케이션을 실행한 위젯을 포함하는 화면을 표시할 수 있다.
한편, 상기 영상 표시 방법은, 광량을 감지하는 단계를 더 포함하고, 상기 표시하는 단계는, 상기 감지된 광량에 따라 상기 벽면의 일부 영역에 대응하는 영상을 표시하는 밝기를 조절하는 단계를 포함할 수 있다.
이상의 다양한 실시예에 따른 디스플레이 장치 및 영상 표시 방법은 다음과 같은 효과를 달성할 수 있다.
일 실시예에 따르면 디스플레이 장치는 후방의 벽면과 조화된 영상을 출력하는바, 종래 디스플레이 장치의 흑색 화면으로 인한 삭막한 실내 분위기를 회피할 수 있다.
다른 실시예에 따르면 디스플레이 장치는 벽면과 조화된 실내 인테리어로서의 기능 및 다양한 어플리케이션을 이용한 확장된 사용성을 가질 수 있다.
도 1은 본 개시의 일 실시예에 따른 디스플레이 장치의 일반적인 용례를 설명하기 위한 도면,
도 2는 본 개시의 일 실시예에 따른 디스플레이 장치의 구성을 설명하기 위한 블록도,
도 3은 디스플레이 장치가 벽면을 촬영하는 방식의 일 예를 설명하기 위한 도면,
도 4는 광각 렌즈에 의한 배럴 효과를 설명하기 위한 도면,
도 5는 디스플레이 장치가 벽면을 촬영하는 방식의 다른 예를 설명하기 위한 도면,
도 6은 촬영 방향에 의한 키스톤 왜곡을 설명하기 위한 도면,
도 7은 사용자의 거리에 따라 가려진 벽면의 일부 영역의 변화를 설명하기 위한 도면,
도 8은 사용자의 방향에 따라 가려진 벽면의 일부 영역의 변화를 설명하기 위한 도면,
도 9는 본 개시의 일 실시예에 따른 가려진 벽면의 일부 영역의 크기를 계산하는 방법을 설명하기 위한 도면,
도 10은 본 개시의 일 실시예에 따른 디스플레이 장치에서 출력되는 일부 영상을 설명하기 위한 도면,
도 11은 본 개시의 다른 실시예에 따른 디스플레이 장치의 구성을 설명하기 위한 블록도,
도 12는 본 개시의 일 실시예에 따른 영상 표시 방법을 설명하기 위한 도면,
도 13은 본 개시의 일 실시예에 따른 디스플레이 시스템을 설명하기 위한 도면,
도 14는 도 13의 디스플레이 시스템을 구성하는 사용자 단말 장치의 구성을 설명하기 위한 도면,
도 15는 도 13의 디스플레이 시스템의 영상 표시 방법을 설명하기 위한 시퀸스도, 그리고,
도 16은 본 개시의 일 실시예에 따른 디스플레이 장치의 화면의 두 예시를 도시한다.
이하 첨부된 도면들을 참조하여 본 개시의 각 실시 예들을 보다 상세하게 설명한다. 다만, 본 발명을 설명함에 있어서, 관련된 공지 기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그에 대한 상세한 설명은 생략한다.
도 1은 본 개시의 일 실시예에 따른 디스플레이 장치의 일반적인 용례를 설명하기 위한 도면이다.
도 1은 홈시어터가 설치된 거실(10)을 도시한다. 홈시어터를 구성하는 디스플레이 장치(100)는 거실(10)의 일측 벽면(20)에 설치된다. 도 1에서 디스플레이 장치(100)는 벽걸이형으로 도시하였다. 다른 예에서, 디스플레이 장치(100)는 벽면(20) 아래에 놓인 선반(30)의 위에 설치될 수 있다.
디스플레이 장치(100)는 거실(10)의 내부 공간을 향하여 화면을 표시할 수 있도록 설치된다. 디스플레이 장치(100)는 벽면(20)과 조화된 영상을 표시한다. 구체적으로, 디스플레이 장치(100)는 방송과 같은 비디오 컨텐츠를 재생하지 않는 대기 상태 또는 절전 상태에서 벽면(20)과 대응되는 영상을 표시할 수 있다.
이상과 같은 디스플레이 장치(100)는 넓은 벽면(20)에 덩그러니 걸린 흑색 화면이 아니라, 벽면(20)과 조화된 영상을 출력할 수 있다.
도 2는 본 개시의 일 실시예에 따른 디스플레이 장치의 구성을 설명하기 위한 블록도이다.
도 2를 참조하면, 디스플레이 장치(100-1)는 디스플레이(110), 전방 카메라(120), 후방 카메라(130), 센서부(140) 및 프로세서(150)를 포함한다.
디스플레이(110)는 화면을 표시한다. 또한, 디스플레이(110)는 디스플레이 장치(100-1)의 전면에 위치한다. 구체적으로, 디스플레이(110)는 배경 - 즉, 벽면과 조화되는 벽면에 대응되는 영상을 표시할 수 있다.
디스플레이(110)는 액정 디스플레이 패널(Liquid Crystal Display Panel: LCD Panel), 플라즈마 디스플레이 패널(Plasma Display Panel: PDP), 유기발광 소자(Organic Light Emitting Diode, OLED), VFD(Vacuum Fluorescent Display), FED(Field Emission Display), ELD(Electro Luminescence Display) 등과 같은 다양한 디스플레이 유닛으로 구현될 수 있다
전방 카메라(120)는 디스플레이 장치(100-1)의 전방에 위치한 사용자를 촬영한다. 구체적으로, 전방 카메라(120)는 디스플레이 장치(100-1)의 전방을 향하여 사용자를 포함하는 피사체를 촬영할 수 있다.
후방 카메라(130)는 디스플레이 장치(100-1)의 후방에 위치한 벽면을 촬영한다. 구체적으로, 후방 카메라(120)는 디스플레이 장치(100-1)가 설치된 공간의 배경이 되는 후방의 벽면을 촬영할 수 있다.
전방 카메라(120) 및 후방 카메라(130)는 바닥으로부터 입사되는 피사체의 빛을 모아서 촬상 영역에 광학상이 맺히게 하는 렌즈, 렌즈를 통해 입사되는 빛을 전기 신호로 광전 변환하는 촬상 소자 및 촬상 소자의 아날로그 형태의 신호를 디지털 신호로 변환하여 출력하는 A/D 컨버터로 구성될 수 있다. 여기서, 촬상 소자는 CCD(Charged Coupled Device) 촬상 소자 및 CMOS(Complementary Metal Oxide Semiconductor) 촬상 소자일 수 있다.
센서부(140)는 거리를 측정한다. 구체적으로, 센서부(140)는 디스플레이 장치(100-1)와 벽면 사이의 거리를 측정할 수 있다. 센서부(140)는 배경이 되는 벽면과의 간격을 측정함으로써, 디스플레이 장치(100-1)가 후방 카메라(130)가 촬영한 벽면으로부터 얼마나 멀리 떨어져 있는지를 알 수 있게 한다.
센서부(140)는 조사한 적외선의 왕복 거리를 감지하여, 벽과 이격된 거리를 측정하는 IR 센서로 구현될 수 있다. 또는 센서부(140)는 후방 카메라(130)의 내부에 포함되는 자동 초점을 위한 피사체, 즉 벽면과의 거리를 감지하는 광학 센서로 구현될 수 있다.
프로세서(150)는 디스플레이 장치(100-1)의 각 구성을 제어한다. 구체적으로, 프로세서(150)는 디스플레이 장치(100-1)의 영상을 출력하기 위한 기능을 수행하기 위한 각 구성을 제어할 수 있다.
프로세서(150)는 사용자를 촬영한 영상에 기초하여 사용자의 위치를 판단한다. 구체적으로, 프로세서(150)는 전방 카메라(120)가 촬영한 전방의 사용자에 대한 영상에 기초하여 사용자의 위치를 판단할 수 있다.
이를 위하여, 프로세서(150)는 전방 카메라(120)가 촬영한 영상으로부터 사용자를 인식할 수 있다. 일 예로 프로세서(150)는 영상으로부터 사람 인식 처리 또는 얼굴 인식 처리를 수행할 수 있다.
또한, 프로세서(150)는 사용자의 위치를 판단하기 위해, 사용자를 촬영하는 전방 카메라(120)의 기저장된 위치를 이용할 수 있다. 구체적으로, 프로세서(150)는 디스플레이 장치(100-1)에 대한 상대적인 사용자의 위치를 판단하기 위하여, 설계상 전방 카메라(120)가 배치된 위치를 이용할 수 있다. 한편, 프로세서(150)는 복수의 사용자가 촬영된 경우, 복수의 사용자의 위치를 판단하고, 판단된 복수의 사용자의 위치들의 평균 위치를 사용자의 위치로 판단할 수 있다.
여기서, 프로세서(150)는 사용자를 촬영한 영상에 기초하여, 디스플레이 장치로부터 사용자의 위치까지의 방향 및 거리를 계산할 수 있다.
프로세서(150)는 사용자의 위치 및 디스플레이 장치(100-1)와 상기 벽면 사이의 거리에 기초하여, 촬영된 벽면의 영상 중 사용자의 위치를 기준으로 디스플레이 장치(100-1)가 위치하는 방향에 존재하는 벽면의 일부 영역에 대응하는 영상을 표시하도록 디스플레이(110)를 제어할 수 있다.
구체적으로, 프로세서(150)는 전방 카메라(120)가 전방을 촬영한 영상으로부터 판단된 사용자의 위치 및 센서부(110)에 의해 측정된 벽면과의 거리에 기초하여, 촬영된 벽면의 영상 중 사용자의 위치를 기준으로 디스플레이 장치(100-1)가 위치하는 방향에 존재하는 벽면의 일부 영역에 대응하는 영상을 편집할 수 있다. 그리고, 프로세서(150)는 편집된 영상을 디스플레이(110)에 표시되도록 제어할 수 있다.
여기서, 벽면의 일부 영역은 사용자의 위치를 기준으로 디스플레이 장치(100-1)가 위치하는 방향에 존재하는 벽면 중에서, 디스플레이 장치(100-1)에 의해 가려진 벽면의 일부 영역이다. 다시 말하면, 벽면의 일부 영역은 사용자의 위치에서 사용자가 디스플레이 장치(100-1)를 바라볼 때, 같은 시야 선상에 있는 디스플레이 장치(100-1)의 후방의 벽면 중 디스플레이 장치(100-1)에 의해 가려진 일부 영역을 말한다.
프로세서(150)는 계산된 사용자의 방향으로부터 촬영된 벽면의 영상 중 상기 벽면의 일부 영역에 대응하는 영상의 위치를 결정할 수 있다. 구체적으로, 프로세서(150)는 사용자의 방향에 따라 달라지는 디스플레이 장치(100-1)에 의해 가려진 벽면의 일부 영역과 촬영된 벽면의 영상 중 그 일부 영역에 대응하는 영상의 위치를 결정할 수 있다.
또한, 프로세서(150)는 계산된 사용자의 거리 및 상기 디스플레이 장치의 전면의 넓이의 비로부터, 상기 측정된 벽면까지의 거리를 이용하여, 상기 촬영된 벽면의 영상 중 상기 벽면의 일부 영역에 대응하는 영상의 크기를 결정할 수 있다. 구체적으로, 프로세서(150)는 디스플레이 장치(100-1)에 의해 가려지는 벽면의 일부 영역의 크기와 디스플레이 장치(100-1)의 전면의 넓이의 비는 디스플레이 장치(100-1)로부터 사용자까지의 거리와 벽면으로부터 사용자까지의 거리의 비와 대응하는 점을 이용하여, 상기 촬영된 벽면의 영상 중 상기 벽면의 일부 영역에 대응하는 영상의 크기를 결정할 수 있다.
그리고, 프로세서(150)는 위의 결정된 위치 및 크기에 따른 영상을 표시하도록 디스플레이(110)를 제어할 수 있다.
표시할 영역을 결정하기 위한 다른 예시에서, 프로세서(150)는 사용자를 촬영한 영상에 기초하여, 디스플레이(110)의 중심을 기준으로, 디스플레이(110)의 접평면의 수직축으로부터 사용자의 위치의 방향으로 회전한 각도 및 디스플레이(110)의 중심으로부터 상기 사용자의 위치까지의 거리를 계산할 수 있다. 즉, 프로세서(150)는 디스플레이(110) 평면상의 너비축 및 높이축과 그 평면에 수직한 수직축으로 구성된 3차원 좌표계를 구성할 수 있다. 프로세서(150)는 디스플레이(110)의 중심을 원점으로, 3차원 좌표계에서, 사용자의 위치를 거리 및 방향으로 나타낼 수 있다.
프로세서(150)는 수직축 상의 계산된 거리에서 디스플레이 장치(100-1)의 전면 전체를 바라보는 시야각을 계산할 수 있다. 구체적으로, 프로세서(150)는 사용자와의 거리만큼 떨어진 수직축상의 지점에서 디스플레이 장치(100-1)의 전면 전체를 바라보는 시야각을 계산할 수 있다
또한, 프로세서(150)는 계산된 시야각에서 회전한 각도를 가산하였을 때의 디스플레이 장치(150)에 의해 가려진 벽면의 일부 영역의 너비와 높이를 계산할 수 있다. 구체적으로, 프로세서(150)는 수직축 상의 지점에서 디스플레이(110)의 너비 방향으로 회전한 각도를 너비 방향의 시야각에 가산하고, 수직축 상의 지점에서 디스플레이(110)의 높이 방향으로 회전한 각도를 높이 방향의 시야각에 가산하고, 가산된 시야각에 의해 바뀌는 벽면의 일부 영역의 너비와 높이를 계산할 수 있다.
그리고, 프로세서(150)는 촬영된 영상 중 계산된 너비와 높이의 일부 영역에 대응하는 크기의 영상을 표시하도록 상기 디스플레이(110)를 제어할 수 있다. 보다 자세한 설명은 도 9를 참조하여 설명한다.
프로세서(150)는 CPU, 디스플레이 장치(100-1)의 제어를 위한 제어 프로그램이 저장된 롬(Read-Only Memory: ROM) 및 디스플레이 장치(100-1)의 외부로부터 입력되는 신호 또는 데이터를 기억하거나, 디스플레이 장치(100-1)에서 수행되는 작업을 위한 기억영역으로 사용되는 램(Random Access Memory: RAM)을 포함한다. CPU는 싱글 코어 프로세서, 듀얼 코어 프로세서, 트리플 코어 프로세서 및 쿼드 코어 프로세서 중 적어도 하나를 포함할 수 있다. CPU, 롬 및 램은 내부버스(bus)를 통해 상호 연결된다.
이상과 같은 본 개시의 일 실시예에 따른 디스플레이 장치(100)는 후방의 벽면과 조화되는 가려진 벽면의 일부 영역에 대응하는 영상을 출력할 수 있다.
도 3은 디스플레이 장치가 벽면을 촬영하는 방식의 일 예를 설명하기 위한 도면이다.
도 3을 참조하면, 디스플레이 장치(100)는 후면에 위치한 후면 카메라(130)를 포함한다. 그리고, 후방 카메라(130)와 동일 또는 근접한 위치에 센서부(140)가 벽면(20)과의 거리(31)를 측정한다.
디스플레이 장치(100)는 벽면(20)과 가까운 거리(31)에 설치되는 것이 통상적이다. 따라서, 후방 카메라(130)는 디스플레이 장치(100)의 폭보다 길게 벽면(20)을 촬영하기 위해 광각 렌즈를 포함할 수 있다.
후방 카메라(130)는 가까운 거리(31)에서 참조번호 32에 해당하는 폭만큼 벽면(20)을 촬영한다. 벽면(20)으로부터 좀 더 멀어진 디스플레이 장치(100')의 후방 카메라(130)는 먼 거리(33)에서 참조번호 34에 해당하는 폭만큼 벽면(20)을 촬영한다. 이와 같이, 후방 카메라(130)에서 촬영되는 벽면(20)의 영상은 디스플레이 장치(100)가 설치된 거리에 따라 크기를 달리한다.
따라서, 디스플레이 장치(100)의 프로세서(150)는 측정된 거리(31, 33)에 비례하여 벽면의 일부 영역에 대응하는 영상의 크기를 결정할 수 있다. 가령, 프로세서(150)는 사용자가 디스플레이 장치(100)로부터 시청을 위한 최적의 거리 및 수직 방향에 있는 것으로 가정하고, 그 최적 위치에서 벽면의 거리에 따라 비례하는 가려진 벽면의 영역의 크기를 계산할 수 있다.
한편, 광각 렌즈로 촬영된 영상은 왜곡되어 있다. 구체적인 설명을 위해 도 4를 참조하면, 도 4(a)는 정상적인 영상이고, 도 4(b)는 광각 렌즈로 촬영시 배럴 왜곡(barrel distortion)된 영상이다.
따라서, 프로세서(150)는 광각 렌즈로 인해 촬영된 벽면(20)의 영상의 배럴 왜곡(barrel distortion)을 보정하고, 보정된 벽면의 영상 중 벽면의 일부 영역에 대응하는 영상을 표시하도록 디스플레이(110)를 제어할 수 있다.
도 5는 디스플레이 장치가 벽면을 촬영하는 방식의 다른 예를 설명하기 위한 도면이다.
도 5를 참조하면, 디스플레이 장치(100)는 벽면(20)으로부터 매우 가까이 설치되어 있다. 이 경우, 후방 카메라(130)는, 초근접사 카메라일지라도, 디스플레이 장치(100)보다 큰 벽면(20)의 영상을 담기는 어렵다.
따라서, 후방 카메라(130)는 벽면(20)을 비스듬한 방향으로 촬영한다. 구체적으로, 후방 카메라(130)는 디스플레이(110)의 접평면의 수직축과 각을 이루는 방향으로 디스플레이 장치(100)의 후방을 촬영한다. 도 5의 예시된 그림과 같이, 디스플레이 장치(100) 후면의 외곽 부분에 위치한 후방 카메라(130)는 상향으로 각을 이루도록 벽면(20)을 촬영함으로써, 넓은 벽면(20)을 영상으로 담을 수 있다.
한편, 기울어진 방향으로 촬영된 벽면(20)의 영상은, 사용자가 디스플레이 장치(100)를 바라보는 방향에서 촬영된 벽면(20)과 다르다. 도 6을 참조하면, 도 6(a)는 정상적인 영상이고, 도 6(b)는 아래에서 위로 촬영시 키스톤 왜곡(keystone distortion, 또는 trapezoidal distortion)된 영상이다.
따라서, 프로세서(150)는 촬영 방향으로 인한 촬영된 벽면(20)의 영상의 키스톤 왜곡을 보정하고, 보정된 벽면의 영상 중 벽면의 일부 영역에 대응하는 영상을 표시하도록 디스플레이(110)를 제어할 수 있다.
도 7은 사용자의 거리에 따라 가려진 벽면의 일부 영역의 변화를 설명하기 위한 도면이다.
도 7을 참조하면, 디스플레이 장치(100)는 센서(140)를 이용하여 벽면(20)과의 거리(31)를 측정한다. 그리고, 디스플레이 장치(100)는 전방 카메라(120)를 이용하여, 전방의 사용자(40)를 촬영하고, 촬영된 사용자(40)의 위치를 판단한다. 판단된 사용자(40)의 위치를 나타내는 정보는 디스플레이(110)의 중심으로부터 사용자(40)까지의 거리(81)를 포함한다.
디스플레이 장치(100)로부터 가까운 거리(81)에서 디스플레이 장치(100)를 바라보는 사용자(40)는 참조번호 82의 상대적으로 넓은 벽면(20)의 일부 영역이 가려져 보이지 않는다. 그러나, 디스플레이 장치(100)로부터 먼 거리(83)에서 디스플레이 장치(100)를 바라보는 사용자(40)는 참조번호 84의 상대적으로 좁은 벽면(20)의 일부 영역이 가려져 보이지 않는다.
따라서, 디스플레이 장치(100)는 사용자(40)와의 거리에 따라 디스플레이(110)에 표시해야 할 벽면(20)의 일부 영역에 대응하는 영상의 크기를 달리한다.
도 8은 사용자의 방향에 따라 가려진 벽면의 일부 영역의 변화를 설명하기 위한 도면이다.
도 8을 참조하면, 디스플레이 장치(100)는 센서(140)를 이용하여 벽면(20)과의 거리(31)를 측정한다. 그리고, 디스플레이 장치(100)는 전방 카메라(120)를 이용하여, 전방의 사용자(40)를 촬영하고, 촬영된 사용자(40)의 위치를 판단한다. 판단된 사용자(40)의 위치를 나타내는 정보는 디스플레이(110)의 중심으로부터 사용자(40)까지의 거리 및 디스플레이(110)의 중심의 수직축으로부터 각을 이루는 방향(85)을 포함한다.
수직축 상에 일정 거리(81)만큼 떨어져서 디스플레이 장치(100)를 바라보는 사용자(40)는 참조번호 82의 좌우가 대칭인 벽면(20)의 일부 영역이 가려져 보이지 않는다. 동일한 거리(81)에서 수직축과 일정 각도(85)를 이루는 위치에서 디스플레이 장치(100)를 바라보는 사용자(40')는 참조번호 86의 벽면(20)의 일부 영역이 가려져 보이지 않는다.
따라서, 디스플레이 장치(100)는 사용자(40)가 위치한 방향에 따라 디스플레이(110)에 표시해야 할 벽면(20)의 일부 영역에 대응하는 영상의 크기 및 위치를 달리한다.
도 9는 본 개시의 일 실시예에 따른 가려진 벽면의 일부 영역의 크기를 계산하는 방법을 설명하기 위한 도면이다.
도 9를 참조하면, 디스플레이 장치(100)는 디스플레이 장치(100)의 전면에 위치한 디스플레이(110)의 폭의 길이 W(90)을 저장하고 있다.
그리고, 디스플레이 장치(100)는 센서(140)를 이용하여 벽면(20)으로부터 떨어진 거리 Dw(31)를 측정한다. 그리고, 디스플레이 장치(100)는 전방 카메라(120)를 이용하여, 사용자(40')를 촬영하고, 촬영된 사용자의 영상으로부터 사용자의 위치를 판단한다. 판단된 사용자(40')의 위치는 디스플레이(110)의 중심으로부터 거리가 DL(81)이고, 디스플레이(110)의 중심에 수직한 수직축으로부터 디스플레이(110) 평면의 너비 방향으로 θ(85) 만큼 회전한 방향이다.
디스플레이 장치(100)는 수직축 상의 DL(81) 만큼 떨어진 거리에 위치한 사용자(40)가 디스플레이 장치(100)의 전면 전체를 바라보는 시야각 α을 계산한다. 구체적으로, 프로세서(150)는 계산된 사용자의 거리 DL(81)만큼 떨어진 위치에서 디스플레이(110)를 보는 가상의 사용자(40)의 시야각 α를 계산할 수 있다.
시야각 α를 구하기 위한 수식은 다음과 같다.
Figure 112015106484968-pat00001
도 9에 도시된 좌표계에서, 수직축을 기준으로 오른쪽 회전하는 각도는 양수, 왼쪽 회전하는 각도는 음수로 오리엔테이션을 정의하기로 한다.
디스플레이 장치(100)는 디스플레이(110)의 좌우에 사용자(40')에게 보이지 않는 사각지대 각도를 계산한다. 구체적으로, 프로세서(150)는 계산된 시야각(α, -α)에 사용자(40')가 위치한 방향의 각도 θ(85)를 가산한다.
이후 디스플레이 장치(100)는 다음과 같은 수식에 기초하여, 사용자(40')의 위치에서 디스플레이 장치(100)가 위치하는 방향에 존재하는 벽면(20) 중 디스플레이 장치(100)에 의해 가려진 벽면(20)의 일부 영역의 폭 Ds(91)을 계산한다.
Figure 112015106484968-pat00002
이상과 동일한 방식으로 디스플레이 장치(100)는 디스플레이의 높이의 길이를 알고 있고, 사용자(40')가 디스플레이(110)의 높이 방향으로 회전한 각도를 높이 방향의 시야각에 가산하여, 디스플레이 장치(100)에 의해 가려진 벽면(20)의 일부 영역의 높이를 계산할 수 있다.
디스플레이 장치(100)는 계산된 폭 Ds(91) 및 높이로부터, 디스플레이(110)에 표시할 벽면(20)의 일부 영역의 면적을 계산할 수 있다. 그리고, 디스플레이 장치(100)는 후방의 벽면(20)을 촬영하는 후방 카메라(130)의 위치 및 촬영 범위로부터, 촬영된 영상 중 계산된 면적의 일부 영역에 대응하는 위치를 결정할 수 있다.
도 10은 본 개시의 일 실시예에 따른 디스플레이 장치에서 출력되는 일부 영상을 설명하기 위한 도면이다.
도 10을 참조하면, 디스플레이 장치(100)는 후방의 벽면을 촬영하여 촬영된 벽면의 영상(1010)을 획득한다.
그리고 디스플레이 장치(100)는 촬영된 벽면의 영상(1010) 중 상기 사용자의 위치(40)를 기준으로 디스플레이 장치(100)가 위치하는 방향에 존재하는 벽면의 일부 영역에 대응하는 영상(1020)을 표시한다.
도 10에 도시된 바와 같이, 디스플레이에 표시되는 영상은 사용자의 위치(40)를 나타내는 한 지점으로부터 디스플레이 장치(100)의 전면을 향하여 프로젝션하였을 때, 촬영된 벽면의 영상(1010) 중 디스플레이 장치(100)에 의해 가려진 벽면의 일부 영역에 대응하는 영상(1020)이다.
도 11은 본 개시의 다른 실시예에 따른 디스플레이 장치의 구성을 설명하기 위한 블록도이다.
도 11을 참조하면, 디스플레이 장치(100-2)는 디스플레이(110), 전방 카메라(120), 후방 카메라(130), 센서부(140), 프로세서(150), 저장부(160), 통신부(170) 및 조도 센서(180)를 포함한다.
디스플레이(110)는 화면을 표시한다. 또한, 디스플레이(110)는 디스플레이 장치(100-2)의 전면에 위치한다. 디스플레이(110)의 구체적인 구성 및 기능은 도 2의 디스플레이(110)와 동일한바 중복 설명은 생략한다.
전방 카메라(120)는 디스플레이 장치(100-2)의 전방에 위치한 사용자를 촬영한다. 전방 카메라(120)의 구체적인 구성 및 기능은 도 2의 전방 카메라(120)와 동일한바 중복 설명은 생략한다.
후방 카메라(130)는 디스플레이 장치(100-2)의 후방에 위치한 벽면을 촬영한다. 후방 카메라(130)의 구체적인 구성 및 기능은 도 2의 후방 카메라(130)와 동일한바 중복 설명은 생략한다.
센서부(140)는 디스플레이 장치(100-2)와 벽면 사이의 거리를 측정한다. 센서부(140)의 구체적인 구성 및 기능은 도 2의 센서부(140)와 동일한바 중복 설명은 생략한다.
저장부(160)는 영상 데이터를 저장한다. 구체적으로, 저장부(160)는 벽면을 나타내는 다수의 영상을 축적한 데이터 베이스를 포함할 수 있다. 가령, 저장부(160)는 벽에 바르는 벽지를 나타내는 영상들을 저장할 수 있다.
저장부(160)는 여러 응용 프로그램들을 저장할 수 있다. 가령, 저장부(160)는 영상 편집을 위한 기능을 제공하는 프로그램, 방송 신호 수신 및 출력 프로그램, 비디오 및 오디오 출력 설정 프로그램, 벽면 촬영 주기 설정 프로그램, 상술한 촬영 영상의 배럴 왜곡 및 키스톤 왜곡을 보정하기 위한 프로그램을 저장할 수 있다. 또한, 저장부(160)는 후술할 벽면 영상에 무늬 및 색상을 분석하기 위한 영상 처리 프로그램을 포함할 수 있다.
저장부(160)는 디스플레이 장치(100-2)에 내장되는 보조 기억 장치로 구현될 수 있다. 가령, 저장부(160)는 하드 디스크 드라이브 및/또는 솔리드 스테이트 드라이브로 구현될 수 있다. 저장부(160)는 외장의 착탈 가능한 이동식 디스크로 구현될 수 있다. 가령, 저장부(160)는 USB 통신 방식을 지원하는 플래시 메모리 디스크로 구현될 수 있다. 저장부(160)는 물리적 기억 장치뿐만 아니라, 네트워크 통신을 통한 웹서버로 구현될 수 있다.
통신부(170)는 통신을 수행한다. 구체적으로, 통신부(170)는 디스플레이 장치(100-2)의 외부 기기와의 통신을 위한 인터페이스를 제공한다. 통신부(170)는 사용자 단말 또는 원격 제어기와 같은 휴대 장치와 통신할 수 있다. 또한, 통신부(170)는 네트워크를 통한 외부의 서버들과 통신할 수 있다.
통신부(170)는 와이파이 칩, 블루투스 칩, NFC칩, 무선 통신 칩 등과 같은 다양한 통신 칩을 포함할 수 있다. 여기서 와이파이 칩, 블루투스 칩, NFC 칩은 각각 WiFi 방식, 블루투스 방식, NFC 방식으로 통신을 수행할 수 있다. NFC 칩은 135kHz, 13.56MHz, 433MHz, 860~960MHz, 2.45GHz 등과 같은 다양한 RF-ID 주파수 대역들 중에서 13.56MHz 대역을 사용하는 NFC(Near Field Communication) 방식으로 통신을 수행할 수 있다. 와이파이 칩이나 블루투스 칩을 이용하는 경우에는 SSID 및 세션 키 등과 같은 각종 연결 정보를 먼저 송수신하여, 이를 이용하여 통신 연결한 후 통신을 수행할 수 있다. 무선 통신 칩은 IEEE, 지그비, 3G(3rd Generation), 3GPP(3rd Generation Partnership Project), LTE(Long Term Evoloution) 등과 같은 다양한 통신 규격에 따라 통신을 수행할 수 있다.
조도 센서(180)는 조도를 감지한다. 구체적으로, 조도 센서(180)는 주위 환경으로부터 입사되는 빛의 세기를 감지할 수 있다. 조도 센서(180)는 광전효과를 일으키는 광전 셀 또는 음극관으로 구현될 수 있다.
프로세서(150)는 디스플레이 장치(100-1)의 각 구성을 제어한다. 프로세서(150)는 도 2의 프로세서(150)의 구성 및 기능을 포함하는바 중복되는 설명은 생략한다.
도 2의 실시예에서, 프로세서(150)는 벽면을 촬영한 영상의 일부 영역을 디스플레이(110)에 표시하였다. 다른 실시예에서, 프로세서(150)는 벽면을 촬영한 영상에 기초하여, 다른 영상을 디스플레이(110)에 표시할 수 있다.
프로세서(150)는 촬영된 벽면의 영상으로부터 벽면의 무늬 및 색상을 분석한다. 구체적으로, 프로세서(150)는 후방 카메라(130)에 의해 촬영된 벽면의 영상에 대하여 영상 처리를 수행하여, 벽면의 무늬 및 색상을 분석할 수 있다. 일 예에서, 프로세서(150)는 벽면의 영상에 대한 필터를 적용하여, 불연속적인 경계 부분에 해당하는 고주파 성분을 추출하는 edge detection을 수행할 수 있다. 또한, 프로세서(150)는 촬영된 벽면의 영상으로부터 구별 지을 수 있는 하나의 영역(blob)을 형성하는 레이블링(blob labeling)을 수행할 수 있다. 레이블링 처리가 수행된 벽면의 영상으로부터 벽면의 무늬는 인식될 수 있다. 또한, 프로세서(150)는 촬영된 벽면의 영상으로부터, 각 구별되는 영역들의 색상에 대응하는 컬러 코드를 검색할 수 있다.
프로세서(150)는 분석된 색상의 분석된 무늬를 포함하는 영상을 생성한다. 구체적으로, 프로세서(150)는 벽면의 일부 영역에 대응하는 영상을 분석된 무늬 및 색상을 이용하여 생성할 수 있다.
구체적으로, 프로세서(150)는 촬영된 영상으로부터 분석된 무늬를 갖는 영상을 생성하고, 생성된 영상에 분석된 적어도 하나의 색상을 입힌 벽지 영상을 생성할 수 있다. 그리고 프로세서(150)는 사용자의 위치 및 디스플레이 장치(100-2)와 벽면 사이의 거리에 기초하여, 생성된 영상 중 사용자의 위치를 기준으로 디스플레이 장치(100-2)가 위치하는 방향에 존재하는 벽면의 일부 영역에 대응하는 영상을 표시하도록 디스플레이(110)를 제어할 수 있다. 한편, 프로세서(150)는 사용자의 위치에서 디스플레이 장치(100-2)에 의해 가려진 벽면의 일부 영역에 대응하는 무늬 및 색상으로 벽지 영상을 생성하고, 생성된 영상을 표시하도록 디스플레이(110)를 제어할 수 있다.
다른 실시예에서, 프로세서(150)는 기저장된 영상 중 분석된 무늬를 갖는 영상을 검색할 수 있다. 구체적으로, 프로세서(150)는 저장부(160)의 데이터 베이스에 기저장된 영상들 중 분석된 무늬를 갖는 영상을 검색할 수 있다. 여기서, 프로세서(150)는 완전 동일한 무늬가 아니더라도 촬영된 영상과 기저장된 영상간의 유사도에 비추어 가장 유사한 무늬를 갖는 영상을 검색할 수 있다.
그리고 프로세서(150)는 사용자의 위치 및 디스플레이 장치(100-2)와 벽면 사이의 거리에 기초하여, 검색된 영상 중 사용자의 위치를 기준으로 디스플레이 장치(100-2)가 위치하는 방향에 존재하는 벽면의 일부 영역에 대응하는 영상을 표시하도록 디스플레이(110)를 제어할 수 있다. 추가적으로 프로세서(150)는 검색된 영상이 촬영된 벽면의 영상과 색상이 다르면, 검색된 영상의 색상을 바꾸는 처리를 수행할 수 있다. 한편, 프로세서(150)는 검색된 벽지 영상을 사용자의 위치에서 디스플레이 장치(100-2)에 의해 가려진 벽면의 일부 영역에 대응하도록 벽지 영상의 복제 및 재배열하는 편집을 수행하고, 편집된 영상을 표시하도록 디스플레이(110)를 제어할 수 있다.
프로세서(150)는 주위 광량에 따라 디스플레이(110)가 영상을 표시하는 밝기를 조절할 수 있다. 구체적으로, 프로세서(150)는 조도 센서(180)에 의해 감지된 광량에 따라 벽면의 일부 영역에 대응하는 영상을 표시하는 밝기를 조절하도록 디스플레이(110)를 제어할 수 있다. 디스플레이 장치(100-2)는 후방 카메라(130)에 의해 지속적으로 또는 기설정된 주기로 반복하여 벽면을 촬영할 수 있다. 이 경우에는 디스플레이 장치(100-2)에서 출력되는 영상이 어둡고 밝은 조명의 변화에 따라 달라질 수 있다. 이와 달리, 디스플레이 장치(100-2)는 후방 카메라(130)에 의해 촬영된 벽면의 영상을 저장하고, 저장된 영상에 기초하여 벽면의 일부 영역에 대응하는 영상을 표시할 수 있다. 이 경우에는 조도 센서(180)가 조명의 밝기 등 주위의 광량을 감지하여, 감지된 광량에 따라 디스플레이 장치(100-2)에서 출력되는 영상의 밝기를 다르게 할 수 있다.
이상의 일 실시예에 따른 디스플레이 장치(100-2)는 저성능의 후방 카메라(130)를 사용하더라도 고화질의 생성된 벽면의 영상을 표시할 수 있다. 또한, 디스플레이 장치(100-2)는 지속적 또는 주기적인 영상 촬영에 의한 전력 소모를 회피하고, 조도 센서(180)를 이용하여 주위 밝기에도 조화되는 벽면의 영상을 표시할 수 있다.
도 12는 본 개시의 일 실시예에 따른 영상 표시 방법을 설명하기 위한 도면이다.
도 12를 참조하면, 영상 표시 방법은 먼저, 디스플레이 장치의 전방에 위치한 사용자 및 후방에 위치한 벽면을 촬영한다(S1210). 구체적으로, 디스플레이 장치는 카메라를 이용하여 전방의 하나 또는 두 명 이상의 사용자 및 설치된 자리의 후방에 위치한 벽면을 촬영할 수 있다.
다음으로, 디스플레이 장치와 벽면 사이의 거리를 측정한다(S1220). 구체적으로, 디스플레이 장치는 촬영된 벽면과의 거리를 센서를 이용하여 측정할 수 있다.
그리고 사용자를 촬영한 영상에 기초하여 사용자의 위치를 판단한다(S1230). 구체적으로, 디스플레이 장치는 전방의 촬영된 사용자의 거리 및 방향을 포함하는 위치를 판단할 수 있다. 이를 위하여, S1230 단계는, 사용자를 촬영한 영상에 기초하여, 디스플레이 장치로부터 사용자의 위치까지의 방향 및 거리를 계산하는 단계를 포함할 수 있다. 보다 구체적으로, 디스플레이 장치는 사용자를 촬영한 영상에 기초하여, 디스플레이의 중심을 기준으로, 디스플레이의 접평면의 수직축으로부터 사용자의 위치의 방향으로 회전한 각도 및 디스플레이의 중심으로부터 사용자의 위치까지의 거리를 계산할 수 있다.
다음으로, 사용자의 위치 및 디스플레이 장치와 벽면 사이의 거리에 기초하여, 촬영된 벽면의 영상 중 사용자의 위치를 기준으로 디스플레이 장치가 위치하는 방향에 존재하는 벽면의 일부 영역에 대응하는 영상을 표시한다(S1240). 구체적으로, 디스플레이 장치는 사용자의 위치 및 벽면과의 거리에 기초하여 달라지는 벽면의 일부 영역에 대응하는 영상을 표시할 수 있다. 여기서, 디스플레이 장치는 계산된 사용자의 방향으로부터 촬영된 벽면의 영상 중 벽면의 일부 영역에 대응하는 영상의 위치를 결정하고, 계산된 사용자의 거리 및 디스플레이 장치의 전면의 넓이의 비로부터, 측정된 벽면까지의 거리를 이용하여, 촬영된 벽면의 영상 중 벽면의 일부 영역에 대응하는 영상의 크기를 결정하고, 결정된 위치 및 크기에 따른 영상을 표시할 수 있다. 또는, 디스플레이 장치는 디스플레이의 접평면의 수직축 상의 계산된 사용자의 거리에서 디스플레이 장치의 전면 전체를 바라보는 시야각을 계산하고, 계산된 시야각에서 사용자의 회전한 각도를 가산하였을 때의 디스플레이 장치에 의해 가려진 벽면의 일부 영역의 너비와 높이를 계산하고, 촬영된 영상 중 계산된 너비와 높이에 대응하는 크기의 영상을 표시할 수 있다.
위 영상 표시 방법에서 S1210 단계에 후방을 촬영하기 위한 후방 카메라는 광각 렌즈를 포함할 수 있고, 이때, S1240 단계에는 광각 렌즈로 인한 촬영된 벽면의 영상의 배럴 왜곡(barrel distortion)을 보정하는 처리가 더 수행될 수 있다.
한편, S1210 단계에 후방을 촬영하기 위한 후방 카메라는 디스플레이 장치의 전면에 위치한 디스플레이의 접평면의 수직축과 각을 이루는 방향으로 후방을 촬영할 수 있다. 이때, S1240 단계에는 기울어진 촬영 방향으로 인한 상기 촬영된 벽면의 영상의 키스톤 왜곡을 보정하는 처리가 더 수행될 수 있다.
다른 실시예에서, 영상 표시 방법은 촬영된 벽면의 영상으로부터 벽면의 무늬 및 색상을 분석하는 단계를 더 포함하고, S1240 단계는 분석된 색상의 분석된 무늬를 포함하는 영상을 생성하고, 생성된 영상 중 사용자의 위치를 기준으로 디스플레이 장치가 위치하는 방향에 존재하는 벽면의 일부 영역에 대응하는 영상을 표시할 수 있다. 또는 S1240 단계는 기저장된 영상 중 상기 분석된 무늬를 갖는 영상을 검색하고, 검색된 영상 중 사용자의 위치를 기준으로 디스플레이 장치가 위치하는 방향에 존재하는 벽면의 일부 영역에 대응하는 영상을 표시할 수 있다.
한편, 영상 표시 단계는 광량을 감지하는 단계를 더 포함하고, S1240 단계는 감지된 광량에 따라 벽면의 일부 영역에 대응하는 영상을 표시하는 밝기를 조절하는 단계를 더 포함할 수 있다.
이상의 일 실시예에 따른 영상 표시 방법은 디스플레이 장치에서 후방의 벽면과 조화되는 가려진 벽면의 일부 영역에 대응하는 영상을 출력시킨다.
도 13은 본 개시의 일 실시예에 따른 디스플레이 시스템을 설명하기 위한 도면이다.
도 13을 참조하면, 사용자(1310)는 사용자 단말 장치(200)를 이용하여 벽면(20)에 부착된 마커(1320)를 촬영한다. 구체적으로, 사용자(1310)는 디스플레이 장치를 위한 특정 어플리케이션을 실행하여 벽면(20)에 부착된 마커(1320)를 촬영한다.
사용자 단말 장치(200)는 촬영된 영상 중 마커(1320)에 의해 정의되는 영역을 식별한다. 구체적으로, 사용자 단말 장치(200)는 촬영 후 획득된 벽면(20)의 영상 중 마커(1320)를 인식하고, 인식된 마커(1320)에 의해 정의되는 네 모서리 안의 영역을 식별할 수 있다.
사용자(1310)는 디스플레이 장치를 마커(1320)가 부착되었던 벽면(20)의 영역에 건다. 구체적으로, 디스플레이 장치는 벽걸이 형이고, 마커(1320)는 디스플레이 장치를 걸고자 하는 영역을 나타낸다. 마커(1320)는 얇은 시트에 그려진 표식일 수 있다. 또는 마커(1320)는 디스플레이 장치(1320)를 벽에 걸기 위한 부재에 그려진 표식 또는 부재의 형상일 수 있다.
사용자 단말 장치(200)는 촬영된 영상 중 마커(1320)에 의해 정의되는 영역에 대응하는 영상을 디스플레이 장치로 전송한다. 즉, 사용자 단말 장치(200)는 디스플레이 장치를 벽면(20)에 설치시 가려질 벽면의 영역에 대응하는 영상을 마커(1320)에 의해 식별하고, 식별된 마커(1320)에 대응하는 영상을 디스플레이 장치로 전송한다.
디스플레이 장치는 사용자 단말 장치(200)로부터 수신한 영상을 표시한다.
이상에서는, 사용자 단말 장치(200)가 편집한 영상을 디스플레이 장치가 수신하는 것으로 설명하였으나, 다른 실시예에서, 사용자 단말 장치(200)는 촬영한 영상을 디스플레이 장치에 전송하고, 디스플레이 장치는 마커에 의해 정의된 영역을 식별하여, 수신한 영상 중 벽면(20)의 일부 영역에 대응하는 영상을 표시할 수 있다.
이상과 같은 일 실시예에 따른 디스플레이 시스템은 디스플레이 장치가 매우 얇고 벽면으로부터 매우 근접한 거리에 설치되는 경우에도, 사용자 단말 장치를 이용하여 디스플레이 장치에서 벽면과 조화되는 영상을 출력시킬 수 있다.
도 14는 도 13의 디스플레이 시스템을 구성하는 사용자 단말 장치의 구성을 설명하기 위한 도면이다.
도 14를 참조하면, 사용자 단말 장치(200)는 통신 인터페이스부(210), 촬영부(220) 및 프로세서(230)를 포함한다.
통신 인터페이스부(210)는 외부 기기와의 통신을 수행한다. 구체적으로, 통신 인터페이스부(210)는 디스플레이 장치와의 통신을 수행할 수 있다. 통신 인터페이스부(210)를 통한 디스플레이 장치와의 통신은 단말간 직접 통신 또는 집안에 구축된 홈 네트워크 또는 상업용 네트워크를 거쳐 수행될 수 있다.
통신 인터페이스부(210)는 유선 및 무선 통신을 위한 통신 포트와 통신 칩을 포함할 수 있다. 통신 인터페이스부(210)의 구성 및 기능은 도 11의 통신부(170)의 그것과 대응되는바 구체적인 설명은 생략한다.
촬영부(220)는 피사체를 촬영한다. 구체적으로, 촬영부(220)는 벽면에 부착된 마커를 포함하는 피사체를 촬영할 수 있다. 촬영부(220)의 구성 및 기능은 도 2 및 도 11의 전방 카메라(120) 및 후방 카메라(130)의 그것과 대응되는바 구체적인 설명은 생략한다.
프로세서(230)는 사용자 단말 장치(200)의 각 구성을 제어한다. 구체적으로, 프로세서(230)는 촬영된 영상 중 적어도 일부 영역을 디스플레이 장치로 전송하여 표시시키기 위한 기능을 수행하도록 각 구성을 제어할 수 있다. 프로세서(230)의 구성 및 기능은 도 2 및 도 11의 프로세서(150)의 그것과 대응되는바 구체적인 설명은 생략한다.
프로세서(230)는 촬영된 영상 중 상기 마커에 의해 정의되는 영역에 대응하는 영상을 상기 디스플레이 장치로 전송한다. 구체적으로, 프로세서(230)는 촬영부(220)에서 촬영된 영상 중 마커를 인식하고, 인식된 마커를 기준으로 디스플레이 장치에 표시될 영상의 크기 및 위치를 결정하고, 결정된 크기 및 위치로 편집된 영상을 디스플레이 장치로 전송할 수 있다.
보다 구체적으로, 프로세서(230)는 촬영된 영상으로부터 기저장된 마커의 모양 및 색상을 인식하는 처리를 수행하고, 편집할 영역을 결정하고, 결정된 영역을 따라 벽면에 대응하는 영상을 편집할 수 있다.
다른 실시예에서, 프로세서(230)는 마커에 의해 정의된 영역에 대응하는 영상을 생성하거나, 검색하고, 생성 또는 검색된 영상을 재구성하여 디스플레이 장치로 전송할 수 있다. 이를 위하여 프로세서(230)는 촬영된 영상의 무늬 및 색상을 분석할 수 있다.
이상과 같은 사용자 단말 장치(200)는 디스플레이 장치에서 직접 벽면의 촬영이 어려운 경우에 벽면의 일부 영역에 대응하는 영상을 디스플레이 장치로 제공할 수 있다.
도 15는 도 13의 디스플레이 시스템의 영상 표시 방법을 설명하기 위한 시퀸스도이다.
도 15를 참조하면, 디스플레이 시스템은 사용자 단말 장치(200) 및 디스플레이 장치(100)를 포함한다. 여기서, 디스플레이 장치(100)는 도 11의 디스플레이 장치(100-2)의 구성 중 적어도 후방 카메라(130)가 생략될 수 있다.
사용자 단말 장치(200)는 마커가 부착된 벽면을 촬영한다(S1510). 그리고 사용자 단말 장치(200)는 촬영된 벽면의 영상으로부터 마커를 인식한다(S1520).
다음으로, 사용자 단말 장치(200)는 인식된 마커를 기준으로 마커에 의해 정의되는 영역을 따라 촬영된 벽면의 영상을 편집한다(S1530). 가령, 사용자 단말 장치(200)는 디스플레이 장치(100)가 설치될 자리에 투명 필름을 부착한 벽면을 촬영하고, 촬영된 영상으로부터 필름에 그려진 마크를 인식한다. 그리고, 사용자 단말 장치(200)는 인식된 마크를 네 모서리로 하는 사각형의 영역을 따라 촬영된 벽면의 영상을 편집한다. 여기서, 마크는 디스플레이 장치의 디스플레이의 크기에 대응되는 영역의 네 모서리 부분에 표시될 수 있다.
이후, 사용자 단말 장치(200)는 편집된 영상을 디스플레이 장치(100)로 전송한다(S1540).
사용자 단말 장치(200)로부터 영상을 수신한 디스플레이 장치(100)는 수신된 영상을 표시한다(S1550). 가령, 디스플레이 장치(100)는 사용자 단말 장치(200)로부터 수신된 영상이 벽면에 대응하는 영상인지 여부를 확인하고, 마커의 영역을 따라 편집된 벽면의 영상을 전체화면으로 표시한다.
이상과 같은 영상 표시 방법은 벽에 밀착된 박형의 디스플레이 장치에서 별도의 구성의 확장 없이 벽면과 조화된 영상을 출력시킬 수 있다.
도 16은 본 개시의 일 실시예에 따른 디스플레이 장치의 화면의 두 예시를 도시한다.
도 16을 참조하면, 디스플레이 장치(100)는 후방의 벽면(20) 중 디스플레이 장치(100)에 의하여 가려진 일부 영역에 대응하는 영상(1610)을 표시한다.
그리고 디스플레이 장치(100)는 벽면의 일부 영역에 대응하는 영상을 배경으로 다른 컨텐츠를 함께 표시할 수 있다. 도 16(a)를 참조하면, 디스플레이 장치(100)는 벽면의 영상(1610)을 배경으로, 다른 영상(1620)을 합성하여 표시한다. 여기서, 표시되는 영상(1620)은 정적인 그림 또는 3차원의 입체감을 주는 동영상 애니메이션일 수 있다.
도 16(b)를 참조하면, 디스플레이 장치(100)는 벽면의 영상(1610)을 배경으로, 시계 어플리케이션을 실행한 위젯(1630, 1640)을 함께 표시한다. 도 16(a)의 도시된 예시에서 디스플레이 장치(100)는 요일과 현재 시간(1630) 및 알람이 설정된 상태를 나타내는 아이콘(1640)을 표시하고 있다.
이상과 같은, 디스플레이 장치의 화면 표시 방식은 디스플레이 장치의 활용성 및 기능성을 확장시킬 수 있다.
한편, 본 개시의 실시 예를 구성하는 모든 구성 요소들이 하나로 결합하거나 결합하여 동작하는 것으로 설명되었다고 해서, 본 발명이 반드시 이러한 실시 예에 한정되는 것은 아니다. 즉, 본 발명의 목적 범위 안에서라면, 그 모든 구성 요소들이 하나 이상으로 선택적으로 결합하여 동작할 수도 있다. 또한, 그 모든 구성요소들이 각각 하나의 독립적인 하드웨어로 구현될 수 있지만, 각 구성 요소들의 그 일부 또는 전부가 선택적으로 조합되어 하나 또는 복수 개의 하드웨어에서 조합된 일부 또는 전부의 기능을 수행하는 프로그램 모듈을 갖는 컴퓨터 프로그램으로서 구현될 수도 있다. 그 컴퓨터 프로그램을 구성하는 코드들 및 코드 세그먼트들은 본 발명의 기술 분야의 당업자에 의해 용이하게 추론될 수 있을 것이다. 이러한 컴퓨터 프로그램은 컴퓨터가 읽을 수 있는 비일시적 저장매체(non-transitory computer readable media)에 저장되어 컴퓨터에 의하여 읽혀지고 실행됨으로써, 본 발명의 실시 예를 구현할 수 있다.
여기서 비일시적 판독 가능 기록매체란, 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라, 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로, 상술한 프로그램들은 CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리 카드, ROM 등과 같은 비일시적 판독가능 기록매체에 저장되어 제공될 수 있다.
이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어서는 안 될 것이다.
100: 디스플레이 장치 110: 디스플레이
120: 전방 카메라 130: 후방 카메라
140: 센서부 150: 프로세서
160: 저장부 170: 통신부
180: 조도 센서 200: 사용자 단말 장치
210: 통신 인터페이스부 220: 촬영부
230: 프로세서 1320: 마커

Claims (20)

  1. 디스플레이 장치에 있어서,
    상기 디스플레이 장치의 전면에 위치한 디스플레이;
    상기 디스플레이 장치의 전방에 위치한 사용자를 촬영하는 전방 카메라;
    상기 디스플레이 장치의 후방에 위치한 벽면을 촬영하는 후방 카메라;
    상기 디스플레이 장치와 상기 벽면 사이의 거리를 측정하는 센서부; 및
    상기 사용자를 촬영한 영상에 기초하여 상기 사용자의 위치를 판단하고, 상기 사용자의 위치 및 상기 디스플레이 장치와 상기 벽면 사이의 거리에 기초하여, 상기 촬영된 벽면의 영상 중 상기 사용자의 위치를 기준으로 상기 디스플레이 장치가 위치하는 방향에 존재하는 상기 벽면의 일부 영역에 대응하는 영상을 표시하도록 상기 디스플레이를 제어하는 프로세서;를 포함하고,
    상기 프로세서는,
    상기 사용자를 촬영한 영상에 기초하여, 상기 디스플레이 장치로부터 상기 사용자의 위치까지의 방향 및 거리를 계산하고,
    상기 계산된 방향에 기초하여, 상기 촬영된 벽면의 영상 중 상기 벽면의 일부 영역에 대응하는 영상을 식별하고,
    상기 계산된 거리에 기초하여 상기 촬영된 벽면의 영상 중 상기 벽면의 일부 영역에 대응하는 영상의 크기를 식별하고,
    상기 식별된 영상 또는 상기 식별된 영상의 크기 중 적어도 하나에 기초하여 상기 벽면의 일부 영역에 대응하는 영상을 표시하도록 상기 디스플레이를 제어하는, 디스플레이 장치.
  2. 제1항에 있어서,
    상기 벽면의 일부 영역은,
    상기 사용자의 위치를 기준으로 상기 디스플레이 장치가 위치하는 방향에 존재하는 상기 벽면 중에서, 상기 디스플레이 장치에 의해 가려진 상기 벽면의 일부 영역인, 디스플레이 장치.
  3. 제1항에 있어서,
    상기 프로세서는,
    상기 계산된 방향으로부터 상기 촬영된 벽면의 영상 중 상기 벽면의 일부 영역에 대응하는 영상의 위치를 결정하고,
    상기 계산된 거리 및 상기 디스플레이 장치의 전면의 넓이의 비로부터, 상기 측정된 벽면까지의 거리를 이용하여, 상기 촬영된 벽면의 영상 중 상기 벽면의 일부 영역에 대응하는 영상의 크기를 결정하고,
    상기 결정된 위치 및 크기에 따른 영상을 표시하도록 상기 디스플레이를 제어하는, 디스플레이 장치.
  4. 제1항에 있어서,
    상기 프로세서는,
    상기 사용자를 촬영한 영상에 기초하여, 상기 디스플레이의 중심을 기준으로, 상기 디스플레이의 접평면의 수직축으로부터 상기 사용자의 위치의 방향으로 회전한 각도 및 상기 디스플레이의 중심으로부터 상기 사용자의 위치까지의 거리를 계산하고,
    상기 수직축 상의 상기 계산된 거리에서 상기 디스플레이 장치의 전면 전체를 바라보는 시야각을 계산하고,
    상기 계산된 시야각에서 상기 회전한 각도를 가산하였을 때의 상기 디스플레이 장치에 의해 가려진 상기 벽면의 일부 영역의 너비와 높이를 계산하고,
    상기 촬영된 영상 중 상기 계산된 너비와 높이에 대응하는 크기의 영상을 표시하도록 상기 디스플레이를 제어하는, 디스플레이 장치.
  5. 제1항에 있어서,
    상기 후방 카메라는 광각 렌즈를 포함하고,
    상기 프로세서는,
    상기 광각 렌즈로 인한 상기 촬영된 벽면의 영상의 배럴 왜곡(barrel distortion)을 보정하고, 상기 보정된 벽면의 영상 중 상기 벽면의 일부 영역에 대응하는 영상을 표시하도록 상기 디스플레이를 제어하는, 디스플레이 장치.
  6. 제1항에 있어서,
    상기 후방 카메라는 상기 디스플레이의 접평면의 수직축과 각을 이루는 방향으로 상기 디스플레이 장치의 후방을 촬영하고,
    상기 프로세서는,
    상기 촬영 방향으로 인한 상기 촬영된 벽면의 영상의 키스톤 왜곡을 보정하고, 상기 보정된 벽면의 영상 중 상기 벽면의 일부 영역에 대응하는 영상을 표시하도록 상기 디스플레이를 제어하는, 디스플레이 장치.
  7. 제1항에 있어서,
    상기 프로세서는,
    상기 촬영된 벽면의 영상으로부터 상기 벽면의 무늬 및 색상을 분석하고,
    상기 분석된 색상의 상기 분석된 무늬를 포함하는 영상을 생성하고,
    상기 사용자의 위치 및 상기 디스플레이 장치와 상기 벽면 사이의 거리에 기초하여, 상기 생성된 영상 중 상기 사용자의 위치를 기준으로 상기 디스플레이 장치가 위치하는 방향에 존재하는 상기 벽면의 일부 영역에 대응하는 영상을 표시하도록 상기 디스플레이를 제어하는, 디스플레이 장치.
  8. 제1항에 있어서,
    상기 프로세서는,
    상기 촬영된 벽면의 영상으로부터 상기 벽면의 무늬 및 색상을 분석하고,
    기저장된 영상 중 상기 분석된 무늬를 갖는 영상을 검색하고,
    상기 사용자의 위치 및 상기 디스플레이 장치와 상기 벽면 사이의 거리에 기초하여, 상기 검색된 영상 중 상기 사용자의 위치를 기준으로 상기 디스플레이 장치가 위치하는 방향에 존재하는 상기 벽면의 일부 영역에 대응하는 영상을 표시하도록 상기 디스플레이를 제어하는, 디스플레이 장치.
  9. 제1항에 있어서,
    상기 프로세서는,
    상기 벽면의 일부 영역에 대응하는 영상을 배경으로 하는 그림이나 애니메이션 또는 특정 어플리케이션을 실행한 위젯을 포함하는 화면을 표시하도록 상기 디스플레이를 제어하는, 디스플레이 장치.
  10. 제9항에 있어서,
    상기 디스플레이 장치는,
    광량을 감지하는 조도 센서;를 더 포함하고,
    상기 프로세서는
    상기 감지된 광량에 따라 상기 벽면의 일부 영역에 대응하는 영상을 표시하는 밝기를 조절하도록 상기 디스플레이를 제어하는, 디스플레이 장치.
  11. 디스플레이 장치의 영상 표시 방법에 있어서,
    상기 디스플레이 장치의 전방에 위치한 사용자 및 상기 디스플레이 장치의 후방에 위치한 벽면을 촬영하는 단계;
    상기 디스플레이 장치와 상기 벽면 사이의 거리를 측정하는 단계;
    상기 사용자를 촬영한 영상에 기초하여 상기 사용자의 위치를 판단하는 단계; 및
    상기 사용자의 위치 및 상기 디스플레이 장치와 상기 벽면 사이의 거리에 기초하여, 상기 촬영된 벽면의 영상 중 상기 사용자의 위치를 기준으로 상기 디스플레이 장치가 위치하는 방향에 존재하는 상기 벽면의 일부 영역에 대응하는 영상을 표시하는 단계;를 포함하고,
    상기 사용자의 위치를 판단하는 단계는,
    상기 사용자를 촬영한 영상에 기초하여, 상기 디스플레이 장치로부터 상기 사용자의 위치까지의 방향 및 거리를 계산하고,
    상기 표시하는 단계는,
    상기 계산된 방향에 기초하여, 상기 촬영된 벽면의 영상 중 상기 벽면의 일부 영역에 대응하는 영상을 식별하고,
    상기 계산된 거리에 기초하여 상기 촬영된 벽면의 영상 중 상기 벽면의 일부 영역에 대응하는 영상의 크기를 식별하고,
    상기 식별된 영상 또는 상기 식별된 영상의 크기 중 적어도 하나에 기초하여 상기 벽면의 일부 영역에 대응하는 영상을 표시하는 영상 표시 방법.
  12. 제11항에 있어서,
    상기 벽면의 일부 영역은,
    상기 사용자의 위치를 기준으로 상기 디스플레이 장치가 위치하는 방향에 존재하는 상기 벽면 중에서, 상기 디스플레이 장치에 의해 가려진 상기 벽면의 일부 영역인, 영상 표시 방법.
  13. 제11항에 있어서,
    상기 표시하는 단계는,
    상기 계산된 방향으로부터 상기 촬영된 벽면의 영상 중 상기 벽면의 일부 영역에 대응하는 영상의 위치를 결정하고,
    상기 계산된 거리 및 상기 디스플레이 장치의 전면의 넓이의 비로부터, 상기 측정된 벽면까지의 거리를 이용하여, 상기 촬영된 벽면의 영상 중 상기 벽면의 일부 영역에 대응하는 영상의 크기를 결정하고,
    상기 결정된 위치 및 크기에 따른 영상을 표시하는, 영상 표시 방법.
  14. 제11항에 있어서,
    상기 사용자의 위치를 판단하는 단계는,
    상기 사용자를 촬영한 영상에 기초하여, 상기 디스플레이의 중심을 기준으로, 상기 디스플레이의 접평면의 수직축으로부터 상기 사용자의 위치의 방향으로 회전한 각도 및 상기 디스플레이의 중심으로부터 상기 사용자의 위치까지의 거리를 계산하고,
    상기 표시하는 단계는,
    상기 수직축 상의 상기 계산된 거리에서 상기 디스플레이 장치의 전면 전체를 바라보는 시야각을 계산하고,
    상기 계산된 시야각에서 상기 회전한 각도를 가산하였을 때의 상기 디스플레이 장치에 의해 가려진 상기 벽면의 일부 영역의 너비와 높이를 계산하고,
    상기 촬영된 영상 중 상기 계산된 너비와 높이에 대응하는 크기의 영상을 표시하는, 영상 표시 방법.
  15. 제11항에 있어서,
    상기 벽면은 광각 렌즈를 포함하는 후방 카메라에 의해 촬영되고,
    상기 표시하는 단계는,
    상기 광각 렌즈로 인한 상기 촬영된 벽면의 영상의 배럴 왜곡(barrel distortion)을 보정하고, 상기 보정된 벽면의 영상 중 상기 벽면의 일부 영역에 대응하는 영상을 표시하는, 영상 표시 방법.
  16. 제11항에 있어서,
    상기 촬영하는 단계는,
    상기 디스플레이 장치의 전면에 위치한 디스플레이의 접평면의 수직축과 각을 이루는 방향으로 상기 디스플레이 장치의 후방을 촬영하고,
    상기 표시하는 단계는,
    상기 촬영 방향으로 인한 상기 촬영된 벽면의 영상의 키스톤 왜곡을 보정하고, 상기 보정된 벽면의 영상 중 상기 벽면의 일부 영역에 대응하는 영상을 표시하는, 영상 표시 방법.
  17. 제11항에 있어서,
    상기 표시하는 단계는,
    상기 촬영된 벽면의 영상으로부터 상기 벽면의 무늬 및 색상을 분석하고,
    상기 분석된 색상의 상기 분석된 무늬를 포함하는 영상을 생성하고,
    상기 사용자의 위치 및 상기 디스플레이 장치와 상기 벽면 사이의 거리에 기초하여, 상기 생성된 영상 중 상기 사용자의 위치를 기준으로 상기 디스플레이 장치가 위치하는 방향에 존재하는 상기 벽면의 일부 영역에 대응하는 영상을 표시하는, 영상 표시 방법.
  18. 제11항에 있어서,
    상기 표시하는 단계는,
    상기 촬영된 벽면의 영상으로부터 상기 벽면의 무늬 및 색상을 분석하고,
    기저장된 영상 중 상기 분석된 무늬를 갖는 영상을 검색하고,
    상기 사용자의 위치 및 상기 디스플레이 장치와 상기 벽면 사이의 거리에 기초하여, 상기 검색된 영상 중 상기 사용자의 위치를 기준으로 상기 디스플레이 장치가 위치하는 방향에 존재하는 상기 벽면의 일부 영역에 대응하는 영상을 표시하는, 영상 표시 방법.
  19. 제11항에 있어서,
    상기 표시하는 단계는,
    상기 벽면의 일부 영역에 대응하는 영상을 배경으로 하는 그림이나 애니메이션 또는 특정 어플리케이션을 실행한 위젯을 포함하는 화면을 표시하는, 영상 표시 방법.
  20. 제11항에 있어서,
    광량을 감지하는 단계;를 더 포함하고,
    상기 표시하는 단계는,
    상기 감지된 광량에 따라 상기 벽면의 일부 영역에 대응하는 영상을 표시하는 밝기를 조절하는 단계를 포함하는, 영상 표시 방법.
KR1020150153243A 2015-11-02 2015-11-02 디스플레이 장치 및 그의 영상 표시 방법 KR102489402B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020150153243A KR102489402B1 (ko) 2015-11-02 2015-11-02 디스플레이 장치 및 그의 영상 표시 방법
CN201680027366.5A CN107534751B (zh) 2015-11-02 2016-10-31 显示设备及其图像显示方法
PCT/KR2016/012416 WO2017078356A1 (ko) 2015-11-02 2016-10-31 디스플레이 장치 및 그의 영상 표시 방법
US15/761,692 US10467933B2 (en) 2015-11-02 2016-10-31 Display device and image displaying method therefor
EP16862372.6A EP3337161B1 (en) 2015-11-02 2016-10-31 Display device and image displaying method therefor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150153243A KR102489402B1 (ko) 2015-11-02 2015-11-02 디스플레이 장치 및 그의 영상 표시 방법

Publications (2)

Publication Number Publication Date
KR20170050995A KR20170050995A (ko) 2017-05-11
KR102489402B1 true KR102489402B1 (ko) 2023-01-18

Family

ID=58662547

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150153243A KR102489402B1 (ko) 2015-11-02 2015-11-02 디스플레이 장치 및 그의 영상 표시 방법

Country Status (5)

Country Link
US (1) US10467933B2 (ko)
EP (1) EP3337161B1 (ko)
KR (1) KR102489402B1 (ko)
CN (1) CN107534751B (ko)
WO (1) WO2017078356A1 (ko)

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3396226B1 (en) * 2017-04-27 2023-08-23 Advanced Digital Broadcast S.A. A method and a device for adjusting a position of a display screen
KR102349376B1 (ko) * 2017-11-03 2022-01-11 삼성전자주식회사 전자 장치 및 그의 영상 보정 방법
KR102471073B1 (ko) * 2017-12-18 2022-11-25 삼성전자주식회사 전자 장치 및 그 동작방법
KR102073674B1 (ko) * 2018-01-04 2020-02-05 삼성전자 주식회사 전자장치 및 그 제어방법
WO2019135475A1 (en) * 2018-01-04 2019-07-11 Samsung Electronics Co., Ltd. Electronic apparatus and control method thereof
KR102328121B1 (ko) * 2018-02-12 2021-11-17 삼성전자주식회사 전자 장치 및 그 동작 방법
KR102338900B1 (ko) 2018-02-13 2021-12-13 삼성전자주식회사 전자 장치 및 그 동작 방법
KR102338901B1 (ko) 2018-04-03 2021-12-13 삼성전자주식회사 전자 장치 및 그 동작 방법
CN108776606A (zh) * 2018-04-08 2018-11-09 中兴通讯股份有限公司 一种终端控制方法和装置、及终端
KR101974572B1 (ko) * 2018-04-18 2019-09-05 김재환 전자 벽지 시스템
KR101997743B1 (ko) * 2018-05-24 2019-10-01 주식회사 스마티웍스 인비저블 효과를 구현하기 위한 장치 및 방법
US11630485B2 (en) * 2018-09-10 2023-04-18 Apple Inc. Housing structures and input-output devices for electronic devices
KR102566738B1 (ko) * 2018-10-15 2023-08-16 삼성전자주식회사 전자 장치 및 그 제어 방법
WO2020110283A1 (ja) 2018-11-30 2020-06-04 マクセル株式会社 表示装置
EP3828872B1 (en) * 2019-11-28 2023-11-01 Panasonic Intellectual Property Management Co., Ltd. Information display device
US11869213B2 (en) * 2020-01-17 2024-01-09 Samsung Electronics Co., Ltd. Electronic device for analyzing skin image and method for controlling the same
CN113805824B (zh) 2020-06-16 2024-02-09 京东方科技集团股份有限公司 电子装置以及在显示设备上显示图像的方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006333301A (ja) * 2005-05-30 2006-12-07 Victor Co Of Japan Ltd テレビ通信装置
US20120013646A1 (en) * 2008-08-26 2012-01-19 Sharp Kabushiki Kaisha Image display device and image display device drive method
US20140267434A1 (en) * 2013-03-15 2014-09-18 Samsung Electronics Co., Ltd. Display system with extended display mechanism and method of operation thereof

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3297210B2 (ja) 1994-08-02 2002-07-02 三菱重工業株式会社 モニタを用いた距離検出装置
JP2003333301A (ja) * 2002-05-15 2003-11-21 Murata Mach Ltd 通信装置
KR20050066791A (ko) 2003-12-27 2005-06-30 김종학 컨텐츠 출력 기능을 갖는 텔레비전
KR20050073806A (ko) 2004-01-12 2005-07-18 엘지전자 주식회사 외부 전경을 표시하는 영상표시기기 및 그에따른 방법
KR20090075234A (ko) 2008-01-03 2009-07-08 주식회사 대우일렉트로닉스 인테리어 효과를 가지는 텔레비전
US20120218321A1 (en) * 2009-11-19 2012-08-30 Yasunori Ake Image display system
KR101620502B1 (ko) 2010-01-04 2016-05-23 엘지전자 주식회사 디스플레이 장치 및 그 제어방법
KR20120063987A (ko) 2010-12-08 2012-06-18 고현빈 디지털 창문
JP5784213B2 (ja) * 2011-03-29 2015-09-24 クアルコム,インコーポレイテッド 骨格追跡を使用した物理的表面上への仮想投影上での選択的な手のオクルージョン
CN103517106A (zh) 2012-06-25 2014-01-15 鸿富锦精密工业(深圳)有限公司 手持设备及其控制方法
KR102104350B1 (ko) 2013-05-16 2020-04-24 엘지전자 주식회사 영상 표시 기기 및 그의 동작 방법
US9288459B2 (en) 2013-06-17 2016-03-15 Carlos Francisco Luizetto Pinto Real-time correction/calibration system for the color spectrum contained on an image output (transmitted) from an image capture and output macro-system, according to a previously defined color spectrum reference
KR20150020409A (ko) 2013-08-14 2015-02-26 중앙대학교 산학협력단 사이클로마
WO2015056932A1 (en) 2013-10-17 2015-04-23 Samsung Electronics Co., Ltd. Display device and calibration method thereof
KR101571096B1 (ko) 2013-11-11 2015-11-23 주식회사 시공미디어 사용자 적응형 인터페이스 제공 시스템 및 방법
US10466858B2 (en) * 2013-12-01 2019-11-05 Upskill, Inc. Systems and methods for interacting with a virtual menu
US10015402B2 (en) * 2014-09-08 2018-07-03 Nintendo Co., Ltd. Electronic apparatus

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006333301A (ja) * 2005-05-30 2006-12-07 Victor Co Of Japan Ltd テレビ通信装置
US20120013646A1 (en) * 2008-08-26 2012-01-19 Sharp Kabushiki Kaisha Image display device and image display device drive method
US20140267434A1 (en) * 2013-03-15 2014-09-18 Samsung Electronics Co., Ltd. Display system with extended display mechanism and method of operation thereof

Also Published As

Publication number Publication date
CN107534751B (zh) 2020-08-11
US10467933B2 (en) 2019-11-05
WO2017078356A1 (ko) 2017-05-11
KR20170050995A (ko) 2017-05-11
CN107534751A (zh) 2018-01-02
US20180350281A1 (en) 2018-12-06
EP3337161A4 (en) 2018-11-14
EP3337161A1 (en) 2018-06-20
EP3337161B1 (en) 2019-10-23

Similar Documents

Publication Publication Date Title
KR102489402B1 (ko) 디스플레이 장치 및 그의 영상 표시 방법
KR102565513B1 (ko) 다중 기술 심도 맵 취득 및 융합을 위한 방법 및 장치
US9900500B2 (en) Method and apparatus for auto-focusing of an photographing device
KR102099635B1 (ko) 카메라의 가이드 제공 방법 및 그 전자 장치
JP6075122B2 (ja) システム、画像投影装置、情報処理装置、情報処理方法およびプログラム
WO2020238506A1 (zh) 电子装置的控制方法及电子装置
CN102722268B (zh) 光学信号输出、处理装置及方法以及成像装置及投影机
KR20120051209A (ko) 멀티미디어 장치의 디스플레이화면 제공 방법 및 그에 따른 멀티미디어 장치
JP2015526927A (ja) カメラ・パラメータのコンテキスト駆動型調整
US9432645B2 (en) Information processing method and electronic device
WO2019120156A1 (zh) 基于光标签的定位方法及***
TWI533256B (zh) 影像感測裝置與影像感測的方法
US10609305B2 (en) Electronic apparatus and operating method thereof
US10447998B2 (en) Power efficient long range depth sensing
US20190012569A1 (en) Multi-camera device
WO2020238482A1 (zh) 电子装置的控制方法及电子装置
KR20140046997A (ko) 편광 차분 카메라를 이용한 영상처리 시스템
TWM499621U (zh) 影像擷取裝置
US20240056692A1 (en) Flicker detection
US10609350B1 (en) Multiple frequency band image display system
JP2016191897A (ja) 表示装置及び制御方法
JP2017090957A (ja) 画像投影装置および画像投影システム
JP2011009804A (ja) 撮影装置、携帯端末、送信装置、撮影方法、およびプログラム
TW201800933A (zh) 可依據終端運動紅外線資訊調整圖像顯示角度的裝置及其方法
JP2016103061A (ja) 画像投影システム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
X091 Application refused [patent]
AMND Amendment
X701 Decision to grant (after re-examination)