KR101662357B1 - 표시 방법 및 표시 장치 - Google Patents

표시 방법 및 표시 장치 Download PDF

Info

Publication number
KR101662357B1
KR101662357B1 KR1020127005726A KR20127005726A KR101662357B1 KR 101662357 B1 KR101662357 B1 KR 101662357B1 KR 1020127005726 A KR1020127005726 A KR 1020127005726A KR 20127005726 A KR20127005726 A KR 20127005726A KR 101662357 B1 KR101662357 B1 KR 101662357B1
Authority
KR
South Korea
Prior art keywords
power saving
image
display
displayed
image display
Prior art date
Application number
KR1020127005726A
Other languages
English (en)
Other versions
KR20120050468A (ko
Inventor
에이지로 모리
유스께 사까이
겐이찌 오까다
하루오 오바
신고 쯔루미
유이찌 이이다
신이찌 하야시
아사꼬 다데누마
준이찌 쯔까모또
Original Assignee
소니 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 소니 주식회사 filed Critical 소니 주식회사
Publication of KR20120050468A publication Critical patent/KR20120050468A/ko
Application granted granted Critical
Publication of KR101662357B1 publication Critical patent/KR101662357B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4314—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for fitting data in a restricted space on the screen, e.g. EPG data in a rectangular grid
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • H04N21/4436—Power management, e.g. shutting down unused components of the receiver
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4882—Data services, e.g. news ticker for displaying messages, e.g. warnings, reminders
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/10—Special adaptations of display systems for operation with variable images
    • G09G2320/103—Detection of image changes, e.g. determination of an index representative of the image change
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2330/00—Aspects of power supply; Aspects of display protection and defect management
    • G09G2330/02—Details of power systems and of start or stop of display operation
    • G09G2330/021—Power management, e.g. power saving
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

본 발명은, 전력 절약 효과의 모니터링 표시를 실행할 때, 전력 절약 효과의 모니터링 표시를 행하지 않는 경우의 본래의 전력 절약 효과를 표시할 수 있는 표시 방법을 제공한다.
또한, 화상을 표시하는 표시 장치에 구비되는 화상 표시면 전방의 화상을 촬상함과 함께 화상 표시면 전방에 위치하는 동체의 존재를 검출하고, 촬상 화상에 대한 사람의 얼굴 유무의 해석 결과 및 동체의 검출 결과를 사용해서 화상 표시면의 전력 절약량을 포함한 표시 장치의 전력 절약량을 결정하고, 전력 절약량에 관한 정보를 상기 화상 표시면에 표시할 때에 화상 표시면에 상기 표시가 행해지지 않는 경우의 실제 전력 절약량을 도출하고, 화상 표시면에 전력 절약량으로서 표시하는, 표시 방법이 제공된다. 이에 의해, 전력 절약 효과의 모니터링 표시를 실행하고 있을 때, 전력 절약 효과의 모니터링 표시를 행하지 않는 경우의 본래 전력 절약 효과를 표시할 수 있게 된다.

Description

표시 방법 및 표시 장치{DISPLAYING METHOD AND DISPLAYING DEVICE}
본 발명은 표시 방법 및 표시 장치에 관한 것이다.
JEITA(Japan Electronics and Information Technology Industries Association: 사단 법인 전자 정보 기술 산업협회)의 조사에 의하면, 하루의 텔레비전 평균 시청 시간은 4.5시간이라고 한다. 그러나, 최근 라이프 스타일의 변화도 있어서, 그 4.5시간 동안 항상 텔레비전을 계속해서 보고 있는 것은 아님을 알고 있다.
예를 들어, 아침에 회사나 학교에 외출하는 준비를 하면서, 또는 식사를 하면서 텔레비전을 시청할 때 등은, 텔레비전의 화면을 계속 보고 있지 않고, 일기 예보 등의 음성에 의한 입력으로 충분히 프로그램이 방송되고 있을 때에는 시선을 떼고 있거나, 사람들과 이야기를 나누는 경우가 있다. 그리고, 시사 뉴스나 스포츠 뉴스 등에서 흘러나오는 흥미 있는 키워드를 계기로, 다시 텔레비전의 화면을 보기 시작하는 등의 행동을 하는 경우가 많다.
즉, 대표적인 텔레비전의 시청 형태로서, 아침에는 시계 대신 텔레비전이 켜져 있을 뿐이고, 또한 최근에는 밤에 PC(퍼스널 컴퓨터)를 조작하면서 텔레비전의 소리를 듣고 있는, 소위 『다른 일을 하면서 시청』하는 경우가 증가하고 있는 상황에 있다. 이러한 『다른 일을 하면서 시청』이 이루어지고 있는 경우, 텔레비전의 화면이 켜져 있는 상태에서는 불필요하게 전력을 소비하게 된다. 따라서, 텔레비전 화면의 주변부에 촬상 소자를 설치하고, 이 촬상 소자에 의해 얼굴 검출을 행함으로써, 유저의 시청 상태를 해석하여, 시청 상태에 최적의 전력 절약 제어를 실행하는 표시 장치가 제안되고 있다.
얼굴 검출이나 동체 검출의 결과에 기초한 전력 절약 제어를 한창 실행하고 있을 때, 전력 절약 효과가 어느 정도 발휘되고 있는지를 화면에 표시할 수 있으면, 매장 등에서의 데몬스트레이션에 매우 유효하여, 내점한 손님에 대한 소구 효과가 높아진다. 그러나, 전력 절약 제어의 대상이 되는, 표시 패널과 기타 표시 영역에, 전력 절약 효과를 모니터링 표시하므로, 패널의 밝기를 어둡게 하거나 소등하는 전력 절약 제어 중에는 모니터링 표시 자체를 할 수 없다는 문제가 있다. 또한, 전력 절약 제어의 대상이 되는 표시 영역에 전력 절약 효과를 모니터링 표시하므로, 패널의 밝기를 어둡게 하거나 소등하는 전력 절약 제어중에 모니터링 표시함으로써, 전력 절약 효과의 결과에 변동이 발생하게 되어, 실제 전력 절약 제어에 있어서의 효과를 정확하게 제시할 수 없다는 문제도 있다.
따라서, 본 발명은 상기 문제를 감안하여 이루어진 것이며, 본 발명이 목적으로 하는 점은, 전력 절약 효과의 모니터링 표시를 실행하고 있을 때, 전력 절약 효과의 모니터링 표시를 행하지 않는 경우의 본래의 전력 절약 효과를 표시할 수 있는, 신규이면서도 개량된 표시 방법 및 표시 장치를 제공하는 데에 있다.
상기 과제를 해결하기 위해서, 본 발명의 어느 한 관점에 의하면, 화상을 표시하는 표시 장치에 구비되는 화상 표시면의 전방의 화상을 촬상함과 함께 상기 화상 표시면의 전방에 위치하는 동체의 존재를 검출하고, 촬상 화상에 대한 사람의 얼굴 유무의 해석 결과 및 동체의 검출 결과를 사용해서 상기 화상 표시면의 전력 절약량을 포함한 상기 표시 장치의 전력 절약량을 결정하고, 상기 전력 절약량에 관한 정보를 상기 화상 표시면에 표시할 때에 상기 화상 표시면에 상기 표시가 행해지지 않는 경우의 실제의 전력 절약량을 도출하고, 상기 화상 표시면에 전력 절약량으로서 표시하는 표시 방법이 제공된다.
상기 전력 절약량의 정보를 상기 화상 표시면에 표시할 때, 상기 표시에 수반하는 전력 소비량을 고려한 후에 표시해도 좋다.
상기 전력 절약량의 정보를 상기 화상 표시면에 표시할 때, 상기 촬상 화상도 함께 표시해도 좋다.
상기 촬상 화상을 상기 전력 절약량의 정보로서 상기 화상 표시면에 표시할 때, 촬상하고나서 소정 시간 경과 후에 표시해도 좋다.
상기 전력 절약량의 정보를 상기 화상 표시면에 표시할 때, 상기 화상 표시면의 일부 영역에 상기 전력 절약량의 정보를 표시해도 좋다.
상기 전력 절약량의 정보를 상기 화상 표시면에 표시할 때, 상기 일부 영역 이외의 영역은 상기 화상 표시면의 화상 표시에 사용하는 광원을 소등해도 좋다.
상기 전력 절약량의 정보는, 수치와 함께 소비 전력 비율을 시계열로 표현한 그래프로 표시해도 좋다.
상기 전력 절약량의 정보를 상기 화상 표시면에 표시할 때, 촬상 화상에 포함되는 얼굴 중 특정한 얼굴에 한정해서 전력 절약량을 결정해도 좋다.
상기 특정한 얼굴은, 가장 앞에 찍히고 있는 얼굴이어도 좋다.
상기 특정한 얼굴은, 미리 지정된 인물의 얼굴이어도 좋다.
촬상 화상에 대한 사람의 얼굴 유무의 해석 결과 및 동체의 검출 결과, 소정 거리 이상 이격된 위치에 얼굴이 존재한다고 판단했을 경우에는, 상기 얼굴은 전력 절약량의 결정 대상에서 제외해도 좋다.
또한, 상기 과제를 해결하기 위해서, 본 발명의 다른 관점에 의하면, 화상을 표시하는 표시 장치의 화상 표시면 전방의 화상을 촬상하는 촬상부와, 상기 화상 표시면 전방에 위치하는 동체의 존재를 검출하는 동체 검출부와, 상기 촬상부의 촬상 화상 및 상기 동체 검출부의 동체 검출 결과를 사용해서 상기 화상 표시면의 전력 절약량을 포함하는 장치 전체의 전력 절약량을 결정하는 전력 절약량 결정부와, 상기 전력 절약량 및 상기 촬상 화상의 정보를 상기 화상 표시면에 표시할 때, 상기 표시가 행해지지 않는 경우의 실제 전력 절약량을 도출해서 전력 절약량으로서 표시하는 전력 절약량 표시부를 구비하는, 표시 장치가 제공된다.
이상 설명한 바와 같이 본 발명에 따르면, 전력 절약 효과의 모니터링 표시를 실행하고 있을 때, 전력 절약 효과의 모니터링 표시를 행하지 않는 경우의 본래의 전력 절약 효과를 표시할 수 있는, 신규이면서도 개량된 표시 방법 및 표시 장치를 제공할 수 있다.
도 1은, 본 발명의 일 실시 형태에 따른 화상 표시 장치(100)의 외관에 대해서 설명하는 설명도이다.
도 2는, 본 발명의 일 실시 형태에 따른 화상 표시 장치(100)의 구성에 대해서 도시하는 설명도이다.
도 3은, 본 발명의 일 실시 형태에 따른 화상 표시 장치(100)에 포함되는 제어부(110)의 구성에 대해서 설명하는 설명도이다.
도 4는, 제어부(110)에 포함되는 최적화 처리 효과 산출부(124)의 구성에 대해서 도시하는 설명도이다.
도 5는, 최적화 처리 효과 산출부(124)에 포함되는 전력 절약 효과 산출부(166)의 구성을 도시하는 설명도이다.
도 6a는, 표시 패널(102)이 표시하는 화면에 중첩되어 표시되는 전력 절약 효과의 표시예에 대해서 도시하는 설명도이다.
도 6b는, 표시 패널(102)이 표시하는 화면에 중첩되어 표시되는 전력 절약 효과의 표시예에 대해서 도시하는 설명도이다.
도 7은, 본 발명의 일 실시 형태에 따른 화상 표시 장치(100)에서의, 전력 절약 효과 산출 방법에 대해서 나타내는 흐름도이다.
이하에 첨부 도면을 참조하면서, 본 발명의 적합한 실시 형태에 대해서 상세하게 설명한다. 또한, 본 명세서 및 도면에 있어서, 실질적으로 동일한 기능 구성을 갖는 구성 요소에 대해서는, 동일한 번호를 부여함으로써 중복 설명을 생략한다.
또한, 설명은 이하의 순서로 행하기로 한다.
<1. 본 발명의 일 실시 형태>
[1-1. 화상 표시 장치의 구성]
[1-2. 제어부의 구성]
[1-3. 최적화 처리 효과 산출부의 구성]
[1-4. 전력 절약 효과 산출부의 구성]
[1-5. 전력 절약 효과의 표시 방법]
[1-6. 전력 절약 효과 산출 방법]
<2. 정리>
<1. 본 발명의 일 실시 형태>
[1-1. 화상 표시 장치의 구성]
우선, 본 발명의 일 실시 형태에 따른 화상 표시 장치의 구성에 대해서 설명한다. 도 1은, 본 발명의 일 실시 형태에 따른 화상 표시 장치(100)의 외관에 대해서 설명하는 설명도이다. 이하, 도 1을 사용해서 본 발명의 일 실시 형태에 따른 화상 표시 장치(100)의 외관에 대해서 설명한다.
도 1에 도시한 바와 같이, 본 발명의 일 실시 형태에 따른 화상 표시 장치(100)는, 정지 화상 또는 동화상을 표시하는 표시 패널(102)의 상방 중앙부 및 좌우 중앙부에, 동화상을 촬상하는 촬상부(104)가 구비되어 있다. 촬상부(104)는, 화상 표시 장치(100)가 표시 패널(102)에서 정지 화상 또는 동화상을 표시하는 방향에 대하여, 동화상의 촬상을 행하는 것이다. 본 실시 형태에 따른 화상 표시 장치(100)는, 촬상부(104)에서 촬상된 화상을 해석하고, 화상에 비치고 있는 유저의 얼굴을 검출한다. 그리고, 촬상부(104)가 촬상한 동화상에 유저의 얼굴이 포함되어 있는 것인지 여부로, 화상 표시 장치(100)는 내부의 동작 상태를 변화시키는 것을 특징으로 하고 있다.
또한, 본 발명의 일 실시 형태에 따른 화상 표시 장치(100)는, 표시 패널(102)의 하방 중앙부에 센서(106)를 구비하고 있다. 센서(106)는, 화상 표시 장치(100) 전방의 사람의 유무를 검지하는 것이다. 화상 표시 장치(100)는, 화상 표시 장치(100)의 전방에 사람이 존재하고 있는지 여부에 의해서도, 내부의 동작 상태를 변화시키는 것을 특징으로 하고 있다.
또한, 도 1에서는, 화상 표시 장치(100)는, 화상의 표시 패널(102) 주위의 3군데에, 동화상을 촬상하는 촬상부(104)를 구비하고 있었지만, 본 발명에 있어서는 동화상을 촬영하는 화상 입력 장소는 이러한 예에 한정되지 않는 것은 당연하며, 예를 들어 화상 표시 장치(100)와는 다른 장치를 설치하여, 화상 표시 장치(100)에 당해 장치를 접속하고, 당해 장치로 동화상을 촬영해도 좋다. 또한, 화상 입력부의 개수도 3개로 한정되지 않는 것은 당연하며, 2개 이하 또는 4개 이상의 화상 입력부를 설치해서 촬상해도 좋다. 또한, 센서(106)의 개수도 1개로 한정되지 않는 것은 당연하며, 2개 이상의 센서를 설치해서 사람의 유무를 검지해도 좋다.
이상, 도 1을 사용해서 본 발명의 일 실시 형태에 따른 화상 표시 장치(100)의 외관에 대해서 설명하였다. 이어서, 본 발명의 일 실시 형태에 따른 화상 표시 장치(100)의 구성에 대해서 설명한다.
도 2는, 본 발명의 일 실시 형태에 따른 화상 표시 장치(100)의 구성에 대해서 도시하는 설명도이다. 이하, 도 2를 사용해서 본 발명의 일 실시 형태에 따른 화상 표시 장치(100)의 구성에 대해서 설명한다.
도 2에 도시한 바와 같이, 본 발명의 일 실시 형태에 따른 화상 표시 장치(100)는, 표시 패널(102)과, 촬상부(104)와, 센서(106)와, 스피커(108)와, 제어부(110)를 포함하여 구성된다.
그리고 제어부(110)는, 화상 입력부(112)와, 화상 처리부(114)와, 시청 상태 해석부(116)와, 시청 상태 기록부(118)와, 시스템 최적화 처리부(120)와, 시스템 제어부(122)와, 최적화 처리 효과 산출부(124)를 포함하여 구성된다.
표시 패널(102)은, 패널 구동 신호에 기초하여 정지 화상 또는 동화상을 표시하는 것이다. 본 실시 형태에 있어서는, 표시 패널(102)은 액정에 의해 정지 화상 또는 동화상을 표시한다. 물론 발명에 있어서는, 표시 패널(102)은 이러한 예에 한정되지 않는 것은 물론이다. 표시 패널(102)은, 유기 EL과 같은 자발광형 표시 디바이스에 의해 정지 화상 또는 동화상을 표시하는 것이어도 좋다.
촬상부(104)는, 상술한 바와 같이, 정지 화상 또는 동화상을 표시하는 표시 패널(102)의 상방 중앙부 및 좌우 중앙부에 구비되는 것이며, 표시 패널(102)에 패널 구동 신호가 공급되어, 표시 패널(102)에 있어서 동화상을 표시할 때, 화상 표시 장치(100)가 표시 패널(102)에서 동화상을 표시하는 방향에 대하여 동화상의 촬상을 행하는 것이다. 촬상부(104)는, CCD(Charge Coupled Device) 이미지 센서에 의해 동화상의 촬상을 행하는 것이어도 좋고, CMOS(Complementary Metal Oxide Semiconductor) 이미지 센서에 의해 동화상의 촬상을 행하는 것이어도 좋다. 촬상부(104)에서 촬상된 동화상은 제어부(110)로 보내진다.
센서(106)는, 상술한 바와 같이, 정지 화상 또는 동화상을 표시하는 표시 패널(102)의 하방 중앙부에 구비되는 것이며, 화상 표시 장치(100) 전방의 사람 유무를 검지하는 것이다. 또한, 센서(106)는, 화상 표시 장치(100)의 전방에 사람이 존재할 경우에는, 화상 표시 장치(100)와 그 사람 사이의 거리를 검출할 수 있다. 센서(106)에 의한 검지 결과 및 거리 정보는 제어부(110)로 보내진다. 스피커(108)는, 음성 출력 신호에 기초하여 음성을 출력하는 것이다.
제어부(110)는, 화상 표시 장치(100)의 동작을 제어하는 것이다. 이하에서 제어부(110)의 각 부에 대해서 설명한다.
화상 입력부(112)는, 촬상부(104)에서 촬상된 동화상을 수취하는 것이다. 화상 입력부(112)가 수취한 동화상은 화상 처리부(114)로 보내져, 화상 처리부(114)에서의 화상 처리에 사용된다.
화상 처리부(114)는, 화상 입력부(112)로부터 보내진 촬상부(104)에서 촬상된 동화상에 대한 각종 화상 처리를 실행하는 것이다. 화상 처리부(114)가 실행하는 화상 처리에는, 촬상부(104)에서 촬상된 동화상에 포함되어 있는 동체의 검출 처리, 동화상에 포함되어 있는 사람의 인원수의 검출 처리, 동화상에 포함되어 있는 얼굴 및 얼굴 표정의 검출 처리가 포함된다. 화상 처리부(114)에 의한 각종 화상 처리의 결과는, 시청 상태 해석부(116)로 보내져서, 화상 표시 장치(100)를 시청하고 있는 인물의 유무나 시청하고 있는 인물의 상태 해석에 사용된다.
화상 처리부(114)에서, 화상 중에 포함되는 얼굴을 검출하는 얼굴 검출 처리에 대해서는, 예를 들어 일본 특허 공개 제2007-65766호 공보나, 일본 특허 공개 제2005-44330호 공보에 게재되어 있는 기술을 사용할 수 있다. 이하, 얼굴 검출 처리에 대해서 간단하게 설명한다.
화상으로부터 유저의 얼굴을 검출하기 위해서는, 우선 공급된 화상에 있어서 얼굴의 위치, 얼굴의 크기, 얼굴의 방향을, 각각 검출한다. 얼굴의 위치와 크기가 검출됨으로써, 얼굴 화상의 부분을 화상으로부터 잘라낼 수 있다. 그리고 잘라낸 얼굴 화상과, 얼굴의 방향의 정보로부터, 얼굴의 특징적인 부분(얼굴 특징 위치), 예를 들어 눈썹, 눈, 코, 입과 같은 특징적인 부분을 검출한다. 얼굴 특징 위치의 검출에는, 예를 들어 AAM(Active Appearance Models)이라고 불리는 방법을 적용하여, 특징 위치를 검출하도록 할 수 있다.
얼굴 특징 위치를 검출하면, 검출한 얼굴 특징 위치 각각에 대하여 국소 특징량을 산출한다. 국소 특징량을 산출하여, 산출한 국소 특징량을 얼굴 화상과 함께 기억해 둠으로써, 화상 입력부(112)에서 입력되는 화상으로부터 얼굴 식별을 할 수 있게 된다. 얼굴 식별 방법에 대해서는, 예를 들어 일본 특허 공개 제2007-65766호 공보나, 일본 특허 공개 제2005-44330호 공보에 게재되어 있는 기술을 사용할 수 있으므로, 여기에서는 상세한 설명은 생략한다. 또한, 얼굴 화상이나 얼굴 특징 위치에 의해, 공급된 화상에 찍히고 있는 얼굴이 남성인지 여성인지, 또한 어른인지 어린이인지를 판별할 수도 있다.
시청 상태 해석부(116)는, 화상 처리부(114)에 의한 각종 화상 처리의 결과 및 센서(106)의 검지에 의한 검지 결과 및 거리 정보를 수취하고, 화상 처리부(114)에 의한 각종 화상 처리 결과 및 센서(106)의 검지에 의한 검지 결과 및 거리 정보를 사용하여, 화상 표시 장치(100)가 표시하고 있는 화상을 시청하고 있는 인물의 유무나 시청하고 있는 인물의 상태의 해석을 실행하는 것이다. 시청 상태 해석부(116)가 인물의 유무나 시청하고 있는 인물의 상태를 해석함으로써, 화상 표시 장치(100)는, 화상 표시 장치(100)를 시청하고 있는 사람의 유무에 의해 표시 패널(102)의 휘도를 저하시키거나, 표시 패널(102)의 방향을 제어할 수 있다. 시청 상태 해석부(116)에서의 해석 처리에 의한 해석 결과는, 시청 상태 기록부(118), 시스템 최적화 처리부(120) 및 최적화 처리 효과 산출부(124)로 보내진다.
시청 상태 기록부(118)는, 시청 상태 해석부(116)의 해석 처리에 의해 얻어지는 해석 결과를 기록하는 것이다. 시청 상태 기록부(118)가 기록한 시청 상태 해석부(116)에서의 해석 결과는, 시스템 최적화 처리부(120)에서의 시스템 최적화 처리에 사용된다. 또한, 시청 상태 기록부(118)가 기록한 시청 상태 해석부(116)에서의 해석 결과는, 외부의 정보 수집 서버(200)에 보내지도록 해도 좋다.
시스템 최적화 처리부(120)는, 본 발명의 전력 절약량 결정부의 일례이며, 시청 상태 해석부(116)의 해석 처리에 의해 얻어지는 해석 결과를 사용하여, 화상 표시 장치(100)의 각 부에 대한 시스템 최적화 처리를 실행하기 위한 시스템 제어 정보를 산출하는 것이다. 화상 표시 장치(100)의 각 부에 대한 시스템 최적화 처리에는, 화상 표시 장치(100)의 전원 제어, 표시 패널(102)의 휘도 제어, 표시 패널(102)의 방향 제어, 표시 패널(102)의 표시 내용 제어, 스피커(108)로부터 출력되는 음성의 음량 제어 등이 있다. 시스템 최적화 처리부(120)가 산출한 시스템 제어 정보는 시스템 제어부(122)로 보내진다.
시스템 제어부(122)는, 시스템 최적화 처리부(120)가 산출한 시스템 제어 정보에 기초하여, 화상 표시 장치(100)의 각 부에 대한 시스템 최적화 처리를 실행하는 것이다. 구체적으로 시스템 제어부(122)는, 시스템 최적화 처리부(120)가 산출한 시스템 제어 정보에 기초하여, 표시 패널(102)의 휘도 제어, 표시 패널(102)의 방향 제어, 표시 패널(102)의 표시 내용 제어, 스피커(108)로부터 출력되는 음성의 음량 제어 등을 실행함과 함께, 각 부에 대한 제어 정보를 최적화 처리 효과 산출부(124)로 보낸다.
최적화 처리 효과 산출부(124)는, 본 발명의 전력 절약량 표시부의 일례이며, 화상 표시 장치(100)의 각 부에 대한 제어 정보를 취득하는 것이다. 제어 정보를 취득하면, 최적화 처리 효과 산출부(124)는, 최적화 처리의 효과를 산출하고, 표시 패널(102)의 일부 혹은 전부에, 그 최적화 처리 효과의 산출 결과를 제시한다.
이상, 도 2를 사용해서 본 발명의 일 실시 형태에 따른 화상 표시 장치(100)의 구성에 대해서 설명하였다. 이와 같이, 본 발명의 일 실시 형태에 따른 화상 표시 장치(100)는, 촬상부(104) 및 센서(106)에 의해, 유저의 시청 상태를 해석한다. 종래에는, 촬상부(104)에서 촬상 처리를 행하고, 촬상부(104)가 촬상한 화상에 얼굴이 포함되어 있는 것인지 여부를 판단하는 얼굴 검출 처리에 의해서만, 유저의 시청 상태를 해석하였다. 그러나, 얼굴 검출 처리에 의해서만 유저의 시청 상태를 해석하면, 유저의 얼굴을 검출하기 어려울 경우, 혹은 일정 시간 다른 곳을 보고 있는 경우 등, 표시 장치를 계속 이용하고자 할 경우에도 시청이, 결국은 존재 없음으로서 표시가 꺼져버리는 문제가 발생하였다. 또한, 얼굴 검출 처리는, 센서 등에 의한 동체 검출 처리와 비교하여, 상대적으로 화상 처리 시간이 길어지기 때문에, 계산 속도나 리소스에 제한이 있는 환경에서는, 유저가 시청을 위해서 표시 장치 앞에 오고나서 화상이 표시될 때까지의 반응에 지연이 발생하였다.
한편, 초전식 적외선 소자 등 기타 센서에 의해, 동체 또는 유저의 동작 검출을 행하여 유저의 시청 상태를 해석하고, 전력 절약 제어를 행하는 장치도 존재하는데, 유저가 움직이지 않고 시청을 계속할 경우 등에, 유저가 존재하지 않고 있다고 해서 표시가 꺼지는 등의 문제가 있었다. 오동작을 피하기 위해서, 전력 절약 제어를 개시할 때까지의 시간을 연장하게 되어, 결과적으로 전력 절약 효과가 내려가게 되었다.
따라서, 본 발명의 일 실시 형태에 따른 화상 표시 장치(100)는, 촬상부(104)가 촬상한 화상에 대한 얼굴 검출 처리와, 센서(106)에 의한 동체 검출 처리를 조합함으로써, 더 효과적으로 유저의 시청 상태를 해석할 수 있게 하고 있다.
이어서, 본 발명의 일 실시 형태에 따른 화상 표시 장치(100)에 포함되는 제어부(110)의 구성에 대해서, 보다 상세하게 설명한다.
[1-2. 제어부의 구성]
도 3은, 본 발명의 일 실시 형태에 따른 화상 표시 장치(100)에 포함되는 제어부(110)의 구성에 대해서 설명하는 설명도이다. 도 3은, 제어부(110)에 포함되는 시청 상태 해석부(116)와, 시스템 최적화 처리부(120)의 구성에 대해서 설명하는 것이다. 이하, 도 3을 사용하여, 시청 상태 해석부(116)와, 시스템 최적화 처리부(120)의 구성에 대해서 설명한다.
도 3에 도시한 바와 같이 시청 상태 해석부(116)는, 유저 시청 유무 해석부(132)와, 유저 동작 해석부(134)를 포함하여 구성된다. 그리고, 시스템 최적화 처리부(120)는, 패널 최적화 처리 산출부(142)와, 스피커 최적화 처리 산출부(144)를 포함하여 구성된다.
유저 시청 유무 해석부(132)는, 화상 처리부(114)에 의한 각종 화상 처리의 결과 및 센서(106)의 검지에 의한 검지 결과 및 거리 정보를 수취하고, 화상 처리부(114)에 의한 각종 화상 처리의 결과, 및 센서(106)의 검지에 의한 검지 결과 및 거리 정보를 사용하여, 화상 표시 장치(100)를 시청하고 있는 사람의 유무, 화상 표시 장치(100)를 시청하고 있는 사람의 얼굴 방향이나 크기를 검출하는 것이다.
유저 동작 해석부(134)는, 화상 처리부(114)에 의한 각종 화상 처리의 결과 및 센서(106)의 검지에 의한 검지 결과 및 거리 정보를 수취하고, 화상 처리부(114)에 의한 각종 화상 처리의 결과, 및 센서(106)의 검지에 의한 검지 결과 및 거리 정보를 사용하여, 유저의 동작의 시계열적·공간적인 상태·이력으로부터, 화상 표시 장치(100)를 시청하고 있는 사람의 유무를 해석하는 것이다.
여기서, 화상 처리부(114)로부터는 촬상 화상과, 촬상 화상 내에 있어서의 화상 표시 장치(100)를 이용하고 있는 유저마다의 얼굴 검출 정보(예를 들어, 중심 좌표 [a1, b1], 얼굴의 크기 [w1, h1], 얼굴의 방향 [i1] 등의 정보) 및 동체 검출 정보(예를 들어, 중심 좌표 [c1, d1], 얼굴 영역의 크기 [s1] 등의 정보)가 시청 상태 해석부(116)로 보내진다. 시청 상태 해석부(116)에서는, 유저 시청 유무 해석부(132) 및 유저 동작 해석부(134)에 있어서, 화상 처리부(114)로부터 보내지는 정보를 사용한, 화상 표시 장치(100)를 시청하고 있는 사람의 유무에 대한 해석 처리가 행해진다.
패널 최적화 처리 산출부(142)는, 유저 시청 유무 해석부(132) 및 유저 동작 해석부(134)에 의한 해석 처리의 결과를 사용하여, 표시 패널(102)에 있어서 최적의 전력 절약화를 실현할 수 있는 처리(전력 절약화 실현 처리)를 산출하는 것이다. 표시 패널(102)에 있어서 최적의 전력 절약화를 실현할 수 있는 처리란, 예를 들어 화상 표시 장치(100)를 시청하고 있는 사람의 유무 및 화상 표시 장치(100)를 시청하고 있는 사람이 존재하지 않는 시간에 따른 표시 패널(102)의 휘도를 제어하는 처리가 있다. 패널 최적화 처리 산출부(142)가 산출한 전력 절약화 실현 처리는 시스템 제어부(122)에 보내지고, 표시 패널(102)의 전력 절약 처리에 사용된다.
스피커 최적화 처리 산출부(144)는, 유저 시청 유무 해석부(132) 및 유저 동작 해석부(134)에 의한 해석 처리의 결과를 사용하여, 스피커(108)에 있어서 최적의 전력 절약화를 실현할 수 있는 처리(전력 절약화 실현 처리)를 산출하는 것이다. 스피커(108)에 있어서 최적의 전력 절약화를 실현할 수 있는 처리란, 예를 들어 화상 표시 장치(100)를 시청하고 있는 사람의 유무 및 화상 표시 장치(100)를 시청하고 있는 사람이 존재하지 않고 있는 시간에 따른 스피커(108)의 음량을 제어하는 처리가 있다. 스피커 최적화 처리 산출부(144)가 산출한 전력 절약화 실현 처리는 시스템 제어부(122)에 보내져, 스피커(108)의 전력 절약 처리에 사용된다.
이상, 도 3을 사용하여, 시청 상태 해석부(116)와, 시스템 최적화 처리부(120)의 구성에 대해서 설명하였다. 이어서, 최적화 처리 효과 산출부(124)의 구성에 대해서 설명한다.
[1-3. 최적화 처리 효과 산출부의 구성]
도 4는, 제어부(110)에 포함되는 최적화 처리 효과 산출부(124)의 구성에 대해서 도시하는 설명도이다. 또한, 도 4에는 최적화 처리 효과 산출부(124)의 구성과 함께 시스템 제어부(122)의 구성에 대해서도 도시하고 있다. 이하, 도 4를 사용해서 제어부(110)에 포함되는 최적화 처리 효과 산출부(124)의 구성에 대해서 설명한다.
도 4에 도시한 바와 같이, 제어부(110)에 포함되는 시스템 제어부(122)는, 패널 제어부(152)와, 스피커 제어부(154)를 포함하여 구성되고, 제어부(110)에 포함되는 최적화 처리 효과 산출부(124)는, 시청 상태 취득부(162)와, 전력 절약 효과 측정부(164)와, 전력 절약 효과 산출부(166)와, 전력 절약 효과 표시부(168)를 포함하여 구성된다.
시청 상태 취득부(162)는, 시청 상태 해석부(116)로부터 촬상부(104)가 촬상한 화상과, 시청 상태 해석부(116)가 해석한 시청 상태의 해석 결과 정보를 수취하는 것이다. 시청 상태 취득부(162)가 수취한, 촬상부(104)가 촬상한 화상과, 시청 상태 해석부(116)가 해석한 시청 상태의 해석 결과 정보는, 시청 상태 취득부(162)로부터 전력 절약 효과 표시부(168)로 보내진다.
전력 절약 효과 측정부(164)는, 시스템 제어부(122)로부터 화상 표시 장치(100)의 각 디바이스를 전력 절약 제어하고, 그 전력 절약 제어에 의한 변화에 관한 정보를 수취하고, 수취한 정보를 사용하여, 각 디바이스에서의 소비 전력량이나 전력 제어값을 측정하는 것이다. 전력 절약 효과 측정부(164)가 측정한, 각 디바이스에서의 소비 전력량이나 전력 제어값은, 전력 절약 효과 산출부(166)로 보내진다.
전력 절약 효과 산출부(166)는, 전력 절약 효과 측정부(164)가 측정한, 각 디바이스에서의 소비 전력량이나 전력 제어값을 사용하여, 화상 표시 장치(100)의 전력 절약화에 의한 전력 절약 효과를 산출하는 것이다. 전력 절약 효과 산출부(166)가 산출한 전력 절약 효과는, 그래프나 수치 등의 시각에 호소할 수 있는 형식으로 변환되어, 전력 절약 효과 표시부(168)로 보내진다. 예를 들어, 전력 절약 효과 산출부(166)가 화상 표시 장치(100)의 전력 절약 처리에 의해 화상 표시 장치(100)의 소비 전력이 30％로 저하된다고 산출하면, 그 30％라는 정보가 전력 절약 효과 표시부(168)로 보내진다.
전력 절약 효과 표시부(168)는, 전력 절약 효과 산출부(166)가 산출하여, 그래프나 수치 등의 시각에 호소할 수 있는 형식으로 변환된, 전력 절약 효과에 관한 정보를 수취하는 것이다. 전력 절약 효과 표시부(168)가 전력 절약 효과 산출부(166)로부터 수취한 정보는 표시 패널(102)로 보내져서, 표시 패널(102)에 전력 절약 효과가 표시된다. 또한, 전력 절약 효과 표시부(168)는, 실제로 표시 패널(102)에 전력 절약 효과를 표시하는 것에 의한, 본래의 소비 전력값으로부터의 차분을 전력 절약 효과 산출부(166)에서 구하기 위해서, 전력 절약 효과의 표시에 관한 정보를 전력 절약 효과 산출부(166)에 피드백한다.
이상, 도 4를 사용해서 제어부(110)에 포함되는 최적화 처리 효과 산출부(124)의 구성에 대해서 설명하였다. 이어서, 최적화 처리 효과 산출부(124)에 포함되는 전력 절약 효과 산출부(166)의 구성에 대해서 설명한다.
[1-4. 전력 절약 효과 산출부의 구성]
도 5는, 최적화 처리 효과 산출부(124)에 포함되는 전력 절약 효과 산출부(166)의 구성을 도시하는 설명도이다. 이하, 도 5를 사용해서 최적화 처리 효과 산출부(124)에 포함되는 전력 절약 효과 산출부(166)의 구성에 대해서 설명한다.
도 5에 도시한 바와 같이, 최적화 처리 효과 산출부(124)에 포함되는 전력 절약 효과 산출부(166)는, 차분 산출부(172)와, 소비 전력 산출부(174)를 포함하여 구성된다.
차분 산출부(172)는, 전력 절약 효과 표시부(168)로부터의 정보를 수취하고, 수취한 정보로부터, 표시 패널(102)로의 전력 절약 효과의 표시에 수반하는 소비 전력값을 산출하는 것이다. 차분 산출부(172)로 보내지는, 전력 절약 효과 표시부(168)로부터의 정보에는, 예를 들어 표시 패널(102)에의 전력 절약 효과 표시의 유무, 전력 절약 효과를 표시하는 경우에 표시 패널(102) 상의 전력 절약 효과 표시 영역의 비율, 부분 표시를 위한 표시 패널(102)의 패널 특성 계수의 정보 등이 있다. 차분 산출부(172)가 산출한, 표시 패널(102)에의 전력 절약 효과 표시에 수반하는 소비 전력값의 정보는 소비 전력 산출부(174)로 보내진다.
패널 특성 계수란, 표시 패널(102)의 일부 영역에 전력 절약 효과를 표시함으로써 발생하는, 당해 영역 이외의 소비 전력을 산출하기 위한 계수이다. 예를 들어, 표시 패널(102)이 부분 구동 LED 방식에 의해 화상을 표시하는 것이면 패널 특성 계수는 작고, 액정 디스플레이와 같이 백라이트 일제 점등 방식에 의해 화상을 표시하는 것이면 패널 특성 계수는 커진다.
소비 전력 산출부(174)는, 전력 절약 효과 측정부(164)가 측정한 각 디바이스에서의 소비 전력량이나 전력 제어값과, 차분 산출부(172)가 산출한 표시 패널(102)에의 전력 절약 효과의 표시에 수반하는 소비 전력값을 사용하여, 표시 패널(102)에 전력 절약 효과를 표시한 경우의 화상 표시 장치(100)의 실제 소비 전력값을 산출하는 것이다. 표시 패널(102)에 전력 절약 효과 표시 시에, 화상 표시 장치(100)의 실제 소비 전력값에 영향을 미치는 것은 표시 패널(102)의 소비 전력값뿐이다. 따라서, 소비 전력 산출부(174)는, 전력 절약 효과 측정부(164)가 측정한 표시 패널(102)의 소비 전력값에, 차분 산출부(172)가 산출한 소비 전력값을 뺀 값을, 실제 표시 패널(102)의 소비 전력으로 한다. 소비 전력 산출부(174)가 산출한 화상 표시 장치(100)의 실제 소비 전력값의 정보는 전력 절약 효과 표시부(168)에 보내진다.
이상, 도 5를 사용해서 최적화 처리 효과 산출부(124)에 포함되는 전력 절약 효과 산출부(166)의 구성에 대해서 설명하였다.
[1-5. 전력 절약 효과의 표시 방법]
이어서, 본 발명의 일 실시 형태에 따른 화상 표시 장치(100)에 있어서, 표시 패널(102)에 전력 절약 효과를 표시하는 방법에 대해서 설명한다. 또한, 표시 패널(102)에의 전력 절약 효과 표시에는 여러 가지 방법을 생각할 수 있지만, 본 발명에 있어서는, 전력 절약 효과의 표시 방법은 이하에 나타내는 것에 한정되지 않는 것은 당연하다.
예를 들어, 전력 절약 제어에 의해 변동하는 전력 절약 효과의 시간 변동을 그래프 형식으로 표시 패널(102)에 표시해도 좋다. 구체적으로는, 방금 몇분간의 변동을 시시각각 갱신하고, 막대 그래프나 꺽은선 그래프의 형식으로 표시해도 좋다.
또한 예를 들어, 전력 절약 제어에 의해 변동하는 전력 절약 효과를 일정 시간 내에서의 효율 값으로서 표시 패널(102)에 표시해도 좋다. 구체적으로는, 방금 몇분간의 전력 절약 효과(삭감한 전력량)를, 전력 절약 제어를 행하지 않은 경우의 전력량에 대한 비율로서 퍼센트 표시해도 좋다.
또한 예를 들어, 촬상부(104)에서 촬상한 화상과, 시청 상태 해석부(116)에서의 화상 해석 처리의 결과 정보를 중첩되게 표시 패널(102)에 표시해도 좋다. 구체적으로는, 화상 표시 장치(100)로부터 유저를 촬상부(104)에서 촬상한 영상을 전력 절약 효과 표시에 중첩하고, 화상 내의 유저의 얼굴 부분에 검출 프레임이나 해석 결과에 관한 부가 정보를 표시해도 좋다.
도 6a 및 도 6b는, 최적화 처리 효과 산출부(124)에 의해, 표시 패널(102)이 표시하는 화면에 중첩해서 표시되는 전력 절약 효과의 표시예에 대해서 도시하는 설명도이다. 도 6a는, 화면 아래 3분의 1 정도의 영역에 설치된 전력 절약 효과 표시 영역(180)에, 전력 절약 효과가 꺽은선 그래프로 표시되는 전력 절약 효과 그래프 정보(181)와, 전력 절약 효과가 수치로 표시되는 전력 절약 효과 수치 정보(182)와, 촬상부(104)에서 촬상한 화상과 시청 상태 해석부(116)에서의 화상 해석 처리의 결과 정보가 표시되는 촬영 화상 정보(183)와, 시청 상태 해석부(116)에서의 화상 해석 처리의 결과, 시청 유저의 유무 등을 표시하는 시청 상태 부가 정보(184)를 표시한 경우에 대해서 나타낸 것이다.
한편, 도 6b는, 화면의 좌측 3분의 1 정도의 영역에 설치된 전력 절약 효과 표시 영역(180)에, 전력 절약 효과 그래프 정보(181)와, 전력 절약 효과 수치 정보(182)와, 촬영 화상 정보(183)와, 시청 상태 부가 정보(184)를 표시한 경우에 대해서 나타낸 것이다.
또한, 도 6a나 도 6b와 같이, 표시 패널(102)의 일부에 전력 절약 효과 표시 영역(180)을 표시할 때, 화상 표시 장치(100)가 표시 패널(102)의 화상 표시에 사용하는 광원의 일부를 소등할 수 있는 것이면, 전력 절약 효과 표시 영역(180)이 표시되지 않은 영역에 대해서는 상기 광원을 소등해도 좋다. 이렇게 화상 표시에 사용하는 광원의 일부를 소등할 수 있는 것으로서는, 예를 들어 LED(Light Emitting Diode; 발광 다이오드)가 있다.
이와 같이, 표시 패널(102)의 일부에 전력 절약 효과 표시 영역(180)을 표시함으로써, 화상 표시 장치(100)의 전력 절약 처리에 수반하는 전력 절약 효과를 시각적으로 파악할 수 있게 된다.
[1-6. 전력 절약 효과 산출 방법]
계속해서, 본 발명의 일 실시 형태에 따른 화상 표시 장치(100)에서의, 전력 절약 효과 산출 방법에 대해서 설명한다.
도 7은, 본 발명의 일 실시 형태에 따른 화상 표시 장치(100)에서의, 전력 절약 효과 산출 방법에 대해서 나타내는 흐름도이다. 이하, 도 7을 사용해서 본 발명의 일 실시 형태에 따른 화상 표시 장치(100)에서의, 전력 절약 효과 산출 방법에 대해서 설명한다.
화상 표시 장치(100)로 전력 절약 효과를 산출하기 위해서는, 우선, 최적화 처리 효과 산출부(124)에 포함되는 전력 절약 효과 산출부(166)가, 화상 표시 장치(100)의 소비 전력의 실측값을 사용해서 전력 절약 효과를 산출한다(스텝 S101). 전력 절약 효과 산출부(166)가, 화상 표시 장치(100)의 소비 전력의 실측값을 사용해서 전력 절약 효과를 산출하면, 계속해서, 전력 절약 효과의 산출 시에 표시 패널(102)의 일부에 전력 절약 효과 표시 영역(180)이 표시되어 있는지 여부를 판정한다(스텝 S102). 당해 스텝 S102에서의 판정은, 전력 절약 효과 산출부(166)가 실행해도 좋다.
상기 스텝 S102에서의 판단 결과, 표시 패널(102)의 일부에 전력 절약 효과 표시 영역(180)이 표시되어 있다고 판단한 경우에는, 계속해서, 표시 패널(102)에 표시되는 화면 상에서 전력 절약 효과 표시 영역(180)이 차지하는 비율을, 전력 절약 효과 산출부(166)가 취득한다(스텝 S103). 전력 절약 효과 표시 영역(180)이 차지하는 비율을, 전력 절약 효과 산출부(166)가 취득하면, 취득한 비율을 사용하여, 표시 패널(102)에의 전력 절약 효과 표시에 의해 발생하는 소비 전력을, 차분 산출부(172)에서 산출한다(스텝 S104).
상기 스텝 S104에서 차분 산출부(172)가 전력 절약 효과의 표시에 의해 발생하는 소비 전력의 차분을 산출하면, 계속해서 표시 패널(102)의 모니터 특성 계수를, 전력 절약 효과 산출부(166)가 취득한다(스텝 S105). 스텝 S105에서 표시 패널(102)의 모니터 특성 계수를, 전력 절약 효과 산출부(166)가 취득하면, 스텝 S105에서 취득한 모니터 특성 계수와, 스텝 S104에서 산출한 표시 패널(102)에 전력 절약 효과를 표시함에 의해 발생하는 소비 전력을 사용하여, 표시 패널(102)에 전력 절약 효과를 표시함에 의해 발생하는 소비 전력의 차분을, 전력 절약 효과 산출부(166)에서 산출한다(스텝 S106).
상기 스텝 S106에 있어서, 표시 패널(102)에 전력 절약 효과를 표시함에 의해 발생하는 소비 전력의 차분을 전력 절약 효과 산출부(166)에서 산출하면, 산출한 차분을 사용하여, 표시 패널(102)에 전력 절약 효과의 표시에 수반하는 본래의 화상 표시 장치(100)의 소비 전력을 전력 절약 효과 산출부(166)에서 산출한다(스텝 S107). 또한, 상기 스텝 S102에서 판단한 결과, 표시 패널(102)의 일부에 전력 절약 효과 표시 영역(180)이 표시되어 있지 않다고 판단한 경우에는, 화상 표시 장치(100)의 소비 전력의 실측값을 화상 표시 장치(100)의 소비 전력 값으로서 그대로 사용한다.
이상, 도 7을 사용해서 본 발명의 일 실시 형태에 따른 화상 표시 장치(100)에서의 전력 절약 효과 산출 방법에 대해서 설명하였다.
<2. 정리>
이상 설명한 바와 같이 본 발명의 일 실시 형태에 따른 화상 표시 장치(100)에 의하면, 촬상부(104)에서 촬상한 화상에 사람의 얼굴이 포함되어 있었는지에 의해, 및 센서(106)로 동체의 존재를 검지했는지에 의해, 화상 표시 장치(100) 앞에 유저가 있는 것인지 여부를 판단한다. 그 판단 결과를 사용하여, 화상 표시 장치(100)의 소비 전력을 억제하는 전력 절약 제어를 화상 표시 장치(100)의 내부에서 실행한다.
그리고 전력 절약 제어 실행 시에, 그 전력 절약 제어의 대상이 되는 표시 패널(102)의 일부에 전력 절약 효과를 표시함으로써, 화상 표시 장치(100)의 유저나, 화상 표시 장치(100)가 판매되고 있는 점포에 내점한 손님에 대한 소구 효과를 높일 수 있다. 그리고, 전력 절약 효과의 표시 시에는, 실제의 소비 전력값으로부터, 전력 절약 효과의 표시에 의해 소비하는 전력값을 뺀 값을 소비 전력 값으로서 표시함으로써, 전력 절약 효과를 표시하지 않고 있는, 본래의 전력 절약 효과를 표시할 수 있다.
또한, 상술한 일련의 처리는, 하드웨어에 의해 실행시킬 수도 있고, 소프트웨어에 의해 실행시킬 수도 있다. 일련의 처리를 소프트웨어에 의해 실행시키는 경우에는, 그 소프트웨어를 구성하는 프로그램이 전용의 하드웨어에 내장되어 있는 컴퓨터 또는, 각종 프로그램을 인스톨함으로써, 각종 기능을 실행할 수 있는, 예를 들어 범용 퍼스널 컴퓨터 등에 프로그램 기록 매체로부터 인스톨된다.
이상, 첨부 도면을 참조하면서 본 발명의 적합한 실시 형태에 대해서 상세하게 설명했지만, 본 발명은 이러한 예에 한정되지 않는다. 본 발명이 속하는 기술의 분야에 있어서 통상의 지식을 갖는 자이면, 특허 청구 범위에 기재된 기술적 사상의 범주 내에서, 각종 변경예 또는 수정예에 상도할 수 있는 것은 명확하고, 이에 대해서도, 당연히 본 발명의 기술적 범위에 속하는 것이라고 이해된다.
예를 들어, 전력 절약 효과 표시 영역(180)에 전력 절약 효과를 표시할 때에는, 촬상부(104)에서 촬상한 화상을 촬영 화상 정보(183)로서 표시하고 있지만, 이때, 화상 표시 장치(100)는, 촬상부(104)에서 촬상한 화상에 포함되는 인물 중, 특정한 인물에 한정해서 전력 절약 처리를 실행하고, 전력 절약 효과를 전력 절약 효과 표시 영역(180)에 표시하도록 해도 좋다. 예를 들어, 전력 절약 효과 표시 영역(180)에 전력 절약 효과를 표시할 때는, 가장 앞에 있는 인물에 한정해서 전력 절약 처리의 대상으로 해도 좋고, 또한 특정한 인물의 얼굴을 기억해 두고, 당해 인물에 한정해서 전력 절약 처리의 대상으로 해도 좋다. 또한, 전력 절약 효과 표시 영역(180)에 전력 절약 효과를 표시할 때는, 촬상부(104)에서 촬상한 얼굴의 크기나, 센서(106)에서의 검출 결과로부터, 화상 표시 장치(100)로부터 소정 거리 이상 이격된 위치에 있다고 생각되는 인물에 대해서는, 전력 절약 처리의 대상 외로 해도 좋다.
또한 예를 들어, 화상 표시 장치(100) 앞에 사람이 소정 시간 이상 없을 경우에는, 화상 표시 장치(100)는, 표시 패널(102)에서의 화상 표시를 멈추거나, 스피커(108)로부터의 음성 출력을 멈추게 해두고, 촬상부(104)나 센서(106)로 동체의 존재를 검출하면, 화상 표시 장치(100)는, 이제부터 전력 절약 효과를 표시한다는 취지를 표시 패널(102)에 표시하고, 표시 패널(102)에 전력 절약 효과의 표시를 개시해도 좋다.
또한 예를 들어, 전력 절약 효과 표시 영역(180)에는, 촬상부(104)에서 촬상한 화상이나 센서(106)에서의 동체 검출의 결과로부터, 어린이의 존재 유무나, 유저의 시청 위치의 정보를 표시해도 좋다. 이들 정보의 표시는, 전력 절약 효과의 표시에 부수적으로 행해도 좋고, 전력 절약 효과의 표시와는 별도로 독립적으로 행해도 좋다.
또한 예를 들어, 표시 패널(102)에 전력 절약 효과를 표시할 때에 있어서, 전력 절약 효과 표시 영역(180)에 표시되는 촬영 화상 정보(183)는, 촬상부(104)에서 촬영되고나서 소정 시간(예를 들어 1초) 경과한 후의 화상이어도 좋다. 촬영 화상 정보(183)에, 촬상부(104)에서 촬영된 직후의 화상을 표시하면, 유저는 화상 표시 장치(100)의 전력 절약 효과가 정말로 기능하고 있는 것인지를 확인하는 것이 곤란하다. 따라서, 표시 패널(102)에 전력 절약 효과를 표시할 때에는, 화상 표시 장치(100)는, 촬상부(104)에서 촬영되고나서 소정 시간이 경과한 후에 촬영 화상 정보(183)로서 촬영 화상을 표시해도 좋다.
또한 예를 들어, 표시 패널(102)에 전력 절약 효과를 표시할 때의 전력 절약 효과 표시 영역(180)에 표시되는 전력 절약 효과 수치 정보(182)는, 화상 표시 장치(100)의 내부(예를 들어 시스템 최적화 처리부(120))에서 산출한 전력 절약량이어도 좋다.
본 발명은 표시 방법 및 표시 장치에 적용 가능하고, 특히 표시 장치에 접속된 촬상 장치로 화상을 촬영함과 함께 표시 장치에 접속된 센서에 의해 동체를 검출하고, 촬영 화상 및 동체 검출 결과를 사용해서 전력 절약 처리를 실행하는 표시 방법 및 표시 장치에 적용 가능하다.
100 화상 표시 장치
102 표시 패널
104 촬상부
106 센서
108 스피커
110 제어부
112 화상 입력부
114 화상 처리부
116 시청 상태 해석부
118 시청 상태 기록부
120 시스템 최적화 처리부
122 시스템 제어부
124 최적화 처리 효과 산출부
132 유저 시청 유무 해석부
134 유저 동작 해석부
142 패널 최적화 처리 산출부
144 스피커 최적화 처리 산출부
152 패널 제어부
154 스피커 제어부
162 시청 상태 취득부
164 전력 절약 효과 측정부
166 전력 절약 효과 산출부
168 전력 절약 효과 표시부
172 차분 산출부
174 소비 전력 산출부

Claims (12)

  1. 화상을 표시하는 표시 장치에 구비되는 화상 표시면의 전방의 화상을 촬상 함과 함께 상기 화상 표시면의 전방에 위치하는 동체의 존재를 검출하고,
    촬상 화상에 대한 사람의 얼굴 유무의 해석 결과 및 동체의 검출 결과를 이용해서 상기 화상 표시면의 전력 절약량을 포함한 상기 표시 장치의 전력 절약량을 측정하고,
    상기 전력 절약량에 관한 정보를 상기 화상 표시면에 표시할 때에 상기 화상 표시면에 상기 표시가 행해지지 않는 경우의 전력 절약량을 도출해서, 상기 화상 표시면에 전력 절약량으로서 표시하는, 표시 장치의 표시 방법.
  2. 제1항에 있어서, 상기 전력 절약량의 정보를 상기 화상 표시면에 표시할 때, 상기 표시에 수반하는 전력 소비량을 고려한 후에 표시하는, 표시 장치의 표시 방법.
  3. 제1항에 있어서, 상기 전력 절약량의 정보를 상기 화상 표시면에 표시할 때, 상기 촬상 화상도 함께 표시하는, 표시 장치의 표시 방법.
  4. 제3항에 있어서, 상기 촬상 화상을 상기 전력 절약량의 정보로서 상기 화상 표시면에 표시할 때, 촬상하고나서 소정 시간 경과 후에 표시하는, 표시 장치의 표시 방법.
  5. 제1항에 있어서, 상기 전력 절약량의 정보를 상기 화상 표시면에 표시할 때, 상기 화상 표시면의 일부 영역에 상기 전력 절약량의 정보를 표시하는, 표시 장치의 표시 방법.
  6. 제5항에 있어서, 상기 전력 절약량의 정보를 상기 화상 표시면에 표시할 때, 상기 일부 영역 이외의 영역은 상기 화상 표시면의 화상 표시에 사용하는 광원을 소등하는, 표시 장치의 표시 방법.
  7. 제1항에 있어서, 상기 전력 절약량의 정보는, 수치와 함께 소비 전력 비율을 시계열로 표현한 그래프로 표시하는, 표시 장치의 표시 방법.
  8. 제1항에 있어서, 상기 전력 절약량의 정보를 상기 화상 표시면에 표시할 때, 촬상 화상에 포함되는 얼굴 중 특정한 얼굴로 한정해서 전력 절약량을 측정하는, 표시 장치의 표시 방법.
  9. 제8항에 있어서, 상기 특정한 얼굴은, 가장 앞에 찍히고 있는 얼굴인, 표시 장치의 표시 방법.
  10. 제8항에 있어서, 상기 특정한 얼굴은, 미리 지정된 인물의 얼굴인, 표시 장치의 표시 방법.
  11. 제8항에 있어서, 촬상 화상에 대한 사람의 얼굴 유무의 해석 결과 및 동체의 검출 결과, 소정 거리 이상 이격된 위치에 얼굴이 존재한다고 판단했을 경우에는, 상기 얼굴은 전력 절약량의 측정 대상에서 제외하는, 표시 장치의 표시 방법.
  12. 화상을 표시하는 표시 장치의 화상 표시면 전방의 화상을 촬상하는 촬상부와,
    상기 화상 표시면 전방에 위치하는 동체의 존재를 검출하는 동체 검출부와,
    상기 촬상부의 촬상 화상 및 상기 동체 검출부의 동체 검출 결과를 이용해서 상기 화상 표시면의 전력 절약량을 포함한 장치 전체의 전력 절약량을 측정하는 전력 절약량 측정부와,
    상기 전력 절약량 및 상기 촬상 화상의 정보를 상기 화상 표시면에 표시할 때, 상기 표시가 행해지지 않는 경우의 전력 절약량을 도출해서 전력 절약량으로서 표시하는 전력 절약량 표시부를 구비하는, 표시 장치.
KR1020127005726A 2009-09-11 2010-08-26 표시 방법 및 표시 장치 KR101662357B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JPJP-P-2009-210987 2009-09-11
JP2009210987A JP5556098B2 (ja) 2009-09-11 2009-09-11 表示方法及び表示装置
PCT/JP2010/064481 WO2011030674A1 (ja) 2009-09-11 2010-08-26 表示方法及び表示装置

Publications (2)

Publication Number Publication Date
KR20120050468A KR20120050468A (ko) 2012-05-18
KR101662357B1 true KR101662357B1 (ko) 2016-10-04

Family

ID=43732348

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020127005726A KR101662357B1 (ko) 2009-09-11 2010-08-26 표시 방법 및 표시 장치

Country Status (9)

Country Link
US (1) US9286850B2 (ko)
EP (1) EP2472862B1 (ko)
JP (1) JP5556098B2 (ko)
KR (1) KR101662357B1 (ko)
CN (1) CN102598112B (ko)
BR (1) BR112012004835A2 (ko)
IN (1) IN2012DN01888A (ko)
RU (1) RU2535485C2 (ko)
WO (1) WO2011030674A1 (ko)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5568929B2 (ja) 2009-09-15 2014-08-13 ソニー株式会社 表示装置および制御方法
US8836777B2 (en) 2011-02-25 2014-09-16 DigitalOptics Corporation Europe Limited Automatic detection of vertical gaze using an embedded imaging device
US20130057573A1 (en) * 2011-09-02 2013-03-07 DigitalOptics Corporation Europe Limited Smart Display with Dynamic Face-Based User Preference Settings
CN103164015A (zh) * 2011-12-14 2013-06-19 深圳市一兆科技发展有限公司 一种电子设备的控制方法、装置和***
US9753500B2 (en) * 2012-07-06 2017-09-05 Nec Display Solutions, Ltd. Display device including presence sensors for detecting user, and display method for the same
JP5940944B2 (ja) * 2012-09-14 2016-06-29 日本電信電話株式会社 視聴状況判定装置、識別器構築装置、視聴状況判定方法、識別器構築方法およびプログラム
KR20140127527A (ko) * 2013-04-25 2014-11-04 삼성전자주식회사 디스플레이장치 및 디스플레이장치를 이용한 추천정보 제공 방법
JP6248353B2 (ja) * 2014-04-21 2017-12-20 株式会社Ｊｏｌｅｄ 表示装置及び表示装置の駆動方法
CN107004393A (zh) 2014-12-08 2017-08-01 夏普株式会社 显示装置、显示装置的控制方法以及控制程序
KR102674490B1 (ko) * 2016-11-04 2024-06-13 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
KR102136091B1 (ko) * 2016-12-20 2020-07-22 삼성전자주식회사 디스플레이 장치 및 방법
JPWO2019207900A1 (ja) * 2018-04-24 2021-06-10 ソニーグループ株式会社 情報処理装置、情報処理方法
JP2021107886A (ja) * 2019-12-27 2021-07-29 富士フイルムビジネスイノベーション株式会社 制御装置およびプログラム

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001148751A (ja) 1999-11-19 2001-05-29 Murata Mach Ltd 画像形成装置

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07212666A (ja) * 1994-01-27 1995-08-11 Matsushita Electric Ind Co Ltd 消費電力レベル表示装置
JPH0946608A (ja) * 1995-08-01 1997-02-14 Matsushita Electric Ind Co Ltd テレビジョン受像機
US6259486B1 (en) * 1999-10-20 2001-07-10 A. Pascal Mahvi Sensor unit for controlling television set operation
US20030147624A1 (en) * 2002-02-06 2003-08-07 Koninklijke Philips Electronics N.V. Method and apparatus for controlling a media player based on a non-user event
EP1378816A1 (en) * 2002-07-01 2004-01-07 Sony Ericsson Mobile Communications AB System and method for power consumption management
US7664975B2 (en) * 2002-10-31 2010-02-16 Samsung Electronics Co., Ltd. Apparatus and method for controlling power of monitor
DE10393403T5 (de) * 2003-06-25 2005-09-01 Mitsubishi Denki K.K. Energiespar-Effekt-Anzeigeeinheit in einem Inverter
JP2005044330A (ja) 2003-07-24 2005-02-17 Univ Of California San Diego 弱仮説生成装置及び方法、学習装置及び方法、検出装置及び方法、表情学習装置及び方法、表情認識装置及び方法、並びにロボット装置
KR100763174B1 (ko) * 2004-11-13 2007-10-04 삼성전자주식회사 절전 레벨을 디스플레이하는 장치 및 방법
US7782405B2 (en) * 2004-12-02 2010-08-24 Sharp Laboratories Of America, Inc. Systems and methods for selecting a display source light illumination level
JP4595750B2 (ja) 2005-08-29 2010-12-08 ソニー株式会社 画像処理装置および方法、並びにプログラム
KR20070116714A (ko) * 2006-06-06 2007-12-11 삼성전자주식회사 디지털 비디오 카메라를 구비한 텔레비전의 개인별 설정,보호자 통제, 절전 제어 방법 및 시스템
JP2008009695A (ja) * 2006-06-29 2008-01-17 Nikon Corp ユーザ認識装置、再生装置、再生システムおよびテレビジョンセット
JP2008111886A (ja) * 2006-10-27 2008-05-15 Digital Electronics Corp 自動ドア、画面表示装置、画面表示制御プログラムおよびそのプログラムを記録したコンピュータ読み取り可能な記録媒体
US8340365B2 (en) * 2006-11-20 2012-12-25 Sony Mobile Communications Ab Using image recognition for controlling display lighting
JP2008301167A (ja) * 2007-05-31 2008-12-11 Sharp Corp 液晶テレビジョン受像機
JP2009094723A (ja) * 2007-10-05 2009-04-30 Mitsubishi Electric Corp テレビ受像機
JP5453717B2 (ja) * 2008-01-10 2014-03-26 株式会社ニコン 情報表示装置
US8184001B2 (en) * 2008-01-18 2012-05-22 Intel-Ge Care Innovations Llc Smart display device for independent living care
WO2010021373A1 (ja) 2008-08-22 2010-02-25 ソニー株式会社 画像表示装置、制御方法およびコンピュータプログラム

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001148751A (ja) 1999-11-19 2001-05-29 Murata Mach Ltd 画像形成装置

Also Published As

Publication number Publication date
JP2011061631A (ja) 2011-03-24
EP2472862A4 (en) 2013-07-31
RU2012108117A (ru) 2013-09-10
WO2011030674A1 (ja) 2011-03-17
US20120206340A1 (en) 2012-08-16
KR20120050468A (ko) 2012-05-18
CN102598112B (zh) 2015-08-12
JP5556098B2 (ja) 2014-07-23
US9286850B2 (en) 2016-03-15
RU2535485C2 (ru) 2014-12-10
IN2012DN01888A (ko) 2015-07-24
BR112012004835A2 (pt) 2020-07-28
CN102598112A (zh) 2012-07-18
EP2472862A1 (en) 2012-07-04
EP2472862B1 (en) 2017-03-22

Similar Documents

Publication Publication Date Title
KR101662357B1 (ko) 표시 방법 및 표시 장치
US10290281B2 (en) Display device and control method
US20220414713A1 (en) Information collection system, electronic shelf label, electronic pop advertising, and character information display device
CN102326133B (zh) 用于使得设备进入活动模式的***、方法和装置
KR101784754B1 (ko) 표시 장치 및 제어 방법
KR101719845B1 (ko) 표시 장치 및 제어 방법
EP2206033B1 (en) Correcting for ambient light in an optical touch-sensitive device
JP4697279B2 (ja) 画像表示装置および検出方法
US20100295839A1 (en) Image Display Device
US9298246B2 (en) Information processing device, system, and information processing method
US20160072984A1 (en) Gesture recognition apparatus and complex optical apparatus
JP2011239029A (ja) 映像表示装置、省電力制御装置、及び省電力方法
JP5720758B2 (ja) 表示装置および制御方法

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20190918

Year of fee payment: 4