JP5299866B2 - 映像表示装置 - Google Patents

映像表示装置 Download PDF

Info

Publication number
JP5299866B2
JP5299866B2 JP2009120472A JP2009120472A JP5299866B2 JP 5299866 B2 JP5299866 B2 JP 5299866B2 JP 2009120472 A JP2009120472 A JP 2009120472A JP 2009120472 A JP2009120472 A JP 2009120472A JP 5299866 B2 JP5299866 B2 JP 5299866B2
Authority
JP
Japan
Prior art keywords
unit
video
user
power saving
control unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2009120472A
Other languages
English (en)
Other versions
JP2010271339A (ja
Inventor
茂喜 長屋
智明 ▲吉▼永
武洋 藤田
浩朗 伊藤
克行 渡辺
秀和 武田
眞樹 古井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Consumer Electronics Co Ltd
Original Assignee
Hitachi Consumer Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Consumer Electronics Co Ltd filed Critical Hitachi Consumer Electronics Co Ltd
Priority to JP2009120472A priority Critical patent/JP5299866B2/ja
Priority to CN201010178203.1A priority patent/CN101894502B/zh
Priority to US12/782,421 priority patent/US20100295839A1/en
Publication of JP2010271339A publication Critical patent/JP2010271339A/ja
Application granted granted Critical
Publication of JP5299866B2 publication Critical patent/JP5299866B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26Power supply means, e.g. regulation thereof
    • G06F1/32Means for saving power
    • G06F1/3203Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3234Power saving characterised by the action undertaken
    • G06F1/325Power saving in peripheral device
    • G06F1/3265Power saving in display device
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • H04N21/44218Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • H04N21/4436Power management, e.g. shutting down unused components of the receiver
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/488Data services, e.g. news ticker
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/658Transmission by the client directed to the server
    • H04N21/6582Data stored in the client, e.g. viewing habits, hardware capabilities, credit card number
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/63Generation or supply of power specially adapted for television receivers
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/0626Adjustment of display parameters for control of overall brightness
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/0686Adjustment of display parameters with two or more screen areas displaying information with different brightness or colours
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2330/00Aspects of power supply; Aspects of display protection and defect management
    • G09G2330/02Details of power systems and of start or stop of display operation
    • G09G2330/021Power management, e.g. power saving
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2330/00Aspects of power supply; Aspects of display protection and defect management
    • G09G2330/02Details of power systems and of start or stop of display operation
    • G09G2330/021Power management, e.g. power saving
    • G09G2330/022Power management, e.g. power saving in absence of operation, e.g. no data being entered during a predetermined time
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/02Handling of images in compressed format, e.g. JPEG, MPEG
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00Aspects of interface with display user
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/34Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
    • G09G3/3406Control of illumination source
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/34Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
    • G09G3/3406Control of illumination source
    • G09G3/342Control of illumination source using several illumination sources separately controlled corresponding to different display panel areas, e.g. along one dimension such as lines
    • G09G3/3426Control of illumination source using several illumination sources separately controlled corresponding to different display panel areas, e.g. along one dimension such as lines the different display panel areas being distributed in two dimensions, e.g. matrix
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42201Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] biosensors, e.g. heat sensor for presence detection, EEG sensors or any limb activity sensors worn by the user
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223Cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/57Control of contrast or brightness
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00Reducing energy consumption in communication networks
    • Y02D30/50Reducing energy consumption in communication networks in wire-line communication networks, e.g. low power modes or reduced link rate

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • General Health & Medical Sciences (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Hardware Design (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Liquid Crystal Display Device Control (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)

Description

本発明は、撮像部により撮像した映像やセンサの検出結果に基づいて算出した利用者の状態に応じて映像表示装置を制御する技術に関する。
撮像部により撮像した映像やセンサの検出結果に基づいて算出した利用者の状態に応じて映像表示装置を制御する技術として、例えば、特許文献1の段落0017には、「撮像手段1で撮影した視聴者の映像のうち、顔部分や首部分を肌色として検出し、この肌色が検出された空間内の位置を映像パターン内に求めて視聴者位置」を検出する「視聴者位置検出手段」が開示されている。段落0020には、「視聴者が覚醒状態にあるか、睡眠状態であるかを、撮像手段1で撮影した視聴者の眼球や瞳孔の動きを検出する」ことにより、「視聴者の状態情報を検出」する「視聴者状態検出手段」ことが開示されている。段落0032には、「視聴者18が視聴可能領域17から離れた場合には、これを前記複数の人感センサ12の出力に基づいて、視聴者位置検出手段9が検出し、受像機制御手段11は映像表示手段2の画面の輝度を段階的に下げる」ことにより「消費電力を抑制する」ことが開示されている。段落0035には、「視聴者状態検出手段10により、撮影画像中で瞳孔が動かないか、見えないため、睡眠に入ったと判断して、視聴者の睡眠状態が検出されると、受像機制御手段11は、映像表示手段2の輝度を下げ、必要に応じて受像機Bの電源をオフにする。これにより、視聴者が睡眠中の電力消費を無くして省電力効果を上げる」ことが開示されている。
特開2008-244917
しかしながら、映像表示装置の利用者は、映像表示装置から離れた位置にいる場合でも、映像表示装置の表示画面を注視していることもあり、映像表示装置の利用者の瞳孔が撮像部から見える場合でも、映像表示装置の表示画面を注視していない場合もある。
すると、特許文献1に開示の技術では、ユーザが表示画面を注視しているにも関わらず画面の輝度を下げてしまったり、利用者が表示画面を注視していないにも関わらず画面の輝度を下げないままとしてしまうなど、好適な消費電力の低減制御を行うことができないという課題があった。
本発明は上記課題を鑑みてなされたものであり、その目的は、より好適に消費電力の低減制御をおこなうことにある。
上記課題を解決するための本発明の一実施の形態は、例えば、特許請求の範囲に記載されるように構成すればよい。
本発明によれば、より好適に消費電力の低減制御をおこなうことが可能となる。
本発明の一実施例に係る映像表示装置及びシステムの一例の説明図 本発明の一実施例に係る注視判定によるバックライト制御の一例の説明図 本発明の一実施例に係る映像表示装置の構成の一例の説明図 本発明の一実施例に係る注視認識部の構成の一例の説明図 本発明の一実施例に係る省電力制御部の構成の一例の説明図 本発明の一実施例に係る表示パネルの構成の一例の説明図 本発明の一実施例に係る表示パネル及びパネル制御部の構成の一例の説明図 本発明の一実施例に係る映像音声出力制御部の一例の説明図 本発明の一実施例に係る映像音声出力制御部の映像出力制御の一例の説明図 本発明の一実施例に係る映像認識部の一例の説明図 本発明の一実施例に係る字幕表示制御の一例の説明図 本発明の一実施例に係る省電力モード切替フローチャートの一例の説明図 本発明の一実施例に係る注視判定フローチャートの一例の説明図 本発明の一実施例に係る注視判定フローチャートの一例の説明図 本発明の一実施例に係る注視判定フローチャートの一例の説明図 本発明の一実施例に係るバックライト点灯制御の一例の説明図 本発明の一実施例に係るバックライト点灯制御フローチャートの一例の説明図 本発明の一実施例に係る注目認識処理制御の一例の説明図
以下、本発明の実施例を、図面を参照して説明する。
図1は本発明の実施例1に係る映像表示装置及びシステムの一例を示すものである。本発明の実施例1に係る映像表示装置及びシステムは映像表示装置に対するユーザの注視状況によりバックライトの点灯、映像表示または音声出力を適用的に切り替えることにより、消費電力の低減を図るものである。
映像表示装置100は映像を表示する表示パネル200と音声を出力するスピーカ500を備え、アンテナ800から得られる放送波やインターネット900から得られる配信映像、HDD(Hard Disk Drive)やSSD(Solid State Disk)から成る記録装置600に録画された映像を再生する。ユーザはリモコン300を使って映像表示装置100を操作し、電源のオンオフや音量ボリュームの調整、チャンネルの切替などの操作を行う。リモコン300からの赤外線信号はリモコン信号入力部400で受信され、これらのユーザ操作が実行される。ユーザ操作のオプション的な機器としてWi-Fi等の無線LAN機能を備えた携帯電話1000を使うこともある。携帯電話100の操作命令は無線インターフェイス1100を通じて映像表示装置100に入力される。
カメラ700またはセンサ710がユーザの映像表示装置への注視を判定するためにユーザの状態を計測する手段である。これらは注視を判定するアルゴリズムにより個数が変わる。それぞれ1つずつでも良いし、複数あってもよい。また、どちらか一方だけでもよい。例えばカメラを2つ並べることにより広い視野のユーザ映像を取得すると共に、ユーザと映像表示装置との距離を三角測量に基づくステレオカメラの原理から測定することができる。こうして得られたユーザ映像を映像表示装置内部で認識処理することで、映像表示装置に対する注視の有無を判別し、例えば、通常モードと省電力モードをとを切り替えて、する省電力制御が可能となる。
また、インターネット900を介して複数の映像表示装置(1300、1400)をデータセンタ1200に接続して、それぞれの映像表示装置における消費電力情報(消費電力の節減情報)を共有する消費電力情報共有システムを構成してもよい。
具体的には、複数の映像表示装置はそれぞれの消費電力情報をデータセンタ1200に送信し、データセンタ1200は受信したそれぞれの消費電力情報を集計して、消費電力の節減量の総計データ、平均節減量データなどの消費電力集計結果情報を算出する。データセンタ1200は、算出した消費電力集計結果情報をインターネット900を介して、複数の映像表示装置(1300、1400)に送信する。複数の映像表示装置(1300、1400)は、受信した消費電力集計結果情報を表示することにより、消費電力情報共有システムに接続した複数の映像表示装置のユーザは、当該複数の映像表示装置について消費電力の節減量の情報を共有することが可能となる。
図2は本発明の実施例1における注視判定によるバックライト制御の一例を示すものである。映像表示装置100は、カメラ700またはセンサ710により計測したユーザの状態の情報に基づいて、内蔵する注視判定手段により、ユーザが映像表示装置を注視しているかどうかを判別する。映像表示装置を注視している場合は通常どおり映像と音声を出力する。映像表示装置を注視していない場合には、表示パネルのバックライトを消灯し消費電力を節減する。ユーザによる一般的な映像表示装置視聴においては、必ずしもユーザは映像表示装置の前に座っているとは限らず、座っていてもユーザは常に映像表示装置を注視していない。映像表示装置に映像が表示されても何かしら別のことをしながら視聴することが多く、映像が表示がされている時間のうちユーザが映像表示装置の視聴とその他の動作を同時に行っている時間の割合は65%ともいわれる。ここで映像表示装置全体の消費電力に占めるバックライトの消費電力の割合は80%であり、ユーザが映像表示装置の視聴以外の動作を行っている時間のバックライトの消費電力を節減することにより、表示装置全体の消費電力のうち最大50%近くを削減可能である。一方、映像表示装置100における注視判定手段の注視判定処理は、市販されている顔認識機能付きビデオカメラの消費電力同様の1W程度であることから、消費電力は十分小さく問題とならない。
バックライトを消して省電力状態になっているときに、図中に示すようにバックライト消灯による電力節減効果を表示することで、ユーザの省エネ意識を高めることが期待できる。
図3は本発明の実施例1における映像表示装置の構成の一例を示すものである。本発明を有する映像表示装置100は映像表示装置の基本機能部分に加え、ユーザの注目度を計測するための手段と計測された注目度により省電力制御を行うための手段から構成される。
映像表示装置の基本機能部分は、映像表示装置制御部110、映像音声出力部120、表示パネル200、パネル制御部210、スピーカ500、リモコン信号入力部400、記録装置600により実現される。システム制御部110は、リモコン300からリモコン信号入力部400を経由して入力されるユーザ操作指示に基づき、電源のオンオフ、放送波やインターネット配信映像または記録装置600上の録画映像など様々な映像ソースの選択切り替え、スピーカ500から出力される音声ボリュームの調整等、映像表示装置100全体の制御を司る部分である。映像音声出力部120は、ユーザが選択した映像ソースの符号化された映像ストリームを復号化して、非圧縮の映像信号/音声信号に変換する部分である。映像信号/音声信号は、表示パネル200、パネル制御部210、スピーカ500を通して出力される。
ユーザの注目度を計測するための手段は、カメラ700、センサ710、注目度認識部720から構成される。カメラ700によりユーザ映像を撮像し、センサ710から得られたセンサ情報と映像から注目度認識部720で認識処理を行って、映像表示装置への注目度を計測する。
計測された注目度により省電力制御を行う手段は、省電力制御部730、映像認識部740から構成される。映像認識部740はオプションで無くても良い。映像認識部740は表示パネルに表示される放送映像を認識し、省電力状態に移行しても出力すべき情報の有無(例えば字幕表示)を判断して省電力制御部730に伝える。省電力制御部730は、注目度認識部720から得られた注目度や、映像認識部730から字幕表示位置範囲情報を用いて、パネル制御部210や映像音声出力部120に制御命令を出力して、映像表示装置100全体の省電力制御を行う。
また、省電力制御部730は、省電力制御により節減した消費電力量を測定して、消費電力情報として格納する。格納した消費電力情報はネットワーク通信部130を介して図1のデータセンタ1200に送信する。これにより、データセンタ1200は、消費電力情報共有システムの消費電力の収集処理が可能となる。
また、映像表示装置100は、データセンタ1200が集計した複数の映像表示装置の消費電力集計情報を、インターネットを介してネットワーク通信部130から受信し、映像音声出力制御部120が表示映像に変換して、パネル200に表示する。これにより、ユーザがデータセンタ1200に接続される複数の映像表示装置の消費電力の節減量の総計データ、平均節減量データなどを認識することができる。
図4は注視認識部720の構成を示すものである。注視認識部720は、制御部721、顔検出部722、顔・視線角度算出部723、注視位置算出部724、注視有無判定部725、視聴者識別部726から構成される。視聴者識別部726はオプションで無くても良い。注視認識部720は、システム制御部110からの制御信号の他、カメラ700からの映像信号とセンサ710からの距離情報を入力とし、省電力制御部730に対して制御信号として注視有無フラグを出力する。
顔検出部722はカメラ700から入力された映像信号からユーザの顔領域を検出し、検出した顔位置情報1を顔・視線角度算出部723と視聴者識別部726へ出力する。顔・視線角度算出部723は入力された顔位置情報1と映像信号から顔または視線の方向角度3を算出し、注視位置算出部724へ出力する。注視位置算出部724ではユーザの顔または視線の方向角度3とユーザの位置、距離情報2から映像表示装置方向の注視場所4を算出し、注視有無判定部726へ出力する。注視有無判定部726では予め決められた閾値(映像表示装置への注視と判定できる範囲情報)と注視場所4を比較し、閾値内であれば注視有フラグを閾値外であれば注視無しフラグを省電力制御部730へ出力する。
なお、本実施例では、上記の注視認識動作は基本的に全てカメラからのフレームレート(例えば30FPS)で動作する。
視聴者識別部726はユーザを識別して顔検出部722から入力された顔位置情報からユーザを識別するための特徴ベクトルを算出し、過去に抽出した特徴ベクトルと比較してユーザの追跡を実現する部分である。これによりユーザ毎の過去の視聴履歴をまとめ、ユーザ毎の注視判定パラメータを自動的に調整できるようになる。
図5は省電力制御部730の構成を示すものである。省電力制御部730は制御部731、パネル制御命令生成部732、映像音声出力制御命令生成部733、消費電力節減量記録部734から構成される。省電力制御部730はシステム制御部110からの制御命令と注視認識部720から注視有無フラグ、映像認識部740からの字幕表示位置範囲情報を入力とし、パネル制御部210にパネル点灯制御命令を、映像音声出力制御部120に映像音声出力制御信号を出力する。また、消費電力節減量を算出して消費電力情報としてネットワーク通信部130に出力する。
パネル制御命令生成部732は、注視認識部720から入力された注視有無フラグと、後述の判定アルゴリズムに基づいて、表示パネル200のバックライトを制御する信号を生成し、パネル制御部210に送信する。
映像音声出力制御命令生成部733は、注視認識部720から入力された注視有無フラグと、後述の判定アルゴリズムに基づいて、映像表示装置100が出力する映像と音声を制御する映像音声出力制御部120に映像音声出力制御信号を出力する。
制御部731は、システム制御部110からの制御命令と注視認識部720から入力された注視有無フラグに基づいて、パネル制御命令生成部732と映像音声出力制御命令生成部733の制御を通常モードと省電力モードとで切り替える。
なお、当該通常モードと省電力モードの切り替えは、パネル制御命令生成部732、映像音声出力制御命令生成部733のそれぞれで行ってもよい。
消費電力節減量記録部734は、制御部731によるパネル制御命令生成部732と映像音声出力制御命令生成部733の制御状態に基づいて、映像表示装置100の消費電力の節減量を計測して記録する。記録した消費電力節減量は、消費電力情報として、ネットワーク通信部130に出力される。
また、消費電力節減量の計測は、例えば、以下の動作で実現することが可能となる。制御部731によるパネル制御命令生成部732と映像音声出力制御命令生成部733の複数の制御状態のそれぞれについて単位時間当たりの消費電力節減量を格納したテーブル情報を予め格納しておく。次に、制御部731による制御状態ごとの経過時間を計測する。計測した各制御状態の経過時間に上記テーブル情報に示される各制御状態の単位時間当たりの消費電力節減量を乗じた積から各制御状態による消費電力節減量を算出する。算出した各消費電力節減量を合計して、映像表示装置100の消費電力節減量を算出することが可能となる。
図6は表示パネル200の物理的な構成を示すものである。表示パネル部200は映像表示を司る部分で、映像を表現する液晶部201と映像の明るさを調整するバックライト部202が前後に張り合わさって構成される。バックライト部は離散的にLED203が配置されており、映像内で部分的に照度差を作れるようになっている。
図7は表示パネル200およびパネル制御部210の構成を示すものである。表示パネル200は前述のように液晶部201とバックライト部202から構成される。
パネル制御部210は表示パネル200の表示を制御する部分で、制御部211、液晶制御部212、バックライト制御部213から構成される。制御部211は、映像音声出力制御部120から入力される映像信号、システム制御部110から入力される制御信号、省電力制御部730から入力されるパネル点灯制御信号を受けとる。液晶制御部212に対しては映像信号と制御信号を出力し、バックライト制御部213に対しては映像信号とパネル点灯制御信号を出力する。液晶制御部212は入力された映像信号と制御信号から液晶制御信号を生成して液晶部201へ出力する。バックライト制御部213は入力された映像信号とパネル点灯制御信号からバックライト制御信号を生成し、バックライト部202に出力する。これら入出力制御は映像フィールド信号時間単位(=1/60秒)で繰り返される。
次に、映像表示装置100による表示パネル200の省電力制御動作の一例について説明する。例えば、パネル制御部210が省電力制御部730からパネル点灯制御命令として「パネル消灯」または「パネル減光」の命令を受けると、バックライト制御部213は制御部211から映像信号の有無にかかわらず、バックライト制御信号としてバックライトを消灯または減光する命令を出し、バックライトを消灯または減光してバックライトの消費電力を最小化または低減する。パネル制御部210が省電力制御部730からパネル点灯制御命令として「パネル点灯」または「パネル光量増加」の命令を受けると、通常どおり、映像信号に基づいてバックライトの点灯制御または光量増光制御を行う。
図8は映像音声出力制御部120の構成を示すものである。映像音声出力制御部120は、制御部121、映像音声復号部122、チューナー123、通信部124、記録再生制御部125から構成される。制御部121はシステム制御部110からの制御信号と省電力制御部730からの映像音声出力制御信号に基づいて映像音声出力制御部120全体の動作を制御する。映像音声復号部122は、チューナー123を介して得られる放送波、通信部124を介して得られるインターネット配信映像、記録再生制御125を介して得られる記録装置600上の録画映像等の符号化された映像ストリームを復号化して非圧縮の映像信号/音声信号に変換、パネル制御部210やスピーカ500に出力する。
映像表示装置100による映像音声出力の省電力制御動作の一例について説明する。ユーザが映像表示装置を注視しなくなるなどして、制御部121が省電力制御部730から映像音声制御信号として省電力状態へ移行するよう命令を受けると、映像音声復号部122に制御信号を発行し、映像の復号処理を停止して音声のみを復号させて、音声のみがスピーカ500から出力されるように映像表示装置100の動作を変更する。ユーザが映像表示装置への注視を再開して、省電力制御部730から映像音声制御信号として通常状態へ移行するよう命令を受けると、映像音声復号部122に制御信号を発行し、映像の復号処理を再開させて通常通りの映像と音声が出力されるように映像表示装置100の動作を変更する。
映像表示装置100による映像音声出力の省電力制御動作の別の一例について説明する。ユーザが映像表示装置のある部屋からいなくなったり寝てしまったりして、省電力状態が一定時間以上継続した場合、映像の復号処理を停止させるだけでなく、以下のような方法で映像再生を一時停止し、再びユーザが映像表示装置を注視したときに映像再生を再開するようにできる。
映像ソースがインターネット配信映像または記録装置600に録画された映像の場合、通信部124や記録再生制御125に映像ストリームの取得停止命令を制御信号として送り、映像および音声の出力を一時停止させる。このとき、停止位置情報を制御部121内に記録しておく。再びユーザが注視を開始するなどして省電力制御部730から映像音声制御信号として通常状態へ移行するよう命令を受けると、先述の停止位置情報に基づいて、通信部124や記録再生制御125に映像ストリームの取得命令を制御信号として送り、前回停止した部分から映像および音声を再生する。再生停止時間が数時間以上と長い場合には、いきなり再生を開始せず、「再生中断中のコンテンツがあります」など、再生中断中のコンテンツがあることを示す表示を行い、再生を再開するか別のチャンネルに切り替えるかをユーザに選択させてもよい。
映像ソースがチューナー123の場合、映像ストリームの再生を停止する代わりに記録装置600に録画する。録画する時間長は予めユーザが設定しておいた時間長でも録画対象となった放送番組の終わりまでであっても良い。再びユーザが注視を開始するなどして省電力制御部730から映像音声制御信号として通常状態へ移行するよう命令を受けた際の動作は上記記録映像の再生再開と同じ動作となる。
映像表示装置100による映像音声出力の省電力制御動作の別の一例について説明する。図9は省電力モードから通常モードに復帰する際の再生遅延を防止するための制御例に関する説明である。図8説明では映像の復号処理を停止する制御例について述べたが、この例では、省電力モードから通常モードに復帰する際、最大約0.5秒の遅延が発生する。これはほとんどの映像ソースがMPEG-2あるいはH.264と呼ばれる符号化方式ならびに放送規格によって規格化されていることに起因する。これらの符号化方式では動画を構成するフレーム画像の前後の類似性(相関)に基づいて情報圧縮を行っており圧縮の最小時間単位であるGOP(Group of Picture)が0.5秒単位に規定されているためである。特に放送波の場合、再生を行うために復号を行おうとすると、チューナー123経由で与えられる映像ストリームの次のGOPを取得するまでに最大0.5秒待つ必要が生ずる。これが遅延発生の理由である。
これを回避するためには、復号処理をしなくても直近の映像ストリームをバッファ等に保存しておき、図9に有るようにGOPの先頭フレームであるIフレーム画像のみを復号してパネル制御部210中におくり、液晶部201で低いフレームレートでIフレーム画像のみを再生しておけばよい。バックライトが消灯している状態では、再生しているIフレーム画像は画面上には表示されないが、ユーザが再び注視してバックライトが点灯されると即座にその映像の最新のIフレーム画像をユーザが視聴することが可能となる。これにより、ユーザに対して、レスポンスが低い、待たされている、といった印象を与えることを防ぐことができる。
また、映像音声出力の省電力制御動作の別の例として、復号開始命令と共に先頭フレームから順に次々と復号し、各フレームに付与されている時刻情報(PTS: Presentation Time Stamp)が再生している音声に同期するまで繰り返してもいい。この場合、復号処理を行う映像音声復号部122が表示レート(60フィールド/秒)よりも高速に動作できるように構成する必要がある。
図10は映像認識部740の構成を示すものである。映像認識部740は制御部741と字幕表示検出部742から構成される。映像認識部740はシステム制御部110から字幕表示検出を行うかどうかの制御信号を受けて字幕表示検出部742を制御する。字幕表示検出部742は表示パネルに表示される放送映像を認識し、字幕表示領域の位置及び範囲を検出、算出し、字幕表示位置範囲情報として省電力制御部730に伝える。
図11はバックライト消灯または減光時の字幕表示制御の説明である。以下の動作は、字幕表示位置範囲情報に基づいて省電力制御部730が制御する。まず、映像に含まれる字幕表示領域1000には、省電力モードであっても常に表示しておいた方が良い情報がある。例えば、朝の番組で映像表示装置画面の左上等に表示される時刻や、臨時の地震/津波速報などがそれにあたる。これらの情報については、省電力モードに移行した際、単に画面全体のバックライトを消灯もしくは減光してしまうのではなく、映像認識部740で検出された字幕表示領域1000にあたるバックライト部202のLED203は点灯もしくは光量を維持し、他の非字幕表示領域1001にあたるバックライト部202のLED203を消灯または減光する。これにより、字幕表示領域については通常表示の時と同じく表示し、ユーザの利便性を損なうことがなく、非字幕表示領域については消灯または減光することで電力削減を実現できる。なお、これら字幕表示領域は時間経過による画像変化が比較的少ないため、映像音声出力制御部120における省電力モード時の復号処理制御(処理間隔)のままでもユーザにとって違和感なく表示を行うことが可能となる。この場合、映像音声出力制御部120における消費電力は、全体のバックライトを消灯または減光した場合と同等まで低減することが可能となる。
なお、上記の図10、図11の例では、映像認識部740が字幕表示領域を検出、算出し、省電力制御部730が字幕表示領域とその他の領域とでバックライトの消灯、減光の有無を変化させる例を説明した。しかし、この例に変えて、単に放送信号に含まれる時刻情報または映像表示装置100内の内部管理の時刻情報を所定の領域に表示し、当該所定の表示領域についてバックライトを点灯または増光し、その他の領域については消灯、減光する構成としてもよい。この場合は、映像認識処理を行うことなく、より簡便に省電力化とユーザに対する時刻の伝達機能を両立することが可能となる。
図12は注視判定により映像表示装置100が映像表示の省電力制御動作を行う際のフローチャートである。
まず、ユーザがリモコン300から「ユーザ注視判定」モードを開始する指示を行い、節電動作を開始する。システム制御部110は注視認識部720、省電力制御部730、映像認識部740、パネル制御部210に「ユーザ注視判定」モードを指示する制御信号を送信し、ユーザ注視判定を用いた省電力動作を開始する(ステップS01001)。
注視認識部720は、カメラ700より取得したユーザ映像からユーザが映像表示装置を注視しているかどうかを判定する(ステップS01002)。判定結果は省電力制御部720に注視有無フラグとして出力される。省電力制御部730では、ユーザの映像表示装置への注視を検出しなければ「省電力モード」への移行処理(ステップS01003)を実施し、検出すれば「通常モード」への移行処理(ステップS01004)を実施する。
次に、省電力制御部730にある制御部731またはパネル制御命令生成部732では、現在の制御モードが「省電力モード」であるかどうかを判別する(ステップS01003)。「省電力モード」であればステップS01008に進む。「省電力モード」で無ければ「省電力モード」へ移行すべきかどうかの判定処理(ステップS01006)を行う。移行すべきと判断されれば「省電力モード」への移行処理(ステップS01007)を実行する。具体的には、パネル制御部に対して表示パネルを消灯する旨のパネル点灯制御信号を出力する。信号出力後はステップS01008に進む。移行すべきでないと判断されれば、そのままステップS01008に進む。
一方、「通常モード」への移行処理(ステップS01004)を実施する際には、制御部731またはパネル制御命令生成部732で現在の制御モードが「省電力モード」であるかどうかを判別する。「省電力モード」であれば「通常モード」への移行処理(ステップS01006)を行う。具体的には、パネル制御部に対して表示パネルを点灯する旨のパネル点灯制御信号を出力する。信号出力後はステップS01008に進む。「省電力モード」でなければ、そのままステップS01008に進む。
最後にステップS01008ではユーザからの「ユーザ注視判定」モード終了命令の有無を判定する。し、終了命令があればステップS01009に進んで「ユーザ注視判定」モードを終了する。終了命令が無ければステップS01002に戻って処理を繰り返す。
図13は注視判定アルゴリズムのフローチャートの一例である。注視認識部720中の顔検出部722の動作であり、図12中のステップS01002の処理の詳細にあたる。
まず、カメラ700よりユーザ映像を取得する(ステップS02001)。次にユーザ映像に対して顔検出処理を行い、顔の有無を調べる(ステップS02002)。顔があれば映像表示装置を注視していると判断してステップS02003へ進み、顔が無ければ映像表示装置を注視していないと判断してステップS02004へと進む。
ステップS02003に到達した場合は注視「有」フラグを省電力制御部730に出力する。一方、ステップS02004に到達した場合は注視「無」フラグを省電力制御部730に出力する。
図14は注視判定アルゴリズムのフローチャートの別の一例である。ユーザの顔方向を計測して映像表示装置への注視有無を判定する。注視認識部720中の顔・視線角度算出部723の動作であり、図12中のステップS01002の処理の詳細にあたる。
まず、カメラ700よりユーザ映像を取得する(ステップS03001)。次にユーザ映像に対して顔検出処理を行い、顔の有無を調べる(ステップS03002)。顔があればステップS03003へ進み、無ければステップS03006へと進む。
ステップS03003では検出した顔の方向を計測する。顔方向の計測には例えば参考文献1に開示されている方法を用いればよい。顔は3つの回転自由度を持つので、それぞれ三種類の方向角度が得られるが、ここではカメラに対する上下と左右の顔方向を使う。
〔参考文献1〕特開2007-286995
次に得られたカメラに対する上下と左右の顔方向が、予め設定しておいた閾値よりも小さいかどうかを判定する(ステップS03004)。これはユーザが映像表示装置の方向に顔が向いているかどうかの判定と同値である。カメラに対する顔方向が閾値よりも小さければ、映像表示装置を注視していると判断してステップS03005へすすみ、大きければ映像表示装置を注視していないと判断してステップS03006へ進む。
ステップS03005に到達した場合は注視「有」フラグを省電力制御部730に出力する。一方、ステップS03006に到達した場合は注視「無」フラグを省電力制御部730に出力する。
図14の例では、判定処理において顔の有無のみならず顔の方向まで算出しているのでより高精度の注視判定が可能となる。
図15は注視判定アルゴリズムのフローチャートの別の一例である。ユーザの視線方向を計測して映像表示装置への注視有無を判定する。視線計測には例えば上述の参考文献1に開示されている方法を使う。注視認識部720中の顔・視線角度算出部723と注視位置算出部724の動作であり、図12中のステップS01002の処理の詳細にあたる。
まず、カメラ700よりユーザ映像を取得する(ステップS04001)。次にユーザ映像に対して顔検出処理を行い、顔の有無を調べる(ステップS04002)。顔があればステップS04003へ進み、無ければステップS04012へと進む。
ステップS04003ではまず検出が簡単な瞳(または黒目)検出処理を行い、瞳の有無を調べる。瞳があれば、ステップS04004へ移動する。瞳がなければステップS04012へ移動する。
ステップS04004では、眼球姿勢を推定するために必要となる目領域検出処理を行う。左右それぞれでこの目領域検出処理を行い、両目とも検出できなかった場合はS04012へと移動する。両目が検出できた場合はS04006へ、片目だけが検出できた場合はS04007へ移動する。ステップS04006/S04007では検出したそれぞれの目について視線方向を求める。ステップS04006の場合は、左右それぞれの視線方向を算出したあと、左右の方向を加算平均し、両目としての方向を求める(S04008)。最後にセンサ710などで得られた距離情報から映像表示装置のパネル面を仮想的に拡張した平面上での視線位置を検出する(ステップS04009)。最後に、視線位置が予め設定しておいた範囲内で有るかどうかで映像表示装置を注視しているかどうかを判定し(ステップS04010)、ステップS04011に到達した場合は注視「有」フラグを省電力制御部730に出力する。一方、ステップS04012に到達した場合は注視「無」フラグを省電力制御部730に出力する。
図15の例では、判定処理において顔の有無、顔の方向のみならず、視線方向まで算出しているのでより高精度の判定が可能となる。
図16はバックライトの点灯制御の一例の説明図である。表中の第1行はユーザの注視挙動の時間変化を示している。第1行において、ユーザーの視線が上方向の場合は、ユーザーが映像表示装置を注視しているときを示している。ユーザーの視線が下方向の場合は、ユーザーが映像表示装置を注視していないときを示している。第2行、第3行はこうしたユーザ挙動を理想的に認識できる場合のフレーム毎の認識結果とそれに従って単純にバックライトを点灯・消灯する場合の状態変化を示している。理想的な認識精度が得られる場合は、ユーザが映像表示装置を見ているときは表示パネルを点灯し、映像表示装置を見ていないときは消灯するという単純制御で、ユーザにとって全くストレス無く映像表示装置の省電力制御を行うことができる。
しかし、実際には、認識精度は100%にならず、例えば第3行目に示すような、理想状態と異なる認識結果が得られることがしばしばある。この場合、フレーム毎の認識に応じて単純にオンオフするだけでは第4行目に示すような表示パネルの点灯パタンになり、ユーザが映像表示装置を見ている最中に頻繁にバックライトが消えたり、映像表示装置を見ていないのに表示パネルがついたりと、ユーザに対してストレスを与えることになり、ユーザ注視判定を用いた省電力制御を利用してもらえなくなる恐れがある。
そこで第5行目に示すように、フレーム毎の注視認識結果に対して所定の判定制御を用いたバックライト消灯・点灯制御を行うことにより、この問題を解決できる。所定の判定制御の一例としては、所定の複数のフレーム数または時間の閾値を設定し、当該閾値のフレーム数または時間以上連続して注視を検知した場合に初めて表示パネルを点灯し、注視が検出されなくなって消灯する際も、第2の閾値以上のフレーム数または時間連続して注視が非検出となるまで消灯しないようにする。これにより、ユーザ動作に対する表示パネル点灯・消灯動作に若干の遅延が発生するが、頻繁にバックライトが明滅する動作を回避できるようになる。これにより、ユーザに対する使い勝手と注視判定による省電力化を両立できるようになる。
以上の図16の説明では、バックライトの消灯・点灯制御として説明したが、同様のバックライトの減光・増光制御を行ってもかまわない。この場合、以上の図16の説明において、消灯を減光に、点灯を増光に変更すればよい。
以上の図16の説明では、バックライトの消灯・点灯制御として説明したが、図8及び図9において説明した映像音声出力の省電力制御動作においても、同様に図16において説した閾値を用いた所定の判定制御を行ってもよい。この場合もユーザに対する使い勝手と注視判定による省電力化を両立できる。
図17は、図16で説明したバックライトの消灯・点灯制御例における動作をフローチャートで説明するものである。以下の動作は制御部731またはパネル制御命令生成部732にて行う。
まず、省電力制御部730中の制御部731が「ユーザ注視判定」モードを指示する制御信号を受信して処理が始まる。
制御部731またはパネル制御命令生成部732では、例えば内部にもつ二種類のカウンタ、点灯カウンタと消灯カウンタをそれぞれ予め設定しておいた値Con、Coffで初期化し(ステップS06001)、次のステップS06002へ進む。ステップS06002では図12にて説明した状態移行判定の結果に基づき、「省電力モード」移行ならばステップS06003へ、「通常モード」移行ならばステップS06004へと進む。
ステップS06003では点灯カウンタを1減らし、消灯カウンタを再初期化して次のステップに進む。ステップS06005では、点灯カウンタが0になったかどうかを調べる。0であればステップS06006へ進み、非0であればS06002に戻る。ステップS06006では、パネル制御部210にバックライト消灯を命令し、S06002に戻る。
一方、ステップS06004では消灯カウンタを1減らし、点灯カウンタを再初期化して次のステップに進む。ステップS06007では、点灯カウンタが0になったかどうかを調べる。0であればステップS06008へ進み、非0であればS06002に戻る。ステップS06008では、パネル制御部210にバックライト点灯を命令し、S06002に戻る。
以上により、図16で述べたユーザに取ってストレスの少ないバックライトの消灯・点灯制御が可能となる。
以上の図17の説明では、バックライトの消灯・点灯制御として説明したが、同様のバックライトの減光・増光制御を行ってもかまわない。この場合、以上の図17の説明において、消灯を減光に、点灯を増光に変更すればよい。
図18は、注視認識部720における消費電力をさらに低減するための制御例を説明するものである。図18において、ユーザーの視線が上方向の場合は、ユーザーが映像表示装置を注視しているときを示している。ユーザーの視線が下方向の場合は、ユーザーが映像表示装置を注視していないときを示している。
注視認識部720での処理は基本的にカメラから入力された画像を処理して映像表示装置への注視を判定するものであり、注視判定の応答性の観点からは、可能な限りカメラのフレームレートと同じ頻度で処理できることが望ましい。しかし、消費電力低減の観点から見ると処理量を減らすことが望ましい。そこで、現在の状態が省電力モードか通常モードかに基づいてユーザ状態をサンプリングするカメラのフレームレートを変更することにより、電力低減と省電力モードから通常モードへの復帰時の応答速度を両立することが可能となる。
そこで、ユーザが映像表示装置を注視しているのとき(=通常モード)には、低いフレームレートで注視認識を行い、認識処理に要する消費電力を低減する。ユーザが注視しなくなったときのバックライト消灯への応答速度は若干悪くなるが、もともと別のところを見ているので問題はない。一方、ユーザが映像表示装置を注視していないとき(=省電力モード)は高いフレームレートで注視認識を行う。これにより、バックライトを点灯または増光させる際の応答速度を高くし、使い勝手の劣化を最小限にとどめることが可能となる。
すなわち、ユーザが映像表示装置を注視しているときの注視認識の頻度を、ユーザが映像表示装置を注視していないときの注視認識の頻度よりも低減することにより、認識処理に要する消費電力を低減とユーザの使い勝手の両立を実現することが可能となる。
また、リモートコントローラー300に、省電力モードから通常モードへの変更指示を出力するボタンを設け、映像表示装置は、省電力モードである場合には、当該変更指示に基づいて通常モードへ切り替える構成としてもよい。これにより、ユーザが注視しているにも関わらず、映像表示装置100が省電力モードのままである場合など、ユーザの求める通常モードへ強制的に移行するように構成すれば、想定外の要因で省電力モードになっている場合でも、ユーザの不快感を低減することが可能となる。
また、リモートコントローラー300を振動センサまたは方位センサを有する構成とし、当該振動センサまたは方位センサが振動または方位の変化を感知した場合に、省電力モードから通常モードへの変更指示を出力し、映像表示装置は、省電力モードである場合には、当該変更指示に基づいて通常モードへ切り替える構成としてもよい。ユーザがリモコンを操作する場合は、映像表示装置を注視しているまたは今後注視する可能性が高い。よってこのような構成にすることにより、ユーザが注視しているのにも関わらず、省電力モードのままであったり、通常モードへの移行の応答性が下がることを防止することが可能となる。
また、映像表示装置100は、省電力モードの場合にバックライトの一部を点灯、増光し、当該部分に省電力モード処理中である旨の文字または図形を表示してもよい。これにより、ユーザに電源が入っていないのか、電源は入っているが、省電力モード処理中なのかを確実に伝えることが可能となる。また、バックライトの一部を点灯、増光して文字または図形を表示するかわりに、表示パネル200よりも小さい第2の表示部を設けて省電力モード処理中である旨の文字または図形を表示してもよく、また小型のLED光源などを映像表示装置100に設けて、点灯の有無または点灯色などにより省電力モード処理中である旨の表示をおこなってもよい。
また、映像表示装置100は、省電力モードの場合にバックライトの一部を点灯、増光し、当該部分に、消費電力節減量記録部734に記憶する消費電力節減量またはこれに基づいて算出した消費電力節減量に関する情報を示す文字または図形を表示してもよい。これにより、ユーザは、消費電力の節減量を実感することが可能となる。バックライトの一部を点灯、増光して文字または図形を表示するかわりに、表示パネル200よりも小さい第2の表示部を設けて消費電力の節減量またはこれに関する情報を示す文字または図形を表示してもよい。
以上説明した本発明の映像表示装置によれば、より好適に消費電力の低減制御をおこなうことが可能となる。
100 映像表示装置
200 表示パネル
300 リモートコントローラー
400 リモコン信号入力部
500 スピーカ
600 記録装置
700 カメラ
710 センサ
800 アンテナ
900 インターネット
1000 携帯電話
1100 無線インターフェイス
1200 サーバ
1300 映像表示装置
1400 映像表示装置

Claims (2)

  1. 映像表示装置であって、
    映像信号を入力する入力部と、
    前記入力部に入力した映像信号の再生処理を行う出力制御部と、
    前記出力制御部が再生した映像信号に基づいて映像を表示する表示部と、
    前記映像表示装置の利用者を撮像する撮像部と、
    前記撮像部が撮像した画像を解析し、前記利用者が前記表示部の表示画面を注視しているか否かを判定する注視有無判定部と、
    前記注視有無判定部の判定結果に基づいて、前記表示部の光源の光量制御処理および前記出力制御部における再生処理を、通常モード処理と省電力モード処理とで切り替える制御部と、を備え、
    注視有無判定部は、前記撮像部が撮像した画像から前記利用者の顔方向または視線方向を検出し、検出した方向が閾値範囲以内であれば、前記利用者が前記表示部の表示画面を注視していると判定し、検出した方向が閾値範囲を超えている場合は、前記利用者が前記表示部の表示画面を注視していないと判定し、
    前記制御部は、前記注視有無判定部により注視していると判定された場合には、前記省電力モード処理から前記通常モード処理への切り替えを行い、前記表示部の画面全体または一部に対応する光源の光量を前記省電力モード処理での光量よりも大きくする制御または光源を点灯する制御を行い、注視していないと判定された場合には、前記通常モード処理から前記省電力モード処理への切り替えを行い、前記表示部の画面全体または一部に対応する光源の光量を通常モード処理での光量よりも小さくする制御または光源を消灯する制御を行い、
    前記出力制御部は、前記省電力モード処理の場合に、消費電力の節減量を示す文字情報または図形情報を映像信号に重畳して前記表示部に表示することを特徴とする映像表示装置。
  2. 映像表示装置であって、
    映像信号を入力する入力部と、
    前記入力部に入力した映像信号の再生処理を行う出力制御部と、
    前記出力制御部が再生した映像信号に基づいて映像を表示する表示部と、
    前記映像表示装置の利用者を撮像する撮像部と、
    前記撮像部が撮像した画像を解析し、前記利用者が前記表示部の表示画面を注視しているか否かを判定する注視有無判定部と、
    前記注視有無判定部の判定結果に基づいて、前記表示部の光源の光量制御処理および前記出力制御部における再生処理を、通常モード処理と省電力モード処理とで切り替える制御部と、を備え、
    注視有無判定部は、前記撮像部が撮像した画像から前記利用者の顔方向または視線方向を検出し、検出した方向が閾値範囲以内であれば、前記利用者が前記表示部の表示画面を注視していると判定し、検出した方向が閾値範囲を超えている場合は、前記利用者が前記表示部の表示画面を注視していないと判定し、
    前記制御部は、前記注視有無判定部により注視していると判定された場合には、前記省電力モード処理から前記通常モード処理への切り替えを行い、前記表示部の画面全体または一部に対応する光源の光量を前記省電力モード処理での光量よりも大きくする制御または光源を点灯する制御を行い、注視していないと判定された場合には、前記通常モード処理から前記省電力モード処理への切り替えを行い、前記表示部の画面全体または一部に対応する光源の光量を通常モード処理での光量よりも小さくする制御または光源を消灯する制御を行い、
    前記入力部に入力された映像信号に含まれる映像に重畳された字幕情報、または前記入力部に入力された映像信号とともに入力される字幕情報の前記表示部における表示領域を算出する字幕表示領域算出部を備え、
    前記制御部は、前記省電力モード処理の場合に、前記字幕表示領域算出部が算出した前記字幕情報の表示領域に対応する光源の光量を、その他の光源の光量よりも大きくすることを特徴とする映像表示装置。
JP2009120472A 2009-05-19 2009-05-19 映像表示装置 Active JP5299866B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2009120472A JP5299866B2 (ja) 2009-05-19 2009-05-19 映像表示装置
CN201010178203.1A CN101894502B (zh) 2009-05-19 2010-05-13 影像显示装置
US12/782,421 US20100295839A1 (en) 2009-05-19 2010-05-18 Image Display Device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009120472A JP5299866B2 (ja) 2009-05-19 2009-05-19 映像表示装置

Publications (2)

Publication Number Publication Date
JP2010271339A JP2010271339A (ja) 2010-12-02
JP5299866B2 true JP5299866B2 (ja) 2013-09-25

Family

ID=43103677

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009120472A Active JP5299866B2 (ja) 2009-05-19 2009-05-19 映像表示装置

Country Status (3)

Country Link
US (1) US20100295839A1 (ja)
JP (1) JP5299866B2 (ja)
CN (1) CN101894502B (ja)

Families Citing this family (76)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110211738A1 (en) * 2009-12-23 2011-09-01 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Identifying a characteristic of an individual utilizing facial recognition and providing a display for the individual
JP5528318B2 (ja) * 2010-03-23 2014-06-25 パナソニック株式会社 表示装置
JP2012109810A (ja) * 2010-11-17 2012-06-07 Panasonic Corp 表示装置、表示制御方法、携帯電話及び半導体装置
US20120170666A1 (en) * 2010-12-29 2012-07-05 Sankaranarayanan Venkatasubramanian Power optimization for special media playback scenarios
JP5107482B2 (ja) * 2011-02-04 2012-12-26 パナソニック株式会社 表示装置、眼鏡装置及び映像システム
JP5510366B2 (ja) * 2011-03-08 2014-06-04 カシオ計算機株式会社 画像表示制御装置及びプログラム
EP2499963A1 (en) * 2011-03-18 2012-09-19 SensoMotoric Instruments Gesellschaft für innovative Sensorik mbH Method and apparatus for gaze point mapping
US10139900B2 (en) * 2011-04-12 2018-11-27 Mobile Communication Technologies, Llc Mobile communicator device including user attentiveness detector
CN103477385B (zh) * 2011-04-13 2016-04-06 夏普株式会社 显示装置、显示方法
EP2695049A1 (en) * 2011-05-10 2014-02-12 NDS Limited Adaptive presentation of content
US20120300046A1 (en) * 2011-05-24 2012-11-29 Ilya Blayvas Method and System for Directed Light Stereo Display
JP2013017105A (ja) * 2011-07-06 2013-01-24 Hitachi Consumer Electronics Co Ltd コンテンツ表示装置、コンテンツ出力装置、および、コンテンツ表示方法
JP5802474B2 (ja) * 2011-08-05 2015-10-28 株式会社エース電研 遊技店電源管理装置
KR101824413B1 (ko) 2011-08-30 2018-02-02 삼성전자주식회사 휴대단말기의 동작 모드 제어 방법 및 장치
US9094539B1 (en) * 2011-09-22 2015-07-28 Amazon Technologies, Inc. Dynamic device adjustments based on determined user sleep state
KR101891786B1 (ko) * 2011-11-29 2018-08-27 삼성전자주식회사 아이 트래킹 기반의 사용자 기능 운용 방법 및 이를 지원하는 단말기
US9100685B2 (en) 2011-12-09 2015-08-04 Microsoft Technology Licensing, Llc Determining audience state or interest using passive sensor data
US9785201B2 (en) * 2012-03-01 2017-10-10 Microsoft Technology Licensing, Llc Controlling images at mobile devices using sensors
JP2013186232A (ja) * 2012-03-07 2013-09-19 Sharp Corp 情報端末、情報端末を制御するための方法、および、情報端末を制御するための方法を実現するためのプログラム
US20150054984A1 (en) * 2012-03-15 2015-02-26 Nec Display Solutions, Ltd. Image display apparatus and image display method
US8898687B2 (en) * 2012-04-04 2014-11-25 Microsoft Corporation Controlling a media program based on a media reaction
EP2836889A4 (en) * 2012-04-12 2015-11-18 Intel Corp SELECTIVE BACKLIGHT OF A SCREEN BASED ON OCULOMETRY
US9633186B2 (en) * 2012-04-23 2017-04-25 Apple Inc. Systems and methods for controlling output of content based on human recognition data detection
CA2775700C (en) 2012-05-04 2013-07-23 Microsoft Corporation Determining a future portion of a currently presented media program
JP5336019B1 (ja) * 2012-05-15 2013-11-06 シャープ株式会社 表示装置、表示装置の制御方法、テレビジョン受像機、制御プログラム、および記録媒体
US20130342672A1 (en) * 2012-06-25 2013-12-26 Amazon Technologies, Inc. Using gaze determination with device input
US20140035814A1 (en) * 2012-07-31 2014-02-06 Diogo Strube de Lima Adjusting settings of a presentation system
DE102012108626B4 (de) * 2012-09-14 2018-11-15 Fujitsu Technology Solutions Intellectual Property Gmbh Anzeigevorrichtung mit einem richtungsabhängigen Sensor
US9407961B2 (en) * 2012-09-14 2016-08-02 Intel Corporation Media stream selective decode based on window visibility state
CN103856811B (zh) * 2012-11-28 2017-12-26 联想(北京)有限公司 多媒体数据的解码控制方法、装置及设备
CN103902027A (zh) * 2012-12-26 2014-07-02 鸿富锦精密工业(深圳)有限公司 智能切换装置及其智能切换方法和***
SE536990C2 (sv) * 2013-01-22 2014-11-25 Crunchfish Ab Förbättrad spårning av ett objekt för styrning av ett beröringsfritt användargränssnitt
US9772764B2 (en) 2013-06-06 2017-09-26 Microsoft Technology Licensing, Llc Accommodating sensors and touch in a unified experience
CN103412647B (zh) * 2013-08-13 2016-07-06 广东欧珀移动通信有限公司 一种人脸识别的页面显示控制方法及移动终端
US9424586B1 (en) * 2013-09-18 2016-08-23 American Megatrends, Inc. Remote sensor management
KR102166777B1 (ko) * 2013-09-30 2020-11-04 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
US10204360B1 (en) 2013-12-12 2019-02-12 American Megatrends, Inc. Systems and methods for processing payments to trigger release of digital advertising campaigns for display on digital signage devices
JP6608137B2 (ja) * 2014-01-03 2019-11-20 ハーマン インターナショナル インダストリーズ インコーポレイテッド ディスプレイ上の両眼転導検出
GB2522020B (en) * 2014-01-08 2018-01-10 Greengage Lighting Ltd A method of livestock rearing and a livestock shed
KR20150088614A (ko) * 2014-01-24 2015-08-03 삼성전자주식회사 전자 장치에서 환경에 따른 출력 제어를 위한 방법 및 장치
KR102163850B1 (ko) * 2014-01-29 2020-10-12 삼성전자 주식회사 디스플레이장치 및 그 제어방법
US11265534B2 (en) 2014-02-08 2022-03-01 Microsoft Technology Licensing, Llc Environment-dependent active illumination for stereo matching
KR102210705B1 (ko) * 2014-06-09 2021-02-02 삼성전자주식회사 케이블모뎀장치, 방송수신장치, 방송신호송신장치 및 그들의 제어방법
KR20150145616A (ko) * 2014-06-20 2015-12-30 엘지전자 주식회사 디스플레이 장치 및 그의 동작 방법
CN106462227A (zh) * 2014-08-07 2017-02-22 日立麦克赛尔株式会社 投影型影像显示装置及其控制方法
KR102245823B1 (ko) * 2014-09-16 2021-04-30 삼성디스플레이 주식회사 액정표시장치 및 그의 구동방법
KR102277668B1 (ko) * 2014-11-05 2021-07-15 삼성전자 주식회사 방송수신장치, 이를 포함하는 시스템 및 그 제어방법
CN104581313B (zh) * 2015-01-19 2016-09-21 泰州市海陵区一马商务信息咨询有限公司 观众睡眠时电视节目信息记录***
CN104540020B (zh) * 2015-01-19 2016-05-11 无锡桑尼安科技有限公司 一种观众睡眠时电视节目信息记录方法
CN106157861B (zh) * 2015-04-03 2020-08-25 联想(北京)有限公司 一种电子设备、控制方法及装置
JP6255537B2 (ja) * 2015-07-29 2017-12-27 富士フイルム株式会社 投写型表示装置及び投写制御方法
WO2017020954A1 (en) * 2015-08-06 2017-02-09 Arcelik Anonim Sirketi Multi-point motion sensing and user monitoring system for an image display device
US10332482B2 (en) * 2015-09-25 2019-06-25 Fresenius Medical Care Holdings, Inc. Automated display dimness control for a medical device
CN105491427B (zh) * 2015-11-24 2019-01-29 深圳创维-Rgb电子有限公司 一种智能电视的控制***及其实现方法
JP6906940B2 (ja) 2015-12-28 2021-07-21 株式会社半導体エネルギー研究所 半導体装置
JP2017161630A (ja) * 2016-03-08 2017-09-14 船井電機株式会社 表示装置
US9798385B1 (en) 2016-05-31 2017-10-24 Paypal, Inc. User physical attribute based device and content management system
US10037080B2 (en) 2016-05-31 2018-07-31 Paypal, Inc. User physical attribute based device and content management system
JPWO2017212610A1 (ja) * 2016-06-09 2018-09-06 三菱電機株式会社 表示制御装置、表示装置、車載ディスプレイシステムおよび表示制御方法
JP2018067840A (ja) * 2016-10-20 2018-04-26 富士ゼロックス株式会社 情報処理装置及び画像処理装置
KR20180055322A (ko) 2016-11-17 2018-05-25 삼성전자주식회사 디스플레이 장치 및 이의 제어 방법
US10585277B2 (en) * 2017-08-31 2020-03-10 Tobii Ab Systems and methods for tracking a gaze of a user across a multi-display arrangement
JP7021885B2 (ja) * 2017-09-11 2022-02-17 株式会社日立エルジーデータストレージ 距離測定装置
CN107680556B (zh) * 2017-11-03 2019-08-02 深圳市华星光电半导体显示技术有限公司 一种显示器节能方法、装置及显示器
US10200753B1 (en) 2017-12-04 2019-02-05 At&T Intellectual Property I, L.P. Resource management for video streaming with inattentive user
TWI651966B (zh) * 2017-12-29 2019-02-21 瑞軒科技股份有限公司 影音控制系統
JP6585218B1 (ja) * 2018-03-28 2019-10-02 Eizo株式会社 表示システム及びプログラム
WO2020049706A1 (ja) * 2018-09-07 2020-03-12 三菱電機株式会社 エレベーター
WO2020133465A1 (en) * 2018-12-29 2020-07-02 Zhejiang Dahua Technology Co., Ltd. Systems and methods for multi-video stream transmission
US11809535B2 (en) 2019-12-23 2023-11-07 Intel Corporation Systems and methods for multi-modal user device authentication
US11360528B2 (en) 2019-12-27 2022-06-14 Intel Corporation Apparatus and methods for thermal management of electronic user devices based on user activity
US11455652B2 (en) * 2020-06-30 2022-09-27 The Nielsen Company (Us), Llc Methods and apparatus to estimate the second frequency moment for computer-monitored media accesses
CN112434741A (zh) * 2020-11-25 2021-03-02 杭州盛世传奇标识***有限公司 一种互动介绍标识的使用方法、***、装置和存储介质
GB2612306A (en) * 2021-10-25 2023-05-03 Sony Interactive Entertainment Inc Streaming system and method
US11783789B1 (en) 2022-05-13 2023-10-10 Meta Platforms Technologies, Llc Dynamic brightness compensation in display assembly
US11881182B1 (en) * 2022-07-04 2024-01-23 Tcl China Star Optoelectronics Technology Co., Ltd. Light-emitting device driver chip, backlight module, and display panel

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11288259A (ja) * 1998-02-06 1999-10-19 Sanyo Electric Co Ltd 省電力制御方法及びその装置
US6301671B1 (en) * 1998-03-23 2001-10-09 International Business Machines Corporation Apparatus and method for power reduction control in a video encoder device
JP2000048255A (ja) * 1998-07-29 2000-02-18 Sharp Corp 省電力機能搭載の販売管理装置
US6346891B1 (en) * 1998-08-31 2002-02-12 Microsoft Corporation Remote control system with handling sensor in remote control device
JP2000242255A (ja) * 1999-02-17 2000-09-08 Canon Inc 画像表示装置
JP2001134351A (ja) * 1999-11-08 2001-05-18 Nec Gumma Ltd マウスのパワーマネジメント装置及びそのパワーマネジメント方法
JP2001245195A (ja) * 2000-02-29 2001-09-07 Olympus Optical Co Ltd 電子カメラ
JP2003174505A (ja) * 2001-12-05 2003-06-20 Kyocera Corp 携帯端末、及びその消費電力削減方法
JP2004312401A (ja) * 2003-04-08 2004-11-04 Sony Corp 再生装置および再生方法
JP2005221907A (ja) * 2004-02-09 2005-08-18 Sanyo Electric Co Ltd 表示装置
JP2005252375A (ja) * 2004-03-01 2005-09-15 Hitachi Ltd 携帯用動画再生装置
US20050229228A1 (en) * 2004-04-07 2005-10-13 Sandeep Relan Unicast cable content delivery
JP4147204B2 (ja) * 2004-06-01 2008-09-10 北斗電子工業株式会社 消費電力削減量の評価支援方法、評価支援装置、および電力制御装置
JP2006003787A (ja) * 2004-06-21 2006-01-05 Fujitsu Ten Ltd 表示制御装置
JP2006033667A (ja) * 2004-07-21 2006-02-02 Hitachi Ltd Osd表示装置
KR100763174B1 (ko) * 2004-11-13 2007-10-04 삼성전자주식회사 절전 레벨을 디스플레이하는 장치 및 방법
US8184132B2 (en) * 2005-03-01 2012-05-22 Panasonic Corporation Electronic display device medium and screen display control method used for electronic display medium
US20060256133A1 (en) * 2005-11-05 2006-11-16 Outland Research Gaze-responsive video advertisment display
JP5226188B2 (ja) * 2006-02-27 2013-07-03 京セラ株式会社 画像表示装置およびその表示方法
JP4876687B2 (ja) * 2006-04-19 2012-02-15 株式会社日立製作所 注目度計測装置及び注目度計測システム
JP2008015401A (ja) * 2006-07-10 2008-01-24 Epson Imaging Devices Corp 電気光学装置、電気光学装置の駆動方法、および電子機器
CN200953604Y (zh) * 2006-09-05 2007-09-26 康佳集团股份有限公司 节能电视机
JP5059432B2 (ja) * 2007-02-01 2012-10-24 矢崎総業株式会社 ガスメータ、ガス漏れ警報器およびガス漏れ警報システム
JP5098438B2 (ja) * 2007-05-24 2012-12-12 株式会社デンソー 情報表示装置
JP2009077039A (ja) * 2007-09-19 2009-04-09 Panasonic Corp デジタル放送受信装置、半導体集積回路及びデジタル放送受信方法
US20100079508A1 (en) * 2008-09-30 2010-04-01 Andrew Hodge Electronic devices with gaze detection capabilities

Also Published As

Publication number Publication date
CN101894502B (zh) 2014-03-12
JP2010271339A (ja) 2010-12-02
CN101894502A (zh) 2010-11-24
US20100295839A1 (en) 2010-11-25

Similar Documents

Publication Publication Date Title
JP5299866B2 (ja) 映像表示装置
US9104408B2 (en) Image display device, control method and computer program
US9798144B2 (en) Wearable image display device to control display of image
US9191662B2 (en) Display apparatus and associated glasses
EP2896985A1 (en) Image display device
US20120105608A1 (en) Method, shutter glasses, and apparatus for controlling environment brightness received by shutter glasses
US9933985B2 (en) Systems and methods for managing content presentation involving a head mounted display and a presentation device
JP2011035796A (ja) 映像処理装置及び映像処理方法
JP5583531B2 (ja) 映像表示装置
JP4802276B2 (ja) 映像表示装置、方法、及び位置判定装置
JP2011229141A (ja) テレビ受信機、およびテレビ受信機の動作モード自動設定方法
JP2007280239A (ja) 表示灯制御プログラム、情報処理装置および表示灯制御方法
JP2008299241A (ja) 画像処理装置及び表示装置
JP2011239029A (ja) 映像表示装置、省電力制御装置、及び省電力方法
JP2008244917A (ja) 受像機制御システム
JP2011029949A (ja) 映像表示装置
JP2004213486A (ja) 画像処理装置および方法、記録媒体、並びにプログラム
JP2012173683A (ja) 表示制御装置、情報表示装置、及び表示制御方法
JP2010134381A (ja) 表示方法、表示装置及びコンピュータプログラム
JP2011076061A (ja) 映像処理装置及びその制御方法
JP2012244504A (ja) 映像表示装置及び人感センサ部の故障判定方法
JPWO2011086942A1 (ja) 眼鏡装置及び映像システム
JP5302876B2 (ja) 映像表示装置、検知状態提示方法、プログラムおよび記録媒体
JP2006013938A (ja) 表示装置
JP2007058687A (ja) マルチディスプレイ装置及び表示装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120313

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120925

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120926

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20121121

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20121211

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130208

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130305

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130422

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130514

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20130529

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130610

R150 Certificate of patent or registration of utility model

Ref document number: 5299866

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250