JP7416033B2 - 表示方法、表示システムおよび表示プログラム - Google Patents

表示方法、表示システムおよび表示プログラム Download PDF

Info

Publication number
JP7416033B2
JP7416033B2 JP2021169378A JP2021169378A JP7416033B2 JP 7416033 B2 JP7416033 B2 JP 7416033B2 JP 2021169378 A JP2021169378 A JP 2021169378A JP 2021169378 A JP2021169378 A JP 2021169378A JP 7416033 B2 JP7416033 B2 JP 7416033B2
Authority
JP
Japan
Prior art keywords
brightness
user
image
color tone
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021169378A
Other languages
English (en)
Other versions
JP2023059390A (ja
Inventor
美孝 中進
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Priority to JP2021169378A priority Critical patent/JP7416033B2/ja
Priority to CN202211252726.5A priority patent/CN115988158A/zh
Priority to US17/965,993 priority patent/US11854502B2/en
Publication of JP2023059390A publication Critical patent/JP2023059390A/ja
Application granted granted Critical
Publication of JP7416033B2 publication Critical patent/JP7416033B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/193—Preprocessing; Feature extraction
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/34—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
    • G09G3/3406—Control of illumination source
    • G09G3/342—Control of illumination source using several illumination sources separately controlled corresponding to different display panel areas, e.g. along one dimension such as lines
    • G09G3/3426—Control of illumination source using several illumination sources separately controlled corresponding to different display panel areas, e.g. along one dimension such as lines the different display panel areas being distributed in two dimensions, e.g. matrix
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412—Digitisers structurally integrated in a display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/761—Proximity, similarity or dissimilarity measures
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/34—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
    • G09G3/3406—Control of illumination source
    • G09G3/3413—Details of control of colour illumination sources
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0425—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00—Indexing scheme relating to image or video recognition or understanding
    • G06V2201/02—Recognising information on displays, dials, clocks
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0626—Adjustment of display parameters for control of overall brightness
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0666—Adjustment of display parameters for control of colour parameters, e.g. colour temperature
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/02—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/10—Intensity circuits

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Hardware Design (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Computing Systems (AREA)
  • Evolutionary Computation (AREA)
  • Databases & Information Systems (AREA)
  • Medical Informatics (AREA)
  • Software Systems (AREA)
  • Artificial Intelligence (AREA)
  • Ophthalmology & Optometry (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • User Interface Of Digital Computer (AREA)

Description

本発明は、表示方法、表示システムおよび表示プログラムに関する。
従来、表示画面を見るユーザーの眼精疲労を軽減する技術が開発されている。例えば、
下記特許文献１に開示されるヘッドマウント型表示装置は、表示部と、光学部と、検知部
と、タイマーと、制御部とを含む。表示部は、画像を表示する。光学部は、表示部に表示
された画像をユーザーの視覚に検知させる。検知部は、ヘッドマウント型表示装置がユー
ザーに装着されているか否かを検知する。タイマーは、ヘッドマウント型表示装置がユー
ザーに装着され、かつ表示部に画像が表示されている時間を計測する。制御部は、タイマ
ーにより計測された時間の経過に対応させて、ユーザーの眼精疲労を抑制するように、視
覚に検知される画像を変化させる。
特開２００３－０７６３５３号公報
上述した特許文献１に記載された技術では、表示全体の輝度を低下させることによりユーザーの眼精疲労を軽減している。この方法を、例えば複数のユーザーが同時に使用することが想定された大型画面に適用すると、遠くから大型画面を見た場合の視認性が低下する等により、利便性が低下する可能性がある。
本発明の一態様に係る表示方法は、表示面に、画像を表示することと、前記表示面に顔を向けている第１ユーザーの瞼の動きに基づいて、前記画像のうち前記第１ユーザーに対応する部分である第１部分の明るさ又は色調を、前記画像のうち前記第１部分とは異なる第２部分の前記明るさ又は色調と異ならせることと、を含む。
本発明の一態様に係る表示システムは、表示面に画像を表示する表示装置と、前記表示面に顔を向けている第１ユーザーの瞼の動きに基づいて、前記画像のうち前記第１ユーザーに対応する部分である第１部分の明るさ又は色調を、前記画像のうち前記第１部分とは異なる第２部分の前記明るさ又は色調と異ならせた前記画像を示す信号を前記表示装置に出力する処理装置と、を備える。
本発明の一態様に係る表示プログラムは、処理装置に、表示面に画像を表示させることと、前記表示面に顔を向けている第１ユーザーの瞼の動きに基づいて、前記画像のうち前記第１ユーザーに対応する部分である第１部分の明るさ又は色調を、前記画像のうち前記第１部分とは異なる第２部分の前記明るさ又は色調と異ならせることと、を実行させる。
実施形態に係る表示システム１の使用例を示す概略図である。 投射画像ＰＣの一例を示す模式図である。 投射画像ＰＣの一例を示す模式図である。 表示システム１の構成を模式的に示す図である。 処理装置１０３による処理の手順を示すフローチャートである。 対象ユーザーＵＴ１が１人で投射画像ＰＣを見ている場合を模式的に示す図である。 複数の対象ユーザーＵＴ２～ＵＴ５が投射画像ＰＣの近傍に位置する場合を模式的に示す図である。 対象ユーザーＵＴ１が１人で投射画像ＰＣを見ている場合を模式的に示す図である。 対象ユーザーＵＴ１が１人で投射画像ＰＣを見ている場合を模式的に示す図である。 複数の対象ユーザーＵＴ２～ＵＴ４が投射画像ＰＣの近傍に位置する場合を模式的に示す図である。
以下、添付図面を参照しながら本発明に係る好適な実施形態を説明する。なお、図面において各部の寸法又は縮尺は実際と適宜に異なり、理解を容易にするために模式的に示している部分もある。また、本発明の範囲は、以下の説明において特に本発明を限定する旨の記載がない限り、これらの形態に限られない。
［実施形態］
［１．表示システムの概要］
図１は、実施形態に係る表示システム１の使用例を示す概略図である。図１に示すように表示システム１は、例えば、駅やショッピングビルなど多数の人が集まる空間Ｓにおいて画像を表示するために設けられている。本実施形態では、表示システム１は、プロジェクター１０により、壁面Ｗの少なくとも一部に、投射画像ＰＣを投射する。壁面Ｗのうち、プロジェクター１０により投射画像ＰＣが投射される領域を、投射領域ＦＰとする。壁面Ｗの全面が投射領域ＦＰであってもよい。投射領域ＦＰは、表示面の一例である。また、投射画像ＰＣは、画像の一例である。なお、表示システム１は、例えば、壁面Ｗに設置されたディスプレイに画像を表示するシステムであってもよい。この場合は、ディスプレイの表面が、表示面に相当する。
本実施形態では、表示システム１による投射領域ＦＰは、複数のユーザーＵが同時に投射画像ＰＣを見ることが可能な広さであるものとする。この場合、投射領域ＦＰの全体に１つの投射画像ＰＣが投射され、これを複数のユーザーＵが同時に見てもよいし、投射領域ＦＰに複数の投射画像ＰＣが投射され、各ユーザーＵがそれぞれ異なる投射画像ＰＣを見てもよい。なお、後者の場合のユーザーＵとは、一緒に行動する複数のユーザーＵで構成されるグループであってもよい。本実施形態では、前者のように、投射領域ＦＰに１つの投射画像ＰＣが投射され、各ユーザーＵがそれぞれ異なる投射画像ＰＣの一部の領域を見るものとする。
また、表示システム１は、ライトカーテン生成装置１２により、図３に示されるライトカーテンＬを投射領域ＦＰの近傍に射出する。ライトカーテンＬの反射光を検出することにより、ユーザーＵによってタッチされた、投射画像ＰＣ上の位置が検出される。表示システム１においては、投射領域ＦＰに対するユーザーＵのタッチ操作に基づいて投射画像ＰＣの内容が動的に変化する。すなわち、表示システム１においては、インタラクティブな画像表示が行われる。
図２Ａおよび図２Ｂは、投射画像ＰＣの一例を示す模式図である。図２Ａおよび図２Ｂは、投射領域ＦＰの一部の領域ＦＰ－Ａを示している。図２Ａおよび図２Ｂの例は、表示システム１がショッピングビルに設けられている場合を想定している。初期状態において、領域ＦＰ－Ａに表示される画像ＰＣ－Ａは、複数のアイコンＩＣ１～ＩＣ３を含んでいる。例えば、アイコンＩＣ１は「食べる」というキーワードに対応している。同様に、アイコンＩＣ２は「買う」、アイコンＩＣ３は「楽しむ」というキーワードに、それぞれ対応している。アイコンＩＣ１～ＩＣ３のいずれかが投射された領域にユーザーＵがタッチすると、当該アイコンＩＣのキーワードに対応する、ショッピングビル内の店舗の一覧ＬＳが表示される。
例えば、ユーザーＵが、「食べる」に対応するアイコンＩＣ１が投射された領域をタッチすると、図２Ｂに示すように、ショッピングビル内の飲食店の一覧ＬＳを含む画像ＰＣ－Ｂが表示される。すなわち、飲食店の一覧ＬＳが、ユーザーＵのタッチに連動して変化した投射画像ＰＣの一部分となる。
飲食店の一覧ＬＳは、飲食店の店名、提供される料理のジャンル、フロアなどの大まかな位置情報を含む、店舗の概要情報ＳＩを含む。ユーザーＵが、いずれかの店舗の概要情報ＳＩが投射された領域にタッチすると、当該店舗の位置情報や営業時間情報、メニュー情報などの詳細情報が表示される。
なお、表示システム１は、インタラクティブな画像表示を行うのではなく、ユーザーＵの操作の有無に関わらず、予め決められた画像を表示するシステムであってもよい。
［２．表示システムの構成］
図３は、表示システム１の構成を示すブロック図である。表示システム１は、プロジェクター１０と、ライトカーテン生成装置１２と、第１撮像装置１４Ａと、第２撮像装置１４Ｂを備える。図１に示すように、表示システム１は、比較的大きな投射領域ＦＰを有している。よって、プロジェクター１０と、ライトカーテン生成装置１２と、第１撮像装置１４Ａと、第２撮像装置１４Ｂとのうち、少なくとも１つが、複数設けられていてもよい。例えば、図１の壁面Ｗの幅方向に沿って、プロジェクター１０、ライトカーテン生成装置１２、第１撮像装置１４Ａおよび第２撮像装置１４Ｂを含む装置群が複数配置されてもよい。
第１撮像装置１４Ａは、撮像素子として、赤外領域および可視光領域の光を受光するＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）イメージセンサーを有する。撮像素子は、ＣＣＤイメージセンサーに限らず、例えば、赤外領域および可視光領域の光を受光するＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサーでもよい。第１撮像装置１４Ａには、ユーザーＵの指Ｆ等の物体によるライトカーテンＬの反射光を受光するために赤外線フィルターが取り付けられている。第１撮像装置１４Ａは、壁面Ｗの投射領域ＦＰを撮像した第１撮像画像に対応する第１撮像画像データを生成する。ライトカーテンＬの一部が物体によって反射される場合、第１撮像画像データは、物体によるライトカーテンＬの反射光が含まれる。第１撮像装置１４Ａは、例えば、プロジェクター１０と一体に構成されてもよい。第１撮像装置１４Ａは、第１撮像画像データをプロジェクター１０に出力する。
第２撮像装置１４Ｂは、撮像素子として、可視光領域の光を受光するＣＣＤイメージセンサーを有する。撮像素子は、ＣＣＤイメージセンサーに限らず、例えば、可視光領域の光を受光するＣＭＯＳイメージセンサーでもよい。第２撮像装置１４Ｂは、投射領域ＦＰに対向する領域を撮像することによって、第２撮像画像に対応する第２撮像画像データを出力する。一例としては、第２撮像装置１４Ｂは、壁面Ｗに、壁面Ｗの法線方向を撮像方向として設置される。これは、投射領域ＦＰに顔を向けているユーザーＵの顔を第２撮像画像に写すためである。第２撮像装置１４Ｂは、第２撮像画像データをプロジェクター１０に出力する。
ライトカーテン生成装置１２は、図１に示すように、壁面Ｗのうち、投射領域ＦＰよりも上方に設置される。ライトカーテン生成装置１２は、壁面Ｗではなく、天井Ｃの一部に設置されてもよい。ライトカーテン生成装置１２は、壁面Ｗの表面に沿う平面状の光であるライトカーテンＬを射出する。ライトカーテンＬは、平面状の光に限らず、他の形状の光であってもよい。ライトカーテンＬは、赤外線波長帯の光である。本実施形態では、ライトカーテンＬは、壁面Ｗに沿って進み、壁面Ｗのうち、少なくとも投射領域ＦＰを覆う。ライトカーテンＬは、壁面Ｗの表面から、数ミリメートルの距離で法線方向に離れるように射出される。タッチ位置ＴＰの検出精度の向上のためには、ライトカーテンＬと壁面Ｗの表面との距離を小さくするのが好ましい。一方で、これらを近づけすぎると、壁面Ｗの表面状態等によっては誤検出が発生することになる。よって、ライトカーテンＬと壁面Ｗの表面との距離は適宜調整される。
ライトカーテンＬは、ユーザーＵによって指示される投射画像ＰＣ上のタッチ位置ＴＰを検出するために使用される。ユーザーＵによる投射画像ＰＣへのタッチは、多くの場合ユーザーＵの指Ｆで行われると想定するが、例えば、棒又はペン等で投射画像ＰＣがタッチされてもよい。
具体的には、ライトカーテン生成装置１２は、レーザー光源ユニット１２１と、レーザー光源ユニット１２１を制御する射出制御装置１２２とを含む。
レーザー光源ユニット１２１は、ライトカーテンＬを射出する。上述のように、ライトカーテンＬは、赤外線波長帯の光であり、レーザー光源ユニット１２１は、赤外線波長帯のレーザー光を射出する。レーザー光源ユニット１２１は、例えば、１つ又は複数のＬＤ（Ｌａｓｅｒ Ｄｉｏｄｅ）に、コリメーターレンズおよびパウエルレンズ等の光学系部材が取り付けられているユニットである。ライトカーテン生成装置１２は、レーザー光源ユニット１２１に限らず、例えばＬＥＤ（Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）を用いてライトカーテンＬを射出するユニットでもよい。
射出制御装置１２２は、壁面Ｗに対するライトカーテンＬの射出角度および壁面ＷにおけるライトカーテンＬの射出位置等を制御する。射出制御装置１２２は、レーザー光源ユニット１２１の向きや位置を調整するアクチュエーター、アクチュエーターを制御する制御装置等を含む。
プロジェクター１０は、図１に示すように、壁面Ｗに接続する天井Ｃに設置される。プロジェクター１０は、天井Ｃではなく、壁面Ｗの一部に設置されてもよい。プロジェクター１０が画像を投射する表示面は、壁面Ｗに限らず、例えば、スクリーンなどであってもよい。
プロジェクター１０は、入力装置１００と、通信装置１０１と、記憶装置１０２と、処理装置１０３と、投射装置１０５とを含む。
入力装置１００は、例えば、表示システム１の管理者からの入力等を受ける各種の操作ボタン、操作キー又はタッチパネルを含む。入力装置１００は、管理者から入力される情報を、無線又は有線でプロジェクター１０に送信するリモートコントローラーでもよい。この場合、プロジェクター１０は、リモートコントローラーが送信する情報を受信する受信装置を備える。リモートコントローラーは、管理者からの入力を受ける各種の操作ボタン、操作キー又はタッチパネルを備える。
通信装置１０１は、他の機器との間で通信を行うためのインターフェースである。本実
施形態では、通信装置１０１は、図示しない画像サーバーとの間で通信を行う。通信装置
１０１における通信は、無線通信であってもよいし、有線通信であってもよい。無線通信
を行う場合、通信装置１０１は、通信回路とアンテナ等を有し、例えばＢｌｕｅｔｏｏｔ
ｈ又はＷｉ－Ｆｉにより無線通信を行う。ＢｌｕｅｔｏｏｔｈおよびＷｉ－Ｆｉは登録商
標である。また、有線通信を行う場合、通信装置１０１は、通信回路と、通信用配線が接
続されるコネクター等を有する。
記憶装置１０２は、コンピューター読み取り可能な記録媒体である。記憶装置１０２は、例えば、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）およびＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）を備える。記憶装置１０２は、処理装置１０３が処理する各種の情報およびプログラムを記憶する。このプログラムには、表示プログラムが含まれている。
投射装置１０５は、壁面Ｗの投射領域ＦＰに投射画像ＰＣを投射する。投射装置１０５は、表示装置の一例であり、画像処理回路、フレームメモリー、液晶ライトバルブ、ライトバルブ駆動回路、光源、投射光学系等を備える。画像処理回路は、処理装置１０３又は図示しない画像サーバー等の画像供給装置から画像データを受け取ると、当該画像データをフレームメモリーに展開し、必要な画像処理を行う。この画像処理は、例えば画像データの解像度を液晶ライトバルブの解像度に変換する処理、台形ゆがみを解消する幾何的補正処理等である。画像処理後の画像データは画像信号に変換され、画像信号に基づいて液晶ライトバルブ等が駆動されることによって、画像データが画像として投射される。なお、投射装置１０５は、上述した液晶ライトバルブ等を用いた液晶方式の他、例えば、ＤＬＰ（Ｄｉｇｉｔａｌ Ｌｉｇｈｔｉｎｇ Ｐｒｏｃｅｓｓｉｎｇ、登録商標）方式であってもよい。なお、表示装置がディスプレイである場合、表示装置は、光源および表示パネル等を備える。
処理装置１０３は、例えば、単数又は複数のプロセッサーによって構成される。一例を挙げると、処理装置１０３は、単数又は複数のＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）によって構成される。処理装置１０３の機能の一部又は全部は、ＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）、ＰＬＤ（Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ｄｅｖｉｃｅ）、ＦＰＧＡ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）等の回路によって構成されてもよい。処理装置１０３は、各種の処理を並列的又は逐次的に実行する。
処理装置１０３は、記憶装置１０２から表示プログラムを読み取り実行することによって、タッチ検出部１０３Ａと、表示画像制御部１０３Ｂと、ユーザー検出部１０３Ｃと、疲労検出部１０３Ｄと、画像処理制御部１０３Ｅとを実現する。タッチ検出部１０３Ａと、表示画像制御部１０３Ｂと、ユーザー検出部１０３Ｃと、疲労検出部１０３Ｄと、画像処理制御部１０３Ｅとの全部又は一部は、ＦＰＧＡ等のハードウェアで構成されてもよい。
タッチ検出部１０３Ａは、投射領域ＦＰがタッチされたことを検出する。タッチ検出部１０３Ａは、第１撮像装置１４Ａで撮像された第１撮像画像データにライトカーテンＬの反射光が写った場合、投射領域ＦＰがタッチされたものとして検出する。
また、タッチ検出部１０３Ａは、投射領域ＦＰ上におけるタッチ位置を検出する。タッチ検出部１０３Ａは、投射領域ＦＰがタッチされた場合、第１キャリブレーションデータと、第１撮像画像データとに基づいて、投射領域ＦＰ上におけるタッチ位置ＴＰを検出する。第１キャリブレーションデータは、投射装置１０５のフレームメモリーに展開された画像上の座標と、第１撮像画像データ上の座標とを対応づけるデータである。フレームメモリー上の座標は、投射領域ＦＰ上の座標に対応する。第１キャリブレーションデータを用いることで、タッチ検出部１０３Ａは、第１撮像画像データ上におけるタッチ位置を、投射領域ＦＰ上におけるタッチ位置ＴＰに変換することができる。
表示画像制御部１０３Ｂは、投射領域ＦＰ上におけるタッチ位置ＴＰに基づいて、投射画像ＰＣとして投射する画像を制御する。すなわち、表示画像制御部１０３Ｂは、投射領域ＦＰへのタッチに連動して投射画像ＰＣの一部分を変化させる。
表示画像制御部１０３Ｂは、例えば、画像サーバーに投射領域ＦＰ上におけるタッチ位置ＴＰの座標を送信する。画像サーバーは、投射領域ＦＰ上におけるタッチ位置ＴＰの座標と、現在投射領域ＦＰに表示されている投射画像ＰＣの画像データとに基づいて、次にタッチ位置ＴＰの周辺に表示すべき画像である次表示画像を特定し、次表示画像の画像データをプロジェクター１０に送信する。図２Ａおよび図２Ｂを例にして説明すると、例えば、現在投射領域ＦＰに投射されている投射画像ＰＣが、図２Ａの画像ＰＣ－Ａであり、タッチ位置ＴＰの座標が、「食べる」に対応するアイコンＩＣ１の表示範囲に含まれるとする。この場合、画像サーバーは、図２Ｂに示す画像ＰＣ－Ｂの画像データを、次表示画像として送信する。表示画像制御部１０３Ｂは、次表示画像として送信された画像データを、投射画像ＰＣとして投射領域ＦＰに投射させる。
ユーザー検出部１０３Ｃは、第２撮像装置１４Ｂで撮像された第２撮像画像に基づいて、投射領域ＦＰを見るユーザーＵを検出する。ユーザー検出部１０３Ｃは、例えば、第２撮像画像から人に対応する特徴点を有する領域を特定し、第２撮像画像上におけるユーザーＵの位置を特定する。また、ユーザー検出部１０３Ｃは、各ユーザーＵの視線を検出し、視線が投射領域ＦＰに向いているユーザーＵを検出する。以下、ユーザー検出部１０３Ｃによって検出された投射領域ＦＰを見るユーザーＵを「対象ユーザーＵＴ」という。対象ユーザーＵＴは、第１ユーザーの一例である。
疲労検出部１０３Ｄは、第２撮像画像に基づいて、対象ユーザーＵＴの瞼の動きを検出する。また、疲労検出部１０３Ｄは、第２撮像画像に写る対象ユーザーＵＴの瞼の動きが第１状態であるか否かを判定する。第１状態とは、例えば、対象ユーザーＵＴが眼精疲労の状態にある可能性が高い場合の瞼の動きである。一般に、ユーザーＵは、表示画像を長時間見ていると、目が疲れてくる。目が疲れると、ユーザーＵは、目が疲れていない場合と比較して、まばたきが増える、目を細めるなどの、瞼の動きに特徴がある動作を行う。なお、本明細書において、「眼精疲労」と「目の疲れ」は同じ意味であるものとする。
よって、本実施形態では、第１状態を、対象ユーザーＵＴの単位時間当たりのまばたきの回数が、初期状態と比較して所定値以上増加した状態とする。初期状態とは、例えば、ユーザー検出部１０３Ｃによって対象ユーザーＵＴが検出された直後の単位時間におけるまばたきの回数とすることができる。
なお、第１状態と異なる状態として、第２状態を定義する。第２状態は、例えば第１状態以外の状態とする。本実施形態では、第２状態とは、対象ユーザーＵＴの単位時間当たりのまばたきの回数が、初期状態と比較して所定値未満増加している場合、対象ユーザーＵＴの単位時間当たりのまばたきの回数が、初期状態と変化ない場合、および、対象ユーザーＵＴの単位時間当たりのまばたきの回数が、初期状態と比較して減少している場合を含む。なお、第１状態および第２状態は、まばたきの回数に限らず、例えば、第２撮像画像中の対象ユーザーＵＴの顔面積に対する目の面積の比率などによって定義してもよい。
画像処理制御部１０３Ｅは、画像処理回路に対して、投射画像ＰＣの一部に対する画像処理を行うように指示する。画像処理制御部１０３Ｅは、投射領域ＦＰに顔を向けている対象ユーザーＵＴの瞼の動きに基づいて、投射画像ＰＣのうち対象ユーザーＵＴに対応する部分である第１部分Ｐ１の明るさ又は色調を、投射画像ＰＣのうち第１部分Ｐ１とは異なる第２部分Ｐ２の明るさ又は色調と異ならせる。
第１部分Ｐ１の詳細は後述するが、第１部分Ｐ１は、例えば、対象ユーザーＵＴと対向する投射画像ＰＣの部分を含む。また、第２部分Ｐ２は、第１部分Ｐ１を除く投射画像ＰＣの部分である。言い換えると、第２部分Ｐ２は、対象ユーザーＵＴの瞼の動きが第１状態となる前の第１部分Ｐ１の明るさ又は色調と、同じ明るさ又は色調の部分である。
本実施形態において、明るさとは、例えば、第１部分Ｐ１における投射画像ＰＣの輝度である。明るさを異ならせるとは、一例としては、輝度を異ならせることである。また、明るさを異ならせるとは、例えば、投射画像ＰＣの最大輝度と最小輝度の比であるコントラスト比を異ならせることであってもよいし、入力画像信号の大きさと画像の輝度との関係を示すγ値を異ならせることであってもよい。また、本実施形態において、色調とは、例えば、明度又は彩度の少なくとも１つである。例えば、第１部分Ｐ１にカラーフィルターを重畳させることにより、第１部分Ｐ１の見た目の明るさを変化させるようにしてもよい。
本実施形態では、画像処理制御部１０３Ｅは、対象ユーザーＵＴの瞼の動きが第１状態である場合、第１部分Ｐ１の明るさを、ユーザーＵの瞼の動きが第１状態とは異なる第２状態である場合の第１部分Ｐ１の明るさよりも、暗くする。上述のように、第１状態とは、対象ユーザーＵＴの単位時間当たりのまばたきの回数が、初期状態と比較して所定値以上増加した状態であり、対象ユーザーＵＴの目が疲れていると推定される状態である。
一般に、投射画像ＰＣは、周囲の環境よりも明るく表示されるので、長時間見続けると目が疲れる場合がある。よって、表示システム１では、投射画像ＰＣを見ている対象ユーザーＵＴの目が疲れていると予測される場合には、投射画像ＰＣのうち、対象ユーザーＵＴが見ている部分を含む第１部分Ｐ１の明るさを暗くする。これにより、対象ユーザーＵＴの目が受ける刺激が低減され、対象ユーザーＵＴの目の疲労を軽減することができる。
画像処理制御部１０３Ｅは、第１状態における単位時間当たりのまばたきの回数に応じて、第１部分Ｐ１の明るさを変更してもよい。例えば、第１状態が、対象ユーザーＵＴの単位時間当たりのまばたきの回数が、初期状態と比較して２０％以上増加した状態であるとする。この場合、まばたきの回数が初期状態と比較して２０％以上３０％未満の範囲で増加した状態では、第１部分Ｐ１の明るさを－５％とする。また、まばたきの回数が初期状態と比較して３０％以上４０％未満の範囲で増加した状態では、第１部分Ｐ１の明るさを－１０％とする。すなわち、まばたきの回数の増加度合いが大きいほど、第１部分Ｐ１の明るさを低減する。このようにすることで、対象ユーザーＵＴの目の疲れの程度に応じて第１部分Ｐ１の明るさを調整し、目の疲れの軽減と投射画像ＰＣの見やすさとを両立することができる。なお、第１部分Ｐ１の明るさは、例えば－３０％程度まで変更してもよい。
また、画像処理制御部１０３Ｅは、対象ユーザーＵＴの瞼の動きが第１状態である場合に、第１部分Ｐ１の明るさに代えて、又は明るさと共に、第１部分Ｐ１の色調を変化させてもよい。具体的には、例えば、第１部分Ｐ１の明度又は彩度の少なくともいずれかを低くしてもよい。この場合にも、対象ユーザーＵＴの目が受ける刺激が低減され、対象ユーザーＵＴの目の疲労を軽減することができる。
また、対象ユーザーＵＴが継続的に第１部分Ｐ１を見ている間に、急に第１部分Ｐ１の明るさ又は色調が変化すると、対象ユーザーＵＴが違和感を覚えたり、表示システム１の故障を疑ったりする可能性がある。よって、処理装置１０３は、画像処理制御部１０３Ｅで第１部分Ｐ１の明るさ又は色調を異ならせた場合に、対象ユーザーＵＴに明るさ又は色調を異ならせたことを通知してもよい。通知の方法は任意であるが、例えば、第１部分Ｐ１上、又は第１部分Ｐ１の外縁と接する位置に、明るさ又は色調を調整した旨のメッセージ又はアイコンを示す画像が表示されてもよい。この通知の有無は、例えば、プロジェクター１０の入力装置１００を介して、表示システム１の管理者が設定可能であってもよい。
また、画像処理制御部１０３Ｅは、第１部分Ｐ１の明るさ又は色調を変更した後、所定の条件が成立した場合には、第１部分Ｐ１の明るさ又は色調を変更前の状態に戻してもよい。所定の条件とは、例えば、対象ユーザーＵＴが第１部分Ｐ１を見るのをやめた可能性が高い場合に成立する条件である。所定の条件とは、具体的には、例えば、対象ユーザーＵＴからのタッチ操作が所定時間以上ない、対象ユーザーＵＴの顔が投射画像ＰＣに向いていない状態が所定時間以上継続している、対象ユーザーＵＴが投射領域ＦＰから所定距離以上離れた、などが挙げられる。これらの条件のうち、少なくとも１つが成立した場合には、対象ユーザーＵＴが第１部分Ｐ１を見るのをやめた可能性が高い。よって、画像処理制御部１０３Ｅは、第１部分Ｐ１の明るさ又は色調を変更前の状態に戻す。
すなわち、画像処理制御部１０３Ｅは、以下の条件１から条件３のうち少なくともいずれかが生じた場合に、第１部分Ｐ１の明るさを、対象ユーザーＵＴの瞼の動きが第２状態である場合の第１部分Ｐ１の明るさに戻してもよい。条件１は、投射領域ＦＰがタッチされたことが検出されてから第１所定時間以内に、投射領域ＦＰのタッチされた位置から第２所定距離以内に再度タッチが行われなかった場合である。条件２は、対象ユーザーＵＴが投射領域ＦＰに顔を向けていない状態が第２所定時間以上継続した場合である。条件３は、対象ユーザーＵＴが投射領域ＦＰから第３所定距離以上離れた場合である。なお、第２所定距離以内とは、例えば、前回のタッチ操作によって変更された投射画像ＰＣの範囲内であってもよい。
［３．表示システム１の動作］
図４は、処理装置１０３による処理の手順を示すフローチャートである。処理装置１０
３は、表示画像制御部１０３Ｂとして機能することにより、投射領域ＦＰに投射画像ＰＣ
を投射する（ステップＳ１２）。処理装置１０３は、ユーザー検出部１０３Ｃとして機能
することにより、投射領域ＦＰを見るユーザーＵ、すなわち対象ユーザーＵＴを検出する
（ステップＳ１４）。処理装置１０３は、対象ユーザーＵＴがいない間は待機する（ステ
ップＳ１４：ＮＯ）。対象ユーザーＵＴがいる場合（ステップＳ１４：ＹＥＳ）、処理装
置１０３は、タッチ検出部１０３Ａとして機能することにより、投射領域ＦＰがタッチさ
れたか否かを判断する（ステップＳ１６）。投射領域ＦＰがタッチされた場合（ステップ
Ｓ１６：ＹＥＳ）、処理装置１０３は、表示画像制御部１０３Ｂとして機能することによ
り、タッチ位置ＴＰに基づいて、投射画像ＰＣの一部分を変化させる（ステップＳ１８）
。また、投射領域ＦＰがタッチされない場合（ステップＳ１６：ＮＯ）、処理装置１０３
は、投射画像ＰＣを変化させず、処理をステップＳ２０に移行させる。
処理装置１０３は、疲労検出部１０３Ｄとして機能することにより、対象ユーザーＵＴの瞼の動きを検出する（ステップＳ２０）。処理装置１０３は、疲労検出部１０３Ｄとして機能することにより、対象ユーザーＵＴの瞼の動きが第１状態であるか否かを判定する（ステップＳ２２）。対象ユーザーＵＴの瞼の動きが第１状態である場合（ステップＳ２２：ＹＥＳ）、処理装置１０３は、画像処理制御部１０３Ｅとして機能することにより、投射画像ＰＣの第１部分Ｐ１の明るさを暗くする（ステップＳ２４）。上述のように、投射画像ＰＣの第１部分Ｐ１は、対象ユーザーＵＴが見ている部分であり、例えば、対象ユーザーＵＴのタッチにより表示が変化した部分である。また、対象ユーザーＵＴの瞼の動きが第１状態ではない場合（ステップＳ２２：ＮＯ）、処理装置１０３は、処理をステップＳ１６に戻す。
ステップＳ２４で投射画像ＰＣの第１部分Ｐ１の明るさを暗くした後、処理装置１０３
は、ユーザー検出部１０３Ｃとして機能することにより、対象ユーザーＵＴが第１部分Ｐ
１を見ているか否かを判定する（ステップＳ２６）。対象ユーザーＵＴが第１部分Ｐ１を
見ている場合（ステップＳ２６：ＹＥＳ）、処理装置１０３は、ステップＳ１６に処理を
戻す。この場合、第１部分Ｐ１の明るさが暗い状態が継続する。また、ステップＳ１６に
処理を戻された後、対象ユーザーＵＴが更に投射領域ＦＰをタッチして投射画像ＰＣが変
化した場合、処理装置１０３は、タッチにより変化した部分を新たな第１部分Ｐ１として
、明るさを暗くした状態を継続させる。
処理装置１０３は、対象ユーザーＵＴが第１部分Ｐ１を見なくなると（ステップＳ２６：ＮＯ）、画像処理制御部１０３Ｅとして機能することにより、ステップ２４で暗くした第１部分Ｐ１の明るさを元に戻して（ステップＳ２８）、処理をステップＳ１２に戻す。
［４．第１部分Ｐ１の設定例］
上述のように、表示システム１では、投射画像ＰＣを見ている対象ユーザーＵＴの目が疲れていると予測される場合には、対象ユーザーＵＴに対応する第１部分Ｐ１の明るさを暗くして、対象ユーザーＵＴの目の疲労を軽減する。一方で、本実施形態では、投射領域ＦＰの範囲が大きく、複数のユーザーＵが同時に投射画像ＰＣを見る可能性がある。そのため例えば、１人の対象ユーザーＵＴの瞼の動きに基づいて投射画像ＰＣの全体を暗くすると、目が疲れていない他の対象ユーザーＵＴにとっては、自身が見ている投射画像ＰＣが急に暗くなるので、違和感を覚えたり、画像が見づらくなったりする可能性がある。よって、目が疲れた対象ユーザーＵＴがいる場合に、投射画像ＰＣのどの部分を暗くするかが問題となる。すなわち、第１部分Ｐ１をどの領域にするかが問題となる。
［設定例１：タッチにより変化した画像を基準とする］
第１部分Ｐ１は、例えば、目が疲れた対象ユーザーＵＴが見ている部分を含むことが好ましい。上述のように、投射画像ＰＣは、ユーザーＵのタッチにより変化する。対象ユーザーＵＴは、自身のタッチにより変化した部分を見ている可能性が高い。よって、設定例１では、第１部分Ｐ１を、対象ユーザーＵＴのタッチにより変化した投射画像ＰＣの部分とする。
図５は、対象ユーザーＵＴ１が１人で投射画像ＰＣを見ている場合を模式的に示す図である。図５は、対象ユーザーＵＴ１を後方から見た図である。図５において、投射領域ＦＰには、図２Ｂに示す飲食店の一覧ＬＳが表示されている。飲食店の一覧ＬＳは、対象ユーザーＵＴ１が、図２Ａに示す複数のアイコンＩＣの中から「食べる」に対応するアイコンＩＣ１をタッチした結果、投射画像ＰＣの一部として表示されているものとする。対象ユーザーＵＴ１は１人で投射画像ＰＣを見ており、対象ユーザーＵＴ１と対向する位置に飲食店の一覧ＬＳが位置する。
対象ユーザーＵＴ１が飲食店の一覧ＬＳを見ている間に、対象ユーザーＵＴ１の瞼の動きが第１状態になると、処理装置１０３は、飲食店の一覧ＬＳの表示部分の輝度を、他の投射画像ＰＣの部分よりも低くする。この結果、飲食店の一覧ＬＳの表示部分の明るさが暗くなる。すなわち、飲食店の一覧ＬＳが第１部分Ｐ１となる。また、投射画像ＰＣのうち、飲食店の一覧ＬＳ以外の部分は、第２部分Ｐ２であり、元の明るさが維持される。
図６は、複数の対象ユーザーＵＴ２～ＵＴ５が投射画像ＰＣの近傍に位置する場合を模式的に示す図である。図６は、対象ユーザーＵＴ２～ＵＴ５を後方から見た図である。図６でも、投射領域ＦＰには、図２Ｂに示す飲食店の一覧ＬＳが表示されている。飲食店の一覧ＬＳは、対象ユーザーＵＴ２が、図２Ａに示す複数のアイコンＩＣの中から「食べる」に対応するアイコンＩＣ１をタッチした結果、投射画像ＰＣの一部として表示されているものとする。対象ユーザーＵＴは複数人で投射画像ＰＣを見ているため、飲食店の一覧ＬＳと完全に対向するのは対象ユーザーＵＴ２のみであり、対象ユーザーＵＴ３およびＵＴ４は、飲食店の一覧ＬＳの一部のみと対向し、対象ユーザーＵＴ５は、飲食店の一覧ＬＳと対向していない。
この場合、対象ユーザーＵＴ２～ＵＴ５のうち、誰が飲食店の一覧ＬＳを見ているかが問題となる。一般に、対象ユーザーＵＴ２のタッチにより表示された飲食店の一覧ＬＳを見るのは、対象ユーザーＵＴ２と同じグループで行動するユーザーＵである。グループとは、例えば、友人や家族、知り合いなど、行動を共にする複数のユーザーＵである。同じグループのユーザーＵ同士は、グループ以外の他人と比べて近い位置にいると考えられる。また、対象ユーザーＵＴ２と同じグループであっても、飲食店の一覧ＬＳから遠い位置にいるユーザーＵは、飲食店の一覧ＬＳが見えづらく、投射画像ＰＣの他の領域を見ている可能性が高い。
よって、処理装置１０３は、飲食店の一覧ＬＳから距離Ｄｘの位置にいる対象ユーザーＵＴを、飲食店の一覧ＬＳを見ている対象ユーザーＵＴであるものと推定する。そして、これらの対象ユーザーＵＴの少なくともいずれか１人の瞼の動きが第１状態となった場合、処理装置１０３は、飲食店の一覧ＬＳの表示部分の明るさを、他の投射画像ＰＣの部分よりも暗くする。
すなわち、プロジェクター１０において、疲労検出部１０３Ｄは、飲食店の一覧ＬＳから距離Ｄｘ以内に、複数の対象ユーザーＵＴ２～ＵＴ４が位置する場合に、対象ユーザーＵＴ２～ＵＴ４のそれぞれの瞼の動きを検出する。また、画像処理制御部１０３Ｅは、複数の対象ユーザーＵＴ２～ＵＴ４のいずれか１人の瞼の動きが第１状態である場合に、飲食店の一覧ＬＳの明るさを、対象ユーザーＵＴ２～ＵＴ４の全員の瞼の動きが第２状態である場合の飲食店の一覧ＬＳの明るさよりも暗くする。例えば、対象ユーザーＵＴ２は第１ユーザーの一例であり、対象ユーザーＵＴ３は第２ユーザーの一例である。距離Ｄｘは、第１距離の一例である。
図６の例では、処理装置１０３は、飲食店の一覧ＬＳの幅方向端部から距離Ｄｘを取り、飲食店の一覧ＬＳから距離Ｄｘ以内に対向する位置にいる対象ユーザーＵＴを、飲食店の一覧ＬＳを見ている対象ユーザーＵＴと推定する。飲食店の一覧ＬＳから距離Ｄｘ以内に対向する位置にいる対象ユーザーＵＴとは、例えば、飲食店の一覧ＬＳから距離Ｄｘ以内に対向する位置に両目が位置する対象ユーザーＵＴとする。この場合、図６の例では、対象ユーザーＵＴ２～ＵＴ４は飲食店の一覧ＬＳを見ている対象ユーザーＵＴと推定され、対象ユーザーＵＴ５は飲食店の一覧ＬＳを見ている対象ユーザーＵＴと推定されない。
対象ユーザーＵＴ２～ＵＴ４のうち少なくとも１人の瞼の動きが第１状態となった場合、処理装置１０３は、飲食店の一覧ＬＳの表示部分の明るさを他の部分より暗くする。すなわち、対象ユーザーＵＴ２～ＵＴ４にとっては、飲食店の一覧ＬＳが第１部分Ｐ１となる。一方、対象ユーザーＵＴ５の瞼の動きが第１状態となった場合、処理装置１０３は、飲食店の一覧ＬＳの表示部分の明るさを暗くしない。すなわち、対象ユーザーＵＴ５にとっては、飲食店の一覧ＬＳが第１部分Ｐ１とならない。
なお、上記のように、グループで飲食店の一覧ＬＳを見ている場合に、グループ内で１人でも目が疲れた対象ユーザーＵＴがいたら飲食店の一覧ＬＳの明るさを暗くする方法の他、例えば、タッチ操作を行っている対象ユーザーＵＴの目が疲れた場合にのみ、飲食店の一覧ＬＳの明るさを暗くするようにしてもよい。この場合、主体的に画面を操作している対象ユーザーＵＴの目の状態に合わせて投射画像ＰＣの表示画像の明るさを変化させることができる。特に、グループで投射画像ＰＣを見ている場合には、投射画像ＰＣの明るさが短期間で暗くなるのを回避することができる。また、対象ユーザーＵＴが１人で投射画像ＰＣを見ている場合にも、タッチ操作を行ったユーザーＵを識別することにより、対象ユーザーＵＴが見ている部分をより確実に特定することができる。
この場合、ユーザー検出部１０３Ｃは、第２キャリブレーションデータと、第２撮像装置１４Ｂで撮像された第２撮像画像と、タッチ検出部１０３Ａによって検出された投射領域ＦＰ上におけるタッチ位置ＴＰに基づいて、タッチ位置ＴＰをタッチしたユーザーＵを特定する。第２キャリブレーションデータは、投射領域ＦＰ上の座標と、第２撮像画像上の座標とを対応づけるデータである。投射領域ＦＰ上の座標と、第２撮像画像データ上の座標とが対応づけられることで、投射領域ＦＰ上におけるタッチ位置ＴＰをタッチしたユーザーＵを特定することができる。具体的には、ユーザー検出部１０３Ｃは、例えば、第２撮像画像に写るユーザーＵの手の動きを検出し、タッチ位置ＴＰをタッチしたユーザーＵを特定してもよい。
すなわち、画像処理制御部１０３Ｅは、対象ユーザーＵＴが投射領域ＦＰをタッチし、かつ、対象ユーザーＵＴの瞼の動きが第１状態である場合に、第１部分Ｐ１の明るさを、対象ユーザーＵＴが投射領域ＦＰをタッチし、かつ、対象ユーザーＵＴの瞼の動きが第２状態である場合の第１部分Ｐ１の明るさよりも、暗くしてもよい。
［設定例２：対象ユーザーＵＴの位置を基準とする］
上述のように、第１部分Ｐ１は、目が疲れた対象ユーザーＵＴが見ている部分を含むことが好ましい。一般に、対象ユーザーＵＴが見ている位置は、対象ユーザーＵＴの近傍である可能性が高い。よって、設定例２では、第１部分Ｐ１を、対象ユーザーＵＴから所定距離以内の投射画像ＰＣの部分とする。
図７Ａおよび図７Ｂは、対象ユーザーＵＴ１が１人で投射画像ＰＣを見ている場合を模
式的に示す図である。図７Ａは、対象ユーザーＵＴ１を後方から見た図であり、図７Ｂは
、対象ユーザーＵＴ１を側方から見た図である。なお、図７Ｂにおいて投射画像ＰＣを立
体的に図示しているが、これは図面上で第１部分Ｐ１を特定するためであり、投射画像Ｐ
Ｃは実際には壁面Ｗに投射されている。

例えば、対象ユーザーＵＴ１の両目の中間点を基準点として、半径Ｒの球で特定される領域を特定領域ＳＰ１とする。半径Ｒは、例えば１ｍ程度とすることができる。処理装置１０３は、対象ユーザーＵＴ１の瞼の動きが第１状態となった場合には、対象ユーザーＵＴ１の特定領域ＳＰ１と重なる投射画像ＰＣの部分を第１部分Ｐ１とする。第１部分Ｐ１を網掛けで示す。この場合、第１部分Ｐ１は、対象ユーザーＵＴ１が投射領域ＦＰに近づくほど広くなる。また、第１部分Ｐ１は、対象ユーザーＵＴ１が投射領域ＦＰから半径Ｒ以上遠ざかると設定されなくなる。
このようにすることで、投射画像ＰＣがタッチ操作によって変化するか否かに関わらず、第１部分Ｐ１を設定することができる。また、投射画像ＰＣの表示内容に関係なく、対象ユーザーＵＴからの距離に基づいて、第１部分Ｐ１を設定するので、処理装置１０３における処理負荷を軽減することができる。
図８は、複数の対象ユーザーＵＴ２～ＵＴ４が投射画像ＰＣの近傍に位置する場合を模式的に示す図である。図８は、対象ユーザーＵＴ２～ＵＴ４を後方から見た図である。図８においても、例えば、各対象ユーザーＵＴ２～ＵＴ４の両目の中央部を基準点として、半径Ｒの球で特定される特定領域ＳＰ２～ＳＰ４が設定されている。処理装置１０３は、対象ユーザーＵＴ２～ＵＴ４のいずれかの瞼の動きが第１状態となった場合には、当該対象ユーザーＵＴの特定領域ＳＰと重なる投射画像ＰＣの部分を第１部分Ｐ１とする。例えば、対象ユーザーＵＴ４の瞼の動きが第１状態となった場合には、特定領域ＳＰ４と重なる投射画像ＰＣの部分を第１部分Ｐ１として、明るさを暗くする。
ここで、複数の対象ユーザーＵＴが近接して位置しており、特定領域ＳＰが重なるものとする。具体的には、図８において、対象ユーザーＵＴ２の特定領域ＳＰ２と、対象ユーザーＵＴ３の特定領域ＳＰ３とが重なる重複領域ＳＷが存在する。この場合、処理装置１０３は、対象ユーザーＵＴ２又はＵＴ３のいずれかのみの瞼の動きが第１状態となった際には、瞼の動きが第１状態となった対象ユーザーＵＴの特定領域ＳＰのうち、重複領域ＳＷを除く部分を第１部分Ｐ１とする。例えば、対象ユーザーＵＴ２の瞼の動きが第１状態となり、かつ、対象ユーザーＵＴ３の瞼の動きが第１状態となっていない場合には、特定領域ＳＰ２と重なり、かつ重複領域ＳＷに含まれない投射画像ＰＣの部分を、第１部分Ｐ１として、明るさを暗くする。
このようにすることで、対象ユーザーＵＴ２が見ている部分の大半は明るさが暗くなる一方で、対象ユーザーＵＴ３が見ている部分の明るさは変更されない。すなわち、複数の対象ユーザーＵＴのうち一部のみの目が疲れた場合に、疲れ目の対象ユーザーＵＴの視野範囲を暗くする一方で、他の対象ユーザーＵＴの視野が暗くなるのを防止することができ、投射画像ＰＣの見やすさを向上させることができる。
［５．まとめ］
以上説明したように、表示システム１は、対象ユーザーＵＴの瞼の動きに基づいて、投射画像ＰＣののうち対象ユーザーＵＴに対応する部分である第１部分Ｐ１の明るさを、他の部分と異ならせる。すなわち、表示システム１は、複数のユーザーＵが見る可能性がある投射画像ＰＣのうち、対象ユーザーＵＴに対応する第１部分Ｐ１の明るさのみを、対象ユーザーＵＴの瞼の動きに基づいて変更する。これにより、投射画像ＰＣの明るさを変更するに際して、対象ユーザーＵＴ以外のユーザーに対する影響を抑制することができるので、複数のユーザーが投射画像ＰＣを見る場合でも、利便性が低下しにくい。
また、表示システム１は、対象ユーザーＵＴの瞼の動きが第１状態である場合に、第１部分Ｐ１の明るさを、対象ユーザーＵＴの瞼の動きが第２状態である場合の第１部分Ｐ１の明るさよりも、暗くする。これにより、例えば、第１状態が対象ユーザーＵＴの眼精疲労を示す状態である場合に、対象ユーザーＵＴが見る部分の明るさを暗くして、対象ユーザーＵＴの眼精疲労を軽減することができる。
また、表示システム１において、投射領域ＦＰへのタッチに連動して変化する投射画像の一部分を第１部分Ｐ１にしてもよい。これにより、対象ユーザーＵＴが見ている部分を精度よく特定することができ、第１部分Ｐ１の明るさを暗くした際の他のユーザーＵへの影響を抑制することができる。
また、表示システム１において、投射画像ＰＣの一部分から所定距離以内に複数の対象ユーザーＵＴがいる場合に、複数の対象ユーザーＵＴの少なくとも１人の瞼の動きが第１状態となった際には、投射画像ＰＣの一部分の明るさを暗くしてもよい。これにより、グループで同じ投射画像ＰＣを見ている際における利便性を向上させることができる。
また、表示システム１において、タッチ操作を行っている対象ユーザーＵＴの瞼の動きが第１状態となった際に、タッチ操作により変化した投射画像ＰＣの一部分の明るさを暗くしてもよい。これにより、タッチ操作を行った対象ユーザーＵＴの瞼の状態のみが投射画像ＰＣの明るさに反映され、投射画像ＰＣの明るさを安定させることができ、複数のユーザーが投射画像ＰＣを見る場合でも、利便性が低下しにくい。
また、表示システム１において、対象ユーザーＵＴが第１部分Ｐ１を見なくなった場合に、第１部分Ｐ１の明るさを元に戻すようにしてもよい。これにより、複数のユーザーＵが使用する表示システム１において、ユーザーＵが入れ替わった場合に、投射画像ＰＣの明るさを初期状態に戻すことができ、複数のユーザーが投射画像ＰＣを見る場合でも、利便性が低下しにくい。
また、表示システム１において、第１部分Ｐ１の明るさを異ならせた場合に、対象ユーザーＵＴにその旨を通知するようにしてもよい。これにより、投射画像ＰＣの一部の明るさが暗くなった場合に、対象ユーザーＵＴが表示システム１の故障等を疑う可能性が低減し、表示システム１の使用時における利便性を向上させることができる。
１…表示システム、１０…プロジェクター、１２…ライトカーテン生成装置、１４Ａ…第１撮像装置、１４Ｂ…第２撮像装置、１００…入力装置、１０１…通信装置、１０２…記憶装置、１０３…処理装置、１０３Ａ…タッチ検出部、１０３Ｂ…表示画像制御部、１０３Ｃ…ユーザー検出部、１０３Ｄ…疲労検出部、１０３Ｅ…画像処理制御部、１０５…投射装置、１２１…レーザー光源ユニット、１２２…射出制御装置、ＦＰ…投射領域、Ｌ…ライトカーテン、Ｐ１…：第１部分、Ｐ２…第２部分、ＰＣ…投射画像、Ｕ…ユーザー、ＵＴ…対象ユーザー。

Claims (8)

  1. 表示面に、画像を表示することと、
    前記表示面に顔を向けている第１ユーザーの瞼の動きに基づいて、前記画像のうち前記第１ユーザーに対応する部分である第１部分の明るさ又は色調を、前記画像のうち前記第１部分とは異なる第２部分の前記明るさ又は色調と異ならせることと、
    前記表示面がタッチされたことを検出することと、
    前記タッチに連動して前記画像の一部分を変化させることと、を含み、
    前記第１部分の明るさ又は色調を前記第２部分の前記明るさ又は色調と異ならせることは、前記第１ユーザーの瞼の動きが第１状態である場合に、前記第１部分の明るさを、前記第１ユーザーの瞼の動きが前記第１状態とは異なる第２状態である場合の前記第１部分の明るさよりも、暗くすることを含み、
    前記第１部分は、前記一部分を含む、
    表示方法。
  2. 前記一部分から第１距離以内に前記第１ユーザーと第２ユーザーとが位置する場合に、前記第１ユーザーの瞼の動きと、前記第２ユーザーの瞼の動きとを検出すること、を更に含み、
    前記第１部分の明るさ又は色調を前記第２部分の前記明るさ又は色調と異ならせることは、前記第１ユーザーの瞼の動きが前記第１状態である場合に、前記第１部分の明るさを、前記第１ユーザーの瞼の動き、および、前記第２ユーザーの瞼の動きが前記第２状態である場合の前記第１部分の明るさよりも、暗くすること、を含む、
    請求項１に記載の表示方法。
  3. 前記第１部分の明るさ又は色調を前記第２部分の前記明るさ又は色調と異ならせることは、前記第１ユーザーが前記表示面をタッチし、かつ、前記第１ユーザーの瞼の動きが前記第１状態である場合に、前記第１部分の明るさを、前記第１ユーザーが前記表示面をタッチし、かつ、前記第１ユーザーの瞼の動きが前記第２状態である場合の前記第１部分の明るさよりも、暗くすること、を含む、
    請求項１に記載の表示方法。
  4. 前記表示面がタッチされたことが検出されてから第１所定時間以内に、前記表示面のタッチされた位置から第２所定距離以内に再度タッチが行われなかった場合、前記第１ユーザーが前記表示面に顔を向けていない状態が第２所定時間以上継続した場合、および、前記第１ユーザーが前記表示面から第３所定距離以上離れた場合、のうちいずれかが生じた場合に、前記第１部分の明るさを、前記第１ユーザーの瞼の動きが前記第２状態である場合の前記第１部分の明るさに戻す、
    請求項１から３のいずれか１項に記載の表示方法。
  5. 前記第１部分の前記明るさ又は色調を異ならせた場合に、前記第１ユーザーに前記明るさ又は色調を異ならせたことを通知すること、を更に含む、
    請求項１から４のいずれか１項に記載の表示方法。
  6. 表示面に画像を表示する表示装置と、
    前記表示面に顔を向けている第１ユーザーの瞼の動きに基づいて、前記画像のうち前記第１ユーザーに対応する部分である第１部分の明るさ又は色調を、前記画像のうち前記第１部分とは異なる第２部分の前記明るさ又は色調と異ならせた前記画像を示す信号を前記表示装置に出力することと、
    前記表示面がタッチされたことを検出することと、
    前記タッチに連動して前記画像の一部分を変化させることと、
    を実行する処理装置と、を備え、
    前記第１部分の明るさ又は色調を前記第２部分の前記明るさ又は色調と異ならせることは、前記第１ユーザーの瞼の動きが第１状態である場合に、前記第１部分の明るさを、前記第１ユーザーの瞼の動きが前記第１状態とは異なる第２状態である場合の前記第１部分の明るさよりも、暗くすることを含み、
    前記第１部分は、前記一部分を含む、
    表示システム。
  7. 前記表示面に対向する領域を撮像することによって、撮像画像を出力する撮像装置を備え、
    前記処理装置は、前記撮像画像に基づいて、前記第１ユーザーの瞼の動きを検出する、
    請求項６に記載の表示システム。
  8. 処理装置に、
    表示面に画像を表示させることと、
    前記表示面に顔を向けている第１ユーザーの瞼の動きに基づいて、前記画像のうち前記第１ユーザーに対応する部分である第１部分の明るさ又は色調を、前記画像のうち前記第１部分とは異なる第２部分の前記明るさ又は色調と異ならせることと、
    前記表示面がタッチされたことを検出することと、
    前記タッチに連動して前記画像の一部分を変化させることと、
    を実行させ、
    前記第１部分の明るさ又は色調を前記第２部分の前記明るさ又は色調と異ならせることは、前記第１ユーザーの瞼の動きが第１状態である場合に、前記第１部分の明るさを、前記第１ユーザーの瞼の動きが前記第１状態とは異なる第２状態である場合の前記第１部分の明るさよりも、暗くすることを含み、
    前記第１部分は、前記一部分を含む、
    表示プログラム。
JP2021169378A 2021-10-15 2021-10-15 表示方法、表示システムおよび表示プログラム Active JP7416033B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2021169378A JP7416033B2 (ja) 2021-10-15 2021-10-15 表示方法、表示システムおよび表示プログラム
CN202211252726.5A CN115988158A (zh) 2021-10-15 2022-10-13 显示方法、显示***以及记录介质
US17/965,993 US11854502B2 (en) 2021-10-15 2022-10-14 Display method, display system, and recording medium storing display program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2021169378A JP7416033B2 (ja) 2021-10-15 2021-10-15 表示方法、表示システムおよび表示プログラム

Publications (2)

Publication Number Publication Date
JP2023059390A JP2023059390A (ja) 2023-04-27
JP7416033B2 true JP7416033B2 (ja) 2024-01-17

Family

ID=85957054

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021169378A Active JP7416033B2 (ja) 2021-10-15 2021-10-15 表示方法、表示システムおよび表示プログラム

Country Status (3)

Country Link
US (1) US11854502B2 (ja)
JP (1) JP7416033B2 (ja)
CN (1) CN115988158A (ja)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015152757A (ja) 2014-02-14 2015-08-24 シャープ株式会社 眼の疲労度低減装置および制御方法
US20210082371A1 (en) 2019-09-12 2021-03-18 Logitech Europe S.A. Techniques for eye fatigue mitigation

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10187334A (ja) * 1996-12-26 1998-07-14 Canon Inc 情報入力方法および情報入力装置と情報入力用記憶媒体
JP2003076353A (ja) 2001-09-04 2003-03-14 Sharp Corp ヘッドマウント型表示装置
DE102012219433A1 (de) 2012-10-24 2014-05-08 Robert Bosch Gmbh Elektrisches Gerät, insbesondere Telekommunikationsgerät, mit einer Projektionseinrichtung und Verfahren zum Betrieb eines elektrischen Geräts
US9569992B2 (en) 2012-11-15 2017-02-14 Semiconductor Energy Laboratory Co., Ltd. Method for driving information processing device, program, and information processing device
JP6205249B2 (ja) 2012-11-30 2017-09-27 株式会社半導体エネルギー研究所 情報処理装置の駆動方法
JP6051828B2 (ja) 2012-12-10 2016-12-27 セイコーエプソン株式会社 表示装置、及び、表示装置の制御方法
US9904414B2 (en) 2012-12-10 2018-02-27 Seiko Epson Corporation Display device, and method of controlling display device
EP3035656B1 (en) * 2014-12-18 2021-08-04 Samsung Electronics Co., Ltd. Method and apparatus for controlling an electronic device
US20160334868A1 (en) * 2015-05-15 2016-11-17 Dell Products L.P. Method and system for adapting a display based on input from an iris camera
CN105824560A (zh) * 2016-03-16 2016-08-03 京东方科技集团股份有限公司 一种显示面板及其亮度调节方法、显示装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015152757A (ja) 2014-02-14 2015-08-24 シャープ株式会社 眼の疲労度低減装置および制御方法
US20210082371A1 (en) 2019-09-12 2021-03-18 Logitech Europe S.A. Techniques for eye fatigue mitigation

Also Published As

Publication number Publication date
US11854502B2 (en) 2023-12-26
JP2023059390A (ja) 2023-04-27
US20230119949A1 (en) 2023-04-20
CN115988158A (zh) 2023-04-18

Similar Documents

Publication Publication Date Title
TWI545947B (zh) 具有影像擷取及分析模組之顯示裝置
EP2002322B1 (en) Hotspots for eye track control of image manipulation
JP5293154B2 (ja) ヘッドマウントディスプレイ
EP3341818B1 (en) Method and apparatus for displaying content
RU2644265C2 (ru) Устройство отображения изображения и устройство для ввода информации
JP6652251B2 (ja) 表示装置、表示方法、および表示プログラム
US20140285404A1 (en) Head-mounted display device and method of controlling head-mounted display device
JP2010145861A (ja) ヘッドマウントディスプレイ
JP4951751B2 (ja) 瞳孔検出に基づくポインティング装置及び方法
CN107665039B (zh) 图像显示装置、图像形成装置和图像显示方法
JP2016206617A (ja) 表示システム
US20190287486A1 (en) System for providing hands-free input to a computer
CN113785258A (zh) 检测眼睛测量
CN115598842A (zh) 提升用户体验和注视互动准确度的光学***和相关方法
JPWO2020016970A1 (ja) 情報処理装置、情報処理方法、及びプログラム
JP2009104331A (ja) 表示システムの輝度調整方法および表示システム
JP7416033B2 (ja) 表示方法、表示システムおよび表示プログラム
JP2016126687A (ja) ヘッドマウントディスプレイ、操作受付方法および操作受付プログラム
JP6143242B1 (ja) 画像表示装置
US11343420B1 (en) Systems and methods for eye-based external camera selection and control
KR101492832B1 (ko) 영상 제어 방법 및 이를 이용한 영상 표시 장치
JP6789377B2 (ja) 画像表示システム
US10691250B2 (en) Information processing device, information processing method, and program for preventing reflection of an operation in an output
US11874961B2 (en) Managing display of an icon in an eye tracking augmented reality device
WO2017122508A1 (ja) 情報表示システムおよび情報表示方法

Legal Events

Date Code Title Description
RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20211102

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220905

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220905

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230809

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230919

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231114

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20231205

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20231218

R150 Certificate of patent or registration of utility model

Ref document number: 7416033

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150