JP2017504981A - 車両インストルメントコンソール上に３次元画像を表示するシステム及び方法 - Google Patents

車両インストルメントコンソール上に３次元画像を表示するシステム及び方法 Download PDF

Info

Publication number
JP2017504981A
JP2017504981A JP2016525929A JP2016525929A JP2017504981A JP 2017504981 A JP2017504981 A JP 2017504981A JP 2016525929 A JP2016525929 A JP 2016525929A JP 2016525929 A JP2016525929 A JP 2016525929A JP 2017504981 A JP2017504981 A JP 2017504981A
Authority
JP
Japan
Prior art keywords
image
display
pilot
data
image data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2016525929A
Other languages
English (en)
Inventor
ローレンス ロバート ヘイムリンク、
ローレンス ロバート ヘイムリンク、
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Johnson Controls Technology Co
Original Assignee
Johnson Controls Technology Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Johnson Controls Technology Co filed Critical Johnson Controls Technology Co
Publication of JP2017504981A publication Critical patent/JP2017504981A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/366—Image reproducers using viewer tracking
    • H04N13/383—Image reproducers using viewer tracking for tracking with gaze detection, i.e. detecting the lines of sight of the viewer's eyes
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/211—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays producing three-dimensional [3D] effects, e.g. stereoscopic images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23—Head-up displays [HUD]
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29—Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/65—Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive
    • B60K35/654—Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive the user being the driver
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/19—Sensors therefor
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • G09G3/003—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to produce spatial visual effects
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/37—Details of the operation on graphic patterns
    • G09G5/373—Details of the operation on graphic patterns for modifying the size of the graphic pattern
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41422—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance located in transportation means, e.g. personal vehicle
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/149—Instrument input by detecting viewing direction not otherwise provided for
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18—Information management
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20—Optical features of instruments
    • B60K2360/33—Illumination features
    • B60K2360/334—Projection means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/60—Structural details of dashboards or instruments
    • B60K2360/66—Projection screens or combiners
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0132—Head-up displays characterised by optical features comprising binocular systems
    • G02B2027/0134—Head-up displays characterised by optical features comprising binocular systems of stereoscopic type
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0407—Resolution change, inclusive of the use of different resolutions for different screen areas
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/14—Solving problems related to the presentation of information to be displayed
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Mechanical Engineering (AREA)
  • Chemical & Material Sciences (AREA)
  • Transportation (AREA)
  • Combustion & Propulsion (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Optics & Photonics (AREA)
  • Social Psychology (AREA)
  • Computer Hardware Design (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Ophthalmology & Optometry (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Instrument Panels (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

システムは、操縦者が見ている方向に対応する凝視データを提供するように構成される凝視追跡機を含む。１つ以上のプロセッサは、凝視データを分析して、ディスプレイが操縦者の中心視野にあるか又はディスプレイが操縦者の周辺視野にあるかを決定するように構成される。プロセッサは、ディスプレイが中心視野にある場合にディスプレイに第１のタイプの画像データを提供し、ディスプレイが周辺視野にある場合にディスプレイに第２のタイプの画像データを提供するように更に構成される。第１のタイプの画像データは、ディスプレイが中心視野内にある場合に第１の３Ｄ画像をもたらす第１の３次元（３Ｄ）画像データを含む。第２のタイプの画像データは、ディスプレイが周辺視野内にある場合に第２の３Ｄ画像をもたらす第２の３Ｄ画像データを含む。

Description

本発明は、概して自動車に関し、より詳細には車両インストルメントコンソール上に３次元画像を表示するためのシステム及び方法に関する。
多くの場合、車両は、運転者に情報を提供するために様々なディスプレイを含んでいる。例えば、ある車両は、車両の速さ、毎分回転数、ガソリン量、エンジン温度、シートベルト状態等に関する情報を運転者に提供する車両インストルメントコンソール内のディスプレイを含んでいる。更に、ある車両は、時間、ラジオ局、報告、空調等に関する情報を運転者に提供する車両インストルメントコンソールにディスプレイを含んでいる。更に、ディスプレイは、３次元（３Ｄ）画像を示すために使用される場合もある。理解できるように、ディスプレイ上の３Ｄ画像は、運転者がディスプレイを直接見ている場合にのみ認識され得る。その結果、運転者がディスプレイを直接見ていないときに運転者に対して３Ｄ画像を表示することは、運転者に殆ど情報を提供しない可能性がある。例えば、運転者が道を見下ろしていて、前方の離れたオブジェクトに集中しているとき、３Ｄ画像は、運転者の周辺視野にあるので認識できない可能性がある。ある構成では、運転者の周辺視野にある３Ｄ画像はぼやけて及び／又は二重になって見える場合がある。更に、３Ｄ画像は、運転者の周辺視野において小さすぎて正確に認識できないかもしれない。
本発明は、操縦者が見ている方向に対応する凝視データを提供するように構成される凝視追跡機を含むシステムに関する。また、システムは、凝視データを分析して、ディスプレイが操縦者の中心視野にあるか又はディスプレイが操縦者の周辺視野にあるかを決定するように構成される１つ以上のプロセッサも含む。プロセッサは、ディスプレイが操縦者の中心視野にある場合にディスプレイに第１のタイプの画像データを提供し、ディスプレイが操縦者の周辺視野にある場合にディスプレイに第２のタイプの画像データを提供するように更に構成される。第１のタイプの画像データは、ディスプレイが操縦者の中心視野内にある場合に第１の３Ｄ画像をもたらす第１の３次元（３Ｄ）画像データを含む。第２のタイプの画像データは、ディスプレイが操縦者の周辺視野内にある場合に第２の３Ｄ画像をもたらす第２の３Ｄ画像データを含む。
また、本発明は、凝視データを受信し、且つ凝視データを分析して、ディスプレイが操縦者の中心視野にあるか又は操縦者の周辺視野にあるかを決定するように構成されるコンピュータ命令を含む一時的でない機械可読コンピュータ媒体にも関する。コンピュータ命令は、ディスプレイが操縦者の中心視野にある場合にディスプレイに第１のタイプの画像データを提供し、ディスプレイが操縦者の周辺視野にある場合にディスプレイに第２のタイプの画像データを提供するように更に構成される。第１のタイプの画像データは、ディスプレイが操縦者の中心視野内にある場合に第１の３Ｄ画像をもたらす３Ｄ画像データを含む。第２のタイプの画像データは、ディスプレイが操縦者の周辺視野内にある場合に第２の３Ｄ画像をもたらす第２の３Ｄ画像データを含む。
更に、本発明は、１つ以上のプロセッサによって凝視データを受信するステップと、凝視データを分析して、ディスプレイが操縦者の中心視野にあるか又は操縦者の周辺視野にあるかを決定するステップとを含む方法に関する。また、方法は、１つ以上のプロセッサを用いて、ディスプレイが操縦者の中心視野にある場合にディスプレイに第１のタイプの画像データを提供するステップと、ディスプレイが操縦者の周辺視野にある場合にディスプレイに第２のタイプの画像データを提供するステップとを含む。第１のタイプの画像データは、ディスプレイが操縦者の中心視野内にある場合に第１の３Ｄ画像をもたらす第１の３Ｄ画像データを含む。第２のタイプの画像データは、ディスプレイが操縦者の周辺視野内にある場合に第２の３Ｄ画像をもたらす第２の３Ｄ画像データを含む。
凝視追跡機及び操縦者が見ている場所に基づいて異なる３次元（３Ｄ）画像を表示するディスプレイを含む車両の実施形態の斜視図である。 周辺視差を補償するために操縦者が見ている場所に基づいてディスプレイに提供される３Ｄ画像を修正するシステムの実施形態のブロック図である。 操縦者の中心視野及び周辺視野の実施形態の側面図である。 操縦者がディスプレイを直接凝視して、第１の３Ｄ画像がディスプレイに表示されている実施形態の斜視図である。 操縦者がディスプレイから眼を逸らして、第２の３Ｄ画像がディスプレイに表示されている実施形態の斜視図である。 周辺視差を補償するためのシステムの実施形態の図である。 ディスプレイが操縦者の中心視野にあるか又は周辺視野にあるかに基づいて第１の３Ｄ画像又は第２の３Ｄ画像を表示する方法の実施形態のフローチャートである。
図１は、凝視追跡機及び操縦者が見ている場所に基づいて異なる３次元（３Ｄ）画像を表示するディスプレイを含む車両１０の実施形態の斜視図である。例示のように、車両１０は、インストルメントコンソール１６上にディスプレイ１４を有する室内１２を含む。ディスプレイ１４は、オートステレオスコープ等を使用することにより３Ｄ画像を表示することが可能な電子インターフェースを含んでもよい。このようにして、ディスプレイ１４は、３Ｄ画像を表示してもよく、３Ｄ画像を知覚するために３Ｄ眼鏡を必要としなくてもよい。例示のように、ディスプレイ１４は、典型的には、速度計及び／又は毎分回転数計が設けられる場所においてインストルメントコンソール１６に取り付けられる。他の実施形態では、ディスプレイ１４は、ヘッドアップディスプレイ、インストルメントコンソール１６の別の部分に結合されてもよく、ディスプレイ１４は、車両１０のフロントガラス上に投影されてもよい。
車両１０は、凝視追跡機１８を含む。例示の実施形態では、凝視追跡機１８は、インストルメントコンソール１６に取り付けられる。しかしながら、他の実施形態では、凝視追跡機１８は、ディスプレイ１４、ステアリングコラム、フレーム２０、バイザー、バックミラー、又はドア等に取り付けられてもよい。以下に詳細に記載されているように、凝視追跡機１８は、操縦者が見ている方向を監視して、処理装置に凝視データを提供するように構成される。処理装置は、操縦者の凝視の方向を決定して、操縦者の凝視の方向に基づいてディスプレイ１４に第１又は第２のタイプの画像データを提供するように構成される。第１のタイプの画像データは、表示される第１の３Ｄ画像をもたらす第１の３Ｄ画像データを含み、第２のタイプの画像データは、表示される第２の３Ｄ画像をもたらす第２の３Ｄ画像データを含む。第１及び第２の３Ｄ画像は、ディスプレイが操縦者の中心又は周辺視野にあるかどうかに基づいている。操縦者が見ている場所に基づいて別の３Ｄ画像を有することは、別のやり方では識別できないかもしれない操縦者の周辺視野にあるディスプレイ上の情報を操縦者が識別できる点で有益である。これは、ディスプレイが操縦者の周辺視野にある場合に表示される３Ｄ画像が周辺視差を取り除いてディスプレイが操縦者の中心視野にある場合に表示される３Ｄ画像よりもより大きく且つ単純化されることにより達成されてもよい。
図２は、周辺視差を補償するために操縦者が見ている場所に基づいてディスプレイ１４に提供される３Ｄ画像を修正するシステム２２の実施形態のブロック図である。例示のように、システム２２は、特に、凝視追跡機１８、処理装置２６、及びディスプレイ１４を含む。凝視追跡機１８は、操縦者が見ている方向に対応する凝視データ２４を提供するように構成されてもよい。理解できるように、凝視データ２４は、凝視追跡機１８に対する操縦者の各々の眼についての凝視の角度を含む方向情報を含んでもよい。従って、所定の実施形態では、凝視追跡機１８は、操縦者に対する凝視追跡機１８の場所に関して凝視データ２４を分析するように構成されてもよい。
処理装置２６は、１つ以上のプロセッサ２８、メモリ装置３０、及び記憶装置３２を含む。（複数の）プロセッサ２８は、例えば、凝視データ分析ソフトウェア、画像データ編集ソフトウェア等のソフトウェアを実行するために使用されてもよい。更に、（複数の）プロセッサ２８は、１つ以上の「汎用」マイクロプロセッサ、１つ以上の専用マイクロプロセッサ及び／又はＡＳＩＣＳ（ａｐｐｌｉｃａｔｉｏｎ ｓｐｅｃｉｆｉｃ ｉｎｔｅｇｒａｔｅｄ ｃｉｒｃｕｉｔｓ）、又はこれらの何らかの組み合わせ等の１つ以上のマイクロプロセッサを含んでもよい。例えば、（複数の）プロセッサ２８は、１つ以上のＲＩＳＣ（ｒｅｄｕｃｅｄ ｉｎｓｔｒｕｃｔｉｏｎ ｓｅｔ）プロセッサを含んでもよい。
（複数の）メモリ装置３０は、ＲＡＭ（ｒａｎｄｏｍ ａｃｃｅｓｓ ｍｅｍｏｒｙ）等の揮発性メモリ、及び／又はＲＯＭ（ｒｅａｄ−ｏｎｌｙ ｍｅｍｏｒｙ）等の不揮発性メモリを含んでもよい。（複数の）メモリ装置３０は、様々な情報を記憶してもよく、様々な目的で使用されてもよい。例えば、（複数の）メモリ装置３０は、（複数の）プロセッサ２８が凝視データ分析ソフトウェア、画像データ編集ソフトウェアに関する命令等を実行するためのプロセッサ実行可能命令（例えば、ファームウェア又はソフトウェア）を記憶してもよい。
（複数の）記憶装置３２（例えば、不揮発性記憶装置）は、ＲＯＭ、フラッシュメモリ、ハードドライブ、又は任意の他の適切な光学、磁気若しくはソリッドステート記憶媒体、又はこれらの組み合わせを含んでもよい。（複数の）記憶装置３２は、記憶データ（例えば、凝視データ２４、画像データ等）、命令（例えば、凝視データ分析、画像編集等のためのソフトウェア又はファームウェア）、及び任意の他の適切なデータを記憶してもよい。
所定の実施形態では、処理装置２６は、ディスプレイ１４が操縦者の中心視野又は周辺視野内にあるかどうかを決定するために凝視データ２４を使用するように構成される。例えば、処理装置２６は、眼が操縦者の中心視野内にあるディスプレイ１４を探すことができた１つ以上の凝視の角度を記憶するように構成されてもよい。更に、処理装置２６は、凝視データ２４を１つ以上の記憶された凝視の角度と比較するように構成されてもよい。ディスプレイ１４が操縦者の中心視野内にあることを凝視データ２４が示す場合、処理装置２６は、ディスプレイ１４に提供する第１のタイプの画像データ３４をもたらしてもよい。逆に、ディスプレイ１４が操縦者の中心視野内にないことを凝視データ２４が示す場合、処理装置２６は、ディスプレイ１４が操縦者の周辺視野内にあることを決定してもよく、ディスプレイ１４に提供する第２のタイプの画像データ３６をもたらしてもよい。
凝視データ２４は、様々な標準及び／又は非標準のデータフォーマット（例えば、バイナリデータ、テキストデータ、ＸＭＬデータ等）で凝視追跡機から処理装置２６にストリーミングされ又は他のやり方で提供されてもよく、データは様々なレベルの詳細を含んでもよい。先に検討されたように、処理装置２６は、凝視データ２４を分析して、ディスプレイ１４が操縦者の中心視野にあるか又はディスプレイ１４が操縦者の周辺視野にあるかを決定し、それに従って処理装置２６はディスプレイ１４に画像データを提供する。
ディスプレイ１４が操縦者の中心視野にある場合、処理装置２６は、ディスプレイ１４に第１のタイプの画像データ３４を送信する。第１のタイプの画像データ３４は第１の３Ｄ画像データを含んでもよい。ディスプレイ１４は、第１の３Ｄ画像データを使用して第１の３Ｄ画像をもたらしてもよい。ディスプレイ１４が操縦者の周辺視野にある場合、処理装置２６は、ディスプレイ１４に第２のタイプの画像データ３６を送信する。第２のタイプの画像データ３６は第２の３Ｄ画像データを含む。ディスプレイ１４は、第２の３Ｄ画像データを使用して第２の３Ｄ画像をもたらしてもよい。ディスプレイ１４に送信される２つのタイプの画像データ（例えば、第１及び第２のタイプの画像データ３４及び３６）の間には多くの相違があってもよいが、所定の実施形態では、第２のタイプの画像データ３６は、ディスプレイ１４が周辺視差を補償するグラフィックスを有する第２の３Ｄ画像を表示する命令を含んでもよい。以下で詳細に検討されるように、補償は、操縦者の左眼によって観察される第１の画像及び操縦者の右眼によって観察される第２の画像が操縦者の周辺視野において収束して単一の画像をもたらすように互いからオフセットされる第２の３Ｄ画像で画像を表示することにより達成されてもよい。
処理装置２６は、一時的でない機械可読コンピュータ媒体（例えば、（複数の）メモリ装置３０及び／又は（複数の）記憶装置３２）に記憶されるコンピュータ命令等のソフトウェアを含んでもよい。コンピュータ命令は、凝視追跡機１８から（又は任意の他のソースから）凝視データ２４を受信し、凝視データ２４を分析してディスプレイ１４が操縦者の中心視野にあるか又は操縦者の周辺視野にあるかを決定し、ディスプレイ１４が操縦者の中心視野にある場合にディスプレイ１４に第１のタイプの画像データ３４を提供し、ディスプレイ１４が操縦者の周辺視野にある場合にディスプレイ１４に第２のタイプの画像データ３６を提供するように構成されてもよい。コンピュータ命令により提供される第１のタイプの画像データ３４は、ディスプレイ１４が操縦者の中心視野内にある場合に第１の３Ｄ画像をもたらす第１の３Ｄ画像データを含み、コンピュータ命令により提供される第２のタイプの画像データ３６は、ディスプレイ１４が操縦者の周辺視野内にある場合に第２の３Ｄ画像をもたらす第２の３Ｄ画像データを含む。例示の実施形態には１つの処理装置２６のみが記載されているが、他の実施形態は、１つより多くの処理装置を使用して、凝視データを受信し、ディスプレイが操縦者の中心視野又は周辺視野にあるかどうかを決定するために凝視データを分析し、ディスプレイに異なる３Ｄ画像を含む画像データを提供してもよい。
図３は、操縦者４２の中心視野３８及び周辺視野４０の実施形態の側面図である。 理解できるように、ある操縦者４２の中心視野３８は、別の操縦者の周辺視野と見なされてもよい。一般的には、操縦者４２の中心視野３８は、操縦者４２が直接見ている又は焦点を合わせている場所として広く定義されてもよい。言い換えれば、中心視野３８は、操縦者４２の直接視線４４内にあるものを含んでもよい。更に、操縦者４２の中心視野３８は、操縦者４２の凝視と呼ばれてもよい。例えば、操縦者４２が凝視しているオブジェクト（例えば、ディスプレイ１４又は道路）も操縦者の直接視線４４にあり、従って、操縦者４２の中心視野３８にある。理解できるように、中心視野３８は、周辺視野４０ではない視界を含んでもよい。
従って、操縦者４２の凝視、又は中心視野３８の外部の全てのものは、操縦者４２の周辺視野４０にあると見なされてもよい。操縦者４２がオブジェクトを凝視するとき、操縦者４２の右眼４６によって及び操縦者４２の左眼４８によって受信される画像は、操縦者４２の頭の中でオブジェクトの単一の知覚画像をもたらすように収束する。従って、各眼が操縦者４２の中心視野３８にあるオブジェクトを凝視しているので、操縦者４２の右眼４６及び左眼４８は周辺視野にあるオブジェクトには焦点が合っていない。更に、右眼４６及び左眼４８の各々が異なる角度で周辺オブジェクトを見ることで、周辺オブジェクトがぼやけて及び／又は二重になって見えてしまうことがある（例えば、周辺視差）。以下で詳細に検討されるように、ディスプレイ１４上の３Ｄ画像のレイアウト及び／又はサイズを変更することで、このような周辺視差が補償されてもよい。
例示の実施形態では、中心視野３８は、操縦者４２の直接視線４４の各側において中心視野角５０を含む。更に、周辺視野４０は、操縦者４２の中心視野３８の各側において周辺視野角５２を含む。しかしながら、各操縦者４２の視野は変化してもよく、従って、中心視野角５０及び周辺視野角５２は変化してもよいことに留意されたい。ある例示的な操縦者４２においては、操縦者４２は略１８０度前方に向いた視界を有してもよい。１８０度は、操縦者４２の直接視線４４によって半分に分けられてもよい。従って、直接視線４４を取り囲む９０度があってもよい。例えば、操縦者４２によっては、中心視野角５０は、直接視線４４を取り囲む９０度のうち約１０から２０度を占めてもよく、その範囲内で見えるもの全てが操縦者４２の中心視野３８にあると見なされてもよい。残りの７０から８０度が周辺視野角５２と見なされてもよく、その範囲内で見えるもの全てが操縦者４２の周辺視野４０にあると見なされてもよい。理解できるように、ここに記載の範囲は、オブジェクトが操縦者の中心視野３８又は周辺視野４０内にある場合を決定するために所定の実施形態で角度範囲がどのように使用され得るかを示すための例示である。
図４は、操縦者４２がディスプレイ１４を直接凝視して、第１の３Ｄ画像５６がディスプレイ１４に表示されている実施形態の斜視図である。例示の実施形態では、操縦者４２の右眼４６及び左眼４８は共に、車両１０内のディスプレイ１４を観察している。例示のように、凝視追跡機１８は、操縦者４２の右眼４６及び左眼４８に反射する信号５８（例えば、赤外線信号等）を発する。凝視追跡機１８は、反射を用いて各眼が見ている方向を検出する。凝視追跡機１８は、各眼が見ている方向に対応するデータを凝視データとして記憶する。所定の実施形態では、凝視データは、幾つかある情報の中で特に、各眼の空間位置及び／又は凝視追跡機１８に対する各眼の凝視の方向に対応するデータを含んでもよい。凝視追跡機１８は、ディスプレイ１４が操縦者４２の中心視野３８にあるか又はディスプレイ１４が操縦者４２の周辺視野４０にあるかを決定する処理装置（例えば、処理装置２６）に凝視データを提供する。
例示の実施形態では、ディスプレイ１４は操縦者４２の中心視野３８にあり、そのため処理装置が第１の３Ｄ画像５６を表示するディスプレイ１４に第１の３Ｄ画像データを提供する。第１の３Ｄ画像５６は、第１の３Ｄ画像データの３Ｄオートステレオスコープの性質のためディスプレイ１４で見るために３Ｄ眼鏡を必要としない。理解できるように、第１の３Ｄ画像５６は、速さ、ガソリンレベル、シートベルト指示、エアバッグ指示、毎分回転数等に関するグラフィックスを含んでもよい。所定の実施形態では、第１の３Ｄ画像５６は、第２の３Ｄ画像よりも多数のグラフィックスを含む。また、第１の３Ｄ画像５６は、第２の３Ｄ画像のグラフィックスよりもサイズの小さなグラフィックスを含んでもよい。他の実施形態では、第１の３Ｄ画像５６及び第２の３Ｄ画像は、同じ数のグラフィックス及び／又は同じサイズのグラフィックスを含んでもよい。
所定の実施形態では、グラフィックスは、ディスプレイ１４上に表示された又はデータとして記憶されたグラフィカルアイテムを意味してもよい。例えば、グラフィックスは、車が移動している速さを示す数値、毎分回転数を示す数、又はシートベルト指示、ガソリンレベル指示等の画像を含んでもよい。更に、所定の実施形態によれば、グラフィックスは、任意のサイズ、形状又は色であってもよい。
図５は、操縦者４２がディスプレイ１４から眼を逸らして、第２の３Ｄ画像６２がディスプレイ６２に表示されている実施形態の斜視図である。例示の実施形態では、操縦者４２の右眼４６及び左眼４８はディスプレイ１４を見ておらず、車両１０内のフロントガラス越しに焦点を合わせて見ている。例示の実施形態では、ディスプレイ１４は、操縦者４２の中心視野３８にない。その代わり、操縦者４２の中心視野３８は、フロントガラス越しに見るように焦点が合わされている。従って、操縦者４２の眼４６及び４８の間の直接線６６と中心視野３８との間の角度６４により、ディスプレイ１４は操縦者４２の中心視野３８の外側に置かれている。従って、処理装置は、ディスプレイ１４が操縦者４２の周辺視野４０内にあることを決定してもよく、ディスプレイ１４に第２の３Ｄ画像データを提供してもよい。従って、ディスプレイ１４は第２の３Ｄ画像６２を示す。同様に、第２の３Ｄ画像６２も、第２の３Ｄ画像データの３Ｄオートステレオスコープの性質のためディスプレイ１４で見るために３Ｄ眼鏡を必要としない。理解できるように、第２の３Ｄ画像６２は、速さ、ガソリンレベル、シートベルト指示、エアバッグ指示、毎分回転数等に関するグラフィックスを含んでもよい。所定の実施形態では、第２の３Ｄ画像６２は、第１の３Ｄ画像５６よりも少ないグラフィックスを含む。更に、第２の３Ｄ画像６２は、第１の３Ｄ画像５６のグラフィックスよりもサイズの大きなグラフィックスを含んでもよい。他の実施形態では、第２の３Ｄ画像６２及び第１の３Ｄ画像５６は、同じ数のグラフィックス及び／又は同じサイズのグラフィックスを含んでもよい。第２の３Ｄ画像は、ディスプレイが操縦者の周辺視野にあることを説明するために第１の３Ｄ画像とは異なってもよい。例えば、第２の３Ｄ画像は、周辺視差を取り除いて、より大きく且つ単純化された画像を表示してもよい。これにより、ディスプレイが操縦者の周辺視野にある場合に他のやり方では識別できない第２の３Ｄ画像に存在する情報を操縦者が識別できるようになってもよい。
図６は、周辺視差を補償するためのシステムの実施形態の図である。例示の実施形態では、操縦者４２の中心視野３８は、ディスプレイ１４の方に向けられていない。従って、ディスプレイ１４上の３Ｄ画像の変化していないグラフィックスは、周辺視差のため操縦者４２により識別できないかもしれない。周辺視差を補償するために、一組のオフセットグラフィックス又は画像７２がディスプレイ１４上に配置され、第１の画像が操縦者４２の右眼４６により受信されるように構成され、第２の画像が操縦者４２の左眼４８により受信されるように構成される。従って、第２の３Ｄ画像６２は、操縦者４２の周辺視野４０に単一画像をもたらすように収束するオフセットグラフィックス又は画像７２によりもたらされる。
図７は、ディスプレイが操縦者４２の中心視野３８にあるか又は周辺視野４０にあるかに基づいて第１の３Ｄ画像又は第２の３Ｄ画像を表示する方法の実施形態のフローチャートである。方法は、１つ以上のプロセッサが凝視データを受信することを含む（ブロック８２）。凝視データは、凝視追跡機１８により又は中間コンポーネント（例えば、ミドルウェアアプリケーション）等の任意の他のソースにより送信されてもよい。凝視データは、操縦者が見ている方向に対応する。次に、方法８０は、凝視データ２４を分析して、ディスプレイ１４が操縦者の中心視野にあるか又はディスプレイ１４が操縦者４２の周辺視野４０にあるかを決定することを含む（ブロック８４）。それから、方法８０は、第１の又は第２のタイプの画像データをディスプレイ１４に提供することを含む（ブロック８６）。第１のタイプの画像データは、ディスプレイ１４が操縦者４２の中心視野３８にある場合にディスプレイ１４に提供されてもよい。第２のタイプの画像データは、ディスプレイ１４が操縦者４２の周辺視野４０にある場合にディスプレイ１４に提供されてもよい。更に、第１のタイプの画像データは、第１の３Ｄ画像をもたらす第１の３Ｄ画像データを含み、第２のタイプの画像データは、第２の３Ｄ画像をもたらす第２の３Ｄ画像データを含む。第１の及び／又は第２の３Ｄ画像は、ディスプレイ１４によって表示される（ブロック８８）。それから、方法８０は、ブロック８２に戻って、ブロック８２から８８を反復する。この方法は、ディスプレイが操縦者の周辺視野にある場合に操縦者が第２の３Ｄ画像において他のやり方では識別できないかもしれない関連情報を識別することを可能にするという利点を提供する。
本発明の所定の特徴及び実施形態のみが例示及び記載されているが、請求項に記載された主題の新規な教示及び利点から実質的に逸脱することなく、当業者にとっては、多くの修正及び変更（例えば、様々な要素のサイズ、寸法、構造、形状及び比率、パラメータの値（例えば、温度、圧力等）、取り付け配置、材料の使用、色彩、方向等の変更）が行われてもよい。任意の処理又は方法のステップの順番又は順序が、代替的な実施形態に従って変更され又は再順序付けされてもよい。従って、添付の請求項は、本発明の真の精神に当てはまるこのような全ての修正及び変更を含むことが理解されるべきである。更に、例示的な実施形態の簡潔な記載を与えるために、実際の実装の全ての特徴は記載されていない（即ち、本発明の実施の現在考えられるベストモードとは関係のないもの、又は請求項に記載の発明の実行に関係のないもの）。任意のエンジニアリング又は設計プロジェクト等における、任意のこのような実際の実装の開発において、多数の実装固有の決定が行われ得ることが理解されるべきである。このような開発努力は、複雑で時間がかかるかもしれないが、過度の実験を用いなくても、本開示の利益を有する当業者にとっては、設計、製作及び製造の日常的な業務であろう。

Claims (20)

  1. 操縦者が見ている方向に対応する凝視データを提供するように構成される凝視追跡機と、
    前記凝視データを分析して、ディスプレイが前記操縦者の中心視野にあるか又は前記ディスプレイが前記操縦者の周辺視野にあるかを決定し、前記ディスプレイが前記操縦者の前記中心視野にある場合に前記ディスプレイに第１のタイプの画像データを提供し、且つ前記ディスプレイが前記操縦者の前記周辺視野にある場合に前記ディスプレイに第２のタイプの画像データを提供するように構成される１つ以上のプロセッサと
    を備え、前記第１のタイプの画像データは、前記ディスプレイが前記操縦者の前記中心視野内にある場合に第１の３Ｄ画像をもたらす第１の３次元（３Ｄ）画像データを含み、且つ前記第２のタイプの画像データは、前記ディスプレイが前記操縦者の前記周辺視野内にある場合に第２の３Ｄ画像をもたらす第２の３Ｄ画像データを含む、システム。
  2. 前記ディスプレイを備える、請求項１に記載のシステム。
  3. 前記ディスプレイはインストルメントコンソールに取り付けられる、請求項２に記載のシステム。
  4. 前記ディスプレイはヘッドアップディスプレイの一部である、請求項２に記載のシステム。
  5. 前記第１の３Ｄ画像及び前記第２の３Ｄ画像は、３Ｄ眼鏡なしで観察可能である、請求項１に記載のシステム。
  6. 前記第１の３Ｄ画像の第１のグラフィックスは前記第２の３Ｄ画像の第２のグラフィックスの表現よりも小さい、請求項１に記載のシステム。
  7. 前記第２の３Ｄ画像は前記第１の３Ｄ画像からのグラフィックスの一部を含む、請求項１に記載のシステム。
  8. 前記第２の３Ｄ画像は前記ディスプレイ上に第１の画像及び第２の画像を表示することによりもたらされ、前記第１の画像及び前記第２の画像は互いからオフセットされており、前記第１の画像は前記操縦者の左眼により観察されるように構成され、前記第２の画像は前記操縦者の右眼により観察されるように構成され、前記第１の画像及び前記第２の画像は前記操縦者の前記周辺視野において単一の画像をもたらすように収束する、請求項１に記載のシステム。
  9. 前記第２の３Ｄ画像は、速さ、ガソリンレベル、シートベルト指示、エアバッグ指示、エンジン冷却水温度指示、毎分回転数、又はこれらの任意の組み合わせの少なくとも１つを含む、請求項１に記載のシステム。
  10. 前記凝視データを分析することは、前記操縦者に対する前記凝視追跡機の場所に関して前記凝視データを分析することを含む、請求項１に記載のシステム。
  11. 前記凝視追跡機は、前記ディスプレイ、ステアリングコラム、インストルメントコンソール、フレーム、バイザー、バックミラー、ドア、又はこれらの組み合わせに取り付けられる、請求項１に記載のシステム。
  12. 凝視データを受信すること、
    前記凝視データを分析して、ディスプレイが操縦者の中心視野にあるか又は前記ディスプレイが前記操縦者の周辺視野にあるかを決定すること、
    前記ディスプレイが前記操縦者の前記中心視野にある場合に前記ディスプレイに第１のタイプの画像データを提供し、且つ前記ディスプレイが前記操縦者の前記周辺視野にある場合に前記ディスプレイに第２のタイプの画像データを提供すること
    を行うように構成されるコンピュータ命令を含み、
    前記第１のタイプの画像データは、前記ディスプレイが前記操縦者の前記中心視野内にある場合に第１の３Ｄ画像をもたらす第１の３次元（３Ｄ）画像データを含み、且つ前記第２のタイプの画像データは、前記ディスプレイが前記操縦者の前記周辺視野内にある場合に第２の３Ｄ画像をもたらす第２の３Ｄ画像データを含む、一時的でない機械可読コンピュータ媒体。
  13. 前記凝視データは、前記操縦者が見ている方向に対応する、請求項１２に記載の一時的でない機械可読コンピュータ媒体。
  14. 前記コンピュータ命令は、前記操縦者に対する凝視追跡機の場所に関して前記凝視データを分析するように構成される、請求項１３に記載の一時的でない機械可読コンピュータ媒体。
  15. 前記第１の３Ｄ画像の第１のグラフィックスは前記第２の３Ｄ画像の第２のグラフィックスの表現よりも小さい、請求項１２に記載の一時的でない機械可読コンピュータ媒体。
  16. 前記第２の３Ｄ画像は前記第１の３Ｄ画像からのグラフィックスの一部を含む、請求項１２に記載の一時的でない機械可読コンピュータ媒体。
  17. 前記第２の３Ｄ画像は前記ディスプレイ上に第１の画像及び第２の画像を表示することによりもたらされ、前記第１の画像及び前記第２の画像は互いからオフセットされており、前記第１の画像は前記操縦者の左眼により観察されるように構成され、前記第２の画像は前記操縦者の右眼により観察されるように構成され、前記第１の画像及び前記第２の画像は前記操縦者の前記周辺視野において単一の画像をもたらすように収束する、請求項１２に記載の一時的でない機械可読コンピュータ媒体。
  18. 前記第１の３Ｄ画像及び前記第２の３Ｄ画像は３Ｄ眼鏡なしで観察可能である、請求項１２に記載の一時的でない機械可読コンピュータ媒体。
  19. １つ以上のプロセッサによって、凝視データを受信するステップと、
    前記１つ以上のプロセッサを用いて、前記凝視データを分析して、ディスプレイが操縦者の中心視野にあるか又は前記ディスプレイが前記操縦者の周辺視野にあるかを決定するステップと、
    前記１つ以上のプロセッサを用いて、前記ディスプレイが前記操縦者の前記中心視野にある場合に前記ディスプレイに第１のタイプの画像データを提供し、且つ前記ディスプレイが前記操縦者の前記周辺視野にある場合に前記ディスプレイに第２のタイプの画像データを提供するステップと
    を含み、前記第１のタイプの画像データは、前記ディスプレイが前記操縦者の前記中心視野内にある場合に第１の３Ｄ画像をもたらす第１の３次元（３Ｄ）画像データを含み、且つ前記第２のタイプの画像データは、前記ディスプレイが前記操縦者の前記周辺視野内にある場合に第２の３Ｄ画像をもたらす第２の３Ｄ画像データを含む、方法。
  20. 前記第１の３Ｄ画像の第１のグラフィックスは前記第２の３Ｄ画像の第２のグラフィックスの表現よりも小さい、請求項１９に記載の方法。
JP2016525929A 2013-10-24 2014-10-22 車両インストルメントコンソール上に３次元画像を表示するシステム及び方法 Pending JP2017504981A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/062,086 US20150116197A1 (en) 2013-10-24 2013-10-24 Systems and methods for displaying three-dimensional images on a vehicle instrument console
US14/062,086 2013-10-24
PCT/US2014/061819 WO2015061486A2 (en) 2013-10-24 2014-10-22 Systems and methods for displaying three-dimensional images on a vehicle instrument console

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2018166904A Division JP2019064580A (ja) 2013-10-24 2018-09-06 車両インストルメントコンソール上に３次元画像を表示するシステム及び方法

Publications (1)

Publication Number Publication Date
JP2017504981A true JP2017504981A (ja) 2017-02-09

Family

ID=51868336

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2016525929A Pending JP2017504981A (ja) 2013-10-24 2014-10-22 車両インストルメントコンソール上に３次元画像を表示するシステム及び方法
JP2018166904A Ceased JP2019064580A (ja) 2013-10-24 2018-09-06 車両インストルメントコンソール上に３次元画像を表示するシステム及び方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2018166904A Ceased JP2019064580A (ja) 2013-10-24 2018-09-06 車両インストルメントコンソール上に３次元画像を表示するシステム及び方法

Country Status (5)

Country Link
US (1) US20150116197A1 (ja)
JP (2) JP2017504981A (ja)
CN (1) CN105917401A (ja)
DE (1) DE112014004889T5 (ja)
WO (1) WO2015061486A2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200029650A (ko) * 2018-09-04 2020-03-19 현대자동차주식회사 디스플레이 장치, 그를 가지는 차량 및 그 제어 방법

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9922651B1 (en) * 2014-08-13 2018-03-20 Rockwell Collins, Inc. Avionics text entry, cursor control, and display format selection via voice recognition
US9308439B2 (en) * 2012-04-10 2016-04-12 Bally Gaming, Inc. Controlling three-dimensional presentation of wagering game content
KR101970197B1 (ko) * 2012-10-29 2019-04-18 에스케이 텔레콤주식회사 복수의 카메라 제어 방법과 그를 위한 카메라 제어 장치
KR102071693B1 (ko) * 2014-02-07 2020-01-30 엘지전자 주식회사 헤드 업 디스플레이 장치
US9756319B2 (en) * 2014-02-27 2017-09-05 Harman International Industries, Incorporated Virtual see-through instrument cluster with live video
DE102014204800A1 (de) * 2014-03-14 2015-09-17 Volkswagen Aktiengesellschaft Verfahren und Vorrichtung zum Bereitstellen einer graphischen Nutzerschnittstelle in einem Fahrzeug
WO2015145933A1 (ja) * 2014-03-26 2015-10-01 パナソニックＩｐマネジメント株式会社 虚像表示装置、ヘッドアップディスプレイシステム及び乗物
JP6917708B2 (ja) * 2016-02-29 2021-08-11 株式会社デンソー 運転者監視システム
US10354153B2 (en) * 2017-03-02 2019-07-16 Ricoh Company, Ltd. Display controller, display control method, and recording medium storing program
US11400862B2 (en) 2017-06-16 2022-08-02 Boe Technology Group Co., Ltd. Vision-based interactive control apparatus and method of controlling rear-view mirror for vehicle
DE102017213177A1 (de) 2017-07-31 2019-01-31 Audi Ag Verfahren zum Betreiben eines Bildschirms eines Kraftfahrzeugs sowie Kraftfahrzeug
JP6968676B2 (ja) * 2017-12-06 2021-11-17 矢崎総業株式会社 車両用表示装置
US10845595B1 (en) * 2017-12-28 2020-11-24 Facebook Technologies, Llc Display and manipulation of content items in head-mounted display
ES2718429B2 (es) * 2017-12-29 2019-11-18 Seat Sa Método y dispositivo asociado para controlar al menos un parámetro de un vehículo
DE102018008553A1 (de) * 2018-10-30 2020-04-30 Psa Automobiles Sa Verfahren zum Betreiben einer Instrumentenanzeige
US20230286437A1 (en) * 2022-03-09 2023-09-14 Toyota Research Institute, Inc. Vehicular warning system and method based on gaze abnormality

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005301144A (ja) * 2004-04-15 2005-10-27 Denso Corp 虚像表示装置およびプログラム
JP2007512582A (ja) * 2003-12-01 2007-05-17 ボルボ テクノロジー コーポレイション 情報を表示する方法およびシステム
JP2011150105A (ja) * 2010-01-21 2011-08-04 Fuji Heavy Ind Ltd 情報表示装置
JP2012019509A (ja) * 2010-07-08 2012-01-26 Samsung Electronics Co Ltd 立体メガネ及びこれを含むディスプレイ装置
JP2013104976A (ja) * 2011-11-11 2013-05-30 Denso Corp 車両用表示装置

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5883739A (en) * 1993-10-04 1999-03-16 Honda Giken Kogyo Kabushiki Kaisha Information display device for vehicle
US6346950B1 (en) * 1999-05-20 2002-02-12 Compaq Computer Corporation System and method for display images using anamorphic video
US6781585B2 (en) * 2000-01-11 2004-08-24 Sun Microsystems, Inc. Graphics system having a super-sampled sample buffer and having single sample per pixel support
US7068813B2 (en) * 2001-03-28 2006-06-27 Koninklijke Philips Electronics N.V. Method and apparatus for eye gazing smart display
US6890077B2 (en) * 2002-11-27 2005-05-10 The Boeing Company Method and apparatus for high resolution video image display
US7090358B2 (en) * 2004-03-04 2006-08-15 International Business Machines Corporation System, apparatus and method of displaying information for foveal vision and peripheral vision
EP1751499B1 (en) * 2004-06-03 2012-04-04 Making Virtual Solid, L.L.C. En-route navigation display method and apparatus using head-up display
CN102293001B (zh) * 2009-01-21 2014-05-14 株式会社尼康 图像处理装置、图像处理方法及记录方法
US20110164032A1 (en) * 2010-01-07 2011-07-07 Prime Sense Ltd. Three-Dimensional User Interface
US8514101B2 (en) * 2011-12-02 2013-08-20 GM Global Technology Operations LLC Driving maneuver assist on full windshield head-up display
JP2013187763A (ja) * 2012-03-08 2013-09-19 Toshiba Corp 視差補正処理装置
JP6007600B2 (ja) * 2012-06-07 2016-10-12 ソニー株式会社 画像処理装置、画像処理方法およびプログラム
US10339711B2 (en) * 2013-03-15 2019-07-02 Honda Motor Co., Ltd. System and method for providing augmented reality based directions based on verbal and gestural cues

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007512582A (ja) * 2003-12-01 2007-05-17 ボルボ テクノロジー コーポレイション 情報を表示する方法およびシステム
JP2005301144A (ja) * 2004-04-15 2005-10-27 Denso Corp 虚像表示装置およびプログラム
JP2011150105A (ja) * 2010-01-21 2011-08-04 Fuji Heavy Ind Ltd 情報表示装置
JP2012019509A (ja) * 2010-07-08 2012-01-26 Samsung Electronics Co Ltd 立体メガネ及びこれを含むディスプレイ装置
JP2013104976A (ja) * 2011-11-11 2013-05-30 Denso Corp 車両用表示装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200029650A (ko) * 2018-09-04 2020-03-19 현대자동차주식회사 디스플레이 장치, 그를 가지는 차량 및 그 제어 방법
KR102531313B1 (ko) * 2018-09-04 2023-05-12 현대자동차주식회사 디스플레이 장치, 그를 가지는 차량 및 그 제어 방법

Also Published As

Publication number Publication date
WO2015061486A3 (en) 2015-07-16
CN105917401A (zh) 2016-08-31
JP2019064580A (ja) 2019-04-25
US20150116197A1 (en) 2015-04-30
WO2015061486A2 (en) 2015-04-30
DE112014004889T5 (de) 2016-08-04

Similar Documents

Publication Publication Date Title
JP2017504981A (ja) 車両インストルメントコンソール上に３次元画像を表示するシステム及び方法
US9690104B2 (en) Augmented reality HUD display method and device for vehicle
US9530065B2 (en) Systems and methods for use at a vehicle including an eye tracking device
US10269161B2 (en) Vehicular display device and vehicular display method
US10528132B1 (en) Gaze detection of occupants for vehicle displays
US10162409B2 (en) Locating a head mounted display in a vehicle
US9547172B2 (en) Vehicle image display
US20160116977A1 (en) Systems and methods for use at a vehicle including an eye tracking device
US10040353B2 (en) Information display system
US9823735B2 (en) Method for selecting an information source from a plurality of information sources for display on a display of smart glasses
US10068143B2 (en) Method for calibrating a camera for a gaze direction detection in a vehicle, device for a motor vehicle having a camera and at least one further element, and computer program product
EP3387483B1 (en) An adjustable head-up display arrangement for a vehicle
CN110337377B (zh) 具有显示装置的机动车和用于运行机动车的显示装置的方法
US9436007B2 (en) Integrated cluster and head-up display device for vehicle
KR20160037999A (ko) 계기 3d 디스플레이 시스템
US11238834B2 (en) Method, device and system for adjusting image, and computer readable storage medium
US20180284432A1 (en) Driving assistance device and method
JP2018121287A (ja) 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
US20160073098A1 (en) Head-up display system using auto-stereoscopy 3d transparent electronic display
KR20230084562A (ko) 차량의 운전자의 시야 내의 정보의 디스플레이를 제어하기 위한 디바이스 및 방법
US20220072957A1 (en) Method for Depicting a Virtual Element
US11790615B2 (en) Marking objects for a vehicle using a virtual element
CN116400507A (zh) 显示方法、显示设备、交通工具及存储介质
JP2021024402A (ja) 車両用表示制御装置、及び車両用表示システム
JP2015501440A (ja) 特に自動車用のディスプレイ装置

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20170529

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170627

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20170927

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20171115

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20180508