JP7143853B2 - 車両内に仮想環境を生成する表示制御システムおよび方法 - Google Patents
車両内に仮想環境を生成する表示制御システムおよび方法 Download PDFInfo
- Publication number
- JP7143853B2 JP7143853B2 JP2019548088A JP2019548088A JP7143853B2 JP 7143853 B2 JP7143853 B2 JP 7143853B2 JP 2019548088 A JP2019548088 A JP 2019548088A JP 2019548088 A JP2019548088 A JP 2019548088A JP 7143853 B2 JP7143853 B2 JP 7143853B2
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- video
- travel route
- ecu
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 36
- 238000004891 communication Methods 0.000 claims description 106
- 238000001914 filtration Methods 0.000 claims description 11
- 230000033001 locomotion Effects 0.000 claims description 11
- 230000003190 augmentative effect Effects 0.000 claims description 10
- 238000003384 imaging method Methods 0.000 description 34
- 238000001514 detection method Methods 0.000 description 15
- 230000006870 function Effects 0.000 description 8
- 238000012790 confirmation Methods 0.000 description 6
- 239000011521 glass Substances 0.000 description 5
- 238000012546 transfer Methods 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000007774 longterm Effects 0.000 description 4
- 239000013308 plastic optical fiber Substances 0.000 description 4
- 238000004590 computer program Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000000605 extraction Methods 0.000 description 3
- 239000000446 fuel Substances 0.000 description 3
- 239000000463 material Substances 0.000 description 3
- UFHFLCQGNIYNRP-UHFFFAOYSA-N Hydrogen Chemical compound [H][H] UFHFLCQGNIYNRP-UHFFFAOYSA-N 0.000 description 2
- 238000005452 bending Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 230000010267 cellular communication Effects 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 239000002803 fossil fuel Substances 0.000 description 2
- 229910052739 hydrogen Inorganic materials 0.000 description 2
- 239000001257 hydrogen Substances 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000013178 mathematical model Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 101100172132 Mus musculus Eif3a gene Proteins 0.000 description 1
- 241000269400 Sirenidae Species 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- -1 electric propulsion Substances 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 238000002347 injection Methods 0.000 description 1
- 239000007924 injection Substances 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000004297 night vision Effects 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 239000004984 smart glass Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/485—End-user interface for client configuration
- H04N21/4858—End-user interface for client configuration for modifying screen layout parameters, e.g. fonts, size of the windows
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
- B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
- B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
- B60R1/27—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view providing all-round vision, e.g. using omnidirectional cameras
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
- H04N21/25808—Management of client data
- H04N21/25841—Management of client data involving the geographical location of the client
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
- H04N21/41422—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance located in transportation means, e.g. personal vehicle
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
- H04N7/0127—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level by changing the field or frame frequency of the incoming video signal, e.g. frame rate converter
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/16—Type of output information
- B60K2360/165—Videos and animations
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/16—Type of output information
- B60K2360/166—Navigation
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/16—Type of output information
- B60K2360/175—Autonomous driving
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/16—Type of output information
- B60K2360/177—Augmented reality
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/20—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
- B60R2300/205—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used using a head-up display
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
- B60R2300/304—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images
- B60R2300/305—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images merging camera image with lines or icons
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2520/00—Input parameters relating to overall vehicle dynamics
- B60W2520/10—Longitudinal speed
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2552/00—Input parameters relating to infrastructure
- B60W2552/30—Road curve radius
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2554/00—Input parameters relating to objects
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2554/00—Input parameters relating to objects
- B60W2554/40—Dynamic objects, e.g. animals, windblown objects
- B60W2554/406—Traffic density
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2555/00—Input parameters relating to exterior conditions, not covered by groups B60W2552/00, B60W2554/00
- B60W2555/20—Ambient conditions, e.g. wind or rain
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Mechanical Engineering (AREA)
- Signal Processing (AREA)
- Transportation (AREA)
- Automation & Control Theory (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Chemical & Material Sciences (AREA)
- Combustion & Propulsion (AREA)
- Databases & Information Systems (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Computer Networks & Wireless Communication (AREA)
- General Health & Medical Sciences (AREA)
- Computing Systems (AREA)
- Computer Graphics (AREA)
- Optics & Photonics (AREA)
- Traffic Control Systems (AREA)
- Evolutionary Computation (AREA)
- Artificial Intelligence (AREA)
- Game Theory and Decision Science (AREA)
- Aviation & Aerospace Engineering (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Business, Economics & Management (AREA)
- Navigation (AREA)
- Controls And Circuits For Display Device (AREA)
Description
表1:現在の移動ルートの曲率および選択された映像に関連する移動ルートの対応する曲率に対する異なるジオロケーションポイントにおける関連性ファクタ。
ここで、SFは、各ジオロケーションにおける速度ファクタである。
AFR=(現在のフレームレート×判定された関連性ファクタ×速度ファクタ) (2)
ここで、AFRは、調整されたフレームレートである。
Claims (20)
- 車両用システムにおいて、
前記車両用の電子制御ユニット(ECU)内の1つまたは複数の回路を備え、前記1つまたは複数の回路が、
1又は複数の車両がそれぞれ有する撮像ユニットにより撮像され、撮像された際の移動ルートが関連付けられた映像であって、前記車両内の1つまたは複数の表示媒体に表示される映像の選択に対応する入力を受信し、
前記車両が現在の移動ルートに沿って移動している場合に、前記車両の前記現在の移動ルートと前記選択された映像に関連付けられた移動ルートとの間の関連性ファクタを判定し、
前記判定された関連性ファクタに基づいて前記選択された映像の1つまたは複数の映像パラメータを調整し、
前記選択された映像の前記調整された1つまたは複数の映像パラメータにしたがって、移動中の前記車両内の前記1つまたは複数の表示媒体上の少なくとも前記選択された映像の表示を制御するように構成されている、システム。 - 前記関連性ファクタが、前記現在の移動ルートと前記選択された映像に関連する前記移動ルートとの間の曲率パラメータに基づいて判定される、請求項1に記載のシステム。
- 前記関連性ファクタが、前記車両の前記現在の移動ルートの一部の第1の曲率度と前記選択された映像に関連する前記移動ルートの対応する部分の第2の曲率度との間の比である、請求項1に記載のシステム。
- 前記ECU内の前記1つまたは複数の回路が、前記車両によってとられるべき少なくとも前記現在の移動ルートを含む入力情報を検索するようにさらに構成されている、請求項1に記載のシステム。
- 前記ECU内の前記1つまたは複数の回路が、メモリまたは外部通信装置の少なくとも1つに記憶された複数のタグ付き映像のタグ付き情報に対する前記入力情報の類似性検索に基づいて、前記ECUに通信可能に結合された前記メモリまたは前記外部通信装置のうちの前記少なくとも1つから第1の映像セットを検索するようにさらに構成されている、請求項4に記載のシステム。
- 前記ECU内の前記1つまたは複数の回路が、前記入力情報に含まれる前記現在の移動ルートのルート形状と、前記第1の映像セットの前記検索のための前記複数のタグ付き映像に関連付けられた複数のルート形状とを比較するようにさらに構成されている、請求項5に記載のシステム。
- 前記ECU内の前記1つまたは複数の回路が、1つまたは複数の基準に基づいて前記検索された第1の映像セットをフィルタリングするようにさらに構成されており、前記1つまたは複数の基準が、前記車両の車載ネットワークおよび前記車両内の1人以上の乗員の乗員情報から抽出されたセンサデータの1つに対応する、請求項5に記載のシステム。
- 前記センサデータが、前記現在の移動ルートに沿った前記車両の移動中に前記車両に設けられた複数のセンサによって検出された交通状況および気象状況の一方または両方に対応する、請求項7に記載のシステム。
- 前記ECU内の前記1つまたは複数の回路が、前記検索された第1の映像セットの前記フィルタリングについて前記1つまたは複数の基準に優先順位を割り当てるようにさらに構成されている、請求項7に記載のシステム。
- 前記ECU内の前記1つまたは複数の回路が、前記第1の映像セットの前記フィルタリングに基づいて、前記車両内の前記1つまたは複数の表示媒体の表示画面上にレンダリングされたインターフェース上に洗練された映像セットを表示するようにさらに構成されており、前記映像の前記選択に対応する前記入力が、前記インターフェース上に表示された前記洗練された映像セットのうちの1つの選択に対応する、請求項7に記載のシステム。
- 前記選択された映像の前記1つまたは複数の映像パラメータの前記調整が、前記車両の現在の速度にさらに基づいている、請求項1に記載のシステム。
- 前記選択された映像の前記1つまたは複数の映像パラメータの前記調整が、前記判定された関連性ファクタに基づいて、移動中の前記車両内の前記1つまたは複数の表示媒体上に前記選択された映像を表示する間の前記選択された映像のフレームレートの動的調整に対応する、請求項1に記載のシステム。
- 前記車両内の前記1つまたは複数の表示媒体が、前記車両の外部環境の自然なビューが、移動中の前記車両内の前記1つまたは複数の表示媒体上の前記選択された映像の表示中に前記車両内から1人または複数の乗員にとって選択的に制限されるように配置されている、請求項1に記載のシステム。
- 前記ECU内の前記1つまたは複数の回路が、前記選択された映像の前記表示中に、前記選択された映像の前記移動ルートに関連する第2の地理的領域の仮想環境が前記車両内に作成されるように、第1の地理的領域内の前記現在の移動ルートに沿って移動中の前記車両内の前記1つまたは複数の表示媒体上の前記選択された映像の表示を制御するようにさらに構成されている、請求項1に記載のシステム。
- 前記ECU内の前記1つまたは複数の回路が、前記1つまたは複数の表示媒体に対応する前記車両の1つまたは複数のウィンドウおよび/またはフロントガラス上に拡張現実感ビューを生成するようにさらに構成されており、前記拡張現実感ビューが、前記車両の外部の1つまたは複数の外部オブジェクトに重ね合わされた前記選択された映像のビューを備える、請求項1に記載のシステム。
- 前記車両が、自律型車両または半自律型車両のうちの1つである、請求項1に記載のシステム。
- 車両内に仮想環境を生成する表示制御方法において、
前記車両の電子制御ユニット(ECU)によって、1又は複数の車両がそれぞれ有する撮像ユニットにより撮像され、撮像された際の移動ルートが関連付けられた映像であって、前記車両の1つまたは複数の表示媒体に表示される映像の選択に対応する入力を受信することと、
前記ECUによって、前記車両が現在の移動ルートに沿って移動している場合に、前記車両の前記現在の移動ルートと前記選択された映像に関連付けられた移動ルートとの間の関連性ファクタを判定することと、
前記ECUによって、前記判定された関連性ファクタに基づいて前記選択された映像の1つまたは複数の映像パラメータを調整することと、
前記ECUによって、前記選択された映像の前記調整された1つまたは複数の映像パラメータにしたがって、移動中の前記車両内の前記1つまたは複数の表示媒体上の前記選択された映像の表示を制御することとを備える、表示制御方法。 - 車両において、
電子制御ユニット(ECU)と、
前記ECUに通信可能に結合された1つまたは複数の表示媒体とを備え、前記ECUが、
1又は複数の車両がそれぞれ有する撮像ユニットにより撮像され、撮像された際の移動ルートが関連付けられた映像であって、前記車両に設けられた前記1つまたは複数の表示媒体上に表示される映像の選択に対応する入力を受信し、
前記車両が現在の移動ルートに沿って移動している場合に、前記車両の前記現在の移動ルートと前記選択された映像に関連する移動ルートとの間の関連性ファクタを判定し、
前記判定された関連性ファクタに基づいて前記選択された映像の1つまたは複数の映像パラメータを調整し、
前記選択された映像の前記調整された1つまたは複数の映像パラメータにしたがって、移動中の前記車両内の前記1つまたは複数の表示媒体上の前記選択された映像の表示を制御するように構成された1つまたは複数の回路を備える、車両。 - 前記車両が自律型車両または半自律型車両のうちの1つである、請求項18に記載の車両。
- 前記車両が非自律型車両である、請求項18に記載の車両。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US15/462,600 US10257582B2 (en) | 2017-03-17 | 2017-03-17 | Display control system and method to generate a virtual environment in a vehicle |
US15/462,600 | 2017-03-17 | ||
PCT/JP2018/008053 WO2018168527A1 (en) | 2017-03-17 | 2018-03-02 | Display control system and method to generate a virtual environment in a vehicle |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020515886A JP2020515886A (ja) | 2020-05-28 |
JP7143853B2 true JP7143853B2 (ja) | 2022-09-29 |
Family
ID=61768372
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019548088A Active JP7143853B2 (ja) | 2017-03-17 | 2018-03-02 | 車両内に仮想環境を生成する表示制御システムおよび方法 |
Country Status (4)
Country | Link |
---|---|
US (3) | US10257582B2 (ja) |
JP (1) | JP7143853B2 (ja) |
DE (1) | DE112018001422T5 (ja) |
WO (1) | WO2018168527A1 (ja) |
Families Citing this family (40)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5957744B1 (ja) * | 2015-07-31 | 2016-07-27 | パナソニックIpマネジメント株式会社 | 運転支援装置、運転支援システム、運転支援方法、運転支援プログラム及び自動運転車両 |
KR20180037828A (ko) * | 2016-10-05 | 2018-04-13 | 현대자동차주식회사 | 주행 환경에 따른 차량용 사용자 인터페이스 제어 장치 및 제어 방법 |
US11747696B2 (en) | 2017-04-26 | 2023-09-05 | View, Inc. | Tandem vision window and media display |
US11747698B2 (en) | 2017-04-26 | 2023-09-05 | View, Inc. | Tandem vision window and media display |
CN110709765A (zh) | 2017-04-26 | 2020-01-17 | 唯景公司 | 用于可着色窗户的显示器 |
US11493819B2 (en) | 2017-04-26 | 2022-11-08 | View, Inc. | Displays for tintable windows |
US11892738B2 (en) | 2017-04-26 | 2024-02-06 | View, Inc. | Tandem vision window and media display |
CN107323375B (zh) * | 2017-06-27 | 2019-12-03 | 京东方科技集团股份有限公司 | 车载显示***、交通设备和图像显示方法 |
DE102017215901A1 (de) * | 2017-09-08 | 2019-03-14 | Audi Ag | Assistenzsystem für ein Fahrzeug |
US10854002B2 (en) * | 2017-09-08 | 2020-12-01 | Verizon Patent And Licensing Inc. | Interactive vehicle window system including augmented reality overlays |
US10235122B1 (en) * | 2017-09-21 | 2019-03-19 | Qualcomm Incorporated | Transitioning displays in autonomous vehicles to increase driver attentiveness |
US10303045B1 (en) * | 2017-12-20 | 2019-05-28 | Micron Technology, Inc. | Control of display device for autonomous vehicle |
DE102018206657A1 (de) * | 2018-04-30 | 2019-10-31 | Audi Ag | Verfahren und Steuervorrichtung zum Betreiben eines Kraftfahrzeugs |
US20200020143A1 (en) * | 2018-07-12 | 2020-01-16 | GM Global Technology Operations LLC | Systems and methods for in-vehicle augmented virtual reality system |
US11284051B2 (en) * | 2018-07-30 | 2022-03-22 | Pony Ai Inc. | Systems and methods for autonomous vehicle interactive content presentation |
DE102018213634A1 (de) * | 2018-08-13 | 2020-02-13 | Audi Ag | Verfahren zum Betreiben einer in einem Kraftfahrzeug angeordneten Anzeigeeinrichtung und Anzeigeeinrichtung zum Verwenden in einem Kraftfahrzeug |
JP2020053795A (ja) * | 2018-09-26 | 2020-04-02 | 株式会社Jvcケンウッド | 表示制御装置、映像管理サーバ装置、表示システム、表示制御方法およびプログラム |
DE102018008045B4 (de) | 2018-10-11 | 2020-07-23 | Daimler Ag | Verfahren und Einrichtung zur Steuerung von Anzeigeinhalten auf einem Ausgabemittel eines Fahrzeugs |
US10816987B2 (en) * | 2018-10-15 | 2020-10-27 | Zoox, Inc. | Responsive vehicle control |
US11042159B2 (en) * | 2018-12-20 | 2021-06-22 | Toyota Motor North America, Inc. | Systems and methods for prioritizing data processing |
WO2020159245A1 (ko) * | 2019-01-31 | 2020-08-06 | 엘지전자 주식회사 | 차량 간 영상 공유 방법 |
US10694078B1 (en) * | 2019-02-19 | 2020-06-23 | Volvo Car Corporation | Motion sickness reduction for in-vehicle displays |
US11373527B2 (en) * | 2019-03-25 | 2022-06-28 | Micron Technology, Inc. | Driver assistance for non-autonomous vehicle in an autonomous environment |
CN110053626B (zh) * | 2019-05-10 | 2021-07-06 | 深圳市元征科技股份有限公司 | 一种车辆控制方法及相关装置 |
CN110281950B (zh) * | 2019-07-08 | 2020-09-04 | 睿镞科技(北京)有限责任公司 | 基于三维声像传感器的载运工具控制与可视化环境体验 |
US11182970B1 (en) | 2019-12-09 | 2021-11-23 | Rockwell Collins, Inc. | Augmented reality aircraft window and method |
CN113219656B (zh) * | 2020-01-21 | 2022-12-02 | 未来(北京)黑科技有限公司 | 一种车载抬头显示*** |
JP7264837B2 (ja) * | 2020-01-24 | 2023-04-25 | トヨタ自動車株式会社 | 情報処理装置、情報処理方法及び情報処理システム |
GB2595889A (en) | 2020-06-10 | 2021-12-15 | Daimler Ag | Methods and systems for displaying visual content on a motor vehicle and method for providing a motor vehicle |
DE102020209453B4 (de) | 2020-07-27 | 2023-07-06 | Volkswagen Aktiengesellschaft | Verfahren und Vorrichtung zur Augmented-Reality-Darstellung von Sprachlerninhalten |
KR20220036456A (ko) * | 2020-09-15 | 2022-03-23 | 현대자동차주식회사 | 증강현실 기반의 정보 표시 장치 |
JP2022054362A (ja) * | 2020-09-25 | 2022-04-06 | 豊田合成株式会社 | 車両用映像表示システム及び車両用映像表示方法 |
JP2022071800A (ja) * | 2020-10-28 | 2022-05-16 | 株式会社日本総合研究所 | 情報処理装置及び感情誘導方法 |
DE102021003887A1 (de) | 2021-07-27 | 2023-02-02 | Mercedes-Benz Group AG | Verfahren zur Bereitstellung von auf die Bewegung eines Fahrzeugs abgestimmten Medieninhalten und Fahrzeug |
JP7487714B2 (ja) * | 2021-08-31 | 2024-05-21 | トヨタ自動車株式会社 | 表示制御装置、表示システム、表示方法及び表示プログラム |
DE102021126195A1 (de) | 2021-10-08 | 2023-04-13 | Bayerische Motoren Werke Aktiengesellschaft | Projektionsanzeigevorrichtung für zusätzliche Fahrerinformationen im Innenspiegel über Reflexion an der Heckscheibe |
CN114291106A (zh) * | 2021-12-30 | 2022-04-08 | 阿波罗智联(北京)科技有限公司 | 用于车辆的信息展示方法、装置、电子设备和存储介质 |
GB2616648A (en) * | 2022-03-16 | 2023-09-20 | Wayray Ag | System and method |
CN114679613B (zh) * | 2022-05-30 | 2022-09-20 | 南斗六星***集成有限公司 | 一种智能网联车历史数据循环播放的方法 |
WO2024124230A1 (en) * | 2022-12-09 | 2024-06-13 | Adeia Guides Inc. | Method and system for providing media content items for display on a user device |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004020223A (ja) | 2002-06-12 | 2004-01-22 | Nippon Telegr & Teleph Corp <Ntt> | 車載用画像表示装置および車載用画像表示方法 |
JP2009093076A (ja) | 2007-10-11 | 2009-04-30 | Mitsubishi Electric Corp | 列車内画像表示システム |
JP2011227469A (ja) | 2010-03-30 | 2011-11-10 | Ns Solutions Corp | オブジェクト表示システム及びオブジェクト表示方法 |
JP2011226972A (ja) | 2010-04-22 | 2011-11-10 | Nikon Corp | 交通手段の眺望予想表示システムおよびこれに用いられる表示手段 |
US20120262673A1 (en) | 2011-04-15 | 2012-10-18 | Volvo Car Corporation | Vehicular information display system and method |
JP2015111178A (ja) | 2013-12-06 | 2015-06-18 | 三菱電機株式会社 | 映像処理装置及びプログラム |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7616129B2 (en) * | 2005-12-01 | 2009-11-10 | Discrete Wireless, Inc. | In-vehicle conditional multi-media center |
US20090275285A1 (en) * | 2008-05-01 | 2009-11-05 | Zoran Maricevic | Method and apparatus for wireless synchronization between host media center and remote vehicular devices |
JP5209370B2 (ja) | 2008-05-19 | 2013-06-12 | 株式会社Kddi研究所 | 再生装置、再生方法およびプログラム |
DE102011100941A1 (de) * | 2011-05-09 | 2012-11-15 | Lear Corporation Gmbh | Fahrzeuginformations- und/oder Unterhaltungssystem mit Steuereinheit zur Anpassung einer Anzeige einer grafischen Benutzerschnittstelle einer Anwendung |
DE102012003921A1 (de) * | 2012-02-28 | 2013-08-29 | GM Global Technology Operations LLC (n. d. Gesetzen des Staates Delaware) | Anzeige und Bedineinrichtung sowie Verfahren zum Betrieb einer Anzeige- und Bedieneinrichtung |
US20140309813A1 (en) * | 2013-04-15 | 2014-10-16 | Flextronics Ap, Llc | Guest vehicle user reporting |
US20140309863A1 (en) * | 2013-04-15 | 2014-10-16 | Flextronics Ap, Llc | Parental control over vehicle features and child alert system |
JP2014126604A (ja) | 2012-12-25 | 2014-07-07 | Ricoh Co Ltd | 光源装置、照明光学系及び画像表示装置 |
KR102129798B1 (ko) * | 2014-05-08 | 2020-07-03 | 엘지전자 주식회사 | 비히클 및 그 제어 방법 |
US10717406B2 (en) * | 2015-10-26 | 2020-07-21 | Active Knowledge Ltd. | Autonomous vehicle having an external shock-absorbing energy dissipation padding |
US20180152628A1 (en) * | 2016-11-30 | 2018-05-31 | Waymo Llc | Camera peek into turn |
-
2017
- 2017-03-17 US US15/462,600 patent/US10257582B2/en active Active
-
2018
- 2018-03-02 WO PCT/JP2018/008053 patent/WO2018168527A1/en active Application Filing
- 2018-03-02 JP JP2019548088A patent/JP7143853B2/ja active Active
- 2018-03-02 DE DE112018001422.3T patent/DE112018001422T5/de active Pending
-
2019
- 2019-03-05 US US16/292,761 patent/US10560754B2/en active Active
-
2020
- 2020-01-07 US US16/736,233 patent/US11388482B2/en active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004020223A (ja) | 2002-06-12 | 2004-01-22 | Nippon Telegr & Teleph Corp <Ntt> | 車載用画像表示装置および車載用画像表示方法 |
JP2009093076A (ja) | 2007-10-11 | 2009-04-30 | Mitsubishi Electric Corp | 列車内画像表示システム |
JP2011227469A (ja) | 2010-03-30 | 2011-11-10 | Ns Solutions Corp | オブジェクト表示システム及びオブジェクト表示方法 |
JP2011226972A (ja) | 2010-04-22 | 2011-11-10 | Nikon Corp | 交通手段の眺望予想表示システムおよびこれに用いられる表示手段 |
US20120262673A1 (en) | 2011-04-15 | 2012-10-18 | Volvo Car Corporation | Vehicular information display system and method |
JP2015111178A (ja) | 2013-12-06 | 2015-06-18 | 三菱電機株式会社 | 映像処理装置及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
US10257582B2 (en) | 2019-04-09 |
WO2018168527A1 (en) | 2018-09-20 |
US20190200091A1 (en) | 2019-06-27 |
US20200145727A1 (en) | 2020-05-07 |
US10560754B2 (en) | 2020-02-11 |
US20180270542A1 (en) | 2018-09-20 |
JP2020515886A (ja) | 2020-05-28 |
US11388482B2 (en) | 2022-07-12 |
DE112018001422T5 (de) | 2019-12-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7143853B2 (ja) | 車両内に仮想環境を生成する表示制御システムおよび方法 | |
US10984655B2 (en) | System and method for driving assistance along a path | |
JP7371671B2 (ja) | 車両に安全に追い付けるように運転を支援するシステムおよび方法 | |
US10528829B2 (en) | Apparatus for parking vehicle and vehicle | |
US10240937B2 (en) | Display apparatus for vehicle and vehicle | |
US10410069B2 (en) | Apparatus for providing around view and vehicle | |
EP3617653A1 (en) | Method for providing image to vehicle and electronic device therefor | |
US10703374B2 (en) | Vehicle driving assisting apparatus and vehicle comprising same | |
US20220080829A1 (en) | Vehicle image processing device and method for displaying visual information on display included in vehicle | |
US10547988B2 (en) | Method for acquiring information about pedestrian and communication device for vehicle | |
US20210055116A1 (en) | Get-off point guidance method and vehicular electronic device for the guidance | |
US20230304822A1 (en) | Route guidance device and route guidance method thereof | |
WO2023206388A1 (zh) | 换道决策方法、装置及存储介质 | |
WO2023171401A1 (ja) | 信号処理装置、信号処理方法、および記録媒体 | |
CN114572219A (zh) | 自动超车方法、装置、车辆、存储介质及芯片 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210118 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20211109 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220107 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220426 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220620 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220816 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220829 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7143853 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |