RU2016101616A - Вычислительное устройство, способ и вычислительная система - Google Patents

Вычислительное устройство, способ и вычислительная система Download PDF

Info

Publication number
RU2016101616A
RU2016101616A RU2016101616A RU2016101616A RU2016101616A RU 2016101616 A RU2016101616 A RU 2016101616A RU 2016101616 A RU2016101616 A RU 2016101616A RU 2016101616 A RU2016101616 A RU 2016101616A RU 2016101616 A RU2016101616 A RU 2016101616A
Authority
RU
Russia
Prior art keywords
virtual
virtual sensor
sensor data
data
sensor
Prior art date
Application number
RU2016101616A
Other languages
English (en)
Inventor
Артур АЛАНИЗ
Видия НАРИЯМБУТ МУРАЛИ
Элизабет Эшли МИКС
Харпритсингх БАНВЭЙТ
Снеха КАДЕТОТАД
Original Assignee
ФОРД ГЛОУБАЛ ТЕКНОЛОДЖИЗ, ЭлЭлСи
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ФОРД ГЛОУБАЛ ТЕКНОЛОДЖИЗ, ЭлЭлСи filed Critical ФОРД ГЛОУБАЛ ТЕКНОЛОДЖИЗ, ЭлЭлСи
Publication of RU2016101616A publication Critical patent/RU2016101616A/ru

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01DMEASURING NOT SPECIALLY ADAPTED FOR A SPECIFIC VARIABLE; ARRANGEMENTS FOR MEASURING TWO OR MORE VARIABLES NOT COVERED IN A SINGLE OTHER SUBCLASS; TARIFF METERING APPARATUS; MEASURING OR TESTING NOT OTHERWISE PROVIDED FOR
    • G01D18/00Testing or calibrating apparatus or arrangements provided for in groups G01D1/00 - G01D15/00
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/10Geometric effects
    • G06T15/20Perspective computation
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B17/00Systems involving the use of models or simulators of said systems
    • G05B17/02Systems involving the use of models or simulators of said systems electric
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0088Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots characterized by the autonomous decision making process, e.g. artificial intelligence, predefined behaviours
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F30/00Computer-aided design [CAD]
    • G06F30/10Geometric CAD
    • G06F30/15Vehicle, aircraft or watercraft design
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F30/00Computer-aided design [CAD]
    • G06F30/20Design optimisation, verification or simulation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/06Ray-tracing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B9/00Simulators for teaching or training purposes
    • G09B9/02Simulators for teaching or training purposes for teaching control of vehicles or other craft
    • G09B9/04Simulators for teaching or training purposes for teaching control of vehicles or other craft for teaching control of land vehicles
    • G09B9/042Simulators for teaching or training purposes for teaching control of vehicles or other craft for teaching control of land vehicles providing simulation in a real vehicle

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Geometry (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Automation & Control Theory (AREA)
  • Evolutionary Computation (AREA)
  • Business, Economics & Management (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • Game Theory and Decision Science (AREA)
  • Medical Informatics (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Computational Mathematics (AREA)
  • Mathematical Optimization (AREA)
  • Pure & Applied Mathematics (AREA)
  • Mathematical Analysis (AREA)
  • Educational Technology (AREA)
  • Educational Administration (AREA)
  • Software Systems (AREA)
  • Computing Systems (AREA)
  • Traffic Control Systems (AREA)
  • Gyroscopes (AREA)
  • Time Recorders, Dirve Recorders, Access Control (AREA)
  • Testing Or Calibration Of Command Recording Devices (AREA)
  • Navigation (AREA)

Claims (28)

1. Вычислительное устройство, содержащее схему обработки и накопитель данных, причем вычислительное устройство запрограммировано с возможностью:
приема данных виртуального датчика, причем данные виртуального датчика представляют собой данные, собранные виртуальным датчиком, связанным с автономной эксплуатацией виртуального транспортного средства в виртуальной окружающей среде;
обработки данных виртуального датчика для идентификации ограничения реального датчика.
2. Устройство по п. 1, в котором вычислительное устройство запрограммировано с возможностью генерации данных виртуального датчика, по меньшей мере, частично на основе виртуальной навигации виртуального транспортного средства в виртуальной окружающей среде.
3. Устройство по п. 1, в котором виртуальная окружающая среда включает в себя, по меньшей мере, один объект, обнаруженный виртуальным датчиком, и причем данные виртуального датчика представляют собой, по меньшей мере, одно из относительного положения, размера и типа объекта, связанных с обнаруженным объектом.
4. Устройство по п. 3, в котором вычислительное устройство запрограммировано с возможностью идентификации обнаруженного объекта с помощью наложения, отображаемого на экране дисплея.
5. Устройство по п. 1, в котором виртуальный датчик, по меньшей мере, частично основан на, по меньшей мере, одном датчике автономного движения, включенном в автономное транспортное средство.
6. Устройство по п. 1, в котором виртуальный датчик включает в себя виртуальную камеру, и причем данные виртуального датчика включают в себя изображение виртуальной камеры.
7. Устройство по п. 1, в котором виртуальный датчик включает в себя виртуальную камеру, и, причем данные виртуального датчика включают в себя изображение трассированного луча.
8. Устройство по п. 1, в котором обработка данных виртуального датчика включает в себя применение метки времени к данным виртуального датчика.
9. Способ, содержащий этапы, на которых:
принимают данные виртуального датчика, причем данные виртуального датчика представляют собой данные, собранные виртуальным датчиком, связанным с автономной эксплуатацией виртуального транспортного средства в виртуальной окружающей среде; и
обрабатывают данные виртуального датчика для идентификации ограничения реального датчика.
10. Способ по п. 9, дополнительно содержащий этап, на котором генерируют данные виртуального датчика, по меньшей мере, частично на основе виртуальной навигации виртуального транспортного средства в виртуальной окружающей среде.
11. Способ по п. 9, в котором виртуальная окружающая среда включает в себя, по меньшей мере, один объект, обнаруженный виртуальным датчиком, и, причем данные виртуального датчика представляют, по меньшей мере, одно из относительного положения, размера и типа объекта, связанных с обнаруженным объектом.
12. Способ по п. 11, дополнительно содержащий этап, на котором идентифицируют обнаруженный объект с помощью наложения, отображаемого на экрана дисплея.
13. Способ по п. 9, в котором виртуальный датчик, по меньшей мере, частично основан на, по меньшей мере, одном датчике автономного движения, включенном в автономное транспортное средство.
14. Способ по п. 9, в котором виртуальный датчик включает в себя виртуальную камеру, и, причем данные виртуального датчика включают в себя изображение виртуальной камеры.
15. Способ по п. 9, в котором виртуальный датчик включает в себя виртуальную камеру, и, причем данные виртуального датчика включают в себя изображение трассированного луча.
16. Способ по п. 9, в котором обработка данных виртуального датчика включает в себя применение метки времени к данным виртуального датчика.
17. Вычислительная система, содержащая:
экран дисплея; и
вычислительное устройство, имеющее схему обработки и накопитель данных, причем вычислительное устройство запрограммировано с возможностью:
приема данных виртуального датчика, причем данные виртуального датчика представляют собой данные, собранные виртуальным датчиком, связанным с автономной эксплуатацией виртуального транспортного средства в виртуальной окружающей среде; и
обработки данных виртуального датчика для идентификации ограничения реального датчика.
18. Система по п. 17, в которой виртуальная окружающая среда включает в себя, по меньшей мере, один объект, обнаруженный виртуальным датчиком, и причем данные виртуального датчика представляют, по меньшей мере, одно из относительного положения, размера и типа объекта, связанных с обнаруженным объектом.
19. Система по п. 18, в которой вычислительное устройство запрограммировано с возможностью идентификации обнаруженного объекта с помощью наложения, отображаемого на экране дисплея.
20. Система по п. 17, в которой виртуальный датчик включает в себя виртуальную камеру, и, причем данные виртуального датчика включают в себя, по меньшей мере, одно из изображения виртуальной камеры и изображения трассированного луча.
RU2016101616A 2015-01-21 2016-01-20 Вычислительное устройство, способ и вычислительная система RU2016101616A (ru)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201562106072P 2015-01-21 2015-01-21
US62/106,072 2015-01-21
US14/945,774 2015-11-19
US14/945,774 US20160210775A1 (en) 2015-01-21 2015-11-19 Virtual sensor testbed

Publications (1)

Publication Number Publication Date
RU2016101616A true RU2016101616A (ru) 2017-07-26

Family

ID=55534717

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2016101616A RU2016101616A (ru) 2015-01-21 2016-01-20 Вычислительное устройство, способ и вычислительная система

Country Status (6)

Country Link
US (1) US20160210775A1 (ru)
CN (1) CN105807630A (ru)
DE (1) DE102016100416A1 (ru)
GB (1) GB2536770A (ru)
MX (1) MX2016000874A (ru)
RU (1) RU2016101616A (ru)

Families Citing this family (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6897565B2 (ja) * 2015-10-09 2021-06-30 ソニーグループ株式会社 信号処理装置、信号処理方法及びコンピュータプログラム
US10229363B2 (en) * 2015-10-19 2019-03-12 Ford Global Technologies, Llc Probabilistic inference using weighted-integrals-and-sums-by-hashing for object tracking
US10096158B2 (en) * 2016-03-24 2018-10-09 Ford Global Technologies, Llc Method and system for virtual sensor data generation with depth ground truth annotation
US11210436B2 (en) * 2016-07-07 2021-12-28 Ford Global Technologies, Llc Virtual sensor-data-generation system and method supporting development of algorithms facilitating navigation of railway crossings in varying weather conditions
US10521677B2 (en) * 2016-07-14 2019-12-31 Ford Global Technologies, Llc Virtual sensor-data-generation system and method supporting development of vision-based rain-detection algorithms
CN106254461B (zh) * 2016-08-06 2019-04-05 中国科学院合肥物质科学研究院 一种智能车辆感知能力测试平台的数据同步方法
US10650621B1 (en) 2016-09-13 2020-05-12 Iocurrents, Inc. Interfacing with a vehicular controller area network
DE102016219031B4 (de) * 2016-09-30 2024-04-11 Ford Global Technologies, Llc Verfahren und Vorrichtung zum Testen eines Fahrerassistenzsystems
US10160448B2 (en) * 2016-11-08 2018-12-25 Ford Global Technologies, Llc Object tracking using sensor fusion within a probabilistic framework
US11010615B2 (en) * 2016-11-14 2021-05-18 Lyft, Inc. Rendering a situational-awareness view in an autonomous-vehicle environment
CN106503393A (zh) * 2016-11-15 2017-03-15 浙江大学 一种利用仿真生成样本实现无人车自主行进的方法
US20180189647A1 (en) * 2016-12-29 2018-07-05 Google, Inc. Machine-learned virtual sensor model for multiple sensors
US11157014B2 (en) 2016-12-29 2021-10-26 Tesla, Inc. Multi-channel sensor simulation for autonomous control systems
US10118628B2 (en) 2017-02-21 2018-11-06 Allstate Insurance Company Data processing system for guidance, control, and testing autonomous vehicle features and driver response
US10146225B2 (en) * 2017-03-02 2018-12-04 GM Global Technology Operations LLC Systems and methods for vehicle dimension prediction
US10678244B2 (en) 2017-03-23 2020-06-09 Tesla, Inc. Data synthesis for autonomous control systems
JP6913353B2 (ja) 2017-05-26 2021-08-04 株式会社データ変換研究所 移動体制御システム
CN107102566B (zh) * 2017-06-06 2019-10-01 上海航天控制技术研究所 一种组合导航***的仿真试验***
US10216191B1 (en) * 2017-06-13 2019-02-26 Wells Fargo Bank, N.A. Property hunting in an autonomous vehicle
DE102017213214A1 (de) 2017-08-01 2019-02-07 Ford Global Technologies, Llc Verfahren zum Modellieren eines Kraftfahrzeug-Sensors in einer virtuellen Testumgebung
US10558217B2 (en) 2017-08-28 2020-02-11 GM Global Technology Operations LLC Method and apparatus for monitoring of an autonomous vehicle
CN107807542A (zh) * 2017-11-16 2018-03-16 北京北汽德奔汽车技术中心有限公司 自动驾驶仿真***
US20190235521A1 (en) * 2018-02-01 2019-08-01 GM Global Technology Operations LLC System and method for end-to-end autonomous vehicle validation
US11954651B2 (en) * 2018-03-19 2024-04-09 Toyota Jidosha Kabushiki Kaisha Sensor-based digital twin system for vehicular analysis
DE112019001605T5 (de) * 2018-03-27 2020-12-17 Nvidia Corporation Trainieren, testen und verifizieren von autonomen maschinen unter verwendung simulierter umgebungen
DE102018208205A1 (de) 2018-05-24 2019-11-28 Ford Global Technologies, Llc Verfahren zum Kartographieren der Umgebung von Kraftfahrzeugen
US10817752B2 (en) 2018-05-31 2020-10-27 Toyota Research Institute, Inc. Virtually boosted training
CN109003335A (zh) * 2018-07-05 2018-12-14 上海思致汽车工程技术有限公司 一种基于vr技术的虚拟驾驶感知***及其场景生成方法
CN109188932A (zh) * 2018-08-22 2019-01-11 吉林大学 一种面向智能驾驶的多摄像头在环仿真测试方法及***
EP3618013A1 (en) * 2018-08-27 2020-03-04 Continental Automotive GmbH System for generating vehicle sensor data
US11508049B2 (en) * 2018-09-13 2022-11-22 Nvidia Corporation Deep neural network processing for sensor blindness detection in autonomous machine applications
CN113168176A (zh) * 2018-10-17 2021-07-23 柯尼亚塔有限公司 产生用于训练自动驾驶的实际模拟数据的***及方法
US11087049B2 (en) * 2018-11-27 2021-08-10 Hitachi, Ltd. Online self-driving car virtual test and development system
DK201970129A1 (en) * 2018-12-14 2020-07-09 Aptiv Tech Ltd Determination of an optimal spatiotemporal sensor configuration for navigation of a vehicle using simulation of virtual sensors
US11550623B2 (en) * 2018-12-28 2023-01-10 Beijing Voyager Technology Co., Ltd. Distributed system task management using a simulated clock
US11480964B2 (en) 2018-12-28 2022-10-25 Beijing Voyager Technology Co., Ltd. Distributed system execution using a serial timeline
US20190138848A1 (en) * 2018-12-29 2019-05-09 Intel Corporation Realistic sensor simulation and probabilistic measurement correction
US20200209874A1 (en) * 2018-12-31 2020-07-02 Chongqing Jinkang New Energy Vehicle, Ltd. Combined virtual and real environment for autonomous vehicle planning and control testing
CN113767389A (zh) * 2019-04-29 2021-12-07 辉达公司 从用于自主机器应用的经变换的真实世界传感器数据模拟逼真的测试数据
US11442449B2 (en) 2019-05-09 2022-09-13 ANI Technologies Private Limited Optimizing performance of autonomous vehicles
CN114072697B (zh) * 2019-07-09 2023-03-24 西门子工业软件公司 一种模拟连续波lidar传感器的方法
EP4085442A4 (en) 2019-12-30 2024-01-17 Waymo LLC IDENTIFYING PROXY CALIBRATION TARGETS FOR A VEHICLE FLEET
US11809790B2 (en) * 2020-09-22 2023-11-07 Beijing Voyager Technology Co., Ltd. Architecture for distributed system simulation timing alignment
CN112130472A (zh) * 2020-10-14 2020-12-25 广州小鹏自动驾驶科技有限公司 一种自动驾驶的仿真测试***和方法
US20220135030A1 (en) * 2020-10-29 2022-05-05 Magna Electronics Inc. Simulator for evaluating vehicular lane centering system
US11529973B1 (en) 2020-11-09 2022-12-20 Waymo Llc Software application for sensor analysis
WO2022186905A2 (en) * 2021-01-14 2022-09-09 Carnegie Mellon University System, method, and apparatus for sensor drift compensation
US11715257B2 (en) 2021-05-14 2023-08-01 Zoox, Inc. Simulation view generation based on simulated sensor operations
US11544896B2 (en) 2021-05-14 2023-01-03 Zoox, Inc. Spatial and temporal upsampling techniques for simulated sensor data
US11741661B2 (en) 2021-05-14 2023-08-29 Zoox, Inc. Sensor simulation with unified multi-sensor views

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101042802A (zh) * 2006-03-23 2007-09-26 安捷伦科技有限公司 交通信息传感器、交通信息检测方法和***
US8326469B2 (en) * 2006-07-14 2012-12-04 Irobot Corporation Autonomous behaviors for a remote vehicle
CN100589148C (zh) * 2007-07-06 2010-02-10 浙江大学 面向训练的汽车驾驶模拟机实现方法
US8126642B2 (en) * 2008-10-24 2012-02-28 Gray & Company, Inc. Control and systems for autonomously driven vehicles
CN101872559A (zh) * 2010-06-08 2010-10-27 广东工业大学 一种面向汽车驾驶模拟器的虚拟驾驶主动安全预警***及预警方法
US20120092492A1 (en) * 2010-10-19 2012-04-19 International Business Machines Corporation Monitoring traffic flow within a customer service area to improve customer experience
US8775064B2 (en) * 2011-05-10 2014-07-08 GM Global Technology Operations LLC Sensor alignment process and tools for active safety vehicle applications
US9135754B2 (en) * 2012-05-07 2015-09-15 Honda Motor Co., Ltd. Method to generate virtual display surfaces from video imagery of road based scenery
TW201415080A (zh) * 2012-08-07 2014-04-16 Hon Hai Prec Ind Co Ltd 監控系統及方法
KR101787996B1 (ko) * 2013-04-11 2017-10-19 주식회사 만도 차선 추정 장치 및 그 방법
US9761053B2 (en) * 2013-08-21 2017-09-12 Nantmobile, Llc Chroma key content management systems and methods
CN104050319B (zh) * 2014-06-13 2017-10-10 浙江大学 一种实时在线验证复杂交通控制算法的方法

Also Published As

Publication number Publication date
US20160210775A1 (en) 2016-07-21
CN105807630A (zh) 2016-07-27
GB2536770A (en) 2016-09-28
DE102016100416A1 (de) 2016-07-21
MX2016000874A (es) 2016-08-02
GB201601123D0 (en) 2016-03-09

Similar Documents

Publication Publication Date Title
RU2016101616A (ru) Вычислительное устройство, способ и вычислительная система
JP2018049591A5 (ja) 画像処理装置、画像処理方法及びプログラム
WO2016012865A3 (en) Wearable apparatus and methods for processing image data
RU2016101520A (ru) Вычислительное устройство, способ и вычислительная система
JP2016502216A5 (ru)
WO2017087653A3 (en) Generating simulated images from design information
WO2017204171A3 (en) Information processing apparatus, image generation method, control method, and program
JP2016530581A5 (ru)
JP2016502218A5 (ru)
WO2015051269A3 (en) Generating augmented reality content for unknown objects
JP2017531865A5 (ru)
JP2015506516A5 (ru)
BR112018008099A2 (pt) método de controle de exibição e dispositivo de controle de exibição
RU2011141838A (ru) Устройство обработки информации, способ обработки информации и программа
JP2016512363A5 (ru)
JP2014199584A5 (ru)
RU2015107561A (ru) Способ обнаружения положения и местонахождения посредством виртуальных опорных изображений
JP2013105285A5 (ru)
JP2016514865A5 (ru)
JPWO2018051459A1 (ja) 物体検出装置および物体検出方法
WO2015157344A3 (en) Systems and methods for large scale crowdsourcing of map data location, cleanup, and correction
JP2016518647A5 (ru)
JP2009116856A5 (ru)
ES2552881A1 (es) Dispositivo portable y método de control mediante gestos
JP2019510991A5 (ru)

Legal Events

Date Code Title Description
FA93 Acknowledgement of application withdrawn (no request for examination)

Effective date: 20190121