RU2527132C1 - Способ коррекции дрейфа микромеханического гироскопа, используемого в системе дополненной реальности на движущемся объекте - Google Patents
Способ коррекции дрейфа микромеханического гироскопа, используемого в системе дополненной реальности на движущемся объекте Download PDFInfo
- Publication number
- RU2527132C1 RU2527132C1 RU2013110482/28A RU2013110482A RU2527132C1 RU 2527132 C1 RU2527132 C1 RU 2527132C1 RU 2013110482/28 A RU2013110482/28 A RU 2013110482/28A RU 2013110482 A RU2013110482 A RU 2013110482A RU 2527132 C1 RU2527132 C1 RU 2527132C1
- Authority
- RU
- Russia
- Prior art keywords
- augmented reality
- head
- drift
- user
- angular coordinates
- Prior art date
Links
Landscapes
- Navigation (AREA)
Abstract
Способ коррекции дрейфа микромеханического гироскопа, используемого в системе дополненной реальности на движущемся объекте. Изобретение относится к области навигационного приборостроения. Для повышении эффективности пространственной ориентации операторов, управляющих подвижными объектами (автомобилями, водными и воздушными судами) могут применяться системы дополненной реальности в виде наголовных модулей, включающие, в том числе, автономные подсистемы ориентации, обеспечивающие определение трех угловых координат положения линии наблюдения в пространстве. Недостатком подсистем ориентации, выполненных на микромеханических элементах (гироскопах, акселерометрах, магнитометрах) является значительный дрейф данных, особенно по углу рыскания, достигающий нескольких сотен градусов в час. Технический результат предлагаемого изобретения состоит в повышение точности пространственной ориентации посредством микромеханических гироскопов за счет коррекции их дрейфа с помощью данных спутниковой навигационной системы и оптического распознавания маркеров дополненной реальности. Технический результат достигается тем, что по данным бортового приемника спутниковой навигационной системы с помощью метода регрессионного анализа строится трехмерный вектор движения объекта и, при обнаружении участка прямолинейного движения, производится коррекция показаний гироскопа по углам рыскания и тангажа путем приведения их к угловым координатам текущего вектора движения. Для учета положения головы оператора относительно движущегося объекта применяется оптическое распознавание графических маркеров (четких изображений различных геометрических фигур), неподвижно размещенных на объекте в поле зрения видеокамеры, также входящей в наголовный модуль системы дополненной реальности. 1 ил.
Description
Изобретение относится к области навигационного приборостроения для подвижных объектов различного назначения.
Уровень техники.
Существуют способы повышения эффективности пространственной ориентации операторов, управляющих движением подвижных объектов (автомобилей, водных и воздушных судов) с помощью систем дополненной реальности, состоящих из наголовного модуля, включающего прозрачные стереоочки или шлем дополненной реальности с прозрачными микродисплеями, систему позиционирования, обеспечивающую определение трех линейных координат положения точки наблюдения и трех угловых координат положения линии наблюдения в пространстве, и компьютера, в реальном времени генерирующего и передающего на микродисплеи видеоизображение виртуальных объектов, обозначающих траекторию движения и другую информацию по навигации и управлению. Примеры таких систем - шлем для пилотов истребителей-бомбардировщиков F-35 (http://www.vsi-hmcs.com/index.php/f-35-hmds); шлем Ebit Systems Targo Racer, используемый пилотами авиашоу Rocket Racing League (http://www.membrana.ru/articles/technic/2010/04/27/130400.html).
Для аналогичных целей могут применяться выпускаемые промышленностью очки дополненной реальности STAR 1200XL компании Vuzix, снабженные встроенной видеокамерой и датчиком ориентации, позволяющим определять три угловых координаты положения линии наблюдения в пространстве (reality/products star 1200xl.html), при этом данные о пространственном положении можно получать от спутниковой навигационной системы.
Используемые в подобных устройствах интегрированные микромеханические инерциальные датчики, включающие гироскопы, акселерометры и магнитометры, характеризуются значительным дрейфом данных гироскопов, достигающим значений до сотен градусов в час. Известны способы коррекции дрейфа гироскопов по углам крена и тангажа с помощью данных акселерометров, а по углу рыскания с помощью данных магнитометров посредством программно реализованного математического фильтра Калмана, как это делается, например, в выпускаемом промышленностью микромеханическом инерциальном датчике InertiaCube4 компании InterSense.
Недостатком способа коррекции дрейфа гироскопа по данным акселерометров и магнитометров является погрешность акселерометров и магнитометров, которая особенно для магнитометров может принимать большие и случайно изменяющиеся во времени значения из-за внешних магнитных влияний.
Известны способы коррекции дрейфа и калибровки гироскопов на движущихся объектах по данным спутниковых навигационных систем (RU 2462690, EP 1475609, EP 0934506), которые подразумевают неизменность ориентации инерциальных датчиков относительно движущегося объекта, на котором размещена приемная антенна спутниковой навигационной системы.
Недостатками известных способов коррекции дрейфа гироскопов на движущихся объектах по данным спутниковых навигационных систем в случае использования в составе систем дополненной реальности является неприменимость вследствие подвижности головы пользователя системы дополненной реальности относительно движущегося объекта, на котором находится пользователь, и координаты которого определяются спутниковой навигационной системой. В системах дополненной реальности критически важным является определение ориентации головы пользователя, поскольку эта информация используется для позиционирования изображений виртуальных объектов, выводимых на очки дополненной реальности.
В технологии дополненной реальности также известен способ позиционирования виртуальных объектов в реальной среде с помощью специальных надежно распознаваемых графических маркеров дополненной реальности - например, с помощью программной библиотеки ARToolKit (.Washington.edu/artoolkit/). Данная библиотека позволяет, в частности, определить положение камеры относительно графического маркера, представляющего собой четкое черно-белое изображение простых геометрических фигур.
Технической задачей создания предлагаемого изобретения является разработка способа коррекции дрейфа микромеханического гироскопа, используемого в системе дополненной реальности на движущемся объекте, по данным спутниковой навигационной системы и результатам распознавания образов графических маркеров дополненной реальности.
Наиболее близким к предлагаемому изобретению является интегрированная инерциально-спутниковая система ориентации и навигации, предложенная в заявке RU 2462690, которая подразумевает размещение на движущемся объекте двух разнесенных на расстояние нескольких метров антенн спутниковой навигационной системы. В случае использования в составе системы дополненной реальности данная система неприменима из-за невозможности размещения на голове пользователя системы дополненной реальности громоздких устройств, обеспечивающих разнесение антенн спутниковой навигационной системы, а также вследствие подвижности головы пользователя относительно движущегося объекта.
Раскрытие изобретения
Технический результат предлагаемого изобретения состоит в повышение точности пространственной ориентации посредством микромеханических гироскопов за счет коррекции их дрейфа с помощью данных спутниковой навигационной системы и оптического распознавания маркеров дополненной реальности.
Указанный технический результат достигается тем, что способ коррекции дрейфа микромеханического гироскопа, используемого в системе дополненной реальности на движущемся объекте, состоит в том, что при движении объекта (например, воздушного или морского судна, автомобиля), на котором находится пользователь системы дополненной реальности, включающей очки дополненной реальности со встроенными микромеханическим гироскопом и видеокамерой, посредством математического аппарата линейного регрессионного анализа (Львовский Е.Н. Статистические методы построения эмпирических формул. Учебник для вузов. -М.: Высшая школа, 1988) по данным бортового приемника спутниковой навигационной системы строится трехмерный вектор направления движения объекта. Объем обрабатываемых при регрессионном анализе данных о линейных координатах варьируется и зависит от скорости движущегося объекта. При обнаружении участка прямолинейного движения по признаку неизменности параметров линейной регрессии производится коррекция угловых координат головы пользователя очков дополненной реальности, вырабатываемых по данным микромеханического гироскопа, приводящая угловые координаты головы пользователя по углам рыскания и тангажа к угловым координатам текущего вектора движения объекта с учетом смещения ориентации головы пользователя относительно движущегося объекта, определяемого с помощью оптического распознавания маркеров дополненной реальности (см. фиг.1), неподвижно размещаемых на движущемся объекте, например в пилотской кабине воздушного судна. Маркеры располагаются таким образом, чтобы хотя бы один из них обязательно попадал в поле зрения видеокамеры, встроенной в очки дополненной реальности. Обеспечивается подсветка маркеров, делающая их видимыми для видеокамеры в любое время суток. Выработка параметров ориентации головы пользователя по данным оптического распознавания графических маркеров дополненной реальности осуществляется с помощью свободно доступных на рынке программных пакетов дополненной реальности, например пакета ARToolKit компании ARToolworks Inc.
Фиг.1 - техническая реализация способа коррекции дрейфа микромеханического гироскопа, используемого в системе дополненной реальности на движущемся объекте.
Осуществление изобретения.
Осуществление предлагаемого способа коррекции дрейфа микромеханического гироскопа, используемого в системе дополненной реальности на движущемся объекте, заключается в следующем.
Система, осуществляющая предлагаемый способ (см. фиг.1), включает размещенные на борту движущегося объекта компьютер, приемник спутниковой системы навигации, очки дополненной реальности, имеющие встроенный микромеханический гироскоп и миниатюрную видеокамеру, три маркера дополненной реальности, представляющие собой четкие изображения трех различных геометрических фигур. Средние размеры маркеров 7×7 см, размеры графических маркеров могут варьироваться в зависимости от типа используемой видеокамеры и их удаления от пользователя. Маркеры могут быть нанесены либо непосредственно на плоские поверхности кабины движущегося объекта, либо на промежуточный носитель (бумага, липкая пленка, пластина из тонкого пластика) с последующим размещением в кабине движущегося объекта. Маркеры размещаются таким образом, чтобы при любом положении головы пользователя хотя бы один маркер попадал в поле зрения видеокамеры, встроенной в очки дополненной реальности, это условие определяет необходимость использования трех маркеров. Обеспечивается подсветка маркеров, делающих их видимыми для видеокамеры в любое время суток. Информация о точках размещения маркеров на движущемся объекте вводится в бортовой компьютер.
В бортовой компьютер поступают данные об изменяющихся линейных координатах движущегося объекта от приемника спутниковой системы навигации, данные гироскопа и видеокартинка от видеокамеры, встроенной в очки дополненной реальности. Компьютер посредством линейного регрессионного анализа постоянно вычисляет угловые координаты вектора направления движения объекта по линейным координатам от приемника системы спутниковой навигации. Также компьютер постоянно вычисляет угловые координаты головы пользователя относительно маркеров дополненной реальности по видеокартинке от видеокамеры и угловые координаты головы пользователя по данным от микромеханического гироскопа. При обнаружении прямолинейного участка движения объекта по признаку неизменности угловых координат вектора движущегося объекта производится коррекция угловых координат (углы рыскания и тангажа) по данным гироскопа путем приведения их к угловым координатам вектора движения объекта с учетом углового смещения головы пользователя относительно движущегося объекта.
Для осуществления изобретения может быть использован автономный мобильный компьютер, имеющий карманные размеры. Очки смешанной реальности представляют собой прозрачные стекла, либо проекторы изображения на сетчатку глаза, которые выводят стереопару трехмерных объемных изображений виртуальных объектов, сформированных компьютером. В качестве прозрачных очков смешанной реальности могут быть использованы соответствующие очки, выпускаемые промышленностью, например, STAR 1200XL компании Vuzix, снабженные микромеханическим инерциальным датчиком и миниатюрной видеокамерой. Линейные координаты точки наблюдения можно получать, используя компактный приемник глобальных навигационных систем повышенной точности GLONASS/GPS/SBAS (например, Garmin GTN 625).
Claims (1)
- Способ коррекции дрейфа микромеханического гироскопа состоит в том, что при движении объекта, на котором находится пользователь системы дополненной реальности, включающей очки дополненной реальности со встроенными видеокамерой и микромеханическим гироскопом, по данным которого вырабатываются угловые координаты головы пользователя, и бортовой приемник спутниковой навигационной системы, отличающийся тем, что по данным спутниковой навигационной системы строится трехмерный вектор направления движения объекта, последовательные значения которого анализируются бортовым вычислителем с помощью математического метода регрессионного анализа и при выявлении участка прямолинейного движения по признаку неизменности параметров линейной регрессии производится коррекция угловых координат головы пользователя по углам рыскания и тангажа, приводящая их к угловым координатам текущего вектора движения объекта с учетом смещения ориентации головы пользователя относительно движущегося объекта, определяемого с помощью оптического распознавания маркеров дополненной реальности, неподвижно размещенных на движущемся объекте в поле зрения видеокамеры.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
RU2013110482/28A RU2527132C1 (ru) | 2013-03-11 | 2013-03-11 | Способ коррекции дрейфа микромеханического гироскопа, используемого в системе дополненной реальности на движущемся объекте |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
RU2013110482/28A RU2527132C1 (ru) | 2013-03-11 | 2013-03-11 | Способ коррекции дрейфа микромеханического гироскопа, используемого в системе дополненной реальности на движущемся объекте |
Publications (1)
Publication Number | Publication Date |
---|---|
RU2527132C1 true RU2527132C1 (ru) | 2014-08-27 |
Family
ID=51456371
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
RU2013110482/28A RU2527132C1 (ru) | 2013-03-11 | 2013-03-11 | Способ коррекции дрейфа микромеханического гироскопа, используемого в системе дополненной реальности на движущемся объекте |
Country Status (1)
Country | Link |
---|---|
RU (1) | RU2527132C1 (ru) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017031273A1 (en) * | 2015-08-18 | 2017-02-23 | Nextvr Inc. | Methods and apparatus for compensating for vehicular motion |
RU2654964C1 (ru) * | 2017-06-27 | 2018-05-23 | Публичное акционерное общество "Московский институт электромеханики и автоматики" (ПАО "МИЭА") | Способ определения корректирующих поправок в бесплатформенной инерциальной навигационной системе |
DE102016224122A1 (de) * | 2016-12-05 | 2018-06-07 | Audi Ag | Verfahren zum Betreiben einer VR-Brille in einem Innenraum eines Kraftfahrzeugs sowie Steuervorrichtung und Kraftfahrzeug |
RU2698547C1 (ru) * | 2018-03-28 | 2019-08-28 | Акционерное общество "Опытно-конструкторское бюро "Электроавтоматика" имени П.А. Ефимова" | Способ автономного повышения точности применения микромеханической элементной базы |
CN111024073A (zh) * | 2019-12-30 | 2020-04-17 | 北京航空航天大学 | 一种基于夜间环境的组合导航*** |
CN112762955A (zh) * | 2020-12-25 | 2021-05-07 | 灵鹿科技(嘉兴)股份有限公司 | 一种导航***定位纠偏方法 |
WO2022188975A1 (en) | 2021-03-11 | 2022-09-15 | Audi Ag | Method and a processing unit for determining calibration parameters for a calibration function of a head-mounted device (hmd) for use in a vehicle and hmd comprising such a calibration function |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
RU2410658C1 (ru) * | 2009-07-06 | 2011-01-27 | Открытое акционерное общество Арзамасское научно-производственное предприятие "ТЕМП-АВИА" (ОАО АНПП "ТЕМП-АВИА") | Способ коррекции дрейфа гироскопа и устройство для его осуществления |
RU2427800C1 (ru) * | 2010-05-06 | 2011-08-27 | Российская Федерация, от имени которой выступает государственный заказчик - Министерство промышленности и торговли Российской Федерации | Способ формирования навигационных данных объекта |
RU119454U1 (ru) * | 2012-03-28 | 2012-08-20 | Виктор Акиндинович Солдатенков | Устройство нашлемной системы целеуказания и индикации |
RU2462690C1 (ru) * | 2011-05-13 | 2012-09-27 | Открытое акционерное общество "Концерн "Центральный научно-исследовательский институт "Электроприбор" | Интегрированная инерциально-спутниковая система ориентации и навигации |
-
2013
- 2013-03-11 RU RU2013110482/28A patent/RU2527132C1/ru active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
RU2410658C1 (ru) * | 2009-07-06 | 2011-01-27 | Открытое акционерное общество Арзамасское научно-производственное предприятие "ТЕМП-АВИА" (ОАО АНПП "ТЕМП-АВИА") | Способ коррекции дрейфа гироскопа и устройство для его осуществления |
RU2427800C1 (ru) * | 2010-05-06 | 2011-08-27 | Российская Федерация, от имени которой выступает государственный заказчик - Министерство промышленности и торговли Российской Федерации | Способ формирования навигационных данных объекта |
RU2462690C1 (ru) * | 2011-05-13 | 2012-09-27 | Открытое акционерное общество "Концерн "Центральный научно-исследовательский институт "Электроприбор" | Интегрированная инерциально-спутниковая система ориентации и навигации |
RU119454U1 (ru) * | 2012-03-28 | 2012-08-20 | Виктор Акиндинович Солдатенков | Устройство нашлемной системы целеуказания и индикации |
Non-Patent Citations (1)
Title |
---|
СТЕПАНОВ О.А., КОШАЕВ Д.А. Исследование методов решения задачи ориентации с использованием спутниковых систем // Гироскопия и навигация. 1999. N2 (25). С.30-55 * |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017031273A1 (en) * | 2015-08-18 | 2017-02-23 | Nextvr Inc. | Methods and apparatus for compensating for vehicular motion |
US9821920B2 (en) | 2015-08-18 | 2017-11-21 | Nextvr Inc. | Methods and apparatus for compensating for vehicular motion |
DE102016224122A1 (de) * | 2016-12-05 | 2018-06-07 | Audi Ag | Verfahren zum Betreiben einer VR-Brille in einem Innenraum eines Kraftfahrzeugs sowie Steuervorrichtung und Kraftfahrzeug |
RU2654964C1 (ru) * | 2017-06-27 | 2018-05-23 | Публичное акционерное общество "Московский институт электромеханики и автоматики" (ПАО "МИЭА") | Способ определения корректирующих поправок в бесплатформенной инерциальной навигационной системе |
RU2698547C1 (ru) * | 2018-03-28 | 2019-08-28 | Акционерное общество "Опытно-конструкторское бюро "Электроавтоматика" имени П.А. Ефимова" | Способ автономного повышения точности применения микромеханической элементной базы |
CN111024073A (zh) * | 2019-12-30 | 2020-04-17 | 北京航空航天大学 | 一种基于夜间环境的组合导航*** |
CN112762955A (zh) * | 2020-12-25 | 2021-05-07 | 灵鹿科技(嘉兴)股份有限公司 | 一种导航***定位纠偏方法 |
CN112762955B (zh) * | 2020-12-25 | 2022-07-19 | 灵鹿科技(嘉兴)股份有限公司 | 一种导航***定位纠偏方法 |
WO2022188975A1 (en) | 2021-03-11 | 2022-09-15 | Audi Ag | Method and a processing unit for determining calibration parameters for a calibration function of a head-mounted device (hmd) for use in a vehicle and hmd comprising such a calibration function |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
RU2527132C1 (ru) | Способ коррекции дрейфа микромеханического гироскопа, используемого в системе дополненной реальности на движущемся объекте | |
EP3441720B1 (en) | System and method for hybrid optical/inertial headtracking via numerically stable kalman filter | |
EP3338136B1 (en) | Augmented reality in vehicle platforms | |
CN110869700B (zh) | 用于确定车辆位置的***和方法 | |
ES2880229T3 (es) | Registro mejorado para realidad aumentada vehicular que usa autoarmonización | |
Tournier et al. | Estimation and control of a quadrotor vehicle using monocular vision and moire patterns | |
CN111024099B (zh) | 用于导航的移动装置、非暂时性机器可读介质和设备 | |
JP7488925B2 (ja) | 映像生成装置、および、映像生成方法 | |
US9618344B2 (en) | Digital map tracking apparatus and methods | |
WO2017172193A8 (en) | Head-mounted display tracking | |
US20170053453A1 (en) | Avionic system comprising means for designating and marking land | |
KR100964951B1 (ko) | 모의 훈련을 위한 증강 현실 장치 및 가상 이미지 합성 방법 | |
CN108364304A (zh) | 一种用于单目机载目标检测的***和方法 | |
EP3642694B1 (en) | Augmented reality system and method of displaying an augmented reality image | |
US10593303B2 (en) | Method and system for readjusting, via an SVS synthetic vision system, on a worn head-up display, a symbology which pertains to the piloting of an aircraft and which is conformal to the real outside world | |
CN109716256A (zh) | 用于跟踪目标的***和方法 | |
CN109341686A (zh) | 一种基于视觉-惯性紧耦合的飞行器着陆位姿估计方法 | |
CN113390408A (zh) | 一种机器人定位方法、装置、机器人及存储介质 | |
CN109990797A (zh) | 一种用于hud的增强现实导航显示的控制方法 | |
CN110044361A (zh) | 基于目标投影位置的光学载荷星上自主调度方法 | |
US9751607B1 (en) | Method and system for controlling rotatable device on marine vessel | |
RU131151U1 (ru) | Система коррекции дрейфа микромеханического гироскопа, используемого в системе дополненной реальности на движущемся объекте | |
US20140097291A1 (en) | Hover hold aid system for a helicopter | |
JP4924342B2 (ja) | モーショントラッカ装置 | |
CN108227749A (zh) | 无人机及其追踪*** |