CN110148222A - 一种基于ar技术的看车方法及*** - Google Patents
一种基于ar技术的看车方法及*** Download PDFInfo
- Publication number
- CN110148222A CN110148222A CN201910445658.6A CN201910445658A CN110148222A CN 110148222 A CN110148222 A CN 110148222A CN 201910445658 A CN201910445658 A CN 201910445658A CN 110148222 A CN110148222 A CN 110148222A
- Authority
- CN
- China
- Prior art keywords
- vehicle
- technology
- module
- scene
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computer Graphics (AREA)
- Software Systems (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Geometry (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明公开了一种基于AR技术的看车方法及***，包括以下步骤：S1：收集车辆数据，根据数据对车辆进行3D建模和渲染，并导入看车软件；S2：将虚拟现实开发工具包集成到所述看车软件；S3：建立软件的人机互动操作***；S4：操作人使用步骤S1、S2和S3中集成的软件，打开摄像头，对准任一场景，将选择的车辆放入所选场景；S5：移动摄像头位置，全方位观测车辆外观以及车辆在所选场景下的状态；S6：通过所述人机互动操作***完成车辆缩放、旋转以及外观切换观察操作。本发明具有场景自选、自适应场景变化、人机互动强、看车体验感好的优点。
Description
技术领域
本发明涉及虚拟现实领域，具体涉及一种基于AR技术的看车方法及***。
背景技术
汽车交易行业是现阶段交易量比较大的行业，在进行汽车销售的环节中，买方需要对汽车进行实际观测，但是由于2D图片无法反应真实情况，现场看车会受到时间、距离等人为因素的阻挠，降低了选车的效率，因此模拟现实的3D看车方式越来越流行。
现有的3D看车技术中将汽车的数据建立模型，人们在软件上通过旋转车辆模型，可以直观的了解车辆状况，但是，经常会出现与实际状态不符的情况，这是因为汽车模型在进行数据采集的时候是单一不变的，所有用户看到的是同样的车况，但是在实际使用中，随着环境、光照、背景等因素的衬托，会与3D建模的车辆存在差距，即使有场景切换，也是预先设计的固定环境数据，用户的在线体验被局限在了设置好的场景中，体验性较差。
发明内容
针对上述现有技术的不足，本发明所要解决的技术问题是：如何提供一种场景自选、自适应场景变化、人机互动强、看车体验感好的基于AR技术的看车方法。
为了解决上述技术问题，本发明采用了如下的技术方案：
一种基于AR技术的看车方法，包括以下步骤：
S1：收集车辆数据，根据数据对车辆进行3D建模和渲染，并导入看车软件，；
S2：将虚拟现实开发工具包集成到所述看车软件；
S3：建立软件的人机互动操作***；
S4：操作人使用步骤S1、S2和S3中集成的软件，打开摄像头，对准任一场景，将选择的车辆放入所选场景；
S5：移动摄像头位置，全方位观测车辆外观以及车辆在所选场景下的状态；
S6：通过所述人机互动操作***完成车辆缩放、旋转以及外观切换观察操作。
进一步的，步骤S1中，所述车辆数据包括车辆的建模尺寸数据、外观和内饰信息和美术素材，其中建模尺寸数据是根据车型的实际尺寸及比例的还原，所述外观和内饰信息为车辆的实际外部颜色、形状以及内饰的实际样式，所述美术素材为实际车辆可替换的信息。
进一步的，步骤S1中对车辆进行建模的软件为Max3D、Maya、C4D、ZBrush建模软件。
进一步的，步骤S2中车辆的渲染包括对建模车辆的材质、烘焙渲染以及环境光照和车辆反射强度参数的设置，所述渲染通过Unity3D开发技术进行。
进一步的，步骤S3中人机互动操作***用于操作者模拟车辆在不同情境下的性能切换，通过控制UI，实现车辆颜色更换，调整车辆位置、大小及角度、调整车身亮度，车门开关人机互动操作。
进一步的，步骤S4中，将车辆放置在摄像头采集的场景中，利用卡尔曼滤波器识别视觉惯性测距技术和综合惯性导航技术输出的结果，选择更贴近真实场景的一项，实现车辆姿态的调整。
一种基于AR技术的看车***，其特征在于，包括信息采集***、模拟现实***和人机互动***；
所述信息采集***用于采集现实场景、光照环境信息；
所述模拟现实***用于在现实环境中载入车辆模型信息，随着环境信息的变化实现自适应的车辆状态调整；
所述人机互动***用于实现操作者与环境信息中的车辆模型进行主动的状态调整，灵活的查看车辆信息。
进一步的，所述信息采集***包括：图像采集模块、视频采集模块、光照信息采集模块以及音频采集模块。
进一步的，所述模拟现实***包括视觉距离测距模块、综合惯性导航模块、位置追踪模块和光学信息处理模块。
进一步的，所述人机互动***包括图像呈现模块、手势追踪模块、触摸感应模块、和信息切换模块。
本发明的有益效果为：本发明针对现有看车***无法满足真实场景体验的缺陷做了改进，用户在使用时，可以将想看的车辆放置在自有摄像头采集的场景中，例如自家庭院、马路或城市中，根据自有摄像头采集的环境信息查看车辆的性能表现，通过移动摄像头，查看不同位置的车辆状态，对比自己的心理预期，及能够满足看车的需要，又节约了时间，提高了选车效率。
附图说明
图1为本发明一种基于AR技术的看车方法一实施方式的流程图。
图2为本发明一种基于AR技术的看车***一实施方式的框架图。
具体实施方式
下面结合附图对本发明作进一步的详细说明。
如图1-2所示，一种基于AR技术的看车方法，包括以下步骤：
S1：收集车辆数据，根据数据对车辆进行3D建模和渲染，并导入看车软件，；
S2：将虚拟现实开发工具包集成到所述看车软件；
S3：建立软件的人机互动操作***；
S4：操作人使用步骤S1、S2和S3中集成的软件，打开摄像头，对准任一场景，将选择的车辆放入所选场景；
S5：移动摄像头位置，全方位观测车辆外观以及车辆在所选场景下的状态；
S6：通过所述人机互动操作***完成车辆缩放、旋转以及外观切换观察操作。
进一步的，步骤S1中，所述车辆数据包括车辆的建模尺寸数据、外观和内饰信息和美术素材，其中建模尺寸数据是根据车型的实际尺寸及比例的还原，所述外观和内饰信息为车辆的实际外部颜色、形状以及内饰的实际样式，所述美术素材为实际车辆可替换的信息。
进一步的，步骤S1中对车辆进行建模的软件为Max3D、Maya、C4D、ZBrush建模软件。
进一步的，步骤S2中车辆的渲染包括对建模车辆的材质、烘焙渲染以及环境光照和车辆反射强度参数的设置，所述渲染通过Unity3D开发技术进行。
具体的，这样可以一次开发便能导出AndroidStudio和Xcode工程，分别实现Android和ios平台的app集成，提高了集成的效率。
进一步的，步骤S3中人机互动操作***用于操作者模拟车辆在不同情境下的性能切换，通过控制UI，实现车辆颜色更换，调整车辆位置、大小及角度、调整车身亮度，车门开关人机互动操作。
进一步的，步骤S4中，将车辆放置在摄像头采集的场景中，利用卡尔曼滤波器识别视觉惯性测距技术和综合惯性导航技术输出的结果，选择更贴近真实场景的一项，实现车辆姿态的调整。
具体的，打开摄像头，面向可摆放车辆的任何平面，虚拟现实可以利用视觉惯性测距技术识别摄像头采集视觉信息中的视觉差异特征(成簇特征点)，结合惯性导航技术获取的设备在物理空间上的位置变化，利用卡尔曼滤波器(Kalman Filter)结合两个技术的输出结果，决定哪一个技术提供的估测更接近用户的“真实”位置(地面实况)并更新设备的当前姿态。
一种基于AR技术的看车***，其特征在于，包括信息采集***、模拟现实***和人机互动***；
所述信息采集***用于采集现实场景、光照环境信息；
所述模拟现实***用于在现实环境中载入车辆模型信息，随着环境信息的变化实现自适应的车辆状态调整；
所述人机互动***用于实现操作者与环境信息中的车辆模型进行主动的状态调整，灵活的查看车辆信息。
具体的，通过采集常见物体的数据，标注形成基础标注数据集，并在虚拟场景中进行模拟，将真实数据与模拟数据合并，形成专用标注数据集，将专用标注数据集输入前端设备，通过不断的模型训练和物体检测训练，进行自主学习，强化识别准确度，当用户输入现场场景时，专用标注数据集与现场场景形成专用模型，输出结果供用户查看。
进一步的，所述信息采集***包括：图像采集模块、视频采集模块、光照信息采集模块以及音频采集模块。
进一步的，所述模拟现实***包括视觉距离测距模块、综合惯性导航模块、位置追踪模块和光学信息处理模块。
具体的，追踪模块实时追踪用户的空间位置，即xyz方向上的三维运动(移动)与俯仰/偏转/滚动(旋转)，并在每帧刷新之前重新计算设备的位置，通过视觉(摄像)***将现实世界中的一个点与摄像机传感器上的一帧像素相匹配，从而追踪设备的姿势。最后，软件通过采集设备摄像头与设备光学信息处理模块实现视觉校准，通过低通滤波器过滤掉IMU***中的噪声实现惯性校准，使追踪结果更加精确。
进一步的，所述人机互动***包括图像呈现模块、手势追踪模块、触摸感应模块、和信息切换模块。
具体的，用户可以通过触摸图像，改变车身的姿态以及外观颜色。
本发明的有益效果为：本发明针对现有看车***无法满足真实场景体验的缺陷做了改进，用户在使用时，可以将想看的车辆放置在自有摄像头采集的场景中，例如自家庭院、马路或城市中，根据自有摄像头采集的环境信息查看车辆的性能表现，通过移动摄像头，查看不同位置的车辆状态，对比自己的心理预期，及能够满足看车的需要，又节约了时间，提高了选车效率。
最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解；其依然可以对前述实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明实施例技术方案的范围，其均应涵盖在本发明的权利要求和说明书的范围当中。
Claims (10)
1.一种基于AR技术的看车方法，其特征在于，包括以下步骤：
S1：收集车辆数据，根据数据对车辆进行3D建模和渲染，并导入看车软件；
S2：将虚拟现实开发工具包集成到所述看车软件；
S3：建立软件的人机互动操作***；
S4：操作人使用步骤S1、S2和S3中集成的软件，打开摄像头，对准任一场景，将选择的车辆放入所选场景；
S5：移动摄像头位置，全方位观测车辆外观以及车辆在所选场景下的状态；
S6：通过所述人机互动操作***完成车辆缩放、旋转以及外观切换观察操作。
2.根据权利要求1所述的一种基于AR技术的看车方法，其特征在于，步骤S1中，所述车辆数据包括车辆的建模尺寸数据、外观和内饰信息和美术素材，其中建模尺寸数据是根据车型的实际尺寸及比例的还原，所述外观和内饰信息为车辆的实际外部颜色、形状以及内饰的实际样式，所述美术素材为实际车辆可替换的信息。
3.根据权利要求2所述的一种基于AR技术的看车方法，其特征在于，步骤S1中对车辆进行建模的软件为Max3D、Maya、C4D、ZBrush建模软件。
4.根据权利要求3所述的一种基于AR技术的看车方法，其特征在于，步骤S2中车辆的渲染包括对建模车辆的材质、烘焙渲染以及环境光照和车辆反射强度参数的设置，所述渲染通过Unity3D开发技术进行。
5.根据权利要求4所述的一种基于AR技术的看车方法，其特征在于，步骤S3中人机互动操作***用于操作者模拟车辆在不同情境下的性能切换，通过控制UI，实现车辆颜色更换，调整车辆位置、大小及角度、调整车身亮度，车门开关人机互动操作。
6.根据权利要求5所述的一种基于AR技术的看车方法，其特征在于，步骤S4中，将车辆放置在摄像头采集的场景中，利用卡尔曼滤波器识别视觉惯性测距技术和综合惯性导航技术输出的结果，选择更贴近真实场景的一项，实现车辆姿态的调整。
7.一种基于AR技术的看车***，其特征在于，包括信息采集***、模拟现实***和人机互动***；
所述信息采集***用于采集现实场景、光照环境信息；
所述模拟现实***用于在现实环境中载入车辆模型信息，随着环境信息的变化实现自适应的车辆状态调整；
所述人机互动***用于实现操作者与环境信息中的车辆模型进行主动的状态调整，灵活的查看车辆信息。
8.根据权利要求7所述的一种基于AR技术的看车***，其特征在于，所述信息采集***包括：图像采集模块、视频采集模块、光照信息采集模块以及音频采集模块。
9.根据权利要求8所述的一种基于AR技术的看车***，其特征在于，所述模拟现实***包括视觉距离测距模块、综合惯性导航模块、位置追踪模块和光学信息处理模块。
10.根据权利要求9所述的一种基于AR技术的看车***，其特征在于，所述人机互动***包括图像呈现模块、手势追踪模块、触摸感应模块、和信息切换模块。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910445658.6A CN110148222A (zh) | 2019-05-27 | 2019-05-27 | 一种基于ar技术的看车方法及*** |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910445658.6A CN110148222A (zh) | 2019-05-27 | 2019-05-27 | 一种基于ar技术的看车方法及*** |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN110148222A true CN110148222A (zh) | 2019-08-20 |
Family
ID=67591972
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910445658.6A Pending CN110148222A (zh) | 2019-05-27 | 2019-05-27 | 一种基于ar技术的看车方法及*** |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110148222A (zh) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110488979A (zh) * | 2019-08-23 | 2019-11-22 | 北京枭龙科技有限公司 | 一种基于增强现实的汽车展示*** |
| CN111414225A (zh) * | 2020-04-10 | 2020-07-14 | 北京城市网邻信息技术有限公司 | 三维模型远程展示方法、第一终端、电子设备及存储介质 |
| CN112509152A (zh) * | 2020-12-17 | 2021-03-16 | 重庆实唯信息技术有限公司 | 一种基于ar技术的看车方法、***、设备及可读介质 |
| CN113034697A (zh) * | 2019-12-24 | 2021-06-25 | 北京车和家信息技术有限公司 | 对目标设备进行增强现实展示的方法、装置及*** |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20170004651A1 (en) * | 2014-07-24 | 2017-01-05 | Youngzone Culture (Shanghai) Co., Ltd. | Augmented reality technology-based handheld viewing device and method thereof |
| CN107564108A (zh) * | 2017-07-27 | 2018-01-09 | 湖北历拓网络科技有限公司 | 一种虚拟现实的车辆交易方法和装置 |
| CN108427499A (zh) * | 2018-02-13 | 2018-08-21 | 视辰信息科技(上海)有限公司 | 一种ar***及ar设备 |
| CN108536734A (zh) * | 2018-03-02 | 2018-09-14 | 北京邮电大学 | 一种web ar活动的发布方法 |
| CN109427096A (zh) * | 2017-08-29 | 2019-03-05 | 深圳市掌网科技股份有限公司 | 一种基于增强现实的自动导览方法和*** |
-
2019
- 2019-05-27 CN CN201910445658.6A patent/CN110148222A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20170004651A1 (en) * | 2014-07-24 | 2017-01-05 | Youngzone Culture (Shanghai) Co., Ltd. | Augmented reality technology-based handheld viewing device and method thereof |
| CN107564108A (zh) * | 2017-07-27 | 2018-01-09 | 湖北历拓网络科技有限公司 | 一种虚拟现实的车辆交易方法和装置 |
| CN109427096A (zh) * | 2017-08-29 | 2019-03-05 | 深圳市掌网科技股份有限公司 | 一种基于增强现实的自动导览方法和*** |
| CN108427499A (zh) * | 2018-02-13 | 2018-08-21 | 视辰信息科技(上海)有限公司 | 一种ar***及ar设备 |
| CN108536734A (zh) * | 2018-03-02 | 2018-09-14 | 北京邮电大学 | 一种web ar活动的发布方法 |
Non-Patent Citations (1)
| Title |
|---|
| 亮风台: "汽车之家AR车展", 《BILIBILI》 * |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110488979A (zh) * | 2019-08-23 | 2019-11-22 | 北京枭龙科技有限公司 | 一种基于增强现实的汽车展示*** |
| CN113034697A (zh) * | 2019-12-24 | 2021-06-25 | 北京车和家信息技术有限公司 | 对目标设备进行增强现实展示的方法、装置及*** |
| CN111414225A (zh) * | 2020-04-10 | 2020-07-14 | 北京城市网邻信息技术有限公司 | 三维模型远程展示方法、第一终端、电子设备及存储介质 |
| CN111414225B (zh) * | 2020-04-10 | 2021-08-13 | 北京城市网邻信息技术有限公司 | 三维模型远程展示方法、第一终端、电子设备及存储介质 |
| CN112509152A (zh) * | 2020-12-17 | 2021-03-16 | 重庆实唯信息技术有限公司 | 一种基于ar技术的看车方法、***、设备及可读介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110148222A (zh) | 一种基于ar技术的看车方法及*** | |
| US10739861B2 (en) | Long distance interaction with artificial reality objects using a near eye display interface | |
| CN107004279B (zh) | 自然用户界面相机校准 | |
| US9986228B2 (en) | Trackable glasses system that provides multiple views of a shared display | |
| CN107004275B (zh) | 确定实物至少一部分的3d重构件空间坐标的方法和*** | |
| CN111344749B (zh) | 引向用户关注 | |
| US11170521B1 (en) | Position estimation based on eye gaze | |
| KR20180101496A (ko) | 인사이드-아웃 위치, 사용자 신체 및 환경 추적을 갖는 가상 및 혼합 현실을 위한 머리 장착 디스플레이 | |
| JP2022519309A (ja) | 高一時的分解能を伴う軽量かつ低電力のクロスリアリティデバイス | |
| US10146332B2 (en) | Information processing device, information processing system, block system, and information processing method | |
| US10652525B2 (en) | Quad view display system | |
| KR20180108709A (ko) | 사용자의 현실적인 신체 모델에 가상으로 옷을 입혀보는 방법 | |
| CN112509040A (zh) | 对提供镜面反射和反射修改的表面进行基于图像的检测 | |
| WO2014095067A1 (en) | A system for a vehicle | |
| CN114022565A (zh) | 用于显示设备的对齐方法及对齐装置、车载显示*** | |
| US11776182B1 (en) | Techniques for enabling drawing in a computer-generated reality environment | |
| CN111546338A (zh) | 一种机器人的控制方法、装置、机器人以及存储介质 | |
| CN108995590A (zh) | 一种人车互动方法、***及装置 | |
| CN110692237A (zh) | 照明***内容 | |
| US20160332071A1 (en) | Information processing apparatus, information processing system, assembled device, and information processing method | |
| JP2022523283A (ja) | 表示装置のために画像を処理するシステム及び方法 | |
| US10130883B2 (en) | Information processing device and information processing method | |
| US11182978B1 (en) | Rendering virtual content with coherent visual properties | |
| WO2021029164A1 (ja) | 画像処理装置、および画像処理方法、並びにプログラム | |
| JP2015136450A (ja) | 情報処理装置および情報処理方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190820 |
|
| RJ01 | Rejection of invention patent application after publication |