CN110889337A - 一种基于ar的说明方法和说明*** - Google Patents

一种基于ar的说明方法和说明*** Download PDF

Info

Publication number
CN110889337A
CN110889337A CN201911087197.6A CN201911087197A CN110889337A CN 110889337 A CN110889337 A CN 110889337A CN 201911087197 A CN201911087197 A CN 201911087197A CN 110889337 A CN110889337 A CN 110889337A
Authority
CN
China
Prior art keywords
explanation
digital model
dimensional digital
explained
description
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201911087197.6A
Other languages
English (en)
Inventor
刘石坚
潘正祥
邹峥
廖律超
张国基
许锐
范宜凯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujian University of Technology
Original Assignee
Fujian University of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujian University of Technology filed Critical Fujian University of Technology
Priority to CN201911087197.6A priority Critical patent/CN110889337A/zh
Priority to PCT/CN2019/121459 priority patent/WO2021088161A1/zh
Publication of CN110889337A publication Critical patent/CN110889337A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本申请提供了一种基于AR的说明方法和说明***，涉及数据处理领域。该说明方法包括：服务器端根据待说明实物以及构成所述待说明实物的零部件的物理形状和尺寸构建等比例的三维数字模型；服务器端获取针对所述三维数字模型的说明方案，将所述说明方案添加到所述三维数字模型中，并将包含说明方案的三维数字模型生成为应用程序；服务器端将所述应用程序发送到客户端；客户端安装所述应用程序，当识别出待说明实物时，将所述三维数字模型对齐到所述待说明实物，并在用户选择到待说明实物时，运行所述说明方案。本发明可以使用户身临其境的了解商品的结构，并且通过多样的解说方式了解商品的功能、参数。

Description

一种基于AR的说明方法和说明***
技术领域
本申请属于数据处理领域，尤其涉及一种基于AR的说明方法和说明***。
背景技术
商家在销售商品时通常会向消费者提供一份产品说明书来展示商品的参数、功能、使用方法以及注意事项等。由于平面纸质说明书在展示三维实体商品的操作流程时不够直观，且其内容一旦印刷即无法更改，因此商家有时会采用数字视频的方式进行功能演示，但观察别人如何做与消费者自身如何做还是可能会存在理解上的偏差。
增强现实AR技术是一种前沿的计算机辅助技术，能够以文字、图片、视频、三维动画等多种形式在三维空间中直观地展示目标对象的多媒体信息，且可与用户开展实时互动。因此，运用AR技术制作商品的展示方案，能够替代现有的纸质产品说明书，加速无纸化进程。
现有技术的AR说明书通常是基于说明书上特定的图片纹理来关联辅助说明信息，用户并不能将辅助说明信息与待说明实体关联起来，因此难以身临其境的了解商品。其次，现有技术的AR说明书对纸质材料依然存在依赖性。
发明内容
本发明实施例的主要目的在于提供一种基于AR的说明方法和说明***，通过本发明实施例的方案，可以使用户身临其境的了解商品的结构，并且通过多样的解说方式了解商品的功能、参数。
第一方面，提供了一种基于AR的说明方法，包括：
服务器端根据待说明实物以及构成所述待说明实物的零部件的物理形状和尺寸构建等比例的三维数字模型；
服务器端获取针对所述三维数字模型的说明方案，将所述说明方案添加到所述三维数字模型中，并将包含说明方案的三维数字模型生成为应用程序；
服务器端将所述应用程序发送到客户端；
客户端安装所述应用程序，当识别出待说明实物时，将所述三维数字模型对齐到所述待说明实物，并在用户选择到待说明实物时，运行所述说明方案。
在一个可能的实现方式中，所述说明方案包括：确定说明对象、说明的内容以及说明表现的形式。
在另一个可能的实现方式中，所述说明对象包括：实物整体和/或构成所述实物的零部件，所述说明表现的形式包括：文字、音频、视频、动画。
在又一个可能的实现方式中，所述说明内容包括：实物及其零部件的参数、功能、组装方法、使用方法、注意事项。
在又一个可能的实现方式中，所述客户端通过待说明物体的几何形状和/或图片纹理识别待说明实物。
第二方面，提供了一种基于AR的说明***，所述说明***包括：
服务器端，用于根据待说明实物以及构成所述待说明实物的零部件的物理形状和尺寸构建等比例的三维数字模型，获取针对所述三维数字模型的说明方案，将所述说明方案添加到所述三维数字模型中，并将包含说明方案的三维数字模型生成为应用程序，将所述应用程序发送到客户端；
客户端，用于安装服务器端发送的所述应用程序，当识别出待说明实物时，将所述三维数字模型对齐到所述待说明实物，并在用户选择到待说明实物时，运行所述说明方案。
在一个可能的实现方式中，所述说明方案包括：确定说明对象、说明的内容以及说明表现的形式。
在又一个可能的实现方式中，所述说明对象包括：实物整体和/或构成所述实物的零部件，所述说明表现的形式包括：文字、音频、视频、动画。
在又一个可能的实现方式中，所述说明内容包括：实物及其零部件的参数、功能、组装方法、使用方法、注意事项。
在又一个可能的实现方式中，所述客户端通过待说明物体的几何形状和/或图片纹理识别待说明实物。
本申请提供的技术方案带来的有益效果是：可以使用户身临其境的了解商品的结构，并且通过多样的解说方式了解商品的功能、参数。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对本申请实施例描述中所需要使用的附图作简单地介绍。
图1为本发明一个实施例提供的一种基于AR的说明方法的流程图；
图2为本发明一个实施例提供的一种基于AR的说明***的结构图。
具体实施方式
下面详细描述本申请的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的模块或具有相同或类似功能的模块。下面通过参考附图描述的实施例是示例性的，仅用于解释本申请，而不能解释为对本发明的限制。
本技术领域技术人员可以理解，除非特意声明，这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是，本申请的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作、模块和/或组件，但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、模块、组件和/或它们的组。应该理解，当我们称模块被“连接”或“耦接”到另一模块时，它可以直接连接或耦接到其他模块，或者也可以存在中间模块。此外，这里使用的“连接”或“耦接”可以包括无线连接或无线耦接。这里使用的措辞“和/或”包括一个或更多个相关联的列出项的全部或任一单元和全部组合。
为使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请实施方式作进一步地详细描述。
下面以具体地实施例对本申请的技术方案以及本申请的技术方案如和解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图，对本申请的实施例进行描述。
实施例一
如图1所示为本发明一个实施例提供的一种基于AR的说明方法的流程图，包括：
步骤S101，服务器端根据待说明实物以及构成所述待说明实物的零部件的物理形状和尺寸构建等比例的三维数字模型。
在本发明实施例中，产品制造方的服务器里存储有所有实物及其零部件的数据，这些数据包括实物及其零部件的物理形状和尺寸，从服务器的数据库中可以直接调用上述数据，根据该数据即可构建实物及其零部件等比例的三维数字模型。
步骤S102，服务器端获取针对所述三维数字模型的说明方案，将所述说明方案添加到所述三维数字模型中，并将包含说明方案的三维数字模型生成为应用程序。
在本发明实施例中，针对三维数字模型的说明方案包括：确定说明对象、说明的内容以及说明表现的形式，其中，说明对象即针对整个实物进行说明还是针对零部件进行说明，说明表现的形式即是以文字、音频还是视频、动画的形式进行说明。将说明方案添加到三维数字模型中即当用户点击待说明的实物或零部件时显示对应的说明内容，将说明方案添加到三维数字模型的工具是现有技术，本发明不进行限定，优选的可通过Unity 3D实现。
其中，说明内容包括但不限于：实物及其零部件的参数、功能、组装方法、使用方法、注意事项。
对于将所述说明方案添加到所述三维数字模型中，其内容包括：制作三维空间文本框、三维空间音频触发按钮、三维空间视频显示框、三维动画等。
步骤S103，服务器端将所述应用程序发送到客户端。
步骤S104，客户端安装所述应用程序，当识别出待说明实物时，将所述三维数字模型对齐到所述待说明实物，并在用户选择到待说明实物时，运行所述说明方案。
在本发明实施例中，客户端接收服务器端发送的应用程序，并在本地安装该应用程序，客户端通过摄像头扫描实物，当识别出是对应的实物时，客户端中的三维数字模型与实物进行对齐，当用户选择到实物时，客户端中的三维数字模型对应的部分即会显示说明方案。
其中，客户端通过待说明物体的几何形状和/或图片纹理识别待说明实物。
其中，待说明实物与三维数字模型的交互可以通过射线法实现。优选的，当待说明实物与三维数字模型的交互成功时，客户端可以给予一反馈，通过该反馈，提示用户交互成功。
本发明实施例，服务器端在本地将构建的三维数字模型和对待说明实物的说明方案进行融合，融合为应用程序，将应用程序发送到客户端，客户端安装应用程序，当识别出待说明实物时，将三维数字模型对齐到待说明实物，并在用户选择到待说明实物时，运行说明方案。使得用户可以通过AR方式了解实物的结构和用途。
作为本发明的一个可选实施例，所述说明方法还包括：
服务器端向客户端发送对所述应用程序的更新程序。
实施例二
如图2所示为本发明一个实施例提供的一种基于AR的说明***的结构图，所述说明***包括：
服务器端201，用于根据待说明实物以及构成所述待说明实物的零部件的物理形状和尺寸构建等比例的三维数字模型，获取针对所述三维数字模型的说明方案，将所述说明方案添加到所述三维数字模型中，并将包含说明方案的三维数字模型生成为应用程序，将所述应用程序发送到客户端。
客户端202，用于安装服务器端发送的所述应用程序，当识别出待说明实物时，将所述三维数字模型对齐到所述待说明实物，并在用户选择到待说明实物时，运行所述说明方案。
在本发明实施例中，产品制造方的服务器里存储有所有实物及其零部件的数据，这些数据包括实物及其零部件的物理形状和尺寸，从服务器的数据库中可以直接调用上述数据，根据该数据即可构建实物及其零部件等比例的三维数字模型。
针对三维数字模型的说明方案包括：确定说明对象、说明的内容以及说明表现的形式，其中，说明对象即针对整个实物进行说明还是针对零部件进行说明，说明表现的形式即是以文字、音频还是视频、动画的形式进行说明。将说明方案添加到三维数字模型中即当用户点击待说明的实物或零部件时显示对应的说明内容，将说明方案添加到三维数字模型的工具是现有技术，本发明不进行限定，优选的可通过Unity 3D实现。
其中，说明内容包括但不限于：实物及其零部件的参数、功能、组装方法、使用方法、注意事项。
对于将所述说明方案添加到所述三维数字模型中，其内容包括：制作三维空间文本框、三维空间音频触发按钮、三维空间视频显示框、三维动画等。
客户端接收服务器端发送的应用程序，并在本地安装该应用程序，客户端通过摄像头扫描实物，当识别出是对应的实物时，客户端中的三维数字模型与实物进行对齐，当用户选择到实物时，客户端中的三维数字模型对应的部分即会显示说明方案。
其中，客户端通过待说明物体的几何形状和/或图片纹理识别待说明实物。
其中，待说明实物与三维数字模型的交互可以通过射线法实现。优选的，当待说明实物与三维数字模型的交互成功时，客户端可以给予一反馈，通过该反馈，提示用户交互成功。
本发明实施例，服务器端在本地将构建的三维数字模型和对待说明实物的说明方案进行融合，融合为应用程序，将应用程序发送到客户端，客户端安装应用程序，当识别出待说明实物时，将三维数字模型对齐到待说明实物，并在用户选择到待说明实物时，运行说明方案。使得用户可以通过AR方式了解实物的结构和用途。
作为本发明的一个可选实施例，所述服务器端还用于，向所述客户端发送对所述应用程序的更新程序。
应该理解的是，虽然附图的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，其可以以其他的顺序执行。而且，附图的流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，其执行顺序也不必然是依次进行，而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
以上所述仅是本发明的部分实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (10)

1.一种基于AR的说明方法，其特征在于，包括：
服务器端根据待说明实物以及构成所述待说明实物的零部件的物理形状和尺寸构建等比例的三维数字模型；
服务器端获取针对所述三维数字模型的说明方案，将所述说明方案添加到所述三维数字模型中，并将包含说明方案的三维数字模型生成为应用程序；
服务器端将所述应用程序发送到客户端；
客户端安装所述应用程序，当识别出待说明实物时，将所述三维数字模型对齐到所述待说明实物，并在用户选择到待说明实物时，运行所述说明方案。
2.如权利要求1所述的说明方法，其特征在于，所述说明方案包括：确定说明对象、说明的内容以及说明表现的形式。
3.如权利要求2所述的说明方法，其特征在于，所述说明对象包括：实物整体和/或构成所述实物的零部件，所述说明表现的形式包括：文字、音频、视频、动画。
4.如权利要求2所述的说明方法，其特征在于，所述说明内容包括：实物及其零部件的参数、功能、组装方法、使用方法、注意事项。
5.如权利要求1~4任一项所述的说明方法，其特征在于，所述客户端通过待说明物体的几何形状和/或图片纹理识别待说明实物。
6.一种基于AR的说明***，其特征在于，所述说明***包括：
服务器端，用于根据待说明实物以及构成所述待说明实物的零部件的物理形状和尺寸构建等比例的三维数字模型，获取针对所述三维数字模型的说明方案，将所述说明方案添加到所述三维数字模型中，并将包含说明方案的三维数字模型生成为应用程序，将所述应用程序发送到客户端；
客户端，用于安装服务器端发送的所述应用程序，当识别出待说明实物时，将所述三维数字模型对齐到所述待说明实物，并在用户选择到待说明实物时，运行所述说明方案。
7.如权利要求6所述的说明***，其特征在于，所述说明方案包括：确定说明对象、说明的内容以及说明表现的形式。
8.如权利要求7所述的说明***，其特征在于，所述说明对象包括：实物整体和/或构成所述实物的零部件，所述说明表现的形式包括：文字、音频、视频、动画。
9.如权利要求7所述的说明***，其特征在于，所述说明内容包括：实物及其零部件的参数、功能、组装方法、使用方法、注意事项。
10.如权利要求6~9任一项所述的说明***，其特征在于，所述客户端通过待说明物体的几何形状和/或图片纹理识别待说明实物。
CN201911087197.6A 2019-11-08 2019-11-08 一种基于ar的说明方法和说明*** Pending CN110889337A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201911087197.6A CN110889337A (zh) 2019-11-08 2019-11-08 一种基于ar的说明方法和说明***
PCT/CN2019/121459 WO2021088161A1 (zh) 2019-11-08 2019-11-28 一种基于 ar 的说明方法和说明***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911087197.6A CN110889337A (zh) 2019-11-08 2019-11-08 一种基于ar的说明方法和说明***

Publications (1)

Publication Number Publication Date
CN110889337A true CN110889337A (zh) 2020-03-17

Family

ID=69747112

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911087197.6A Pending CN110889337A (zh) 2019-11-08 2019-11-08 一种基于ar的说明方法和说明***

Country Status (2)

Country Link
CN (1) CN110889337A (zh)
WO (1) WO2021088161A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112153451A (zh) * 2020-09-01 2020-12-29 广州汽车集团股份有限公司 一种车辆使用说明的展示方法及智能终端

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070122001A1 (en) * 2005-11-30 2007-05-31 Microsoft Corporation Real-time Bayesian 3D pose tracking
CN106210468A (zh) * 2016-07-15 2016-12-07 网易（杭州）网络有限公司 一种增强现实显示方法和装置
CN106910251A (zh) * 2017-03-22 2017-06-30 朱海涛 基于ar和移动终端的模型仿真方法
CN107133854A (zh) * 2017-05-26 2017-09-05 北京小度信息科技有限公司 信息推荐方法和装置
CN107368314A (zh) * 2017-07-19 2017-11-21 哈尔滨工业大学 基于移动ar的机械制造工艺课程设计教学辅助***及开发方法
CN207198847U (zh) * 2017-06-27 2018-04-06 徐桐 一种基于图像对比识别的建筑信息导览的***
CN108008822A (zh) * 2017-12-18 2018-05-08 快创科技（大连）有限公司 一种基于增强现实技术的商场体验***
CN108712644A (zh) * 2018-05-18 2018-10-26 镇江启迪数字天下科技有限公司 一种tw_ar智能导览***及导览方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103516808A (zh) * 2013-10-21 2014-01-15 上海佳世展览有限公司 智慧展馆移动终端虚实交互平台
US11024085B2 (en) * 2016-07-09 2021-06-01 Doubleme, Inc. Electronic system and method for three-dimensional mixed-reality space and experience construction and sharing
CN106251405A (zh) * 2016-07-26 2016-12-21 北京奇虎科技有限公司 增强现实的方法和终端
CN108597035A (zh) * 2018-05-02 2018-09-28 福建中锐海沃科技有限公司 一种基于增强现实的三维物件显示方法、存储介质及计算机
CN108829250A (zh) * 2018-06-04 2018-11-16 苏州市职业大学 一种基于增强现实ar的对象互动展示方法
CN109448129A (zh) * 2018-10-23 2019-03-08 厦门市计量检定测试院 数字博物馆管理***

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070122001A1 (en) * 2005-11-30 2007-05-31 Microsoft Corporation Real-time Bayesian 3D pose tracking
CN106210468A (zh) * 2016-07-15 2016-12-07 网易（杭州）网络有限公司 一种增强现实显示方法和装置
CN106910251A (zh) * 2017-03-22 2017-06-30 朱海涛 基于ar和移动终端的模型仿真方法
CN107133854A (zh) * 2017-05-26 2017-09-05 北京小度信息科技有限公司 信息推荐方法和装置
CN207198847U (zh) * 2017-06-27 2018-04-06 徐桐 一种基于图像对比识别的建筑信息导览的***
CN107368314A (zh) * 2017-07-19 2017-11-21 哈尔滨工业大学 基于移动ar的机械制造工艺课程设计教学辅助***及开发方法
CN108008822A (zh) * 2017-12-18 2018-05-08 快创科技（大连）有限公司 一种基于增强现实技术的商场体验***
CN108712644A (zh) * 2018-05-18 2018-10-26 镇江启迪数字天下科技有限公司 一种tw_ar智能导览***及导览方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112153451A (zh) * 2020-09-01 2020-12-29 广州汽车集团股份有限公司 一种车辆使用说明的展示方法及智能终端

Also Published As

Publication number Publication date
WO2021088161A1 (zh) 2021-05-14

Similar Documents

Publication Publication Date Title
Lorenz et al. CAD to VR–a methodology for the automated conversion of kinematic CAD models to virtual reality
US9530250B2 (en) Augmented reality updating of 3D CAD models
Gausemeier et al. Development of a real time image based object recognition method for mobile AR-devices
JP4838079B2 (ja) パーツ識別画像作成装置およびプログラムおよびコンピュータ読み取り可能な記憶媒体
JP4151158B2 (ja) シーン記述生成装置及び方法
JP7208549B2 (ja) 仮想空間制御装置、その制御方法、及びプログラム
CN111199062B (zh) 基于工业开发软件的仿真方法及***、电子设备
GB2448185A (en) High definition image generation from low definition representation
EP2966621A1 (en) Method and system for converting an existing 3D model into graphical data
EP3113011B1 (en) 3d fonts for automation of design for manufacturing
US12039679B2 (en) Computing platform for facilitating augmented reality experiences with third party assets
KR20220013410A (ko) 3차원 포인트 클라우드를 기반한 초기 시야각 제어 및 프레젠테이션 방법 및 시스템
CN110889337A (zh) 一种基于ar的说明方法和说明***
JP4886640B2 (ja) パーツカタログ生成装置、パーツカタログ生成方法、パーツカタログ生成プログラムおよび記録媒体
JP2006092143A (ja) 図面自動生成システム
CN110222403B (zh) 基于应用场景的电气设计***和方法
KR102031647B1 (ko) 상품과 포장상자의 3차원 합성영상 생성 시스템 및 방법
US8488172B2 (en) Collapsible breadcrumbs for maximizing space in a user interface
JP5359078B2 (ja) パーツカタログ生成装置、パーツカタログ生成方法、パーツカタログ生成プログラムおよび記録媒体
JP2015103172A (ja) Ｗｅｂシステムの入力チェック処理システム及び入力チェック処理方法
JP2022011133A (ja) 表示プログラム、表示方法、表示装置
Aghilar¹ et al. Check for updates Scalable Cloud-Native Pipeline for Efficient 3D Model Reconstruction from Monocular Smartphone Images
JP2011008370A (ja) ３ｄ−ｃａｄシステム及びｃａｄデータ管理方法
JP2008071046A (ja) ３次元モデルズーム画像作成装置
von Lukas 3D beyond CAD–Supporting the lifecycle of maritime assets with lightweight 3D formats and lightweight application provisioning

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20200317

RJ01 Rejection of invention patent application after publication