CN108364353A - 引导观看者观看场景的三维直播流的***和方法 - Google Patents

引导观看者观看场景的三维直播流的***和方法 Download PDF

Info

Publication number
CN108364353A
CN108364353A CN201810083870.8A CN201810083870A CN108364353A CN 108364353 A CN108364353 A CN 108364353A CN 201810083870 A CN201810083870 A CN 201810083870A CN 108364353 A CN108364353 A CN 108364353A
Authority
CN
China
Prior art keywords
scene
viewer
stream
live
dimensional
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810083870.8A
Other languages
English (en)
Inventor
李新福
王照云
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
GUANGDONG KANGYUN TECHNOLOGY Co.,Ltd.
Original Assignee
Guangdong Hongwei International Exhibition Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Hongwei International Exhibition Group Co Ltd filed Critical Guangdong Hongwei International Exhibition Group Co Ltd
Publication of CN108364353A publication Critical patent/CN108364353A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/003—Navigation within 3D models or images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01—Indexing scheme relating to G06F3/01
    • G06F2203/012—Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Human Computer Interaction (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种引导观看者观看场景的三维直播流的***和方法，***包括：数据库，用于存储场景的多个三维扫描图像，其中，所述多个三维扫描图像由多个扫描仪捕捉以覆盖所述场景的360度视图；叠加模块，用于从数据库中检索所述场景预先存储的多个扫描图像，并将所述场景的二维直播流与预先存储的多个三维扫描图像进行叠加以生成所述场景的三维直播流；展示管理模块，用于向观看者展示场景的三维直播流以及一个或多个导航选项，所述一个或多个导航选项用于引导观看者在所述三维直播流内进行观看，所述观看者从一个或多个导航选项中至少选择一个。本发明为观看者提供了一种全新的高清三维直播流引导观看体验，可广泛应用于三维成像领域。

Description

引导观看者观看场景的三维直播流的***和方法
技术领域
本发明涉及三维成像领域，尤其是一种引导观看者观看场景的三维直播流的***和方法。
背景技术
近来举办了许多不同类型的物品展销会和艺术博览会。对许多人来说，线下展会是他们推销自我的好机会和平台。展会可以是艺术作品或特定物品在博物馆内、美术馆内或商品交易会上的示范或公开陈列。通常这些展会有固定的场地和固定的时间。此外，受场地大小、时间安排等诸如此类的限制，大多数展会对允许来参观展会的人数有限制。另外，人们也有自身的局限性，例如展会的时间对他们来说不适合，或者可能展会的会场距离他们的位置过远。因此，想看展会的人有时会因为上述这些限制而无法去现场观看。而且，当实际参观一个地方或一个展会的人数众多时，分析这些参观人员的喜好和兴趣数据将变得十分困难。此外，目前展会只有二维直播***，但是在二维流媒体直播中，细节、颜色等是不清楚的。而目前的展会也不支持引导观看三维直播流的功能，无法根据参观人员的喜好和兴趣来对展会等场景内的三维直播流进行引导观看，功能不够丰富。
发明内容
为解决上述技术问题，本发明的第一目的在于：提供一种清晰、方便和功能丰富的引导观看者观看场景的三维直播流的***和方法，以向观看者展示场景的三维直播流以及一个或多个导航选项。所述场景包括展会、博物馆、某个地点等。
本发明的第二目的在于：提供一种清晰、方便和功能丰富的引导观看者观看场景的三维直播流的***和方法，以向观看者展示场景的三维直播流以及一个或多个导航选项并接收观看者所选择的导航选项来引导观看者进行三维直播流观看。导航选项包括向左移动、向右移动、向前移动、向后移动以及以360度视角观看场景的选项。
本发明所采取的第一技术方案是：
引导观看者观看场景的三维直播流的***，包括：
数据库，用于存储场景的多个三维扫描图像，其中，所述多个三维扫描图像由多个扫描仪捕捉以覆盖所述场景的360度视图；
叠加模块，用于从数据库中检索所述场景预先存储的多个扫描图像，并将所述场景的二维直播流与预先存储的多个三维扫描图像进行叠加以生成所述场景的三维直播流；
展示管理模块，用于向观看者展示场景的三维直播流以及一个或多个导航选项，所述一个或多个导航选项用于引导观看者在所述三维直播流内进行观看，所述观看者从一个或多个导航选项中至少选择一个。
进一步，还包括访问管理模块，所述访问管理模块用于根据有效的登录凭证授予观看者观看场景的三维直播流的访问权限。
进一步，所述三维直播流以及一个或多个导航选项是实时生成并实时展示给观看者的。
进一步，所述数据库具体用于存储和维护观看者的登录证书信息，多个场景的三维直播流，多个场景的多个扫描图像，观看者的历史观看记录，观看者的兴趣所在，一个或多个产品/服务的详细信息，各种展会或场景的信息，虚拟三维显示内容以及观看者在观看三维直播流时的一个或多个活动。
进一步，所述数据库位于包括服务器的远程设备上。
进一步，所述三维直播流通过基于网页的***、增强现实设备和虚拟现实设备中的至少一个展示给观看者。
进一步，所述导航选项包括向左移动、向右移动、向前移动、向后移动以及以360度视角观看场景的选项。
本发明所采取的第二技术方案是：
引导观看者观看场景的三维直播流的***，包括：
数据库，用于存储场景的多个三维扫描图像，其中，所述多个三维扫描图像由多个扫描仪捕捉以覆盖所述场景的360度视图；
叠加模块，用于从数据库中检索所述场景预先存储的多个扫描图像，并将所述场景的二维直播流与预先存储的多个三维扫描图像进行叠加以生成所述场景的三维直播流；
展示管理模块，用于向观看者展示场景的三维直播流以及一个或多个导航选项，所述一个或多个导航选项用于引导观看者在所述三维直播流内进行观看，所述观看者从一个或多个导航选项中至少选择一个，所述导航选项包括向左移动、向右移动、向前移动、向后移动以及以360度视角观看场景的选项；
导航模块，用于接收观看者所选择的导航选项，并引导观看者根据接收的导航选项观看场景的三维直播流。
进一步，所述导航模块还引用于感测观看者的一个或多个活动，所述观看者的一个或多个活动包括观看者在预设位置停留的时间，观看者对产品或服务的当前兴趣所在以及观看者的姿势。
本发明所采取的第三技术方案是：
引导观看者观看场景的三维直播流的方法，包括以下步骤：
将场景的多个三维扫描图像存储到数据库中，其中，所述多个三维扫描图像由多个扫描仪捕捉以覆盖所述场景的360度视图；
从数据库中检索所述场景预先存储的多个扫描图像；
将所述场景的二维直播流与预先存储的多个三维扫描图像进行叠加以生成所述场景的三维直播流；
向观看者展示场景的三维直播流以及一个或多个导航选项，所述一个或多个导航选项用于引导观看者在所述三维直播流内进行观看，所述观看者从一个或多个导航选项中至少选择一个。
进一步，所述场景的三维直播流以及一个或多个导航选项是实时展示给观看者的。
进一步，还包括向观看者展示所述场景的虚拟三维显示内容，以使观看者身临其境地感受到自己已成为虚拟三维显示内容的一部分的步骤。
进一步，还包括根据有效的登录凭证授予观看者观看场景的三维直播流的访问权限的步骤。
进一步，还包括以下步骤：
通过数据库存储和维护观看者的登录证书信息，多个场景的三维直播流，多个场景的多个扫描图像，观看者的历史观看记录，观看者的兴趣所在，一个或多个产品/服务的详细信息，各种展会或场景的信息，虚拟三维显示内容以及观看者在观看三维直播流时的一个或多个活动。
进一步，所述三维直播流通过基于网页的***、增强现实设备和虚拟现实设备中的至少一个展示给观看者。
本发明所采取的第四技术方案是：
引导观看者观看场景的三维直播流的方法，包括以下步骤：
存储场景的多个三维扫描图像，其中，所述多个三维扫描图像由多个扫描仪捕捉以覆盖所述场景的360度视图；
从数据库中检索所述场景预先存储的多个扫描图像，并将所述场景的二维直播流与预先存储的多个三维扫描图像进行叠加以生成所述场景的三维直播流；
向观看者展示场景的三维直播流以及一个或多个导航选项，所述一个或多个导航选项用于引导观看者在所述三维直播流内进行观看，所述观看者从一个或多个导航选项中至少选择一个，所述导航选项包括向左移动、向右移动、向前移动、向后移动以及以360度视角观看场景的选项；
接收观看者所选择的导航选项，并引导观看者根据接收的导航选项观看场景的三维直播流。
进一步，还包括感测观看者的一个或多个活动的步骤，所述观看者的一个或多个活动包括观看者在预设位置停留的时间，观看者对产品或服务的当前兴趣所在以及观看者的姿势。
本发明的有益效果是：本发明引导观看者观看场景的三维直播流的***和方法，通过登录，检索，叠加，导航选择，三维直播流展示，存储等操作，为观看者提供了一种全新的高清三维直播流引导观看体验，使得观看者能身临其境地对展会等场景进行高清的三维直播观看，将线下的展会等场景搬到了线上，不受线下展会的参观人数、举办时间和举办地点的限制，可以随时随地通过计算设备在线观看展会，而且能支持观看者在线根据个人的喜好和兴趣来选择相应的导航选项进行引导观看的功能，支持AR观看以及VR观看功能，进一步丰富了观看者的观看选择和观看体验。
附图说明
图1为本发明各种实施例可以起作用的示例性环境；
图2为本发明三维直播流导航***的一种内部结构框图；
图3为应用图2的***对场景进行三维直播流导航观看的方法的流程图。
具体实施方式
下面结合说明书附图和具体实施例对本发明作进一步解和说明。
图1示出了本发明的各种实施例可以起作用的示例性环境。如图1所示，该示例性环境主要包括观看者(也可称为观众、参观人员、查看者等)102，内置有导航***106的计算设备104以及服务器108。观看者102可以通过在计算设备104的界面上输入一个或多个个人详细信息(如姓名、年龄、位置、性别等)来向导航***106注册。观看者102可以是拥有授权登录证书的任何用户，该授权登录证书允许已得到授权的用户通过导航***106，增强现实设备/***，基于网络的***或/和虚拟现实设备/***中的至少一个来访问某个场景(如展会等地点)的虚拟视图或三维直播流。例如，导航***106允许观看者102通过输入有效登录凭证来在计算设备104上随时随地观看展会等地点的虚拟3D直播流和/或虚拟3D显示内容。观看者102不需要参加实际的线下展会就可以在线观看该展会。通过导航***106，可以向观看者102展示包括展会或某个地点的虚拟视图的三维(3D)实况流和/或某个地点的三维(3D)虚拟显示内容，使得观看者102可以感觉到自己已成为展会或某个地点的一部分，从而能身临其境地体验展会或某个地点。展会可以是绘画展会、博物馆展览会、产品展会、服务展会等。此外，展会可以是在室内区域(例如大厅)中或在的室外区域(如地面)中产品或服务的在线展示。
进一步作为优选的实施方式，导航***106可以是安装在计算设备104上的应用程序。
进一步作为优选的实施方式，观看者102可以通过计算设备104上网络浏览器(如谷歌浏览器、微软IE浏览器等)的网站URL来访问导航***106。在某些实施例中，导航***106还可以是安装在计算设备104上的软件应用。在某些实施例中，导航***可以是单个设备/模块/***、多个设备/模块/***的组合，这些设备/模块/***能够在观看虚拟3D显示内容和/或地点/展会的三维(3D)直播流的同时分析期间所生成的数据。此外，导航***106可以是软件、硬件、固件及其组合。在某些实施例中，计算设备104可以是但不限于智能手机、平板电脑、电视机、笔记本电脑、智能手表、智能电视、计算机等设备。
其中，导航***106，用于基于有效的登录证书对观看者102进行访问授权。此外，导航***106还用于为向观看者102展示场景的虚拟3D显示内容或3D实况直播流，使得观看者102感觉自己已成为虚拟3D显示内容/3D实况流的一部分。虚拟3D显示内容包括由一个或多个扫描仪捕捉的场景的多个扫描图像。在场景的虚拟3D显示内容/3D实况流中，观看者102可以真切感受到其所显示的一个或多个产品/对象。优选地，场景的3D直播流可通过基于网页的***、增强现实设备和虚拟现实设备/***中的至少一个展示给观看者102。
进一步作为优选的实施方式，导航***106还可用于感测观看者102的动作，行为，观看者102的一个或多个活动，观看者对三维直播流中的对象或服务的当前兴趣所在，观看者102在观看三维直播流时的一个或多个手势。导航***106还用于接收观看者102的一个或多个输入。其中，观看者102的一个或多个活动包括但不限于观看者102在某个特定场景停留的时间，观看者102的姿势等。
进一步作为优选的实施方式，导航***106还用于捕捉场景的多个图像，从而可以获取该场景的360度视图来生成该场景的多个扫描图像。
进一步作为优选的实施方式，导航***106还用于存储多个场景的多个三维直播流，该场景的多个扫描图像，编辑信息以及与三维直播流相关联的多个链接。其中，链接可以包括统一资源定位符。
进一步作为优选的实施方式，导航***106还用于存储和保存观看者的登录证书信息，观看者102的历史观看记录，观看者102的兴趣所在，一个或多个产品/服务的详细信息，一系列展会/场景的信息，虚拟3D显示内容，三维直播流，导航信息，多个扫描图像，观看者102在观看三维直播流时的一个或多个活动。
进一步作为优选的实施方式，还包括数据库，所述数据库位于包含有服务器108的远程设备上。3D扫描显示内容，3D扫描图像，观看者102的登录证书可以被保存或存储在计算设备104或者服务器108的存储器/数据库上。服务器108可以部署在远离本地计算和存储设备的远程设备中。
进一步作为优选的实施方式，导航***106还用于检索场景的多个3D扫描图像。导航***106还用于生成场景的二维直播流。导航***106还用于将场景的二维实况流与多个3D扫描图像叠加以生成该场景的三维(3D)实况流(即三维直播流)。导航***106还用于向观众102展示场景的3D实况流。
进一步作为优选的实施方式，导航***106用于捕获场景的多个图像，从而可以获取该场景的360度视图来生成该场景的多个扫描图像。
导航***使得观看者能够以更加清晰和深入的方式在展会中观看产品。此外，导航***通过3D实况直播流为场景内的产品提供了一个更真实的视图。观众可以通过3D实况直播流真切地体验到产品的深度、颜色、纹理、高度、长度和其他细节。
进一步作为优选的实施方式，导航***106还用于向观看者102呈现场景的3D实况流以及一个或多个导航选项。所述一个或多个导航选项可引导观看者102观看场景的3D实况流。此外，观看者102可以选择一个或多个导航选项中的至少一个。一个或多个导航选项包括向左移动、向右移动、向前移动、向后移动以及360度视角的选项。在一些实施例中，场景的3D实况直播流和个或多个导航选项实时生成并实时展示给观看者102。此外，3D直播流还可通过基于网络的***、增强现实设备和虚拟现实设备中的至少一个展示给观看者102。导航选项可以通过一个或多个箭头来表示。
例如，观看者102可以选择一个或多个导航选项中的“向左移动选项”来观看3D直播流的左侧位置内容，所述左侧位置是相对于3D直播流内观看者102的当前位置来说的。
图2示出了导航***106的各种***元件的结构框图。如图2所示，导航***106包括访问管理模块204、展示管理模块206、一个或多个扫描仪208、数据库210、叠加模块212以及导航模块214。在一些实施例中，用户(如图1所示的观看者102)，可通过智能手机等计算设备上的网页浏览器访问导航***106。这样观看者102就可以在线下展会举办时，实时在线观看展会等场景的虚拟3D显示内容和/或3D实况流。进一步作为优选的实施方式，观看者102可以在展会结束后的某一稍后时间线上观看展会/场景的3D实况流。观看者102可以通过使用包含有导航***106的智能手机随时随地观看该场景/展会。
其中，访问管理模块204，用于基于用户有效的登录凭证来授予观看者102参观不同展会/场景的访问权限。登录凭证可以包括但不限于密码、登录标识符(ID)、名称、位置等。访问管理模块还可通过后期授权，使得观看者102可以访问导航***106的一个或多个功能。
扫描仪208，用于拍摄覆盖场景360度视图的一个或多个图像，以生成该场景的多个3D扫描图像。扫描仪208可包括但不限于室内环境扫描仪、物体扫描仪和室外/航拍扫描仪。物体扫描仪可用来扫描放置在正在举办的展会的房间、大厅等位置的物体。室内环境扫描仪可以扫描正在发生或已经发生的展会室内的任一房间或大厅，以创建展会内部区域的虚拟三维地图。室外/航拍扫描仪可以扫描任何位置或展会的外部区域，以创建展会或某个位置外部区域的虚拟三维视图。
数据库210可以存储多个图像以及该场景的多个3D扫描图像。数据库210还用于存储多个场景的多个虚拟3D显示内容或三维实况流以及该场景的多个3D扫描图像。优选地，数据库210还用于存储和维护产品/服务的多媒体信息，包括产品/服务的广告，编辑信息，观看者102的登录证书信息，观看者102的历史观看记录，观看者102的兴趣所在，多个展会/场景的信息，虚拟3D显示内容，多个扫描图像，三维直播流，观看者102在观看三维直播流时的一个或多个活动，观看者的简介等。在某些应用场合，数据库210可以远离计算设备104。
叠加模块212，用于从数据库210中检索多个3D扫描图像。同时，叠加模块212，也用于生成场景的二维(2D)直播流。
叠加模块212还用于将场景的二维直播流与该场景的多个3D扫描图像进行叠加，以生成该场景的3D直播流。
展示管理模块206，用于向观看者展示场景的3D直播流以及场景的一个或多个导航选项。一个或多个导航选项可以引导观看者102根据观看者102的一个或多个活动观看场景的3D直播流。观看者102的一个或多个活动包括但不限于观看者102在某个特定场景停留的时间，观看者102对产品/服务的当前兴趣所在，观看者102的姿势等。此外，观看者102可以选择一个或多个导航选项中的至少一个。一个或多个导航选项包括向左移动、向右移动、向前移动、向后移动以及360度视角的选项。在一些实施例中，场景的3D实况直播流和个或多个导航选项实时生成并实时展示给观看者102。此外，3D直播流还可通过基于网络的***、增强现实设备和虚拟现实设备中的至少一个展示给观看者102。
在一些实施例中，展示管理模块206还用于向观看者102呈现场景的虚拟3D显示内容，使得观看者102感觉到自己已经为虚拟3D显示内容的一部分。虚拟3D显示内容包括多个扫描图像。在一些实施例中，展示管理模块206还用于基于多个扫描图像实时或非实时地创建虚拟3D显示内容。虚拟3D显示内容可以是展览/场景的扫描模型。在一些实施例中，展示管理模块206通过基于网络的***，增强现实设备和虚拟现实设备中的至少一个向观看者102展示场景的虚拟3D显示内容和/或3D实况流。此外，观看者102可以通过使用增强现实设备或虚拟现实设备中的至少一个来观看虚拟3D显示内容。
导航模块214，用于根据接收的观看者102从一个或多个导航选项中所选择的至少一个的选项来引导观看者102观看三维直播流。
图3示出了应用图2的导航***来引导观看者观看场景的3D直播流的方法流程图。正如图2所讨论的，导航***106使得观看者102能够观看场景的在线3D直播，并获得用于导航该场景的导航指令。如图3所示，该引导观看者观看场景的3D直播流的方法包括但不限于以下步骤：
步骤302：授予观看者访问权限。导航***106可基于有效的登录证书由访问管理模块204授予观众(可以是已付费的用户)相应的访问权限。此外，观看者102可从多个可供在线观看的场景的三维直播流中选择至少一个来进行观看。
步骤304：叠加模块212从数据库210中检索场景预先存储的多个3D扫描图像。
步骤306：叠加模块212将该场景的二维直播流与检索到的多个3D扫描图像进行叠加，以生成该场景的3D直播流。
步骤308：展示管理模块206向观众102展示场景的3D直播流以及一个或多个导航选项。一个或多个导航选项可以通过一个或多个箭头来表示。所述导航选项用于引导观看者102观看场景的3D直播流该场所的3D直播流。导航选项可以包括向左移动、向右移动、向前移动、向后移动以及360度视角的选项。此外，观看者102可选择一个或多个导航选项中的至少一个。优选地，观看者102可通过基于网络的***，增强现实(AR)***和虚拟现实(VR)***中的至少一个来观看该场景的3D直播流。
步骤310：导航模块214接收观看者102对一个或多个导航选项中的至少一个的选择。
步骤312：导航模块214基于所接收的选择在场景内引导观看者102观看3D直播流。
本发明提供了一种引导观看者观看场景的三维直播流的***和方法。所述场景包括展会、博物馆、某个地点等。
本发明还提供了一种通过向观众展示一个或多个导航选项的来引导观看者观看场景的三维直播流的***和方法。观看者可以使用基于网络的***，虚拟现实***，增强现实***等中的至少一个来观看场景的三维直播流。
本发明还提供了一种向观看者展示场景的三维直播流的同时通过虚拟3D显示***向观看者展示一个或多个导航选项的方法及***。观看者可以使用基于网络的***，虚拟现实***，增强现实***等中的至少一个来观看场景的三维直播流。观看者可以选择至少一个导航选项进行观看。导航选项包括向右移动、向左移动向前移动、向后移动、查看场景的360度视图等选项。观众可以选择至少一个导航选项。此外，导航选项可以被展示为直播流中的一个或多个箭头。
本发明还提供了一种将场景的二维直播流与多个三维扫描图像进行叠加以生成场景的三维直播流的方法和***。
以上方法和***的流程图和/或框图详细描述了本发明的实施例。本领域的技术人员容易理解，上述流程图和/或框图中的每个框以及流程图和/或框图中的框的组合可以通过计算机程序指令来实现。这些计算机程序指令可以实现在流程图和/或框图的一个或多个框中指定的动作的手段，可以被提供给通用计算机，专用计算机或其他可编程数据处理装置的处理器以产生可由计算机或其他可编程数据处理装置的处理器执行的机器指令。这些计算机程序指令还可以被存储在计算机可读存储器中，该计算机可读存储器可以指导计算机或其他可编程数据处理装置以特定方式操作，使得存储在计算机可读存储器中的指令产生能实现该指令在流程图和/或框图的一个或多个方框中指定的动作的装置。计算机程序指令还可以被加载到计算机或其他可编程数据处理装置上，使计算机或其他可编程装置上执行一系列操作，从而在计算机或其他可编程装置根据加载的指令实现在流程图和/或框图的一个或多个框中所指定的动作或步骤。
另外，本发明实施例中的步骤编号或模块编号，其仅为了便于阐述说明而设置，对步骤之间的顺序或模块间的连接关系不做任何限定，实施例中的各步骤的执行顺序和模块间的连接关系均可根据本领域技术人员的理解来进行适应性调整。
以上是对本发明的较佳实施进行了具体说明，但本发明并不限于所述实施例，熟悉本领域的技术人员在不违背本发明精神的前提下还可做作出种种的等同变形或替换，这些等同的变形或替换均包含在本申请权利要求所限定的范围内。

Claims (10)

1.引导观看者观看场景的三维直播流的***，其特征在于：包括：
数据库，用于存储场景的多个三维扫描图像，其中，所述多个三维扫描图像由多个扫描仪捕捉以覆盖所述场景的360度视图；
叠加模块，用于从数据库中检索所述场景预先存储的多个扫描图像，并将所述场景的二维直播流与预先存储的多个三维扫描图像进行叠加以生成所述场景的三维直播流；
展示管理模块，用于向观看者展示场景的三维直播流以及一个或多个导航选项，所述一个或多个导航选项用于引导观看者在所述三维直播流内进行观看，所述观看者从一个或多个导航选项中至少选择一个。
2.根据权利要求1所述的引导观看者观看场景的三维直播流的***，其特征在于：还包括访问管理模块，所述访问管理模块用于根据有效的登录凭证授予观看者观看场景的三维直播流的访问权限。
3.根据权利要求1所述的引导观看者观看场景的三维直播流的***，其特征在于：所述数据库具体用于存储和维护观看者的登录证书信息，多个场景的三维直播流，多个场景的多个扫描图像，观看者的历史观看记录，观看者的兴趣所在，一个或多个产品/服务的详细信息，各种展会或场景的信息，虚拟三维显示内容以及观看者在观看三维直播流时的一个或多个活动。
4.根据权利要求1所述的引导观看者观看场景的三维直播流的***，其特征在于：所述三维直播流通过基于网页的***、增强现实设备和虚拟现实设备中的至少一个展示给观看者。
5.引导观看者观看场景的三维直播流的***，其特征在于：包括：
数据库，用于存储场景的多个三维扫描图像，其中，所述多个三维扫描图像由多个扫描仪捕捉以覆盖所述场景的360度视图；
叠加模块，用于从数据库中检索所述场景预先存储的多个扫描图像，并将所述场景的二维直播流与预先存储的多个三维扫描图像进行叠加以生成所述场景的三维直播流；
展示管理模块，用于向观看者展示场景的三维直播流以及一个或多个导航选项，所述一个或多个导航选项用于引导观看者在所述三维直播流内进行观看，所述观看者从一个或多个导航选项中至少选择一个，所述导航选项包括向左移动、向右移动、向前移动、向后移动以及以360度视角观看场景的选项；
导航模块，用于接收观看者所选择的导航选项，并引导观看者根据接收的导航选项观看场景的三维直播流。
6.根据权利要求5所述的引导观看者观看场景的三维直播流的***，其特征在于：所述导航模块还引用于感测观看者的一个或多个活动，所述观看者的一个或多个活动包括观看者在预设位置停留的时间，观看者对产品或服务的当前兴趣所在以及观看者的姿势。
7.引导观看者观看场景的三维直播流的方法，其特征在于：包括以下步骤：
将场景的多个三维扫描图像存储到数据库中，其中，所述多个三维扫描图像由多个扫描仪捕捉以覆盖所述场景的360度视图；
从数据库中检索所述场景预先存储的多个扫描图像；
将所述场景的二维直播流与预先存储的多个三维扫描图像进行叠加以生成所述场景的三维直播流；
向观看者展示场景的三维直播流以及一个或多个导航选项，所述一个或多个导航选项用于引导观看者在所述三维直播流内进行观看，所述观看者从一个或多个导航选项中至少选择一个。
8.根据权利要求7所述的引导观看者观看场景的三维直播流的方法，其特征在于：还包括向观看者展示所述场景的虚拟三维显示内容，以使观看者身临其境地感受到自己已成为虚拟三维显示内容的一部分的步骤。
9.根据权利要求7所述的引导观看者观看场景的三维直播流的方法，其特征在于：还包括以下步骤：
通过数据库存储和维护观看者的登录证书信息，多个场景的三维直播流，多个场景的多个扫描图像，观看者的历史观看记录，观看者的兴趣所在，一个或多个产品/服务的详细信息，各种展会或场景的信息，虚拟三维显示内容以及观看者在观看三维直播流时的一个或多个活动。
10.引导观看者观看场景的三维直播流的方法，其特征在于：包括以下步骤：
存储场景的多个三维扫描图像，其中，所述多个三维扫描图像由多个扫描仪捕捉以覆盖所述场景的360度视图；
从数据库中检索所述场景预先存储的多个扫描图像，并将所述场景的二维直播流与预先存储的多个三维扫描图像进行叠加以生成所述场景的三维直播流；
向观看者展示场景的三维直播流以及一个或多个导航选项，所述一个或多个导航选项用于引导观看者在所述三维直播流内进行观看，所述观看者从一个或多个导航选项中至少选择一个，所述导航选项包括向左移动、向右移动、向前移动、向后移动以及以360度视角观看场景的选项；
接收观看者所选择的导航选项，并引导观看者根据接收的导航选项观看场景的三维直播流。
CN201810083870.8A 2017-12-27 2018-01-29 引导观看者观看场景的三维直播流的***和方法 Pending CN108364353A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201762610548P 2017-12-27 2017-12-27
US62/610,548 2017-12-27

Publications (1)

Publication Number Publication Date
CN108364353A true CN108364353A (zh) 2018-08-03

Family

ID=63007468

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810083870.8A Pending CN108364353A (zh) 2017-12-27 2018-01-29 引导观看者观看场景的三维直播流的***和方法

Country Status (2)

Country Link
CN (1) CN108364353A (zh)
WO (1) WO2019128139A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109195020A (zh) * 2018-10-11 2019-01-11 三星电子（中国）研发中心 一种ar增强的游戏直播方法和***
CN111541907A (zh) * 2020-04-23 2020-08-14 腾讯科技（深圳）有限公司 物品显示方法、装置、设备及存储介质
CN111935494A (zh) * 2020-08-13 2020-11-13 上海识装信息科技有限公司 一种3d商品直播展示方法及***

Citations (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6335765B1 (en) * 1999-11-08 2002-01-01 Weather Central, Inc. Virtual presentation system and method
CN102708138A (zh) * 2012-03-12 2012-10-03 上海创图网络科技发展有限公司 虚拟博物馆***及其藏品展示方法
US20120256917A1 (en) * 2010-06-25 2012-10-11 Lieberman Stevan H Augmented Reality System
CN102880283A (zh) * 2011-07-14 2013-01-16 师源 将三维与二维数据相融合的交互式多媒体制作及播放***
CN104199874A (zh) * 2014-08-20 2014-12-10 哈尔滨工程大学 一种基于用户浏览行为的网页推荐方法
CN104253862A (zh) * 2014-09-12 2014-12-31 北京诺亚星云科技有限责任公司 基于数字全景的沉浸式互动导览支持服务***及设备
CN104969220A (zh) * 2012-12-06 2015-10-07 微软技术许可有限责任公司 沉浸式视图导航
CN105868303A (zh) * 2016-03-27 2016-08-17 北京图文天地文化艺术有限公司 一种虚拟3d场景互联网终端展览***及其使用方法
CN105931288A (zh) * 2016-04-12 2016-09-07 广州凡拓数字创意科技股份有限公司 数字展览馆构建方法及***
US20160321841A1 (en) * 2015-04-28 2016-11-03 Jonathan Christen Producing and consuming metadata within multi-dimensional data
CN106200900A (zh) * 2016-06-24 2016-12-07 北京奇思信息技术有限公司 基于识别区域在视频中触发虚拟现实交互的方法及***
CN106373148A (zh) * 2016-08-31 2017-02-01 中国科学院遥感与数字地球研究所 多路视频图像配准融合到三维数字地球***的设备及方法
CN106383576A (zh) * 2016-09-08 2017-02-08 北京美吉克科技发展有限公司 Vr环境中显示体验者身体局部的方法及***
CN106530408A (zh) * 2016-12-27 2017-03-22 苏州和云观博数字科技有限公司 博物馆临时展览规划设计的***
CN106648083A (zh) * 2016-12-09 2017-05-10 广州华多网络科技有限公司 增强演奏场景合成控制方法及装置
CN106797460A (zh) * 2014-09-22 2017-05-31 三星电子株式会社 三维视频的重建
CN106774910A (zh) * 2016-12-24 2017-05-31 深圳市虚拟现实技术有限公司 基于虚拟现实的街景实现方法和装置
CN106951093A (zh) * 2017-03-31 2017-07-14 联想(北京)有限公司 一种数据处理方法及装置
CN107018336A (zh) * 2017-04-11 2017-08-04 腾讯科技（深圳）有限公司 图像处理的方法和装置及视频处理的方法和装置
CN107103645A (zh) * 2017-04-27 2017-08-29 腾讯科技（深圳）有限公司 虚拟现实媒体文件生成方法及装置
CN107179830A (zh) * 2017-05-25 2017-09-19 努比亚技术有限公司 体感应用的信息处理方法、移动终端及存储介质
CN107291244A (zh) * 2017-07-04 2017-10-24 宁波美象信息科技有限公司 一种vr参观***

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106803283A (zh) * 2016-12-29 2017-06-06 东莞新吉凯氏测量技术有限公司 基于实体展馆的交互式三维全景多媒体虚拟展览方法

Patent Citations (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6335765B1 (en) * 1999-11-08 2002-01-01 Weather Central, Inc. Virtual presentation system and method
US20120256917A1 (en) * 2010-06-25 2012-10-11 Lieberman Stevan H Augmented Reality System
CN102880283A (zh) * 2011-07-14 2013-01-16 师源 将三维与二维数据相融合的交互式多媒体制作及播放***
CN102708138A (zh) * 2012-03-12 2012-10-03 上海创图网络科技发展有限公司 虚拟博物馆***及其藏品展示方法
CN104969220A (zh) * 2012-12-06 2015-10-07 微软技术许可有限责任公司 沉浸式视图导航
CN104199874A (zh) * 2014-08-20 2014-12-10 哈尔滨工程大学 一种基于用户浏览行为的网页推荐方法
CN104253862A (zh) * 2014-09-12 2014-12-31 北京诺亚星云科技有限责任公司 基于数字全景的沉浸式互动导览支持服务***及设备
CN106797460A (zh) * 2014-09-22 2017-05-31 三星电子株式会社 三维视频的重建
US20160321841A1 (en) * 2015-04-28 2016-11-03 Jonathan Christen Producing and consuming metadata within multi-dimensional data
CN105868303A (zh) * 2016-03-27 2016-08-17 北京图文天地文化艺术有限公司 一种虚拟3d场景互联网终端展览***及其使用方法
CN105931288A (zh) * 2016-04-12 2016-09-07 广州凡拓数字创意科技股份有限公司 数字展览馆构建方法及***
CN106200900A (zh) * 2016-06-24 2016-12-07 北京奇思信息技术有限公司 基于识别区域在视频中触发虚拟现实交互的方法及***
CN106373148A (zh) * 2016-08-31 2017-02-01 中国科学院遥感与数字地球研究所 多路视频图像配准融合到三维数字地球***的设备及方法
CN106383576A (zh) * 2016-09-08 2017-02-08 北京美吉克科技发展有限公司 Vr环境中显示体验者身体局部的方法及***
CN106648083A (zh) * 2016-12-09 2017-05-10 广州华多网络科技有限公司 增强演奏场景合成控制方法及装置
CN106774910A (zh) * 2016-12-24 2017-05-31 深圳市虚拟现实技术有限公司 基于虚拟现实的街景实现方法和装置
CN106530408A (zh) * 2016-12-27 2017-03-22 苏州和云观博数字科技有限公司 博物馆临时展览规划设计的***
CN106951093A (zh) * 2017-03-31 2017-07-14 联想(北京)有限公司 一种数据处理方法及装置
CN107018336A (zh) * 2017-04-11 2017-08-04 腾讯科技（深圳）有限公司 图像处理的方法和装置及视频处理的方法和装置
CN107103645A (zh) * 2017-04-27 2017-08-29 腾讯科技（深圳）有限公司 虚拟现实媒体文件生成方法及装置
CN107179830A (zh) * 2017-05-25 2017-09-19 努比亚技术有限公司 体感应用的信息处理方法、移动终端及存储介质
CN107291244A (zh) * 2017-07-04 2017-10-24 宁波美象信息科技有限公司 一种vr参观***

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
张峻珩: "增强现实技术针对产品展示的应用与实现", 《中国优秀硕士学位论文全文数据库信息科技辑》 *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109195020A (zh) * 2018-10-11 2019-01-11 三星电子（中国）研发中心 一种ar增强的游戏直播方法和***
CN109195020B (zh) * 2018-10-11 2021-07-02 三星电子（中国）研发中心 一种ar增强的游戏直播方法和***
CN111541907A (zh) * 2020-04-23 2020-08-14 腾讯科技（深圳）有限公司 物品显示方法、装置、设备及存储介质
CN111541907B (zh) * 2020-04-23 2023-09-22 腾讯科技（深圳）有限公司 物品显示方法、装置、设备及存储介质
CN111935494A (zh) * 2020-08-13 2020-11-13 上海识装信息科技有限公司 一种3d商品直播展示方法及***

Also Published As

Publication number Publication date
WO2019128139A1 (en) 2019-07-04

Similar Documents

Publication Publication Date Title
CN108447129A (zh) 一种在线三维编辑方法及***
US20180173404A1 (en) Providing a user experience with virtual reality content and user-selected, real world objects
US20160253843A1 (en) Method and system of management for switching virtual-reality mode and augmented-reality mode
KR20160112898A (ko) 증강현실 기반 동적 서비스 제공 방법 및 장치
CN108419090A (zh) 三维直播流展示***和方法
US20220415063A1 (en) Information playback method and device, computer readable storage medium, and electronic device
CN110874818B (zh) 图像处理和虚拟空间构建方法、装置、***和存储介质
US20080033641A1 (en) Method of generating a three-dimensional interactive tour of a geographic location
CN107911737A (zh) 媒体内容的展示方法、装置、计算设备及存储介质
JP2018163460A (ja) 情報処理装置、および情報処理方法、並びにプログラム
US20170214980A1 (en) Method and system for presenting media content in environment
CN108364353A (zh) 引导观看者观看场景的三维直播流的***和方法
WO2019105001A1 (en) Immersive display systems and methods
WO2019105003A1 (en) Data analysis systems and methods
WO2019119744A1 (en) Systems and methods for presenting a plan to a user
CN109313653A (zh) 增强媒体
CN108564427A (zh) 向观看虚拟三维展示的用户推荐产品或服务的***及方法
CN108364354A (zh) 基于人工智能的显示***和方法
WO2019119745A1 (en) Systems and methods for suggesting routes within a virtual 3d display
US20210049824A1 (en) Generating a mixed reality
JP6510116B2 (ja) 仮想オブジェクトの表示システムを用いた顧客把握システム、顧客把握システムプログラム及び顧客把握方法
CN108595463A (zh) 一种虚拟三维沉浸式显示***及方法
CN108388586A (zh) 一种信息管理***和方法
Solina New media art projects, panoramic images and live video as interface between real and virtual worlds
KR102471180B1 (ko) 증강현실 콘텐츠 서비스를 제공하는 시스템 및 서비스 제공 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20200330

Address after: 510000 Room 401, building B2, No.11 Kaiyuan Avenue, Huangpu District, Guangzhou City, Guangdong Province

Applicant after: GUANGDONG KANGYUN TECHNOLOGY Co.,Ltd.

Address before: 510000 Xingang East Road, Guangzhou, Guangzhou, Guangdong Province, No. 2433, 212, six

Applicant before: GUANGDONG GRANDEUR INTERNATIONAL EXHIBITION GROUP Co.,Ltd.

RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20180803