CN106446857A - 全景区域的信息处理方法和装置 - Google Patents

全景区域的信息处理方法和装置 Download PDF

Info

Publication number
CN106446857A
CN106446857A CN201610875597.3A CN201610875597A CN106446857A CN 106446857 A CN106446857 A CN 106446857A CN 201610875597 A CN201610875597 A CN 201610875597A CN 106446857 A CN106446857 A CN 106446857A
Authority
CN
China
Prior art keywords
information
entrance
panoramic
shows
show
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610875597.3A
Other languages
English (en)
Inventor
张继庆
蔡娜
刘洋
黄文明
李诗琪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Baidu Netcom Science and Technology Co Ltd
Original Assignee
Beijing Baidu Netcom Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Baidu Netcom Science and Technology Co Ltd filed Critical Beijing Baidu Netcom Science and Technology Co Ltd
Priority to CN201610875597.3A priority Critical patent/CN106446857A/zh
Publication of CN106446857A publication Critical patent/CN106446857A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/10—Geometric effects
    • G06T15/20—Perspective computation
    • G06T15/205—Image-based rendering
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/05—Geographic models
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/44—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/75—Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
    • G06V10/752—Contour matching
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04802—3D-info-object: information is displayed on the internal or external surface of a three dimensional manipulable object, e.g. on the faces of a cube that can be rotated by the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/04—Indexing scheme for image data processing or generation, in general involving 3D image data

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Geometry (AREA)
  • Multimedia (AREA)
  • Computing Systems (AREA)
  • Computer Graphics (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Evolutionary Computation (AREA)
  • Databases & Information Systems (AREA)
  • Artificial Intelligence (AREA)
  • Health & Medical Sciences (AREA)
  • Remote Sensing (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明公开了一种全景区域的信息处理方法和装置，其中，方法包括：根据预先训练的图像机器学习模型识别全景图片中的物体，获取所述物体在所述全景图片中的边缘参数信息；根据所述边缘参数信息在全景区域中渲染所述物体的信息展示入口；建立所述信息展示入口的坐标区域与展示信息的对应关系。该方法自动识别出全景图片中的物体，并通过物体本身来展现更丰富的信息，展现自然且成本较低。

Description

全景区域的信息处理方法和装置
技术领域
本发明涉及全景图像显示技术领域，尤其涉及一种全景区域的信息处理方法和装置。
背景技术
全景地图是由真实世界的照片拼接组成的，可真实、客观的反映某一位置周边的图像信息，且在全景地图中具有真实的三维空间的体验感，还可自由的旋转缩放展示的全景图片等。因而，全景地图在用户日常生产和生活中得到了广泛的应用。
然而，全景地图提供的图片，虽然能客观真实的反应周边的图像信息，但是提供的信息仅仅基于全景图像的本身，当用户在全景图像中触发门窗等物体对应的图片时，无法模拟真实世界进行场景的切换，提供的信息有限。
发明内容
本发明的目的旨在至少在一定程度上解决上述的技术问题之一。
为此，本发明的第一个目的在于提出一种全景区域的信息处理方法，该方法自动识别出全景图片中的物体，并通过物体本身来展现更丰富的景物信息，展现自然且成本较低。
本发明的第二个目的在于提出一种全景区域的信息处理装置。
本发明的第三个目的在于提出另一种全景区域的信息处理装置。
本发明的第四个目的在于提出一种非临时性计算机可读存储介质。
本发明的第五个目的在于提出一种计算机程序产品。
为达上述目的，本发明第一方面实施例的全景区域的信息处理方法，包括：根据预先训练的图像机器学习模型识别全景图片中的物体，获取所述物体在所述全景图片中的边缘参数信息；
根据所述边缘参数信息在全景区域中渲染所述物体的信息展示入口；
建立所述信息展示入口的坐标区域与展示信息的对应关系。
本发明实施例的全景区域的信息处理方法，根据预先训练的图像机器学习模型识别全景图片中的物体，并获取物体在全景图片中的边缘参数信息，进而根据边缘参数信息在全景区域中渲染物体的信息展示入口，并建立信息展示入口的坐标区域与展示信息的对应关系。由此，可自动识别出全景图片中的物体，并通过物体本身来展现更丰富的景物信息，展现自然且成本较低。
另外，本发明实施例的全景区域的信息处理方法，还具有如下附加的技术特征：
在本发明的一个实施例中，所述根据预先训练的图像机器学习模型识别全景图片中的物体，包括：
对所述全景图片进行边缘检测处理，获取待识别物体的第一参数；
根据所述图像机器学习模型中的第二参数与所述第一参数进行匹配，识别所述全景图片中的物体。
在本发明的一个实施例中，所述根据所述边缘参数信息在全景区域中渲染所述物体的信息展示入口，包括：
根据预设的转换坐标和根据所述边缘参数信息将所述物体从所述全景图片中投影显示到所述全景区域中；
按照预设的图像处理算法渲染所述物体的信息展示入口。
在本发明的一个实施例中，在所述建立所述信息展示入口的坐标区域与展示信息的对应关系之后，还包括：
获取用户对所述全景区域进行触控操作的点击坐标；
确定与所述点击坐标对应物体的信息展示入口；
根据所述对应关系向所述用户显示与所述信息展示入口对应的展示信息。
在本发明的一个实施例中，根据所述对应关系向所述用户显示与所述信息展示入口对应的展示信息，包括：
若所述信息展示入口为房门，则向所述用户显示室内全景；或，
若所述信息展示入口为电视机，则向所述用户显示预设的视频信息；或，
若所述信息展示入口为家具，则向所述用户显示预设的广告信息。
为达上述目的，本发明第二方面实施例的全景区域的信息处理装置，包括：识别模块，用于根据预先训练的图像机器学习模型识别全景图片中的物体；
第一获取模块，用于获取所述物体在所述全景图片中的边缘参数信息；
渲染模块，用于根据所述边缘参数信息在全景区域中渲染所述物体的信息展示入口；
建立模块，用于建立所述信息展示入口的坐标区域与展示信息的对应关系。
本发明实施例的全景区域的信息处理装置，根据预先训练的图像机器学习模型识别全景图片中的物体，并获取物体在全景图片中的边缘参数信息，进而根据边缘参数信息在全景区域中渲染物体的信息展示入口，并建立信息展示入口的坐标区域与展示信息的对应关系。由此，可自动识别出全景图片中的物体，并通过物体本身来展现更丰富的景物信息，展现自然且成本较低。
另外，本发明实施例的全景区域的信息处理装置，还具有如下附加的技术特征：
在本发明的一个实施例中，所述识别模块包括：
获取单元，用于对所述全景图片进行边缘检测处理，获取待识别物体的第一参数；
识别单元，用于根据所述图像机器学习模型中的第二参数与所述第一参数进行匹配，识别所述全景图片中的物体。
在本发明的一个实施例中，所述渲染模块包括：
投影单元，用于根据预设的转换坐标和根据所述边缘参数信息将所述物体从所述全景图片中投影显示到所述全景区域中；
渲染单元，用于按照预设的图像处理算法渲染所述物体的信息展示入口。
在本发明的一个实施例中，还包括：
第二获取模块，用于获取用户对所述全景区域进行触控操作的点击坐标；
确定模块，用于确定与所述点击坐标对应物体的信息展示入口；
显示模块，用于根据所述对应关系向所述用户显示与所述信息展示入口对应的展示信息。
在本发明的一个实施例中，所述显示模块用于：若所述信息展示入口为房门，则向所述用户显示室内全景；或，
若所述信息展示入口为电视机，则向所述用户显示预设的视频信息；或，
若所述信息展示入口为家具，则向所述用户显示预设的广告信息。
为了实现上述实施例，本发明第三方面实施例提出了另一种全景区域的信息处理装置，包括：
处理器；
用于存储处理器可执行指令的存储器；
其中，所述处理器被配置为：
根据预先训练的图像机器学习模型识别全景图片中的物体，获取所述物体在所述全景图片中的边缘参数信息；
根据所述边缘参数信息在全景区域中渲染所述物体的信息展示入口；
建立所述信息展示入口的坐标区域与展示信息的对应关系。
为了实现上述实施例，本发明第四方面实施例提出了一种非临时性计算机可读存储介质，当所述存储介质中的指令由移动终端的处理器被执行时，使得移动终端能够执行一种全景区域的信息处理方法，所述方法包括：
根据预先训练的图像机器学习模型识别全景图片中的物体，获取所述物体在所述全景图片中的边缘参数信息；
根据所述边缘参数信息在全景区域中渲染所述物体的信息展示入口；
建立所述信息展示入口的坐标区域与展示信息的对应关系。
为了实现上述实施例，本发明第五方面实施例提出了一种计算机程序产品，当所述计算机程序产品中的指令处理器执行时，执行一种全景区域的信息处理方法，所述方法包括：
根据预先训练的图像机器学习模型识别全景图片中的物体，获取所述物体在所述全景图片中的边缘参数信息；
根据所述边缘参数信息在全景区域中渲染所述物体的信息展示入口；
建立所述信息展示入口的坐标区域与展示信息的对应关系。
本发明附加的方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。
附图说明
本发明的上述和/或附加的方面和优点从结合下面附图对实施例的描述中将变得明显和容易理解，其中：
图1是根据本发明一个实施例的全景区域的信息处理方法的流程图；
图2是根据本发明另一个实施例的全景区域的信息处理方法的流程图；
图3是根据本发明一个实施例的坐标区域与信息展示入口对应界面示意图；
图4是根据本发明一个实施例的全景区域的信息处理装置的结构示意图；
图5是根据本发明另一个实施例的全景区域的信息处理装置的结构示意图；
图6是根据本发明又一个实施例的全景区域的信息处理装置的结构示意图；以及
图7是根据本发明还一个实施例的全景区域的信息处理装置的结构示意图。
具体实施方式
下面详细描述本发明的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，旨在用于解释本发明，而不能理解为对本发明的限制。
目前，随着全景地图越来越广泛的应用，全景浸入式体验越来越受到关注，即如何基于全景地图中相关物体的图片，为用户提供更加丰富的信息，成为提高全境体验感的关键。
相关技术中，通过在全景地图中添加标记的方式，提醒用户该区域有对应的信息，从而用户可通过点击该标记获知相关信息。
然而，在全景地图中添加标记影响全景地图的美观，不能完美的和全景地图进行融合，且当前在全景地图中，基本基于人工作业确定标记位置，成本较高，操作复杂。
为了解决上述问题，本发明提出了一种全景区域的信息处理方法，可自动识别出全景图片中的物体，并通过物体本身来展现更丰富的景物信息，成本较低且实现便捷。具体如下：
图1是根据本发明一个实施例的全景区域的信息处理方法的流程图，如图1所示，该方法包括：
S110，根据预先训练的图像机器学习模型识别全景图片中的物体，获取物体在全景图片中的边缘参数信息。
具体地，识别全景图片中可连接相关信息的物体，比如识别全景图片中的门窗、电视机、电脑、家具等。
需要说明的是，根据具体应用场景的不同，可采样不同的方式确定全景图片中的物体，下面举例说明：
第一种示例，可采用图像识别的方式，通过识别全景区域中物体的图像的像素等参数，识别出全景图片中的物体，比如可通过识别全景物体中门的图像像素等参数，识别出全景区域中的门等。
第二种示例，可预先建立图像机器学习模型，进而根据预先训练的机器学习模型识别全景图片中的物体。
应当理解的是，在本示例中，根据预先训练的机器学习模型识别全景图片中的物体的过程，与图像机器模型包含的内容有关，如果图像机器模型中包括大量物体的边缘的长度、形状等参数，则可通过识别全景图片中的物体的边缘参数识别物体。
具体而言，可对全景图片进行边缘检测处理，获取待识别物体的第一参数，进而根据图像机器学习模型中的第二参数与第一参数进行匹配，如果第二参数与第一参数的匹配度超过一定值，则识别全景图片中的物体。
比如，如果对全景图片边缘检测处理时，某个待识别物体边缘长度、形状、以及围绕面积的大小等参数，与图像机器学习模型中的门的边缘长度、形状、以及围绕面积的大小等参的相似度为99％，则识别出全景图片中的门。
进一步地，在识别出全景图片中的物体后，为了实现基于该物体所在区域展示信息，获取物体在全景图片中的边缘参数信息，其中，边缘参数信息可包括边缘的坐标、长度等参数。
S120，根据边缘参数信息在全景区域中渲染物体的信息展示入口。
具体地，为了方便基于该物体所在区域，获知相关信息，根据边缘参数信息在全景区域中渲染物体的信息展示入口，从而用户可直观的看到在该物体上，点击哪个位置以获取相关信息。
需要注意的是，在实际应用中，一个物体的信息展示入口可以为一个，也可以为多个，不同的信息展示入口可对应于不同的信息。比如，对于物体门，如果门上有三个信息展示入口，则入口A可对应于门的广告信息、入口B可对应于门后的风景信息、入口C可对应于门后的走廊信息等。
其中，为了使得用户直观的获知信息展示入口的具***置，可采用不同的处理方式对该信息展示入口进行渲染，比如可对该信息入口进行高亮显示，立体突出显示等，在此不一一列举。
需要说明的是，在不同的应用场景下，根据边缘参数信息在全景区域中确定物体的信息展示入口的方式不同，举例如下：
作为一种示例，可预先设置边缘参数信息与全景区域的映射关系，比如预先设置边缘坐标与全景区域坐标的映射关系，从而根据预设的转换坐标，以及根据边缘参数信息获取物体在全景区域中的位置，并将物体从全景区域中投影显示到全景区域中。
进而，按照预设的图像处理算法渲染出物体的信息展示入口，比如，根据预设的高亮处理算法，高亮显示物体的信息展示入口，又比如，根据预设的动画处理算法，立体凸出显示物体的信息展示入口等。
S130，建立信息展示入口的坐标区域与展示信息的对应关系。
具体地，建立信息展示入口的坐标区域的与展示信息的对应关系，从而可在检测到用户触发该信息展示入口的坐标区域后，查询上述对应关系，获取并展示对应的信息。
其中，应当理解的是，信息展示入口的坐标区域的大小，可根据信息展示入口的数量以及物体的区域的大小进行设置，为了用户的触发方便，坐标区域的对应的大小和形状均可调。
举例而言，如果门上对应于一个信息展示入口，建立整个门所在区域的坐标与门后的风景信息对应。
综上所述，本发明实施例的全景区域的信息处理方法，根据预先训练的图像机器学习模型识别全景图片中的物体，并获取物体在全景图片中的边缘参数信息，进而根据边缘参数信息在全景区域中渲染物体的信息展示入口，并建立信息展示入口的坐标区域与展示信息的对应关系。由此，可自动识别出全景图片中的物体，并通过物体本身来展现更丰富的景物信息，展现自然且成本较低。
基于以上实施例，为了更加清楚的描述本发明实施例的全景区域的信息处理方法，下面结合在全景区域中获取物体对应的信息中，前端展现的具体执行过程，进行说明：
图2是根据本发明另一个实施例的全景区域的信息处理方法的流程图，如图2所示，在上述步骤S130后，该方法还包括：
S210，获取用户对全景区域进行触控操作的点击坐标。
具体地，为了根据用户意图像向用户提供相关信息，获取用户在全景区域进行触控操作的点击坐标。
其中，上述触控操作可以是单击、双击等操作，其根据触控操作获取点击坐标可由现有算法计算获取，在此不再赘述。
S220，确定与点击坐标对应物体的信息展示入口。
具体地，由于物体上的坐标区域与信息展示入口相对应，因而信息展示入口与该坐标区域中任一点的坐标对应，从而可通过点击坐标确定与其对应物体的信息展示入口。
举例而言，如图3所示，门上的坐标区域A与广告信息展示入口对应，从而当获取用户在全景区域点击的a点对应的点击坐标后，如果a点位于坐标区域A内，则确定与该点击坐标对应的信息展示入口为门。
S230，根据对应关系向用户显示与信息展示入口对应的展示信息。
具体地，信息展示入口与展示信息的对应关系，向用户显示与信息展示入口对应的展示信息。
在本发明的一个实施例中，若信息展示入口为房门，则向用户显示室内全景。
在本发明的一个实施例中，若信息展示入口为电视机，则向用户显示预设的视频信息。
在本发明的一个实施例中，若信息展示入口为家具；则向用户显示预设的广告信息。
综上所述，本发明实施例的全景区域的信息处理方法，获取用户对全景区域进行触控操作的点击坐标，确定与点击坐标对应物体的信息展示入口，以根据对应关系向用户显示与信息展示入口对应的展示信息。由此，根据用户对相关物体的点击，通过物体本身来向用户展现更丰富的景物信息，展现自然且成本较低，提升了用户体验。
为了实现上述实施例，本发明还提出了一种全景区域的信息处理装置，图4是根据本发明一个实施例的全景区域的信息处理装置的结构示意图，如图4所示，该全景区域的信息处理装置可包括识别模块10、第一获取模块20、渲染模块30和建立模块40。
其中，识别模块10，用于根据预先训练的图像机器学习模型识别全景图片中的物体。
在本发明的一个实施例中，图5是根据本发明另一个实施例的全景区域的信息处理装置的结构示意图，如图5所示，在如图4所示的基础上，识别模块10包括获取单元11和识别单元12。
其中，获取单元11，用于对全景图片进行边缘检测处理，获取待识别物体的第一参数。
识别单元12，用于根据图像机器学习模型中的第二参数与第一参数进行匹配，识别全景图片中的物体。
第一获取模块20，用于获取物体在全景图片中的边缘参数信息。
渲染模块30，用于根据边缘参数信息在全景区域中渲染物体的信息展示入口。
在本发明的一个实施例中，图6是根据本发明又一个实施例的全景区域的信息处理装置的结构示意图，如图6所示，在如图4所示的基础上，渲染模块30包括投影单元31和渲染单元32。
其中，投影单元31，用于根据预设的转换坐标和根据边缘参数信息将物体从全景图片中投影显示到全景区域中。
渲染单元32，用于按照预设的图像处理算法渲染物体的信息展示入口。
建立模块40，用于建立信息展示入口的坐标区域与展示信息的对应关系。
需要说明的是，前述对全景区域的信息处理方法的解释说明，也适用于本发明实施例的全景区域的信息处理装置，对于本发明全景区域的信息处理装置实施例中未披露的细节，在此不再赘述。
综上所述，本发明实施例的全景区域的信息处理装置，根据预先训练的图像机器学习模型识别全景图片中的物体，并获取物体在全景图片中的边缘参数信息，进而根据边缘参数信息在全景区域中渲染物体的信息展示入口，并建立信息展示入口的坐标区域与展示信息的对应关系。由此，可自动识别出全景图片中的物体，并通过物体本身来展现更丰富的景物信息，展现自然且成本较低。
基于以上实施例，为了更加清楚的描述本发明实施例的全景区域的信息处理装置，下面结合在全景区域中获取物体对应的信息中，前端展现的具体执行过程，进行说明：
图7是根据本发明还一个实施例的全景区域的信息处理装置的结构示意图，如图7所示，在如图4所示的基础上，该全景区域的信息处理装置还包括第二获取模块50、确定模块60和显示模块70。
其中，第二获取模块50，用于获取用户对全景区域进行触控操作的点击坐标。
确定模块60，用于确定与点击坐标对应物体的信息展示入口。
显示模块70，用于根据对应关系向用户显示与信息展示入口对应的展示信息。
在本发明的一个实施例中，若信息展示入口为房门，则显示模块70向用户显示室内全景。
在本发明的一个实施例中，若信息展示入口为电视机，则显示模块70向用户显示预设的视频信息。
在本发明的一个实施例中，若信息展示入口为家具，则显示模块70向用户显示预设的广告信息。
需要说明的是，前述对全景区域的信息处理方法的解释说明，也适用于本发明实施例的全景区域的信息处理装置，对于本发明全景区域的信息处理装置实施例中未披露的细节，在此不再赘述。
综上所述，本发明实施例的全景区域的信息处理装置，获取用户对全景区域进行触控操作的点击坐标，确定与点击坐标对应物体的信息展示入口，以根据对应关系向用户显示与信息展示入口对应的展示信息。由此，根据用户对相关物体的点击，通过物体本身来向用户展现更丰富的景物信息，展现自然且成本较低，提升了用户体验。
此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本发明的描述中，“多个”的含义是至少两个，例如两个，三个等，除非另有明确具体的限定。
在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
尽管上面已经示出和描述了本发明的实施例，可以理解的是，上述实施例是示例性的，不能理解为对本发明的限制，本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (10)

1.一种全景区域的信息处理方法，其特征在于，包括：
根据预先训练的图像机器学习模型识别全景图片中的物体，获取所述物体在所述全景图片中的边缘参数信息；
根据所述边缘参数信息在全景区域中渲染所述物体的信息展示入口；
建立所述信息展示入口的坐标区域与展示信息的对应关系。
2.如权利要求1所述的方法，其特征在于，所述根据预先训练的图像机器学习模型识别全景图片中的物体，包括：
对所述全景图片进行边缘检测处理，获取待识别物体的第一参数；
根据所述图像机器学习模型中的第二参数与所述第一参数进行匹配，识别所述全景图片中的物体。
3.如权利要求1所述的方法，其特征在于，所述根据所述边缘参数信息在全景区域中渲染所述物体的信息展示入口，包括：
根据预设的转换坐标和根据所述边缘参数信息将所述物体从所述全景图片中投影显示到所述全景区域中；
按照预设的图像处理算法渲染所述物体的信息展示入口。
4.如权利要求1所述的方法，其特征在于，在所述建立所述信息展示入口的坐标区域与展示信息的对应关系之后，还包括：
获取用户对所述全景区域进行触控操作的点击坐标；
确定与所述点击坐标对应物体的信息展示入口；
根据所述对应关系向所述用户显示与所述信息展示入口对应的展示信息。
5.如权利要求4所述的方法，其特征在于，根据所述对应关系向所述用户显示与所述信息展示入口对应的展示信息，包括：
若所述信息展示入口为房门，则向所述用户显示室内全景；或，
若所述信息展示入口为电视机，则向所述用户显示预设的视频信息；或，
若所述信息展示入口为家具，则向所述用户显示预设的广告信息。
6.一种全景区域的信息处理装置，其特征在于，包括：
识别模块，用于根据预先训练的图像机器学习模型识别全景图片中的物体；
第一获取模块，用于获取所述物体在所述全景图片中的边缘参数信息；
渲染模块，用于根据所述边缘参数信息在全景区域中渲染所述物体的信息展示入口；
建立模块，用于建立所述信息展示入口的坐标区域与展示信息的对应关系。
7.如权利要求6所述的装置，其特征在于，所述识别模块包括：
获取单元，用于对所述全景图片进行边缘检测处理，获取待识别物体的第一参数；
识别单元，用于根据所述图像机器学习模型中的第二参数与所述第一参数进行匹配，识别所述全景图片中的物体。
8.如权利要求6所述的装置，其特征在于，所述渲染模块包括：
投影单元，用于根据预设的转换坐标和根据所述边缘参数信息将所述物体从所述全景图片中投影显示到所述全景区域中；
渲染单元，用于按照预设的图像处理算法渲染所述物体的信息展示入口。
9.如权利要求6所述的装置，其特征在于，还包括：
第二获取模块，用于获取用户对所述全景区域进行触控操作的点击坐标；
确定模块，用于确定与所述点击坐标对应物体的信息展示入口；
显示模块，用于根据所述对应关系向所述用户显示与所述信息展示入口对应的展示信息。
10.如权利要求9所述的装置，其特征在于，所述显示模块用于：
若所述信息展示入口为房门，则向所述用户显示室内全景；或，
若所述信息展示入口为电视机，则向所述用户显示预设的视频信息；或，
若所述信息展示入口为家具，则向所述用户显示预设的广告信息。
CN201610875597.3A 2016-09-30 2016-09-30 全景区域的信息处理方法和装置 Pending CN106446857A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610875597.3A CN106446857A (zh) 2016-09-30 2016-09-30 全景区域的信息处理方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610875597.3A CN106446857A (zh) 2016-09-30 2016-09-30 全景区域的信息处理方法和装置

Publications (1)

Publication Number Publication Date
CN106446857A true CN106446857A (zh) 2017-02-22

Family

ID=58172898

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610875597.3A Pending CN106446857A (zh) 2016-09-30 2016-09-30 全景区域的信息处理方法和装置

Country Status (1)

Country Link
CN (1) CN106446857A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107832036A (zh) * 2017-11-22 2018-03-23 北京小米移动软件有限公司 语音控制方法、装置及计算机可读存储介质
CN108061359A (zh) * 2017-11-08 2018-05-22 珠海格力电器股份有限公司 空调控制方法及装置
CN108520263A (zh) * 2018-03-29 2018-09-11 优酷网络技术（北京）有限公司 一种全景图像的识别方法、***及计算机存储介质
CN112632181A (zh) * 2020-12-21 2021-04-09 北京百度网讯科技有限公司 地图显示方法、装置、设备、存储介质和终端设备
CN113361306A (zh) * 2020-03-06 2021-09-07 顺丰科技有限公司 场景数据的展示方法、装置、设备及存储介质

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101231786A (zh) * 2007-12-28 2008-07-30 北京航空航天大学 一种基于视频图像特征的车辆检测方法
CN101506764A (zh) * 2006-08-25 2009-08-12 微软公司 全景环形用户界面
CN101655979A (zh) * 2009-08-20 2010-02-24 长宽高（北京）科技有限公司 三维场景中扩展全景应用的方法
CN102457678A (zh) * 2010-10-21 2012-05-16 佳能株式会社 显示控制装置和显示控制方法
CN103426100A (zh) * 2012-05-25 2013-12-04 高炬 用于互联网商品展示的3d虚拟展馆展示方法
US8761498B1 (en) * 2012-01-26 2014-06-24 Google Inc. Face and license plate detection in street level images with 3-D road width features estimated from laser data
CN104700185A (zh) * 2013-12-06 2015-06-10 大连灵动科技发展有限公司 指挥与培训演练***的重大危险源管理方法
CN104859538A (zh) * 2013-10-22 2015-08-26 通用汽车环球科技运作有限责任公司 车辆图像显示***中基于视觉的物体感测和突出显示
CN105426170A (zh) * 2015-10-29 2016-03-23 深圳市尊豪网络科技有限公司 一种信息推送方法和信息推送装置

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101506764A (zh) * 2006-08-25 2009-08-12 微软公司 全景环形用户界面
CN101231786A (zh) * 2007-12-28 2008-07-30 北京航空航天大学 一种基于视频图像特征的车辆检测方法
CN101655979A (zh) * 2009-08-20 2010-02-24 长宽高（北京）科技有限公司 三维场景中扩展全景应用的方法
CN102457678A (zh) * 2010-10-21 2012-05-16 佳能株式会社 显示控制装置和显示控制方法
US8761498B1 (en) * 2012-01-26 2014-06-24 Google Inc. Face and license plate detection in street level images with 3-D road width features estimated from laser data
CN103426100A (zh) * 2012-05-25 2013-12-04 高炬 用于互联网商品展示的3d虚拟展馆展示方法
CN104859538A (zh) * 2013-10-22 2015-08-26 通用汽车环球科技运作有限责任公司 车辆图像显示***中基于视觉的物体感测和突出显示
CN104700185A (zh) * 2013-12-06 2015-06-10 大连灵动科技发展有限公司 指挥与培训演练***的重大危险源管理方法
CN105426170A (zh) * 2015-10-29 2016-03-23 深圳市尊豪网络科技有限公司 一种信息推送方法和信息推送装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
栾悉道: "《多媒体情报处理技术》", 31 May 2016 *
赵婕: "《图像特征提取与语义分析》", 31 July 2015 *

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108061359A (zh) * 2017-11-08 2018-05-22 珠海格力电器股份有限公司 空调控制方法及装置
CN107832036A (zh) * 2017-11-22 2018-03-23 北京小米移动软件有限公司 语音控制方法、装置及计算机可读存储介质
CN107832036B (zh) * 2017-11-22 2022-01-18 北京小米移动软件有限公司 语音控制方法、装置及计算机可读存储介质
CN108520263A (zh) * 2018-03-29 2018-09-11 优酷网络技术（北京）有限公司 一种全景图像的识别方法、***及计算机存储介质
CN108520263B (zh) * 2018-03-29 2020-08-25 阿里巴巴（中国）有限公司 一种全景图像的识别方法、***及计算机存储介质
CN113361306A (zh) * 2020-03-06 2021-09-07 顺丰科技有限公司 场景数据的展示方法、装置、设备及存储介质
CN112632181A (zh) * 2020-12-21 2021-04-09 北京百度网讯科技有限公司 地图显示方法、装置、设备、存储介质和终端设备
CN112632181B (zh) * 2020-12-21 2024-02-06 北京百度网讯科技有限公司 地图显示方法、装置、设备、存储介质和终端设备

Similar Documents

Publication Publication Date Title
US20220382379A1 (en) Touch Free User Interface
CN106446857A (zh) 全景区域的信息处理方法和装置
CN110650368B (zh) 视频处理方法、装置和电子设备
Oufqir et al. ARKit and ARCore in serve to augmented reality
CN108876934B (zh) 关键点标注方法、装置和***及存储介质
Grasset et al. Image-driven view management for augmented reality browsers
CN108668050B (zh) 基于虚拟现实的视频拍摄方法和装置
CN112684894A (zh) 增强现实场景的交互方法、装置、电子设备及存储介质
CN106447788B (zh) 观看视角的指示方法及装置
CN108765270B (zh) 一种虚拟三维空间标签绑定方法及装置
JP2006236013A (ja) 環境的情報提示装置、環境的情報提示方法およびこの方法のプログラム
CN106204746B (zh) 一种可实现3d模型实时上色的增强现实***
CN102945563A (zh) 一种全景视频的展示与交互***及方法
US20110069869A1 (en) System and method for defining an activation area within a representation scenery of a viewer interface
TW201710646A (zh) 描繪大視場內容一部份時，決定導航資訊之方法和裝置，以及大視場內容描繪器
CN104680532A (zh) 一种对象标注方法及装置
CN109582122A (zh) 增强现实信息提供方法、装置及电子设备
CN110909439A (zh) 一种基于ar的装配方法、装置及终端
CN111598996B (zh) 一种基于ar技术的物品3d模型展示方法和***
CN114387445A (zh) 对象关键点识别方法及装置、电子设备和存储介质
CN116682293A (zh) 基于增强现实和机器视觉的实验教学***
CN114445525A (zh) 虚拟对象的显示方法、装置及电子设备
CN109885172B (zh) 一种基于增强现实ar的对象互动展示方法及***
CN112509152A (zh) 一种基于ar技术的看车方法、***、设备及可读介质
CN108628453B (zh) 虚拟现实图像显示方法及终端

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20170222