CN105301585A - 信息展示方法及装置 - Google Patents

Abstract

本公开揭示了一种信息展示方法及装置，属于近场识别技术领域。所述方法用于包括雷达组件和摄像组件的终端中，包括：获取所述雷达组件对指定区域进行探测获得的，所述指定区域内的各个物体各自对应的雷达数据；获取所述摄像组件对所述指定区域进行拍摄获得的，所述各个物体各自对应的图像数据；将对应同一物体的雷达数据和图像数据关联为同一组数据；将相关联的各组雷达数据和图像数据进行聚合展示。本公开通过将同一个物体的雷达数据和图像数据聚合在一起进行展示，使用户能够直观的感受到物体的影像以及物体相对于终端的位置，达到扩展近场识别结果的展示方式，提高展示效果和用户体验的效果。

Description

信息展示方法及装置

技术领域

本公开涉及近场识别技术领域，特别涉及一种信息展示方法及装置。

背景技术

雷达与摄像头相结合的识别技术是一种近场识别技术，在泊车辅助***中的应用较为广泛。

在相关技术中，泊车辅助***通常包括设置在汽车后部的倒车雷达和后视摄像头，在倒车时，后视摄像头将拍摄到的图像展示在汽车的中控显示屏中，同时倒车雷达扫描汽车后方一定角度内的物体。当倒车雷达扫描到汽车后方存在障碍物，且障碍物与汽车之间的距离小于一定的阈值时，通过语音或蜂鸣提醒用户注意倒车安全。

发明内容

本公开提供了一种信息展示方法及装置。所述技术方案如下：

根据本公开的第一方面，提供一种信息展示方法，用于包括雷达组件和摄像组件的终端中，所述方法包括：

获取所述雷达组件对指定区域进行探测获得的，所述指定区域内的各个物体各自对应的雷达数据；

获取所述摄像组件对所述指定区域进行拍摄获得的，所述各个物体各自对应的图像数据；

将对应同一物体的雷达数据和图像数据关联为同一组数据；

将相关联的各组雷达数据和图像数据进行聚合展示。

可选的，所述雷达数据和所述图像数据包括各自对应的物体相对于所述终端的位置信息，所述将对应同一物体的雷达数据和图像数据关联为同一组数据，包括：

将相对于所述终端的位置信息相同的一组雷达数据和图像数据关联为同一组数据。

可选的，所述雷达数据中包括对应物体的形状、大小以及相对于所述终端的位置信息，所述图像数据中包括对应物体的图像；所述将相关联的各组雷达数据和图像数据进行聚合展示，包括：

根据对应物体的形状、大小以及相对于所述终端的位置信息在可视化界面中展示所述对应物体的轮廓图形；

根据相关联的雷达数据和图像数据，对应所述对应物体的轮廓图形展示所述对应物体的图像。

可选的，所述雷达数据中包括对应物体相对于所述终端的位置信息，所述图像数据中包括对应物体的图像；所述将相关联的各组雷达数据和图像数据分别进行聚合展示，包括：

根据对应物体的图像进行图像识别，确定所述对应物体的名称信息；

根据相关联的雷达数据和图像数据，在同一条语音消息内展示所述对应物体相对于所述终端的位置信息以及所述对应物体的名称信息。

可选的，所述图像数据中包括对应物体的图像，所述方法还包括：

在接收到查询所述各个物体中的至少一个物体的详情信息的指令时，根据所述至少一个物体对应的图像进行图像识别；

根据图像识别的结果从网络侧查询所述至少一个物体的详情信息；

展示所述至少一个物体的详情信息。

可选的，所述雷达数据和所述图像数据中的至少一种包括对应物体相对于所述终端的位置信息，所述图像数据中包括对应物体的图像，所述方法还包括：

根据对应物体的图像识别所述对应物体；

确定预先与所述对应物体相关联的隐藏物体；

获取所述隐藏物体对应的隐藏信息，所述隐藏信息包括所述隐藏物体相对于所述对应物体的位置信息以及所述隐藏物体的名称信息；

根据所述对应物体相对于所述终端的位置信息以及所述隐藏物体相对于所述对应物体的位置信息确定所述隐藏物体相对于所述终端的位置信息；

在同一条消息内展示所述隐藏物体相对于所述终端的位置信息以及所述隐藏物体的名称信息。

可选的，所述方法还包括：

确定未关联物体，所述未关联物体是所述指定区域中，仅被所述雷达组件和所述摄像组件中的一个组件探测或拍摄到的物体；

展示所述未关联物体的信息；

其中，当所述未关联物体是被所述雷达组件探测到的物体时，所述未关联物体的信息包括所述未关联物体的雷达数据；当所述未关联物体是被所述摄像组件拍摄到的物体时，所述未关联物体的信息包括所述未关联物体的图像数据。

根据本公开的第二方面，提供一种信息展示装置，用于包括雷达组件和摄像组件的终端中，所述装置包括：

雷达数据获取模块，用于获取所述雷达组件对指定区域进行探测获得的，所述指定区域内的各个物体各自对应的雷达数据；

图像数据获取模块，用于获取所述摄像组件对所述指定区域进行拍摄获得的，所述各个物体各自对应的图像数据；

关联模块，用于将对应同一物体的雷达数据和图像数据关联为同一组数据；

第一展示模块，用于将相关联的各组雷达数据和图像数据进行聚合展示。

可选的，所述关联模块，用于将相对于所述终端的位置信息相同的一组雷达数据和图像数据关联为同一组数据；

其中，所述雷达数据和所述图像数据包括各自对应的物体相对于所述终端的位置信息。

可选的，所述第一展示模块，包括：

第一展示子模块，用于根据对应物体的形状、大小以及相对于所述终端的位置信息在可视化界面中展示所述对应物体的轮廓图形；

第二展示子模块，用于根据相关联的雷达数据和图像数据，对应所述对应物体的轮廓图形展示所述对应物体的图像；

其中，所述雷达数据中包括对应物体的形状、大小以及相对于所述终端的位置信息，所述图像数据中包括对应物体的图像。

可选的，所述第一展示模块，包括：

识别子模块，用于对于根据对应物体的图像进行图像识别，确定所述对应物体的名称信息；

第三展示子模块，用于根据相关联的雷达数据和图像数据，在同一条语音消息内展示所述对应物体相对于所述终端的位置信息以及所述对应物体的名称信息；

其中，所述雷达数据中包括对应物体相对于所述终端的位置信息，所述图像数据中包括对应物体的图像。

可选的，所述装置还包括：

第一识别模块，用于在接收到查询所述各个物体中的至少一个物体的详情信息的指令时，根据所述至少一个物体对应的图像进行图像识别；

查询模块，用于根据图像识别的结果从网络侧查询所述至少一个物体的详情信息；

第二展示模块，用于展示所述至少一个物体的详情信息；

其中，所述图像数据中包括对应物体的图像。

可选的，所述装置还包括：

第二识别模块，用于根据对应物体的图像识别所述对应物体；

隐藏物体确定模块，用于确定预先与所述对应物体相关联的隐藏物体；

信息获取模块，用于获取所述隐藏物体对应的隐藏信息，所述隐藏信息中包括所述隐藏物体相对于所述对应物体的位置信息以及所述隐藏物体的名称信息；

位置确定模块，用于根据所述对应物体相对于所述终端的位置信息以及所述隐藏物体相对于所述对应物体的位置信息确定所述隐藏物体相对于所述终端的位置信息；

第三展示模块，用于在同一条消息内展示所述隐藏物体相对于所述终端的位置信息以及所述隐藏物体的名称信息；

其中，所述雷达数据和所述图像数据中的至少一种包括对应物体相对于所述终端的位置信息，所述图像数据中包括对应物体的图像。

可选的，所述装置还包括：

未关联物体确定模块，用于确定未关联物体，所述未关联物体是所述指定区域中，仅被所述雷达组件和所述摄像组件中的一个组件探测或拍摄到的物体；

第四展示模块，用于展示所述未关联物体的信息；

其中，当所述未关联物体是被所述雷达组件探测到的物体时，所述未关联物体的信息包括所述未关联物体的雷达数据；当所述未关联物体是被所述摄像组件拍摄到的物体时，所述未关联物体的信息包括所述未关联物体的图像数据。

根据本公开的第三方面，提供一种信息展示装置，用于包括雷达组件和摄像组件的终端中，所述装置包括：

处理器；

用于存储处理器可执行指令的存储器；

其中，所述处理器被配置为：

获取所述雷达组件对指定区域进行探测获得的，所述指定区域内的各个物体各自对应的雷达数据；

获取所述摄像组件对所述指定区域进行拍摄获得的，所述各个物体各自对应的图像数据；

将对应同一物体的雷达数据和图像数据关联为同一组数据；

将相关联的各组雷达数据和图像数据进行聚合展示。

本公开的实施例提供的技术方案可以包括以下有益效果：

通过获取该雷达组件对指定区域进行探测获得的，该指定区域内的各个物体各自对应的雷达数据，获取该摄像组件对该指定区域进行拍摄获得的，该各个物体各自对应的图像数据，将对应同一物体的雷达数据和图像数据关联为同一组数据，将相关联的各组雷达数据和图像数据进行聚合展示；将同一个物体的雷达数据和图像数据聚合在一起进行展示，使用户能够直观的感受到物体的影像以及物体相对于终端的位置，达到扩展近场识别结果的展示方式，提高展示效果和用户体验的效果。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性的，并不能限制本公开。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本发明的实施例，并于说明书一起用于解释本发明的原理。

图1是根据一示例性实施例示出的一种信息展示方法的流程图；

图2A是根据一示例性实施例示出的一种信息展示方法的流程图；

图2B是根据图2A所示实施例示出的一种聚合显示示意图；

图3A是根据一示例性实施例示出的一种信息展示方法的流程图；

图3B是根据图3A所示实施例示出的盲人辅助终端应用场景图；

图4是根据一示例性实施例示出的一种信息展示装置的框图；

图5是根据一示例性实施例示出的一种信息展示装置的框图；

图6是根据一示例性实施例示出的一种装置的框图。

具体实施方式

这里将详细地对示例性实施例执行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。

图1是根据一示例性实施例示出的一种信息展示方法的流程图。该信息展示方法用于包括雷达组件和摄像组件的终端中。如图1所示，该信息展示方法可以包括以下步骤。

在步骤101中，获取该雷达组件对指定区域进行探测获得的，该指定区域内的各个物体各自对应的雷达数据。

在步骤102中，获取该摄像组件对该指定区域进行拍摄获得的，该各个物体各自对应的图像数据。

在步骤103中，将对应同一物体的雷达数据和图像数据关联为同一组数据。

在步骤104中，将相关联的各组雷达数据和图像数据进行聚合展示。

可选的，所述雷达数据和所述图像数据包括各自对应的物体相对于所述终端的位置信息，所述将对应同一物体的雷达数据和图像数据关联为同一组数据，包括：

将相对于所述终端的位置信息相同的一组雷达数据和图像数据关联为同一组数据。

可选的，所述雷达数据中包括对应物体的形状、大小以及相对于所述终端的位置信息，所述图像数据中包括对应物体的图像；所述将相关联的各组雷达数据和图像数据分别进行聚合展示，包括：

对于每一组雷达数据和图像数据，根据对应物体的形状、大小以及相对于所述终端的位置信息在可视化界面中展示所述物体的轮廓图形；

对应所述物体的轮廓图形展示所述物体的图像。

可选的，所述雷达数据中包括对应物体相对于所述终端的位置信息，所述图像数据中包括对应物体的图像；所述将相关联的各组雷达数据和图像数据分别进行聚合展示，包括：

对于每一组雷达数据和图像数据，根据对应物体的图像进行图像识别，确定所述物体的名称信息；

在同一条语音消息内展示所述物体相对于所述终端的位置信息以及所述物体的名称信息。

可选的，所述图像数据中包括对应物体的图像，所述方法还包括：

在接收到查询所述各个物体中的至少一个物体的详情信息的指令时，根据所述至少一个物体对应的图像进行图像识别；

根据图像识别的结果从网络侧查询所述至少一个物体的详情信息；

展示所述至少一个物体的详情信息。

可选的，所述雷达数据和所述图像数据中的至少一种包括对应物体相对于所述终端的位置信息，所述图像数据中包括对应物体的图像，所述方法还包括：

根据对应物体的图像识别所述对应物体；

确定预先与所述对应物体相关联的隐藏物体；

获取所述隐藏物体对应的隐藏信息，所述隐藏信息包括所述隐藏物体相对于所述对应物体的位置信息以及所述隐藏物体的名称信息；

根据所述对应物体相对于所述终端的位置信息以及所述隐藏物体相对于所述对应物体的位置信息确定所述隐藏物体相对于所述终端的位置信息；

在同一条消息内展示所述隐藏物体相对于所述终端的位置信息以及所述隐藏物体的名称信息。

可选的，所述方法还包括：

确定未关联物体，所述未关联物体是所述指定区域中，仅被所述雷达组件和所述摄像组件中的一个组件探测或拍摄到的物体；

展示所述未关联物体的信息；

其中，当所述未关联物体是被所述雷达组件探测到的物体时，所述未关联物体的信息包括所述未关联物体的雷达数据；当所述未关联物体是被所述摄像组件拍摄到的物体时，所述未关联物体的信息包括所述未关联物体的图像数据。

综上所述，本公开实施例所示的信息展示方法，通过获取该雷达组件对指定区域进行探测获得的，该指定区域内的各个物体各自对应的雷达数据，获取该摄像组件对该指定区域进行拍摄获得的，该各个物体各自对应的图像数据，将对应同一物体的雷达数据和图像数据关联为同一组数据，将相关联的各组雷达数据和图像数据进行聚合展示；将同一个物体的雷达数据和图像数据聚合在一起进行展示，使用户能够直观的感受到物体的影像以及物体相对于终端的位置，达到扩展近场识别结果的展示方式，提高展示效果和用户体验的效果。

图2A是根据一示例性实施例示出的一种信息展示方法的流程图。该信息展示方法可以用于包括雷达组件和摄像组件的终端中。在一实施例中，该终端可以是内置于汽车中的近场识别终端，比如泊车辅助***。如图2A所示，该信息展示方法可以包括以下步骤。

在步骤201中，获取该雷达组件对指定区域进行探测获得的，该指定区域内的各个物体各自对应的雷达数据。

雷达组件固定设置在终端中，其扫描方向也是相对于终端不变的。该雷达组件扫描获得的雷达数据包括指定区域内的各个物体的形状、大小以及相对于该终端的位置信息等。

比如，当该雷达组件应用在汽车中的近场识别终端时，可以按照车头的方向建立坐标系，汽车的中心为原点，各个物体相对于终端的位置信息可以是各个物体在该坐标系中的坐标。雷达组件进行扫描时，首先获得一个物体相对于雷达组件的角度和距离，并根据该物体相对于雷达组件的角度和距离计算出该物体相对于汽车中心的角度和距离，并进一步计算出该物体在以汽车中心为原点的坐标系中的坐标。

在步骤202中，获取该摄像组件对该指定区域进行拍摄获得的，该各个物体各自对应的图像数据。

在一实施例中，摄像组件在拍摄物体的图像时，还可以通过对焦的方式测量摄像组件与物体之间的距离，并记录拍摄的角度。

例如，当该摄像组件应用在汽车中的近场识别终端时，与雷达组件类似的，摄像组件固定设置在终端中，摄像组件可以根据对焦获得的各个物体与摄像组件之间的距离以及拍摄角度确定计算出该物体相对于汽车中心的角度和距离，并进一步计算出该物体在以汽车中心为原点的坐标系中的坐标。

在一实施例中，对于拍摄到的每一个物体，摄像组件都可以将该物体对应的图像分割出来并进行存储。

在步骤203中，将相对于该终端的位置信息相同的一组雷达数据和图像数据关联为同一组数据。

根据本公开一实施方式，雷达组件扫描物体以及摄像组件拍摄物体时，都会获取该物体相对于终端的位置信息(角度和距离)，因此，终端可以将相对于终端的位置信息相同的一组雷达数据和图像数据关联为同一物体的雷达数据和图像数据。

在步骤204中，根据对应物体的形状、大小以及相对于该终端的位置信息在可视化界面中展示该对应物体的轮廓图形。

在步骤205中，根据相关联的雷达数据和图像数据，对应该对应物体的轮廓图形展示该对应物体的图像。

在进行雷达数据和图像数据的展示时，对于同一物体的雷达数据和图像数据，可以首先在可视化界面中展示该物体的轮廓图形，其中，可视化界面的中心可以终端的中心位置，物体的轮廓图形按照物体相对于终端的位置信息展示在可视化界面中的对应位置，并将该物体的图像对应该物体的轮廓图形进行展示。

在步骤206中，在接收到查询该各个物体中的至少一个物体的详情信息的指令时，根据该至少一个物体对应的图像进行图像识别。

在步骤207中，根据图像识别的结果从网络侧查询该至少一个物体的详情信息，并展示该至少一个物体的详情信息。

当用户想要查看某一个物体的详情信息时，可以在可视化界面内选中该物体的轮廓图形或图像，终端可以对该物体的图像进行图像识别，获得该物体的类型信息、名称信息以及相关的文本信息等，并从网络侧搜索识别出的信息，将搜索的结果在可视化界面中进行展示，或者通过语音等方式进行展示。

可选的，近场识别终端还可以监控各个物体相对于终端之间的距离变化，当检测到各个物体中的一个或多个物体与终端之间的距离减小至某一预设的距离阈值时，发出声光提醒，以提醒用户注意避让。

以本公开实施例所示的方法应用于汽车中，该终端为汽车中的近场识别终端为例，近场识别终端通过设置在汽车四周的雷达组件扫描汽车周围360度，且半径为50米范围内的物体，获得该范围内的各个物体形状、大小以及相对于汽车的位置信息等雷达数据。此外，近场识别终端还通过设置在汽车四周的摄像组件拍摄汽车周围360度范围内的图像，并分割出拍摄到的物体的图像。在拍摄图像时，可以对每一个物体进行对焦，以获得该物体与终端之间的距离，并结合拍摄角度获取各个物体相对于汽车的位置信息，将各个物体的图像以及相对于汽车的位置信息存储为图像数据。近场识别终端将相对于汽车的位置信息相同的一组雷达数据和图像数据进行关联，并在汽车的中控显示屏中聚合显示相关联的雷达数据和图像数据。

比如，请参考图2B，其示出了本公开实施例提供的聚合显示示意图。如图2B所示，汽车的中控显示屏中心是汽车的示意图形20，汽车的近场识别终端扫描并拍摄到3个物体，分别为21、22以及23。在汽车的示意图形20的周围，根据扫描并拍摄到的三个物体与汽车之间的相对位置显示该三个物体的轮廓图形和图像。以物体21为例，物体21的轮廓图形21a按照该物体21被扫描到的形状进行显示，物体21的图像21b以标签框的形式进行显示，且该标签框的箭头指向轮廓图形21a。

当用户想要查看物体21的详情信息时，可以点击轮廓图形21a或者图像21b，近场识别终端可以对图像21b进行图像识别，根据图像识别的结果从网络侧搜索相关信息。比如，近场识别终端识别出图像21b为一个广告牌，并识别出其中广告文本，近场识别终端从网络侧搜索该广告文本的相关信息，比如该广告文本对应的商品或服务的价格、商家的距离、位置以及导航信息等。

可选的，在本公开实施例中，终端还可以确定未关联物体，并展示该未关联物体的信息，其中，该未关联物体是该指定区域中，仅被该雷达组件和该摄像组件中的一个组件探测或拍摄到的物体，当该未关联物体是被该雷达组件探测到的物体时，该未关联物体的信息是该未关联物体的雷达数据；当该未关联物体是被该摄像组件拍摄到的物体时，该未关联物体的信息是该未关联物体的图像数据。

在某些场景下，因雷达组件和摄像组件的探测角度或者探测原理的不同，导致某些物体仅被其中的一个组件探测或者拍摄到。比如，因为拍摄角度的关系，某一物体未被雷达组件探测到，但是被摄像组件拍摄到图像。或者，因为被前方物体阻挡，某个物体未被摄像组件拍摄到图像，但是能够被雷达组件探测到。在这种情况下，该物体只有雷达数据或者图像数据，无法进行关联，在本公开实施例中，此类物体称为未关联物体。对于未关联物体，终端也可以展示其相关信息，即当该物体仅被雷达组件探测到时，终端只显示其雷达数据，或者，当该物体仅被摄像组件拍摄到时，终端只显示其图像数据。但本公开并不以此为限，当该物体仅被雷达组件探测到时，除了可在雷达数据中显示该物体信息外，还可以根据该物体与终端之间的相对位置，以及该物体的其他相关信息，在图像数据中表示出该物体。反之，例如当该物体仅被摄像组件探测到时，除了可在图像数据中显示该物体信息外，还可以根据该物体与终端之间的相对位置、图像等信息，在雷达数据中表示出该物体。

综上所述，本公开实施例所示的信息展示方法，通过获取该雷达组件对指定区域进行探测获得的，该指定区域内的各个物体各自对应的雷达数据，获取该摄像组件对该指定区域进行拍摄获得的，该各个物体各自对应的图像数据，将对应同一物体的雷达数据和图像数据关联为同一组数据，将相关联的各组雷达数据和图像数据进行聚合展示；将同一个物体的雷达数据和图像数据聚合在一起进行展示，使用户能够直观的感受到物体的影像以及物体相对于终端的位置，达到扩展近场识别结果的展示方式，提高展示效果和用户体验的效果。

图3A是根据又一示例性实施例示出的一种信息展示方法的流程图。该信息展示方法用于包括雷达组件和摄像组件的终端。在一实施例中，该终端可以是便携式的近场识别终端，比如盲人辅助终端。如图3A所示，该信息展示方法可以包括步骤301～步骤305。

在步骤301中，获取该雷达组件对指定区域进行探测获得的，该指定区域内的各个物体各自对应的雷达数据。

在一实施例中，雷达组件固定设置在终端中，其扫描方向也是相对于终端不变的，但本公开不以此为限，雷达组件还可固定设置在其他位置。该雷达组件扫描获得的雷达数据包括指定区域内的各个物体的形状、大小以及相对于该终端的位置信息等。

比如，当该方法应用在盲人辅助终端中时，用户可以按照指定的姿势手持该终端，可以按照用户的朝向建立坐标系，用户为原点，各个物体相对于终端的位置信息可以是各个物体在该坐标系中的坐标。雷达组件进行扫描时，首先获得一个物体相对于雷达组件的角度和距离，并根据该物体相对于雷达组件的角度和距离计算出该物体相对于用户的角度和距离，并进一步计算出该物体在以用户为原点的坐标系中的坐标。

在步骤302中，获取该摄像组件对该指定区域进行拍摄获得的，该各个物体各自对应的图像数据。

在一实施例中，摄像组件在拍摄物体的图像时，可以通过对焦的方式测量摄像组件与物体之间的距离，并记录拍摄的角度。

与雷达组件类似的，摄像组件固定设置在终端中，摄像组件可以根据对焦获得的各个物体与摄像组件之间的距离以及拍摄角度确定计算出该物体相对于用户的角度和距离，并进一步计算出该物体在以用户为原点的坐标系中的坐标。

示例的，对于拍摄到的每一个物体，摄像组件都可以将该物体对应的图像分割出来并进行存储。

在步骤303中，将相对于该终端的位置信息相同的一组雷达数据和图像数据关联为同一组数据。

在步骤304中，根据对应物体的图像进行图像识别，确定该对应物体的名称信息。

在步骤305中，根据相关联的雷达数据和图像数据，在同一条语音消息内展示该对应物体相对于该终端的位置信息以及该对应物体的名称信息。

由于盲人或者视力不好的用户无法看清可视化的图像，为了更好的向视力不好的用户展示近场识别信息，可以将雷达组件和摄像组件扫描或者拍摄到的物体的位置和名称通过一条语音消息展示给用户，以便用户了解周围存在哪些物体。

如图3A所示，除了以上步骤301～步骤305，本公开一示例性实施例示出的一种信息展示方法例如还可以包括以下步骤。

在步骤306中，根据对应物体的图像识别该物体；确定预先与该对应物体相关联的隐藏物体。

在步骤307中，获取隐藏物体对应的隐藏信息，该隐藏信息中包括该隐藏物体相对于该对应物体的位置信息以及该隐藏物体的名称信息；根据该对应物体相对于该终端的位置信息以及该隐藏物体相对于该对应物体的位置信息确定该隐藏物体相对于该终端的位置信息。

在实际使用中，有可能存在一些雷达组件和摄像组件不易识别的物体，比如某些物体因为被其它物体遮挡而未被雷达组件或摄像组件扫描或者拍摄到，或者，某一物体因为体积太小或隐藏在其它物体内(比如墙上的插座和开关)而未被雷达组件扫描到。这些未被扫描或拍摄到的物体可以称为隐藏物体，在某些情况下，用户可能想要了解这些隐藏物体的相关信息。

在本公开一实施例所示的方案中，用户或者设备的维护人员可以预先在终端中，将固定空间中不容易被识别的物体设置为隐藏物体，并将这些隐藏物体与位置相近，且容易被识别的物体进行关联。在一实施例中，对于每一个隐藏物体，还可在盲人辅助终端中存储该隐藏物体相对于与之关联的物体的位置信息，以及该隐藏物体的名称信息。当盲人辅助终端通过雷达组件和摄像组件扫描并拍摄到某个物体后，可以通过图像识别被扫描到的物体，并确定与其关联的隐藏物体，并获取与其关联的隐藏物体相对于该物体的位置信息以及该隐藏物体的名称信息，继而确定隐藏物体与盲人辅助终端之间的相对位置。

在步骤308中，在同一条消息内展示该隐藏物体相对于该终端的位置信息以及该隐藏物体的名称信息。该消息例如可以为语音消息。

识别出隐藏物体后，盲人辅助终端可以通过同一条语音消息展示隐藏物体的名称和位置。

可选的，盲人辅助终端还可以接收用户通过语音方式发出的导航请求，对该导航请求进行语音分析获得导航请求中包括的物体名称信息，并通过语音方式展示行走至该物体名称信息对应物体的导航信息。

比如，请参考图3B，其示出了本公开实施例提供的盲人辅助终端应用场景图。图3B所示的场景包括室内空间30，该室内空间30中包括沙发31和隔墙32，在隔墙上31上设置有一个插座33。盲人辅助终端34的维护人员预先在盲人辅助终端34中将沙发31和插座33相关联，并设置插座33相对于沙发31的位置信息以及插座33的名称。当用户佩戴盲人辅助终端34站在图3B所示的位置时，沙发31位于隔墙32和盲人辅助终端34之间，盲人辅助终端34能够扫描并拍摄到沙发31，而插座33则被沙发31所遮挡。此时，盲人辅助终端34识别出沙发31，确定与沙发31相关联的隐藏终端为插座33，获取插座33相对于沙发31的位置信息以及插座33的名称，并根据插座33相对于沙发31的位置信息以及盲人辅助终端34相对于沙发31的位置信息确定出插座33相对于盲人辅助终端34的位置信息。后续用户想要寻找插座为手机充电时，例如可以通过语音发出寻找插座的指示，此时，盲人辅助终端34例如可以通过语音消息展示插座33的名称(比如，客厅插座1)和插座33相对于盲人辅助终端34的位置(比如，右前方5米)。当用户发出导航的语音指令时，可以通过盲人辅助终端34自动规划导航路径35，并通过语音引导用户沿着路径35达到插座33。

综上所述，本公开实施例所示的信息展示方法，通过获取该雷达组件对指定区域进行探测获得的，该指定区域内的各个物体各自对应的雷达数据，获取该摄像组件对该指定区域进行拍摄获得的，该各个物体各自对应的图像数据，将对应同一物体的雷达数据和图像数据关联为同一组数据，将相关联的各组雷达数据和图像数据进行聚合展示；将同一个物体的雷达数据和图像数据聚合在一起进行展示，使用户能够直观的感受到物体的影像以及物体相对于终端的位置，达到扩展近场识别结果的展示方式，提高展示效果和用户体验的效果。

下述为本公开装置实施例，可以用于执行本公开方法实施例。对于本公开装置实施例中未披露的细节，请参照本公开方法实施例。

图4是根据一示例性实施例示出的一种信息展示装置的框图，该信息展示装置可以用于包括雷达组件和摄像组件的终端中。如图4所示，该信息展示装置包括但不限于：雷达数据获取模块401、图像数据获取模块402、关联模块403以及第一展示模块404；

所述雷达数据获取模块401被配置为获取所述雷达组件对指定区域进行探测获得的，所述指定区域内的各个物体各自对应的雷达数据；

所述图像数据获取模块402被配置为获取所述摄像组件对所述指定区域进行拍摄获得的，所述各个物体各自对应的图像数据；

所述关联模块403被配置为将对应同一物体的雷达数据和图像数据关联为同一组数据；

所述第一展示模块404被配置为将相关联的各组雷达数据和图像数据进行聚合展示。

综上所述，本公开实施例所示的信息展示装置，通过获取该雷达组件对指定区域进行探测获得的，该指定区域内的各个物体各自对应的雷达数据，获取该摄像组件对该指定区域进行拍摄获得的，该各个物体各自对应的图像数据，将对应同一物体的雷达数据和图像数据关联为同一组数据，将相关联的各组雷达数据和图像数据进行聚合展示；将同一个物体的雷达数据和图像数据聚合在一起进行展示，使用户能够直观的感受到物体的影像以及物体相对于终端的位置，达到扩展近场识别结果的展示方式，提高展示效果和用户体验的效果。

图5是根据另一示例性实施例示出的一种信息展示装置的框图，该信息展示装置可以用于包括雷达组件和摄像组件的终端中。如图5所示，该信息展示装置包括但不限于：雷达数据获取模块401、图像数据获取模块402、关联模块403以及第一展示模块404；

所述雷达数据获取模块401被配置为获取所述雷达组件对指定区域进行探测获得的，所述指定区域内的各个物体各自对应的雷达数据；

所述图像数据获取模块402被配置为获取所述摄像组件对所述指定区域进行拍摄获得的，所述各个物体各自对应的图像数据；

所述关联模块403被配置为将对应同一物体的雷达数据和图像数据关联为同一组数据；

所述第一展示模块404被配置为将相关联的各组雷达数据和图像数据分别进行聚合展示。

可选的，所述关联模块403被配置为将相对于所述终端的位置信息相同的一组雷达数据和图像数据关联为同一组数据；

其中，所述雷达数据和所述图像数据包括各自对应的物体相对于所述终端的位置信息。

可选的，所述第一展示模块404，包括：第一展示子模块404a以及第二展示子模块404b；

所述第一展示子模块404a被配置为根据对应物体的形状、大小以及相对于所述终端的位置信息在可视化界面中展示所述对应物体的轮廓图形；

所述第二展示子模块404b被配置为根据相关联的雷达数据和图像数据，对应所述对应物体的轮廓图形展示所述对应物体的图像；

其中，所述雷达数据中包括对应物体的形状、大小以及相对于所述终端的位置信息，所述图像数据中包括对应物体的图像。

可选的，所述第一展示模块404，包括：识别子模块404c以及第三展示子模块404d；

所述识别子模块404c被配置为根据对应物体的图像进行图像识别，确定所述对应物体的名称信息；

所述第三展示子模块404d被配置为根据相关联的雷达数据和图像数据，在同一条语音消息内展示所述对应物体相对于所述终端的位置信息以及所述对应物体的名称信息；

其中，所述雷达数据中包括对应物体相对于所述终端的位置信息，所述图像数据中包括对应物体的图像。

可选的，所述装置还包括：第一识别模块405、查询模块406以及第二展示模块407；

所述第一识别模块405被配置为在接收到查询所述各个物体中的至少一个物体的详情信息的指令时，根据所述至少一个物体对应的图像进行图像识别；

所述查询模块406被配置为根据图像识别的结果从网络侧查询所述至少一个物体的详情信息；

所述第二展示模块407被配置为展示所述至少一个物体的详情信息；

其中，所述图像数据中包括对应物体的图像。

可选的，所述装置还包括：第二识别模块408、隐藏物体确定模块409、信息获取模块410、位置确定模块411以及第三展示模块412；

所述第二识别模块408被配置为根据对应物体的图像识别所述对应物体；

所述隐藏物体确定模块409被配置为确定预先与所述对应物体相关联的隐藏物体；

所述信息获取模块410被配置为获取所述隐藏物体对应的隐藏信息，所述隐藏信息中包括所述隐藏物体相对于所述对应物体的位置信息以及所述隐藏物体的名称信息；

所述位置确定模块411被配置为根据所述对应物体相对于所述终端的位置信息以及所述隐藏物体相对于所述对应物体的位置信息确定所述隐藏物体相对于所述终端的位置信息；

所述第三展示模块412被配置为在同一条消息内展示所述隐藏物体相对于所述终端的位置信息以及所述隐藏物体的名称信息；

其中，所述雷达数据和所述图像数据中的至少一种包括对应物体相对于所述终端的位置信息，所述图像数据中包括对应物体的图像。

在一实施例中，该消息例如可以是语音消息、通知类消息、短消息等，本公开对此不作限制。

可选的，所述装置还包括：

未关联物体确定模块413，被配置为确定未关联物体，所述未关联物体是所述指定区域中，仅被所述雷达组件和所述摄像组件中的一个组件探测或拍摄到的物体；

第四展示模块414，被配置为展示所述未关联物体的信息；

其中，当所述未关联物体是被所述雷达组件探测到的物体时，所述未关联物体的信息是所述未关联物体的雷达数据；当所述未关联物体是被所述摄像组件拍摄到的物体时，所述未关联物体的信息是所述未关联物体的图像数据。但本公开并不以此为限，当该物体仅被雷达组件探测到时，除了可在雷达数据中显示该物体信息外，还可以根据该物体与终端之间的相对位置，以及该物体的其他相关信息，在图像数据中表示出该物体。反之，例如当该物体仅被摄像组件探测到时，除了可在图像数据中显示该物体信息外，还可以根据该物体与终端之间的相对位置、图像等信息，在雷达数据中表示出该物体。

综上所述，本公开实施例所示的信息展示装置，通过获取该雷达组件对指定区域进行探测获得的，该指定区域内的各个物体各自对应的雷达数据，获取该摄像组件对该指定区域进行拍摄获得的，该各个物体各自对应的图像数据，将对应同一物体的雷达数据和图像数据关联为同一组数据，将相关联的各组雷达数据和图像数据进行聚合展示；将同一个物体的雷达数据和图像数据聚合在一起进行展示，使用户能够直观的感受到物体的影像以及物体相对于终端的位置，达到扩展近场识别结果的展示方式，提高展示效果和用户体验的效果。

图6是根据一示例性实施例示出的一种装置600的框图。例如，装置600可以是移动电话，计算机，数字广播终端，消息收发设备，路由设备，游戏控制台，平板设备，医疗设备，健身设备，个人数字助理，智能控制设备，智能家电设备，智能可穿戴设备等。

参照图6，装置600可以包括以下一个或多个组件：处理组件602，存储器604，电源组件606，多媒体组件608，音频组件610，传感器组件614以及通信组件616。

处理组件602通常控制装置600的整体操作，诸如与显示，电话呼叫，数据通信，相机操作以及记录操作相关联的操作等。处理组件602可以包括一个或多个处理器618来执行指令，以完成上述的方法的全部或部分步骤。此外，处理组件602可以包括一个或多个模块，便于处理组件602和其他组件之间的交互。例如，处理组件602可以包括多媒体模块，以方便多媒体组件608和处理组件602之间的交互。

存储器604被配置为存储各种类型的数据以支持在装置600的操作。这些数据的示例包括用于在装置600上操作的任何应用程序或方法的指令。存储器604可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。存储器604中还存储有一个或多个模块，该一个或多个模块被配置成由该一个或多个处理器618执行，以完成上述图1至3任一所示方法中的全部或者部分步骤。

电源组件606为装置600的各种组件提供电力。电源组件606可以包括电源管理***，一个或多个电源，及其他与为装置600生成、管理和分配电力相关联的组件。

多媒体组件608包括在所述装置600和用户之间的提供一个输出接口的屏幕。在一些实施例中，屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与所述触摸或滑动操作相关的持续时间和压力。

音频组件610被配置为输出和/或输入音频信号。例如，音频组件610包括一个麦克风(MIC)，当装置600处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器604或经由通信组件616发送。在一些实施例中，音频组件610还包括一个扬声器，用于输出音频信号。

传感器组件614包括一个或多个传感器，用于为装置600提供各个方面的状态评估。例如，传感器组件614可以检测到装置600的打开/关闭状态，组件的相对定位，传感器组件614还可以检测装置600或装置600一个组件的位置改变以及装置600的温度变化。在一些实施例中，该传感器组件614还可以包括磁传感器，压力传感器或温度传感器。

通信组件616被配置为便于装置600和其他设备之间有线或无线方式的通信。装置600可以接入基于通信标准的无线网络，如WiFi，2G或3G，或它们的组合。在一个示例性实施例中，通信组件616经由广播信道接收来自外部广播管理***的广播信号或广播相关信息。在一个示例性实施例中，所述通信组件616还包括近场通信(NFC)模块，以促进短程通信。例如，在NFC模块可基于射频识别(RFID)技术，红外数据协会(IrDA)技术，超宽带(UWB)技术，蓝牙(BT)技术和其他技术来实现。

在示例性实施例中，装置600可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述方法。

在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器604，上述指令可由装置600的处理器618执行以完成上述方法。例如，所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。

关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中执行了详细描述，此处将不做详细阐述说明。

应当理解的是，本发明并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围执行各种修改和改变。本发明的范围仅由所附的权利要求来限制。

Claims (15)

1.一种信息展示方法，其特征在于，用于包括雷达组件和摄像组件的终端中，所述方法包括：

获取所述雷达组件对指定区域进行探测获得的，所述指定区域内的各个物体各自对应的雷达数据；

获取所述摄像组件对所述指定区域进行拍摄获得的，所述各个物体各自对应的图像数据；

将对应同一物体的雷达数据和图像数据关联为同一组数据；

将相关联的各组雷达数据和图像数据进行聚合展示。

2.根据权利要求1所述的方法，其特征在于，所述雷达数据和所述图像数据包括各自对应的物体相对于所述终端的位置信息，所述将对应同一物体的雷达数据和图像数据关联为同一组数据，包括：

将相对于所述终端的位置信息相同的一组雷达数据和图像数据关联为同一组数据。

3.根据权利要求1所述的方法，其特征在于，所述雷达数据中包括对应物体的形状、大小以及相对于所述终端的位置信息，所述图像数据中包括对应物体的图像；所述将相关联的各组雷达数据和图像数据进行聚合展示，包括：

根据对应物体的形状、大小以及相对于所述终端的位置信息在可视化界面中展示所述对应物体的轮廓图形；

根据相关联的雷达数据和图像数据，对应所述对应物体的轮廓图形展示所述对应物体的图像。

4.根据权利要求1所述的方法，其特征在于，所述雷达数据中包括对应物体相对于所述终端的位置信息，所述图像数据中包括对应物体的图像；所述将相关联的各组雷达数据和图像数据分别进行聚合展示，包括：

根据对应物体的图像进行图像识别，确定所述对应物体的名称信息；

根据相关联的雷达数据和图像数据，在同一条消息内展示所述对应物体相对于所述终端的位置信息以及所述对应物体的名称信息。

5.根据权利要求1所述的方法，其特征在于，所述图像数据中包括对应物体的图像，所述方法还包括：

在接收到查询所述各个物体中的至少一个物体的详情信息的指令时，根据所述至少一个物体对应的图像进行图像识别；

根据图像识别的结果从网络侧查询所述至少一个物体的详情信息；

展示所述至少一个物体的详情信息。

6.根据权利要求1所述的方法，其特征在于，所述雷达数据和所述图像数据中的至少一种包括对应物体相对于所述终端的位置信息，所述图像数据中包括对应物体的图像，所述方法还包括：

根据对应物体的图像识别所述对应物体；

确定预先与所述对应物体相关联的隐藏物体；

获取所述隐藏物体对应的隐藏信息，所述隐藏信息包括所述隐藏物体相对于所述对应物体的位置信息以及所述隐藏物体的名称信息；

根据所述对应物体相对于所述终端的位置信息以及所述隐藏物体相对于所述对应物体的位置信息确定所述隐藏物体相对于所述终端的位置信息；

在同一条消息内展示所述隐藏物体相对于所述终端的位置信息以及所述隐藏物体的名称信息。

7.根据权利要求1所述的方法，其特征在于，所述方法还包括：

确定未关联物体，所述未关联物体是所述指定区域中，仅被所述雷达组件和所述摄像组件中的一个组件探测或拍摄到的物体；

展示所述未关联物体的信息；

其中，当所述未关联物体是被所述雷达组件探测到的物体时，所述未关联物体的信息包括所述未关联物体的雷达数据；当所述未关联物体是被所述摄像组件拍摄到的物体时，所述未关联物体的信息包括所述未关联物体的图像数据。

8.一种信息展示装置，其特征在于，用于包括雷达组件和摄像组件的终端中，所述装置包括：

雷达数据获取模块，用于获取所述雷达组件对指定区域进行探测获得的，所述指定区域内的各个物体各自对应的雷达数据；

图像数据获取模块，用于获取所述摄像组件对所述指定区域进行拍摄获得的，所述各个物体各自对应的图像数据；

关联模块，用于将对应同一物体的雷达数据和图像数据关联为同一组数据；

第一展示模块，用于将相关联的各组雷达数据和图像数据进行聚合展示。

9.根据权利要求8所述的装置，其特征在于，

所述关联模块，用于将相对于所述终端的位置信息相同的一组雷达数据和图像数据关联为同一组数据；

其中，所述雷达数据和所述图像数据包括各自对应的物体相对于所述终端的位置信息。

10.根据权利要求8所述的装置，其特征在于，所述第一展示模块，包括：

第一展示子模块，用于根据对应物体的形状、大小以及相对于所述终端的位置信息在可视化界面中展示所述对应物体的轮廓图形；

第二展示子模块，用于根据相关联的雷达数据和图像数据，对应所述对应物体的轮廓图形展示所述对应物体的图像；

其中，所述雷达数据中包括对应物体的形状、大小以及相对于所述终端的位置信息，所述图像数据中包括对应物体的图像。

11.根据权利要求8所述的装置，其特征在于，所述第一展示模块，包括：

识别子模块，用根据对应物体的图像进行图像识别，确定所述对应物体的名称信息；

第三展示子模块，用于根据相关联的雷达数据和图像数据，在同一条消息内展示所述对应物体相对于所述终端的位置信息以及所述对应物体的名称信息；

其中，所述雷达数据中包括对应物体相对于所述终端的位置信息，所述图像数据中包括对应物体的图像。

12.根据权利要求8所述的装置，其特征在于，所述装置还包括：

第一识别模块，用于在接收到查询所述各个物体中的至少一个物体的详情信息的指令时，根据所述至少一个物体对应的图像进行图像识别；

查询模块，用于根据图像识别的结果从网络侧查询所述至少一个物体的详情信息；

第二展示模块，用于展示所述至少一个物体的详情信息；

其中，所述图像数据中包括对应物体的图像。

13.根据权利要求8所述的装置，其特征在于，所述装置还包括：

第二识别模块，用于根据对应物体的图像识别所述对应物体；

隐藏物体确定模块，用于确定预先与所述对应物体相关联的隐藏物体；

信息获取模块，用于获取所述隐藏物体对应的隐藏信息，所述隐藏信息中包括所述隐藏物体相对于所述对应物体的位置信息以及所述隐藏物体的名称信息；

位置确定模块，用于根据所述对应物体相对于所述终端的位置信息以及所述隐藏物体相对于所述对应物体的位置信息确定所述隐藏物体相对于所述终端的位置信息；

第三展示模块，用于在同一条消息内展示所述隐藏物体相对于所述终端的位置信息以及所述隐藏物体的名称信息；

其中，所述雷达数据和所述图像数据中的至少一种包括对应物体相对于所述终端的位置信息，所述图像数据中包括对应物体的图像。

14.根据权利要求8所述的装置，其特征在于，所述装置还包括：

未关联物体确定模块，用于确定未关联物体，所述未关联物体是所述指定区域中，仅被所述雷达组件和所述摄像组件中的一个组件探测或拍摄到的物体；

第四展示模块，用于展示所述未关联物体的信息；

其中，当所述未关联物体是被所述雷达组件探测到的物体时，所述未关联物体的信息包括所述未关联物体的雷达数据；当所述未关联物体是被所述摄像组件拍摄到的物体时，所述未关联物体的信息包括所述未关联物体的图像数据。

15.一种信息展示装置，其特征在于，用于包括雷达组件和摄像组件的终端中，所述装置包括：

处理器；

用于存储处理器可执行指令的存储器；

其中，所述处理器被配置为：

获取所述雷达组件对指定区域进行探测获得的，所述指定区域内的各个物体各自对应的雷达数据；

获取所述摄像组件对所述指定区域进行拍摄获得的，所述各个物体各自对应的图像数据；

将对应同一物体的雷达数据和图像数据关联为同一组数据；

将相关联的各组雷达数据和图像数据进行聚合展示。