CN115600019A - 兴趣点确定方法、装置、存储介质及电子设备 - Google Patents

Abstract

本发明提供兴趣点确定方法、装置、存储介质及电子设备。所述兴趣点确定方法包括：获取车内至少一个用户的用户图像信息；识别所述用户图像信息中的所述至少一个用户的用户视线方向和/或用户手势方向；根据所述至少一个用户的用户视线方向和/或用户手势方向，确定目标兴趣点。本发明可根据用户视线、手势来确定兴趣点，从而有效提高导航效率，提升用户体验。

Description

兴趣点确定方法、装置、存储介质及电子设备

技术领域

本发明涉及车辆导航技术领域，特别是涉及兴趣点确定方法、装置、存储介质及电子设备。

背景技术

用户在驾车行驶时，若需要了解某一兴趣点，通常需要在搜索引擎中输入名称并点击搜索。这种方式虽然能满足大部分场景的需求，但由于操作较为繁琐，不利于驾驶员的人身安全性，严重的可能会引发交通事故。

发明内容

鉴于以上所述现有技术的缺点，本发明的目的在于提供兴趣点确定方法、装置、存储介质及电子设备，用于解决现有技术中用户确定兴趣点不够便捷的问题。

为实现上述目的及其他相关目的，本发明提供一种兴趣点确定方法，包括：获取车内至少一个用户的用户图像信息；识别所述用户图像信息中的所述至少一个用户的用户视线方向和/或用户手势方向；根据所述至少一个用户的用户视线方向和/或用户手势方向，确定目标兴趣点。

于本发明一实施例中，所述识别所述用户图像信息中的用户视线方向和用户手势方向的步骤包括：根据当前车辆位置及行车路径判断车辆正前方方向；根据所述用户图像信息中用户视线与所述车辆正前方方向的夹角判断所述用户视线方向；以及根据所述用户图像信息中用户手势与所述车辆正前方方向的夹角判断所述用户手势方向。

于本发明一实施例中，所述根据所述至少一个用户的用户视线方向和/或用户手势方向确定目标兴趣点的步骤包括：根据所述至少一个用户的用户视线方向所在的直线和/或用户手势方向所在的直线，确定汇聚点；确定所述汇聚点与当前车辆位置之间的相对距离；根据所述相对距离及所述汇聚点与当前车辆位置的相对方向，确定所述汇聚点的地理位置；以及将所述汇聚点的地理位置与电子地图中各候选兴趣点的地理位置进行匹配，根据匹配结果确定所述目标兴趣点。

于本发明一实施例中，所述根据匹配结果确定目标兴趣点的步骤包括：若所述汇聚点的地理位置与电子地图中各候选兴趣点的地理位置都匹配失败，则将距离所述汇聚点的地理位置小于阈值的一候选兴趣点作为所述目标兴趣点。

于本发明一实施例中，所述候选兴趣点包括：预设于所述电子地图中的兴趣点，和/或从网页上摘取的兴趣点。

于本发明一实施例中，在确定所述目标兴趣点的步骤之后，所述方法还包括：根据当前车辆位置与所述兴趣点自身的地理位置或所述兴趣点相关的地理位置生成导航信息，并进行显示。

于本发明一实施例中，在所述确定目标兴趣点的步骤之后，所述方法包括：收藏所述目标兴趣点；在所述电子地图中显示所述目标兴趣点及所述目标兴趣点的介绍信息；以及将所述目标兴趣点推送至外部电子设备。

为实现上述目的及其他相关目的，本发明提供一种兴趣点确定装置，包括：图像获取模块，用于获取车内至少一个用户的用户图像信息；方向识别模块，用于识别所述用户图像信息中的所述至少一个用户的用户视线方向和用户手势方向；兴趣点推送模块，用于根据所述至少一个用户的用户视线方向和/或用户手势方向，确定目标兴趣点。

为实现上述目的及其他相关目的，本发明提供一种计算机可读存储介质，其中存储有计算机程序，所述计算机程序被处理器加载执行时，实现所述的兴趣点确定方法。

为实现上述目的及其他相关目的，本发明提供一种电子设备，包括：处理器及存储器；其中，所述存储器用于存储计算机程序；所述处理器用于加载执行所述计算机程序，以使所述电子设备执行所述的兴趣点确定方法。

如上所述，通过本发明的兴趣点确定方法、装置、存储介质及电子设备，在开车过程中，当驾驶员对某个商家或地点感兴趣时，只要用手指向目标地点方向，或看向目标地点方向，车机就会基于高精地图、驾驶员视线方向、驾驶员手势方向，自动在显示屏上生成POI兴趣点。车机基于该POI兴趣点就可以很方便的导航到目的地或向用户推送兴趣点的相关内容，有效提升用户驾驶体验。

附图说明

图1显示为本发明一实施例中兴趣点确定方法的应用场景示意图。

图2显示为本发明一实施例中兴趣点确定方法的流程示意图。

图3a显示为本发明又一实施例中兴趣点确定方法的流程示意图。

图3b显示为本发明一实施例中用户视线方向和用户手势方向的示意图。

图4显示为本发明再一实施例中兴趣点确定方法的流程示意图。

图5显示为本发明一实施例中兴趣点确定装置的模块示意图。

图6显示为本发明一实施例中电子设备的结构示意图。

具体实施方式

以下通过特定的具体实例说明本发明的实施方式，本领域技术人员可由本说明书所揭露的内容轻易地了解本发明的其他优点与功效。本发明还可以通过另外不同的具体实施方式加以实施或应用，本说明书中的各项细节也可以基于不同观点与应用，在没有背离本发明的精神下进行各种修饰或改变。需说明的是，在不冲突的情况下，以下实施例及实施例中的特征可以相互组合。

需要说明的是，以下实施例中所提供的图示仅以示意方式说明本发明的基本构想，遂图示中仅显示与本发明中有关的组件而非按照实际实施时的组件数目、形状及尺寸绘制，其实际实施时各组件的型态、数量及比例可为一种随意的改变，且其组件布局型态也可能更为复杂。

如图1所示，鉴于现有技术中用户手动确定兴趣点操作繁琐，不利于驾驶员的人身安全性的问题，本申请提供一种兴趣点确定方法，可以基于用户的视线方向、手势方向来自动确定用户想要的兴趣点，显示在电子屏幕1中，以便后续向用户提供该兴趣点的详细信息、生成前往该兴趣点的导航路径等服务。

如图2所示，显示为本申请的兴趣点确定方法于一实施例中的流程图。本实施例的兴趣点确定方法由电子设备负责执行，包括以下步骤：

S10：获取车内至少一个用户的用户图像信息。

电子设备获取部署在车内的至少一个摄像头所采集的用户图像信息。该至少一个摄像头的部署位置不限，但拍摄范围应覆盖用户的眼部及上肢。

S20：识别所述用户图像信息中的所述至少一个用户的用户视线方向和/或用户手势方向。

电子设备在获取用户图像信息后，基于现有的图像处理技术分析图像中用户的视线方向和/或手势方向。

S30：根据所述至少一个用户的用户视线方向和/或用户手势方向，确定目标兴趣点。

电子设备基于用户的视线方向和/或手势方向来确定用户想要的兴趣点，或者，电子设备基于用户视线方向和手势方向的汇聚点来确定用户想要的兴趣点。

在一实施例中，车内不仅有驾驶员，还有其他乘客，本领域技术人员可以对电子设备的参数进行设置，从而选择根据哪个位置上的用户的视线方向、手势方向或者二者的结合来确定目标兴趣点。又或者，选择根据哪几个位置上的用户的视线方向、手势方向或者二者的结合来确定目标兴趣点，比如：根据驾驶员的手势方向以及副驾驶乘客的视线方向的汇聚点来确定目标兴趣点等。

以下将结合图3a详细说明步骤S20的具体实施方式。

S20识别所述用户图像信息中的用户视线方向和用户手势方向的步骤包括：

S21：根据当前车辆位置及行车路径判断车辆正前方方向；

具体的，可借助电子地图，根据当前车辆位置以及当前车辆的行车路径得到当前车辆的行驶方向，从而判断出车辆正前方方向，如图3b所示。

S22：根据所述用户图像信息中用户视线与所述车辆正前方方向的夹角判断所述用户视线方向；

具体的，参阅图3b，以车辆正前方方向为基准，将用户视线所在的直线与车辆正前方的夹角θ作为用户视线方向。

S23：根据所述用户图像信息中用户手势与所述车辆正前方方向的夹角判断所述用户手势方向；

具体的，参阅图3b，以车辆正前方方向为基准，将用户指向所在的直线与车辆正前方的夹角β作为用户手势方向。

以下将结合图4详细说明步骤S30的具体实施方式。

S30所述根据所述至少一个用户的用户视线方向和/或用户手势方向确定目标兴趣点的步骤包括：

S31：根据所述至少一个用户的用户视线方向所在的直线和/或用户手势方向所在的直线，确定汇聚点；

参阅图3b，显示了一个用户的视线方向所在直线及手势方向所在直线的汇聚点。当车内用户多于一位时，还可以选择其中的某些用户，并根据这些选择出的用户的视线方向所在直线来确定汇聚点，或者，根据这些选择出的用户的手势方向所在直线来确定汇聚点，又或者，根据这些选择出的用户的视线方向所在直线及手势方向所在直线来确定汇聚点等。

S32：确定所述汇聚点与当前车辆位置之间的相对距离；

具体的，通过现有图像处理技术可以计算出该汇聚点与车辆当前位置之间的距离。

S33：根据所述相对距离及所述汇聚点与当前车辆位置的相对方向，确定所述汇聚点的地理位置；

例如，基于电子地图，将车辆正前方偏右30°且距离为50米的地理位置确定为汇聚点的地理位置。

S34：将所述汇聚点的地理位置与电子地图中各候选兴趣点的地理位置进行匹配，根据匹配结果确定所述目标兴趣点。

具体的，电子地图中包括了若干候选兴趣点，这些候选兴趣点可以为预设于所述电子地图中的兴趣点，例如之前被添加至电子地图中的，和/或从网页上摘取的兴趣点，例如从网页上摘取的旅游攻略中提到的美食POI等。本步骤基于汇聚点的地理位置从各候选兴趣点中查找匹配的一兴趣点，作为目标兴趣点。进一步地，若所述汇聚点的地理位置与电子地图中各候选兴趣点的地理位置都匹配失败，则将距离所述汇聚点的地理位置小于阈值的一候选兴趣点作为所述目标兴趣点，或者，将距离所述汇聚点的地理位置最近的一候选兴趣点作为所述目标兴趣点。

在一实施例中，S30所述根据所述至少一个用户的用户视线方向和/或用户手势方向确定目标兴趣点的步骤，亦可以基于高精地图来实现：

目前的高精地图相对距离的精度可以控制在10cm以内，可以很精确的定位车辆与周围商家或地点的相对位置。开车过程中当驾驶员视线落在某一方向时，车载***会进行视线追踪和手势识别，然后计算出用户视线和/或手势所指向的具***置，最后基于高精地图，在电子显示屏上显示确定的POI兴趣点。

在一实施例中，在确定所述目标兴趣点的步骤之后，所述方法还包括：根据当前车辆位置与所述兴趣点自身的地理位置生成导航信息，并进行显示。或者，根据当前车辆位置与所述兴趣点相关的地理位置生成导航信息，并进行显示。例如，目标兴趣点为商场，则根据车辆当前位置及商场停车场来形成导航路径。

在一实施例中，在所述确定目标兴趣点的步骤之后，所述方法还包括：自行或基于用户指令来收藏所述目标兴趣点；自行或基于用户指令在所述电子地图中显示所述目标兴趣点及所述目标兴趣点的介绍信息；自行或基于用户指令将所述目标兴趣点推送至外部电子设备，如推动给用户好友的智能手机等。

通过本申请的兴趣点确定方法，可自动识别驾驶员在驾驶过程中看到、指向的感兴趣地点，作为POI兴趣点显示在电子屏幕中，并加以保存，也可以立刻推送该兴趣点的相关介绍或导航路径，避免驾驶员错过路途中看见的目标地点，一定程度上提升了导航效率及用户驾驶体验。

参阅图5，本实施例提供一种兴趣点确定装置，由于本实施例的技术原理与前述方法实施例的技术原理相似，因而不再对同样的技术细节做重复性赘述。本实施例的兴趣点确定装置包括如下模块：图像获取模块、方向识别模块、兴趣点推送模块。其中，图像获取模块用于执行前述方法步骤的S10，方向识别模块用于执行前述方法步骤的S20，兴趣点推送模块用于执行前述方法步骤的S30。

如图6所示，本申请还提供一种电子设备，所述电子设备为智能手机、平板电脑、便携式电脑、台式机、车机等，用以执行前述实施例介绍的兴趣点确定方法。

图6显示的电子设备仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。如图6所示，电子设备以通用计算设备的形式表现，其组件可以包括但不限于：一个或者多个处理器或者处理单元16，***存储器28，连接不同***组件(包括***存储器28和处理单元16)的总线18。

总线18表示几类总线结构中的一种或多种，包括存储器总线或者存储器控制器，***总线，图形加速端口，处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说，这些体系结构包括但不限于工业标准体系结构(ISA)总线，微通道体系结构(MAC)总线，增强型ISA总线、视频电子标准协会(VESA)局域总线以及***组件互连(PCI)总线。

该电子设备典型地包括多种计算机***可读介质。这些介质可以是任何能够被电子设备访问的可用介质，包括易失性和非易失性介质，可移动的和不可移动的介质。

***存储器28可以包括易失性存储器形式的计算机***可读介质，例如随机存取存储器(RAM)30和/或高速缓存存储器32。电子设备可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机***存储介质。仅作为举例，存储***34可以用于读写不可移动的、非易失性磁介质(图6未显示，通常称为“硬盘驱动器”)。尽管图6中未示出，可以提供用于对可移动非易失性磁盘(例如“软盘”)读写的磁盘驱动器，以及对可移动非易失性光盘(例如CD-ROM，DVD-ROM或者其它光介质)读写的光盘驱动器。在这些情况下，每个驱动器可以通过一个或者多个数据介质接口与总线18相连。存储器28可以包括至少一个程序产品，该程序产品具有一组(例如至少一个)程序模块，这些程序模块被配置以执行本发明各实施例的功能。

具有一组(至少一个)程序模块42的程序/实用工具40，可以存储在例如存储器28中，这样的程序模块42包括——但不限于——操作***、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块42通常执行本发明所描述的实施例中的功能和/或方法。

电子设备也可以与一个或多个外部设备14(例如键盘、扬声器、摄像头、显示器24等)通信，还可与一个或者多个使得用户能与该电子设备交互的设备通信，和/或与使得该电子设备能与一个或多个其它计算设备进行通信的任何设备(例如网卡，调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口22进行。并且，电子设备还可以通过网络适配器20与一个或者多个网络(例如局域网(LAN)，广域网(WAN)和/或公共网络，例如因特网)通信。如图6所示，网络适配器20通过总线18与电子设备的其它模块通信。应当明白，尽管图中未示出，可以结合该电子设备使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID***、磁带驱动器以及数据备份存储***等。

所属技术领域的技术人员知道，本发明的各个方面可以实现为***、方法或计算机程序产品。因此，本发明的各个方面可以具体实现为以下形式，即：完全的硬件实施方式、完全的软件实施方式(包括固件、驻留软件、微代码等)，或硬件和软件方面结合的实施方式，这里可以统称为“电路”、“模块”或“***”。此外，在一些实施例中，本发明的各个方面还可以实现为在一个或多个计算机可读介质中的计算机程序产品的形式，该计算机可读介质中包含计算机可读的程序代码。

可以采用一个或多个计算机可读介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的***、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行***、装置或者器件使用或者与其结合使用。

计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括——但不限于——电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行***、装置或者器件使用或者与其结合使用的程序。

计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括——但不限于——无线、有线、光缆、RF等等，或者上述的任意合适的组合。

可以以一种或多种程序设计语言的任意组合来编写用于执行本发明操作的计算机程序代码，所述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++等，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。

应当理解，本发明的兴趣点确定方法都可以由计算机程序指令实现。这些计算机程序指令可以提供给通用计算机、专用计算机或其它可编程数据处理装置的处理器，从而生产出一种机器，使得这些计算机程序指令在通过计算机或其它可编程数据处理装置的处理器执行时，产生了实现流程图和/或框图中的一个或多个方框中规定的功能/动作的装置。

也可以把这些计算机程序指令存储在计算机可读介质中，这些指令使得计算机、其它可编程数据处理装置、或其他设备以特定方式工作，从而，存储在计算机可读介质中的指令就产生出包括实现流程图和/或框图中的一个或多个方框中规定的功能/动作的指令的制造品(article of manufacture)。

也可以把计算机程序指令加载到计算机、其它可编程数据处理装置、或其它设备上，使得在计算机、其它可编程数据处理装置或其它设备上执行一系列操作步骤，以产生计算机实现的过程，从而使得在计算机或其它可编程装置上执行的指令提供实现流程图和/或框图中的一个或多个方框中规定的功能/动作的过程。

综上，本发明的兴趣点确定方法、装置、存储介质及电子设备，可根据用户视线、手势来确定兴趣点，从而有效提高导航效率，提升用户体验，克服了现有技术中的种种缺点而具高度产业利用价值。

上述实施例仅例示性说明本发明的原理及其功效，而非用于限制本发明。任何熟悉此技术的人士皆可在不违背本发明的精神及范畴下，对上述实施例进行修饰或改变。因此，举凡所属技术领域中具有通常知识者在未脱离本发明所揭示的精神与技术思想下所完成的一切等效修饰或改变，仍应由本发明的权利要求所涵盖。

Claims (10)

1.一种兴趣点确定方法，其特征在于，包括：

获取车内至少一个用户的用户图像信息；

识别所述用户图像信息中的所述至少一个用户的用户视线方向和/或用户手势方向；根据所述至少一个用户的用户视线方向和/或用户手势方向，确定目标兴趣点。

2.根据权利要求1所述的方法，其中，所述识别所述用户图像信息中的用户视线方向和用户手势方向的步骤包括：

根据当前车辆位置及行车路径判断车辆正前方方向；

根据所述用户图像信息中用户视线与所述车辆正前方方向的夹角判断所述用户视线方向；以及

根据所述用户图像信息中用户手势与所述车辆正前方方向的夹角判断所述用户手势方向。

3.根据权利要求1所述的方法，其中，所述根据所述至少一个用户的用户视线方向和/或用户手势方向确定目标兴趣点的步骤包括：

根据所述至少一个用户的用户视线方向所在的直线和/或用户手势方向所在的直线，确定汇聚点；

确定所述汇聚点与当前车辆位置之间的相对距离；

根据所述相对距离及所述汇聚点与当前车辆位置的相对方向，确定所述汇聚点的地理位置；以及

将所述汇聚点的地理位置与电子地图中各候选兴趣点的地理位置进行匹配，根据匹配结果确定所述目标兴趣点。

4.根据权利要求3所述的方法，其中，所述根据匹配结果确定目标兴趣点的步骤包括：

若所述汇聚点的地理位置与电子地图中各候选兴趣点的地理位置都匹配失败，则将距离所述汇聚点的地理位置小于阈值的一候选兴趣点作为所述目标兴趣点。

5.根据权利要求1所述的方法，其中，所述候选兴趣点包括：预设于所述电子地图中的兴趣点，和/或从网页上摘取的兴趣点。

6.根据权利要求1所述的方法，其中，在确定所述目标兴趣点的步骤之后，所述方法还包括：根据当前车辆位置与所述兴趣点自身的地理位置或所述兴趣点相关的地理位置生成导航信息，并进行显示。

7.根据权利要求1所述的方法，其中，在所述确定目标兴趣点的步骤之后，所述方法包括：

收藏所述目标兴趣点；

在所述电子地图中显示所述目标兴趣点及所述目标兴趣点的介绍信息；以及

将所述目标兴趣点推送至外部电子设备。

8.一种兴趣点确定装置，其特征在于，包括：

图像获取模块，用于获取车内至少一个用户的用户图像信息；

方向识别模块，用于识别所述用户图像信息中的所述至少一个用户的用户视线方向和用户手势方向；

兴趣点推送模块，用于根据所述至少一个用户的用户视线方向和/或用户手势方向，确定目标兴趣点。

9.一种计算机可读存储介质，其中存储有计算机程序，其特征在于，所述计算机程序被处理器加载执行时，实现如权利要求1至7中任一所述的兴趣点确定方法。

10.一种电子设备，其特征在于，包括：处理器及存储器；其中，

所述存储器用于存储计算机程序；

所述处理器用于加载执行所述计算机程序，以使所述电子设备执行如权利要求1至7中任一所述的兴趣点确定方法。

Images