CN109902531B - 用户管理方法、装置、介质和电子设备 - Google Patents

用户管理方法、装置、介质和电子设备 Download PDF

Info

Publication number
CN109902531B
CN109902531B CN201711282114.XA CN201711282114A CN109902531B CN 109902531 B CN109902531 B CN 109902531B CN 201711282114 A CN201711282114 A CN 201711282114A CN 109902531 B CN109902531 B CN 109902531B
Authority
CN
China
Prior art keywords
image
user
face
face image
management method
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201711282114.XA
Other languages
English (en)
Other versions
CN109902531A (zh
Inventor
张野
王飞腾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
JD Digital Technology Holdings Co Ltd
Jingdong Technology Holding Co Ltd
Original Assignee
Beijing Jingdong Financial Technology Holding Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Jingdong Financial Technology Holding Co Ltd filed Critical Beijing Jingdong Financial Technology Holding Co Ltd
Priority to CN201711282114.XA priority Critical patent/CN109902531B/zh
Publication of CN109902531A publication Critical patent/CN109902531A/zh
Application granted granted Critical
Publication of CN109902531B publication Critical patent/CN109902531B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Processing (AREA)

Abstract

本发明提供了一种用户管理方法、装置、介质和电子设备,该用户管理方法包括:采集用户的人脸图像;从图像库中查找与所述人脸图像相似的第一图像;根据所述第一图像的尺寸对所述人脸图像进行插值放大处理,以得到与所述第一图像的尺寸相同的第二图像;根据所述第一图像和所述第二图像生成清晰图像,以基于所述清晰图像确定所述用户的信息。本发明的技术方案能够通过人脸识别实现对用户的管理,同时能够对采集到的模糊图像进行修复处理,进而可以提高对用户信息识别的准确率。

Description

用户管理方法、装置、介质和电子设备
技术领域
本发明涉及计算机技术领域,具体而言,涉及一种用户管理方法、装置、介质和电子设备。
背景技术
目前越来越多的商家店铺采用智能设备来管理会员、监测店铺的运营状况,对于会员管理来说,除了权益的发放,流程的简便程度和交互易用性成了用户是否注册会员的关键因素。
目前,会员信息的管理一方面需要记录会员注册时登记的信息,另一方面需要向会员发放会员卡,而在用户行使会员权利时,需要出示相应的会员卡或熟记会员卡***,显然这种方式在一定程度上会给用户带来困扰,进而会影响到用户注册会员的决断。
需要说明的是,在上述背景技术部分公开的信息仅用于加强对本发明的背景的理解,因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。
发明内容
本发明的目的在于提供一种用户管理方法、装置、介质和电子设备,进而至少在一定程度上克服由于相关技术的限制和缺陷而导致的一个或者多个问题。
本发明的其他特性和优点将通过下面的详细描述变得显然,或部分地通过本发明的实践而习得。
根据本发明的第一方面,提供了一种用户管理方法,包括:采集用户的人脸图像;从图像库中查找与所述人脸图像相似的第一图像;根据所述第一图像的尺寸对所述人脸图像进行插值放大处理,以得到与所述第一图像的尺寸相同的第二图像;根据所述第一图像和所述第二图像生成清晰图像,以基于所述清晰图像确定所述用户的信息。
在本发明的一些实施例中,基于前述方案,根据所述第一图像和所述第二图像生成清晰图像,包括:对所述第一图像进行修复处理,得到第三图像;基于神经网络对所述第二图像进行像素点填充处理,得到第四图像;根据所述第三图像和所述第四图像合成所述清晰图像。
在本发明的一些实施例中,基于前述方案,在从图像库中查找与所述人脸图像相似的第一图像之前,还包括:判断持续采集到所述用户的人脸图像的时长是否达到预定时长;在判定持续采集到所述人脸图像的时长未达到所述预定时长的情况下,再从图像库中查找与所述人脸图像相似的第一图像。
在本发明的一些实施例中,基于前述方案,所述的用户管理方法还包括:在判定持续采集到所述人脸图像的时长达到所述预定时长的情况下,根据所述人脸图像识别所述用户是否为注册用户;若识别到所述用户为注册用户,则获取与所述用户相关联的信息。
在本发明的一些实施例中,基于前述方案,与所述用户相关联的信息包括:根据所述用户的行为数据确定的用户画像信息。
在本发明的一些实施例中,基于前述方案,所述的用户管理方法还包括:若识别到所述用户为注册用户,则根据与所述用户相关联的信息向所述用户推送促销信息和/或优惠信息。
在本发明的一些实施例中,基于前述方案,所述的用户管理方法还包括:若识别到所述用户为未注册用户,则提示所述用户进行注册。
在本发明的一些实施例中,基于前述方案,根据所述人脸图像识别所述用户是否为注册用户,包括:判断在已存储的注册用户图像中是否能够匹配到与所述人脸图像相符的图像;若匹配到与所述人脸图像相符的图像,则确定所述用户为注册用户,否则确定所述用户为未注册用户。
在本发明的一些实施例中,基于前述方案,根据所述人脸图像识别所述用户是否为注册用户,包括:将所述人脸图像发送至指定设备,以供所述指定设备根据所述人脸图像判断所述用户是否为注册用户;接收所述指定设备返回的判断结果,根据所述判断结果识别所述用户是否为注册用户。
在本发明的一些实施例中,基于前述方案,基于所述清晰图像,获取所述用户的信息,包括:提取所述清晰图像中的人脸特征,根据所述人脸特征确定所述用户的年龄段和/或性别信息。
根据本发明的第二方面,提供了一种用户管理装置,包括:采集单元,用于采集用户的人脸图像;查找单元,用于从图像库中查找与所述人脸图像相似的第一图像;放大单元,用于根据所述第一图像的尺寸对所述人脸图像进行插值放大处理,以得到与所述第一图像的尺寸相同的第二图像;处理单元,用于根据所述第一图像和所述第二图像生成清晰图像,以基于所述清晰图像确定所述用户的信息。
根据本发明的第三方面,提供了一种计算机可读介质,其上存储有计算机程序,所述程序被处理器执行时实现如上述实施例中第一方面所述的用户管理方法。
根据本发明的第四方面,提供了一种电子设备,包括:一个或多个处理器;存储装置,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现如上述实施例中第一方面所述的用户管理方法。
在本发明的一些实施例所提供的技术方案中,通过从图像库中查找与人脸图像相似的第一图像,并根据第一图像的尺寸对人脸图像进行插值放大处理,以得到与第一图像的尺寸相同的第二图像,进而基于第一图像和第二图像生成清晰图像,使得能够对采集到的模糊图像进行修复处理,进而可以提高对用户信息(如年龄段和/或性别信息)的识别准确率。
在本发明的一些实施例所提供的技术方案中,通过在判定持续采集到用户的人脸图像的时长未达到预定时长时,对采集到的人脸图像进行处理,以获取用户的年龄段和/或性别信息,使得能够实现对人流量和即时客群的分析,进而达到精准营销的目的。
在本发明的一些实施例所提供的技术方案中,通过在判定持续采集到用户的人脸图像的时长达到预定时长时,根据采集到的人脸图像识别用户是否为注册用户,使得能够确定进行注册用户识别的时机,避免对采集到的所有人脸图像都进行注册用户的识别而影响用户的体验及影响***的处理性能。
在本发明的一些实施例所提供的技术方案中,通过采集用户的人脸图像,并根据采集到的人脸图像识别到用户未注册用户时,获取与用户相关联的信息,使得在进行注册而用户管理时,能够通过人脸图像的采集与识别来确定用户是否为注册用户,进而使得用户无需携带纸质的会员卡或熟记会员卡***来行使会员权利,方便了用户的操作过程,并且本发明实施例的技术方案也能够提升用户与注册用户管理***的互动性,使得用户能够方便查看自己的信息,进而能够在一定程度上提升用户注册率。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本发明。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本发明的实施例,并与说明书一起用于解释本发明的原理。显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。在附图中:
图1示意性示出了根据本发明的第一个实施例的用户管理方法的流程图;
图2示意性示出了根据本发明的第二个实施例的用户管理方法的流程图;
图3示意性示出了根据本发明的第三个实施例的用户管理方法的流程图;
图4示意性示出了根据本发明的第四个实施例的用户管理方法的流程图;
图5示意性示出了根据本发明的一个实施例的对人脸图像进行处理的流程图;
图6示意性示出了根据本发明的第五个实施例的用户管理方法的流程图;
图7示意性示出了根据本发明的实施例的智能终端的框图;
图8示意性示出了根据本发明的实施例的服务器的框图;
图9示出了根据本发明的实施例的对人脸图像进行处理得到较清晰的图像的过程示意图;
图10示出了根据本发明的实施例的对人脸图像进行处理得到较清晰的图像的效果示意图;
图11示出了根据本发明的实施例的会员录入过程的一个界面示意图;
图12示出了根据本发明的实施例的会员录入过程的另一个界面示意图;
图13示出了根据本发明的实施例的展示会员信息的界面示意图;
图14示意性示出了根据本发明的一个实施例的用户管理装置的框图;
图15示出了适于用来实现本发明实施例的电子设备的计算机***的结构示意图。
具体实施方式
现在将参考附图更全面地描述示例实施方式。然而,示例实施方式能够以多种形式实施,且不应被理解为限于在此阐述的范例;相反,提供这些实施方式使得本发明将更加全面和完整,并将示例实施方式的构思全面地传达给本领域的技术人员。
此外,所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施例中。在下面的描述中,提供许多具体细节从而给出对本发明的实施例的充分理解。然而,本领域技术人员将意识到,可以实践本发明的技术方案而没有特定细节中的一个或更多,或者可以采用其它的方法、组元、装置、步骤等。在其它情况下,不详细示出或描述公知方法、装置、实现或者操作以避免模糊本发明的各方面。
附图中所示的方框图仅仅是功能实体,不一定必须与物理上独立的实体相对应。即,可以采用软件形式来实现这些功能实体,或在一个或多个硬件模块或集成电路中实现这些功能实体,或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。
附图中所示的流程图仅是示例性说明,不是必须包括所有的内容和操作/步骤,也不是必须按所描述的顺序执行。例如,有的操作/步骤还可以分解,而有的操作/步骤可以合并或部分合并,因此实际执行的顺序有可能根据实际情况改变。
图1示意性示出了根据本发明的第一个实施例的用户管理方法的流程图。
参照图1所示,根据本发明的第一个实施例的用户管理方法,包括如下步骤:
步骤S110,采集用户的人脸图像。
步骤S120,从图像库中查找与所述人脸图像相似的第一图像。
步骤S130,根据所述第一图像的尺寸对所述人脸图像进行插值放大处理,以得到与所述第一图像的尺寸相同的第二图像。
步骤S140,根据所述第一图像和所述第二图像生成清晰图像,以基于所述清晰图像确定所述用户的信息。其中,用户的信息可以是用户的年龄段和/或性别信息。
在本发明的一个实施例中,步骤S140中根据第一图像和第二图像生成清晰图像的过程包括:对所述第一图像进行修复处理,得到第三图像;基于神经网络对所述第二图像进行像素点填充处理,得到第四图像;根据所述第三图像和所述第四图像合成所述清晰图像。
在本发明的一个实施例中,步骤S140中基于所述清晰图像获取所述用户的信息,包括:提取所述清晰图像中的人脸特征,根据所述人脸特征确定所述用户的年龄段和/或性别信息。
图1所示的用户管理方法使得能够对采集到的模糊图像进行修复处理,进而可以提高对用户信息(如年龄段和/或性别信息)识别的准确率。需要说明的是,图1所示的用户管理方法的执行主体可以是终端,也可以是服务器。当执行主体是终端时,终端可以通过摄像头采集用户的人脸图像;当执行主体是服务器时,服务器可以通过用户终端来采集用户的人脸图像,即用户终端将采集的人脸图像发送至服务器。
在本发明的一个实施例中,参照图2所示,在步骤S120之前还包括:步骤S111,判断持续采集到所述用户的人脸图像的时长是否达到预定时长;在判定持续采集到所述人脸图像的时长未达到所述预定时长的情况下,再执行步骤S120。
在该实施例中,通过在判定持续采集到用户的人脸图像的时长未达到预定时长时,对采集到的人脸图像进行处理,以获取用户的年龄段和/或性别信息,使得能够实现对人流量和即时客群的分析,进而达到精准营销的目的。
在本发明的一个实施例中,参照图2所示,还包括:步骤S112,在判定持续采集到所述人脸图像的时长达到所述预定时长的情况下,根据所述人脸图像识别所述用户是否为注册用户。
在该实施例中,通过在判定持续采集到用户的人脸图像的时长达到预定时长时,根据采集到的人脸图像识别用户是否为注册用户,使得能够确定进行注册用户识别的时机,避免对采集到的所有人脸图像都进行注册用户的识别而影响用户的体验及影响***的处理性能。
在本发明的一个实施例中,若识别到所述用户为注册用户,则获取与所述用户相关联的信息。可选地,与所述用户相关联的信息包括:根据所述用户的行为数据确定的用户画像信息,比如购物的历史踪迹、消费偏好、财商数据等。
此外,在本发明的实施例中,所述的用户管理方法还包括:若识别到所述用户已注册为会员,则根据所述用户的信息向所述用户推送促销信息和/或优惠信息。
在本发明的一个实施例中,若识别到所述用户为未注册用户,则提示所述用户进行注册。
在本发明的实施例中,步骤S112中根据人脸图像识别用户是否为注册用户可以有如下两种具体的实现方式:
实现方式一:
判断在已存储的注册用户图像中是否能够匹配到与所述人脸图像相符的图像;若匹配到与所述人脸图像相符的图像,则确定所述用户为注册用户,否则确定所述用户为未注册用户。
需要说明的是,当用户注册时,可以采集并存储用户的人脸图像,进而可以基于存储的人脸图像来进行识别。
实现方式二:
将所述人脸图像发送至指定设备,以供所述指定设备根据所述人脸图像判断所述用户是否为注册用户;接收所述指定设备返回的判断结果,根据所述判断结果识别所述用户是否为注册用户。
需要说明的是:指定设备可以是服务器。在实现方式二中,可以将采集到的人脸图像发送至服务器,由服务器来判断用户是否已注册。
图3示意性示出了根据本发明的第三个实施例的用户管理方法的流程图。
参照图3所示,根据本发明的第三个实施例的用户管理方法,包括如下步骤:
步骤S30,采集用户的人脸图像。
在本发明的实施例中,可以通过摄像头来采集用户的人脸图像。
步骤S32,根据所述人脸图像,识别所述用户是否已注册为会员。
在本发明的实施例中,步骤S32可以有如下两种具体的实现方式:
实现方式一:
在本发明的示例性实施例中,步骤S32包括:判断在已存储的会员图像中是否能够匹配到与所述人脸图像相符的会员图像;若匹配到与所述人脸图像相符的会员图像,则确定所述用户已注册为会员,否则确定所述用户未注册为会员。
需要说明的是,当用户注册会员时,可以采集并存储用户的人脸图像,进而可以基于存储的人脸图像来进行会员识别。
实现方式二:
在本发明的示例性实施例中,步骤S32包括:将所述人脸图像发送至服务器,以供所述服务器根据所述人脸图像判断所述用户是否已注册为会员;接收所述服务器返回的判断结果,根据所述判断结果识别所述用户是否已注册为会员。
在实现方式二中,可以将采集到的人脸图像发送至服务器,由服务器来判断用户是否已注册为会员。
步骤S34,若识别到所述用户已注册为会员,则获取并展示所述用户的信息。
在本发明的示例性实施例中,步骤S34中获取所述用户的信息包括:从数据库中查询与所述用户相关联的信息;或接收所述服务器发送的与所述用户相关联的信息。即获取用户的信息也可以是直接从数据库中查询得到的,也可以是从服务器接收到的。
需要说明的是,获取并展示的用户信息可以是根据用户的行为数据确定的用户画像信息,比如购物的历史踪迹、消费偏好、财商数据等。
此外,在本发明的实施例中,所述的用户管理方法还包括:若识别到所述用户已注册为会员,则根据所述用户的信息向所述用户推送促销信息和/或优惠信息。
参照图4所示,根据本发明的第四个实施例的用户管理方法,除了包含图3中所示的步骤S30、S32和S34之外,还包括步骤S36,若识别到所述用户未注册为会员,则提示所述用户进行会员注册。
根据本发明的实施例,在图3和图4所示的用户管理方法的基础上,还可以包括:判断持续采集到所述用户的人脸图像的时长是否达到预定时长;在判定持续采集到所述用户的人脸图像的时长达到所述预定时长时,再执行图3和图4中所示的步骤S32,即根据所述人脸图像识别所述用户是否已注册为会员。该实施例的技术方案能够确定进行会员识别的时机,避免对采集到的所有人脸图像都进行会员识别而影响用户的体验及影响***的处理性能。
可选地,在本发明的实施例中,当判定持续采集到所述人脸图像的时长未达到所述预定时长时,所述用户管理方法还包括:根据所述人脸图像识别所述用户的年龄段和/或性别信息,并存储识别到的所述用户的年龄段和/或性别信息;或将所述人脸图像发送至服务器,以供所述服务器识别所述用户的年龄段和/或性别信息。该实施例的技术方案使得能够实现对人流量和即时客群的分析,进而达到精准营销的目的。
在本发明的实施例中,上述实施例中所述的根据所述人脸图像识别所述用户的年龄段和/或性别信息,包括:对所述人脸图像进行处理,以得到清晰图像;提取所述清晰图像中的人脸特征;根据所述人脸特征识别所述用户的年龄段和/或性别信息。
图5示意性示出了根据本发明的一个实施例的对人脸图像进行处理的流程图,具体包括:
步骤S501,从图像库中查找与所述人脸图像相似的第一图像,对所述第一图像进行修复处理,得到第二图像。
需要说明的是,图像库包括本地的图像库和/或网络上的图像库,由于对图像进行处理的目的是为了识别用户的年龄段和/或性别信息,因此可以从图像库中查找与所述人脸图像相似的第一图像,以辅助进行年龄段和/或性别信息的识别。
步骤S502,根据所述第一图像的尺寸对所述人脸图像进行插值放大处理,以得到与所述第一图像的尺寸相同的第三图像,并基于神经网络对所述第三图像进行像素点填充处理,得到第四图像。
步骤S503,基于所述第二图像和所述第四图像,生成所述清晰图像。
图5所示实施例的技术方案使得能够对采集到的模糊图像进行修复处理,进而提高对用户年龄段和/或性别信息的识别准确率。
需要说明的是,图3至图5所示实施例的技术方案的执行主体可以是智能终端。
图6示意性示出了根据本发明的第五个实施例的用户管理方法的流程图。
参照图6所示,根据本发明的第五个实施例的用户管理方法,包括如下步骤:
步骤S601,接收指定设备发送的人脸图像。
在本发明的实施例中,指定设备可以是采集人脸图像的智能终端。
步骤S602,根据所述人脸图像判断对应的用户是否已注册为会员,以得到判断结果。
在本发明的示例性实施例中,步骤S602包括:判断在已存储的会员图像中是否能够匹配到与所述人脸图像相符的会员图像;若匹配到与所述人脸图像相符的会员图像,则确定所述用户已注册为会员,否则确定所述用户未注册为会员。
需要说明的是,当用户注册会员时,可以采集并存储用户的人脸图像,进而可以基于存储的人脸图像来进行会员识别。
步骤S603,将所述判断结果反馈给所述指定设备。
在本发明的实施例中,通过将判断结果反馈给指定设备,使得指定设备能够根据
在本发明的一些实施例中,基于前述方案,所述的用户管理方法还包括:判断持续接收到所述指定设备发送的同一用户的人脸图像的时长是否达到预定时长;在判定持续接收到所述同一用户的人脸图像的时长达到所述预定时长时,再根据所述人脸图像判断用户是否已注册为会员。该实施例的技术方案能够确定进行会员识别的时机,避免对采集到的所有人脸图像都进行会员识别而影响用户的体验及影响***的处理性能。
可选地,在本发明的实施例中,当判定持续接收到所述同一用户的人脸图像的时长未达到所述预定时长时,所述用户管理方法还包括:根据所述人脸图像识别所述用户的年龄段和/或性别信息,并存储识别到的所述用户的年龄段和/或性别信息。该实施例的技术方案使得能够实现对人流量和即时客群的分析,进而达到精准营销的目的。
在本发明的一些实施例中,基于前述方案,所述的用户管理方法还包括:在根据所述人脸图像判定所述用户已注册为会员时,获取与所述用户相关联的信息;将与所述用户相关联的信息发送至所述指定设备,以使所述指定设备显示与所述用户相关联的信息。
需要说明的是,与用户相关联的信息可以是根据用户的行为数据确定的用户画像信息,比如购物的历史踪迹、消费偏好、财商数据等。
需要说明的是,图6所示实施例的技术方案的执行主体可以是服务器。
上述实施例分别从智能终端和服务器的角度对本发明实施例的用户管理方法进行了说明,以下以智能终端和服务器相结合的角度对本发明实施例的技术方案进行详细阐述。
参照图7所示,根据本发明的实施例的智能终端,包括:终端主控模块、电源模块、摄像头模块及语音模块。
其中,电源模块用于向智能终端供电。摄像头模块用于拍摄用户的人脸图像,在适当的环境下抓取用户的人脸图像并传输至服务器进行用户分析。采集的人脸图像可以是base64图像,频率可以为每0.1秒一次。语音模块用于与用户进行人机交互。
参照图8所示,根据本发明的实施例的服务器,包括:主控模块、人脸识别模块、特征分析模块、匹配识别模块、语音合成模块、收发模块、数据存储模块。
其中,人脸识别模块用于接收从智能终端传输过来的人脸图像进行识别,并提取其中的特征。可选地,人脸识别模块可以基于Fast RCNN(快速特定区域卷积神经网路)算法进行人脸识别。
此部分可以包括两方面内容:1、会员登录或会员录入;2、即时客群分析。
1、会员登录或会员录入,当会员登录或会员录入时,采集到的人脸图像通常是较清晰的静态人脸图像,因此可以利用Fast RCNN做人脸的分类。
2、即时客群分析。
受限于商店中顾客快速走动与相机本身的拍摄能力,在很大程度上捕获到的人脸为模糊或过于稀疏的图像。此时要先进行预处理,以将图像还原为较清晰的人脸图像,以便于进行更为精准的年龄和性别检测,辅助商家进行客群分析。其中,对图像进行处理得到较清晰的人脸图像的过程具体如图9所示,主要步骤如下:
(1)获取智能终端发送过来的照片,归一化处理到8*8像素,归一化处理后的图像记为原图。
(2)利用调节网络为原图匹配一张高像素照片,得到一张与原图最相似的大图。然后对大图进行处理,比如可以通过系列的18-30低分辨率ResNet图块和转置卷积层生成256色的预估通道至每个像素,以对匹配到的大图进行处理。
需要说明的是:调节网络是一个评分匹配网络,当把原图输入至数据库中时,可以通过评分的方式获取分值最大的图,该图即为匹配到的与原图最相似的大图。
(3)使用像素神经网络向原图中增加高清细节。具体地,像素神经网络有四个滤波器,这四个滤波器的类型为之前训练得到的(不同的图片类型有着不同模式,分类为四种模式),在进行处理时,先把原图进行插值放大处理,然后将放大处理后的图划分为几个区块,按照各个区块的像素分部模式计算其属于其中一种模式的概率,计算后以最相符的滤波器进行滤波转换,进而用于填补放大处理后的图。
(4)最后通过softmax算法将调节网络及像素神经网络处理后的图像进行联合运算,得到较为清晰的图片。
通过上述过程处理后得到的效果图如图10所示,可见,通过本发明实施例的处理方法可以将模糊或过于稀疏的图像还原为较清晰的人脸图像,进而便于进行更为精准的年龄和性别检测。
继续参照图8所示,服务器中的特征分析模块用于对已提取的特征或是处理得到的人脸图像进行年龄、性别检测,并进行存储,以用于客群分析使用。
匹配识别模块用于将人脸图像与数据库中存储的信息进行比对,以确定用户是否已注册为会员,若比对成功则返回唯一用户PIN码,PIN码对应的是用户数据标签与个人信息。若数据库中无法检索出相应的会员信息,则返回录入新用户的信息。
语音合成模块和收发模块用于作为推送数据至智能终端上展示会员信息,并实现与用户进行交互的功能。
在本发明的实施例中,智能终端与服务器配合实现用户管理的方案具体包括如下几个步骤:
步骤1:智能终端启动摄像头模块进行不间断扫描,在捕捉到人脸信息时进行截取并传输至服务器,服务器对智能终端传输的人脸图像进行分析处理,然后得到人脸对应的年龄及性别信息,将该信息传输至数据库进行保存。
若相同人脸在智能终端前停留超过一定时间(如1.5秒至2.5秒),则进入会员识别步骤。若用户不注册会员,则判定为随机顾客,进而可以采集人脸进行客群分析。
步骤2:当触发会员识别过程时,服务器对人脸进行Fast RCNN识别,若在数据库中未匹配出对应的人脸,则进入会员录入过程。会员录入过程的界面可以如图11所示。
步骤3:智能终端显示二维码,用户扫描二维码即跳转会员绑定页面,具体界面如图12所示。当会员信息绑定成功后,服务器即可识别到用户在数据库中对应的PIN码。
步骤4:若服务器在数据库匹配出对应的人脸,则会根据用户的PIN码从数据库中检索该PIN码对应的用户个人信息,包括用户购物(在线上和/或线下)的历史踪迹、消费偏好、财商数据等。按此信息分类为几个数据标签,得到用户画像,并发送至智能终端进行展示。展示效果可以如图13所示。
步骤5:对于已注册为会员的用户,服务器检索其个人数据标签所对应的促销及优惠信息,然后显示在智能终端屏幕上或通过声波编码技术转换为音频文件推送至智能终端(如采集用户人脸图像的智能终端或用户自己的移动终端等)上。
除以上步骤之外,在本发明的实施例中,数据库可以分为会员数据库与非会员数据库,会员数据库提供个性化、定制化的商品推荐及促销优惠,非会员数据库按性别年龄进行统计,以便于商家在后台***做更全面的来店顾客分析。
图14示意性示出了根据本发明的第一个实施例的用户管理装置的框图。
参照图14所示,根据本发明的第一个实施例的用户管理装置1200,包括:采集单元1402、查找单元1404、放大单元1406和处理单元1408。
其中,采集单元1402用于采集用户的人脸图像;查找单元1404用于从图像库中查找与所述人脸图像相似的第一图像;放大单元1406用于根据所述第一图像的尺寸对所述人脸图像进行插值放大处理,以得到与所述第一图像的尺寸相同的第二图像;处理单元1408用于根据所述第一图像和所述第二图像生成清晰图像,以基于所述清晰图像确定所述用户的信息。
在本发明的一些实施例中,基于前述方案,处理单元1408配置为:对所述第一图像进行修复处理,得到第三图像;基于神经网络对所述第二图像进行像素点填充处理,得到第四图像;根据所述第三图像和所述第四图像合成所述清晰图像。
在本发明的一些实施例中,基于前述方案,还包括:判断单元,用于在查找单元1404从图像库中查找与所述人脸图像相似的第一图像之前,判断持续采集到所述用户的人脸图像的时长是否达到预定时长;
所述查找单元1404用于在所述判断单元判定持续采集到所述人脸图像的时长未达到所述预定时长的情况下,再从图像库中查找与所述人脸图像相似的第一图像。
在本发明的一些实施例中,基于前述方案,还包括:识别单元,用于在所述判断单元判定持续采集到所述人脸图像的时长达到所述预定时长的情况下,根据所述人脸图像识别所述用户是否为注册用户;获取单元,用于在所述识别单元识别到所述用户为注册用户时,获取与所述用户相关联的信息。
在本发明的一些实施例中,基于前述方案,与所述用户相关联的信息包括:根据所述用户的行为数据确定的用户画像信息。
在本发明的一些实施例中,基于前述方案,还包括:推送单元,用于在所述识别单元识别到所述用户为注册用户时,根据与所述用户相关联的信息向所述用户推送促销信息和/或优惠信息。
在本发明的一些实施例中,基于前述方案,还包括:提示单元,用于在所述识别单元识别到所述用户为未注册用户时,提示所述用户进行注册。
在本发明的一些实施例中,基于前述方案,所述识别单元配置为:判断在已存储的注册用户图像中是否能够匹配到与所述人脸图像相符的图像;若匹配到与所述人脸图像相符的图像,则确定所述用户为注册用户,否则确定所述用户为未注册用户。
在本发明的一些实施例中,基于前述方案,所述识别单元配置为:将所述人脸图像发送至指定设备,以供所述指定设备根据所述人脸图像判断所述用户是否为注册用户;接收所述指定设备返回的判断结果,根据所述判断结果识别所述用户是否为注册用户。
在本发明的一些实施例中,基于前述方案,所述处理单元配置为:提取所述清晰图像中的人脸特征,根据所述人脸特征确定所述用户的年龄段和/或性别信息。
下面参考图15,其示出了适于用来实现本发明实施例的电子设备的计算机***1500的结构示意图。图15示出的电子设备的计算机***1500仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。
如图15所示,计算机***1500包括中央处理单元(CPU)1501,其可以根据存储在只读存储器(ROM)1502中的程序或者从存储部分1508加载到随机访问存储器(RAM)1503中的程序而执行各种适当的动作和处理。在RAM 1503中,还存储有***操作所需的各种程序和数据。CPU 1501、ROM 1502以及RAM 1503通过总线1504彼此相连。输入/输出(I/O)接口1505也连接至总线1504。
以下部件连接至I/O接口1505:包括键盘、鼠标等的输入部分1506;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分1507;包括硬盘等的存储部分1508;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分1509。通信部分1509经由诸如因特网的网络执行通信处理。驱动器1510也根据需要连接至I/O接口1505。可拆卸介质1511,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器1510上,以便于从其上读出的计算机程序根据需要被安装入存储部分1508。
特别地,根据本发明的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本发明的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分1509从网络上被下载和安装,和/或从可拆卸介质1511被安装。在该计算机程序被中央处理单元(CPU)1501执行时,执行本申请的***中限定的上述功能。
需要说明的是,本发明所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的***、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本发明中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行***、装置或者器件使用或者与其结合使用。而在本发明中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行***、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、RF等等,或者上述的任意合适的组合。
附图中的流程图和框图,图示了按照本发明各种实施例的***、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的***来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本发明实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现,所描述的单元也可以设置在处理器中。其中,这些单元的名称在某种情况下并不构成对该单元本身的限定。
作为另一方面,本申请还提供了一种计算机可读介质,该计算机可读介质可以是上述实施例中描述的电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被一个该电子设备执行时,使得该电子设备实现如上述实施例中所述的用户管理方法。
例如,所述电子设备可以实现如图1中所示的:步骤S110,采集用户的人脸图像;步骤S120,从图像库中查找与所述人脸图像相似的第一图像;步骤S130,根据所述第一图像的尺寸对所述人脸图像进行插值放大处理,以得到与所述第一图像的尺寸相同的第二图像;步骤S140,根据所述第一图像和所述第二图像生成清晰图像,以基于所述清晰图像确定所述用户的信息。
又如,所述电子设备可以实现如图2至图6中所示的各个步骤。
应当注意,尽管在上文详细描述中提及了用于动作执行的设备的若干模块或者单元,但是这种划分并非强制性的。实际上,根据本发明的实施方式,上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之,上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。
通过以上的实施方式的描述,本领域的技术人员易于理解,这里描述的示例实施方式可以通过软件实现,也可以通过软件结合必要的硬件的方式来实现。因此,根据本发明实施方式的技术方案可以以软件产品的形式体现出来,该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM,U盘,移动硬盘等)中或网络上,包括若干指令以使得一台计算设备(可以是个人计算机、服务器、触控终端、或者网络设备等)执行根据本发明实施方式的方法。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本发明的其它实施方案。本申请旨在涵盖本发明的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本发明未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本发明的真正范围和精神由下面的权利要求指出。
应当理解的是,本发明并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。

Claims (11)

1.一种用户管理方法,其特征在于,包括:
采集用户的人脸图像;
从图像库中查找与所述人脸图像相似的第一图像;
根据所述第一图像的尺寸对所述人脸图像进行插值放大处理,以得到与所述第一图像的尺寸相同的第二图像;
根据所述第一图像和所述第二图像生成清晰图像,以基于所述清晰图像确定所述用户的信息;
其中,在从图像库中查找与所述人脸图像相似的第一图像之前,还包括:判断持续采集到所述用户的人脸图像的时长是否达到预定时长;
在判定持续采集到所述人脸图像的时长未达到所述预定时长的情况下,再从图像库中查找与所述人脸图像相似的第一图像;
根据所述第一图像和所述第二图像生成清晰图像,包括:
对所述第一图像进行修复处理,得到第三图像;
基于神经网络对所述第二图像进行像素点填充处理,得到第四图像;
根据所述第三图像和所述第四图像合成所述清晰图像。
2.根据权利要求1所述的用户管理方法,其特征在于,还包括:
在判定持续采集到所述人脸图像的时长达到所述预定时长的情况下,根据所述人脸图像识别所述用户是否为注册用户;
若识别到所述用户为注册用户,则获取与所述用户相关联的信息。
3.根据权利要求2所述的用户管理方法,其特征在于,与所述用户相关联的信息包括:根据所述用户的行为数据确定的用户画像信息。
4.根据权利要求2所述的用户管理方法,其特征在于,还包括:
若识别到所述用户为注册用户,则根据与所述用户相关联的信息向所述用户推送促销信息和/或优惠信息。
5.根据权利要求2所述的用户管理方法,其特征在于,还包括:
若识别到所述用户为未注册用户,则提示所述用户进行注册。
6.根据权利要求2所述的用户管理方法,其特征在于,根据所述人脸图像识别所述用户是否为注册用户,包括:
判断在已存储的注册用户图像中是否能够匹配到与所述人脸图像相符的图像;
若匹配到与所述人脸图像相符的图像,则确定所述用户为注册用户,否则确定所述用户为未注册用户。
7.根据权利要求2所述的用户管理方法,其特征在于,根据所述人脸图像识别所述用户是否为注册用户,包括:
将所述人脸图像发送至指定设备,以供所述指定设备根据所述人脸图像判断所述用户是否为注册用户;
接收所述指定设备返回的判断结果,根据所述判断结果识别所述用户是否为注册用户。
8.根据权利要求1至7中任一项所述的用户管理方法,其特征在于,基于所述清晰图像,获取所述用户的信息,包括:
提取所述清晰图像中的人脸特征,根据所述人脸特征确定所述用户的年龄段和/或性别信息。
9.一种用户管理装置,其特征在于,包括:
采集单元,用于采集用户的人脸图像;
查找单元,用于从图像库中查找与所述人脸图像相似的第一图像;
放大单元,用于根据所述第一图像的尺寸对所述人脸图像进行插值放大处理,以得到与所述第一图像的尺寸相同的第二图像;
处理单元,用于根据所述第一图像和所述第二图像生成清晰图像,以基于所述清晰图像确定所述用户的信息;
判断单元,用于在所述查找单元从图像库中查找与所述人脸图像相似的第一图像之前,判断持续采集到所述用户的人脸图像的时长是否达到预定时长;
所述查找单元,用于在所述判断单元判定持续采集到所述人脸图像的时长未达到所述预定时长的情况下,再从图像库中查找与所述人脸图像相似的第一图像;
所述处理单元,用于对所述第一图像进行修复处理,得到第三图像;基于神经网络对所述第二图像进行像素点填充处理,得到第四图像;根据所述第三图像和所述第四图像合成所述清晰图像。
10.一种计算机可读介质,其上存储有计算机程序,其特征在于,所述程序被处理器执行时实现如权利要求1至8中任一项所述的用户管理方法。
11.一种电子设备,其特征在于,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现如权利要求1至8中任一项所述的用户管理方法。
CN201711282114.XA 2017-12-07 2017-12-07 用户管理方法、装置、介质和电子设备 Active CN109902531B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711282114.XA CN109902531B (zh) 2017-12-07 2017-12-07 用户管理方法、装置、介质和电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711282114.XA CN109902531B (zh) 2017-12-07 2017-12-07 用户管理方法、装置、介质和电子设备

Publications (2)

Publication Number Publication Date
CN109902531A CN109902531A (zh) 2019-06-18
CN109902531B true CN109902531B (zh) 2021-10-01

Family

ID=66938810

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711282114.XA Active CN109902531B (zh) 2017-12-07 2017-12-07 用户管理方法、装置、介质和电子设备

Country Status (1)

Country Link
CN (1) CN109902531B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111275841A (zh) * 2020-01-10 2020-06-12 郑鑫 一种人脸识别签到装置及方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102339441A (zh) * 2010-07-25 2012-02-01 俞建峰 基于人脸识别技术的电子消费管理***
CN104268963A (zh) * 2014-08-06 2015-01-07 成都百威讯科技有限责任公司 一种智能门锁***及智能门锁、智能报警门
CN104346603A (zh) * 2013-08-09 2015-02-11 富士施乐株式会社 图像处理装置与图像处理方法
CN106713255A (zh) * 2015-11-17 2017-05-24 腾讯科技(深圳)有限公司 用户信息管理方法和***

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102339441A (zh) * 2010-07-25 2012-02-01 俞建峰 基于人脸识别技术的电子消费管理***
CN104346603A (zh) * 2013-08-09 2015-02-11 富士施乐株式会社 图像处理装置与图像处理方法
CN104268963A (zh) * 2014-08-06 2015-01-07 成都百威讯科技有限责任公司 一种智能门锁***及智能门锁、智能报警门
CN106713255A (zh) * 2015-11-17 2017-05-24 腾讯科技(深圳)有限公司 用户信息管理方法和***

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Pixel Recursive Super Resolution;Ryan Dahl,Mohammad Norouzi,Jonathon Shlens;《http://arxiv.org/pdf/ 1702.00783v2.pdf》;20170522;1-6页 *

Also Published As

Publication number Publication date
CN109902531A (zh) 2019-06-18

Similar Documents

Publication Publication Date Title
CN108776787B (zh) 图像处理方法及装置、电子设备、存储介质
CN114258559A (zh) 用于标识具有不受控制的光照条件的图像中的肤色的技术
CN110362714B (zh) 视频内容的搜索方法和装置
CN109086834B (zh) 字符识别方法、装置、电子设备及存储介质
CN107305557A (zh) 内容推荐方法及装置
JP2003271084A (ja) 情報提供装置および情報提供方法
CN111078940B (zh) 图像处理方法、装置、计算机存储介质及电子设备
US20180107686A1 (en) Search method and apparatus
CN110929138A (zh) 推荐信息生成方法、装置、设备及存储介质
CN112183408B (zh) 基于案场图像的客户画像***及方法
CN111984803B (zh) 多媒体资源处理方法、装置、计算机设备及存储介质
CN113989476A (zh) 对象识别方法及电子设备
CN110675179A (zh) 营销信息处理方法、装置、电子设备及可读存储介质
CN112766284A (zh) 图像识别方法和装置、存储介质和电子设备
CN107291774A (zh) 错误样本识别方法和装置
CN110020321A (zh) 产品索引的生成方法、装置、设备和计算机存储介质
CN109409419B (zh) 用于处理数据的方法和装置
CN109902531B (zh) 用户管理方法、装置、介质和电子设备
JP2020502710A (ja) ウェブページメイン画像認識方法及び装置
CN113744030A (zh) 基于ai用户画像的推荐方法、装置、服务器及介质
CN113297520A (zh) 页面设计辅助处理方法、装置及电子设备
CN113869099A (zh) 一种图像处理方法、装置、电子设备和存储介质
CN111400437A (zh) 互联网信息响应方法、装置、电子设备和计算机可读介质
CN109040774A (zh) 一种节目信息提取方法、终端设备及服务器
US12033620B1 (en) Systems and methods for analyzing text extracted from images and performing appropriate transformations on the extracted text

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder
CP01 Change in the name or title of a patent holder

Address after: Room 221, 2 / F, block C, 18 Kechuang 11th Street, Daxing District, Beijing, 100176

Patentee after: Jingdong Technology Holding Co.,Ltd.

Address before: Room 221, 2 / F, block C, 18 Kechuang 11th Street, Daxing District, Beijing, 100176

Patentee before: Jingdong Digital Technology Holding Co.,Ltd.

Address after: Room 221, 2 / F, block C, 18 Kechuang 11th Street, Daxing District, Beijing, 100176

Patentee after: Jingdong Digital Technology Holding Co.,Ltd.

Address before: Room 221, 2 / F, block C, 18 Kechuang 11th Street, Daxing District, Beijing, 100176

Patentee before: JINGDONG DIGITAL TECHNOLOGY HOLDINGS Co.,Ltd.

CP03 Change of name, title or address
CP03 Change of name, title or address

Address after: Room 221, 2 / F, block C, 18 Kechuang 11th Street, Daxing District, Beijing, 100176

Patentee after: JINGDONG DIGITAL TECHNOLOGY HOLDINGS Co.,Ltd.

Address before: 101111 Room 221, 2nd Floor, Block C, 18 Kechuang 11th Street, Daxing District, Beijing Economic and Technological Development Zone

Patentee before: BEIJING JINGDONG FINANCIAL TECHNOLOGY HOLDING Co.,Ltd.