CN104361276B - 一种多模态生物特征身份认证方法及*** - Google Patents

一种多模态生物特征身份认证方法及*** Download PDF

Info

Publication number
CN104361276B
CN104361276B CN201410652633.0A CN201410652633A CN104361276B CN 104361276 B CN104361276 B CN 104361276B CN 201410652633 A CN201410652633 A CN 201410652633A CN 104361276 B CN104361276 B CN 104361276B
Authority
CN
China
Prior art keywords
voice
lip
face
recognition
identification
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410652633.0A
Other languages
English (en)
Other versions
CN104361276A (zh
Inventor
邵彦超
张振京
姬豪杰
华梦阳
吕培
许威威
徐明亮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Newcapec Electronics Co Ltd
Original Assignee
Newcapec Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Newcapec Electronics Co Ltd filed Critical Newcapec Electronics Co Ltd
Priority to CN201410652633.0A priority Critical patent/CN104361276B/zh
Publication of CN104361276A publication Critical patent/CN104361276A/zh
Application granted granted Critical
Publication of CN104361276B publication Critical patent/CN104361276B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/32User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Security & Cryptography (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Collating Specific Patterns (AREA)

Abstract

本发明涉及一种多模态生物特征身份认证方法及***,包括图像获取模块、语音获取模块、主处理模块和存储模块,主处理模块进一步包括:与所述图像获取模块和语音获取模块电连接的控制单元,与所述控制单元电连接的人脸识别单元、语音识别单元和唇形与语音同步检测单元;存储模块分别与所述人脸识别单元和语音识别单元连接;所述控制单元根据所述身份认证装置的当前识别流程将从图像获取模块和语音获取模块接收到的生物特征图像或语音信息发送给人脸识别单元、语音识别单元或唇形与语音同步检测单元进行识别,获得识别结果;本发明的优点在于通过综合人脸、唇形、语音三种生物特征,并将发音特征与唇形特征同步检测进行识别降低了***识别错误率。

Description

一种多模态生物特征身份认证方法及***
技术领域
本发明涉及一种身份认证方法,尤其是涉及一种基于发音唇形动态特征的多模态生物特征身份认证方法及***。
背景技术
随着生物特征识别技术的广泛应用,在某些对身份认证要求较高的应用领
域,如安防、金融机构等,提出了多生物特征身份认证的需求。
现有多生物特征识别技术常用的有人脸特征与指纹相结合、 虹膜与人脸特征相结合、 指纹与签名相结合等方法。现有的多模态生物特征识别技术往往要求完全不同的生物特征采集设备,例如人脸识别与指纹识别双认证***,其人脸识别采用摄像机或者摄像头作为图像输入设备,指纹识别采用指纹采集仪作为指纹采集设备;再如,虹膜与人脸识别双认证***的采集设备也是完全不同的。提供一种只需要生物特征采集设备的低成本的多模态生物特征认证方法成为一个待解决的问题。并且,这些方法存在着***识别错误率高的问题,与上述一些多生物特征识别技术相比, 人脸唇形特征与语音特征结合起来有着无可比拟的优势。
中国专利200920307190.6公开了一种具有人脸识别功能的指纹识别装置,所述装置包括指纹采集***、人脸图像采集***、以及与上述各***相连的人脸指纹识别运算***,而所述人脸图像采集***包括有一辅助光源和电子图像采集装置,所述人脸图像采集***设置有一根据环境光强度控制调节所述辅助光源强度的动态调节补光电路。这种多模态识别***可以提高人脸图像质量、并提高图像的采集速度,但此识别装置要求两种生物特征采集设备,识别效率不高。
中国专利200510094438.1公开了一种基于虹膜和人脸的多模态生物特征身份识别***,所述方法包括:1)生物特征采集单元利用两个独立的采集通道同时采集虹膜和人脸图像,其采集支撑平台可使不同身高的使用者自然、舒适地输入人脸和虹膜图像;2)生物特征识别单元利用图像处理和小波变换技术得到特征模板,分别计算虹膜特征模板的匹配百分数和人脸特征模板的啮合度,利用统计数据融合的方法计算最终的识别结果;3)生物特征数据库单元只存储最后生成的特征模板,并将虹膜特征模板叠加于人脸模板,以保护生物特征数据的隐私权,增强识别***自身的安全性。
中国专利201110334658.2公开了一种基于唇读技术的唇语输入方法,所述方法主要解决针对常用汉字及***数字等模式分析、理解和分类计算的问题,方法内容包括:对所拍摄的嘴部唇动视频进行关键帧提取,利用灰度处理、中值滤波、动态阈值二值化处理及扫描去除噪点对提取的图像进行规格化处理,之后进行特征向量提取获取具有唇形特征的参数,与口型模板库进行匹配将图片识别为汉语拼音字母序列,最终结合输入法模块获得对应的汉字或***数字。该发明与本发明所用唇读技术的不同之处在于,其将提取的唇形特征参数与口型模板库进行匹配将图片识别为汉语拼音字母序列,而本发明的方法是用来将所提取的唇形特征信息与语音特征信息通过唇读技术进行同步性检测,用以检测唇形与语音是否同步,从而得到一个量化结果,作为生物特征身份认证的一部分。
中国专利200910263558.8公开了一种语音驱动唇形动画的方法,所述方法包括以下步骤:将汉语中的音节结构采用Consonant—Vowel分类;采集若干个人的原始音频数据和视频数据;获取对应唇形信息;获取语音特征数据;对所获取的唇形信息和语音特征数据进行训练和建模,依据训练的模型实时输入语音合成的唇形运动序列。
中国专利200910003083.9公开了一种语音驱动嘴唇形状变化的方法、获取嘴唇动画的方法及装置,所述方法包括:获取音频信号,根据所述音频信号的特征得到嘴唇形状的运动幅度比例;获取初始的嘴唇形状模型,根据所述初始的嘴唇形状模型和所述嘴唇形状的运动幅度比例生成嘴唇形状的运动幅度值;根据所述嘴唇形状的运动幅度值和预先建立的嘴唇发音模型库,生成变化的嘴唇形状网格模型集合。该方法操作复杂,可行性不高。
以上方法存在着***识别错误率高的问题,与上述一些多生物特征识别技术相比, 本发明采用人脸识别、语音识别、唇形与语音同步识别相结合的多模态生物特征身份认证方法及***,具有更高的识别精度。
发明内容
本发明所要解决的问题在于针对上述现有技术的不足,提供一种基于发音唇形动态特征的多模态生物特征身份认证方法及***,运用这种***,***错误率明显降低,通过多重检测可以大大提高识别的可靠程度,防止高仿真照片、人皮面具等作弊行为的干扰。
为解决上述技术问题,本发明采用的技术方案是:一种多模态生物特征身份认证***,包括图像获取模块、语音获取模块、主处理模块和存储模块,其特征在于:所述主处理模块进一步包括:与所述图像获取模块和语音获取模块电连接的控制单元,与所述控制单元电连接的人脸识别单元、语音识别单元和唇形与语音同步检测单元;存储模块分别与所述人脸识别单元和语音识别单元连接;所述控制单元根据所述身份认证装置的当前识别流程将从图像获取模块和语音获取模块接收到的生物特征图像或语音信息发送给人脸识别单元、语音识别单元或唇形与语音同步检测单元进行识别,获得识别结果;当控制单元根据预设的身份认证流程判断所述身份认证装置的当前识别流程为人脸识别时,将接收到的生物特征图像发送给所述人脸识别单元进行识别;当控制单元根据预设的身份认证流程判断所述身份认证装置的当前识别流程为语音识别时,将接收到的生物特征图像发送给所述语音识别单元进行识别;当控制单元根据预设的身份认证流程判断所述身份认证装置的当前识别流程为唇形与语音同步识别时,将接收到的生物特征图像和语音信息发送给所述唇形与语音同步检测单元进行识别。
一种上所述的多模态生物特征身份认证***的认证方法,其认证方法如下:
1)信息获取:通过图像获取模块获取用户的脸部图像信息,通过语音获取模块获取用户的语音信息;
2)人脸检测及识别:采用预置的人脸识别指令对得到的图像进行识别;所述采用预置的人脸识别指令对所述待认证的人脸图像进行识别步骤具体包括预处理、人脸检测、人脸关键点定位、归一化、人脸特征提取等操作进行人脸识别,同时获得人脸唇形信息,并在数据库中寻找最相似人脸,获取相似度;
3)语音检测及识别:采用预置的语音识别指令对得到的语音进行识别;所述采用预置的语音识别指令对所述待认证的语音信息进行识别步骤具体包括对采集到的语音信息进行声音信号的分割,采用线性预测倒谱技术( LPCC) 或者 Mel 频率倒谱系数( MFCC)等方法对语音特征参数进行提取,使用模板匹配方法、 最近邻方法、 神经网络方法、 混合马尔可夫模型方法或混合高斯模型(GMM) 方法中的一种对说话人的语音进行识别,并在数据库中寻找最佳拟合,获取相似度;
4)唇形与语音同步检测:采用预置的唇形与语音同步检测指令对在步骤2)中得到的唇形特征信息和在步骤3)中得到的语音特征信息进行同步性检测;所述采用预置的唇形与语音同步性检测指令对所述待认证唇形与语音同步性进行检测步骤具体包括将得到的唇形特征信息与语音特征信息进行口型语音同步检测,例如本技术方案中采用基于口型分类法,检测发音与唇形是否同步,并获取同步性指标;
5)识别结果判定:将人脸识别结果及其相似度、语音识别结果及其相似度、发音与唇形同步性指标作为参量,在训练集上建立合适的分类模型,例如本技术方案中所使用的支持向量机(SVM)分类模型,在特征空间中构建最优分割超平面,获取最佳权重;在识别过程中,将2)、3)和4)步结果代入,若计算结果大于预设的阈值时,则认证成功;若该计算结果小于或等于预设的阈值时,则认证不成功。
本发明的优点在于通过综合人脸、唇形、语音三种生物特征,并将发音特征与唇形特征同步检测进行识别降低了***识别错误率,通过多重检测可以大大提高识别的可靠程度,防止高仿真照片、人皮面具等作弊行为的干扰。
附图说明
图1为本发明身份认证***及方法结构示意图。
具体实施方式
如图1所示,一种多模态生物特征身份认证***,包括图像获取模块、语音获取模块、主处理模块和存储模块,所述主处理模块进一步包括:与所述图像获取模块和语音获取模块电连接的控制单元,与所述控制单元电连接的人脸识别单元、语音识别单元和唇形与语音同步检测单元;存储模块分别与所述人脸识别单元和语音识别单元连接;所述控制单元根据所述身份认证装置的当前识别流程将从图像获取模块和语音获取模块接收到的生物特征图像或语音信息发送给人脸识别单元、语音识别单元或唇形与语音同步检测单元进行识别,获得识别结果;当控制单元根据预设的身份认证流程判断所述身份认证装置的当前识别流程为人脸识别时,将接收到的生物特征图像发送给所述人脸识别单元进行识别;当控制单元根据预设的身份认证流程判断所述身份认证装置的当前识别流程为语音识别时,将接收到的生物特征图像发送给所述语音识别单元进行识别;当控制单元根据预设的身份认证流程判断所述身份认证装置的当前识别流程为唇形与语音同步识别时,将接收到的生物特征图像和语音信息发送给所述唇形与语音同步检测单元进行识别。
一种如上所述的多模态生物特征身份认证***的认证方法,其特征在于,其认证方法如下:
1)信息获取:通过图像获取模块获取用户的脸部图像信息,通过语音获取模块获取用户的语音信息;
2)人脸检测及识别:采用预置的人脸识别指令对得到的图像进行识别;所述采用预置的人脸识别指令对所述待认证的人脸图像进行识别步骤具体包括预处理、人脸检测、人脸关键点定位、归一化、人脸特征提取等操作进行人脸识别,同时获得人脸唇形信息,并在数据库中寻找最相似人脸,获取相似度;
3)语音检测及识别:采用预置的语音识别指令对得到的语音进行识别;所述采用预置的语音识别指令对所述待认证的语音信息进行识别步骤具体包括对采集到的语音信息进行声音信号的分割,采用线性预测倒谱技术( LPCC) 或者 Mel 频率倒谱系数( MFCC)等方法对语音特征参数进行提取,使用模板匹配方法、 最近邻方法、 神经网络方法、 混合马尔可夫模型方法或混合高斯模型(GMM) 方法中的一种对说话人的语音进行识别,并在数据库中寻找最佳拟合,获取相似度;
4)唇形与语音同步检测:采用预置的唇形与语音同步检测指令对在步骤2)中得到的唇形特征信息和在步骤3)中得到的语音特征信息进行同步性检测;所述采用预置的唇形与语音同步性检测指令对所述待认证唇形与语音同步性进行检测步骤具体包括将得到的唇形特征信息与语音特征信息进行口型语音同步检测,例如本技术方案中采用基于口型分类法,检测发音与唇形是否同步,并获取同步性指标;
5)识别结果判定:将人脸识别结果及其相似度、语音识别结果及其相似度、发音与唇形同步性指标作为参量,在训练集上建立合适的分类模型,例如本技术方案中所使用的支持向量机(SVM)分类模型,在特征空间中构建最优分割超平面,获取最佳权重;在识别过程中,将2)、3)和4)步结果代入,若计算结果大于预设的阈值时,则认证成功;若该计算结果小于或等于预设的阈值时,则认证不成功。
下面通过具体实施例进一步详细描述本发明的内容,但本发明并不仅仅限于此。
实施例1:本发明提供的一种基于发音唇形动态特征的多模态生物特征身份认证方法,如图1所示,包括:步骤101,获取人脸图像;步骤102,获取语音信息;步骤103,调用人脸识别指令对获取的人脸图像进行识别,获得人脸识别结果;步骤104,调用语音识别指令对获取的语音信息进行识别,获得语音识别结果;步骤105,调用唇形与语音同步检测指令对唇形与语音特征进行同步检测,获得唇形与语音同步指标结果;步骤106,根据获得的人脸识别结果、语音识别结果和唇形与语音同步性指标结果判断身份认证是否通过。
在获取人脸图像和用户语音信息时,可以根据预设的流程通过声音或界面提示用户获取人脸图像或语音信息。比如,首先通过语音提示用户人脸对准图像获取装置,在图像获取装置获取到人脸图像后,再通过语音提示用户读出语音或界面提示的文字,以便语音获取装置获取用户语音信息。当然,提示的方式还可以是通过身份认证装置的界面显示提示信息,或者语音提示和界面显示提示信息相结合的方式,本发明对此不作限定。上述步骤101和步骤102的顺序可以任意调换,即本发明对获取人脸图像和掌纹图像的顺序不作限定。在获取人脸图像和用户语音信息时,可以每次只获取一张人脸图像和语音信息,也可以一次获取多张人脸图像和语音信息,根据身份认证装置的存储空间确定,本发明对此不作限定。
上述步骤103和步骤104的顺序也可以任意调换,本发明对此不做限定。优选的,步骤101执行之后立即执行步骤103、步骤102执行之后立即执行步骤104,需要注意的是,步骤105需要在步骤103和步骤104之后进行。
上述步骤106中,根据步骤103获得的人脸识别结果,步骤104获得语音识别结果,步骤105获得的唇形与语音同步结果判断身份认证是否通过。将人脸识别结果及其相似度、语音识别结果及其相似度、发音与唇形同步性指标作为参量,在训练集上建立支持向量机(SVM)分类模型,在特征空间中构建最优分割超平面,获取最佳权重。在识别过程中,将103、104、105步结果代入,若计算结果大于预设的阈值时,则认证成功;若该计算结果小于或等于预设的阈值时,则认证不成功。
实施例2:为了提高身份认证的效率, 本发明的另一实施例提供的一种人脸和语音融合识别的身份认证方法,包括以下步骤: 步骤201,获取人脸图像;步骤202,调用人脸识别指令对获取的人脸图像进行识别,获得人脸识别结果及其相似度;步骤203,人脸识别结果判定:当人脸识别相似度大于预设的人脸识别阈值时,人脸识别认证成功;当人脸识别相似度小于或等于预设的人脸识别阈值时,人脸识别认证失败;步骤204,获取语音信息;步骤205,调用语音识别指令对获取的语音信息进行识别,获得语音识别结果及其相似度;步骤206,语音识别结果判定:当语音识别相似度大于预设的语音识别阈值时,语音识别认证成功;当语音识别相似度小于或等于预设的语音识别阈值时,语音识别认证失败;步骤207,调用唇形与语音同步检测指令对唇形与语音特征进行同步检测,获得唇形与语音同步指标结果;步骤208,唇形与语音同步性检测判定:当唇形与语音同步性指标大于预设的阈值时,身份认证成功;当唇形与语音同步性指标小于或等于预设的阈值时,身份认证失败。
上述步骤201-203和步骤204-206的顺序可以调换,本发明对此不做限定。
通过本发明提供的身份认证方法,采用基于发音唇形动态特征的多模态生物特征身份认证方法,保证了身份认证的安全性。

Claims (1)

1.一种由多模态生物特征身份认证***执行的认证方法,其***包括图像获取模块、语音获取模块、主处理模块和存储模块,所述主处理模块进一步包括:与所述图像获取模块和语音获取模块电连接的控制单元,与所述控制单元电连接的人脸识别单元、语音识别单元和唇形与语音同步检测单元;存储模块分别与所述人脸识别单元和语音识别单元连接;所述控制单元根据所述身份认证装置的当前识别流程将从图像获取模块和语音获取模块接收到的生物特征图像或语音信息发送给人脸识别单元、语音识别单元或唇形与语音同步检测单元进行识别,获得识别结果;当控制单元根据预设的身份认证流程判断所述身份认证装置的当前识别流程为人脸识别时,将接收到的生物特征图像发送给所述人脸识别单元进行识别;当控制单元根据预设的身份认证流程判断所述身份认证装置的当前识别流程为语音识别时,将接收到的生物特征图像发送给所述语音识别单元进行识别;当控制单元根据预设的身份认证流程判断所述身份认证装置的当前识别流程为唇形与语音同步识别时,将接收到的生物特征图像和语音信息发送给所述唇形与语音同步检测单元进行识别;其特征在于,其认证方法如下:
1)信息获取:通过图像获取模块获取用户的脸部图像信息,通过语音获取模块获取用户的语音信息;
2)人脸检测及识别:采用预置的人脸识别指令对得到的图像进行识别;所述采用预置的人脸识别指令对待认证的人脸图像进行识别步骤具体包括预处理、人脸检测、人脸关键点定位、归一化、人脸特征提取操作进行人脸识别,同时获得人脸唇形信息,并在数据库中寻找最相似人脸,获取相似度;
3)语音检测及识别:采用预置的语音识别指令对得到的语音进行识别;所述采用预置的语音识别指令对所述待认证的语音信息进行识别步骤具体包括对采集到的语音信息进行声音信号的分割,采用线性预测倒谱技术( LPCC) 或者 Mel 频率倒谱系数( MFCC)对语音特征参数进行提取,使用模板匹配方法、 最近邻方法、 神经网络方法、 混合马尔可夫模型方法或混合高斯模型(GMM) 方法中的一种对说话人的语音进行识别,并在数据库中寻找最佳拟合,获取相似度;
4)唇形与语音同步检测:采用预置的唇形与语音同步检测指令对在步骤2)中得到的唇形特征信息和在步骤3)中得到的语音特征信息进行同步性检测;所述采用预置的唇形与语音同步性检测指令对所述待认证唇形与语音同步性进行检测步骤具体包括将得到的唇形特征信息与语音特征信息进行口型语音同步检测,本技术方案中采用基于口型分类法,检测发音与唇形是否同步,并获取同步性指标;
5)识别结果判定:将人脸识别结果及其相似度、语音识别结果及其相似度、发音与唇形同步性指标作为参量,在训练集上建立分类模型,本技术方案中所使用的支持向量机(SVM)分类模型,在特征空间中构建最优分割超平面,获取最佳权重;在识别过程中,将2)、3)和4)步结果代入,若计算结果大于预设的阈值时,则认证成功;若该计算结果小于或等于预设的阈值时,则认证不成功。
CN201410652633.0A 2014-11-18 2014-11-18 一种多模态生物特征身份认证方法及*** Active CN104361276B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410652633.0A CN104361276B (zh) 2014-11-18 2014-11-18 一种多模态生物特征身份认证方法及***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410652633.0A CN104361276B (zh) 2014-11-18 2014-11-18 一种多模态生物特征身份认证方法及***

Publications (2)

Publication Number Publication Date
CN104361276A CN104361276A (zh) 2015-02-18
CN104361276B true CN104361276B (zh) 2017-07-18

Family

ID=52528535

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410652633.0A Active CN104361276B (zh) 2014-11-18 2014-11-18 一种多模态生物特征身份认证方法及***

Country Status (1)

Country Link
CN (1) CN104361276B (zh)

Families Citing this family (52)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104680375A (zh) * 2015-02-28 2015-06-03 优化科技(苏州)有限公司 电子支付真人活体身份验证***
CN106157957A (zh) * 2015-04-28 2016-11-23 中兴通讯股份有限公司 语音识别方法、装置及用户设备
CN104966053B (zh) 2015-06-11 2018-12-28 腾讯科技(深圳)有限公司 人脸识别方法及识别***
CN105069340B (zh) * 2015-07-27 2019-01-11 玉林师范学院 具有物理识别密码与生物特征识别密码同步控制的试卷保密***及其方法
CN105160302B (zh) * 2015-08-10 2018-04-06 西安凯虹电子科技有限公司 多模态生物识别通用平台及身份认证方法
CN105139503A (zh) * 2015-10-12 2015-12-09 北京航空航天大学 一种唇动口型识别门禁***及识别方法
CN106599765B (zh) * 2015-10-20 2020-02-21 深圳市商汤科技有限公司 基于对象连续发音的视-音频判断活体的方法及***
US9598076B1 (en) * 2015-10-22 2017-03-21 Ford Global Technologies, Llc Detection of lane-splitting motorcycles
CN106682662A (zh) * 2015-11-11 2017-05-17 天津中科智能识别产业技术研究院有限公司 用于移动终端的多模态生物特征识别模组及方法
CN105426723A (zh) * 2015-11-20 2016-03-23 北京得意音通技术有限责任公司 基于声纹识别、人脸识别以及同步活体检测的身份认证方法及***
US10360441B2 (en) 2015-11-25 2019-07-23 Tencent Technology (Shenzhen) Company Limited Image processing method and apparatus
CN106919891B (zh) * 2015-12-26 2019-08-23 腾讯科技(深圳)有限公司 一种图像处理方法及装置
CN105577664B (zh) * 2015-12-22 2019-03-19 深圳前海微众银行股份有限公司 密码重置方法及***、客户端及服务器
CN105354710A (zh) * 2015-12-22 2016-02-24 重庆智韬信息技术中心 人脸识别支付的辅助身份认证方法
CN106911630A (zh) * 2015-12-22 2017-06-30 上海仪电数字技术股份有限公司 终端及身份认证方法、终端和认证中心的认证方法及***
CN105590104A (zh) * 2015-12-31 2016-05-18 联想(北京)有限公司 识别方法、装置及电子设备
CN105512535A (zh) * 2016-01-08 2016-04-20 广东德生科技股份有限公司 一种用户认证的方法及装置
CN107404381A (zh) * 2016-05-19 2017-11-28 阿里巴巴集团控股有限公司 一种身份认证方法和装置
CN106407783A (zh) * 2016-09-23 2017-02-15 武汉必腾移动科技有限责任公司 一种在线验证方法及***
CN106485220A (zh) * 2016-10-11 2017-03-08 广州市和佳电子科技有限公司 人脸识别方法、具有人脸识别功能的智能眼镜及服务器
CN106778556A (zh) * 2016-12-01 2017-05-31 大连因特视智能传感科技有限公司 基于动态人脸识别和步态识别融合的智能身份识别***
CN107220592B (zh) 2017-05-03 2020-01-14 Oppo广东移动通信有限公司 一种光学指纹采集方法及相关产品
CN107145886B (zh) 2017-05-03 2020-01-14 Oppo广东移动通信有限公司 光学指纹采集方法及相关产品
CN107086038A (zh) * 2017-05-04 2017-08-22 珠海格力电器股份有限公司 语音控制方法以及语音控制器
CN107392137B (zh) * 2017-07-18 2020-09-08 艾普柯微电子(上海)有限公司 人脸识别方法及装置
CN107729986B (zh) * 2017-09-19 2020-11-03 平安科技(深圳)有限公司 驾驶模型训练方法、驾驶人识别方法、装置、设备及介质
CN107798351B (zh) * 2017-11-09 2020-03-31 大国创新智能科技(东莞)有限公司 一种基于深度学习神经网络的身份识别方法和***
CN108198315A (zh) * 2018-01-31 2018-06-22 深圳正品创想科技有限公司 一种身份验证方法以及身份验证装置
JP7034808B2 (ja) * 2018-04-03 2022-03-14 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 情報処理方法、情報処理装置及び情報処理システム
CN108712381A (zh) * 2018-04-16 2018-10-26 出门问问信息科技有限公司 一种身份验证方法及装置
CN109150538B (zh) * 2018-07-16 2021-06-25 广州大学 一种指纹与声纹融合身份认证方法
CN109346085B (zh) * 2018-10-29 2021-09-28 合肥赛为智能有限公司 一种基于声纹识别的监狱监管平台
CN109461437B (zh) * 2018-11-28 2023-05-09 平安科技(深圳)有限公司 唇语识别的验证内容生成方法及相关装置
CN109711350B (zh) * 2018-12-28 2023-04-07 武汉大学 一种基于唇部运动和语音融合的身份认证方法
CN110082723B (zh) * 2019-05-16 2022-03-15 浙江大华技术股份有限公司 一种声源定位方法、装置、设备及存储介质
CN110348372A (zh) * 2019-07-09 2019-10-18 杭州米络星科技(集团)有限公司 一种直播中主播身份的实名验证方法
CN111684459A (zh) * 2019-07-18 2020-09-18 深圳海付移通科技有限公司 一种身份验证方法、终端设备、存储介质
CN111079791A (zh) * 2019-11-18 2020-04-28 京东数字科技控股有限公司 人脸识别方法、设备及计算机可读存储介质
CN111199032A (zh) * 2019-12-31 2020-05-26 华为技术有限公司 身份认证的方法以及装置
CN111325139B (zh) * 2020-02-18 2023-08-04 浙江大华技术股份有限公司 一种唇语识别方法及装置
CN111326175A (zh) * 2020-02-18 2020-06-23 维沃移动通信有限公司 一种对话者的提示方法及穿戴设备
CN111428221A (zh) * 2020-03-16 2020-07-17 东南大学 一种人脸识别与唇语密码相结合的身份认证方法
CN114141230A (zh) * 2020-08-14 2022-03-04 华为终端有限公司 电子设备及其语音识别方法和介质
CN111709004B (zh) * 2020-08-19 2020-11-13 北京远鉴信息技术有限公司 一种身份认证方法、装置、电子设备及可读存储介质
CN112257617B (zh) * 2020-10-26 2022-05-20 支付宝(杭州)信息技术有限公司 多模态目标识别方法和***
CN112581981B (zh) * 2020-11-04 2023-11-03 北京百度网讯科技有限公司 人机交互方法、装置、计算机设备和存储介质
CN112597467A (zh) * 2020-12-15 2021-04-02 中标慧安信息技术股份有限公司 基于多媒体的住户认证方法和***
CN113445829B (zh) * 2021-07-23 2022-05-24 阜阳万瑞斯电子锁业有限公司 一种具备面部识别功能的储物柜智能锁及使用方法
CN113641980A (zh) * 2021-08-23 2021-11-12 北京百度网讯科技有限公司 认证方法及装置,电子设备和介质
CN114241459B (zh) * 2022-02-24 2022-06-17 深圳壹账通科技服务有限公司 一种驾驶员身份验证方法、装置、计算机设备及存储介质
CN114639152A (zh) * 2022-03-22 2022-06-17 平安普惠企业管理有限公司 基于人脸识别的多模态语音交互方法、装置、设备及介质
CN114780940B (zh) * 2022-06-21 2022-09-09 中铁电气化局集团有限公司 跨***数据共享交互的项目运行监控及预警方法、***

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101046959A (zh) * 2007-04-26 2007-10-03 上海交通大学 基于唇语特征的身份认证方法
CN103324918A (zh) * 2013-06-25 2013-09-25 浙江中烟工业有限责任公司 一种人脸识别与唇形识别相配合的身份认证方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101046959A (zh) * 2007-04-26 2007-10-03 上海交通大学 基于唇语特征的身份认证方法
CN103324918A (zh) * 2013-06-25 2013-09-25 浙江中烟工业有限责任公司 一种人脸识别与唇形识别相配合的身份认证方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
"SESAM:A biometric person identification system using sensor fusion";U Dieckmann,etc;《Pattern Recognition Letters》;19971231;第301页至308页 *
"遗传小波神经网络实现人脸和语音的认证***";刘扬等;《计算机工程与应用》;20061231;第50页至53页 *

Also Published As

Publication number Publication date
CN104361276A (zh) 2015-02-18

Similar Documents

Publication Publication Date Title
CN104361276B (zh) 一种多模态生物特征身份认证方法及***
Kim et al. Person authentication using face, teeth and voice modalities for mobile device security
US6219640B1 (en) Methods and apparatus for audio-visual speaker recognition and utterance verification
CN106709402A (zh) 基于音型像特征的真人活体身份验证方法
WO2019127262A1 (zh) 基于云端的人脸活体检测方法、电子设备和程序产品
CN104376250A (zh) 基于音型像特征的真人活体身份验证方法
Alsaadi Study on most popular behavioral biometrics, advantages, disadvantages and recent applications: A review
JP2000259814A (ja) 画像処理装置及びその方法
CN109558788B (zh) 静默语音输入辨识方法、计算装置和计算机可读介质
Majekodunmi et al. A review of the fingerprint, speaker recognition, face recognition and iris recognition based biometric identification technologies
CN104239766A (zh) 基于视频和音频的核电站用身份认证方法和***
Mandalapu et al. Audio-visual biometric recognition and presentation attack detection: A comprehensive survey
CN110113319A (zh) 身份认证方法、装置、计算机设备和存储介质
CN108376215A (zh) 一种身份认证方法
CN112507311A (zh) 一种基于多模态特征融合的高安全性身份验证方法
El Shafey et al. Audio-visual gender recognition in uncontrolled environment using variability modeling techniques
CN114218543A (zh) 一种基于多场景表情识别的加密解锁***及方法
WO2022268183A1 (zh) 一种基于视频的随机手势认证方法及***
US11715330B2 (en) Liveness detection in an interactive video session
Shen et al. Secure mobile services by face and speech based personal authentication
CN116883900A (zh) 一种基于多维生物特征的视频真伪鉴别方法和***
WO2006057475A1 (en) Face detection and authentication apparatus and method
CN110738985A (zh) 基于语音信号的跨模态生物特征识别方法及***
KR20120125802A (ko) 다중 생체정보를 이용하는 점진적 개인인증 시스템 및 방법
KR20070118806A (ko) 임베디드 시스템용 안면 검출방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CB03 Change of inventor or designer information

Inventor after: Yang Weiguo

Inventor after: Fu Changshun

Inventor after: Hua Mengyang

Inventor after: Ji Haojie

Inventor after: Xu Mingliang

Inventor after: Lv Pei

Inventor after: Xu Weiwei

Inventor after: Shao Yanchao

Inventor after: Zhang Zhenjing

Inventor before: Shao Yanchao

Inventor before: Zhang Zhenjing

Inventor before: Ji Haojie

Inventor before: Hua Mengyang

Inventor before: Lv Pei

Inventor before: Xu Weiwei

Inventor before: Xu Mingliang

CB03 Change of inventor or designer information