CN112396356A - 基于视觉与听觉信息处理的语言和人才测评方法 - Google Patents

Abstract

本发明公开了一种基于视觉与听觉信息处理的语言和人才测评的方法，利用视觉与听觉信息处理和对面部、手部经络扫描模块，建立基于视觉和听觉信息处理的***网络，经过***网络构建生物特征识别与信息安全的智能人机交互***平台，从最初入学开始，以学生为单元建立包括图像、个性视频、语音、语速和语调在内的生物特征及个人基本信息数据库，经后台整合、更新处理，自动生成学生基本信息独立表单，解决语言和人才的能力测评问题，学校在确保学生信息安全的前提下，向社会推介直实的各类人才，提高学校培养人才的就业率以及就业水平，为单位的人才培养与任用和任务安排考核有着积极的实际意义，尤其对人才梯队的建设攻略有更加细致的参数可选。

Description

基于视觉与听觉信息处理的语言和人才测评方法

技术领域

本发明涉及一种基于视觉与听觉信息处理的语言和人才测评方法，特别适用于外语教学和人才测评。

背景技术

一般地，语言的基础是声、音、色，声即声带发出的声音；音即舌头与口腔配合变化的标准，也即语言发音的标准；色即说话时的面色表情，不同语言间的声、色基本一样，但音却不同，并且随着文化、地域以及民族的差异越大而语言标准的区别也越大。因此，在教授外语时，多会融入该外语发源地的文化和民族生活***还是外语水平。

发明内容

为了解决背景所述学生对外语的敬畏、海选结果的误差、口语依标准自测并校正等语言测评和人才测评遴选、提拔的公平公正的问题，本发明提供一种基于视觉与听觉信息处理的语言和人才测评方法，利用视觉与听觉信息处理模块，建立基于视觉和语音信息处理的***网络，然后经过网络构建生物特征识别与信息安全的智能人机交互***平台，在***平台各终端采集和填写学生成长过程的点点滴滴，后台综合对比计算整合处理，自动生成学生基本信息独立表单，公平公正地完成以学生为单元的语言和人才测评。

从最初入学开始，学校组织新生在视、听采集设备完善的区域，将每一名学生包括头像、个性视频、语音、语速和语调以及面部和手部经络在内的生物特征及个人基本信息主动和被动逐一录入平台，保存到关系数据库内，后台服务器再根据学校开设的系别、专业、班级等项目综合计算生成包含学生姓名、专业、班级、测评更新时间、结果及***对学生的综合评价和成长曲线在内的学生基本信息独立表单，通过映射到平台专用服务器向局域网内各终端开放，展示于智能人机交互平台。

所述视、听采集设备完善的区域，系指人流集中活动的区域，包括报名签到处、图书馆、自习室、体育馆、操场、食堂在内的人员集中活动区域，梯度布置视、听和面手部经络扫描采集设备。

所述梯度布置是如台阶梯步类似布置，采集的数据是由远及近、由表及里获取的生物特征信息，这样布置的信息采集设备采集的数据信息包括个人行为习惯和面或手部的经络信息在内，将会更全面完整，被动录入包括生物特征信息随时间流逝而逐渐改变的个人成长过程在内的实时数据，这些数据信息，任何人无法提取和知晓，仅为***后台作为计算整合学生的综合评价、成长曲线以及更新个人的基本信息独立表单的实参和针对个人的基本信息独立表单在某一终端上打印的活体密码。

***对学生的综合评价、成长曲线在内的数据由***后台服务器分别针对各个学生的所有信息综合计算处理后自动生成学生成长数据表单，映射到平台专用服务器，表单与制表处理软件兼容，以便终端用户使用编辑，经过编辑的表单通过中间服务器转存，转码后提交到后台服务器处理；此表单数据填报、计算操作与后台同步更新，并在后台数据表单内记录包括填报人、填报时间、数据、填报机器码在内的项目信息，以便出现问题时朔源，方便追查责任人。

智能人机交互***平台内建立包括学生的生物特征信息和基本信息在内的关系数据库，关系数据库由数据库服务器管理。

关系数据库中建立包括学生的生物特征信息和基本信息在内各种表单，分别通过不同类型的服务器以不同的形式主动、被动和自动填充其数据。

主动填充的数据包括姓名、系别、班级、主要指导老师、考评时间和结果在内的个人基本信息，由学生本人和老师通过***平台的终端填充。

被动填充的数据包括图像、声音、动作、表情、行为习惯在内的由视觉和听觉模块以及面手部经络扫描采集到的个人生物特征信息数据，当学生自然地经过网络终端时，被动地由终端采集填充到数据库的相应表单中。

自动填充的数据包括后台服务器依据由老师定期不定时对学生的考评结果，根据客观实际实时录入的数据和通过视觉和听觉模块采集的包括生物特征信息随时间流逝而逐渐改变的实时更新数据在内的数据重新计算整合得到的数据，提交到数据库管理服务器，由数据库管理服务器自动更新录入关系数据库中的相应表单，作为学生成长信息的主要数据来源。

学生成长信息数据由***后台服务器分别针对某一学生的所有信息综合计算处理后实时左移更新填充，一般包括个性成熟度、适应能力、判断能力、自学能力、成长指数在内的主要项目，手动填充数据为相应项目的“本次更新”列。

中间服务器每当获取新的数据，将其暂存转码提交到数据库服务器，数据库服务器即将这些数据清楚细分保存，同时将更新后的数据以学生为单位包装分配给后台服务器，后台服务器即依次从学生个人到班、年级、专业、系到学院综合对比计算整合处理，分别给出对学生的综合评价、成长曲线在内的数据信息，并将此信息生成更新后的学生基本信息独立表单，***完成对学生个体的语言和人才测评。

更新后的学生基本信息独立表单，即学生的语言和人才测评结果，每行项目历史数据保存字段视学制长短而定，学制越长，历史数据所占列数越多，一般为10列以上，也就是从左至右至少有10个以上同项目历史字段数据信息，每更新一次信息，相应向右填充一格，直到10个以上的单元格全部填充后，再次更新一次的信息就始终在相应项目行的最右边单元格，包括此单元格在内的原有数据流水式均向左移一格，同时，最左边的一格数据视其重要性质决定丢弃或另外分类保存。

学生通过智能人机交互平台，从最初入学开始，经过主动和被动填充学生基本信息独立表单空白项，将个人所有信息录入***，并通过教学过程的实际情景定期不定时更新，以保持个人特征信息和进步信息与***数据完全同步，这些信息包括学生的系别、专业、班级、姓名、图像、个性视频、语音、语速、语调、测评结果在内，其中隐含着个人唯一活体密码，且定期不定时更新保存到数据库内，除了本人之外，其他任何人无法复制，确保了数据的完整性和安全性。

老师上课时，通过终端打开智能人机交互***平台，点选该课班级名称，该课时应到的学生全部列在其表单中，通过终端配置的摄像头经过全场扫描，或通过拾音器经过点名应答，实到的学生姓名将变成绿色，缺席的学生在表单中闪烁式提醒；如在点名中，有学生冒名顶替应答，冒名者在表单中将显示黄色闪烁；老师在表单中点选学生姓名时，学生的基本信息独立表单就以浮窗的形式展现在老师的面前；当与学生互动的环节，无论是大课还是小课，都可以快速而准确地将各同学合理且和谐地分成若干组别，制造外语发源地的文化场景，以此来加深学生的学习印象。

当老师在路上、工作室等一些不特定的区域与学生偶遇时，通过手持终端扫描或启动拾音器，该学生的基本信息独立表单就弹出展现在老师的手持终端设备上，老师对正在互动进行时的学生状况一概全览，就不会因记不起突然出现的学生名字而感到尴尬，反而使老师与学生间的交流沟通会显得恰如其分，老师并由此可知该学生相对强弱的学科和成长曲线等基本情况，并可针对性地对其进行必要的激励和补习或教育帮助。

学生在智能人机交互***平台上，可以选择自己包括语言在内的学***台上选择科目找到自己感兴趣的主题学***台中直接获得解答帮助，也可直接连线老师请求帮助解答。这些学***台后，服务器即对其痕迹清除；针对学生通过学习的方式浏览外网点选与学习无关的内容时，后台服务器将对学生浏览与学习不相关的内容择重保存，以作该生成长信息数据计算的实参内容。对学生要求保存的素材，服务器将针对保存到该学生的个人空间内，以此增进培养学生的习惯、个人修为和素质。

学生在智能人机交互***平台上，兴趣高昂时或经过老师安排布置时，可以通过***进行口语自测，学生对着***做口语自测时，***后台将在该学生独立表单界面记录其视觉和听觉元素完成自测，并针对自测差错弹出相应语言的识别标准和发音标准，引用标准发音过程的口腔、舌头等身体器官变化视频，令学生及时更正，从而当面校准字、词的标准发音和口语的语音、语调和语速；从反馈信息中及时找到自己的学***台服务器将对此作为更新信息存储，以做成长信息数据整合计算的综合评比参照。

相关教师可以随时随地关心查阅学生近况，通过终端查找并联系要找的学生，令其在规定的时间内完整地完成作业和功课，可利用***实时数据去说服学生的抵触心里和不满情绪，使学生明确认识到老师随时随地对自己无微不至的关怀，而非影子一样的跟踪缠绕。此过程的细节，中间服务器将转码提交给数据库服务器将其全部保存，以便提交到后台服务器作为针对该学生成长信息计算处理的重要参照。

所述相关教师，指的是智能人机交互平台局域网内与学生有直接师生关系的老师，无直接师生关系的老师，无法查阅与自己非直接师生关系的学生基本信息独立表单，但可以通过音、像设备识别其基本信息，以此有效防止作弊、冒充等手段。

口语测试海选阶段，评委老师可通过智能人机交互平台同时监测多位参加海选的学生，每位学生对着智能人机交互***平台按要求进行口语测试，结果包含语音的准确度、语言的流畅度、词汇的难度、表情的自然度以及说话时语音自然流畅、颤抖、眼神飘浮在内的所有信息均历历在目，详实记录在学生个人语言测评表单中，任何人无权人为修改，以示海选结果的公平公正和权威性。

针对必修课兴趣不足而专业课格外出色学生，通过智能人机交互***平台的学习统筹，从而有更多的时间攻读所学专业，更好地修炼自己爱好的专业课程，有更多的机会历练和积累专业知识技能，做到从入学到毕业都随心而愿地常做喜好的知识积累，最终达到从容投入社会从事专业工作的专业修为。

毕业时，学生可在智能人机交互平台上自动生成完整的择业简历，简历附该生在校的权威语言和人才测评结果及公平公正的***综合评价。

学校就业指导部门依据智能人机交互平台生成***人才推送表单，此表单包含学生姓名、专业、在校表现曲线、***综合评价、适合职业在内的重要个人信息，并将此包含重要信息的表单定向推送给招聘意向单位。

学校在确保学生个人信息安全的前提下，可以向国际化发展的社会推介直实的各类人才，提高学校培养人才的就业率以及就业水平，同时，将每个毕业生的所有数据信息完整打包发送到毕业生的工作单位和户口所在地以及出生地的人力资源和社会保障局，另外，将原数据文件从数据库移至档案数据库内保存10年以上。

本发明解决其技术问题所采用的技术方案是：基于视觉与听觉信息处理的语言和人才测评方法，利用视觉与听觉信息处理和对面部、手部经络扫描模块，建立基于视觉和听觉信息处理的***网络，经过***网络构建生物特征识别与信息安全的智能人机交互***平台，***平台内建立包括学生的生物特征信息和基本信息、各学科标准归档资料及学***台，保存到数据库内，再根据学校开设的系别、专业、班级等项目综合计算生成包含学生姓名、专业、班级、测评更新时间、结果以及***对学生的综合评价和成长曲线在内的学生最初的基本信息独立表单，***地完成组织学生个体的语言和人才测评基础数据；老师将学生定期不定时的考评结果，根据客观实际实时录入数据库，服务器根据主动数据填充、被动包括生物特征信息随时间流逝而逐渐改变的特征在内由网络终端自然采集的数据填充和自动计算结果实时更新的数据进行进一步计算整合更新数据填充，生成更新的学生基本信息独立表单，即学生个体的语言和人才测评更新数据；学生的成长信息数据表单由***后台服务器分别针对某一学生的所有信息综合计算处理后实时更新填充，包括个性成熟度、适应能力、判断能力、自学能力、成长指数在内的主要项目，定期不定时更新，以保持个人特征信息和进步信息与***数据实时完全同步；上课时，通过终端打开的***平台，点选该课班级名称，该课时应到的学生姓名将全部列在其表单中，通过终端配置的摄像头经过全场扫描，或通过拾音器经过点名应答，实到的学生姓名就变成绿色，缺席的学生在表单中闪烁式提醒，在点名中，有学生冒名顶替应答，冒名者在表单中将显示黄色闪烁；老师在表单中点选学生姓名时，该学生的基本信息独立表单就以浮窗的形式展现在老师的面前；当与学生互动的环节，无论是大课还是小课，都可以快速而准确地将各同学合理且和谐地分成若干组别，制造外语发源地的文化场景，以加深学生的学***台选择自己的学***台中直接获得帮助，也可直线联系老师请求帮助解答；对着***做外语口语自测时，***将在后台采集其视觉和听觉元素信息，并针对自测差错弹出相应语言的识别标准和发音标准，引用标准发音过程包括唇齿、舌头、口腔在内的身体器官的变化视频，令人及时更正，从而当面校准字、词的标准发音和口语的语音、语调和语速；老师可以随时随地查找、关心自己的学生，令其在规定的时间内完整地完成作业或功课，利用***实时数据去说服其抵触心里和不满情绪，使其明确认识到老师随时随地地都在对自己无微不至的关怀，而非影子一样的跟踪缠绕；口语测试海选阶段，评委老师可通过智能人机交互平台同时监测多位参加海选的学生，每位学生对着***平台按要求进行口语测试，结果包含语音的准确度、语言的流畅度、词汇的难度、表情的自然度以及说话时语音颤抖、眼神飘浮在内的所有信息均历历在目，详实记录在学生个人测评表单中，任何人无权人为修改，以示海选结果的公平公正和权威性；老师通过验证人机合一的身份后登陆***平台查阅学生包括最新综合评价、成长曲线在内基本信息，在线与其取得直接联系，向其了解近况，并对其针对性地进行必要的激励和知识传授或教育帮助；会议和考评时，相关人员可以一对多的方式进行考评和交流勾通，其过程将完整地记录于数据库，以作后台***计算参数和后期考评或交流勾通的依据。

本发明的有益效果是：基于视觉与听觉信息处理模块，建立基于视觉和听觉信息处理网络的生物特征识别与信息安全的智能人机交互平台，适时记录学生包括视觉和听觉信息以及面、手部经络信息在内的人体整体生物特征信息，结合人类科文术语对个性特征细分区别列表，***地将个人成长历程完整地、毫无偏袒地记录于基本信息独立表单内，对个人来说，是严于律己的标尺；对老师和领导来说，是教育或激励的导向；与此同时，在外语教学中，不仅可解决以一对多而准确呼出名号的问题；还可以解决外语口语自主练***公正的问题；还有效杜绝作弊、有效区别外语的念、背和说的问题；总的来说，是解决语言和人才的能力测评的问题，学校可以在确保学生个人信息安全的前提下，向国际化发展的社会推介直实的各类人才，提高学校培养人才的就业率以及就业水平，为未来教育和用人单位的人才培养与任用有着积极的实际意义，尤其对人才梯队的建设攻略有更加细致的可选参数。

具体实施方式

实施例1。

基于生物特征信息采集网络构建生物特征识别与信息安全的智能人机交互***平台。

智能人机交互***平台通过平台专用服务器将中间服务器的内容映射开放，供局域网内各终端用户操作使用，任何专用终端未经过智能人机交互***平台，无浏览外网权限。中间服务器起着数据桥接和格式转换的作用，将终端用户主动输入的数据转换成数据库服务器指定的数据格式，与数据库服务器交换数据信息。后台服务器一方面接受处理数据库服务器分配的数据信息，另一方面处理各采集网点的实时数据信息。

终端设备包括智能手机、网络摄像头、平板电脑、专用教学电脑等有网络、摄像和拾音功能的设备。

学校在报名签到处、图书馆、自习室、体育馆、操场、食堂在内的学生集中活动区域，由远及近梯度布置视、听和面、手部经络扫描采集设备，建立基于视觉和语音信息处理的生物特征信息采集网络。

新生从最初入学开始，经过学校设置的固定报名签到处时，通过的路径梯度设置远景高清摄像头、近拍摄像头、麦克风、面部或手部经络扫描仪，这些设备由远及近，由外及里采集每一个新生包括个人行为***台，保存到数据库内；面部或手部经络扫描仪仅在报名处设置，且只在新生填写报名表后一次性扫描存档，作为生物特征识别数据中不变的因子，以后在个人生理上无重大变故时，不需要另外扫描采集同一人的经络信息作为更新数据。

后台服务器通过所述新生入学通道获取生物特征信息数据后，将此数据悉数提交到数据库服务器新增一个姓名空白的生物信息数据表单。

新生经过老师指导进入***平台进一步登记个人基本信息、拍照和与接待老师交流，主动填充包括姓名、年龄、系别、专业等个人基本信息后提交表单，最后扫描个人面或手部经络数据信息后，报名过程结束。

中间服务器获取上述主动填充数据时包括照片、面手部经络信息的数据后，暂存并做格式转换后提交至数据库服务器，数据库服务器因无法找到与此数据的基本信息完全匹配的数据信息，于是就将此数据信息与数据库内姓名空白的数据信息一起分配给后台服务器处理，后台服务器收到分配来的数据后，即刻进行比较处理，将处理好的结果再综合计算生成包含学生姓名、专业、班级、测评更新时间、结果以及***对学生的综合评价和成长曲线在内的学生最初的基本信息独立表单，自动填入数据后提交给数据库服务器存储管理。

学生在校成长信息数据表单由***后台服务器分别针对某一学生的所有信息综合计算处理后实时左移更新填充，一般包括个性成熟度、适应能力、判断能力、自学能力、成长指数在内的主要项目，手动填充数据为相应项目的“本次更新”列。

主动更新数据一般为期中、期末或其它定期不定时的考试、参赛、测评节点的数据信息。

被动更新数据为日常视觉、听觉所采集的数据信息，以主动更新数据节点采集的生物特征信息为优选。

自动更新的数据为日常经后台服务器计算整合后再自动更新填充的综合数据信息。

上课时，通过教室终端打开智能人机交互***平台，逐级点选英语、综合英语、201班，综合英语201班应到的80名学生全部列在表单中，通过启动教室内安装的网络摄像头经过全场扫描，或通过拾音器经过点名应答，实到的学生姓名就变成绿色，缺席的学生在表单中闪烁式提醒；如在点名中，有学生冒名顶替应答，冒名者在表单中将显示黄色闪烁。在表单中点选学生姓名时，学生的基本信息独立表单就以浮窗的形式展示。

与学生互动的环节，无论是大课还是小课，都可以快速而准确地通过网络摄像或拾音的方式将各同学合理且和谐地分成若干组别，制造外语发源地的文化场景，以加深学生的学习印象。

当老师在路上、工作室等一些不特定的区域与学生偶遇时，通过手持终端扫描或启动拾音器，该学生的基本信息独立表单就弹出展现手持终端设备上，老师对学生的状况一概全览，就不会因记不起突然出现的学生名字而感到尴尬，致使老师与学生间的交流沟通会显得恰如其分，老师并由此可知该学生相对强弱的学科和成长曲线等基本情况，并可针对性地对基进行必要的激励和补习或教育帮助。

外语学***台上找到自己感兴趣的主题学***台中直接获得帮助，包括单词的拼读、词意和来源；短句的出处、语音、语调、译文在内。其次，可直线联系老师请求帮助解答。

老师经过***平台针对各班级的学生布置作业，只需在网络终端上通过视频或语音或文字描述发布到***平台上，学生根据终端设备提醒后，登陆***平台去按要求完成老师布置的作业，完成后的作业数据库服务器将直接保存至作业布置教师的个人空间，让老师批阅。

老师在***平台进入个人空间，批阅学生完成的作业，针对作业马虎和仅应付形式的学生，老师可以一针见血地指出学生作业过程的缺点，让其及时更正，直到被老师的耐性折服为止。

老师在***平台的个人空间内，设置试卷试题的版式、被测学生的语言能力范围、教材、讲授起止时间、题型占比等内容后，点按自动生成试卷，***将自动按该老师讲授起止时间内的教材内容生成标准版式的试卷，待老师复核完成并提交，生成正式试卷密保至数据库中的题库内，使用时调取。

老师阅卷时，通过***平台的终端扫描或拍照的方式，***自动识别试卷上的所有内容，并针对题型及内容生成标准答案，并对答卷工整的做出标准评分，对字迹潦草马虎的不做评分，令老师手动评分，***将针对学生作出答题不工整的扣分警告。

每次测评结束，成绩通过自动阅卷或老师手动经终端excel软件登记，***平台的中间服务器将这些数据转换成数据库专用格式数据，提交给数据库管理服务器，数据库管理服务器将这些数据分配到各相应单元存储，并分配给后台管理服务器作数据更新处理。

学生通过***平台进行口语自测时，后台服务器将在该学生独立表单界面记录其视觉和听觉元素完成自测，并针对其自测差错弹出相应语言的识别标准和发音标准，引用标准发音过程的唇齿、口腔、舌头等身体器官的变化视频，令学生及时学习更正，从而当时校准字、词的标准发音和口语的语音、语调和语速。

老师随时随地关心查阅学生近况，通过终端查找并联系要找的学生，令其在规定的时间内完整地完成作业和功课，利用***实时数据去说服学生的抵触心里和不满情绪，使学生明确认识到老师随时随地对自己无微不至的关怀，而非影子一样的跟踪缠绕。此过程的细节中间服务器将转码提交给数据库服务器将其全部保存，以便提交到后台服务器作为针对该学生成长信息计算处理的重要参照。

口语测试海选阶段，评委老师通过智能人机交互平台同时监测多位参加海选的学生，每位参选学生通过智能人机交互***平台按要求进行口语测试，结果包含语音的准确度、语言的流畅度、词汇的难度、表情的自然度以及说话时语音颤抖、眼神飘浮在内的所有信息经后台服务器记录均历历在目，学生个人测评表单，任何人无权人为修改，以示海选结果的公平公正和权威性。

针对必修课兴趣不足而专业课格外出色学生，通过智能人机交互***平台的学习统筹，从而有更多的时间攻读所学专业，更好地修炼自己爱好的专业课程，有更多的机会历练和积累专业知识技能，做到从入学到毕业都随心而愿地常做喜好的知识积累，最终达到从容投入社会而从事专业工作的专业修为。

毕业时，学生在***平台上自动生成完整的择业简历，简历附该生在校的权威测评结果和公平公正的***综合评价；学校就业指导部门依据智能人机交互平台生成***人才推送表单，此表单包含学生姓名、专业、在校表现曲线、***综合评价、适合职业在内的重要个人信息，并将此包含重要信息的表单定向推送给招聘意向单位。

学校在确保学生个人信息安全的前提下，可以向国际化发展的社会推介直实的各类人才，提高学校培养人才的就业率和就业水平，同时，将每个毕业生的所有数据信息完整打包发送到毕业生的工作单位和户口所在地以及出生地的人力资源和社会保障局，另外，将原数据文件从数据库移至档案数据库内保存10年以上，以确保学生个人真实档案的权威性和可靠性，同时有利于完善全社会各类人才的培养及甄选。

实施例2。

基于生物特征信息采集网络构建生物特征识别与信息安全的智能人机交互***平台，即人力资源人才测评打印***。

智能人机交互***平台通过平台专用服务器将中间服务器的内容映射开放，供局域网内各终端用户操作使用，任何专用终端未经过智能人机交互***平台，无浏览外网权限。中间服务器起着数据桥接和格式转换的作用，将终端用户主动输入的数据转换成数据库服务器指定的数据格式，与数据库服务器交换数据信息。后台服务器一方面接受处理数据库服务器分配的数据信息，另一方面处理各采集网点的实时数据信息。

终端设备包括智能手机、平板电脑、汽车、专用教学电脑等有网络、摄像和拾音功能的设备；专用终端包括含有物联网、区块链技术的网络设备，包括工厂的生产、检测设备、医院的医疗器械、学校的教学及其辅助设备和企事业单位管理的网络器具等。

企事业单位在大门出入口、行政办公出入口、培训室、职工活动室、体育场、食堂在内的职工经常活动和入、离职必经区域，由远及近梯度布置视、听和面、手部经络扫描采集设备，建立基于视觉和语音信息处理的生物特征信息采集网络。

从新员工最初入职开始，企业在员工入职签到处设置固定通道，通道的路径梯度设置远景摄像头、近拍摄像头、拾音器、面部或手部经络扫描仪，这些设备由远及近，由表及里采集每一个新员工的生物特征信息，这些信息包括个人特征影像、视频、行为***台完成个人基本资料的填充，填充完成后在工作人员的指导下进行面、手部经络扫描，各数据正常录入成功后新员工的整个入职手续办理完成。

入职培训期间，无论是岗前职业文化培训还是岗位技术培训，新员工每个工作日均须到指定培训室集合，一是通过这种方式采集员工对新工作的热情状态和对新环境的适应能力，再是多角度观察新员工的整体素质，以便针对性培养人才。

员工个人的手持终端，经过下载安装***平台相应终端的接口软件，通过软件的注册通道填写资料和自然拍摄照片、录像、录音和指纹以及手握终端的***台终端准入的活体密码验证，验证通过后即上传该终端的机器码，完成后即个人手持终端成功加入单位的***平台，用户即可通过个人的手持终端进行学习和与本单位员工进行交流互动。

需要调取某员工的基本信息独立表单时，可以在终端相应界面输入其名字，和通过网络摄像头、拾音器在内的终端设备拍摄其照片或视频、和拾取其对话语音，和扫描其经络的方式获取，其个人包括综合评价、成长曲线在内的基本信息独立表单一概全览地自动显示在操作终端的显示屏上，再恰如其分地与其进行交流沟通。

单位规模扩张或岗位因适龄更替空缺，人事专员首先通过***平台***筛选该空缺岗位的备用才，然后再针对备选人才逐一审核其基本信息独立表单，重点评审与空缺岗位基本素质要求相关的表单项，最终确定三至五名候选人，并将此候选人推荐到相关领导在***平台的个人空间，让相关领导通过***平台与候选人逐一勾通后选定最适合的人才到岗。

人力资源管理部门可通过***平台与学校建立双向通道，一方面为学校解决部分学生实***台为我方单位的人才库，建立人才梯队攻略，完善人才梯队成员，改善人力资源生态环境，创建参数可选的人才测评、储备库。

Claims (9)

1.基于视觉与听觉信息处理的语言和人才测评方法，利用视觉与听觉信息处理和对面部、手部经络扫描模块建立基于活体密码***网络构建生物特征识别与信息安全的智能人机交互***平台，其特征在于：***平台内建数据库，通过被动、主动和自动以及自动更新的方式向数据库内填充数据内容，***地创建并定期不定时更新包括生物特征信息和基本信息以及日常活动中相关个人特征信息在内的个人的基本信息独立表单；数据库内建立各学科标准资料以及工作、学***台自动录入的数据信息，所有这些数据不断经过***后台整合更新，再更新整合，使个人的基本信息独立表单在整个平台实时保持最新，与个人成长历程完全同步，个人的基本信息独立表单内的生物特征信息与其本人完全吻合，语言和能力的成长历程有据可查，语言和人才的测评结果公平公正；企事业单位可通过***平台与学校建立双向通道，一方面为学校解决部分学生实***台为企事业单位的人才库，建立人才梯队攻略，完善人才梯队成员，改善人力资源生态环境，创建参数可选的人才测评、储备资源管理库；

当需要调取某一个人的基本信息独立表单时，在注册成功的终端上，可在相应界面输入其名字；通过摄像头、拾音器在内的设施拍摄其照片或视频、或拾取其对话语音；扫描其经络；指纹和掌纹的方式获取，其个人包括综合评价、成长曲线在内的基本信息独立表单将一概全览地自动显示在终端的显示屏上，与其交流沟通会显得恰如其分；

成长信息数据表单由***后台服务器分别针对某一个体的所有信息综合计算整合后实时更新填充，包括个性成熟度、适应能力、判断能力、自学能力、成长指数在内的主要项目，定期不定时更新，以保持个人特征信息和进步信息与***数据实时完全同步；

被动填充的数据包括生物特征信息随时间流逝而逐渐改变的个人成长过程在内的实时数据，这些数据信息，任何人无法提取和知晓，仅为***后台作为计算整合更新个人的基本信息独立表单的实参和活体密码；自动填充的数据包括计算结果实时更新的数据进行进一步计算整合更新的数据在内；

更新后的最新数据始终占据相应表单的最右边字段，每行项目历史数据保存字段视情而定，准确度要求越高，历史数据字段越多，每更新一次信息，相应向右填充一格，直到设置单元格全部填充后，再次更新一次的信息就始终在相应项目行的最右边单元格，包括此单元格在内的原有数据流水式均向左移一格，同时，最左边的一格数据视其重要性质决定丢弃或另外分类保存；

个人通过***平台选择自己的学***台中直接获得帮助，也可直线联系老师或领导请求帮助解答；在布置有***平台的网络终端下作业时，工作过程的操作过程是否规范，***平台将在后台一一记录，并在操作不当之处利用影音设备给予提醒、指导或警告；

在***平台做外语口语自测时，***后台将在网络终端监查被测评人员的视觉和听觉元素信息，并针对自测中的差错弹出相应语言的识别标准和发音标准，引用标准发音过程包括唇齿、舌头、口腔在内的身体器官的变化视频，令其及时更正，当面校准字、词的标准发音和口语的语音、语调和语速；

同一***平台的终端用户可以随时随地查找、联系他人，可责令学生或下属在规定的时间内完整地完成作业或功课，利用***实时数据去说服其抵触心里和不满情绪，使其明确认识到老师或上级随时随地对自己无微不至的关怀，而非影子一样的跟踪缠绕；

海选人才阶段，评委通过***平台同时监测多位参加海选的人员，参选人员在规定的场所按要求进行竞技，结果包含视觉、听觉中各元素在内的所有信息均通过***平台一一展现，竞技过程历历在目，详实记录在个人测评表单中，任何人无权人为修改，海选结果公平公正，无评审疲劳偏差和偏见；

老师和领导可通过***平台查阅学生或下级的最新综合评价、成长曲线在内的基本信息，在线与其取得直接联系，向其了解近况，并对其针对性地进行必要的激励和知识传授或教育帮助；

上课时，通过终端打开的***平台，点选该课班级名称，该课时应到的学生姓名将全部列在其表单中，通过终端配置的摄像头经过全场扫描，或通过拾音器经过点名应答，实到的学生姓名正常变色，缺席的在表单中闪烁式变色提醒，在点名中，有人冒名顶替应答，冒名者在表单中将受到警告变色显示；在表单中点选某一姓名时，此姓名包含的基本信息独立表单就以浮窗的形式展现；当与学生互动的环节，无论是大课还是小课，都可以快速而准确地将各同学合理且和谐地分成若干组别，制造有共同语言的文化场景，以加深学习印象；

会议和考评时，相关人员可以一对多的方式进行考评和交流勾通，其过程将完整地记录于数据库，以作后台***计算参数和后期考评或交流勾通的依据。

2.根据权利要求1所述基于视觉与听觉信息处理的语言和人才测评方法，其特征在于：所述主动填充数据信息的数据表单，与计算机制表处理软件充分兼容。

3.根据权利要求1所述基于视觉与听觉信息处理的语言和人才测评方法，其特征在于：所述终端包括含有物联网、区块链技术在内的网络设备，包括摄像头、拾音器、手机、汽车、生产和检测设备在内。

4.根据权利要求1所述基于视觉与听觉信息处理的语言和人才测评方法，其特征在于：所述被测评人员，包括单位员工和学校里的学生在内，其手持终端设备通过安装***平台的相应终端软件，经过活体密码验证后对接***平台的相应终端网络应用接口，并在首次运行时上传用户的终端机器码。

5.根据权利要求1所述基于视觉与听觉信息处理的语言和人才测评方法，其特征在于：所述视、听采集设备完善的区域，是具备视、听信息采集并通过网络数据传输区域，包括食堂、会议室、球场在内的公共活动区域。

6.根据权利要求1所述基于视觉与听觉信息处理的语言和人才测评方法，其特征在于：所述梯度布置采集、扫描设备，主要实现和完成由远及近，由表及里的生物特征信息数据采集，其数据信息包括个人体态、行为习惯、经络在内的人体生物特征。

7.根据权利要求1所述基于视觉与听觉信息处理的语言和人才测评方法，其特征在于：***平台适用但不限于语言和人才的测评，也适用于用户通过***平台的数据信息处理包括总结、命题、阅览、社交、人才选拔和推介的作业，进行资源管理。

8.根据权利要求7所述，其特征在于：所述总结是指在***平台的终端上经过个人设置，***自动生成包括个人择业简历、工作总结、学习心得在内的个人文案。

9.根据权利要求7所述，其特征在于：老师或上级领导通过平台的个人空间设置相应文本的框架，提交自动生成指定格式的命题文件，这些文件包括通知、生产任务单、工作调遣令、作业、试题试卷在内的常用任务下达或考评文件。