CN109255739B - 一种基于人脸表情和人体动作识别的课堂学习效率分析算法 - Google Patents
一种基于人脸表情和人体动作识别的课堂学习效率分析算法 Download PDFInfo
- Publication number
- CN109255739B CN109255739B CN201811063355.XA CN201811063355A CN109255739B CN 109255739 B CN109255739 B CN 109255739B CN 201811063355 A CN201811063355 A CN 201811063355A CN 109255739 B CN109255739 B CN 109255739B
- Authority
- CN
- China
- Prior art keywords
- behavior
- learning efficiency
- classroom learning
- classroom
- value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000008921 facial expression Effects 0.000 title claims abstract description 10
- 230000006399 behavior Effects 0.000 claims abstract description 80
- 238000000034 method Methods 0.000 claims abstract description 8
- 230000010365 information processing Effects 0.000 claims abstract description 3
- 238000012544 monitoring process Methods 0.000 claims abstract description 3
- 230000014509 gene expression Effects 0.000 claims abstract 3
- 238000004364 calculation method Methods 0.000 claims description 2
- 210000005069 ears Anatomy 0.000 claims description 2
- 238000012546 transfer Methods 0.000 abstract description 2
- 230000000694 effects Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/20—Education
- G06Q50/205—Education administration or guidance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Educational Administration (AREA)
- Strategic Management (AREA)
- Multimedia (AREA)
- Tourism & Hospitality (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Educational Technology (AREA)
- Human Computer Interaction (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Economics (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- General Business, Economics & Management (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Electrically Operated Instructional Devices (AREA)
Abstract
一种基于人脸表情和人体动作识别的课堂学习效率分析算法,首先把一节课按照时间划分为多个区间段,并利用布置在教室内的监视与信息处理***获取各区间段内每个同学的表情和动作等统计信息。该算法基于上述信息计算八种行为的个数在每个区间段的占比,根据占比赋予其动态权值,并建立“好”行为因子和“坏”行为因子模型,从而由集体“好”行为因子占总行为因子的比率计算集体课堂学习效率。同时,对课堂内每一个体计算“好”行为因子和“坏”行为因子,进而计算出个体课堂学习效率。综合集体课堂学习效率与个体课堂学习效率,确立一节课最终的课堂学习效率。本发明方法避免了单一的集体课堂学习效率算法带来的课堂学习效率过分转移,所得的效率分析结果能够较好的反应学生课堂学习情况。
Description
技术领域
本发明涉及课堂教学效率研究领域,具体的说是一种基于人脸表情和人体动作识别的课堂学习效率分析算法。
背景技术
一般情况下,对于学生课堂学习效果的考察是通过课后作业,一系列的考试等来判断的。但是这些手段都有着相应的不确定性和一定的弊端,例如:课后作业做得好并不能说明这个学生上课效率高,通过考前突击加之一些老师会在考前划重点这会导致考试成绩并不能准确反映学生上课情况的好坏。
因此亟需一种能够准确和及时地评估学生课堂学习效率的算法。通过此算法,当一节课结束后***立马就能够得到学生的课堂学习效率,做到了用具体的数据来反映学生的课堂学习情况,也为授课教师及时了解和改进自己的教学提供了帮助。
发明内容
本发明的目的在于提供一种基于人脸表情和人体动作识别的课堂学习效率分析算法,可对学生的课堂学习效率进行评估,且将集体课堂学习效率算法和个体课堂学习效率算法综合起来,避免了单一课堂学习效率算法的缺陷,使得评估结果更为准确。
本发明采取的技术方案为:
一种基于人脸表情和人体动作识别的课堂学习效率分析算法,包括以下步骤:
步骤1,将一节课按时间分成M个区间段;利用布置在教室内的多个摄像机与热释红外探测器等监视与信息处理***获取各区间段内N个同学的8种行为的统计信息。“好”行为为A-抬头认真听讲,B-低头看课本,C-做笔记,D-提问/回答老师的问题,“坏”行为为E-打瞌睡,F-交头接耳说话,G-玩手机,H-中途离场。
步骤2,计算学生集体课堂学习效率。首先根据每一种行为在各区间段总人数的表现,选取“好”行为A,B,C,D在各区间的行为权值,如表2所示:
表2:A,B,C,D行为在各区间段的行为权值
其中:这里θ的取值为0.55,D行为的权属优先级高于A,B,C,即只要区间内有D行为出现,即该区间的权属按四权赋权值。
其次,计算每个区间段“好”行为因子Pjg,j=1,2,3...M;其中:wj1,wj2,wj3,wj4分别为“好”行为A,B,C,D在第j区间的行为权值,Aji,Bji,Cji,Dji指第j区间段第i个学生若产生对应的行为时其值为1,否则为0。
计算每个区间段“坏”行为因子Pjb,j=1,2,3...M;其中w5,w6,w7,w8分别为“坏”行为E,F,G,H的行为权值,其取值为w5=0.35,w6=0.2,w7=0.35,w8=0.1;Eji,Fji,Gji,Hji指第j区间段第i个学生若产生对应的行为时其值为1,否则为0。
步骤3,为了避免集体课堂学习效率算法带来的学习效率过分转移的情况,下面用考虑个体课堂学习效率算法来补偿集体算法的缺点。
计算每个学生的“好”行为因子Pig,i=1,2,3...N(班上总人数为N),其中,wj1,wj2,wj3,wj4分别为“好”行为A,B,C,D在第j区间的行为权值,其取值情况如表2所示;Aij,Bij,Cij,Dij指第i个学生在第j区间若产生对应的行为时其值为1,否则为0。
计算每个学生的“坏”行为因子Pib,i=1,2,3...N(班上总人数为N),其中w5,w6,w7,w8分别为“坏”行为E,F,G,H的行为权值,其取值一般为w5=0.35,w6=0.2,w7=0.35,w8=0.1,Eij,Fij,Gij,Hij指第i个学生在第j区间若产生对应的行为时其值为1,否则为0。
最后,可以计算得到一节课内每个学生的课堂学习效率 统计出pi≥Pset的人数Z,Pset表示学生的期望课堂学习效率定值,可以视具体情况而定,例如一般情况下,认为计算得出的单个学生学习效率达到Pset=55%以上,就代表该学生上课是比较认真的,若对学生的要求更高,则可相应的提高学习效率定值Pset。进一步,计算个体课堂学习效率为
步骤4,根据步骤2和步骤3所得的pa和pβ,可以得出考虑个体因素的集体算法的最终课堂效率计算结果为p=λ1pα+λ2pβ,其中λ1,λ2分别为Pα和Pβ的分配系数,可视具体情况而定,例如一般情况下取Pα=Pβ=0.5,当人们更注重课堂上的整体学习效果时,可以适当增加pa的比率,而当人们更注重从认真学习的学生人数占总人数的比值来判断整个课堂学习的效率时,可以适当增加pβ的比率。
本发明一种基于人脸表情和人体动作识别的课堂学习效率分析算法,有益效果如下:
本发明方法结合个体课堂学习效率对集体课堂学习效率算法做了补充,避免了单一的集体算法带来的学习效率过分转移导致对整个课堂学习效率算法的结果带来的不好影响,并且在每个区间段内给各个动作赋予的权值是不一样的,即给予该区间应该出现的行为更高的权值,这样更符合实际情况,最终所得的结果能更加准确的反映学生的课堂学习情况。
附图说明
图1为应用本发明的算法流程图。
具体实施方式
本发明提出的基于人脸表情和人体动作识别的课堂学习效率分析算法,结合附图及实施例详细说明如下:
实施例选取一个班上有50人即N=50,设一节课45分钟,将其分成45个小的区间段,即M=45,学生的上课情况按区间段统计情况如下表3所示:
表3:按区间统计的学生课堂上课情况
其中:权属是指该区间内给每个动作所赋予的权值是按照表2来赋值的。按各个学生的上课情况统计如下表4所示:
表4:按每个学生上课情况统计的课堂情况
(1)先用集体课堂学习算法算出学生的集体课堂学习效率pα,步骤如下:
第一区间段“好”行为因子为p1g=(27×0.3+5×0.2+1×0.3+0×0.2)=9.4;
第一区间“坏”行为因子为P1b=0×0.35+6×0.2+11×0.35+0×0.1=5.05,同理可得p2g,p3g...p45g及p2b,p3b...p45b,其结果见表3。
(2)再用个体课堂学习效率算法计算得出学生的课堂学习效率pβ,步骤如下:
先由表3可得到一到五权占总权属的比例,简称权占比,如下表5所示
表5:集体算法中一到五权的权占比
注:例如一权的权占比为6/45=0.133,该值可以体现整体50人在每个区间各动作的大致赋权情况,也可以用于具体的每个学生在各区间,对其8种行为的赋权值情况,下面求每个人在每个区间的“好”和“坏”的行为的赋权值将按照这些权占比来分配权重。
即第一个同学的好的行为因子为:
注:这里用到了表5的权占比,即各学生的8种行为的权属情况按照权占比分配。如表4所示以第一名学生的A动作发生在20个区间段为例,这20个区间段里这位同学所产生的20个A行为所赋予的权值是不一样的,这要根据这20个区间段里的8种行为情况而定,即要根据表二而定,而可以设计这20个A行为有13.3%按照第一套权值赋值,即按一权赋值,6.7%按照二权赋值,8.9%按照三权赋值,17.8%按照四权赋值,53.3%按照五权赋值,同理对表4中每个学生A,B,C,D行为在每个区间段的赋值情况可以按照此法赋权值。
第一个同学的“坏”行为因子为:
进一步,可得第一个同学的课堂学习效率为:
同理可得其他学生的“好”和“坏”行为因子p2g,p3g,...p50g;p2b,p3b,...p50b,最终可得第2到50名学生的课堂学习效率分别为:p2,p3,...p50,其结果如表4所示。
(3)由步骤(1),(2)所得的Pα和Pβ,计算求得最终的学生课堂学习效率:P=λ1Pα+λ2Pβ=0.5×77.76%+0.5×74%=75.88%,这里取λ1=λ2=0.5,可以得出该班的学生课堂学习效率良好。
Claims (2)
1.一种基于人脸表情和人体动作识别的课堂学习效率分析算法,其特征在于包括以下步骤:
步骤1,将一节课按时间分成M个区间段;利用布置在教室内的监视与信息处理***,获取各区间段内每个同学的表情和动作等统计信息,基于N个学生上课时的表情和动作具体情况,设置“好”行为为Ai,i=1,2,...,α;“坏”行为为Bi,i=1,2,...,β;
获取各区间段内N个同学的8种行为的统计信息;“好”行为为A—抬头认真听讲,B—低头看课本,C—做笔记,D—提问/回答老师的问题,“坏”行为为E—打瞌睡,F—交头接耳说话,G—玩手机,H—中途离场;
首先根据每一种行为在各区间段总人数的表现,选取“好”行为A,B,C,D在各区间的行为权值,如表2所示:
表2:A,B,C,D行为在各区间段的行为权值
其中:D行为的权属优先级高于A,B,C,即只要区间内有D行为出现,即该区间的权属按四权赋权值;
步骤2,计算学生集体课堂学习效率Pα,具体如下:
步骤2-1、首先根据每一种行为在各区间段总人数的表现,选取“好”行为A1,A2,A3,...,Aα在各区间的行为权值;
步骤2-2、计算每个区间段“好”行为因子Pjg,j=1,2,3...M;其中:wj1,wj2,wj3,...,wjα分别为“好”行为A1,A2,A3,...,Aα在第j区间的行为权值,A1 ji,A2 ji,A3 ji,...,Aα ji指第j区间段第i个学生若产生对应的行为时其值为1,否则为0;
步骤2-3、计算每个区间段“坏”行为因子Pjb,j=1,2,3...M;其中:wb1,wb2,wb3,...,wbβ分别为B1 ji,B2 ji,B3 ji,...,Bβ ji的行为权值,其取值一般为固定值;B1 ji,B2 ji,B3 ji,...,Bβ ji指第j区间段第i个学生若产生对应的行为时其值为1,否则为0;
步骤3,考虑个体课堂学习效率算法来补偿集体算法的缺点,具体如下:
步骤3-1、计算每个学生的“好”行为因子Pig,i=1,2,3...N,班上总人数为N,其中:wj1,wj2,wj3,...,wjα分别为“好”行为A1,A2,A3,...,Aα在第j区间的行为权值,A1 ij,A2 ij,A3 ij,...,Aα ij指第i个学生在第j区间若产生对应的行为时其值为1,否则为0;
步骤3-2、计算每个学生的“坏”行为因子Pib,i=1,2,3...N,班上总人数为N,其中:wb1,wb2,wb3,...,wbβ分别为“坏”行为B1,B2,B3,...,Bβ的行为权值,其取值一般为固定值,B1 ij,B2 ij,B3 ij,...,Bβ ij指第i个学生在第j区间若产生对应的行为时其值为1,否则为0;
步骤4,根据步骤2和步骤3所得的pa和pβ,可以得出考虑个体因素的集体算法的最终课堂效率计算结果为p=λ1pα+λ2pβ,其中:λ1,λ2分别为Pα和Pβ的分配系数,可视具体情况而定。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811063355.XA CN109255739B (zh) | 2018-09-12 | 2018-09-12 | 一种基于人脸表情和人体动作识别的课堂学习效率分析算法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811063355.XA CN109255739B (zh) | 2018-09-12 | 2018-09-12 | 一种基于人脸表情和人体动作识别的课堂学习效率分析算法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109255739A CN109255739A (zh) | 2019-01-22 |
CN109255739B true CN109255739B (zh) | 2021-07-20 |
Family
ID=65047388
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811063355.XA Active CN109255739B (zh) | 2018-09-12 | 2018-09-12 | 一种基于人脸表情和人体动作识别的课堂学习效率分析算法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109255739B (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110222575B (zh) * | 2019-05-07 | 2021-06-29 | 杭州智尚云科信息技术有限公司 | 基于注意力机制目标检测的设备综合效率分析方法、装置、***、设备及存储介质 |
CN110688409A (zh) * | 2019-09-19 | 2020-01-14 | 北京作业盒子科技有限公司 | 学习状态的挖掘方法、推荐方法及电子设备 |
CN111428686A (zh) * | 2020-04-14 | 2020-07-17 | 北京易华录信息技术股份有限公司 | 一种学生兴趣偏好评估方法、装置及*** |
CN112923972A (zh) * | 2021-01-27 | 2021-06-08 | 苏州凌世智能科技有限公司 | 作业监测方法、手环以及用户端 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20100110986A (ko) * | 2009-04-06 | 2010-10-14 | 황인동 | 온라인 학력 평가방법 |
WO2011049353A3 (ko) * | 2009-10-21 | 2011-11-03 | 디브이에스코리아 주식회사 | 전자학습 컨텐츠 제공 시스템 및 방법 |
CN105844562A (zh) * | 2016-05-23 | 2016-08-10 | 华中师范大学 | 基于课程教学模型的学习者学习表现分析方法 |
CN105894875A (zh) * | 2016-06-06 | 2016-08-24 | 重庆雅乐视信息技术有限公司 | 一种利用课堂实时心跳反馈诊断教学质量的评价*** |
CN106845320A (zh) * | 2015-12-03 | 2017-06-13 | 杭州海康威视***技术有限公司 | 检测课堂效率的方法及其*** |
CN106878677A (zh) * | 2017-01-23 | 2017-06-20 | 西安电子科技大学 | 基于多传感器的学生课堂掌握程度评估***和方法 |
CN107292778A (zh) * | 2017-05-19 | 2017-10-24 | 华中师范大学 | 一种基于认知情感感知的云课堂学习评价方法及其装置 |
CN107316261A (zh) * | 2017-07-10 | 2017-11-03 | 湖北科技学院 | 一种基于人脸分析的教学质量评估*** |
CN107316257A (zh) * | 2017-06-06 | 2017-11-03 | 南京信息工程大学 | 一种基于课堂学生行为分析的教学质量评估方法及*** |
-
2018
- 2018-09-12 CN CN201811063355.XA patent/CN109255739B/zh active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20100110986A (ko) * | 2009-04-06 | 2010-10-14 | 황인동 | 온라인 학력 평가방법 |
WO2011049353A3 (ko) * | 2009-10-21 | 2011-11-03 | 디브이에스코리아 주식회사 | 전자학습 컨텐츠 제공 시스템 및 방법 |
CN106845320A (zh) * | 2015-12-03 | 2017-06-13 | 杭州海康威视***技术有限公司 | 检测课堂效率的方法及其*** |
CN105844562A (zh) * | 2016-05-23 | 2016-08-10 | 华中师范大学 | 基于课程教学模型的学习者学习表现分析方法 |
CN105894875A (zh) * | 2016-06-06 | 2016-08-24 | 重庆雅乐视信息技术有限公司 | 一种利用课堂实时心跳反馈诊断教学质量的评价*** |
CN106878677A (zh) * | 2017-01-23 | 2017-06-20 | 西安电子科技大学 | 基于多传感器的学生课堂掌握程度评估***和方法 |
CN107292778A (zh) * | 2017-05-19 | 2017-10-24 | 华中师范大学 | 一种基于认知情感感知的云课堂学习评价方法及其装置 |
CN107316257A (zh) * | 2017-06-06 | 2017-11-03 | 南京信息工程大学 | 一种基于课堂学生行为分析的教学质量评估方法及*** |
CN107316261A (zh) * | 2017-07-10 | 2017-11-03 | 湖北科技学院 | 一种基于人脸分析的教学质量评估*** |
Non-Patent Citations (1)
Title |
---|
"行为识别技术在教学中应用的探讨";金瑭;《电脑知识与技术》;20170331;第157,169-170页 * |
Also Published As
Publication number | Publication date |
---|---|
CN109255739A (zh) | 2019-01-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109255739B (zh) | 一种基于人脸表情和人体动作识别的课堂学习效率分析算法 | |
CN108009754A (zh) | 教学质量评估方法 | |
Conger et al. | Explaining race, poverty, and gender disparities in advanced course‐taking | |
CN110009210B (zh) | 一种基于关注度和专注度的学生听课水平综合评估方法 | |
Sireci et al. | Evaluating the predictive validity of Graduate Management Admission Test scores | |
CN107958351A (zh) | 教学质量评估云服务平台 | |
CN108805405A (zh) | 一种教学评价***及其构建方法 | |
CN108171414A (zh) | 教学质量评估*** | |
CN109711371A (zh) | 一种基于面部表情识别的课堂教学评估*** | |
CN111027865A (zh) | 一种基于行为和表情智能识别的课堂教学分析与质量评估***及方法 | |
CN105844562A (zh) | 基于课程教学模型的学习者学习表现分析方法 | |
CN108182649A (zh) | 用于教学质量评估的智能机器人 | |
CN110097283A (zh) | 基于人脸识别的教学管理***及方法 | |
CN109064361A (zh) | 一种心理学职业能力测评*** | |
CN110457641A (zh) | 一种实用性强的教学课堂用教学效果评价*** | |
Wijaya et al. | Enhancement On Completion Ability Of The Olympiad Problems Through Training Programs For Math Teachers Of Junior High School | |
CN111145059A (zh) | 一种学生学习态度评估方法与*** | |
CN110852924A (zh) | 一种基于云计算的院校用智能营销实训*** | |
US20080102427A1 (en) | Method to increase likelihood of successful completion of degree program | |
CN110503346A (zh) | 基于数据深度分析的校本培训质量评估平台、***及方法 | |
Hirose | Relationship Between Testing Time and Score in CBT | |
Greenhill et al. | Further studies of the use of television for university teaching | |
CN114550097A (zh) | 一种基于人工智能的跨校区联动考勤方法和*** | |
CN111626647A (zh) | 一种基于面部表情识别的课堂教学评估*** | |
CN113240559A (zh) | 一种酒店管理教学用多媒体教学装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |