CN107491735A - 人类行为识别的标签和交互关系联合学习方法 - Google Patents
人类行为识别的标签和交互关系联合学习方法 Download PDFInfo
- Publication number
- CN107491735A CN107491735A CN201710593912.8A CN201710593912A CN107491735A CN 107491735 A CN107491735 A CN 107491735A CN 201710593912 A CN201710593912 A CN 201710593912A CN 107491735 A CN107491735 A CN 107491735A
- Authority
- CN
- China
- Prior art keywords
- mrow
- msub
- msup
- mover
- people
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
- G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
- G06F18/2411—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on the proximity to a decision surface, e.g. support vector machines
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- Bioinformatics & Computational Biology (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Artificial Intelligence (AREA)
- Life Sciences & Earth Sciences (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Psychiatry (AREA)
- Social Psychology (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Image Analysis (AREA)
Abstract
一种用于人类行为识别的标签和交互关系联合学习方法,包括以下步骤:1),使用CNN特征、HOG特征、HOF特征及人与人之间的距离、头部朝向等信息构造能量函数,包含一元能量项、二元能量项、交互能量项和正则化项;2)使用大间隔结构化学习训练所有模型参数;3)标签和交互关系预测,使用交替搜索策略求解复杂推理问题,在迭代中交替优化标签和交互结构。本发明适用于包含多人、多行为类别的图像和视频,能够同时识别个人行为和人与人之间的交互行为。
Description
技术领域
本发明属于计算机视觉中的行为识别领域,涉及一种人类的行为识别方法。该发明在识别个人行为的同时判断人之间的交互。
背景技术
识别图像或视频中的人类行为在计算机视觉中是一个基本的问题,这在许多应用如运动视频分析,监控***和视频检索中至关重要。最近的工作中,深度学习明显提高了行为识别的性能。然而,这些工作不适用于处理包含多人互动的数据。首先,他们专注于分给每个图像一个行为标签,这不适用于包含多个行为类别的图像。第二,他们忽视了人之间的相互关系为识别复杂的人类活动像握手,战斗和足球比赛等提供了重要的语境信息。
为了表示人之间的交互,大多数CRF模型使用预定义的图形结构,通常使用领域知识或启发式方法来确定其结构,例如,人之间的距离,但是其对数据变化和成像条件的变化不敏感。使用这样的图通常导致不良的识别性能。更好的策略是从数据中学习CRF图。然而,人类交互结构通常是多样化的,这使得传统的图学习方法无效。Lan等提出通过潜在的结构化SVM来联合估计个人行为和交互,其中交互被视为隐含变量,这导致非凸的训练问题。
发明内容
为了克服已有的人类行为识别方式无法适用于多个行为类别的图像、无法识别交互行为的不足,以及交互作为隐含变量导致非凸的训练问题的缺点,本发明提供了一种人类行为识别的标签和交互关系联合学习方法,适用于包含多个行为类别的图像,能够在不使用隐含变量的情况下共同学习互动和个人行为的全新的训练框架,并提出了一种有效解决相应推理问题的算法。
本发明解决其技术问题所采用的技术方案是:
一种用于人类行为识别的联合标签交互学习的方法,所述方法包括以下步骤:
1)构造能量函数
令G=(V,E)表示图,其中节点集V表示所有人的个人行为,边集E表示他们的交互信息,eij∈E表示人i和人j之间有交互,而边est的缺失则表示人s与人t之间没有交互,I表示一张图像,是人i的个人行为标签,a=[ai]i=1,...,n是包含n个人的个人行为标签的向量;
给定一个新的输入I,目标是通过解决以下的问题(1)来预测个人行为标签a和交互信息G;
其中
其中是一个指示函数,如果ai=s,它的值为1,反之则为0;当eij=z时指示函数的值为1,反之则为0;同样地,当ai=s且aj=t时,指示函数为1,反之为0;
2)训练模型的参数
训练样本集Gk=(Vk,Ek),边集Ek表示在第k张训练样本的图片中,人之间的真实的交互信息,ek是Ek的向量形式,使用下面的最大边距式公式来训练所有的模型参数w=[wu,wc,wτ,wr,ws]:
标签代价,即错误预测的惩罚为:
其中δ(·)是指示函数,当测试情况为真时取1,反之为0;m表示人的个数;
3)解决推理问题
通过固定参数θ来解决推理问题(1),初始化e为一个全连接的结构,在每次迭代中,首先固定图结构e,用表示,然后解决剩余的问题:
通过OpenGM包中的Tree-reweighted消息传递接口来解决这个问题;
用来表示a的当前解,把代入公式(1),推理问题缩减为:
重整方程式(12),得到下面的形式:
每个eij和所有的余下的变量e没有相互作用,因此eij的最佳值仅依赖于它的系数值,最小化关于变量e的表达式,如果的值为负,eij的最佳值为1;如果的值不为负,eij的最佳值为0。
本发明提出一个框架来同时学习交互关系和个人行为,这个框架使用从深层神经网络学到的特征和人类交互环境等信息构建了一个势函数。避免了训练函数的非凸性,并提出一种迭代的方法来有效并近似地解决相应的推理问题。
本发明的有益效果主要表现在:适用于包含多个行为类别的图像,能够同时识别个人行为和交互。
具体实施方式
下面对本发明作进一步描述。
一种用于人类行为识别的联合标签交互学习的方法,包括以下步骤:
1)构造能量函数
令G=(V,E)表示图,其中节点集V表示所有人的个人行为,边集E表示他们的交互信息,例如,eij∈E表示人i和人j之间有交互,而边est的缺失则表示人s与人t之间没有交互,I表示一张图像,是人i的个人行为标签,a=[ai]i=1,...,n是包含n个人的个人行为标签的向量;
给定一个新的输入I,目标是通过解决以下的问题(1)来预测个人行为标签a和交互信息G;
其中
其中是一个指示函数,如果ai=s,它的值为1,反之则为0;当eij=z时指示函数的值为1,反之则为0;同样地,当ai=s且aj=t时,指示函数为1,反之为0;
一元能量项θi;s的定义如下:
其中wu是一元能量函数的权重项,是指示向量,在s这个位置时取1,其他情况都为0,pi;s是把标签s分配给i时的判别得分。为了计算这个判别得分,把通过深度卷积神经网络(CNNs)学到的特征、人身体区域的HOG和HOF特征串联起来,训练一个支持向量机(SVM)分类器;
二元能量项的定义如下:
其中wc衡量两个交互的人的个人行为标签s和t之前的兼容性,是指示向量,在下标是(li,j,pi,pj,s,t)的位置取1,其他情况下取0.表示人i和人j之间的相对距离,定义为:
设ri,rj是人i和j的包围框的宽度,设di,j是这些成对包围框的中心的欧几里得距离,计算hi,j为:
在方程式(5)中,表示从训练样本中筛选的所有的交互项(i,j)的平均值;像一般的行为识别做的,把人的头部朝向分为5类,分别为{profile-left,profile-right,frontal-left,frontal-right,backwards},为了确定每个人的头部朝向,使用手工特征和ConvNet学到的特征,训练了一个线性大间隔分类器。
考虑到人之间交互的存在,此能量项规定了负的信任值。定义如下:
wτ是得分项pi,j;z的权重项,表示两个人(i,j)之间有(z=1)无(z=0)交互的可能性。为了得分项pi,j;z,使用从人i和j的包围框区域提取的特征,再次训练一个SVM分类器,这边使用的特征表示和用来计算pi;s用的特征表示是类似的。1τ(z)∈{0,1}2是指示向量,在z的位置取1,其他情况取0;
wr评估交互信息(由z编码),相对距离li,j和头部朝向pi,pj之间的兼容性。此项的目的是利用语境线索来提高交互和非交互识别的判别能力;当根据得分pi,j;z得到的预测不正确时,方程式(7)中的第二项可以用来纠正预测结果;
在方程式(1)中引入的正则项定义如下:
其中θ0=ws,ws∈R。当松弛变量e∈{0,1}为e∈[0,1]此正则项满足L1正则化的定义。因此,使用此项来加强稀疏的人交互的学习;
2)训练模型的参数
假设有一个训练样本集Gk=(Vk,Ek),边集Ek表示在第k张训练样本的图片中,人之间的真实的交互信息,ek是Ek的向量形式,使用下面的最大边距式公式来训练所有的模型参数w=[wu,wc,wτ,wr,ws]:
标签代价,即错误预测的惩罚为:
其中δ(·)是指示函数,当测试情况为真时取1,反之为0。m表示人的个数,问题(9)是凸的,可以通过切平面算法解决;
3)解决推理问题
通过固定参数θ来解决推理问题(1),因为这个问题是NP问题,一般而言,是不可能得到它的全局解的。一种方法是松弛方程使之变成一个线性规划问题(通过引入许多辅助变量),然后通过分支界定法来解决这个松弛后的问题。然而使用交替搜索策略来解决这个推理问题;
在迭代中交替优化标签空间和交互结构空间,初始化e为一个全连接的结构,在每次迭代中,首先固定图结构e,用表示,然后解决剩余的问题:
可以通过OpenGM包中的Tree-reweighted消息传递接口来解决这个问题;
用来表示a的当前解,把代入公式(1),推理问题缩减为:
重整方程式(12),得到下面的形式:
每个eij和所有的余下的变量e没有相互作用,因此eij的最佳值仅依赖于它的系数值,最小化关于变量e的表达式,如果的值为负,eij的最佳值为1;如果的值不为负,eij的最佳值为0。
本发明提出了一种在联合框架中学习人类互动及其个人行为标签的方法。使用深度神经网络特征和上下文语义信息,以监督的方式学习个人行为和交互。使用大间隔结构化学习方法来学习模型参数,并提出了一种有效的优化算法来解决相关推理问题,提出的方法大大优于基准方法,与已知最好结果相比具有很强的竞争力。
Claims (1)
1.一种用于人类行为识别的联合标签交互学习的方法,其特征在于:所述方法包括以下步骤:
1)构造能量函数
令G=(V,E)表示图,其中节点集V表示所有人的个人行为,边集E表示他们的交互信息,eij∈E表示人i和人j之间有交互,而边est的缺失则表示人s与人t之间没有交互,I表示一张图像,是人i的个人行为标签,a=[ai]i=1,...,n是包含n个人的个人行为标签的向量;
给定一个新的输入I,目标是通过解决以下的问题(1)来预测个人行为标签a和交互信息G;
其中
其中是一个指示函数,如果ai=s,它的值为1,反之则为0;当eij=z时指示函数的值为1,反之则为0;同样地,当ai=s且aj=t时,指示函数为1,反之为0;
2)训练模型的参数
训练样本集Gk=(Vk,Ek),边集Ek表示在第k张训练样本的图片中,人之间的真实的交互信息,ek是Ek的向量形式,使用下面的最大边距式公式来训练所有的模型参数w=[wu,wc,wτ,wr,ws]:
<mrow>
<mtable>
<mtr>
<mtd>
<mrow>
<mi>min</mi>
<mfrac>
<mn>1</mn>
<mn>2</mn>
</mfrac>
<mo>|</mo>
<mo>|</mo>
<mi>w</mi>
<mo>|</mo>
<msup>
<mo>|</mo>
<mn>2</mn>
</msup>
<mo>+</mo>
<msubsup>
<mi>C&Sigma;</mi>
<mrow>
<mi>l</mi>
<mo>=</mo>
<mn>1</mn>
</mrow>
<mi>n</mi>
</msubsup>
<msubsup>
<mi>&xi;</mi>
<mi>l</mi>
<mn>2</mn>
</msubsup>
</mrow>
</mtd>
</mtr>
<mtr>
<mtd>
<mrow>
<mi>s</mi>
<mo>.</mo>
<mi>t</mi>
<mo>.</mo>
<msub>
<mi>f</mi>
<mn>0</mn>
</msub>
<mrow>
<mo>(</mo>
<mrow>
<msup>
<mover>
<mi>a</mi>
<mo>^</mo>
</mover>
<mi>l</mi>
</msup>
<mo>,</mo>
<msup>
<mover>
<mi>e</mi>
<mo>^</mo>
</mover>
<mi>l</mi>
</msup>
<mo>;</mo>
<mi>&theta;</mi>
</mrow>
<mo>)</mo>
</mrow>
<mo>-</mo>
<msub>
<mi>f</mi>
<mn>0</mn>
</msub>
<mrow>
<mo>(</mo>
<mrow>
<msup>
<mi>a</mi>
<mi>l</mi>
</msup>
<mo>,</mo>
<msup>
<mi>e</mi>
<mi>l</mi>
</msup>
<mo>;</mo>
<mi>&theta;</mi>
</mrow>
<mo>)</mo>
</mrow>
<mo>&GreaterEqual;</mo>
<mi>&Delta;</mi>
<mrow>
<mo>(</mo>
<mrow>
<msup>
<mi>a</mi>
<mi>l</mi>
</msup>
<mo>,</mo>
<msup>
<mi>e</mi>
<mi>l</mi>
</msup>
<mo>,</mo>
<msup>
<mover>
<mi>a</mi>
<mo>^</mo>
</mover>
<mi>l</mi>
</msup>
<mo>,</mo>
<msup>
<mover>
<mi>e</mi>
<mo>^</mo>
</mover>
<mi>l</mi>
</msup>
</mrow>
<mo>)</mo>
</mrow>
<mo>-</mo>
<msub>
<mi>&xi;</mi>
<mi>l</mi>
</msub>
<mo>,</mo>
</mrow>
</mtd>
</mtr>
<mtr>
<mtd>
<mtable>
<mtr>
<mtd>
<mrow>
<mo>&ForAll;</mo>
<mi>l</mi>
<mo>,</mo>
<msup>
<mover>
<mi>a</mi>
<mo>^</mo>
</mover>
<mi>l</mi>
</msup>
<mo>&NotEqual;</mo>
<msup>
<mi>a</mi>
<mi>l</mi>
</msup>
<mo>,</mo>
<msup>
<mover>
<mi>e</mi>
<mo>^</mo>
</mover>
<mi>l</mi>
</msup>
<mo>&NotEqual;</mo>
<msup>
<mi>e</mi>
<mi>l</mi>
</msup>
<mo>,</mo>
<msub>
<mi>&xi;</mi>
<mi>l</mi>
</msub>
<mo>&GreaterEqual;</mo>
<mn>0</mn>
</mrow>
</mtd>
<mtd>
<mrow>
<mo>&ForAll;</mo>
<mi>l</mi>
<mo>.</mo>
</mrow>
</mtd>
</mtr>
</mtable>
</mtd>
</mtr>
</mtable>
<mo>-</mo>
<mo>-</mo>
<mo>-</mo>
<mrow>
<mo>(</mo>
<mn>9</mn>
<mo>)</mo>
</mrow>
</mrow>
标签代价,即错误预测的惩罚为:
<mrow>
<mi>&Delta;</mi>
<mrow>
<mo>(</mo>
<mi>a</mi>
<mo>,</mo>
<mi>e</mi>
<mo>,</mo>
<mover>
<mi>a</mi>
<mo>^</mo>
</mover>
<mo>,</mo>
<mover>
<mi>e</mi>
<mo>^</mo>
</mover>
<mo>)</mo>
</mrow>
<mo>=</mo>
<mfrac>
<mn>1</mn>
<mi>m</mi>
</mfrac>
<munderover>
<mo>&Sigma;</mo>
<mrow>
<mi>k</mi>
<mo>=</mo>
<mn>1</mn>
</mrow>
<mi>m</mi>
</munderover>
<mi>&delta;</mi>
<mrow>
<mo>(</mo>
<msub>
<mi>a</mi>
<mi>k</mi>
</msub>
<mo>&NotEqual;</mo>
<msub>
<mover>
<mi>a</mi>
<mo>^</mo>
</mover>
<mi>k</mi>
</msub>
<mo>)</mo>
</mrow>
<mo>+</mo>
<mfrac>
<mn>2</mn>
<mrow>
<mi>m</mi>
<mrow>
<mo>(</mo>
<mi>m</mi>
<mo>-</mo>
<mn>1</mn>
<mo>)</mo>
</mrow>
</mrow>
</mfrac>
<munder>
<mo>&Sigma;</mo>
<mrow>
<mi>i</mi>
<mo><</mo>
<mi>j</mi>
</mrow>
</munder>
<mi>&delta;</mi>
<mrow>
<mo>(</mo>
<msub>
<mi>e</mi>
<mrow>
<mi>i</mi>
<mi>j</mi>
</mrow>
</msub>
<mo>&NotEqual;</mo>
<msub>
<mover>
<mi>e</mi>
<mo>^</mo>
</mover>
<mrow>
<mi>i</mi>
<mi>j</mi>
</mrow>
</msub>
<mo>)</mo>
</mrow>
<mo>.</mo>
<mo>-</mo>
<mo>-</mo>
<mo>-</mo>
<mrow>
<mo>(</mo>
<mn>10</mn>
<mo>)</mo>
</mrow>
</mrow>
其中δ(·)是指示函数,当测试情况为真时取1,反之为0;m表示人的个数;
3)解决推理问题
通过固定参数θ来解决推理问题(1),初始化e为一个全连接的结构,在每次迭代中,首先固定图结构e,用表示,然后解决剩余的问题:
通过OpenGM包中的Tree-reweighted消息传递接口来解决这个问题;
用来表示a的当前解,把代入公式(1),推理问题缩减为:
重整方程式(12),得到下面的形式:
<mrow>
<munder>
<mrow>
<mi>m</mi>
<mi>i</mi>
<mi>n</mi>
</mrow>
<mi>e</mi>
</munder>
<munder>
<mo>&Sigma;</mo>
<mrow>
<mi>i</mi>
<mo><</mo>
<mi>j</mi>
</mrow>
</munder>
<mo>&lsqb;</mo>
<msub>
<mi>&theta;</mi>
<mrow>
<mi>i</mi>
<mo>,</mo>
<mi>j</mi>
<mo>;</mo>
<mn>1</mn>
</mrow>
</msub>
<mo>-</mo>
<msub>
<mi>&theta;</mi>
<mrow>
<mi>i</mi>
<mo>,</mo>
<mi>j</mi>
<mo>;</mo>
<mn>0</mn>
</mrow>
</msub>
<mo>+</mo>
<msub>
<mi>&theta;</mi>
<mrow>
<mi>i</mi>
<mo>,</mo>
<mi>j</mi>
<mo>;</mo>
<msub>
<mover>
<mi>a</mi>
<mo>^</mo>
</mover>
<mi>i</mi>
</msub>
<mo>,</mo>
<msub>
<mover>
<mi>a</mi>
<mo>^</mo>
</mover>
<mi>j</mi>
</msub>
</mrow>
</msub>
<mo>+</mo>
<msub>
<mi>&theta;</mi>
<mn>0</mn>
</msub>
<mo>&rsqb;</mo>
<msub>
<mi>e</mi>
<mrow>
<mi>i</mi>
<mi>j</mi>
</mrow>
</msub>
<mo>.</mo>
<mo>-</mo>
<mo>-</mo>
<mo>-</mo>
<mrow>
<mo>(</mo>
<mn>13</mn>
<mo>)</mo>
</mrow>
</mrow>
每个eij和所有的余下的变量e没有相互作用,因此eij的最佳值仅依赖于它的系数值,最小化关于变量e的表达式,如果的值为负,eij的最佳值为1;如果的值不为负,eij的最佳值为0。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710593912.8A CN107491735B (zh) | 2017-07-20 | 2017-07-20 | 人类行为识别的标签和交互关系联合学习方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710593912.8A CN107491735B (zh) | 2017-07-20 | 2017-07-20 | 人类行为识别的标签和交互关系联合学习方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107491735A true CN107491735A (zh) | 2017-12-19 |
CN107491735B CN107491735B (zh) | 2020-08-18 |
Family
ID=60643441
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710593912.8A Active CN107491735B (zh) | 2017-07-20 | 2017-07-20 | 人类行为识别的标签和交互关系联合学习方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107491735B (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110263723A (zh) * | 2019-06-21 | 2019-09-20 | 王森 | 室内空间的姿态识别方法、***、介质、设备 |
CN110738256A (zh) * | 2019-10-15 | 2020-01-31 | 四川长虹电器股份有限公司 | 基于统计学习模型的图像隐含信息挖掘方法及装置 |
US10832060B2 (en) | 2018-11-14 | 2020-11-10 | Industrial Technology Research Institute | Resident activity recognition system and method thereof |
WO2022193312A1 (zh) * | 2021-03-19 | 2022-09-22 | 京东方科技集团股份有限公司 | 基于多导联的心电信号识别方法和心电信号识别装置 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120219209A1 (en) * | 2011-02-25 | 2012-08-30 | Microsoft Corporation | Image Labeling with Global Parameters |
CN105740815A (zh) * | 2016-01-29 | 2016-07-06 | 南京邮电大学 | 一种基于深度递归分层条件随机场的人体行为识别方法 |
CN106815600A (zh) * | 2016-12-27 | 2017-06-09 | 浙江工业大学 | 用于人类行为识别的深度联合结构化和结构化学习方法 |
-
2017
- 2017-07-20 CN CN201710593912.8A patent/CN107491735B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120219209A1 (en) * | 2011-02-25 | 2012-08-30 | Microsoft Corporation | Image Labeling with Global Parameters |
CN105740815A (zh) * | 2016-01-29 | 2016-07-06 | 南京邮电大学 | 一种基于深度递归分层条件随机场的人体行为识别方法 |
CN106815600A (zh) * | 2016-12-27 | 2017-06-09 | 浙江工业大学 | 用于人类行为识别的深度联合结构化和结构化学习方法 |
Non-Patent Citations (3)
Title |
---|
NEZIHA JAOUEDI ET AL.: "Human action recognition to human behavior analysis", 《2016 7TH INTERNATIONAL CONFERENCE ON SCIENCES OF ELECTRONICS, TECHNOLOGIES OF INFORMATION AND TELECOMMUNICATIONS (SETIT)》 * |
VLADIMIR KOLMOGOROV: "Convergent Tree-Reweighted Message Passing for Energy Minimizati", 《IEEE TRANSACTIONS ON PATTERN ANALYSIS AND MACHINE INTELLIGENCE》 * |
韩磊: "图像序列中人的行为分析和识别方法", 《中国博士学位论文全文数据库》 * |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10832060B2 (en) | 2018-11-14 | 2020-11-10 | Industrial Technology Research Institute | Resident activity recognition system and method thereof |
CN110263723A (zh) * | 2019-06-21 | 2019-09-20 | 王森 | 室内空间的姿态识别方法、***、介质、设备 |
CN110738256A (zh) * | 2019-10-15 | 2020-01-31 | 四川长虹电器股份有限公司 | 基于统计学习模型的图像隐含信息挖掘方法及装置 |
WO2022193312A1 (zh) * | 2021-03-19 | 2022-09-22 | 京东方科技集团股份有限公司 | 基于多导联的心电信号识别方法和心电信号识别装置 |
Also Published As
Publication number | Publication date |
---|---|
CN107491735B (zh) | 2020-08-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Zeng et al. | Face2exp: Combating data biases for facial expression recognition | |
CN114398961B (zh) | 一种基于多模态深度特征融合的视觉问答方法及其模型 | |
Cui et al. | The empathic framework for task learning from implicit human feedback | |
CN107491735A (zh) | 人类行为识别的标签和交互关系联合学习方法 | |
CN107506722A (zh) | 一种基于深度稀疏卷积神经网络人脸情感识别方法 | |
CN106354710A (zh) | 一种神经网络关系抽取方法 | |
CN108765383B (zh) | 基于深度迁移学习的视频描述方法 | |
CN107679491A (zh) | 一种融合多模态数据的3d卷积神经网络手语识别方法 | |
CN106127120A (zh) | 姿势估计方法和装置、计算机*** | |
CN109003678A (zh) | 一种仿真文本病历的生成方法及*** | |
JP6977901B2 (ja) | 学習材推薦方法、学習材推薦装置および学習材推薦プログラム | |
CN110727844B (zh) | 一种基于生成对抗网络的在线评论商品特征观点提取方法 | |
CN106503616A (zh) | 一种基于分层超限学习机的运动想象脑电信号分类方法 | |
CN110580341A (zh) | 一种基于半监督学习模型的虚假评论检测方法及*** | |
Więckowski et al. | A fuzzy assessment model for freestyle swimmers-a comparative analysis of the MCDA methods | |
Thiruthuvanathan et al. | Engagement Detection through Facial Emotional Recognition Using a Shallow Residual Convolutional Neural Networks. | |
Hernandez-Orallo | AI evaluation: On broken yardsticks and measurement scales | |
Lonij et al. | Open-world visual recognition using knowledge graphs | |
CN106815600A (zh) | 用于人类行为识别的深度联合结构化和结构化学习方法 | |
CN112950414B (zh) | 一种基于解耦法律要素的法律文本表示方法 | |
US20220253630A1 (en) | Optimized policy-based active learning for content detection | |
CN117313709A (zh) | 一种基于统计信息和预训练语言模型的生成文本检测方法 | |
Yuan et al. | Children's drawing psychological analysis using shallow convolutional neural network | |
CN106776568A (zh) | 基于用户评价的推荐理由生成方法 | |
CN111160161A (zh) | 一种基于噪声剔除的自步学习人脸年龄估计方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |