CN108053437A - 基于体态的三维模型获取方法及装置 - Google Patents
基于体态的三维模型获取方法及装置 Download PDFInfo
- Publication number
- CN108053437A CN108053437A CN201711228564.0A CN201711228564A CN108053437A CN 108053437 A CN108053437 A CN 108053437A CN 201711228564 A CN201711228564 A CN 201711228564A CN 108053437 A CN108053437 A CN 108053437A
- Authority
- CN
- China
- Prior art keywords
- mrow
- msub
- transformation matrix
- grid
- msubsup
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/55—Depth or shape recovery from multiple images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
- G06T17/20—Finite element generation, e.g. wire-frame surface description, tesselation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Graphics (AREA)
- Geometry (AREA)
- Software Systems (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Processing Or Creating Images (AREA)
- Image Processing (AREA)
Abstract
本发明公开一种基于体态的三维模型获取方法及装置,该方法包括:S1.获取包含对象各个局部的深度图像;S2.将所述对象各个局部的深度图像进行动态融合,获得各个局部的三维网格;S3.利用标准模型匹配各个局部的三维网格,求取形态参数和关节变换矩阵;S4.根据形态参数和关节变换矩阵,获取三维模型。通过利用标准模型,求取所获取对象深度图像中的形态参数和关节变换矩阵;根据形态参数和关节变换矩阵获得的三维模型,其精确度高、鲁棒性好,且对设备要求低,适合普通用户使用。
Description
技术领域
本发明涉及计算机视觉及图形学领域,尤其涉及一种基于体态的三维模型获取方法及装置。
背景技术
三维重建是计算机视觉和图形学领域的重点问题,特别是针对人体的三维重建技术在影视娱乐等多个方面有着重要的应用价值。现有的人体三维重建技术主要有三种:一是搭建多视点的彩色相机阵列或深度相机阵列,通过多视角静态采集和融合来重建人体模型,这种方法的缺点在于设备搭建及标定过程较为复杂;二是利用单深度相机,要求用户从不同的角度做出同样的姿势,深度相机分别进行扫描,最终将点云融合,这种方法对用户要求较高,使用不便;三是同样利用单深度相机,用户不要求固定同一姿势,采集到多幅深度图像后采用动态融合方法进行融合,这种方法较为实用,但鲁棒性及准确性均不高,实际使用中会遇到网格无法准确闭合的问题。
发明内容
为解决上述问题,本发明提出一种基于体态的三维模型获取方法及装置,该方法和装置对设备要求低,精确鲁棒,使用简单,适合普通用户使用,拥有广阔的应用前景。
本发明提出的基于体态的三维模型获取方法包括:S1.获取包含人体各个局部的深度图像;S2.将所述人体各个局部的深度图像进行动态融合,获得各个局部的三维网格;S3.利用标准人体模型匹配各个局部的三维网格,求取人体的形态参数和关节变换矩阵;S4.根据形态参数和关节变换矩阵,获取三维模型。
本发明还提供一种包含计算机程序的计算机可读存储介质,该计算机程序可使计算机执行如上所述的方法。
本发明还提供一种基于体态的三维模型获取装置,包括:深度相机和处理器,深度相机获取包含人体各个局部的深度图像,处理器包含如上所述的方法。
本发明的有益效果:利用标准模型,求取所获取对象深度图像中的形态参数和关节变换矩阵;通过所获取的形态参数和关节变换矩阵,可使最终获得的三维模型精确度高、鲁棒性好,且该方法对设备要求低,适合普通用户使用。
附图说明
图1为本发明具体实施方式中三维人体模型制作场景示意图。
图2为本发明具体实施方式中深度相机的侧面结构示意图。
图3为本发明具体实施方式中三维人体模型获取方法流程图。
图4为本发明具体实施方式中动态融合三维网格的方法流程图。
图5为本发明具体实施方式中利用形态参数和关节变化矩阵获得三维人体模型的流程图。
具体实施方式
下面结合具体实施方式并对照附图对本发明作进一步详细说明,应该强调的是,下述说明仅仅是示例性的,而不是为了限制本发明的范围及其应用。
基于体态的三维模型制作场景如图1所示,包括一个深度相机101和人体103。在一个实施例中,深度相机固定在可调节高度的三角架102上。人体103在深度相机101的测量范围内,利用深度相机对其进行360°拍摄,拍摄完成后可以获取包含人体所有局部的多幅深度图像。
可以理解的是,人体103可以指整个人体,也可以指部分人体,比如仅包含上半身的人体。另外,该方法和装置不仅适用于获取人体的三维模型,针对于其他的,比如:动物,也同样适用。
图1的场景中,其利用一个深度相机101对人体103从多个角度进行拍摄,在一个实施例中,将深度相机所在的支撑架放置于一圆形导轨上,导轨有导轮和电机,电机运行可推动导轮滚动,从而带动所述支撑架上的深度相机以人体为圆心进行拍摄。又一实施例中,深度相机保持不动,人体进行360°旋转从而实现深度相机对其进行360°拍摄。可以理解的是,任何可以实现以单深度相机对目标进行的360°拍摄方案都被包含在本发明中。
深度相机101是用于获取目标空间的深度信息(和彩色信息),按种类主要分为结构光深度相机、TOF深度相机以及双目视觉深度相机。
基于结构光三角法的深度相机利用激光投影装置向空间中投射经编码的标准结构光图案,空间中目标深度的不同将标准结构光图案进行了调制,通过图像相关等算法获取调制后的结构光图像与标准结构光图案的差别,根据结构光三角法建立该差别与目标深度之间的关系就可求解出整个目标空间的深度图像。
基于时间飞行法的深度相机利用激光投影装置向目标发射激光脉冲,由光接收装置获取脉冲并记录下发射到接收的光飞行时间,根据飞行时间可以计算出目标的深度图像。
基于双目视觉原理的深度相机,本质上与结构光三角法原理相似,区别在于结构光三角法是主动测量,而双目视觉则是被动测量。利用左右相机获取的图像在视差上的差别,并由视觉算法获取该视差后进一步利用三角法测量原理计算出目标的深度值。
一般地,前两种深度相机中都需要借助于激光投影装置来向空间中投射光学信号,而对于双目视觉深度相机而言,目前也会常常利用激光投影装置来增加空间中物体的纹理信息以提高测量精度。因为,激光投影装置对于深度相机而言异常重要,往往激光投影装置的性能、体积、功耗将直接影响深度相机的精度、体积等。在后续的说明中,3D传感器中的深度相机以基于激光投影装置的深度相机为例进行说明。
图2所示的为结构光深度相机的侧面结构示意图,深度相机101主要组成部件有激光投影模组204、采集模组205、主板203、处理器202,另外还可设置RGB相机207。激光投影模组204、采集模组205以及RGB相机207一般被安装在同一个深度相机平面上,且处于同一条基线,每个模组或相机都对应一个进光窗口208。一般地,处理器202被集成在主板203上,而激光投影模组204与采集模组205通过接口206与主板连接,在一种实施例中所述的接口为FPC接口。其中,激光投影模组用于向目标空间中投射经编码的结构光图案,采集模组205采集到该结构光图像后通过处理器202的处理从而得到目标空间的深度图像。在一个实施例中,结构光图像为红外激光散斑图案,图案具有颗粒分布相对均匀但具有很高的局部不相关性,这里的局部不相关性指的是图案中各个子区域都具有较高的唯一性。对应的采集模组205为与激光投影模组204对应的红外相机。利用处理器获取深度图像具体地指接收到由采集模组采集到的散斑图案后,通过计算散斑图案与参考散斑图案之间的偏离值来进一步得到深度图像。
图3所示的是根据本发明一个实施例的基于人体体态的三维人体模型获取方法,包括如下步骤:
步骤301.人体在深度相机前缓慢旋转一周,得到一系列包含人体各个局部的单视点深度图像/深度视频。
步骤302.将所获得深度视频均分为多个片段,每一片段对应人体的一个局部图像。在本实施例中,具体分为片段A、B和C,对每个片段进行动态融合,得到人体的各个局部三维网格A、B和C。
具体地,对于每段深度视频片段,动态融合得到人体的局部三维网格包含以下步骤,如图4所示:
3021.建立参考TSDF(truncated signed distance function,截断符号距离函数)体V,将第一帧深度图像融合到V中,得到初始三维网格;
3022.对于之后的每一帧深度图像P,获取已有三维网格到P之间的匹配点对;
3023.根据匹配点对求取网格的非刚性运动场;
3024.根据非刚性运动场,将深度图像P融合到V之中,得到新的三维网格;
3025.重复3022~3024,直至所有深度图全部融合到V中,得到最终的三维网格。
步骤303.用SMPL(Skinned Multi-Person Linear Model,蒙皮多人线性模型)人体模型匹配各个局部三维网格,建立能量函数A、B、C。
具体地,SMPL人体模型是一个从大量人体扫描数据中通过机器学习得到的一个可以进行形态变化和姿态变换的人体三维模型,具体包括以下参数:标准模型的顶点坐标、关节坐标和三角网格;每个顶点坐标对于形态变换基的变换权重;关节坐标对于形态变换基的变换权重;每个顶点坐标对于关节变换的变换权重;关节与关节之间的连接信息。
在其他实施例中也可以采用其他人体模型,比如SCAPE(Shape Completion andAnimation of People)人体模型等。
通过最近邻查找得到从局部三维网格到SMPL人体模型上的匹配点对,建立能量函数:
E=argminEdistance+Eregular+Esmooth+Erigid
其中,Edistance为匹配点对的距离约束,Eregular为形态参数的正则项,Esmooth为姿态参数的平滑约束,Erigid为姿态参数的刚性约束。
各个能量项的定义如下:
Edistance=∑(v,v′)∈C(v-v′)2;
其中,姿态参数包括关节变换矩阵,C为三维网格到SMPL人体模型的匹配点对,v为SMPL人体模型上经过形态变化和姿态变化的点,v′为三维网格上的对应点,βs为人体形态参数;ΔTj为关节变换矩阵的变换量,Tj为关节变换矩阵,p(j)为关节j的父关节。
其中,人体模型上点v的变换公式为:
其中,为v对于关节j的变化权重,Tj为关节变换矩阵,v0为标准姿态下的坐标,βm为形态变化参数,为v对于基m的变化权重。
各个关节的求取变化量的矩阵表示及对应的变化矩阵更新公式为:
其中,ΔT为待求的变化量,α、β、γ、tx、ty、tz为ΔT的参数表示,t表示时间,即此刻的变换矩阵在上一帧的基础上进行更新。上述公式为通用公式,因此出于表达的简介,省略了应有的关节下标j。
步骤304.根据能量函数求取各个三维网格下的形态参数和关节变换矩阵。
求解过程为三个子步骤的迭代,分别如下:
3041.通过最近邻查找方法,获取三维网格到SMPL人体模型的匹配点对;
3042.固定形态参数,求取关节变换矩阵,此时优化的目标函数如下:
E=argminEdistance+Esmooth+Erigid
3043.更新并固定关节变换矩阵,求取形态参数,此时优化的目标函数如下:
E=argminEdistance+Eregular
通过使用线性最小二乘方法可以快速高效的求解上述能量函数。利用求解的X对人体的形态和姿态进行更新,更新之后重新查找匹配点对,重新求解。由于本发明实施例的方法的最近点约束中使用了最近点即为对应点的假设,因此,需要迭代多次求解才能达到最终正确位置。
步骤305.将求取出来的形态参数进行平均,得到最终的形态参数。
尽管深度相机扫描的是同一个人体,但是对于局部的网格,没有全部的人体信息,因此求解得到的形态参数有一定的差别。通过取平均可以得到最终的误差较小的形态参数。
步骤306.根据求取出来的关节变换矩阵,将所有的三维网格反变换至标准姿态。
具体地,变换公式为:
其中,v′为三维网格上的点,Tj为关节变换矩阵,为点v对于关节j的变换权重,此变换权重可以通过在人体模型上查找m个v′的近邻点,然后将这些近邻点的权重取平均值计算得到。由于前述步骤中已经对人体模型在各个局部网格下的姿态和形态参数进行了求解,因此此时SMPL人体模型与局部网格能够较好地匹配,故通过近邻平均的方法来求解变换权重是合理而准确的。
步骤307.获取相邻两个视频片段所对应的标准姿态网格之间的匹配点对,并对求取出来的关节变换矩阵进行优化。
具体地,优化的目标函数为:
E=argminEdistance
其中,C为标准姿态下网格之间匹配点对,v1,v2为匹配点对在原始网格中的坐标,T1、T2分别为两个网格对v0的变换矩阵v0为匹配点对在标准姿态下的坐标,实际为求解过程中的中间变量。
上述目标函数的求解过程可以分解为两步:
(1)固定T1、T2求解v0;
(2)更新并固定v0求解T1、T2。
分解之后,通过使用线性最小二乘方法可以快速高效的求解上述能量函数。由于本发明具体实施方式的方法的最近点约束中使用了最近点即为对应点的假设,因此,需要迭代多次求解才能达到最终正确位置。
步骤308.根据最终优化得到的形态参数和关节变换矩阵,将各个视频片段得到的参考TSDF体融合到标准姿态下,得到最终的三维人体模型。
具体地,最终的融合包括步骤:
3081.根据最终优化得到的形态参数和关节变换矩阵,将标准姿态下的每个体素变换到各个局部网格下。
首先通过形态参数变换原有的人体模型,使得人体模型的形态与实际用户相对应。此步骤可以得到该用户在标准姿态下的模型。然后对于标准姿态下的TSDF体V0中的每个体素v0(voxel),首先查找其在标准姿态下的人体模型上的近邻点,通过对这些近邻点的对各个关节变换权重取平均,得到该体素对于各个关节的变换权重;根据每个局部网格Mi下的关节变换矩阵,求解该体素在每个局部网格对应姿态下的坐标;
3082.对坐标变换后的体素,在相应的局部三维网格的TSDF体Vi中找到vi的近邻体素,通过插值求取Vi中vi点的TSDF值。插值公式为:
dr=∑i∈N(r)di+(xr-xi)Δ
其中,r为待插值的体素,N(r)为r在局部网格所对应的TSDF体中的近邻体素,xr,xi分别表示r和近邻体素i的坐标,Δ为i处的TSDF梯度。
3083.对各局部网格下求得的vi点的TSDF值取平均,即可得到对于标准姿态下的TSDF体V0中的体素v0的TSDF值。对融合后的TSDF体提取网格,得到最终的三维人体模型。
以上内容是结合具体/优选的实施方式对本发明所作的进一步详细说明,不能认定本发明的具体实施只局限于这些说明。对于本发明所属技术领域的普通技术人员来说,在不脱离本发明构思的前提下,其还可以对这些已描述的实施方式做出若干替代或变型,而这些替代或变型方式都应当视为属于本发明的保护范围。
Claims (10)
1.一种基于体态的三维模型获取方法,其特征在于,包括如下步骤:
S1.获取包含对象各个局部的深度图像;
S2.将所述对象各个局部的深度图像进行动态融合,获得各个局部的三维网格;
S3.利用标准模型匹配各个局部的三维网格,求取形态参数和关节变换矩阵;
S4.根据形态参数和关节变换矩阵,获取三维模型。
2.如权利要求1所述的方法,其特征在于,所述步骤S2包括:
S21.建立参考TSDF体,将第一幅深度图像融合到TSDF体中,得到初始三维网格;
S22.对于后续获取的每一幅深度图像,获取已有三维网格到深度图像之间的匹配点对;
S23.根据匹配点对求取网格的非刚性运动场;
S24.根据非刚性运动场,将深度图像融合到TSDF体中,得到新的三维网格;
S25.重复步骤S22-S24,直至所有深度图像全部融合到TSDF体中,得到最终的三维网格。
3.如权利要求1所述的方法,其特征在于,所述步骤S3包括:
S31.将SMPL人体模型进行形态变化和姿态变化,匹配各个局部的三维网格;建立能量函数,求取各个三维网格下的初始形态参数和初始关节变换矩阵;
S32.将所述各个三维网格下的初始形态参数进行平均,获得最终的形态参数;
S33.根据所述初始关节变换矩阵以及SMPL人体模型与三维网格的匹配结果,将各个局部的三维网格反变换至标准姿态三维网格;依据标准姿态三维网格,对初始关节变换矩阵进行优化,获得最终的关节变换矩阵。
4.如权利要求3所述的方法,其特征在于,所述步骤S31中的所述能量函数为:
E=argminEdistance+Eregular+Esmooth+Erigid,
其中,Edistance为匹配点对的距离约束,Eregular为形态参数的正则项,Esmooth为姿态参数的平滑约束,Erigid为姿态参数的刚性约束;各个能量项的定义如下:
Edistance=∑(v,v′)∈C(v-v′)2;
<mrow>
<msub>
<mi>E</mi>
<mrow>
<mi>r</mi>
<mi>e</mi>
<mi>g</mi>
<mi>u</mi>
<mi>l</mi>
<mi>a</mi>
<mi>r</mi>
</mrow>
</msub>
<mo>=</mo>
<msubsup>
<mi>&Sigma;&beta;</mi>
<mi>s</mi>
<mn>2</mn>
</msubsup>
<mo>;</mo>
</mrow>
<mfenced open = "" close = "">
<mtable>
<mtr>
<mtd>
<mrow>
<msub>
<mi>E</mi>
<mrow>
<mi>s</mi>
<mi>m</mi>
<mi>o</mi>
<mi>o</mi>
<mi>t</mi>
<mi>h</mi>
</mrow>
</msub>
<mo>=</mo>
<mo>&Sigma;</mo>
<mo>|</mo>
<mo>|</mo>
<msub>
<mi>&Delta;T</mi>
<mi>j</mi>
</msub>
<mo>-</mo>
<msub>
<mi>&Delta;T</mi>
<mrow>
<mi>p</mi>
<mrow>
<mo>(</mo>
<mi>j</mi>
<mo>)</mo>
</mrow>
</mrow>
</msub>
<mo>|</mo>
<msubsup>
<mo>|</mo>
<mn>2</mn>
<mn>2</mn>
</msubsup>
<mo>;</mo>
</mrow>
</mtd>
</mtr>
<mtr>
<mtd>
<mrow>
<msub>
<mi>E</mi>
<mrow>
<mi>r</mi>
<mi>i</mi>
<mi>g</mi>
<mi>i</mi>
<mi>d</mi>
</mrow>
</msub>
<mo>=</mo>
<mo>&Sigma;</mo>
<mo>|</mo>
<mo>|</mo>
<msub>
<mi>T</mi>
<mi>j</mi>
</msub>
<msub>
<mi>v</mi>
<mi>j</mi>
</msub>
<mo>-</mo>
<msub>
<mi>T</mi>
<mrow>
<mi>p</mi>
<mrow>
<mo>(</mo>
<mi>j</mi>
<mo>)</mo>
</mrow>
</mrow>
</msub>
<msub>
<mi>v</mi>
<mi>j</mi>
</msub>
<mo>|</mo>
<msubsup>
<mo>|</mo>
<mn>2</mn>
<mn>2</mn>
</msubsup>
<mo>;</mo>
</mrow>
</mtd>
</mtr>
</mtable>
</mfenced>
其中,C为三维网格到SMPL人体模型的匹配点对,v为SMPL人体模型上经过形态变化和姿态变化的点,v′为三维网格上的对应点,βs为人体形态参数;ΔTj为关节变换矩阵的变换量,Tj为关节变换矩阵,p(j)为关节j的父关节;
SPML人体模型进行形态变化和姿态变化的变换公式为:
<mrow>
<mi>v</mi>
<mo>=</mo>
<munder>
<mo>&Sigma;</mo>
<mrow>
<mi>j</mi>
<mo>&Element;</mo>
<mi>J</mi>
</mrow>
</munder>
<msubsup>
<mi>w</mi>
<mi>j</mi>
<mi>v</mi>
</msubsup>
<msub>
<mi>T</mi>
<mi>j</mi>
</msub>
<mrow>
<mo>(</mo>
<msub>
<mi>v</mi>
<mn>0</mn>
</msub>
<mo>+</mo>
<msub>
<mo>&Sigma;</mo>
<mrow>
<mi>m</mi>
<mo>&Element;</mo>
<mi>M</mi>
</mrow>
</msub>
<msub>
<mi>&beta;</mi>
<mi>m</mi>
</msub>
<msubsup>
<mi>s</mi>
<mi>m</mi>
<mi>v</mi>
</msubsup>
<mo>)</mo>
</mrow>
</mrow>
其中,为v对于关节j的变化权重,Tj为关节变换矩阵,v0为v在标准人体模型下的坐标,为v对于基m的变化权重。
5.如权利要求3所述的方法,其特征在于,所述步骤S33中,各个局部三维网格反变换至标准姿态的变换公式为:
<mrow>
<msubsup>
<mi>v</mi>
<mn>0</mn>
<mo>&prime;</mo>
</msubsup>
<mo>=</mo>
<munder>
<mo>&Sigma;</mo>
<mrow>
<mi>j</mi>
<mo>&Element;</mo>
<mi>J</mi>
</mrow>
</munder>
<msup>
<mrow>
<mo>(</mo>
<msubsup>
<mi>w</mi>
<mi>j</mi>
<mi>v</mi>
</msubsup>
<msub>
<mi>T</mi>
<mi>j</mi>
</msub>
<mo>)</mo>
</mrow>
<mrow>
<mo>-</mo>
<mn>1</mn>
</mrow>
</msup>
<msup>
<mi>v</mi>
<mo>&prime;</mo>
</msup>
<mo>,</mo>
</mrow>
其中,v′为三维网格上的点,Tj为关节变换矩阵,为点v对于关节j的变换权重。
6.如权利要求3所述的方法,其特征在于,所述步骤S33中,对初始关节变换矩阵进行优化的优化公式为:
E=argminEdistance
Edistance=∑(v1,v2)∈C(T1v0-v1)2+(T2v0-v2)2
其中,C为标准姿态下网格之间匹配点对,v1,v2为匹配点对在原始网格中的坐标,v0为匹配点对在标准姿态下的坐标,T1、T2分别为两个网格对v0的变换矩阵。
7.如权利要求1所述的方法,其特征在于,所述步骤S4包括:
S41.根据形态参数和关节变换矩阵,将标准姿态下的每个体素变换到各个局部三维网格下;
S42.对坐标变换后的体素,在相应的局部三维网格的TSDF体中,通过插值求取体素对应的TSDF值;
S43.将各个局部三维网格下插值求得的TSDF值进行平均,得到融合后的TSDF值;
S44.从最终的TSDF体中提取出网格,得到最终的三维模型。
8.如权利要求7所述的方法,其特征在于,所述步骤S42中,插值公式为:
dr=∑i∈N(r)di+(xr-xi)Δ
其中,r为待插值的体素,N(r)为r在局部网格所对应的TSDF体中的近邻体素,xr,xi分别表示r和近邻体素i的坐标,Δ为i处的TSDF梯度。
9.一种包含计算机程序的计算机可读存储介质,所述计算机程序可使计算机执行如权利要求1-8任一项所述的方法。
10.一种基于体态的三维模型获取装置,其特征在于,包括:深度相机和处理器,所述深度相机获取包含人体的深度图像,所述处理器用于执行如权利要求1-8任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711228564.0A CN108053437B (zh) | 2017-11-29 | 2017-11-29 | 基于体态的三维模型获取方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711228564.0A CN108053437B (zh) | 2017-11-29 | 2017-11-29 | 基于体态的三维模型获取方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108053437A true CN108053437A (zh) | 2018-05-18 |
CN108053437B CN108053437B (zh) | 2021-08-03 |
Family
ID=62121420
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201711228564.0A Active CN108053437B (zh) | 2017-11-29 | 2017-11-29 | 基于体态的三维模型获取方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108053437B (zh) |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109523635A (zh) * | 2018-11-01 | 2019-03-26 | 深圳蒜泥科技投资管理合伙企业(有限合伙) | 一种三维人体扫描非刚性重建和测量方法及装置 |
CN109859296A (zh) * | 2019-02-01 | 2019-06-07 | 腾讯科技(深圳)有限公司 | Smpl参数预测模型的训练方法、服务器及存储介质 |
CN109907824A (zh) * | 2019-03-11 | 2019-06-21 | 杭州市红十字会医院 | 一种智能针刀治疗*** |
CN110599535A (zh) * | 2019-08-05 | 2019-12-20 | 清华大学 | 基于哈希表的高分辨率人体实时动态重建方法及装置 |
CN110827342A (zh) * | 2019-10-21 | 2020-02-21 | 中国科学院自动化研究所 | 三维人体模型重建方法及存储设备、控制设备 |
CN111612887A (zh) * | 2020-04-30 | 2020-09-01 | 北京的卢深视科技有限公司 | 一种人体测量方法和装置 |
CN111754573A (zh) * | 2020-05-19 | 2020-10-09 | 新拓三维技术(深圳)有限公司 | 一种扫描方法及*** |
CN111968217A (zh) * | 2020-05-18 | 2020-11-20 | 北京邮电大学 | 基于图片的smpl参数预测以及人体模型生成方法 |
CN112233223A (zh) * | 2020-09-29 | 2021-01-15 | 深圳市易尚展示股份有限公司 | 基于三维点云的人体参数化模型自动变形方法和装置 |
WO2021077720A1 (zh) * | 2019-10-25 | 2021-04-29 | 深圳奥比中光科技有限公司 | 获取对象三维模型的方法、装置、电子设备及*** |
WO2023036069A1 (zh) * | 2021-09-09 | 2023-03-16 | 索尼集团公司 | 基于4d融合的高效动态三维模型序列压缩方法 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110069866A1 (en) * | 2009-09-22 | 2011-03-24 | Samsung Electronics Co., Ltd. | Image processing apparatus and method |
CN103198523A (zh) * | 2013-04-26 | 2013-07-10 | 清华大学 | 一种基于多深度图的非刚体三维重建方法及*** |
CN103268629A (zh) * | 2013-06-03 | 2013-08-28 | 程志全 | 三维人体形态和姿态的无标记点实时复原方法 |
US20140099017A1 (en) * | 2012-10-04 | 2014-04-10 | Industrial Technology Research Institute | Method and apparatus for reconstructing three dimensional model |
CN104794722A (zh) * | 2015-04-30 | 2015-07-22 | 浙江大学 | 利用单个Kinect计算着装人体三维净体模型的方法 |
CN106875482A (zh) * | 2017-01-13 | 2017-06-20 | 浙江大学 | 一种同时定位与稠密三维重建方法 |
CN106934827A (zh) * | 2015-12-31 | 2017-07-07 | 杭州华为数字技术有限公司 | 三维场景的重建方法和装置 |
CN106933976A (zh) * | 2017-02-14 | 2017-07-07 | 深圳奥比中光科技有限公司 | 建立人体3d净模型的方法及其在3d试衣中的应用 |
CN106952334A (zh) * | 2017-02-14 | 2017-07-14 | 深圳奥比中光科技有限公司 | 人体净模型的创建方法与三维试衣*** |
CN106952333A (zh) * | 2017-02-14 | 2017-07-14 | 深圳奥比中光科技有限公司 | 一种创建人体参数化模型的方法及*** |
-
2017
- 2017-11-29 CN CN201711228564.0A patent/CN108053437B/zh active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110069866A1 (en) * | 2009-09-22 | 2011-03-24 | Samsung Electronics Co., Ltd. | Image processing apparatus and method |
US20140099017A1 (en) * | 2012-10-04 | 2014-04-10 | Industrial Technology Research Institute | Method and apparatus for reconstructing three dimensional model |
CN103198523A (zh) * | 2013-04-26 | 2013-07-10 | 清华大学 | 一种基于多深度图的非刚体三维重建方法及*** |
CN103268629A (zh) * | 2013-06-03 | 2013-08-28 | 程志全 | 三维人体形态和姿态的无标记点实时复原方法 |
CN104794722A (zh) * | 2015-04-30 | 2015-07-22 | 浙江大学 | 利用单个Kinect计算着装人体三维净体模型的方法 |
CN106934827A (zh) * | 2015-12-31 | 2017-07-07 | 杭州华为数字技术有限公司 | 三维场景的重建方法和装置 |
CN106875482A (zh) * | 2017-01-13 | 2017-06-20 | 浙江大学 | 一种同时定位与稠密三维重建方法 |
CN106933976A (zh) * | 2017-02-14 | 2017-07-07 | 深圳奥比中光科技有限公司 | 建立人体3d净模型的方法及其在3d试衣中的应用 |
CN106952334A (zh) * | 2017-02-14 | 2017-07-14 | 深圳奥比中光科技有限公司 | 人体净模型的创建方法与三维试衣*** |
CN106952333A (zh) * | 2017-02-14 | 2017-07-14 | 深圳奥比中光科技有限公司 | 一种创建人体参数化模型的方法及*** |
Non-Patent Citations (3)
Title |
---|
KUN LI,JINGYU YANG,LEIJIE LIU,YEBINLIU: "SPA:Sparse Photorealistic Animation Using a Single RGB-D Camera", 《IEEE TRANSACTIONS ON CIRCUITS AND SYSTEMS FOR VIDEO TECHNOLOGY》 * |
李晓捷: "基于深度相机的三维人体重建及在服装展示方面的技术研究", 《中国博士学位论文全文数据库 工程科技Ⅰ辑》 * |
陈寅: "三维人体模型的生成技术研究", 《中国博士学位论文全文数据库 信息科技辑》 * |
Cited By (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109523635A (zh) * | 2018-11-01 | 2019-03-26 | 深圳蒜泥科技投资管理合伙企业(有限合伙) | 一种三维人体扫描非刚性重建和测量方法及装置 |
CN109523635B (zh) * | 2018-11-01 | 2023-07-21 | 深圳蒜泥科技投资管理合伙企业(有限合伙) | 一种三维人体扫描非刚性重建和测量方法及装置 |
CN109859296B (zh) * | 2019-02-01 | 2022-11-29 | 腾讯科技(深圳)有限公司 | Smpl参数预测模型的训练方法、服务器及存储介质 |
CN109859296A (zh) * | 2019-02-01 | 2019-06-07 | 腾讯科技(深圳)有限公司 | Smpl参数预测模型的训练方法、服务器及存储介质 |
CN109907824A (zh) * | 2019-03-11 | 2019-06-21 | 杭州市红十字会医院 | 一种智能针刀治疗*** |
CN109907824B (zh) * | 2019-03-11 | 2020-12-22 | 杭州市红十字会医院 | 一种智能针刀治疗*** |
CN110599535A (zh) * | 2019-08-05 | 2019-12-20 | 清华大学 | 基于哈希表的高分辨率人体实时动态重建方法及装置 |
CN110827342A (zh) * | 2019-10-21 | 2020-02-21 | 中国科学院自动化研究所 | 三维人体模型重建方法及存储设备、控制设备 |
WO2021077720A1 (zh) * | 2019-10-25 | 2021-04-29 | 深圳奥比中光科技有限公司 | 获取对象三维模型的方法、装置、电子设备及*** |
CN111612887A (zh) * | 2020-04-30 | 2020-09-01 | 北京的卢深视科技有限公司 | 一种人体测量方法和装置 |
CN111968217A (zh) * | 2020-05-18 | 2020-11-20 | 北京邮电大学 | 基于图片的smpl参数预测以及人体模型生成方法 |
CN111754573A (zh) * | 2020-05-19 | 2020-10-09 | 新拓三维技术(深圳)有限公司 | 一种扫描方法及*** |
CN111754573B (zh) * | 2020-05-19 | 2024-05-10 | 新拓三维技术(深圳)有限公司 | 一种扫描方法及*** |
CN112233223A (zh) * | 2020-09-29 | 2021-01-15 | 深圳市易尚展示股份有限公司 | 基于三维点云的人体参数化模型自动变形方法和装置 |
WO2023036069A1 (zh) * | 2021-09-09 | 2023-03-16 | 索尼集团公司 | 基于4d融合的高效动态三维模型序列压缩方法 |
Also Published As
Publication number | Publication date |
---|---|
CN108053437B (zh) | 2021-08-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108053437A (zh) | 基于体态的三维模型获取方法及装置 | |
CN112288875B (zh) | 一种面向无人机矿山巡检场景的快速三维重建方法 | |
CN108921926B (zh) | 一种基于单张图像的端到端三维人脸重建方法 | |
CN108416840A (zh) | 一种基于单目相机的三维场景稠密重建方法 | |
CN104376552B (zh) | 一种3d模型与二维图像的虚实配准方法 | |
CN106803267A (zh) | 基于Kinect的室内场景三维重建方法 | |
CN104240289B (zh) | 一种基于单个相机的三维数字化重建方法及*** | |
CN104330074B (zh) | 一种智能测绘平台及其实现方法 | |
CN110288642A (zh) | 基于相机阵列的三维物体快速重建方法 | |
CN104155765B (zh) | 在拼接式集成成像显示器中校正三维图像的方法和设备 | |
CN109544679A (zh) | 管道内壁的三维重建方法 | |
CN109118582A (zh) | 一种商品三维重建***及重建方法 | |
CN103559737A (zh) | 一种对象全景建模方法 | |
CN104236479B (zh) | 一种线结构光三维测量***及3d纹理图像构造算法 | |
CN108665537A (zh) | 联合优化人体体态与外观模型的三维重建方法及*** | |
CN110009674A (zh) | 基于无监督深度学习的单目图像景深实时计算方法 | |
CN108629831A (zh) | 基于参数化人体模板和惯性测量的三维人体重建方法及*** | |
CN108734776A (zh) | 一种基于散斑的三维人脸重建方法及设备 | |
CN109945802B (zh) | 一种结构光三维测量方法 | |
CN109087243A (zh) | 一种基于深度卷积生成对抗网络的视频超分辨率生成方法 | |
CN109754459A (zh) | 一种用于构建人体三维模型的方法及*** | |
CN105184857A (zh) | 基于点结构光测距的单目视觉重建中尺度因子确定方法 | |
CN103763543B (zh) | 合成全息图的采集方法 | |
CN109242957A (zh) | 一种基于多重约束的单帧编码结构光三维重建方法 | |
US20130016223A1 (en) | Method and apparatus for camera network calibration with small calibration pattern |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information |
Address after: 11-13 / F, joint headquarters building, high tech Zone, 63 Xuefu Road, Yuehai street, Nanshan District, Shenzhen, Guangdong 518000 Applicant after: Obi Zhongguang Technology Group Co., Ltd Address before: A808, Zhongdi building, industry university research base, China University of Geosciences, No.8, Yuexing Third Road, Nanshan District, Shenzhen, Guangdong 518000 Applicant before: SHENZHEN ORBBEC Co.,Ltd. |
|
CB02 | Change of applicant information | ||
GR01 | Patent grant | ||
GR01 | Patent grant |