CN111862170A - 光学式运动捕捉***及方法 - Google Patents
光学式运动捕捉***及方法 Download PDFInfo
- Publication number
- CN111862170A CN111862170A CN202010846612.8A CN202010846612A CN111862170A CN 111862170 A CN111862170 A CN 111862170A CN 202010846612 A CN202010846612 A CN 202010846612A CN 111862170 A CN111862170 A CN 111862170A
- Authority
- CN
- China
- Prior art keywords
- motion capture
- optical
- motion
- led lamp
- target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000003287 optical effect Effects 0.000 title claims abstract description 47
- 238000000034 method Methods 0.000 title claims abstract description 18
- 239000011324 bead Substances 0.000 claims abstract description 20
- 239000000758 substrate Substances 0.000 claims abstract description 7
- 239000003550 marker Substances 0.000 claims description 7
- 238000005516 engineering process Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 4
- 230000000007 visual effect Effects 0.000 description 4
- 238000003384 imaging method Methods 0.000 description 3
- 238000005259 measurement Methods 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 230000007547 defect Effects 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000001502 supplementing effect Effects 0.000 description 1
- 238000004148 unit process Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/292—Multi-camera tracking
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/002—Measuring arrangements characterised by the use of optical techniques for measuring two or more coordinates
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
- G06T7/33—Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
本发明提供一种光学式运动捕捉***和方法,其***包括:运动捕捉设备,包括多个光学标识点和多个运动捕捉相机,每个运动捕捉相机通过每个光学标识点获取目标运动视频信息;每一个标识点设置于不同的目标部位上,且标识点为主动信号发射装置;主动信号发射装置包括:LED灯珠、电源模块、匀光罩和基底;电源模块为LED灯珠供电,匀光罩扣在LED灯珠上,基底用于将LED灯珠安装于目标部位上;三维重建单元,获取目标运动视频信息以及运动捕捉相机标定信息,根据运动捕捉相机标定信息对目标运动视频信息进行三维重建处理,得到标识点的空间坐标;运动捕捉相机标定信息包括:镜头焦距、成像中心、倾斜因子以及畸变参数。
Description
技术领域
本发明属于运动捕捉技术领域,具体涉及一种光学式运动捕捉***及方法。
背景技术
光学运动捕捉技术是一种通过光学传感器采集,并采用计算机视觉原理计算物体的运动轨迹、姿态等空间信息的技术。根据原理不同可以将光学运动捕捉技术分为标记点式和无标记点式两大类。其中,标记点式运动捕捉技术具有高速、高精度、高可靠性的特点,在CG制作、工业测量、手术导航、虚拟现实、体育训练、医疗康复、机器人等领域有广阔的应用空间。
光学标记点是标记点式运动捕捉***硬件中的重要组成部分,其用于标记目标物体,通过对标记的采集和计算获取物体的运动信息。
目前标记点式运动捕捉常用的光学标记点根据形态不同分为二维标记和三维标记两大类。前者为平面标记点,例如圆形标记、二维码标记等,其缺点是空间可视角度小,不利于空间全方位观测;后者为立体标记点,通常为球形标记,其特点是可视角度大,便于空间全方位观测,因此在运动捕捉技术中广为使用。空间球形标记通常为一种反光球,自身不发光,通过反射补光光源的光线进入相机成像,在图像上被记录为高亮的光斑,以便于标记点的识别检测以及后续计算。
平面光学标记由于可视角度较小,空间观测盲区多,因此对于运动捕捉技术来说实用性不强。
常用的球形反光标记解决了可视角度问题,但受限于反光原理,发光亮度有限,在环境光较强的场合,标记的亮度不足以与背景亮度明显区分,导致标记检测失效。这也是该类型运动捕捉***不适用于户外场景的主要原因,限制了***的适用性。另一方面,反光球由于需要在球体表面覆盖反光材料,想要保持良好的球度和稳定性,工艺难度较大,目前常见的该类标记点普遍存在球圆度差、表面不平整或反光亮度不均匀等问题,这些不足导致该技术难以满足高精度测量领域的应用,比如工业测量、手术导航等。
发明内容
本发明的目的是采用主动发光装置代替被动反光球的主动式光学捕捉标识点。
本发明通过以下技术方案实现:
一种光学式运动捕捉***,所述***包括:运动捕捉设备,包括多个光学标识点和多个运动捕捉相机,每个运动捕捉相机通过每个光学标识点获取目标运动视频信息;其中,每一个标识点设置于不同的目标部位上,且标识点为主动信号发射装置;所述主动信号发射装置包括:LED灯珠、电源模块、匀光罩和基底;所述电源模块为LED灯珠供电,所述匀光罩扣在所述LED灯珠上,所述基底用于将所述LED灯珠安装于目标部位上;三维重建单元,获取目标运动视频信息以及运动捕捉相机标定信息,根据所述运动捕捉相机标定信息对所述目标运动视频信息进行三维重建处理,得到所述标识点的空间坐标;其中所述运动捕捉相机标定信息包括:镜头焦距、成像中心、倾斜因子以及畸变参数。
更好地,所述电源模块为一个或多个LED灯珠进行供电。
本发明还提供一种光学式运动捕捉方法,所述方法包括如下步骤:
获取运动捕捉相机标定信息,包括:镜头焦距、成像中心、倾斜因子以及畸变参数;
获取目标运动视频信息,包括:多个运动捕捉相机获取的光学标识点标记的目标部位运动状况;
根据所述运动捕捉相机标定信息对所述目标运动视频信息进行三维重建处理,得到所述标识点的空间坐标。
进一步,当运动捕捉相机捕捉到同一个标识点时,进行立体视觉三角测量处理,得到该标识点的空间坐标。
进一步,当运动捕捉相机捕捉到多个标识点时,采用对极约束原理,得到不同图像中的同名标识点。
本发明还提供一种存储介质,所述存储介质包括存储的程序,其中,所述程序执行上述的光学式运动捕捉方法。
本发明还提供一种处理器,其特征在于,所述处理器用于运行程序,其中,所述程序运行时执行上述的光学式运动捕捉方法。
本发明的光学式运动捕捉***,采用主动发光装置代替被动反光球的主动式光学捕捉标识点,使传统光学捕捉***可在户外环境也能准确感知到标记点,并且由于红外标识点的亮度可调可增加传统光学捕捉***的感知距离。有效提高动作不***的识别精度、准确度和使用范围。
下面结合附图和具体实施例对本发明的技术方案进行详细地说明。
附图说明
图1为本发明光学式运动捕捉方法步骤流程图;
图2为本发明光学式运动捕捉***结构框图;
图3为本发明主动信号发射装置的结构示意图。
具体实施方式
图1为本发明光学式运动捕捉方法步骤流程图。如图1所示,本发明提供一种光学式运动捕捉方法,其特征在于,所述方法包括如下步骤:
获取运动捕捉相机标定信息,包括:镜头焦距、成像中心、倾斜因子以及畸变参数;
获取目标运动视频信息,包括:多个运动捕捉相机获取的光学标识点标记的目标部位运动状况;
根据所述运动捕捉相机标定信息对所述目标运动视频信息进行三维重建处理,得到所述标识点的空间坐标。
图2为本发明光学式运动捕捉***结构框图,图3为本发明主动信号发射装置的结构示意图。如图2并参考图3所示,本发明提供一种光学式运动捕捉***,所述***包括:
运动捕捉设备,包括多个光学标识点1和多个运动捕捉相机2,每个运动捕捉相机通过每个光学标识点获取目标运动视频信息;
其中,每一个标识点设置于不同的目标部位上,且标识点为主动信号发射装置;如图3所示,所述主动信号发射装置包括:LED灯珠12、电源模块13、匀光罩11以及基底14。其中,所述电源模块13为一个或多个LED灯珠11进行供电。所述基底14用于将LED灯珠11布置/安装于目标部位表面,如魔术贴。
三维重建单元3,获取目标运动视频信息以及运动捕捉相机标定信息,根据所述运动捕捉相机标定信息对所述目标运动视频信息进行三维重建处理,得到所述标识点的空间坐标;
其中所述运动捕捉相机标定信息包括:镜头焦距、成像中心、倾斜因子以及畸变参数。
需要说明的是,所述LED灯珠为一种大功率LED灯珠,如,功率3w。功率越大,标记点亮度越高,在光环境中的可分离度越高,在满足标记点在相机中成像达到一定亮度阈值的前提下,可以通过减小光圈或降低快门等方法降低背景的成像亮度,从而增强光学标记在图像中的辨识度。
电源模块,可适配一定范围内的输入电压,如5~32v,可在一定范围内调节输出电压(如0.8~30v)、电流(如0~5A)。电源模块是一种小/微型便携式电源,可以是纽扣电池,用于给单体LED灯珠供电,也可以是一种大容量移动电源,用于给多个LED灯珠同时供电。
具体工作原理:
设置于目标上的主动信号发射装置,发射出可见光,多个运动捕捉相机对该可见光进行捕捉,以获取目标运动视频信息,并传送到三维重建单元。所述三维重建单元根据运动捕捉相机标定信息(包括:镜头焦距、成像中心、倾斜因子以及畸变参数),对目标运动视频进行处理,当至少有两个运动捕捉相机从不同视角观测到同一个标识点时,标识点在图像中呈现为高亮的圆形斑点,提取圆斑中心,利用立体视觉三角测量原理即可求取该标识点中心的空间坐标;当图像中存在多个标识点时,根据对极约束原理,例如:图像A中的标识点a在B图中的同名点必然在其极线上,距离极线最近且满足给定距离阈值的点即为a在B图中的同名点,从而获得不同图像中的同名标识点对。
得到目标物体上各标识点的空间坐标后,即可输出至多种动画制作软件(如Motionbuilder等)绑定动画角色模型实现动作驱动。
本发明还提供一种存储介质,所述存储介质包括存储的程序,其中,所述程序执行光学式运动捕捉方法。
本发明还提供一种处理器,所述处理器用于运行程序,其中,所述程序运行时执行光学式运动捕捉方法。
需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机***中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
Claims (7)
1.一种光学式运动捕捉***,其特征在于,所述***包括:
运动捕捉设备,包括多个光学标识点和多个运动捕捉相机,每个运动捕捉相机通过每个光学标识点获取目标运动视频信息;
其中,每一个标识点设置于不同的目标部位上,且标识点为主动信号发射装置;所述主动信号发射装置包括:LED灯珠、电源模块、匀光罩和基底;所述电源模块为LED灯珠供电,所述匀光罩扣在所述LED灯珠上,所述基底用于将所述LED灯珠安装于目标部位上;
三维重建单元,获取目标运动视频信息以及运动捕捉相机标定信息,根据所述运动捕捉相机标定信息对所述目标运动视频信息进行三维重建处理,得到运动捕捉所述标识点的空间坐标;
其中所述运动捕捉相机标定信息包括:镜头焦距、成像中心、倾斜因子以及畸变参数。
2.如权利要求1所述的光学式运动捕捉***,其特征在于,所述电源模块为一个或多个LED灯珠进行供电。
3.一种光学式运动捕捉方法,其特征在于,所述方法包括如下步骤:
获取运动捕捉相机标定信息,包括:镜头焦距、成像中心、倾斜因子以及畸变参数;
获取目标运动视频信息,包括:多个运动捕捉相机获取的光学标识点标记的目标部位运动状况;
根据所述运动捕捉相机标定信息对所述目标运动视频信息进行三维重建处理,得到运动捕捉所述标识点的空间坐标。
4.如权利要求3所述的光学式运动捕捉方法,其特征在于,当运动捕捉相机捕捉到同一个标识点时,进行立体视觉三角测量处理,得到该标识点的空间坐标。
5.如权利要求3所述的光学式运动捕捉方法,其特征在于,当运动捕捉相机捕捉到多个标识点时,采用对极约束原理,得到不同图像中的同名标识点。
6.一种存储介质,其特征在于,所述存储介质包括存储的程序,其中,所述程序执行权利要求3-5中任意一项所述的光学式运动捕捉方法。
7.一种处理器,其特征在于,所述处理器用于运行程序,其中,所述程序运行时执行权利要求3-5中任意一项所述的光学式运动捕捉方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010846612.8A CN111862170A (zh) | 2020-08-21 | 2020-08-21 | 光学式运动捕捉***及方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010846612.8A CN111862170A (zh) | 2020-08-21 | 2020-08-21 | 光学式运动捕捉***及方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111862170A true CN111862170A (zh) | 2020-10-30 |
Family
ID=72968903
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010846612.8A Pending CN111862170A (zh) | 2020-08-21 | 2020-08-21 | 光学式运动捕捉***及方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111862170A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113487726A (zh) * | 2021-07-12 | 2021-10-08 | 北京未来天远科技开发有限公司 | 动作捕捉***和方法 |
CN117058766A (zh) * | 2023-09-11 | 2023-11-14 | 轻威科技(绍兴)有限公司 | 一种基于主动光频闪的动作捕捉***和方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20120051875A (ko) * | 2010-11-15 | 2012-05-23 | 연세대학교 산학협력단 | 모션 캡처를 이용한 구조물 모니터링 장치 및 방법 |
WO2016202143A1 (en) * | 2015-06-17 | 2016-12-22 | Zhejiang Dahua Technology Co., Ltd | Methods and systems for video surveillance |
CN107390448A (zh) * | 2017-09-06 | 2017-11-24 | 成都豪宇韬鹰科技有限公司 | 一种主动式光学动作捕捉*** |
CN109102527A (zh) * | 2018-08-01 | 2018-12-28 | 甘肃未来云数据科技有限公司 | 基于标识点的视频动作的获取方法和装置 |
CN212256370U (zh) * | 2020-08-21 | 2020-12-29 | 北京未来天远科技开发有限公司 | 光学式运动捕捉*** |
-
2020
- 2020-08-21 CN CN202010846612.8A patent/CN111862170A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20120051875A (ko) * | 2010-11-15 | 2012-05-23 | 연세대학교 산학협력단 | 모션 캡처를 이용한 구조물 모니터링 장치 및 방법 |
WO2016202143A1 (en) * | 2015-06-17 | 2016-12-22 | Zhejiang Dahua Technology Co., Ltd | Methods and systems for video surveillance |
CN107390448A (zh) * | 2017-09-06 | 2017-11-24 | 成都豪宇韬鹰科技有限公司 | 一种主动式光学动作捕捉*** |
CN109102527A (zh) * | 2018-08-01 | 2018-12-28 | 甘肃未来云数据科技有限公司 | 基于标识点的视频动作的获取方法和装置 |
CN212256370U (zh) * | 2020-08-21 | 2020-12-29 | 北京未来天远科技开发有限公司 | 光学式运动捕捉*** |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113487726A (zh) * | 2021-07-12 | 2021-10-08 | 北京未来天远科技开发有限公司 | 动作捕捉***和方法 |
CN113487726B (zh) * | 2021-07-12 | 2024-05-14 | 未来元宇数字科技(北京)有限公司 | 动作捕捉***和方法 |
CN117058766A (zh) * | 2023-09-11 | 2023-11-14 | 轻威科技(绍兴)有限公司 | 一种基于主动光频闪的动作捕捉***和方法 |
CN117058766B (zh) * | 2023-09-11 | 2023-12-19 | 轻威科技(绍兴)有限公司 | 一种基于主动光频闪的动作捕捉***和方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106643699B (zh) | 一种虚拟现实***中的空间定位装置和定位方法 | |
CN106681510B (zh) | 位姿识别装置、虚拟现实显示装置以及虚拟现实*** | |
US10684674B2 (en) | Tracking portions of a user's face uncovered by a head mounted display worn by the user | |
CN108022264B (zh) | 相机位姿确定方法及设备 | |
CN114761909A (zh) | 针对头戴式显示器的内容稳定 | |
CN110782492B (zh) | 位姿跟踪方法及装置 | |
CN112833816A (zh) | 一种标志点定位与智能反向定位混合的定位方法和*** | |
CN212256370U (zh) | 光学式运动捕捉*** | |
CN108257177B (zh) | 基于空间标识的定位***与方法 | |
CN105004324A (zh) | 一种具有三角测距功能的单目视觉传感器 | |
CN111862170A (zh) | 光学式运动捕捉***及方法 | |
WO2020156299A1 (zh) | 基于三维光学成像传感器的三维超声成像方法和*** | |
CN210225419U (zh) | 光通信装置 | |
CN110895676B (zh) | 动态对象跟踪 | |
US20220362659A1 (en) | Handle controller | |
CN105496556A (zh) | 一种用于手术导航的高精度光学定位*** | |
CN109032329B (zh) | 面向多人增强现实交互的空间一致性保持方法 | |
CN111780715A (zh) | 一种视觉测距方法 | |
CN113191388A (zh) | 用于目标检测模型训练的图像采集***及样本生成方法 | |
CN107193380A (zh) | 一种低成本高精度虚拟现实定位及交互*** | |
CN211178436U (zh) | 用于磁力计空间定位的*** | |
CN114224489B (zh) | 用于手术机器人的轨迹跟踪***及利用该***的跟踪方法 | |
US11831906B2 (en) | Automated film-making using image-based object tracking | |
JPH10198506A (ja) | 座標検出システム | |
CN114004880B (zh) | 双目相机的点云和强反光目标实时定位方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information |
Address after: 1217, 12th Floor, Building 3, No.1 Courtyard, Wuliqiao 2nd Street, Chaoyang District, Beijing, 100102 Applicant after: Future Yuanyu Digital Technology (Beijing) Co.,Ltd. Address before: 100102 building 3, yard 6, Futong East Street, Chaoyang District, Beijing Applicant before: Beijing future Tianyuan Technology Development Co.,Ltd. |
|
CB02 | Change of applicant information |