opencv matlab vc++ 图像处理,跟踪算法
6期邓 宇等:基于视频的三维人体运动跟踪系统的设计与实现
771
构 和表示外观特性的 身体外观 2部分 骨架模型表示关节之间的链接关系,反映了解剖学上的限制条件 本文采用树形结构表示人体骨架,每个关节是树中的一个节点 关节参数包括一个平移向量T(1!3)和一个旋转向量N(1!3),它们确定了该关节相对于父关节的位置 每个关节的自由度是关节中可以独立改变的参数个数 图2所示为骨架模型中各关节自由度分配示意图,括号中的数字为每个关节的自由度 整个骨架自由度为24个,t时刻状态向量 t R, t唯一地确定了该时刻人体姿态
![基于视频的三维人体运动跟踪系统的设计与实现[1]](https://img.doc.guandang.net/pic/dff03260f306755ea73f7d84/3-401-png_6_1_0_14_315_346_149_774.705_1146.449-825-0-0-825.jpg)
24
D的世界坐标分别为(0,0,0),(0,|AB|,0),(|AC|%cos ,|AC|sin ,0),(|AD|cos ,|AD|sin ,0)
图4 xy平面上各定标圆盘位置示意图
定标过程中,首先使用内参定标算法
[9]
获得摄
像机内参数;然后从对应视频中选取一帧包含所有 定标圆盘 的图像作为外参定标图像 对该图像进行畸变校正后,由用户手工选定图像上定标圆盘十字中心的位置,得到ABCD的世界坐标{Xi}和对应
图2 人体骨架模型
的图像坐标{xi} 构造目标函数
F(r,t)=
i=1
在定义骨架模型的基础上,同时定义附着在骨架模型上的外观模型 外观模型描述人体的外形,投影后用于和图像底层特征进行比较 本文中采用的外观模型用圆台表示身体的躯干和四肢,并增加椭球形状表示头、手和脚,如图3所示
![基于视频的三维人体运动跟踪系统的设计与实现[1]](https://img.doc.guandang.net/pic/dff03260f306755ea73f7d84/3-468-png_6_1_0_14_613_346_170_774.705_1146.449-762-0-406-762.jpg)
[5]
& ARt(rx,ry,rz,tx,ty,tz)Xi-
n
xi 2
(1)
其中,A和R为内参数矩阵和外参数矩阵,r=[rx,ry,rz]T和t=[tx,ty,tz]T分别为外参数矩阵的旋转向量和平移向量 本文使用Gauss Newton优化算法求解minF(r,t),得到外参数r和t r,t2 3 运动分割和特征提取
视频图像只是一组像素点的集合,无法直接与三维模型进行匹配,因此需要提取合适的特征来建立图像和人体模型之间的对应关系 提取特征前首先需要在视频序列中分割出运动物体,本文使用图切割支持、融合图像边界和梯度特征的分割算法[10],并提取外轮廓、边界和灰度作为匹配特征;将梯度与颜色特征结合起来,可增强分割结果的可靠性 此外,图切割算法考虑像素之间的联系,在不影响整体分割结果前提下修正局部判别错误的像素点;分割结果清晰噪声少,稳定性强
通过运动分割算法得到准确的运动物体区域后,在运动区域内提取用于匹配的图像底层特征:1)灰度特征 图像的灰度值直接作为匹配特征 为了描述三维模型的灰度特征,需指定一个与模型肢体对应的灰度模板 2)边界特征 用Canny边缘检测算子检测图像边界,三维模型的边界特征通过投影各段肢体的边界得到 3)外轮廓特征 不受纹理或颜色的干扰,具有一定鲁棒性 图5所示为提取图3 人体外观模型
2 2 摄像机定标
由于摄像机之间距离较远,无法使用标定板计算外参数 本文提出一种实用的摄像机标定算法,在保证标定结果精度的同时具有便于携带和快速标定的特点 拍摄前,先在地面上摆设4个 定标圆盘 来确定世界坐标系位置;各圆盘摆设于同一平面,且尽量充满摄像机的拍摄画面 如图4所示,4个圆盘摆设为顺时针的四边形ABCD,记录各线段长度并建立世界坐标系 x轴为AB,y轴为x轴顺时针旋转90#(俯视地面方向看)且垂直AB,z轴垂直xy平面指向地面内 由AC,AD和CD,通过余弦定理可得 CAD,同理可得 BAC;则 =
![基于视频的三维人体运动跟踪系统的设计与实现[1]](https://img.doc.guandang.net/pic/dff03260f306755ea73f7d84/3-428-png_6_1_0_391_137_346_157_774.705_1146.449-810-0-879-810.jpg)
,
计算机辅助设计与图形学学报 J OU RNAL OF COMPU ...Jan1 , 2006 基于视频的三维人体运动跟踪刘国翌 1...应用1 市场上比较成熟的人体运动捕 捉系统有基于...
首先给出了系统实现框架 ,然后采用比例正交投影模型及人体骨架模型来恢复关节的...运动跟踪的三维人体动画 玥 43 法 [ 1~4 ] , ② 基于多目视频的方法 [...
包括视频运动人体提取与跟踪 、 三维人体运动模拟与...工具1 为了达到此 功能目标 ,系统需要实现如下关键... 设计 、 分析技术 动作 ,因而具有更强的指导意义...
基于粒子滤波算法的三维关节型人体运动跟踪[1] opencv matlab vc++ 图像处理,... 关键的环节就是观测模型的设计. 观测模型的好坏直接决定了系统的优劣 .其设计...
基于视频的人体上半身运动跟踪系统刘国翌“2李华1 ...2系统设计本文的目标是通过一个非定标的普通USB摄像...与跟踪、 关节位置推断、..维关节角度恢复和三维...
基于视频的三维人体运动... 7页 1下载券 基于单目视频运动跟踪的... 6页...、 实验根据本文提出的算法 ,使用 C + +开发一个人体运动跟踪 系统 ,可运行...
实时三维人体卡通运动的设计与实现_信息与通信_工程... 人体运动捕捉仪的设计与... 暂无评价 3页 1... 基于单目视频运动跟踪的... 6页 免费喜欢此文档...
针对这一现象,提出了一种基于形变外观模板匹 配进行单目视频的三维人体运动跟踪算法。算法的创新在于:1)利 用正向运动学及逆向运动学得N--维图像上某一候选关节点...
基于单目视频运动跟踪的... 6页 免费 基于视频的三维人体运动... 7页 1...体育训练系统, 旨在实现体育训练方法的两个进步和转 变: 从传统的主要基于人眼...
热门文档