[发明专利]一种虚拟真人试衣方法

摘要

本发明公开了一种虚拟真人试衣方法，其特征在于：将不同尺寸、不同款式的服装由对应体型和风格的模特穿着，并由模特完成规定的动作，录下试穿过程的视频；试衣时，找出与试衣者体型和风格相近的模特以及该模特的试衣视频，实时显示试衣者的头部，同时识别试衣者的肢体动作，并将试衣者身体部分替换为具有相似动作的模特身体显示，形成试衣者的试衣效果视频；本发明能够自动地识别试衣者体型、肢体动作，并将试衣者的身体部分替换为模特的身体部分，同时，本发明未对人物或衣服进行三维建模，保留了衣服的纹理以及随肢体动作引起的折叠、舒展等细节，因此最终展现出的试衣效果更加真实。

主权项

1.一种虚拟真人试衣方法，其特征在于：首先，将不同尺寸、不同款式的服装由对应体型和风格的模特穿着，并由模特完成规定的动作，且录下试穿过程的视频；试衣时，找出与试衣者体型和风格相近的模特以及该模特的试衣视频，实时显示试衣者的头部，同时识别试衣者的肢体动作，并将试衣者身体部分替换为具有相似动作的模特身体显示，形成试衣者的试衣效果视频；具体步骤为：步骤1.准备阶段，商家将所有不同型号、款式的服装让不同体型、风格的模特试穿，为方便后期的视频处理，试衣间内的背景被调整为与衣服不同且单一的颜色，然后让模特做若干种动作，整个试衣过程用视频录制并保存；步骤2.使用kinect设备捕获模特人体的骨骼姿态，并计算每一段运动视频中的姿态特征，具体方法是：对每一帧图像，计算左右手腕、肘部及肩膀分别和肩膀中心节点所成夹角，左右脚踝、膝盖及臀部分别和臀部中心所成夹角；然后获取参与夹角运算的14个关节点的深度值，将每个深度值减去其中的最小值，并线性拉伸到[0，360]的范围内，最后将12个夹角数据与归一化后的深度数据组成一个26维的向量，该向量即为人体姿态特征；每一帧的特征数据组合起来形成一个矩阵，作为该视频的动作特征，与对应的原视频关联起来并保存；步骤3.对模特视频的每一帧图像进行人脸检测，对检测结果的矩形进行扩大，记扩大后的矩形为Rf，将矩形Rf中的局部图像由RGB空间转换到YCbCr空间；人肤色的CbCr数值在一个固定的范围内，因此，通过像素的CbCr两个分量可以判定该像素是否属于人的肤色；人脸下方的肤色区域认为是颈部区域；而人脸上方的非背景、非肤色区域认为是头发区域；步骤4.对整幅图像由RGB空间转换到HSV空间；依次判断每个像素的H分量与试衣间环境颜色Hr的绝对值的差值是否小于阈值Tb，若小于Tb，则认为该像素属于背景，否则属于人形区域；通过遍历整幅图像，将所有像素分为背景或非背景两类，将人形区域中去除人脸、头发区域后的连通区域定义为身体区域；用另一段视频保存模特身体部分的图像序列；步骤5.用同样的方法检测试衣者视频中的人脸，分割出头部及身体区域，其中身体部分赋值为背景颜色，实时显示头部，然后计算其动作特征；逐个取出模特动作特征数据并与试衣者的动作特征作相似性运算，使用欧氏距离来衡量特征之间的相似性，将最小距离的特征对应的一段模特身体视频作为肢体动作识别结果；步骤6.若模特视频帧数大于试衣者视频帧数，则模特视频帧序列进行线性降采样；若模特视频帧数小于试衣者视频帧数，则将模特视频序列进行等间隔的插值运算，复制某些帧图像到原视频序列；通过对视频序列的线性拉伸运算，使得模特和试衣者这两段视频具有相同的帧数；步骤7.对试衣者视频中的每一帧图像，将相同帧序号的模特身体区域平移至试衣者的身体区域，并满足模特和试衣者两者的颈部与身体公共边界线的重心重合，将模特身体在该重心的附近进行局部微调，使得试衣者颈部与公共边界线所形成的空洞区域面积最小，使用空洞的外轮廓处的像素对其进行填充。