[发明专利]一种健身交互方法和系统

说明书

本申请涉及一种健身交互方法和系统，其中，通过获取教练的健身视频和用户的动作视频流，对该健身视频和动作视频流中的每一帧图片进行处理，获取人体骨架关键点位置生成人体骨架信息，获取该健身视频和动作视频流图片帧上健身器材所在平面，根据该平面和人体骨架信息创建人体三维坐标，根据人体三维坐标与对应视频的图片帧数生成空间时序信息，将用户空间时序信息中第一图片帧数的用户图像和该教练空间时序信息中第一图片帧数的教练图像显示到同一个空间中，解决了分屏展示教练的健身视频和用户的动作视频流，该健身视频和动作视频流不能进行视频融合，容易分散用户注意力的问题，实现了健身视频和动作视频流的融合，提高了用户注意力。

技术领域

本申请涉及计算机领域，特别是涉及一种健身交互方法和系统。

背景技术

智能电视的普及，带动健身类节目的流行，通过加入摄像头和AI算法，健身逐渐转变为AI健身。例如，教练的健身视频和用户的动作视频流分屏展示，提升了用户的参与度和实时反馈，但分屏展示容易分散用户注意力，且教练的健身视频和用户的动作视频流不能进行视频融合，不能很好的观察自己健身的动作与教练健身的动作的区别，在健身的动作出现错误时，很难对比知道自己健身动作有没有纠正到位。

目前针对相关技术中分屏展示教练的健身视频和用户的动作视频流，该健身视频和动作视频流不能进行视频融合，容易分散用户注意力的问题，尚未提出有效的解决方案。

发明内容

本申请实施例提供了一种健身交互方法和系统，以至少解决相关技术中分屏展示教练的健身视频和用户的动作视频流，该健身视频和动作视频流不能进行视频融合，容易分散用户注意力的问题。

第一方面，本申请实施例提供了一种健身交互方法，所述方法包括：

获取用户的动作视频流，对所述动作视频流中的每一帧图片进行处理，获取用户人体骨架关键节点位置生成用户人体骨架信息，

获取教练的健身视频，对所述健身视频中的每一帧图片进行处理，获取教练人体骨架关键节点位置生成教练人体骨架信息；

获取所述动作视频流中图片帧上健身器材所在平面，根据所述平面和所述用户人体骨架信息创建用户人体三维坐标，根据所述用户人体三维坐标与所述动作视频流的图片帧数生成用户空间时序信息，

获取所述健身视频中图片帧上健身器材所在平面，根据所述平面和所述教练人体骨架信息创建教练人体三维坐标，根据所述教练人体三维坐标与所述健身视频的图片帧数生成教练空间时序信息；

将所述用户空间时序信息中第一图片帧数的用户图像和所述教练空间时序信息中第一图片帧数的教练图像显示到同一个空间中。

在其中一些实施例中，所述方法还包括：根据所述用户人体三维坐标生成用户人体3D模型，并通过所述用户空间时序信息中第一图片帧数的所述用户人体三维坐标，驱动所述用户人体3D模型动作。

在其中一些实施例中，通过对所述用户人体三维坐标进行坐标变换，将所述用户人体骨架进行放大或缩小，生成与所述教练人体骨架同等比例的用户人体骨架。

在其中一些实施例中，对所述动作视频流中的每一帧图片进行处理还包括：对所述动作视频流中的每一帧图片进行背景分割处理，区分出人体图像和非人体图像，所述人体图像为所述用户图像；

对所述健身视频中的每一帧图片进行处理还包括：对所述健身视频中的每一帧图片进行背景分割处理，区分出人体图像和非人体图像，所述人体图像为所述教练图像。

在其中一些实施例中，所述方法还包括：对所述用户空间时序信息中第一图片帧数的所述用户人体三维坐标和所述教练空间时序信息中第一图片帧数的所述教练人体三维坐标进行比对，通过所述比对结果的差异进行评分。

第二方面，本申请实施例提供了一种健身交互系统，所述系统包括：视频预处理模块和视频融合模块，