[发明专利]一种游戏场景描述方法、装置、设备及其存储介质

权利要求书

1.一种游戏场景描述方法，其特征在于，包括：

将待识别游戏图像输入第一神经网络模型，得到与所述待识别游戏图像对应的描述性词语标签，所述描述性词语标签包括下述至少一项：游戏角色名、游戏成就信息、游戏进程描述信息以及游戏状态信息；

建立待识别游戏图像的描述性词语标签，以及待识别游戏图像的游戏直播间之间的对应关系；

根据与至少两个游戏直播间分别对应的描述性词语标签对所述至少两个游戏直播间进行聚类处理；

根据聚类处理结果，在设定直播平台中显示所述至少两个游戏直播间；

将所述描述性词语标签输入第二神经网络模型，得到与所述待识别游戏图像匹配的游戏场景描述信息，其中，第二神经网络模型根据以下两种方式进行构建：第一，对图像特征进行分析，识别图片中存在的物体以及物体之间所具有的动作关系，采用固定的语言模板结合所述动作关系生成描述待识别游戏图像的句子；第二，构造递归神经网络模型得到对待识别游戏图像的游戏场景的描述；

其中，所述第一神经网络模型包括：特征提取网络子模型以及目标探测网络子模型；所述特征提取网络子模型用于对输入的待识别游戏图像进行图像特征提取，并将提取出的图像特征输入至所述目标探测网络子模型，所述目标探测网络子模型用于对输入的图像特征进行检测，得到与图像特征对应的一个或多个描述性词语标签。

2.根据权利要求1所述的方法，其特征在于，在将待识别游戏图像输入第一神经网络模型，得到与所述待识别游戏图像对应的描述性词语标签之前，还包括：

获取训练样本集，所述训练样本集包括：多张游戏图片，以及与游戏图片对应的游戏场景描述信息以及描述性词语标签；

使用标准神经网络模型，对所述训练样本集中的游戏图片的神经网络特征进行提取，得到游戏图片的图像特征；

将游戏图片的图像特征与游戏图片的描述性词语标签进行交叉匹配，得到与游戏图片的图像特征对应的描述性词语标签；

根据所述游戏图片的图像特征，以及与游戏图片的图像特征对应的描述性词语标签，训练得到所述第一神经网络模型；

根据与游戏图片对应的游戏场景描述信息以及描述性词语标签，训练得到所述第二神经网络模型。

3.根据权利要求2所述的方法，其特征在于：所述游戏图片的描述性词语标签，通过对所述游戏图片的游戏场景描述信息进行分词得到。

4.根据权利要求1-3任一项所述的方法，其特征在于，在将待识别游戏图像输入第一神经网络模型，得到与所述待识别游戏图像对应的描述性词语标签之前，还包括：

从与至少一个游戏直播间对应的直播视频流中获取视频帧，并将经过预处理后的所述视频帧作为所述待识别游戏图像；

其中，所述预处理操作包括下述至少一项：缩放、裁剪以及旋转。

5.根据权利要求4所述的方法，其特征在于，将所述描述性词语标签输入第二神经网络模型，得到与所述待识别游戏图像匹配的游戏场景描述信息之后，包括：

对于选定游戏直播间，对应显示与所述游戏直播间对应的所述游戏场景描述信息。