[发明专利]场景图像生成方法、装置、电子设备及存储介质

说明书

本公开关于一种场景图像生成方法、装置、电子设备及存储介质。所述方法包括：获取语言指令、待布局的场景素材，以及与场景素材对应的第一布局信息；根据第一布局信息确定场景素材之间的布局关系，生成第一场景图像；确定语言指令与第一场景图像之间的第一相关度，根据第一相关度对第一布局信息进行调整，生成目标布局信息；根据目标布局信息确定场景素材之间的布局关系，生成目标场景图像。根据本公开的方案，可以实现在自然语言描述的基础上自动化地、准确地对布局场景素材，进而生成准确性较高的场景图像。

技术领域

本公开涉及计算机技术领域，尤其涉及一种场景图像生成方法、装置、电子设备、存储介质、计算机程序产品。

背景技术

在图像的内容生产领域，根据语言指令对场景中的素材(例如人物、物体等)进行合理化的摆放具有广泛应用。相关技术中，通常需要人工理解语言指令并制作场景图像。例如，导演需要将抽象的剧本描述转化为分镜，以便指导场景的布局和人物的摆放；室内设计师需要将用户描述可视化为场景摆放的图像。

但是，目前缺少一种有效的方式使机器能够理解语言指令，并将语言指令转化为素材的空间位置，因此，亟需一种能够使机器实现根据语言指令进行场景布局的方法。

发明内容

本公开提供一种场景图像生成方法、装置、电子设备、存储介质、计算机程序产品，以提供一种能够使机器实现根据语言指令进行场景布局的方法。本公开的技术方案如下：

根据本公开实施例的第一方面，提供一种场景图像生成方法，包括：

获取语言指令、待布局的场景素材，以及与所述场景素材对应的第一布局信息；

根据所述第一布局信息确定所述场景素材之间的布局关系，生成第一场景图像；

确定所述语言指令与所述第一场景图像之间的第一相关度，根据所述第一相关度对所述第一布局信息进行调整，生成目标布局信息；

根据所述目标布局信息确定所述场景素材之间的布局关系，生成目标场景图像。

在其中一个实施例中，所述根据所述第一布局信息确定所述场景素材之间的布局关系，生成第一场景图像，确定所述语言指令与所述第一场景图像之间的第一相关度，根据所述第一相关度对所述第一布局信息进行调整，生成目标布局信息，包括：

对所述第一布局信息进行迭代调整，针对当前次的迭代调整过程执行以下处理：

根据第一布局信息确定所述场景素材之间的第一布局关系，生成第一场景图像，确定所述语言指令与所述第一场景图像之间的第一相关度，根据所述第一相关度以及所述第一布局信息，生成下一次布局信息；

在当前迭代调整满足停止条件时，将所述下一次布局信息作为所述目标布局信息；

在当前迭代调整不满足所述停止条件时，将所述下一次布局信息作为下一次迭代使用的第一布局信息。

在其中一个实施例中，所述第一布局信息中包括多个布局参数；

所述根据所述第一布局信息确定所述场景素材之间的布局关系，生成第一场景图像，确定所述语言指令与所述第一场景图像之间的第一相关度，根据所述第一相关度以及所述第一布局信息，生成下一次布局信息，包括：

在当前次迭代调整的执行过程中，对当前的所述第一布局信息进行多次循环调整，针对当前次的循环调整过程执行以下处理：

根据第二布局信息确定所述场景素材之间的第二布局关系，生成第二场景图像，确定所述语言指令与所述第二场景图像之间的第二相关度，所述第二布局信息为通过上一次循环调整得到的布局信息；

对所述第二布局信息中的一个或者多个所述布局参数进行调整，生成与所述第二布局信息对应的参考布局信息；