[发明专利]一种用于多视图数据的图像去噪方法及其相关装置

说明书

本申请公开了一种用于多视图数据的图像去噪方法及其相关装置，通过无噪声多视图数据训练第一多模态玻尔兹曼机模型，使得第一多模态玻尔兹曼机模型学习无噪声多视图数据中各视图数据的统一特征表示和私有特征表示；根据有噪声多视图数据中的噪声视图数据和训练好的第一多模态玻尔兹曼机模型的模型参数对第二多模态玻尔兹曼机模型的模型参数进行初始化；通过初始化后的第二多模态玻尔兹曼机模型学习有噪声多视图数据中的噪声结构，得到训练好的第二多模态玻尔兹曼机模型，通过训练好的第二多模态玻尔兹曼机模型进行图像去噪，改善了现有技术仅针对某一视图去噪，无法建模多视图数据间的关联性，使得多视图数据去噪效果不理想的技术问题。

技术领域

本申请涉及图像处理技术领域，尤其涉及一种用于多视图数据的图像去噪方法及其相关装置。

背景技术

图像去噪是计算机视觉领域中的常见问题，是数据表示学习、目标检测和目标识别等高级应用任务的基础工作。同样，人工智能系统要求算法安全、可靠且足够稳健，但是在系统的设计、开发、执行、部署和使用阶段经常会遇到非人为设计的因素(如自然噪声、干扰等)影响系统稳定性，因此需要进行数据去噪以去除非人为设计的因素的影响。

在多视图数据中，若某一视图受到自然噪声和干扰，会影响后续多视图数据处理过程。目前针对常用的多视图表示学习模型难以处理噪声视图中隐含噪声结构学习与数据去噪，同时常用的数据去噪模型可以针对某一视图去噪但无法建模多视图数据间的关联性，使得多视图数据去噪效果不理想，影响后续多视图表示学习等任务。

发明内容

本申请提供了一种用于多视图数据的图像去噪方法及其相关装置，用于改善现有技术仅针对某一视图去噪，无法建模多视图数据间的关联性，使得多视图数据去噪效果不理想的技术问题。

有鉴于此，本申请第一方面提供了一种用于多视图数据的图像去噪方法，包括：

获取多视图训练数据，所述多视图训练数据包括无噪声多视图数据和对所述无噪声多视图数据加噪声后得到的有噪声多视图数据；

通过所述无噪声多视图数据训练第一多模态玻尔兹曼机模型，使得所述第一多模态玻尔兹曼机模型学习所述无噪声多视图数据中各视图数据的统一特征表示和私有特征表示，得到训练好的第一多模态玻尔兹曼机模型；

根据所述有噪声多视图数据中的噪声视图数据和所述训练好的第一多模态玻尔兹曼机模型的模型参数对第二多模态玻尔兹曼机模型的模型参数进行初始化；

通过初始化后的第二多模态玻尔兹曼机模型学习所述有噪声多视图数据中的噪声结构，得到训练好的第二多模态玻尔兹曼机模型；

将待去噪多视图数据输入到所述训练好的第二多模态玻尔兹曼机模型进行图像去噪，得到去噪后的多视图数据。

可选的，所述第一多模态玻尔兹曼机模型的能量函数和条件概率为：