[发明专利]一种多智能体系统协同策略的反演辨识方法

说明书

本发明公开了一种多智能体系统协同策略的反演辨识方法，通过采用线形二次型最优控制方法，基于智能体的动力学特性构建了多智能体系统协同策略反演辨识模型，能够基于有限时域内的离散状态观测值计算得到协同策略，同时，本发明建立的反演辨识模型能够同时估计得到智能体的真实运动状态，因此实现了在噪声干扰下的精确协同策略反演。

技术领域

本发明属于系统辨识和参数技术领域，具体涉及一种多智能体系统协同策略的反演辨识方法。

背景技术

反演问题是指由结果及某些一般原理(或模型)出发去确定表征问题特征的参数(或模型参数)。在工程应用中，反演问题广泛出现在地球物理、生物、医疗及建筑等领域。反演是指能够模仿人类智能的计算机程序系统的人工智能系统，它具有学习和推理的功能。例如专家系统、人工神经网络系统等。在反问题求解过程中应用人工智能的方法技术，引导局部或全局最优，这种反演方法称为人工智能反演，现阶段又分为线性反演、迭代反演、最优化反演等。其中，最优化反演建模算法不但具有较强的理论研究意义，而且在军事上有着重要应用价值。例如，对敌方多无人车/机的协同模式进行反演辨识，能够探悉敌方作战策略的缺陷/弱点，从而提高己方的胜算概率。

关于反演建模问题的研究，最早期的工作可以追溯到20世纪20年代在研究线性偏微分方程的Cauchy问题时对反演问题不适定性的陈述和研究。20世纪 40年代苏联开始了反问题的理论研究，在60年代推出了至今仍然广泛沿用的 Tikhonov变分正则化方法，于70年代出版了关于病态反演理论的论著，并将不适定反演问题的正则化放在抽象的泛函空间进行完整描述。关于反演理论和方法研究的另一个方向是迭代正则化方法，也就是通过迭代求解正则优化问题来获得反演问题的近似解。广义逆方法、梯度型方法和Newton型方法是目前求解反演问题的常用方法。上述这些传统反演建模算法多是在对最佳轨迹的完整观察条件下进行的，难以实现在有限数据条件下对最优系统目标函数参数进行准确推断和估计。

最优化反演建模在控制领域也称为最优控制反演或逆强化学习，最早由 RudolfEmil Kalman于1964年提出，并广泛的应用于机器人、经济学、仿生学领域。Brian DOAnderson、Antony Jameson、Takao Fuji等人研究了在连续无限时间域条件下LQR(LinearQuadratic Regulator)反最优控制问题，但他们都是在假设最优反馈增益已知的条件下进行针对目标函数的反演建模。在实际应用中，由于受到电磁干扰、虚假信息攻击、信息屏蔽以及障碍物影响，所观测到的数据通常是有噪声的，只有离散有限时序内观测数据可利用且反馈增益也无法提前获知。M Cody Priess等人于2015年发表《Solutions to theinverse LQR problem with applicationto biological systems analysis》一文中，针对离散无限时域噪声下的观测数据，研究了反馈增益是时变的LQR反最优化控制问题。但在实际应用中，反演建模任务必须在有限时序内完成，这种方法不能实现，并且这个算法是先辨识最优反馈增益矩阵再计算相应目标函数参数矩阵，涉及大量的参数计算，普通计算平台难以实现，难以进行实际运用。

上述最优化反演建模方法要应用于多智能体系统协同策略的辨识还存在两个方面的难点：一方面在于结合多智能体协同系统的特征，恰当地描述问题，建立简明实用的多智能体协同策略最优化反演模型；另一方面在于，对离散有限时间域的情形，上述方法难以在噪声影响下对多智能体系统协同策略进行准确可靠的反演辨识。

发明内容

有鉴于此，本发明提供了一种多智能体系统协同策略的反演辨识方法，实现了在噪声影响下对多智能体系统的协同策略的可靠反演辨识。

本发明提供的一种多智能体系统协同策略的反演辨识方法，采用反演辨识得到的协同策略实现对多智能体系统的控制，其特征在于，包括以下步骤：