[发明专利]一种多端同步操作的方法和装置

说明书

技术领域

本发明涉及通信技术领域，尤其涉及一种多端同步操作的方法和装置。

背景技术

目前在测试软件时，需要覆盖不同的机器类型、不同的分辨率和不同的操作系统(如win7、win8、win10、安卓系统或ios系统)，现有的测试方法每执行一遍测试用例，只能针对一种类型机器、一种分辨率和一种操作系统，不能一次覆盖所有机器和系统。而且，同一款软件包含很多的功能模块，每个功能模块对应的测试用例非常多，完整执行一遍测试用例下来，需要耗费很长的时间，如果需要在不同的机型、分辨率和操作系统下测试，又需要完整的执行一遍测试用例。综上，现有技术针对所有的机型、分辨率和操作系统的测试一轮下来，时间成本太大，工作效率太低。

发明内容

本发明实施例的目的是提供一种多端同步操作的方法和装置，能节省时间成本，提高工作效率。

为实现上述目的，本发明实施例提供了一种多端同步操作的方法，包括：

响应于监测到的作用在当前界面上的操作事件，获取所述操作事件对应的第一操作位置信息和操作方式信息；

基于预设的截图规则及所述第一操作位置信息确定截图区域，并截取所述截图区域所对应的图像；

向远程接口发送包括所述操作方式信息和所述图像的信息的数据包，以使与所述远程接口可耦合通信的至少一个接收端能够根据所述数据包中的图像的信息在本地搜索到对应的控件，并根据所述操作方式信息执行所述控件。

进一步的，所述多端同步操作的方法还包括：

对所述图像进行识别，以获取所述操作事件对应的控件标识信息；

所述向远程接口发送包括所述操作方式信息和所述图像的信息的数据包包括：

向远程接口发送包括所述操作方式信息和包括所述控件标识信息的所述图像的信息的数据包。

进一步的，所述图像的信息包括所述图像；

则与所述远程接口可耦合通信的接收端能够对接收到的所述图像进行识别以获取控件标识信息，并根据所述控件标识信息在本地搜索到与所述控件标识信息对应的控件。

进一步的，所述对所述图像进行识别，以获取所述操作事件对应的控件标识信息具体包括：

对所述图像进行文字识别以获取所述图像中的文字信息，将所述文字信息作为所述控件标识信息；或者，

将所述图像与本地预存的控件图库中的控件图进行匹配识别，以获取与所述图像匹配的控件图的标识信息作为所述控件标识信息。

进一步的，所述数据包还包括第一操作位置信息；

所述向远程接口发送包括所述操作方式信息和所述图像的信息的数据包，以使与所述远程接口可耦合通信的至少一个接收端能够根据所述数据包中的图像的信息在本地搜索到对应的控件，并根据所述数据包中的操作方式信息执行所述控件，具体为：

向远程接口发送包括所述第一操作位置信息、所述操作方式信息和所述图像的信息的数据包，以使与所述远程接口可耦合通信的至少一个接收端能够根据所述第一操作位置信息、所述图像的信息中的控件标识信息及发送端的屏幕分辨率信息唯一确定对应的控件，并根据所述数据包中的操作方式信息执行所述控件；其中，所述远程接口可耦合通信的接收端已预先获取所述发送端的屏幕分辨率信息。

进一步的，所述第一操作位置信息包括第一操作位置的坐标点；

则所述基于预设的截图规则及所述第一操作位置信息确定截图区域具体包括：

以所述第一操作位置信息的坐标点为所述截图区域的中心点，根据预置的截图形状和截图尺寸确定所述截图区域的边界点坐标以确定所述截图区域。

相应的，本发明实施例还提供一种多端同步操作的方法，包括：

通过远程接口接收包括操作方式信息和图像的信息的数据包；其中，所述数据包为与所述远程接口可耦合通信的发送端响应于监测到的作用在其当前界面上的操作事件而发送；

根据所述图像的信息在本地搜索到对应的控件；

根据所述操作方式信息执行所述控件。

进一步的，接收的所述图像的信息中包括所述发送端预先根据操作事件所对应的第一操作位置信息截图得到图像并对所述图像进行识别以获取的所述控件标识信息；

所述根据所述图像的信息在本地搜索到对应的控件包括：

根据所述控件标识信息在本地搜索到与所述控件标识信息对应的控件。

进一步的，接收的所述图像的信息包括所述发送端预先根据操作事件所对应的第一操作位置信息截图得到图像；

则所述根据所述图像的信息在本地搜索到对应的控件包括：