[发明专利]一种媒体信息传输方法及装置

说明书

本申请提供一种媒体信息传输方法及装置，应用于第一设备时，第一设备包括第一传输接口，该方法包括采集第一媒体信息；对所述第一媒体信息进行特征提取，确定所述第一媒体信息的第一特征数据；通过所述第一传输接口向第二设备发送所述第一特征数据，所述第一特征数据用于所述第二设备获得第一应用的结果。从而，降低传输媒体信息时的传输开销及编解码的开销，提高传输效果。

相关申请的交叉引用

本申请要求在2020年08月14日提交中国专利局、申请号为202010819860.3、申请名称为“面向分布式AI的传输接口系统”的中国专利申请的优先权，其全部内容通过引用结合在本申请中。

技术领域

本申请实施例涉及媒体技术领域，尤其涉及一种媒体信息传输方法及装置。

背景技术

在机器视觉、语音交互、人脸识别、自动驾驶、环境建模等机器算法应用场景中，图像采集设备采集原始的视频或图像资源，通过将视频或图像资源压缩成视频流，传输给相应的服务器或实现机器算法应用的设备，这些设备对接收到的视频流进行解码或解压后恢复出标准的音视频信号；之后利用深度学习等机器算法对音视频信号进行处理，得到人工智能(artificial intelligence,AI)应用的处理结果。

上述过程中，需要占用大量的带宽，并对机器算法应用的设备而言，也需要大量的解码或解压缩的过程，导致计算资源的浪费和传输带宽资源的浪费。

发明内容

本申请提供了一种媒体信息传输方法及装置，用以解决现有技术中采用媒体数据传输过程中，占用较大的带宽资源，不利于媒体资源的后续应用等问题。

第一方面，本申请提供一种媒体信息传输方法，应用于第一设备，所述第一设备包括第一传输接口，所述方法包括：采集第一媒体信息；对所述第一媒体信息进行特征提取，确定所述第一媒体信息的第一特征数据；通过所述第一传输接口向第二设备发送所述第一特征数据，所述第一特征数据用于所述第二设备获得第一应用的结果。

其中，第一应用可以为AI应用，执行上述方法的设备可以是第一设备，也可以是具有相应功能的模块或部件，例如，芯片。下面以第一设备执行该方法为例，第一设备可以为具有采集媒体信息能力和特征提取能力的设备。第一设备可以包括第一传输接口，该第一传输接口支持传输特征数据，从而，实现将媒体信息通过特征数据的方式传输给第二设备，避免了现有技术中需要在发送端对媒体信息进行压缩编码，并需要在媒体信息的接收端进行恢复传输的媒体信息，编解码过程较为复杂，降低了计算资源的开销，并整体降低系统的延迟，有助于应用于实时性要求高的AI应用中，提升用户使用AI应用的体验。另外，由于传输的是抽象后的特征数据，在降低编码难度的同时，也极大的减少了传输的信息量，降低了传输资源的开销。进一步的，考虑到传输媒体信息时的安全性，传输抽象后的特征数据，相比现有技术中传输媒体信息的方式，传输接口内传输的特征数据无法逆向转换为原始的媒体信息，实现更好的隐私保护能力。

一种可能的实现方式，所述向第二设备发送所述第一特征数据之前，还包括：

通过所述第一传输接口接收所述第二设备发送的能力协商请求消息；所述能力协商请求消息用于请求所述第一设备支持的传输协议，及所述第一设备的特征提取能力；所述第一设备的传输协议用于指示所述第一设备支持传输特征数据；所述第一设备的特征提取能力用于指示所述第一设备支持提取所述第一媒体信息的第一特征数据；通过所述第一传输接口向所述第二设备发送能力协商响应消息；所述能力协商响应消息用于确认所述第一设备支持传输特征数据的传输协议及所述第一设备的特征提取能力。

一种可能的实现方式，响应于在第一应用上的第一操作，向所述第二设备发送第一通知消息；所述第一设备为与所述第二设备建立通信连接的电子设备；所述第一通知消息用于请求所述第一设备与所述第二设备建立第一应用协同；接收所述第二设备返回的第一响应消息；所述第一响应消息用于确认所述第一设备与所述第二设备开启第一应用协同。