[发明专利]一种基于SDN的异构无线网络接入选择方法及系统

说明书

本发明涉及一种基于SDN的异构无线网络接入选择方法及系统，该方法包括步骤：在目标观测时间长度下，获取每个时刻环境中的目标观测数据；利用预设神经网络对目标观测数据依次进行多属性特征提取、空间特征提取和时序特征提取，得到当前时刻的状态向量；使用初始Q网络对状态向量进行处理，并对预设神经网络和初始Q网络进行训练，得到训练好的预设神经网络和目标Q网络；利用训练好的预设神经网络和目标Q网络计算当前时刻每个决策的评估值，并根据评估值选取目标决策，输出并执行目标决策。该接入选择方法可以使得任何一个移动设备都能够根据当前环境状况与自身状态选择最优的网络进行接入，从而满足确定性低时延，以保证用户的业务体验。

技术领域

本发明属于通信技术领域，具体涉及一种基于SDN的异构无线网络接入选择方法及系统。

背景技术

工业互联网是推动未来网络发展的一个典型应用场景，是驱动未来互联网发展的关键动力之一，无论是5G时代还是后5G时代，其中确定性低时延是关键的技术需求。当前基于IETF(Internet Engineering Task Force，国际互联网工程任务组)的TCP/IP协议栈的互联网，其提供“尽力而为”的网络传送服务以及有限的QoS(Quality of Service，服务质量)保证。但在未来的工业连接上，不仅要提供确定的、及时的传送服务(in time，时延短)，而且要提供确定的、准时的传送服务(on time，抖动小)。由于5G在室内覆盖上成本高，终端兼容性弱的限制，而新一代Wi-Fi 6在室内覆盖上已经克服了大带宽、大容量、低时延的挑战，可以支持VR/4K/AGV等大带宽低时延的关键应用，所以Wi-Fi网络与5G网络在大部分的场景里是可以相互协同，使得整个接入系统的服务最优。而由于移动终端业务的多样性、无线网络信道传输质量的差异性、无线网络信号的重叠性等因素，需要依靠网络接入选择算法保障用户能够接入到最适合的网络进行业务处理，而由于传统无线网络的封闭结构，使得接入选择方法难以部署。无线终端的移动性和无线信道的时变性，更是使得无线网络的接入选择面临的情况较为复杂。此外，传统架构中无线访问接入点(WirelessAccessPoint,AP)具有独立性，只能获取到与自身关联的终端信息，不同AP间缺少同步信息。

而基于深度Q学习网络DQN(Deep Q-learning Network)的异构无线网络接入选择算法，将终端的吞吐量作为DQN的奖励值，使用AP接收到终端的RSSI(Received SignalStrength Indication，接收的信号强度指示)信息表征终端在网络中所处的状态；通过将算法放置到实际的网络环境或者仿真平台进行训练，从而得到适用于对应的网络场景的切换判决策略。由于该算法所提供的切换判决算法采用了强化学习的方法，因此其具有针对不同网络环境的普适性以及应对网络变化的自适应性。基于DQN的切换判决算法与传统的切换判决算法相比，能够做出最佳的切换决策，并明显地提高终端在切换过程中的吞吐量。

然而，由于该算法只考虑了终端的RSSI因素作为终端在网络中所处的状态，而单一的RSSI指标并不能确切反映出网络中的实际状况，因此在该接入选择算法下，不能使得终端满足确定性低时延，且传统的DQN算法存在过估计(overestimate)问题，导致无法获得稳定有效的策略。

发明内容

为了解决现有技术中存在的上述问题，本发明提供了一种基于SDN的异构无线网络接入选择方法及系统。本发明要解决的技术问题通过以下技术方案实现：

本发明实施例提供了一种基于SDN的异构无线网络接入选择方法，包括步骤：

S1、在目标观测时间长度下，获取每个时刻环境中的目标观测数据，输出所述目标观测数据；其中，所述目标观测数据包括若干属性；

S2、利用预设神经网络对所述目标观测数据依次进行多属性特征提取、空间特征提取和时序特征提取，得到当前时刻的状态向量；