[发明专利]一种基于Q学习的动态竞争窗口调整方法、装置及设备

摘要

本发明实施例提供了一种基于Q学习的动态竞争窗口调整方法、装置及设备，该方法包括：A、初始化信道接入参数和初始煺火温度；B、在初始竞争窗口大小下，传输并获取数据包传输的第一吞吐量；C、在第一吞吐量下，采取模拟煺火算法，得到第一竞争窗口大小；D、在第一竞争窗口大小下，获取数据包传输的第二吞吐量；E、将第二吞吐量和目标吞吐量按照预设公式更新Q值表，并利用预设条件，更新初始煺火温度，得到更新后的煺火温度；当更新后的煺火温度大于最小阈值时，将更新后的煺火温度作为初始煺火温度，执行B至E，重复更新Q值表及得到更新后的煺火温度，直至更新后的煺火温度小于或等于最小阈值时，停止更新Q值表，得到最优竞争窗口。

主权项

1.一种基于Q学习的动态竞争窗口调整方法，其特征在于，应用于LAA基站，所述方法包括：/n步骤A，初始化信道接入参数和初始煺火温度；所述信道接入参数包括：初始竞争窗口大小、Q值表、目标吞吐量，所述初始煺火温度为煺火算法的一个参数；/n步骤B，在所述初始竞争窗口大小下，传输数据包并获取所述数据包传输的第一吞吐量；/n步骤C，在所述第一吞吐量下，采取模拟煺火算法，得到第一竞争窗口大小；/n步骤D，在所述第一竞争窗口大小下，获取所述数据包传输的第二吞吐量；/n步骤E，将所述第二吞吐量和所述目标吞吐量按照预设公式更新所述Q值表，并利用预设条件，更新所述初始煺火温度，得到更新后的煺火温度，所述预设公式包括Q(s1,a1)+α[c+γminQ(s2,a2)-Q(s1,a1)]，其中，c＝|s2-s0|，α、γ均为0到1之间的常数，s0表示目标吞吐量，s1表示第一吞吐量，s2表示第二吞吐量，a1表示第一竞争窗口大小值，a2表示第二竞争窗口大小值，所述预设条件包括所述第二吞吐量与目标吞吐量的差值的绝对值小于预设阈值；/n当更新后的煺火温度大于最小阈值时，将更新后的煺火温度作为初始煺火温度，执行上述步骤B至步骤E，重复更新所述Q值表及得到更新后的煺火温度，直至更新后的煺火温度小于或等于最小阈值时，停止更新所述Q值表，得到最优竞争窗口。/n