[发明专利]基于Q学习的异构网络接入控制优化选择方法

权利要求书

1.基于Q学习的异构网络接入控制优化选择方法，其特征在于，该方法包括以下步骤：

步骤一、判断接入新用户时的异构网络状态；

步骤二、查询Q值表，选择步骤一所述异构网络状态对应的Q值表中的最大Q值对应的子网络作为新用户的接入网络。

2.根据权利要求1所述基于Q学习的异构网络接入控制优化选择方法，其特征在于，所述异构网络指的是WCDMA子网络和WLAN子网络采用松耦合的方式组成的融合异构网络，

所述异构网络状态是根据WCDMA子网络的基于干扰的四种网络状态和WLAN子网络的基于信道繁忙率的四种网络状态共同确定的，

WCDMA子网络的基于干扰的四种网络状态向量s_c＝[I_very low，I_low，I_high，I_very high]，WLAN子网络的基于信道繁忙率的四种网络状态向量s_w＝[R_b-very low，R_b-low，R_b-high，R_b-very high]，

则所述WCDMA子网络和WLAN子网络构成的异构网络的网络状态向量s为：

s＝[R_b-very lowI_very low，R_b-very lowI _low，R_b-very lowI_high，R_b-very lowI_very high，

R_b-lowI_very low，R_b-lowI _low，R_b-lowI_high，R_b-lowI_very high，

R_b-highI_very low，R_b-highI _low，R_b-highI_high，R_b-highI_very high， 

R_{b-very highIrert low}，R_b-very highI_low，R_b-very highI_high，R_b-very highI_very high]。