RL遇上IEEE 802.11be中的多链路操作:基于多头循环软-行为者评论家的流量分配

摘要:IEEE 802.11be—无线保真(Wi-Fi)7,商业上称为极高吞吐量,是最新的IEEE 802.11修正案,旨在解决对超高清(4K/8K)视频和虚拟/增强现实(VR/AR)等吞吐量需求不断增长的服务。为此,IEEE 802.11be提出了一系列新特性,将Wi-Fi技术推向极限。其中,多链路操作(MLO)设备预计将成为现实,将单链路操作(SLO)Wi-Fi留在过去。为了实现更高的吞吐量和极低的延迟,必须采取谨慎的设计方法,即如何在具备MLO能力的设备中分配传入流量。在本文中,我们提出了一种名为多头循环软演员评论家(MH-RSAC)的强化学习(RL)算法,用于在802.11be MLO能力网络中分配传入流量。此外,我们将我们的结果与文献中先前提出的两种非RL基准算法进行了比较,它们分别是单链路非拥塞接口(SLCI)和多链路拥塞感知负载均衡(MCAA)。模拟结果显示,与SLCI和MCAA算法相比,MH-RSAC算法能够在吞吐量下降比率(TDR)方面获得高达35.2%和6%的收益。最后,我们观察到,与基准算法相比,我们的方案在对高吞吐量和动态流量如VR和Web浏览(WB)做出更高效响应方面更有效。结果显示,MH-RSAC方案在流量满意度(FS)方面比SCLI和MCAA算法分别提高了25.6%和6%。

作者:Pedro Enrique Iturria Rivera, Marcel Chenier, Bernard Herscovici, Burak Kantarci and Melike Erol-Kantarci

论文ID:2303.08959

分类:Networking and Internet Architecture

分类简称:cs.NI

提交时间:2023-03-17

PDF 下载: 英文版 中文版pdf翻译中