主页期刊介绍编委会编辑部服务介绍道德声明在线审稿编委办公编辑办公English
2018-2019年专刊出版计划 微信服务介绍 最新一期:2019年第10期
     
在线出版
各期目录
纸质出版
分辑系列
论文检索
论文排行
综述文章
专刊文章
美文分享
各期封面
E-mail Alerts
RSS
旧版入口
中国科学院软件研究所
  
投稿指南 问题解答 下载区 收费标准 在线投稿
张雁冰,杭大明,马正新,曹志刚.基于再励学习的主动队列管理算法.软件学报,2004,15(7):1090-1098
基于再励学习的主动队列管理算法
A Robust Active Queue Management Algorithm Based on Reinforcement Learning
投稿时间:2003-07-23  修订日期:2003-10-14
DOI:
中文关键词:  拥塞控制  主动队列管理  再励学习
英文关键词:congestion control  active queue management  reinforcement learning
基金项目:Supported bythe National High-Tech Research and Development Plan of Chinaunder Grant No.2001AA121062(国家高技术研究发展计划(863))
作者单位
张雁冰 清华大学,电子工程系,微波与数字通信国家重点实验室,北京,100084 
杭大明 清华大学,电子工程系,微波与数字通信国家重点实验室,北京,100084 
马正新 清华大学,电子工程系,微波与数字通信国家重点实验室,北京,100084 
曹志刚 清华大学,电子工程系,微波与数字通信国家重点实验室,北京,100084 
摘要点击次数: 3365
全文下载次数: 3078
中文摘要:
      从最优决策的角度出发,将人工智能中的再励学习方法引入主动队列管理的研究中,提出了一种基于再励学习的主动队列管理算法RLGD(reinforcement learning gradient-descent).RLGD以速率匹配和队列稳定为优化目标,根据网络状态自适应地调节更新步长,使得队列长度能够很快收敛到目标值,并且抖动很小.此外,RLGD不需要知道源端的速率调整算法,因而具有很好的可扩展性.通过不同网络环境下的仿真显示,RLGD与REM,PI等AQM算法相比,具有更好的性能和鲁棒性.
英文摘要:
      From the viewpoint of decision theory, AQM (active queue management) can be considered as an optimal decision problem. In this paper, a new AQM scheme, Reinforcement Learning Gradient-Descent (RLGD), is described based on the optimal decision theory of reinforcement learning. Aiming to maximize the throughput and stabilize the queue length, RLGD adjusts the update step adaptively, without the demand of knowing the rate adjustment scheme of the source sender. Simulation demonstrates that RLGD can lead to the convergence of the queue length to the desired value quickly and maintain the oscillation small. The results also show that the RLGD scheme is very robust to disturbance under various network conditions and outperforms the traditional REM and PI controllers significantly.
HTML  下载PDF全文  查看/发表评论  下载PDF阅读器
 

京公网安备 11040202500064号

主办单位:中国科学院软件研究所 中国计算机学会 京ICP备05046678号-4
编辑部电话:+86-10-62562563 E-mail: jos@iscas.ac.cn
Copyright 中国科学院软件研究所《软件学报》版权所有 All Rights Reserved
本刊全文数据库版权所有,未经许可,不得转载,本刊保留追究法律责任的权利