Multi-Agent Reinforcement Learning Based File Caching Strategy in Mobile Edge Computing

强化学习 计算机科学 GSM演进的增强数据速率 边缘计算 分布式计算 移动代理 操作系统 人机交互 人工智能
作者
Yongjian Yang,Kaihao Lou,En Wang,Wenbin Liu,Jianwen Shang,Xueting Song,Dawei Li,Jie Wu
出处
期刊:IEEE ACM Transactions on Networking [Institute of Electrical and Electronics Engineers]
卷期号:31 (6): 3159-3174 被引量:11
标识
DOI:10.1109/tnet.2023.3278032
摘要

Mobile edge computing (MEC) reduces data service latency by pushing data to the network edge. However, due to the dynamic and diverse requests of mobile users, the problem of mobile edge caching is more complex than cloud caching. Therefore, the existing model-based caching strategies cannot be directly used in the mobile edge caching environment. Besides, when taking the cooperative storage relationship between neighbor edge servers into consideration, the caching problem becomes more difficult. To this end, we formulate an mobile edge caching problem to minimize the total latency in mobile edge computing. Firstly, a heuristic caching strategy is proposed to solve the mobile edge caching problem in the single-time-slot scenario. Then, with the consideration of users' mobility and the correlation of files, we propose a caching strategy for the multiple-time-slot scenario based on multi-agent deep reinforcement learning. To address the cold start problem in deep reinforcement learning, we adopt the proposed heuristic caching strategy used in the single-time-slot scenario to further optimize the training results. Extensive experiments on generated data and real-world datasets are conducted to verify that the proposed edge caching strategies can achieve the minimum latency compared with the state-of-the-art strategies.

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
刚刚
迷人的卿发布了新的文献求助10
刚刚
刚刚
搜集达人的应助被Spring采纳,获得10
刚刚
独特的夏蓉完成签到,获得积分10
刚刚
1秒前
lwy发布了新的文献求助10
1秒前
华仔的应助被松本润迷妹采纳,获得20
1秒前
你好发布了新的文献求助10
2秒前
hmoo完成签到,获得积分10
2秒前
CipherSage的应助被曹超国采纳,获得10
2秒前
2秒前
3秒前
3秒前
科研混子完成签到,获得积分10
3秒前
xiaofan完成签到,获得积分10
4秒前
4秒前
双双完成签到,获得积分10
4秒前
4秒前
拼搏凝冬完成签到,获得积分20
4秒前
甘氨酸发布了新的文献求助10
4秒前
修勾想要干饭咧完成签到,获得积分10
5秒前
粗犷的海冬完成签到,获得积分10
5秒前
满三江完成签到,获得积分10
5秒前
orixero的应助被背书强采纳,获得10
6秒前
天真小甜瓜完成签到,获得积分10
6秒前
Elixir完成签到,获得积分10
6秒前
小田完成签到,获得积分10
6秒前
6秒前
温暖的若之完成签到,获得积分10
6秒前
6秒前
杨帆完成签到,获得积分10
6秒前
zain完成签到,获得积分10
7秒前
Lan_Hao完成签到,获得积分20
7秒前
skyhappy发布了新的文献求助10
7秒前
7秒前
自由的白开水完成签到,获得积分10
7秒前
8秒前
弥里发布了新的文献求助10
8秒前
xxx完成签到,获得积分10
8秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 1700
The World Atlas of Wine 9th edition 1000
奈特基础组织学:配套组织病理学(第4版)(Netter's Essential Histology With Correlated Histopathology) 800
John McDowells Bildungstheorie 800
八旗制度の研究 600
plantTFDB 508
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8167280
求助须知:如何正确求助?哪些是违规求助? 9560076
关于积分的说明 21754886
捐赠科研通 7758257
什么是DOI,文献DOI怎么找? 3429309
关于科研通互助平台的介绍 2553653
邀请新用户注册赠送积分活动 2474136