Online Deep Reinforcement Learning for Computation Offloading in Blockchain-Empowered Mobile Edge Computing

强化学习 移动边缘计算 马尔可夫决策过程 计算机科学 杠杆(统计) 计算卸载 深度学习 边缘计算 云计算 分布式计算 GSM演进的增强数据速率 人工智能 机器学习 马尔可夫过程 操作系统 统计 数学
作者
Xiaoyu Qiu,Luobin Liu,Wuhui Chen,Zicong Hong,Zibin Zheng
出处
期刊:IEEE Transactions on Vehicular Technology [Institute of Electrical and Electronics Engineers]
卷期号:68 (8): 8050-8062 被引量:260
标识
DOI:10.1109/tvt.2019.2924015
摘要

Offloading computation-intensive tasks (e.g., blockchain consensus processes and data processing tasks) to the edge/cloud is a promising solution for blockchain-empowered mobile edge computing. However, the traditional offloading approaches (e.g., auction-based and game-theory approaches) fail to adjust the policy according to the changing environment and cannot achieve long-term performance. Moreover, the existing deep reinforcement learning-based offloading approaches suffer from the slow convergence caused by high-dimensional action space. In this paper, we propose a new model-free deep reinforcement learning-based online computation offloading approach for blockchain-empowered mobile edge computing in which both mining tasks and data processing tasks are considered. First, we formulate the online offloading problem as a Markov decision process by considering both the blockchain mining tasks and data processing tasks. Then, to maximize long-term offloading performance, we leverage deep reinforcement learning to accommodate highly dynamic environments and address the computational complexity. Furthermore, we introduce an adaptive genetic algorithm into the exploration of deep reinforcement learning to effectively avoid useless exploration and speed up the convergence without reducing performance. Finally, our experimental results demonstrate that our algorithm can converge quickly and outperform three benchmark policies.

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
DW发布了新的文献求助10
刚刚
一秋一年完成签到,获得积分10
1秒前
DW发布了新的文献求助10
2秒前
2秒前
漆漆发布了新的文献求助10
3秒前
漆漆发布了新的文献求助10
3秒前
漆漆发布了新的文献求助10
3秒前
漆漆发布了新的文献求助10
3秒前
DW发布了新的文献求助10
3秒前
3秒前
情怀的应助被明亮的嚣采纳,获得10
4秒前
5秒前
不羡发布了新的文献求助10
5秒前
DW发布了新的文献求助10
5秒前
DW发布了新的文献求助10
5秒前
5秒前
DW发布了新的文献求助10
5秒前
DW发布了新的文献求助10
6秒前
DW发布了新的文献求助10
6秒前
DW发布了新的文献求助30
7秒前
DW发布了新的文献求助10
7秒前
秋风的应助被科研通管家采纳,获得10
7秒前
DW的应助被科研通管家采纳,获得10
8秒前
8秒前
汉堡包的应助被科研通管家采纳,获得10
8秒前
8秒前
CipherSage的应助被科研通管家采纳,获得10
8秒前
Akim的应助被科研通管家采纳,获得10
8秒前
乐乐的应助被科研通管家采纳,获得10
8秒前
留无影发布了新的文献求助30
8秒前
秋风的应助被科研通管家采纳,获得20
8秒前
田様的应助被科研通管家采纳,获得10
8秒前
9秒前
不爱喝酒的应助被科研通管家采纳,获得10
9秒前
DW发布了新的文献求助10
9秒前
乐乐的应助被科研通管家采纳,获得10
9秒前
bkagyin的应助被科研通管家采纳,获得10
9秒前
贾贡献的应助被得闲采纳,获得20
9秒前
英俊的铭的应助被科研通管家采纳,获得10
9秒前
华仔的应助被科研通管家采纳,获得10
9秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 1700
The World Atlas of Wine 9th edition 1000
Sex, Aging, and Death in a Medieval Medical Compendium: Trinity College Cambridge MS R.14.52, Its Texts, Language, and Scribe 500
高分子基功能界面水蒸发材料与应用研究 500
外场增强的水汽发电研究 500
基于结构调控的功能化水诱导发电材料与器件研究 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8188295
求助须知:如何正确求助?哪些是违规求助? 9576112
关于积分的说明 21845392
捐赠科研通 7786320
什么是DOI,文献DOI怎么找? 3435276
关于科研通互助平台的介绍 2559581
邀请新用户注册赠送积分活动 2482182