Online Deep Reinforcement Learning for Computation Offloading in Blockchain-Empowered Mobile Edge Computing

强化学习 移动边缘计算 马尔可夫决策过程 计算机科学 杠杆(统计) 计算卸载 深度学习 边缘计算 云计算 分布式计算 GSM演进的增强数据速率 人工智能 机器学习 马尔可夫过程 操作系统 统计 数学
作者
Xiaoyu Qiu,Luobin Liu,Wuhui Chen,Zicong Hong,Zibin Zheng
出处
期刊:IEEE Transactions on Vehicular Technology [Institute of Electrical and Electronics Engineers]
卷期号:68 (8): 8050-8062 被引量:260
标识
DOI:10.1109/tvt.2019.2924015
摘要

Offloading computation-intensive tasks (e.g., blockchain consensus processes and data processing tasks) to the edge/cloud is a promising solution for blockchain-empowered mobile edge computing. However, the traditional offloading approaches (e.g., auction-based and game-theory approaches) fail to adjust the policy according to the changing environment and cannot achieve long-term performance. Moreover, the existing deep reinforcement learning-based offloading approaches suffer from the slow convergence caused by high-dimensional action space. In this paper, we propose a new model-free deep reinforcement learning-based online computation offloading approach for blockchain-empowered mobile edge computing in which both mining tasks and data processing tasks are considered. First, we formulate the online offloading problem as a Markov decision process by considering both the blockchain mining tasks and data processing tasks. Then, to maximize long-term offloading performance, we leverage deep reinforcement learning to accommodate highly dynamic environments and address the computational complexity. Furthermore, we introduce an adaptive genetic algorithm into the exploration of deep reinforcement learning to effectively avoid useless exploration and speed up the convergence without reducing performance. Finally, our experimental results demonstrate that our algorithm can converge quickly and outperform three benchmark policies.

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
muzi发布了新的文献求助10
刚刚
TYF0715发布了新的文献求助10
刚刚
刚刚
达落完成签到,获得积分10
1秒前
1秒前
铁手无情完成签到,获得积分10
1秒前
风吹麦浪的应助被木葺采纳,获得10
1秒前
无奈亦瑶完成签到 ,获得积分10
1秒前
丘比特的应助被yefeng采纳,获得10
1秒前
2秒前
2秒前
酷酷的寄琴完成签到,获得积分10
3秒前
3秒前
4秒前
殷勤的紫槐的应助被李思超采纳,获得220
4秒前
JIAXI完成签到,获得积分10
4秒前
深情安青的应助被橙子采纳,获得10
4秒前
5秒前
光亮熠彤发布了新的文献求助10
5秒前
无极微光的应助被muzi采纳,获得20
5秒前
season完成签到,获得积分10
6秒前
6秒前
深情安青的应助被敏感寻真采纳,获得10
6秒前
7秒前
荔枝烨发布了新的文献求助10
7秒前
畅快的惜天完成签到,获得积分10
7秒前
7秒前
xiaojiu发布了新的文献求助10
8秒前
我是老大的应助被TZUYU采纳,获得10
8秒前
8秒前
9秒前
jiqiangqiang完成签到 ,获得积分10
9秒前
9秒前
隐形曼青的应助被weie采纳,获得10
9秒前
阳光雨堂发布了新的文献求助10
9秒前
9秒前
jingjing发布了新的文献求助10
10秒前
JamesPei的应助被TYF0715采纳,获得30
10秒前
无极微光的应助被小橙子采纳,获得20
10秒前
10秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 1700
The World Atlas of Wine 9th edition 1000
奈特基础组织学:配套组织病理学(第4版)(Netter's Essential Histology With Correlated Histopathology) 800
John McDowells Bildungstheorie 800
Markov Decision Processes and Reinforcement Learning 700
八旗制度の研究 600
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8170787
求助须知:如何正确求助?哪些是违规求助? 9563660
关于积分的说明 21771326
捐赠科研通 7762279
什么是DOI,文献DOI怎么找? 3430761
关于科研通互助平台的介绍 2554585
邀请新用户注册赠送积分活动 2475525