Survey on Real-time Anomaly Detection Technology for Big Data Streams

计算机科学 异常检测 大数据 数据流挖掘 数据挖掘 数据流 流式数据 数据科学 异常(物理) 数据驱动 概念漂移 分析 数据处理 实时计算 数据建模
作者
Yuanyan Luo,Xuehui Du,Yi Sun
出处
期刊:International Conference on Anti-counterfeiting, Security, and Identification 被引量:1
标识
DOI:10.1109/icasid.2018.8693216
摘要

With the rapid development of cloud computing, internet of things and smart cities, a large number of related programs generate big data streams during running. These big data streams will be attacked by malicious code entrainment, DDOS, and illegal tampering of data contents in the network environment. How to detect this part of the abnormal data in the big data streams has become a hot spot of current research. In order to solve the shortcomings of the existing real-time anomaly detection technology of big data streams, the literature analysis method is used to demonstrate its necessity. The related concepts are briefly described and the key problems faced by real-time anomaly detection technology of big data streams are summarized. Through systematic research on existing typical algorithms, the algorithms are summarized into three categories: based on statistics, based on clustering and based on distance. Focus on the current latest algorithm schemes, the schemes are compared in terms of time complexity and memory consumption. And the data stream generator is used to implement each scheme on the MOA (Massive Online Analysis) platform to carry out experimental testing and data analysis of the algorithms. Finally, the current hot issues and development prospects in this field are summarized, which will provide reference for further research.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
更新
PDF的下载单位、IP信息已删除 (2025-6-4)

科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
靓丽行天完成签到,获得积分10
刚刚
崔尔蓉完成签到,获得积分10
1秒前
玉玉完成签到,获得积分10
1秒前
不羁完成签到 ,获得积分10
1秒前
1秒前
LM完成签到,获得积分10
2秒前
En完成签到,获得积分0
2秒前
爱情哈尔完成签到,获得积分10
2秒前
2秒前
lalkiii完成签到,获得积分10
2秒前
unflycn完成签到,获得积分10
2秒前
2秒前
wyn完成签到,获得积分10
3秒前
3秒前
hhhhhhhhhh完成签到 ,获得积分10
3秒前
lm完成签到 ,获得积分10
3秒前
fuyuhaoy完成签到,获得积分10
3秒前
wanci应助majf采纳,获得10
3秒前
冲天小猪完成签到,获得积分10
4秒前
4秒前
章鱼哥完成签到,获得积分10
4秒前
5秒前
6秒前
悦耳寒云发布了新的文献求助10
7秒前
Chaiyuan完成签到 ,获得积分10
7秒前
7秒前
曾经青亦发布了新的文献求助10
7秒前
Aprial完成签到,获得积分10
8秒前
9秒前
cc发布了新的文献求助10
9秒前
ziyu完成签到,获得积分10
9秒前
尹山蝶完成签到,获得积分10
10秒前
ll应助JJ采纳,获得10
10秒前
Hudson完成签到,获得积分10
10秒前
思源应助星空采纳,获得10
11秒前
kirito7完成签到,获得积分10
11秒前
典雅碧空完成签到,获得积分10
11秒前
mo莫发布了新的文献求助10
11秒前
善良酸奶完成签到 ,获得积分10
12秒前
12秒前
高分求助中
Nickel, Cobalt and Palladium Catalysed Infarction with Ventricular following rich structural diversity 1000
A new approach to the extrapolation of accelerated life test data 1000
Cognitive Neuroscience: The Biology of the Mind 1000
Technical Brochure TB 814: LPIT applications in HV gas insulated switchgear 1000
Immigrant Incorporation in East Asian Democracies 600
Nucleophilic substitution in azasydnone-modified dinitroanisoles 500
不知道标题是什么 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 工程类 有机化学 生物化学 物理 内科学 纳米技术 计算机科学 化学工程 复合材料 遗传学 基因 物理化学 催化作用 冶金 细胞生物学 免疫学
热门帖子
关注 科研通微信公众号,转发送积分 3968608
求助须知:如何正确求助?哪些是违规求助? 3513486
关于积分的说明 11168243
捐赠科研通 3248926
什么是DOI,文献DOI怎么找? 1794540
邀请新用户注册赠送积分活动 875188
科研通“疑难数据库(出版商)”最低求助积分说明 804676