Outlier detection and missing data filling methods for coastal water temperature data

离群值 缺少数据 异常检测 插补(统计学) 数据挖掘 计算机科学 人工智能 机器学习
作者
Hong Yeon Cho,Ji Hee Oh,Kyeong Ok Kim,Jae Seol Shim
出处
期刊:Journal of Coastal Research [Coastal Education and Research Foundation]
卷期号:165: 1898-1903 被引量:14
标识
DOI:10.2112/si65-321.1
摘要

Cho, H.Y., Oh, J.H., Kim, K.O. and Shim, J.S., 2013. Outlier detection and missing data filling methods for coastal water temperature data,Outlier detection and missing data filling (imputation) processes are essential first step in the statistical analysis of coastal monitoring data. Here, we suggest methods for completing these key processes. An outlier detection method that uses approximate and detailed components is suggested. The decomposition of the time-series data is performed by harmonic analysis. Next, the modified z-score method is applied to the residuals (detailed component) to detect outliers. After removing the outliers in the residuals, the filling process for the missing and removed outlier data is conducted by summing the random and the approximate components. Among the environmental monitoring data, this method is applied to the coastal water temperature data. We used hourly interval coastal water temperature data provided by the NFRDI (National Fisheries Research & Development Institute). In these datasets, the dataset of the Yeong-Deok Geomuyeok (36.58 °N, 129.40 °E) station, Korea, is only used for this method application. This dataset contains some outliers and missing data. To test the model performance, this method is applied to a daily interval modeling dataset from the HYCOM (Hybrid Coordinate Ocean Model). This method provides reasonable results for outlier detection and for filling in missing data in coastal water temperature datasets.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
小C完成签到,获得积分10
1秒前
shit完成签到 ,获得积分10
1秒前
小白应助LMX采纳,获得20
1秒前
03完成签到 ,获得积分10
2秒前
2秒前
3秒前
量子星尘发布了新的文献求助10
4秒前
沐风应助yu采纳,获得20
4秒前
秋水发布了新的文献求助10
6秒前
奋斗的夏柳完成签到 ,获得积分10
7秒前
丁真爱学习完成签到 ,获得积分10
10秒前
量子星尘发布了新的文献求助10
10秒前
修利发布了新的文献求助10
10秒前
坦率访梦完成签到,获得积分10
13秒前
13秒前
15秒前
16秒前
16秒前
18秒前
请叫我风吹麦浪应助gjw采纳,获得10
18秒前
重要衬衫完成签到 ,获得积分10
18秒前
20秒前
量子星尘发布了新的文献求助10
21秒前
wbhou完成签到 ,获得积分10
21秒前
21秒前
山止川行完成签到 ,获得积分10
22秒前
修利完成签到,获得积分10
22秒前
22秒前
可爱发布了新的文献求助10
24秒前
zhangz发布了新的文献求助10
24秒前
25秒前
25秒前
量子星尘发布了新的文献求助10
25秒前
bkagyin应助科研通管家采纳,获得10
26秒前
Ava应助科研通管家采纳,获得10
26秒前
orixero应助科研通管家采纳,获得10
26秒前
科研通AI5应助科研通管家采纳,获得10
26秒前
27秒前
酷波er应助科研通管家采纳,获得10
27秒前
英俊的铭应助科研通管家采纳,获得10
27秒前
高分求助中
Production Logging: Theoretical and Interpretive Elements 2700
Neuromuscular and Electrodiagnostic Medicine Board Review 1000
Statistical Methods for the Social Sciences, Global Edition, 6th edition 600
こんなに痛いのにどうして「なんでもない」と医者にいわれてしまうのでしょうか 510
The Insulin Resistance Epidemic: Uncovering the Root Cause of Chronic Disease  500
Walter Gilbert: Selected Works 500
An Annotated Checklist of Dinosaur Species by Continent 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 工程类 有机化学 物理 生物化学 纳米技术 计算机科学 化学工程 内科学 复合材料 物理化学 电极 遗传学 量子力学 基因 冶金 催化作用
热门帖子
关注 科研通微信公众号,转发送积分 3662463
求助须知:如何正确求助?哪些是违规求助? 3223261
关于积分的说明 9750686
捐赠科研通 2933115
什么是DOI,文献DOI怎么找? 1605919
邀请新用户注册赠送积分活动 758208
科研通“疑难数据库(出版商)”最低求助积分说明 734743