基于时序数据画像的自动监控数据质量评估方法

摘要

污染源自动监控数据是环境管理决策的重要支撑,但因为数据质量难以保证,没有发挥出应有的作用;基于污染源自动监控数据的时间序列分析生态环境大数据分析应用的重要支撑,数据质量是影响大数据分析结果准确性的重要因素.目前,没有完善的自动监控数据质量评价方法或标准规范,对数据的可用性无法评估.本文基于自动监控数据的时间序列建立数据画像,梳理时间序列特征描述统计量,通过描述概览、时间戳异常描述、采样间隔描述、属性值描述、属性值异常描述等多个维度描述时间序列的特征,以反映自动监控数据时间序列的全貌.通过对自动监控数据质量的评估,为提高数据的准确性、合法性以及将自动监控数据全面应用于大数据分析应用和环境管理决策提供依据,切实发挥污染源自动监控数据的效用.