一种大数据统计方法及用于大数据统计的系统

摘要

本发明公开了一种大数据统计方法及用于大数据统计的系统，包括以下步骤：数据收集，大数据采集系统，进行采集数据，得到数据碎片，数据碎片处理，大数据处理系统对数据碎片进行分析处理，去除重复碎片，数据碎片分类，大数据系统，对数据碎片进行初步分类，并暂存到预处理模块中；一种大数据统计方法用于大数据统计的系统，包括用于数据采集的数据收集模块；用于存储临时数据的存储模块；用于检测处理器负荷状态的分析模块；用于根据处理器负荷状况分析统计数据的不定时统计模块。本发明可以提高处理数据统计效率，同时不影响处理器的正常运行，保证大数据的稳定，节约时间，对数据进行大小分类，提高统计成功率。