一种基于kafka实时发电数据采集传输及数据监控的方法

摘要

本发明涉及数据传输技术领域，且公开了一种基于kafka实时发电数据采集传输及数据监控的方法，包括应用于多源异构电站发电数据的收集计算和多源存储介质传输。该一种基于kafka实时发电数据采集传输及数据监控的方法，通过设置核心引擎的智能调度任务、动态更新调度配置和动态同步数据收集或计算配置、数据收集引擎智能收集解析发电数据、数据消计算引擎多线程批量计算多维度发电数据到多源存储介质中和核心引擎智能进行数据补偿，能够解决多源异构异构型电站发电数据种类繁多而数据不能统筹管理和优化了解析发电数据计算固化、多源电站发电数据异构的问题，并提供日志监控，以监控任务在执行过程中的执行的情况。