一种用于海量日志分析预警的大数据处理系统

    公开(公告)号:CN118820044A

    公开(公告)日:2024-10-22

    申请号:CN202411035783.7

    申请日:2024-07-31

    摘要: 本发明涉及日志分析与大数据技术领域,具体涉及一种用于海量日志分析预警的大数据处理系统;包括管理平台、数据采集模块、预处理模块、储存模块、日志分析模块、可视化展示模块和预警模块,数据采集模块负责从各种数据源定时收集日志数据,预处理模块对采集到的原始日志数据进行预处理,储存模块负责将预处理后的日志数据进行保存,日志分析模块对存储的日志数据进行深度分析,可视化展示模块将数据转换为可视化图表和报表,预警模块根据分析结果触发告警,并通知管理人员,通过上述方式,实现了对海量日志数据的快速采集、高效处理、深度分析及实时预警,能够满足现代企业对大数据处理的实时性和准确性的要求。

    一种用于海量日志分析预警的大数据处理系统

    公开(公告)号:CN118642909A

    公开(公告)日:2024-09-13

    申请号:CN202410439472.0

    申请日:2024-04-12

    IPC分类号: G06F11/30 G06F11/32

    摘要: 本发明涉及大数据技术领域,尤其涉及一种用于海量日志分析预警的大数据处理系统,包括数据采集模块、传输模块、数据处理模块、筛选模块、服务器、提取模块、数据库、管理模块、对比模块、预警模块和客户端,传输模块与数据采集模块连接,数据处理模块与传输模块连接,服务器通过筛选模块与数据处理模块连接,提取模块均与服务器和数据库连接,管理模块与数据库连接,对比模块与服务器连接,预警模块与对比模块连接,客户端与预警模块连接,以此方式解决了现有技术难以根据日志信息对通信设备的运行状态进行预警的问题。

    一种用于海量日志分析预警的大数据处理系统

    公开(公告)号:CN118505204A

    公开(公告)日:2024-08-16

    申请号:CN202410753882.2

    申请日:2024-06-12

    摘要: 本发明涉及大数据技术领域,尤其涉及一种用于海量日志分析预警的大数据处理系统,包括日志采集模块、数据预处理模块、大数据处理器模块、构建模块、管理模块、处理执行模块、反馈模块和客户端,数据预处理模块与日志采集模块连接,大数据处理器模块与数据预处理模块连接,构建模块与大数据处理器模块连接,处理执行模块和反馈模块均与大数据处理器模块连接,且客户端与反馈模块连接,以此方式解决了现有技术中在电网通信设备运行时出现故障后,检修人员才会根据日志信息分析故障原因进行故障排除,导致处理效率较低的技术问题。