-
公开(公告)号:CN119127433A
公开(公告)日:2024-12-13
申请号:CN202411198369.8
申请日:2024-08-29
Applicant: 中国移动通信集团设计院有限公司 , 中国移动通信集团有限公司
Abstract: 本发明公开了一种自适应数据采集方法、装置、设备、介质及计算机程序产品,所述方法包括:逐个遍历OMC列表信息获取目标数据文件信息;根据目标数据文件信息的优先级打包为任务包,并写入到对应的优先级队列;根据数据解析的处理时长自适应修正拉取的任务包的目标数量;根据目标数量从优先级队列中拉取相应数量的任务包,以对任务包中的目标数据进行解析。本发明将数据采集与解析区分为两个相互独立的环节,根据数据解析的时长自适应修正应采集的数据量,从而均衡数据采集及解析服务器的资源利用率,最小化数据处理时延,避免数据积压或丢失的现象;同时通过配置不同的数据时延优先级队列,可灵活适应多种不同时延优先级的需求,提高资源利用率。