本申请提供一种集群任务的处理方法、装置、设备和存储介质。该方法包括：上层调度模块通过获取从第一时刻至当前的任务失败量，判断在该时段中，任务失败量是否满足第一预设条件，进而，动态调整最大允许并发量，实现对对采集任务的合理调度，避免高并发导致的分布式采集集群访问压力过高。上层调度模块还可以通过获取预设时间间隔内的任务失败量和当前任务并发量，判断在该时段中，任务失败量是否满足第二预设条件，进而，动态调整最大允许并发量，减少分布式采集集群资源浪费。