基于大数据组件的SCA组件特征码更新方法及装置
Abstract:
本发明公开了一种基于大数据组件的SCA组件特征码更新方法及装置,其中更新方法包括:获取各待解析组件的组件信息;下载版本文件的源码包,解压源码包并解析每个版本文件的hash值;批量检索Doris数据库中是否存在相同的hash值,若存在相同,则对对应的hash值进行路径计算、合并和数据压缩,并推送至更新队列,否则对hash值进行数据压缩,并推送至新增队列;将对应队列中的hash值批量更新至Doris数据库;将对应队列中的hash值进行数据加密,并按时间目录结构生成增量包文件,并上传和存储至在线存储。本发明基于大数据组件的SCA组件特征码更新方法能够利用大数据组件批处理的特性,优化服务器对百亿级数据量的处理能力,有效地提高SCA组件特征码的更新效率。
Patent Agency Ranking
0/0