公开(公告)号：CN115408350A

公开(公告)日：2022-11-29

申请号：CN202210822255.0

申请日：2022-07-13

Applicant: 深圳市腾讯计算机系统有限公司 ,  华中科技大学

Inventor： 李春花 ,  谢青 ,  蔡宝清 ,  周可 ,  毕杰山 ,  姜国强

IPC: G06F16/174 ,  G06F16/18 ,  G06F16/903

Abstract: 本申请涉及一种日志压缩、日志还原方法、装置、计算机设备、存储介质和计算机程序产品。本发明实施例可应用于云技术、人工智能、智慧交通、辅助驾驶等各种场景。所述方法包括：将模板字符串排列信息和目标日志的字符串排列信息匹配成功的候选日志模板作为初始日志模板；从目标日志的日志字符串中，将与初始日志模板中的变量类模板字符串匹配的日志字符串作为第一初始字符串，将与初始日志模板中的常量类模板字符串匹配的日志字符串作为第二初始字符串；基于初始日志模板对应的模板标识、各个第一初始字符串分别对应的第一编码数据、目标日志中第一初始字符串和第二初始字符串之间的第一位置关系，生成日志压缩数据，以此提高日志压缩率。

公开(公告)号：CN110008257B

公开(公告)日：2024-04-16

申请号：CN201910284179.0

申请日：2019-04-10

Applicant: 深圳市腾讯计算机系统有限公司

Inventor： 陈曦 ,  姜国强

IPC: G06F16/2458 ,  G06F16/27

Abstract: 本发明涉及一种数据处理方法、装置、系统、计算机设备和存储介质，方法包括：获取目标数据处理任务，目标数据处理任务是任务管理节点从分布式存储集群中获取任务信息，根据任务信息生成的；根据目标数据处理任务生成数据查询请求，向分布式存储集群发送数据查询请求，以使得分布式存储集群根据目标数据处理任务对应的数据处理范围获取对应的目标待处理数据，根据目标数据处理任务对应的数据处理规则对目标待处理数据进行处理，得到数据查询请求对应的查询结果；将查询结果解析为符合预设数据格式的目标数据，将目标数据写入到分布式存储集群中。上述方法可以提高查询效率。

公开(公告)号：CN110008257A

公开(公告)日：2019-07-12

申请号：CN201910284179.0

申请日：2019-04-10

Applicant: 深圳市腾讯计算机系统有限公司

Inventor： 陈曦 ,  姜国强

IPC: G06F16/2458 ,  G06F16/27

Abstract: 本发明涉及一种数据处理方法、装置、系统、计算机设备和存储介质，方法包括：获取目标数据处理任务，目标数据处理任务是任务管理节点从分布式存储集群中获取任务信息，根据任务信息生成的；根据目标数据处理任务生成数据查询请求，向分布式存储集群发送数据查询请求，以使得分布式存储集群根据目标数据处理任务对应的数据处理范围获取对应的目标待处理数据，根据目标数据处理任务对应的数据处理规则对目标待处理数据进行处理，得到数据查询请求对应的查询结果；将查询结果解析为符合预设数据格式的目标数据，将目标数据写入到分布式存储集群中。上述方法可以提高查询效率。