-
公开(公告)号:CN117610571A
公开(公告)日:2024-02-27
申请号:CN202311624851.9
申请日:2023-11-30
申请人: 北京安信天行科技有限公司
IPC分类号: G06F40/295 , G06N3/0442 , G06F40/284 , G06F40/30 , G06F16/36
摘要: 本发明提供一种基于BERT‑BiLSTM‑CRF的日志实体识别方法,包括步骤:S1、获取日志数据并进行数据预处理得到文本序列;S2、根据所述文本序列通过BERT模型生成能够表达文本语义信息的向量序列;S3、通过BiLSTM模型对所述向量序列进行处理,生成能够表示上下文特征的向量;S4、通过CRF建立特征向量与标签的模型,获取最优标签序列,识别出所述日志数据中的命名实体。本发明还提供一种基于BERT‑BiLSTM‑CRF的日志实体识别装置。
-
公开(公告)号:CN117112780A
公开(公告)日:2023-11-24
申请号:CN202311368798.0
申请日:2023-10-23
申请人: 北京安信天行科技有限公司
摘要: 本发明提供一种基于文本摘要模型的非结构化日志解析方法,包括:获取待解析的非结构化原始日志数据;运用日志模式解析算法生成原始日志数据的模板;根据已有的日志摘要库,筛选未有摘要的日志模板;根据筛选的未有摘要的日志模板,筛选出未有摘要的代表日志;将代表日志输入自然语言文本摘要模型,得到代表日志的摘要;根据代表日志的摘要,对应生成原始日志的摘要。
-
公开(公告)号:CN115914114A
公开(公告)日:2023-04-04
申请号:CN202211591452.2
申请日:2022-12-12
申请人: 北京安信天行科技有限公司
IPC分类号: H04L47/12 , H04L47/25 , H04L67/145
摘要: 本发明公开了一种基于变频的数据传输方法,所述方法包括:终端与平台通过心跳保持连接,心跳代表终端和平台之间的连通性;在心跳正常的前提下,终端和平台通过数据通道传输日志数据;当数据传输通道发生拥堵时,平台向终端下发指令,终端接收到指令后进行变频,即改变日志数据的传输频率;若心跳失联,则终止日志发送,直至心跳重新连通。本发明中的数据变频方法能有效地改善数据通道拥堵状态,同时在维持平台性能的基础上,提高数据传输的可靠性。
-
公开(公告)号:CN117112780B
公开(公告)日:2023-12-26
申请号:CN202311368798.0
申请日:2023-10-23
申请人: 北京安信天行科技有限公司
摘要: 本发明提供一种基于文本摘要模型的非结构化日志解析方法,包括:获取待解析的非结构化原始日志数据;运用日志模式解析算法生成原始日志数据的模板;根据已有的日志摘要库,筛选未有摘要的日志模板;根据筛选的未有摘要的日志模板,筛选出未有摘要的代表日志;将代表日志输入自然语言文本摘要模型,得到代表日志的摘要;根据代表日志的摘要,对应生成原始日志的摘要。
-
-
-