一种强化学习序列决策方法、系统、设备及介质

    公开(公告)号:CN117972588A

    公开(公告)日:2024-05-03

    申请号:CN202410160114.6

    申请日:2024-02-04

    摘要: 本发明提供了一种强化学习序列决策方法、系统、设备及介质,涉及序列决策领域,方法包括:对强化学习的历史轨迹数据进行预处理,生成预处理后的历史轨迹数据训练Transformer网络模型,利用Transformer网络模型中的文本转化机制,将强化学习转换为语言转化模型任务,生成训练好的Transformer网络模型;Transformer网络模型用于预测在历史环境下的下一时间点的动作信息,确定历史环境状态下的最大目标奖励值,以得到历史环境状态下的完整轨迹;利用所述训练好的Transformer网络模型预测在真实环境状态下的下一时间点的动作信息,得到真实环境状态下的完整轨迹。本发明能够提高Transformer网络模型的预测结果的准确度,使得Transformer网络模型的可解释性更强。

    一种数据库的安全审计系统、方法及服务器

    公开(公告)号:CN108763957B

    公开(公告)日:2021-09-14

    申请号:CN201810529452.7

    申请日:2018-05-29

    IPC分类号: G06F21/62 G06F16/21

    摘要: 本发明涉及一种数据库的安全审计系统、方法及服务器,该安全审计系统包括数据库模块、审计数据收集模块、审计数据存储模块、审计数据分析模块和可视化模块;数据库模块对数据库中的数据进行处理;审计数据收集模块收集数据库模块的操作日志;审计数据存储模块存储审计日志数据,通过引入改进后的存储引擎来保证对审计数据的高效和安全处理;审计数据分析模块对审计日志数据进行分析处理;可视化模块对审计日志数据进行可视化的显示,更好的监控数据库的更改情况。该系统能很好的解决数据库的审计问题,实现对数据库的合规性检查,并对违规操作进行预警。