公开(公告)号：CN116467624A

公开(公告)日：2023-07-21

申请号：CN202310320005.1

申请日：2023-03-28

申请人： 青岛理工大学 ,  中国石油大学(华东)

发明人： 张凯 ,  吴金炼 ,  孙子峰 ,  张黎明 ,  刘丕养 ,  严侠 ,  张华清 ,  樊灵

IPC分类号： G06F18/24 ,  G06F18/214 ,  G06F18/21 ,  G06N3/0455 ,  G06N3/0499 ,  G06N3/096

摘要： 本发明公开了一种基于迁移学习和ViT网络的抽油机工况诊断方法，属于石油工程技术领域，具体包括以下步骤：步骤1、收集油田区块中抽油机的载荷和冲程数据，并对数据进行预处理；步骤2、构建基于迁移学习和ViT网络模型的抽油机工况诊断模型，并进行模型训练；步骤3、利用测试集数据检查模型的性能；步骤4、基于训练完成的抽油机工况诊断模型，进行抽油机工况实时诊断。本发明具有计算速度快，经济成本低，表征精度高，无需考虑地质静态参数等优点；可以实时诊断该油田区块抽油机的工况类别，无需经过大量、耗时的计算，节省了大量时间，提高了油田工作效率，可满足油田实际工程要求。

公开(公告)号：CN116384712B

公开(公告)日：2023-09-15

申请号：CN202310652248.5

申请日：2023-06-05

申请人： 青岛理工大学 ,  中国石油大学(华东)

发明人： 辛国靖 ,  张凯 ,  王中正 ,  刘丕养 ,  张黎明 ,  严侠 ,  张华清 ,  孙子峰 ,  贾峰

IPC分类号： G06Q10/0631 ,  G06Q10/04 ,  G06Q50/02 ,  G06F30/27 ,  G06N3/045 ,  G06N3/092 ,  G06F111/10

摘要： 本发明提供了一种联动智能注采装置的差异化实时注采优化调控方法，属于油藏注采技术领域，具体包括以下步骤：初始化网络；搭建注采环境模型；智能体读取注采环境初始状态；注采策略网络写入文件；获得t+1时刻的状态数据；读取下一状态及该时间步内经济净现值；将下一状态赋给当前状态，直至完成待优化生产周期；通过批训练模型对环境代理网络参数进行更新；更新动作评价网络参数及注采策略网络参数；重复以上步骤，直至得到最优模型；根据保存的最优模型，与智能注采装置联动，获得油藏的状态信息。本发明的技术方案克服现有技术中的油藏注采优化方法，对已有信息利用率较低，需重复进行优化迭代，不能根据当前生产方案进行实时调整的问题。

公开(公告)号：CN116384712A

公开(公告)日：2023-07-04

申请号：CN202310652248.5

申请日：2023-06-05

申请人： 青岛理工大学 ,  中国石油大学(华东)

发明人： 辛国靖 ,  张凯 ,  王中正 ,  刘丕养 ,  张黎明 ,  严侠 ,  张华清 ,  孙子峰 ,  贾峰

IPC分类号： G06Q10/0631 ,  G06Q10/04 ,  G06Q50/02 ,  G06F30/27 ,  G06N3/045 ,  G06N3/092 ,  G06F111/10

摘要： 本发明提供了一种联动智能注采装置的差异化实时注采优化调控方法，属于油藏注采技术领域，具体包括以下步骤：初始化网络；搭建注采环境模型；智能体读取注采环境初始状态；注采策略网络写入文件；获得t+1时刻的状态数据；读取下一状态及该时间步内经济净现值；将下一状态赋给当前状态，直至完成待优化生产周期；通过批训练模型对环境代理网络参数进行更新；更新动作评价网络参数及注采策略网络参数；重复以上步骤，直至得到最优模型；根据保存的最优模型，与智能注采装置联动，获得油藏的状态信息。本发明的技术方案克服现有技术中的油藏注采优化方法，对已有信息利用率较低，需重复进行优化迭代，不能根据当前生产方案进行实时调整的问题。

公开(公告)号：CN118095667A

公开(公告)日：2024-05-28

申请号：CN202410524678.3

申请日：2024-04-29

申请人： 中国石油大学(华东)

发明人： 张凯 ,  孙子峰 ,  张黎明 ,  刘丕养 ,  严侠 ,  张华清 ,  张文娟 ,  王阳 ,  姚军 ,  孙海 ,  杨永飞

IPC分类号： G06Q10/063 ,  G06F17/11 ,  G06Q50/02 ,  G06N3/092 ,  G06N3/0464

摘要： 本发明公开了一种近期经验引导的油藏多类措施流场调控强化学习方法，属于油藏生产优化技术领域，主要包括以下步骤：确定需要优化的层位及注采优化变量；构建油藏离散和连续调控措施混合动作空间；基于混合动作空间，构建油藏多类措施流场调控混合深度强化学习智能体模型；将智能体模型与流场调控数值模拟器持续交互，生成油藏多类措施流场调控经验样本库；结合近期经验采样机制从样本库中采集近期调控经验，训练更新智能体模型，输出最优的油藏多类措施流场调控方案。本发明通过构建混合深度强化学习智能体可以对层位封堵和注采制度进行高精度调控，同时基于近期调控经验可实现更高效的优化。

公开(公告)号：CN118095667B

公开(公告)日：2024-07-02

申请号：CN202410524678.3

申请日：2024-04-29

申请人： 中国石油大学(华东)

发明人： 张凯 ,  孙子峰 ,  张黎明 ,  刘丕养 ,  严侠 ,  张华清 ,  张文娟 ,  王阳 ,  姚军 ,  孙海 ,  杨永飞

IPC分类号： G06Q10/063 ,  G06F17/11 ,  G06Q50/02 ,  G06N3/092 ,  G06N3/0464

摘要： 本发明公开了一种近期经验引导的油藏多类措施流场调控强化学习方法，属于油藏生产优化技术领域，主要包括以下步骤：确定需要优化的层位及注采优化变量；构建油藏离散和连续调控措施混合动作空间；基于混合动作空间，构建油藏多类措施流场调控混合深度强化学习智能体模型；将智能体模型与流场调控数值模拟器持续交互，生成油藏多类措施流场调控经验样本库；结合近期经验采样机制从样本库中采集近期调控经验，训练更新智能体模型，输出最优的油藏多类措施流场调控方案。本发明通过构建混合深度强化学习智能体可以对层位封堵和注采制度进行高精度调控，同时基于近期调控经验可实现更高效的优化。

公开(公告)号：CN116663654B

公开(公告)日：2023-11-21

申请号：CN202310942706.9

申请日：2023-07-31

申请人： 中国石油大学(华东)

发明人： 辛国靖 ,  张凯 ,  张黎明 ,  孙子峰 ,  王中正 ,  刘丕养 ,  张华清 ,  严侠

IPC分类号： G06N3/092 ,  G06N3/096 ,  G06N3/0464 ,  G06N3/084 ,  G06Q50/02

公开(公告)号：CN116663654A

公开(公告)日：2023-08-29

申请号：CN202310942706.9

申请日：2023-07-31

申请人： 中国石油大学(华东)

发明人： 辛国靖 ,  张凯 ,  张黎明 ,  孙子峰 ,  王中正 ,  刘丕养 ,  张华清 ,  严侠

IPC分类号： G06N3/092 ,  G06N3/096 ,  G06N3/0464 ,  G06N3/084 ,  G06Q50/02

摘要： 本发明公开了一种基于历史调控经验的时间窗口迁移强化学习注采优化方法，属于油藏注采技术领域，包括如下步骤：步骤1、确定当前油藏目标任务时间窗口的优化井数和优化时间步；步骤2、获取现有源模型，冻结源模型中的特征提取层权重进行目标智能体的初始化操作；步骤3、通过梯度反向传播的方式训练得到最优目标智能体，完成目标模型的构建；步骤4、基于目标模型，读取当前油藏的状态信息，得到完整的生产制度，实现实时注采优化。本发明结合强化学习算法，借鉴源模型通过策略迁移，实现新时间窗口的快速优化，减少所需的数值模拟迭代次数。

公开(公告)号：CN118734722A

公开(公告)日：2024-10-01

申请号：CN202411225200.7

申请日：2024-09-03

申请人： 青岛理工大学

发明人： 张凯 ,  陈泽宇 ,  刘丕养 ,  张黎明 ,  辛国靖 ,  孙子峰 ,  张文娟 ,  王阳

IPC分类号： G06F30/27 ,  G06N3/006 ,  G06N3/092 ,  G06F111/04 ,  G06F119/14

摘要： 本发明公开了一种基于安全强化学习的油藏约束注采优化方法，属于油藏约束注采优化技术领域，包括如下步骤：构建油藏注采比约束注采优化模型和油藏注采比约束马尔可夫决策过程；基于WCSAC安全强化学习算法，构建油藏注采比约束注采调控强化学习智能体模型；智能体与油藏数值模拟持续交互，采集数据样本并存储到经验回放缓冲区中；训练奖励评论家网络、安全评论家网络、策略网络，直到达到最大训练回合轮次；利用训练完成的策略网络输出当前状态下最优的生产制度。本发明的强化学习方法能够在满足油藏注采比约束的前提下，根据油藏当前状态设计最优注采方案，实现油藏安全稳定生产，具有较好的科学和实际应用价值。