基于流式计算的海量数据清洗的方法

    公开(公告)号:CN111858569B

    公开(公告)日:2024-09-20

    申请号:CN202010616966.3

    申请日:2020-07-01

    IPC分类号: G06F16/215 G06F16/25

    摘要: 本发明基于流式计算的海量数据清洗的方法,包括如下步骤:异构数据源通过数据接入模块统一接入数据,并以统一的格式推送入消息队列Kafka中,等待数据清洗,并将接入情况反馈给调度中心;配置清洗算子和设计算子流程图;计算集群中的计算节点与调度中心通信,调用算子流程图,按照设计的算子流程图的流程进行清洗操作,并将清洗运行情况反馈给调度中心。本发明采用分布式消息队列Kafka统一接入数据,通过Kafka将数据源格式进行统一,方便数据清洗统一处理。多个计算节点采用分布式并列形式部署,能够根据需求动态横向扩展,面对大批量数据有很强的鲁棒性。通过拖拽式设计清洗流程可以满足大部分清洗流程工作,具有很强的通用性。

    钻孔压水试验中消除承压水干扰的方法

    公开(公告)号:CN118549314A

    公开(公告)日:2024-08-27

    申请号:CN202410755431.2

    申请日:2024-06-12

    IPC分类号: G01N15/08 G01F1/00

    摘要: 本发明涉及钻孔压水试验中消除承压水干扰的方法,包括如下步骤:在钻孔的内外布置涌水流量观测和钻孔压水试验器具;通过流量计观测钻孔孔口的涌水流量;绘制钻孔孔口的涌水流量Q与时间T的关系图;进行压水试验,同时通过流量计观测涌水流量;绘制压水过程中钻孔孔口的涌水流量Q与时间T的关系图;在Q~T图上获取压水前后涌水流量Q的增量ΔQ;将流量表的读数Q0与ΔQ的差值作为压水试验试段的压入流量。采用本发明,可以不考虑栓塞有效性,在厘清承压水涌水流量与时间规律的基础上,结合在压水过程中同步观测钻孔孔口涌水流量获得流量增量,通过计算确定试段压入流量以消除承压水对钻孔压水试验的干扰。

    易崩解软质岩饱和单轴抗压强度的确定方法

    公开(公告)号:CN118533632A

    公开(公告)日:2024-08-23

    申请号:CN202410755271.1

    申请日:2024-06-12

    IPC分类号: G01N3/08 G01N33/24 G01N1/04

    摘要: 本发明涉及易崩解软质岩饱和单轴抗压强度的确定方法,包括如下步骤:采取6组以上样品;分别对每组样品进行天然含水率试验,获得相应的岩石天然含水率,记为ωai;分别对每组样品进行饱和吸水率试验,获得相应的岩石饱和吸水率,记为ωbi;分别对每组样品进行单轴抗压强度试验,获得相应的岩石天然单轴抗压强度,记为Rai;拟合绘制出R~ω关系曲线图;复查;计算出岩石样品饱和吸水率的平均—值ωb;—从ωb在ωa坐标轴上的对应点→Ra~ωa关系曲线→Ra坐标轴上的相应点,该相应点所对应的数值即为岩石饱和单轴抗压强度。本发明理论有据、实践可行,结果准确、可靠,有效解决了易崩解软质岩饱和单轴抗压强度参数值确定的难题。

    一种用于高承压水地层的取芯装置及其取芯方法

    公开(公告)号:CN117722148A

    公开(公告)日:2024-03-19

    申请号:CN202311591860.2

    申请日:2023-11-27

    摘要: 本发明公开了一种用于高承压水地层时的取芯装置。它包括套管结构、套管接头和防止钻杆冒水结构;多个套管结构通过套管接头纵向连接;钻杆由上至下穿过套管结构、套管接头,下端与防止钻杆冒水结构连接;防止钻杆冒水结构位于岩芯管上方;防止钻杆冒水结构上设置泥浆进孔和排水孔;泥浆进孔呈垂直布置;排水孔呈水平布置;泥浆孔单向阀门位于泥浆进孔下端;出水孔单向阀门设置在排水孔出口端;水压传感器设置在排水孔的出口端、且位于出水孔单向阀门内侧。本发明具有提高钻孔的质量,保障高承压水地层钻孔取芯的进行,以及取芯完孔后维持钻孔的长期稳定,减少灾害发生的优点。本发明还公开了用于高承压水地层时的取芯装置的取芯方法。

    一种外水压力折减系数测试装置及测试方法

    公开(公告)号:CN117309224A

    公开(公告)日:2023-12-29

    申请号:CN202311133181.0

    申请日:2023-09-04

    IPC分类号: G01L11/00 G01F23/00

    摘要: 本发明公开了一种外水压力折减系数测试装置,涉及工程勘察、岩土试验领域。它包括地表和含水带,含水带倾向方向设置有竖向钻孔,含水带下方设置有勘探平洞;竖向钻孔内安装有水位观测管,水位观测管底部插入含水带内;所勘探平洞通过水平钻孔插入含水带内,空心钢管一端位于水平钻孔内、另一端位于勘探平洞内,位于勘探平洞的空心钢管与压力表连接。发明结合已有勘探钻孔和平洞,根据丰水期、枯水期含水带不同深度处水位、水压观测数据及相关性来确定外水压力折减系数,本发明所得成果准确、可靠,有效解决了如何确定地下洞室外水压力折减系数的难题。本发明还涉及这种外水压力折减系数测试装置的测试方法。

    应用于第四系地层工程勘察的力学测试装置及其使用方法

    公开(公告)号:CN117211774A

    公开(公告)日:2023-12-12

    申请号:CN202311084090.2

    申请日:2023-08-28

    IPC分类号: E21B49/00 E21B47/00 E21B47/12

    摘要: 本发明公开了一种应用于第四系地层工程勘察的力学测试装置,涉及工程钻探测试技术领域。它包括孔内测试设备和孔外设备;孔内测试设备上部与钻杆连接,下部与钻具连接,孔内测试设备包括贯通圆孔和环形空腔;环形空腔内设置有数据收集、存储及触发控制系统,测试机械系统,电源;数据收集、存储、触发控制系统包括数据收集系统、存储系统、触发控制系统;孔外设备为地表时钟系统。本发明便于操作掌握,设备费用低,大幅降低钻探测试的劳动强度和耗时,采集的数据可信度高,具有高效、经济、准确、应用范围广的优点。对第四系地层的勘察测试具有重要的意义。本发明公还涉及这种应用于第四系地层工程勘察的力学测试装置的使用方法。