-
公开(公告)号:CN114036183A
公开(公告)日:2022-02-11
申请号:CN202111407205.8
申请日:2021-11-24
Applicant: 杭州安恒信息技术股份有限公司
IPC: G06F16/242 , G06F16/25
Abstract: 本申请公开了一种数据ETL处理方法、装置、设备及介质,包括:获取待处理数据中数据样例对应的源字段;配置每个所述源字段对应的字段解析规则;基于预设转换逻辑将每个所述字段解析规则转换为相应的Flink SQL语句;将所述Flink SQL语句下发至FLink引擎,并利用所述FLink引擎对所述待处理数据进行ETL处理。这样,将字段解析规则通过预设转换逻辑转换为相应的Flink SQL语句,SQL语句具有标准性、易懂性、灵活扩展性,可读性较高,容易扩展,能够降低ETL处理的人工成本和时间成本,从而提升数据ETL处理效率,并且,Flink引擎的大数据实时流数据处理性能较高,能够避免处理时的数据积压。
-
公开(公告)号:CN115460268A
公开(公告)日:2022-12-09
申请号:CN202211071513.2
申请日:2022-09-02
Applicant: 杭州安恒信息技术股份有限公司
IPC: H04L67/141 , H04L67/06 , H04L67/1095 , H04L67/56 , G06F16/22 , G06F16/27
Abstract: 本申请公开了一种内外网之间的请求传输方法、装置、设备及介质,涉及大数据技术领域,包括:获取目标用户端发送的待处理请求,将对应的请求信息保存至外网数据库的第一请求表;通过外网数据库将第一请求表中的请求信息同步存储至内网数据库的第二请求表,以便内网服务从第二请求表中读取到请求信息并将对应的待处理请求转发至内网应用进行处理;通过内网服务获取对应的请求响应,将请求响应存储至内网数据库的第一响应表,然后通过内网数据库将第一响应表中的请求响应同步存储至外网数据库的第二响应表;从第二响应表中查询请求响应,将请求响应返回给目标用户端。通过数据库同步请求信息和请求响应的方式更加高效,实现了内外网请求的实时转发。
-
公开(公告)号:CN117742669A
公开(公告)日:2024-03-22
申请号:CN202311529117.4
申请日:2023-11-16
Applicant: 杭州安恒信息技术股份有限公司
Abstract: 本申请涉及一种插件式软件平台开发方法、装置及插件式软件平台,其中,该插件式软件平台开发方法包括:通过采用微服务架构,搭建主平台;设计可插拔式的软件框架;构建多个软件模块,将多个软件模块以插件的形式集成到软件框架中;通过软件框架将多个软件模块加载到主平台上。通过本申请,解决了现有技术中所有的功能都集成在一个大型的程序中,程序的可维护性和可扩展性较差的问题,大大提高了软件开发的效率和质量。
-
-