网络爬虫的识别方法及装置、计算机可读存储介质

    公开(公告)号:CN111680206A

    公开(公告)日:2020-09-18

    申请号:CN202010810543.5

    申请日:2020-08-13

    IPC分类号: G06F16/951

    摘要: 本申请实施例涉及网络安全技术领域,公开了一种网络爬虫的识别方法及装置、计算机可读存储介质,该方法包括:向目标客户端植入前端数据获取模块,该前端数据获取模块用于获取目标客户端预设数量种类的前端数据;进而接收前端数据获取模块回传的目标前端数据;若目标前端数据的种类数量等于预设数量,判断目标前端数据是否满足预设的网络爬虫数据特征,该网络爬虫数据特征表征网络爬虫的操作规律;若目标前端数据满足预设的网络爬虫数据特征,确定目标客户端为网络爬虫。实施本申请实施例公开的网络爬虫的识别方法,能够识别出网络中的网络爬虫,以避免网络爬虫带来的危害。

    一种黑链检测方法及装置
    13.
    发明授权

    公开(公告)号:CN117395022B

    公开(公告)日:2024-07-16

    申请号:CN202311117226.5

    申请日:2023-08-31

    IPC分类号: H04L9/40 H04L61/30

    摘要: 本申请涉及一种黑链检测方法及装置,其中包括:根据目标网站的域名,确定目标网站的目标网页中所包括的目标链接的类型;根据目标链接的类型,获得目标链接的第一分值;根据目标网页的页面元素特征,对目标链接的属性进行评估,获得目标链接的第二分值;当目标链接的第一分值和第二分值满足预设分值条件时,确定目标链接为黑链。本申请在进行黑链检测时,通过对目标链接的相关属性进行层层的加权,并根据加权计算获得的分值判断目标链接是否为黑链,能减少对黑链的误报,有利于提高用户体验。

    一种集群节点的故障检测方法及电子设备

    公开(公告)号:CN118337597A

    公开(公告)日:2024-07-12

    申请号:CN202410509594.2

    申请日:2024-04-26

    摘要: 本发明公开了一种集群节点的故障检测方法及电子设备。所述方法包括:获取集群节点在多种预设指标下的实时参数;确定实时参数是否满足对应的判定条件;确定是否满足第一预设条件,第一预设条件为多种预设指标中的目标指标的数量大于预设数量阈值,集群节点在目标指标下的实时参数不满足对应的判定条件;获取集群节点在目标指标下的历史数据;确定是否满足第二预设条件,第二预设条件为集群节点的实时参数与历史数据之间的倍数超过预设倍数阈值;在满足第一预设条件和第二预设条件中的至少一种时,确定集群节点出现故障。本发明通过综合考虑集群节点在多种预设指标下的实时参数、对应的预设条件以及对应的历史数据,提高判断故障的准确性。

    一种网络流量调度管理方法及系统

    公开(公告)号:CN117749520A

    公开(公告)日:2024-03-22

    申请号:CN202311865192.8

    申请日:2023-12-29

    IPC分类号: H04L9/40

    摘要: 本发明涉及网络安全防护技术领域,提供一种网络流量调度管理方法及系统。所述方法包括实时获取不同节点各个LVS的回溯数据;基于所述回溯数据和预设流量调度判断条件,判断每一LVS是否需要进行流量调度;若需要进行流量调度,则根据不同的流量调度方式动态更新主数据仓库;将所述主数据仓库当前LVS配置数据同步至不同节点各个LVS的本地数据仓库;以及当所述本地数据仓库的数据发生更新时,记录本地数据仓库的数据更新时间;根据所述本地数据仓库的数据更新时间,判断是否更新当前LVS配置文件;若更新,则读取与当前LVS相关的配置数据;并依据所述配置数据生成更新后的LVS配置文件。本发明能够自适应地应对流量和服务的变化,实现快速的流量调度。

    一种API请求的人机验证方法及系统

    公开(公告)号:CN117749512A

    公开(公告)日:2024-03-22

    申请号:CN202311819643.4

    申请日:2023-12-27

    发明人: 余心成 吴春来

    IPC分类号: H04L9/40

    摘要: 本发明提供了一种AP I请求的人机验证方法及系统,JS‑SDK劫持客户端发送的第一AP I请求数据,并将第一AP I请求数据发送至防护服务器;若JS‑SDK接收到防护服务器根据第一AP I请求数据返回的人机验证数据,则JS‑SDK根据人机验证数据对客户端执行人机验证处理,并获得验证操作数据;JS‑SDK将验证操作数据发送至防护服务器,以使得防护服务器根据验证操作数据返回验证结果数据;若JS‑SDK根据验证结果数据确定客户端为正常状态,则将第一AP I请求数据发送至网站服务器,以使得网站服务器根据第一AP I请求数据向客户端返回第一资源响应数据。本发明使得对客户端发送的AP I请求的人机验证方法更高效且安全。

    一种网站安全防护方法及装置

    公开(公告)号:CN114285639B

    公开(公告)日:2023-11-24

    申请号:CN202111597233.0

    申请日:2021-12-24

    IPC分类号: H04L9/40 G06F16/955

    摘要: 本申请实施例涉及一种网站安全防护方法及装置,通过根据网站的访问请求数据,确定发送访问请求的至少一目标IP地址,以及目标IP地址发送的访问请求对应的URL信息和错误状态信息;根据目标IP地址发送的访问请求对应的URL信息和错误状态信息,对目标IP地址进行危险等级评估,获得目标IP地址对应的危险等级信息;根据目标IP地址对应的危险等级信息,对目标IP地址进行安全防护响应处理。从而可避免使用较为复杂且计算量大的算法或模型,尽可能减少了第三方服务依赖和人为干预,同时提高了系统检测速度并减少资源负载。

    网络爬虫识别方法、系统、装置及计算机存储介质

    公开(公告)号:CN114006711B

    公开(公告)日:2023-11-24

    申请号:CN202010741262.9

    申请日:2020-07-28

    IPC分类号: H04L9/40

    摘要: 一种网络爬虫识别方法、系统、装置及计算机存储介质,该方法包括:获取植入至客户端的前端系统回传的鼠标移动数据,所述鼠标移动数据包括若干个采样点分别对应的鼠标采样信息;按照预设的异常检测规则对所述若干个采样点分别对应的鼠标采样信息进行异常检测;在检测到所述鼠标移动数据存在异常时,将所述客户端识别为网络爬虫;拦截被识别为网络爬虫的客户端发送的访问请求。实施本发明实施例,能够通过鼠标移动数据对网络爬虫进行识别,即使网络爬虫试图通过伪造浏览器UA或者更换IP地址的方式进行伪装,也可以准确识别。

    一种网站安全防护方法及装置

    公开(公告)号:CN116455640A

    公开(公告)日:2023-07-18

    申请号:CN202310429656.4

    申请日:2023-04-20

    摘要: 本发明提供了一种网站安全防护方法及装置,首先利用第一威胁度计算模型对目标IP地址对应的实时请求特征数据进行处理,获得目标IP地址对应的第一威胁度分值;当目标IP地址对应的第一威胁度分值大于或者等于第一分数阈值时,对目标IP地址进行防护处理。本发明实施例通过对目标IP地址的威胁度进行评估,与现有技术相比,不仅可实现针对具体的IP地址进行防护,而且可实现根据威胁度评估结果对目标IP地址采取不同的防护策略,有利于提高安全防护的效率和效果。