自动优化Storm并行度的方法、终端设备及存储介质

    公开(公告)号:CN107748711B

    公开(公告)日:2021-01-12

    申请号:CN201710960909.5

    申请日:2017-10-17

    IPC分类号: G06F11/34 G06F11/30

    摘要: 本发明公开一种自动优化Storm并行度的方法,包括如下步骤,S1:设置初始并行度Nmax和最小观察时长T,进入S2;S2:配置并保存并行度N及相关参数,进入S3;S3:提交计算拓扑到Storm集群,进入S4;S4:开始观察,对定时器、每个消息源和消息处理者的执行时长和执行次数清零,进入S5;S5:累加并记录观察时长T0和每个消息源和消息处理者的执行时长和执行次数,直到T0大于或等于T,进入S6;S6:计算每个消息源和消息处理者的实时并行度,并和各自的N进行比较,若相等,则返回S4,否则进入S7;S7:将S6中计算的实时并行度赋值给并行度N并保存,此时若Storm停止运行,则退出,否则返回S4。

    基于数据驱动的研判分析方法、装置、终端和存储介质

    公开(公告)号:CN107633085B

    公开(公告)日:2020-06-19

    申请号:CN201710894179.3

    申请日:2017-09-28

    摘要: 本发明涉及一种基于数据驱动的研判分析方法和装置,所述方法可包括以下步骤:S1.输入数据源,生成数据对象,具体过程为:选择需要输入的数据源,以人员线索数据、身份线索数据和行为线索数据三个类别来进行数据输入,生成包含数据类别、数据量、归属人和生成时间属性的数据对象,并赋予数据对象对应的分析方法;S2.调用数据对象对应的分析方法,产生分析结果;S3.判断分析结果是否表明研判成功,若是,则转至步骤S6,否则转至S4;S4.判断是否需要进一步利用该分析结果,若是,则生成新的数据对象,转至步骤S5;否则表明分析失败,转至步骤S6;S5.重复S2‑S4,直到整个分析过程结束;S6.记录步骤S2‑S5的整个分析过程,形成分析树。

    一种支持均衡资源的SOLR集群扩展方法及系统

    公开(公告)号:CN106648897B

    公开(公告)日:2019-11-22

    申请号:CN201611234696.X

    申请日:2016-12-28

    IPC分类号: G06F9/50 G06F9/52

    摘要: 本发明提出本发明提出一种支持均衡资源的SOLR集群扩展方法及系统,在新服务器加入时,自动根据服务器上的节点数和数据量的增长情况创建新的分片,保证新数据按均衡入库到相应的服务器上。通过该方法及系统可以自动在SOLR的集群中,灵活的根据系统性能和数据量添加服务器到集群中,然后系统会自动根据服务器性能创建分片和复制集,均衡数据量到相应的SOLR Core中,无需人工手动添加分片,也不会造成局部热点的现象。

    移动通信装置取证方法和系统

    公开(公告)号:CN108536855A

    公开(公告)日:2018-09-14

    申请号:CN201810341852.5

    申请日:2018-04-17

    IPC分类号: G06F17/30 G06F17/27

    摘要: 本发明公开了一种移动通信装置取证方法,其包括:从移动通信装置取得内容型数据;判断该内容型数据是否包括敏感通联内容;若该内容型数据包括敏感通联内容,以关键线索的形式呈现该内容型数据;以及若该内容型数据不包括敏感通联内容,从该内容型数据中过滤掉干扰信息,而后呈现该内容型数据。本发明还公开了一种移动通信装置取证系统,可实现前述的移动通信装置取证方法。

    基于多维度的角色权限管理方法、终端设备及存储介质

    公开(公告)号:CN107679422A

    公开(公告)日:2018-02-09

    申请号:CN201711007329.0

    申请日:2017-10-25

    IPC分类号: G06F21/62

    CPC分类号: G06F21/6218 G06F2221/2141

    摘要: 本发明公开一种基于多维度的角色权限管理方法,包括如下步骤,S1:建立数据库,进入S2步骤;S2:给每个角色分配相应的权限,并将对应关系分别存储于操作功能权限表、管理范围权限表、数据范围权限表和数据密级权限表中,再赋予每个用户对应的角色,并将对应关系存储于角色表中,进入S3步骤;S3:用户登录,并根据角色表中对应的角色获取操作功能权限表、管理范围权限表、数据范围权限表和数据密级权限表中对应的权限范围。本发明通过对角色权限进行了多维度的管理,从本质上解决了不同业务岗位的应用管理和数据的不同权限要求,也极大地方便了企业应用系统管理人员的系统权限管理工作,提高用户对系统的数据安全性要求。

    一种支持均衡资源的Elasticsearch集群扩展方法

    公开(公告)号:CN107566531A

    公开(公告)日:2018-01-09

    申请号:CN201710977782.8

    申请日:2017-10-17

    IPC分类号: H04L29/08 G06F9/50 G06F17/30

    摘要: 本发明涉及一种支持均衡资源的Elasticsearch集群扩展方法,可包括以下步骤:S1.根据服务器硬件资源安装Elasticsearch节点;S2.设置动态集群的基本参数和记录动态集群的一些状态值,并将这些参数和动态值以数据库或XML的形式持久化到磁盘中;S3.创建一个线程,定时检测文档数和占用空间,如果达到阈值,则根据系统参数动态创建分片和调整入库策略。本发明能对Elasticsearch集群中根据服务器的性能负载均衡存储相应比例的数据量,并支持按目标数据量和磁盘空间阈值自动创建库和分片,动态扩展集群;既避免了一个分片数据量太大,也避免了新数据插入时出现局部热点的问题,同时兼任新的服务器加入集群后,能自动识别并对Elasticsearch集群的库和分片做负载均衡。