一种异构集群存储自适应数据负载的方法

    公开(公告)号:CN104270402A

    公开(公告)日:2015-01-07

    申请号:CN201410420267.6

    申请日:2014-08-25

    CPC classification number: H04L67/1002 H04L67/1097

    Abstract: 本发明公开一种异构集群存储自适应数据负载的方法,属于计算机系统存储领域;具体步骤为:①基本的负载的均衡,在系统初建时,根据节点的最大负载能力,将数据分布在集群的各个节点上;②自适应分布式的增量负载的均衡,在系统运行时,实时地收集各个节点资源占用情况,自适应地、动态地调整数据分布情况;③采用基于权重的hash方法,在系统初建时将数据的负载大小视为相同,把异构服务器的性能作为权重,在集群之间均衡地分布数据负载;本发明适用于在高压力、高并发读写、多用户、异构的大规模分布式存储系统可以处理异构的数据负载,自适应地根据负载调整其在服务器之间的分布。

    一种基于元搜索的网络信息采集器简单实现方法

    公开(公告)号:CN103902667A

    公开(公告)日:2014-07-02

    申请号:CN201410092387.8

    申请日:2014-03-14

    Inventor: 刘粉粉

    CPC classification number: G06F17/30864

    Abstract: 本发明提供一种基于元搜索的网络信息采集器简单实现方法,集成多个搜索引擎,对搜索关键词并行进行搜索采集,然后对采集信息进行有效的组织,及时发现最新信息,提供给用户用作分析的基础数据源,该方法适用的体系结构包括:生成采集起始URL模块,模拟浏览器行为模块,搜索结果列表页下载并结构化信息提取模块,网页去重,网页正文抽模块。能及时发现最新信息,提供给用户用作分析的基础数据源。

    基于连接池的多用户数据库访问高效率优化方法及系统

    公开(公告)号:CN103605727B

    公开(公告)日:2017-07-28

    申请号:CN201310576710.4

    申请日:2013-11-19

    Inventor: 刘粉粉

    Abstract: 本发明涉及数据库领域,公开了一种基于连接池的多用户数据库访问高效率优化方法及架构,包括连接池可动态伸缩大小以及集中管理多连接池,对建立的连接池进行集中统一的管理,获取所有连接池的基本信息,捕捉每个连接池的配置变化,并约束连接池某些配置的变化;存储每个连接池的配置信息,当配置信息发生变化时触发更新消息,实现连接池随应用变化而伸缩其大小。本发明适用于多用户、多类型应用访问数据库时,使整个数据库系统不会因为访问时连接的建立和销毁、连接的空置、不同类型应用连接的竞争等等不合理的连接池使用策略,而造成大量资源浪费,从而进一步的提高数据库访问效率和性能。

    基于连接池的多用户数据库访问高效率优化方法及架构

    公开(公告)号:CN103605727A

    公开(公告)日:2014-02-26

    申请号:CN201310576710.4

    申请日:2013-11-19

    Inventor: 刘粉粉

    CPC classification number: G06F17/30575

    Abstract: 本发明涉及数据库领域,公开了一种基于连接池的多用户数据库访问高效率优化方法及架构,包括连接池可动态伸缩大小以及集中管理多连接池,对建立的连接池进行集中统一的管理,获取所有连接池的基本信息,捕捉每个连接池的配置变化,并约束连接池某些配置的变化;存储每个连接池的配置信息,当配置信息发生变化时触发更新消息,实现连接池随应用变化而伸缩其大小。本发明适用于多用户、多类型应用访问数据库时,使整个数据库系统不会因为访问时连接的建立和销毁、连接的空置、不同类型应用连接的竞争等等不合理的连接池使用策略,而造成大量资源浪费,从而进一步的提高数据库访问效率和性能。

    一种高扩展、高性能的分布式存储体系结构

    公开(公告)号:CN103516809A

    公开(公告)日:2014-01-15

    申请号:CN201310494887.X

    申请日:2013-10-22

    Abstract: 本发明涉及计算机存储领域,公开了一种高扩展、高性能的分布式存储体系结构,包括存储节点,元数据节点,路由节点,配置节点,其中,以存储节点为核心,通过路由节点、元数据节点、配置信息节点的配合,简化复杂的存储协议,实现高扩展、高性能的分布式存储集群,并且实现简单可靠的负载均衡机制和高可用机制,其中,存储节点是体系的核心,元数据节点主要负责元数据的存储,元数据节点主要负责元数据的存储,配置节点存储集群的配置信息。本发明弥补了传统分布式存储系统的不足,使其体系结构所带来的高扩展、高性能、高可用等诸多特性,更加适用于大数据存储、云计算等需要存储海量数据的领域,因而具有非常广阔的发展前景。

    一种快速构建常用文件全文检索工具的方法

    公开(公告)号:CN104391941A

    公开(公告)日:2015-03-04

    申请号:CN201410684418.9

    申请日:2014-11-25

    Inventor: 刘粉粉

    CPC classification number: G06F17/30914 G06F17/30932 G06F17/30941

    Abstract: 本发明公开一种快速构建常用文件全文检索工具的方法,属于检索工具领域,具体步骤为:①文档解析模块读取所有的文件解析HTTP请求发送给中文分词模块;②中文分词模块对接收到HTTP请求中的属性内容进行分词;③全文索引建立模块定制索引服务类型;④检索模块对检索命令进行解析之后,进行相应操作,完成检索工具的构建;⑤用户提交查询词后,检索模块会对查询词进行分词等处理,并生成查询请求,然后在索引库中进行查询,并将查询所得结果呈现给用户;本发明实现个人和企业构建专属的搜索引擎,只需花费较少的时间和精力,即可达到自身的检索需求,轻松管理大量的内部文件。

    一种基于数据库同步的舆情分析系统优化方法

    公开(公告)号:CN103984777A

    公开(公告)日:2014-08-13

    申请号:CN201410248277.6

    申请日:2014-06-06

    CPC classification number: G06F17/30584

    Abstract: 本发明公开了一种基于数据库同步的舆情分析系统优化方法,在数据库同步环节对数据进行筛选,通过控制进入舆情分析系统的数据,进行舆情分析系统优化;在采集信息导入舆情分析系统时,在数据同步模块中加入舆情包含词库、舆情排除词库信息,把数据库模块中的信息分词后,先后比对这两个词库中的词汇,若这条信息的词汇里有舆情包含词库词汇且没有舆情排除词库的词汇,则这条信息是舆情信息导入到舆情分析系统里,这样减小了舆情分析系统数据量的压力,提升了分析灵敏度和分析结果的准确性。

    一种动态扩展数据库集群的方法

    公开(公告)号:CN103970907A

    公开(公告)日:2014-08-06

    申请号:CN201410228562.1

    申请日:2014-05-28

    Inventor: 刘粉粉

    CPC classification number: G06F17/30306

    Abstract: 本发明提供一种动态扩展数据库集群的方法,适用于具有可动态扩展的数据库集群在资源包括:内存、CPU、磁盘等快接近满载时,自动触发式的增加服务器节点到集群,实现无人工操作干预的实时扩展。该系统提供了一种数据库集群的实时自动扩展途径,使得具有动态横向扩展能力的数据库集群自动增加资源,实现实时的扩展;解决当资源匮乏时带来的性能下降、功能出错和系统崩溃等影响正常业务的异常问题,提高系统的可用性和稳定性。

Patent Agency Ranking