一种实现不同数据源之间数据处理的方法及装置

    公开(公告)号:CN103916368A

    公开(公告)日:2014-07-09

    申请号:CN201210593327.5

    申请日:2012-12-31

    Abstract: 本发明提供一种实现不同数据源之间数据处理的方法及装置。所述方法包括:解析用户发出的数据处理命令,其中所述数据处理命令中所涉及的数据包括第一数据源和第二数据源中的数据;根据所述数据处理命令进行任务分解,分解后的所述数据处理命令包括对所述第一数据源中的数据操作的第一命令、对所述第二数据源中的数据操作的第二命令以及对所述第一数据源中的数据和所述第二数据源中的数据组合操作的第三命令;向所述第一数据源下发执行所述第一命令,向所述第二数据源下发执行所述第二命令,并根据所述第一命令和所述第二命令的执行结果,执行所述第三命令。本发明所述方法和装置能够实现不同数据源之间的透明访问,提高数据处理的效率。

    一种并行计算系统中的磁盘缓存方法及装置

    公开(公告)号:CN103914399A

    公开(公告)日:2014-07-09

    申请号:CN201210591659.X

    申请日:2012-12-31

    Abstract: 本发明提供了一种并行计算系统中的磁盘缓存方法及装置。其中所述方法包括:预先分配记录数据和消息数据在所述处理数据内存区中各自所占的比例;在数据加载过程中若记录数据在处理数据内存区中的容量将要超过预先分配的比例时,则以Hash桶为单位将部分记录数据缓存到磁盘空间;在计算任务对记录数据的遍历访问过程中,若将要求访问的Hash桶位于磁盘空间,并且处理数据内存区中剩余的记录数据空间不足以载入所述将要求访问的Hash桶,则将处理数据内存区中已访问过的Hash桶逐个缓存到磁盘空间,直至释放的空间能够载入所述将要求访问的Hash桶。本发明能在基于BSP模型的并行迭代计算系统中实现数据向磁盘的自动化缓存。

    一种数据存储方法及设备
    83.
    发明公开

    公开(公告)号:CN103905517A

    公开(公告)日:2014-07-02

    申请号:CN201210587462.9

    申请日:2012-12-28

    Inventor: 郭磊涛 钱岭 王娟

    Abstract: 本发明公开了一种数据存储方法,基于数据存储的基本需求以及特殊需求,确定性价比最高的数据存储计划,并根据性价比最高的数据存储计划进行数据存储,保证了数据存储的QoS需求。本发明还同时公开了一种数据存储设备。

    一种PaaS平台健康状态管理方法和装置

    公开(公告)号:CN103870904A

    公开(公告)日:2014-06-18

    申请号:CN201210537741.4

    申请日:2012-12-12

    Inventor: 熊龙 邓超 钱岭

    Abstract: 本发明实施例提供一种PaaS平台健康状态管理方法和装置,管理节点可以根据服务节点的运行状态信息计算特征向量,并利用该特征向量来匹配规则,并根据利用匹配出的规则进行推理获得的推理结果,来确定该服务节点运行是否正常,并可以根据服务节点运行状态来对负载进行分配。相对于现有技术中,根据服务节点的负载与预设值比较来确定服务节点运行是否正常的方案,利用预先设置的规则进行推理可以有效解决预设值难以设定,准确性较低的问题,从而可以准确判断服务节点运行是否正常,并由此提高负载分配的准确性。

    网页信息处理的方法及装置

    公开(公告)号:CN103678378A

    公开(公告)日:2014-03-26

    申请号:CN201210345265.6

    申请日:2012-09-17

    Inventor: 胡珉 钱岭 孙少陵

    CPC classification number: G06F17/30902

    Abstract: 本发明提供一种网页信息处理方法及装置,涉及互联网技术领域。方法包括:获取属于同一类型网站中的多个网页;分别对所述多个网页进行分块处理,获得第一类网页区块以及多个第二类网页区块;其中,所述第一类网页区块为属于同一个网页并且为所述多个网页相同的网页结构元素;所述第二类网页区块包括:所述多个网页中不相同的网页正文部分分别对应的网页结构元素;存储所述第一类网页区块和各个网页的正文部分分别对应的所述第二类网页区块。采用本发明的方案,可以加快网页显示速度,减小网络系统负荷,节约网络资源消耗。

    随机写的方法和转换器
    86.
    发明公开

    公开(公告)号:CN103176912A

    公开(公告)日:2013-06-26

    申请号:CN201110441851.6

    申请日:2011-12-26

    Abstract: 本发明公开了一种随机写的方法及转换器,其中,该方法包括:接收下发的随机写序列,对该随机写序列进行排序处理;根据排序后写序列的地址,获取该写序列的空闲地址;将存储介质上与空闲地址对应地址上的数据读入后置于空闲地址中,生成在连续地址上数据呈连续排列的连续写序列,将该连续写序列写入存储介质的对应地址上。本发明的随机写的方法和转换器,将低速的随机写转换为高速的连续写,充分利用固态硬盘的高速连续写的性能,大大提高了固态硬盘的随机写速度性能。

    虚拟机创建方法、虚拟机管理系统及相关设备

    公开(公告)号:CN103067425A

    公开(公告)日:2013-04-24

    申请号:CN201110320445.4

    申请日:2011-10-20

    Abstract: 本发明公开了一种虚拟机创建方法、虚拟机管理系统及相关设备,用以提升网络和镜像存储服务器的性能,缩短创建虚拟机所消耗的时间。虚拟机创建方法,包括:虚拟机管理器接收用户发起的虚拟机创建请求;确认镜像缓冲池中具有虚拟机创建请求指定类型的虚拟机操作系统镜像时,根据虚拟机创建请求指定的资源需求从由大量的物理机组成的硬件资源池中选择部署虚拟机的目的物理机,镜像缓冲池建立在硬件资源池中,由缓存各个类型的虚拟机操作系统镜像的所有物理机组成;将虚拟机创建请求指定类型的虚拟机操作系统镜像从镜像缓冲池转移到目的物理机的虚拟机运行目录下;并命令目的物理机启动虚拟机。

    一种任务调度的方法、设备和系统

    公开(公告)号:CN102567086A

    公开(公告)日:2012-07-11

    申请号:CN201010623545.X

    申请日:2010-12-30

    Abstract: 本发明公开了一种任务调度的方法、设备和系统,该方法包括:确定备作业节点的资源信息以及存储任务的各队列对应资源的优先级信息;根据各作业节点的资源信息和各队列对应资源的优先级信息将所述队列中的任务分配到对应的作业节点。本发明实施例中,通过统筹考虑各种类型的作业,根据各作业节点的资源信息将队列中的任务分配到合适的作业节点,以合理调度各种类型的作业。通过统一管理各种类型的作业,不会出现某种类型的作业消耗系统的所有资源导致其他作业堵塞的情况。

    移动广告测量系统、方法和广告控制及业务控制子系统

    公开(公告)号:CN101754166B

    公开(公告)日:2012-07-11

    申请号:CN200810239252.4

    申请日:2008-12-05

    Abstract: 本发明涉及移动通信技术领域,特别涉及一种广告数据测量技术,提供一种移动广告测量系统、方法、移动广告控制子系统和移动业务控制子系统,用以实现移动广告的实时测量并且简化移动广告测量的复杂性。本发明实施例提供的移动广告测量系统中,移动业务控制子系统在广告发布过程中实时获得广告测量数据,并可以根据上报条件上报给移动广告控制子系统,移动广告控制子系统可以根据广告任务数据自动过滤无效广告测量数据,从而实现了广告的实时测量并简化了广告测量工作。进一步还可以根据之前已经接收的历史广告反馈信息记录数据,对广告测量数据中的广告反馈信息记录数据进行防欺诈判定,从而进一步提高了广告测量数据的准确率。

    一种数据处理和查询方法和装置

    公开(公告)号:CN102193917A

    公开(公告)日:2011-09-21

    申请号:CN201010115869.2

    申请日:2010-03-01

    Abstract: 本发明的实施例公开了一种数据处理和查询的方法和装置,该处理方法包括:为数据建立第一级索引,所述数据存储在至少一个文件中,所述第一级索引用于索引各文件,所述文件中存储有相应的数据;在各文件中分别建立第二级索引,所述第二级索引用于在相应文件中索引相应的数据。该查询方法包括:根据接收到的数据查询请求、利用第一级索引在各个文件中查找,得到查询到的文件,该文件存储有该查询请求所查询的数据;根据所述数据查询请求、利用第二级索引在所查询到的文件中查找,得到该查询请求所查询的数据。通过本发明,提高了大量数据的查询速度。

Patent Agency Ranking