一种存储扩容方法、装置、计算节点及存储设备

    公开(公告)号:CN105205067B

    公开(公告)日:2019-11-12

    申请号:CN201410272846.0

    申请日:2014-06-18

    IPC分类号: G06F16/27 G06F16/28 H04L29/06

    摘要: 本发明实施例提供一种存储扩容方法、装置、计算节点及存储设备。所述数据库系统还包括存储节点,与所述计算节点连接;所述计算节点能够通过运行存储控制机制与所述存储节点通信,对所述存储节点的第一存储单元进行存储控制,所述与所述存储节点通信利用第一协议进行;所述计算节点还与存储设备连接,所述方法包括:利用第二协议与所述存储设备通信,识别出所述存储设备的第二存储单元,其中,所述第二协议与所述第一协议不同;将识别出的所述第二存储单元模拟为所述计算节点通过运行所述存储控制机制能够识别的存储系统。本发明实施例不利用数据库系统的现有协议就能实现数据库系统的扩容。

    视频推荐方法、装置、电子设备和存储介质

    公开(公告)号:CN110019943A

    公开(公告)日:2019-07-16

    申请号:CN201710812519.3

    申请日:2017-09-11

    摘要: 本发明实施例提供一种视频推荐方法、装置、电子设备和存储介质。所述方法包括获取用户在预设时间段内的目标人口统计学特征对应的特征向量embelding和目标历史视频特征对应的embelding,其中,所述目标人口统计学特征对应的embelding包括目标显著特征的embelding和目标不显著特征embelding;根据目标显著特征对应的embelding、目标不显著特征对应的embelding和目标历史视频特征对应的embelding,以及预先建立的深度评分模型,确定用户对每一候选视频的评分;根据用户对每一候选视频的评分,确定用户的推荐视频。所述方法通过考虑所述用户的目标不显著特征对应的embelding对于视频推荐的影响,可更加全面对候选模型进行进一步筛选,得到更符合用户偏好的推荐视频,能够提高视频推荐的准确性。

    一种基于T-树的索引优化方法及装置

    公开(公告)号:CN109254962A

    公开(公告)日:2019-01-22

    申请号:CN201710548181.5

    申请日:2017-07-06

    IPC分类号: G06F16/22

    摘要: 本发明实施例提供一种基于T-树的索引优化方法及装置,所述方法包括:获取包含有批量数据的数据块,所述数据块的数据量根据T-树中的索引节点保存的数据量所确定,其中,所述索引节点的索引信息包括所述索引节点保存的数据量;根据所述数据块的最大数值和最小数值与所述索引信息中的索引数值的最大值和最小值的比较结果、以及第一预设规则,生成新的索引节点;根据所述新的索引节点和第二预设规则,将所述新的索引节点融入到原始索引中。所述装置执行上述方法。本发明实施例提供的基于T-树的索引优化方法及装置,在大批量插入数据的场景下,优化了原始索引,能够提高T-树索引的响应速度。

    一种网站数据爬取方法及装置

    公开(公告)号:CN108255870B

    公开(公告)日:2021-06-01

    申请号:CN201611249114.5

    申请日:2016-12-29

    IPC分类号: G06F16/951 G06F16/955

    摘要: 本发明提供了一种网站数据爬取方法及装置。该方法包括:将待爬取的网站数据进行标准化处理,待爬取的网站数据包括多个统一资源定位符URL,获取各个统一资源定位符URL的正则表达式;根据各个统一资源定位符URL的正则表达式获取各个统一资源定位符URL的权重值,获取待爬取的统一资源定位符URL的正则表达式权重关系表;根据正则表达式权重关系表获取目标待爬取的网站数据,对目标待爬取的网站数据进行爬取。本发明降低了待爬取的统一资源定位符URL的数量,提高了爬取效率,同时提高了爬取的准确性。

    SQL执行方法及装置
    25.
    发明授权

    公开(公告)号:CN108255852B

    公开(公告)日:2020-09-11

    申请号:CN201611244308.6

    申请日:2016-12-29

    摘要: 本发明公开一种SQL执行方法及装置,能解决现有技术出现的因SQL支撑标准不一所导致的产品学习难度大,开发、运维及项目管理难度大且成本高的问题,实现不同SQL型分布式内存数据库的统一开发。该方法包括:获取客户端提交的业务SQL请求,其中,所述业务SQL请求中包含待处理的SQL;利用训练好的分类器对所述待处理的SQL进行分类,若所述待处理的SQL不属于预先划分的SQL类型,则对所述待处理的SQL进行预处理,得到标准SQL;将所述标准SQL提交至对应的SQL型分布式内存数据库执行,在所述SQL型分布式内存数据库执行完毕后,获取执行结果,并反馈给所述客户端,其中,所述预先划分的SQL类型包括所有SQL型分布式内存数据库共同支持的最低SQL标准的SQL类型。

    一种网站数据爬取方法及装置

    公开(公告)号:CN108255870A

    公开(公告)日:2018-07-06

    申请号:CN201611249114.5

    申请日:2016-12-29

    IPC分类号: G06F17/30

    摘要: 本发明提供了一种网站数据爬取方法及装置。该方法包括:将待爬取的网站数据进行标准化处理,待爬取的网站数据包括多个统一资源定位符URL,获取各个统一资源定位符URL的正则表达式;根据各个统一资源定位符URL的正则表达式获取各个统一资源定位符URL的权重值,获取待爬取的统一资源定位符URL的正则表达式权重关系表;根据正则表达式权重关系表获取目标待爬取的网站数据,对目标待爬取的网站数据进行爬取。本发明降低了待爬取的统一资源定位符URL的数量,提高了爬取效率,同时提高了爬取的准确性。

    SQL执行方法及装置
    27.
    发明公开

    公开(公告)号:CN108255852A

    公开(公告)日:2018-07-06

    申请号:CN201611244308.6

    申请日:2016-12-29

    IPC分类号: G06F17/30

    摘要: 本发明公开一种SQL执行方法及装置,能解决现有技术出现的因SQL支撑标准不一所导致的产品学习难度大,开发、运维及项目管理难度大且成本高的问题,实现不同SQL型分布式内存数据库的统一开发。该方法包括:获取客户端提交的业务SQL请求,其中,所述业务SQL请求中包含待处理的SQL;利用训练好的分类器对所述待处理的SQL进行分类,若所述待处理的SQL不属于预先划分的SQL类型,则对所述待处理的SQL进行预处理,得到标准SQL;将所述标准SQL提交至对应的SQL型分布式内存数据库执行,在所述SQL型分布式内存数据库执行完毕后,获取执行结果,并反馈给所述客户端,其中,所述预先划分的SQL类型包括所有SQL型分布式内存数据库共同支持的最低SQL标准的SQL类型。

    一种节点切换方法及装置
    28.
    发明公开

    公开(公告)号:CN106685676A

    公开(公告)日:2017-05-17

    申请号:CN201510749901.5

    申请日:2015-11-06

    IPC分类号: H04L12/24 H04L12/26 G06F17/30

    摘要: 本发明公开了一种节点切换方法及装置,涉及通信技术领域,用以保证业务的连续运行。本发明的方法包括:在利用主管理节点和工作节点进行数据传输时,分别从工作节点中的各监测工作节点获取各监测工作节点与备管理节点之间的通信状态;其中各监测工作节点用于对主管理节点、备管理节点进行监测;根据各监测工作节点与备管理节点之间的通信状态确定备管理节点的工作状态是否正常;若备管理节点的工作状态正常,则分别从各监测工作节点获取主管理节点的工作状态;若主管理节点的工作状态异常,则将主管理节点与工作节点之间的数据传输切换到备管理节点上,并利用备管理节点与工作节点进行数据传输。本发明主要用于分布式并行处理技术中。

    一种存储扩容方法、装置、计算节点及存储设备

    公开(公告)号:CN105205067A

    公开(公告)日:2015-12-30

    申请号:CN201410272846.0

    申请日:2014-06-18

    IPC分类号: G06F17/30 H04L29/06

    摘要: 本发明实施例提供一种存储扩容方法、装置、计算节点及存储设备。所述数据库系统还包括存储节点,与所述计算节点连接;所述计算节点能够通过运行存储控制机制与所述存储节点通信,对所述存储节点的第一存储单元进行存储控制,所述与所述存储节点通信利用第一协议进行;所述计算节点还与存储设备连接,所述方法包括:利用第二协议与所述存储设备通信,识别出所述存储设备的第二存储单元,其中,所述第二协议与所述第一协议不同;将识别出的所述第二存储单元模拟为所述计算节点通过运行所述存储控制机制能够识别的存储系统。本发明实施例不利用数据库系统的现有协议就能实现数据库系统的扩容。

    一种人脸匹配方法及装置
    30.
    发明授权

    公开(公告)号:CN109840453B

    公开(公告)日:2020-12-11

    申请号:CN201711218260.6

    申请日:2017-11-28

    IPC分类号: G06K9/00 G06K9/32

    摘要: 本发明实施例提供一种人脸匹配方法及装置。该方法包括:获取原始图像,原始图像包括预设的标志物信息和待匹配的人脸信息;从原始图像中检测预设的标志物,确定标志物在原始图像中的初始坐标信息;根据初始坐标信息和标志物的标准方向信息,对原始图像进行方向校正,确定第一校正图像;根据标志物在第一校正图像中的第一坐标信息和标志物的标准尺寸信息,对第一校正图像进行尺度校正,确定第二校正图像;根据标志物在第二校正图像中的第二坐标信息,确定人脸区域;截取人脸区域上传至服务器,以供服务器根据人脸区域进行人脸匹配。本发明实施例减小了网络流量压力,能识别方向异常的原始图像,提高人脸匹配的效率。