一种基于RDMA的键值存储系统及其工作方法

    公开(公告)号:CN110147345A

    公开(公告)日:2019-08-20

    申请号:CN201910428931.4

    申请日:2019-05-22

    Abstract: 本发明公开了一种基于RDMA的键值存储系统及其工作方法。所述系统通过使用RDMA的原语实现键值存储的put操作和get操作。其中get操作仅使用RDMA的read原语;put操作有两种实现模式,会根据value的大小来决定使用哪种模式。为了提高get操作的性能,共享hash表使用了线性探测方式解决hash冲突问题,并结合了RDMA的read原语一次可以读取连续内存的特性,允许客户端每次读取多个hash表记录以提高命中率。为了解决客户端与服务器端的读写竞争问题,hash表采用自校验数据结构。通过这些设计,降低了CPU负载,降低网络的时延提升了服务质量,并提高了系统的吞吐量。

    一种结合多种用户反馈数据的基于相似度的物品推荐方法

    公开(公告)号:CN110119478A

    公开(公告)日:2019-08-13

    申请号:CN201910403221.6

    申请日:2019-05-15

    Applicant: 南京大学

    Abstract: 本发明公开了一种结合多种用户反馈的基于相似度的物品推荐方法。方法包括:对复杂辅助信息中隐含语义信息进行建模,针对不同类型用户反馈类型,采用不同的异步双向游走方式,计算不同类型对象间的相似度,再将这些相似度计算结果以贝叶斯排序优化技术组合,再根据组合后的用户-物品相似度矩阵向每个用户生成Top-N推荐结果。本发明提出的随机游走方法能建模出路径内任意节点对最终该路径计算结果的影响,从而能够充分挖掘隐含语义并量化语义得到不同类型对象间的相似度。

    基于聚类信息的视频推荐服务器、推荐方法和预缓存方法

    公开(公告)号:CN105812834B

    公开(公告)日:2019-03-12

    申请号:CN201610304477.8

    申请日:2016-05-10

    Applicant: 南京大学

    Inventor: 林涛 叶保留

    Abstract: 本发明公开了一种基于聚类信息的视频推荐服务器、视频推荐方法和预缓存方法,通过结合观看行为中呈现的偏序信息和聚类信息,结合特征建模方式,通过贝叶斯网络构建一个整合模型,进一步通过用户历史数据挖掘提炼模型参数,服务于移动自组网中视频预取和预缓存的决策。本发明用于移动设备在移动自组网中相互之间共享流媒体数据时候提供视频预测和预取服务,通过提高缓存命中率,使得用户在请求视频数据时候,能够更多从本地得到满足,系统通过尽量少的广播,满足尽量多未来的视频请求,进一步减少了网络中视频传输的数据量,提高整体网络吞吐量和传输带宽,大幅度提升整个网络的通信效率。

    一种面向键值对存储的范围查询过滤方法和键值对存储系统

    公开(公告)号:CN108717448A

    公开(公告)日:2018-10-30

    申请号:CN201810477268.2

    申请日:2018-05-18

    Applicant: 南京大学

    Abstract: 本发明公开了一种面向键值对存储的范围查询过滤方法和键值对存储系统。该范围查询过滤方法通过对键值对存储系统中每个容器所包含键值对的索引,用生长和收缩的方法,依据给定的空间预算生成范围过滤器,来实现对范围查询的过滤。并在查询过程中学习系统工作负载,调整范围过滤器。通过这样的动态调整,能够有效降低范围过滤器的假阳性率,提升其过滤效果,大大减少键值对存储系统的无效磁盘IO,提升整个系统的读性能。

    一种基于多播的无线异构网络文件缓存更新方法

    公开(公告)号:CN108632390A

    公开(公告)日:2018-10-09

    申请号:CN201810486999.3

    申请日:2018-05-21

    Applicant: 南京大学

    Abstract: 本发明公开了一种基于多播的无线异构网络文件缓存更新方法,包括:1、构建网络拓扑,包括小基站分布、用户分布、小基站与用户之间的连接关系分布;2、构建当前热门文件集热度分布模型;3、构建多播模式下更新文件的能量消耗模型;4、推导出最大化系统缓存命中率的目标函数与限制条件,构造最优化模型;5、将优化问题转化为多选择背包问题,求解得出对所有小基站的缓存文件更新方案;6、采用多播的方式将文件发送给小基站;7、当热门文件集发生变化时,定期采取步骤2-6对系统内所有小基站进行缓存更新。本发明的方法使得热门文件能够合理地被更新到不同小基站上,从而提高用户从小基站上直接获取视频数据的可能性,降低网络回程链路的数据。

    面向HDFS/Hadoop存储集群的资源监控系统及方法

    公开(公告)号:CN103533058B

    公开(公告)日:2017-02-08

    申请号:CN201310486601.3

    申请日:2013-10-17

    Abstract: 本发明公开了一种面向HDFS/Hadoop存储集群的资源监控系统及方法,该系统在存储集群中增加了状态参考信息收集模块、心跳协议优化模块、参考信息处理模块。状态信息收集模块部署在HDFS存储的数据节点上,支持对多维资源信息的实时收集与管理。心跳协议优化模块负责将节点参考信息传送到名称节点,通过优化心跳传输协议,支持多维信息的推送。参考信息处理模块在名称节点端实现,通过优化相关数据结构,处理数据节点传送过来的状态信息,名称节点端实时了解数据节点提供存储访问服务的性能状况。本发明弥补了HDFS不能对影响数据读写性能的状态信息监控的缺陷,动态收集数据节点实时信息,并将信息数据传输到名称节点。

    一种面向智能手机的P2P移动流媒体系统及其工作方法

    公开(公告)号:CN103533056B

    公开(公告)日:2016-11-02

    申请号:CN201310485043.9

    申请日:2013-10-16

    Abstract: 本发明公开了一种面向智能手机的P2P移动流媒体系统及其工作方法。该系统包括若干个具有Wi‑Fi网卡及3G模块的智能手机作为通信节点,在每个手机上都构建有P2P覆盖网络管理器、数据任务管理器、3G下载管理器、流媒体服务器、自适应缓存管理器。工作方法是当进行流媒体播放时,智能手机节点首先在本地P2P覆盖网络内向其它节点请求相应数据块,当且仅当本地无法找到相关数据块时,通过3G网络向远程服务器请求数据,从而实现流媒体的播放。该系统支持移动网络环境下智能手机间通过WiFi网络进行流媒体资源共享。通过本发明的方法,可以有效地降低移动流媒体用户对3G网络的带宽及网络流量需求。

    一种分布式存储CEPH的纠删码覆盖写方法

    公开(公告)号:CN105930103A

    公开(公告)日:2016-09-07

    申请号:CN201610305978.8

    申请日:2016-05-10

    Applicant: 南京大学

    Abstract: 本发明公开一种分布式存储CEPH的纠删码覆盖写方法,首先客户端节点发送写请求到Ceph的存储节点中的主OSD,主OSD自动选择最优编码方案后计算需要读取的数据块,并根据客户端id和对象id,从缓存中读取数据块返回主OSD;接着主OSD在接收完所有需要的读数据块后,更新数据块和校验块,发送到需要更新的对应OSD;然后数据块节点和校验块节点接收写请求,分配原始数据块附近的新存储位置存储新更新,并记录本次写请求元数据到日志PGLOG,数据和日志落盘后发送ACK给主OSD;最后主OSD接收所有更新节点的ACK后,记录本次更新元数据到内存,并回复ACK给客户端完成写请求。本发明解决了分布式存储系统CEPH不支持纠删码覆盖写的问题。

    一种基于元路径的个性化推荐方法及系统

    公开(公告)号:CN103955535A

    公开(公告)日:2014-07-30

    申请号:CN201410204492.6

    申请日:2014-05-14

    CPC classification number: G06F17/30867

    Abstract: 本发明公开了一种基于元路径的个性化推荐方法及系统。本推荐方法通过收集物品内容信息,用户之间的社会关系以及用户历史行为信息构建异构网络图;利用基于异步双向随机游走的相关度测量方法,实现基于语义的用户对物品的偏好度测量;利用机器学习,综合不同语义下的用户偏好度,预测用户对未选择物品的偏好度,以此向用户推荐其喜好的物品。本系统通过综合利用基于内容、协作过滤、社会网络关系,其它物品类型对目标物品类型的附加信息以及挖掘信息的语义特征,有效地提高了推荐效果的准确性,新颖性和多样性。

    一种基于HDFS的虚拟机镜像存储系统及其构建方法

    公开(公告)号:CN103544045A

    公开(公告)日:2014-01-29

    申请号:CN201310483678.5

    申请日:2013-10-16

    Abstract: 本发明公开了一种基于HDFS的虚拟机镜像存储系统及其构建方法,该系统包括虚拟服务器、管理服务器、HDFS存储节点,以及部署在存储管理服务器上的存储空间管理器、读写定位管理器和镜像数据管理器。构建方法是由存储空间管理器负责管理存储空间的磁盘组织形式,完成对大量虚拟机镜像的存储。读写定位管理器接收虚拟机镜像操作请求,根据元数据组织方式完成具体镜像的随机读写操作。镜像数据管理器负责虚拟机镜像元数据和文件内容的管理,通过特定的元数据结构组织镜像文件内容。本发明克服了HDFS不支持随机写文件的局限,实现了虚拟机镜像动态运行的分布容错云存储机制,提高了数据存储和访问的可靠性,同时降低了成本。

Patent Agency Ranking