-
公开(公告)号:CN104572828B
公开(公告)日:2018-01-19
申请号:CN201410743826.7
申请日:2014-12-08
Applicant: 中国科学院信息工程研究所
IPC: G06F17/30
Abstract: 本发明涉及一种基于空间位图模型的辅助索引方法及系统,包括以下步骤:获取日志文件、文件编号及其中的关键字;选择任一关键字作为当前关键字;对当前关键字做检测;在重新申请的索引空间中插入当前的文件编号;判断当前关键字的索引空间中实际有效文件范围是否小于索引空间的预定临界值;保存有效文件范围内的所有索引信息;利用顺序后移指针记录插入位置及偏移量的信息;将临时有效文件范围指针与顺序后移指针整合成新的索引空间的信息;判断整合后的索引空间的信息里是否出现了三个关于偏移量的单增区间;结束处理。本发明能够节省内存空间,在置位率较低或者插入位置较靠近最大更新位置时效率较高,并且能够进行空间动态调整。
-
公开(公告)号:CN106909623A
公开(公告)日:2017-06-30
申请号:CN201710043645.7
申请日:2017-01-19
Applicant: 中国科学院信息工程研究所
IPC: G06F17/30
Abstract: 本发明公开了一种支持高效海量数据分析和检索的数据装置及数据存储方法。本装置包括若干文件夹,在每一文件夹中包含多个索引分段;每一索引分段包括一全文索引组件、一数据定位模块和一数据存储模块;全文索引组件用于存储索引分段中的记录的倒排索引信息;数据存储模块,包含多个横向分块,每个横向分块包含多个列分片,每个列分片包含多个用于存储数据记录的数据页;数据定位模块,提供针对数据存储模块的嵌套索引结构,每个横向分块索引存储了横向分块记录起始Id、横向分块位置、各列分片的位置以及列分片索引集合;每个列分片索引记录了列分片中数据页起始位置和数据页索引集合;每个数据页索引记录了数据页所在文件位置和页记录起始Id。
-
公开(公告)号:CN103458456B
公开(公告)日:2016-11-09
申请号:CN201310379307.2
申请日:2013-08-27
Applicant: 中国科学院信息工程研究所
IPC: H04W24/08
Abstract: 本发明涉及一种基于移动终端Wi‑Fi数据的用户行为检测方法及装置。基于移动终端Wi‑Fi数据的用户行为检测方法包括:步骤一,获取监听设备采集到的移动终端Wi‑Fi数据包并存储;步骤二,对获取的Wi‑Fi数据包进行分析处理,得到用户行为统计参量;步骤三,存储所述用户行为统计参量;步骤四,以图表的方式在线展示所述用户行为统计参量。本发明的基于移动终端Wi‑Fi数据的用户行为检测方法及装置,统计和分析店铺附近范围内携带有已开启Wi‑Fi功能的智能手机的顾客行为方式。
-
公开(公告)号:CN104182522A
公开(公告)日:2014-12-03
申请号:CN201410425094.7
申请日:2014-08-26
Applicant: 中国科学院信息工程研究所
IPC: G06F17/30
CPC classification number: G06F17/30144 , G06F17/30106 , G06F17/30117 , G06F17/30191 , G06F17/30324 , G06F17/30336 , G06F17/30442 , G06F17/30454
Abstract: 本发明涉及一种基于循环位图模型的辅助索引方法及装置,包括以下步骤:从日志文件生产队列里获取当前的日志文件及其文件编号,为该日志文件中的所有关键字分别建立循环位图;判断文件编号是否在索引范围起始位与索引范围结束位之间;检查文件编号是否在索引范围起始位与有效索引范围终点之间;在日志文件的文件编号处执行置位操作;对有效索引范围终点与索引范围结束位之间做复位操作,在待置位的文件编号处执行置位操作,并将有效索引范围终点赋值为索引范围结束位;等待直到文件生产队列中生成新的日志文件,执行步骤1。本发明不随日志编号增加而扩展内存使用空间,能够在客户端和服务器实现,并针对客户端提出基于流水线的提速模型。
-
公开(公告)号:CN113626836B
公开(公告)日:2025-04-29
申请号:CN202110775401.4
申请日:2021-07-09
Applicant: 中国科学院信息工程研究所
IPC: G06F21/60 , G06F21/62 , G06F21/64 , G06F16/31 , G06F40/289
Abstract: 本发明公开了一种基于LSM的对称可搜索加密方法及系统。本方法为:1)客户端创建数据库表,将数据集中的数据信息填入相应的字段中;2)为设定加密索引字段构建加密索引,使用对称加密算法加密所述加密字段中的数据,生成验证集合Xset,该验证集合Xset中存储的信息为所述数据集中各文档对应的组合值,其中根据文档i的文档id及文档i的关键字生成文档i的组合值;将加密索引和加密数据上传至服务器端分配的服务器节点;3)客户端利用对称密钥和查询关键字生成对应的查询发送给服务器端;4)服务器端在加密数据库上执行查询操作并将查询结果返回给客户端;5)客户端接收服务器端返回的查询结果并对其进行解密。
-
公开(公告)号:CN119127867A
公开(公告)日:2024-12-13
申请号:CN202410935756.9
申请日:2024-07-12
Applicant: 中国科学院信息工程研究所
IPC: G06F16/22 , G06F16/23 , G06F16/2453 , G06F16/245
Abstract: 本发明公开一种使用底层信息建立查询索引的LSM‑Tree键值存储系统,属于数据存储技术领域。该系统利用LSM‑Tree的底层SSTable边界为索引键,通过压缩过程遍历生成的SSTables中的所有键值对,将与索引键的范围相交的上层SSTable文件编号作为索引值构建索引。本发明加速LSM‑Tree键值存储系统的查询操作。
-
公开(公告)号:CN118797090A
公开(公告)日:2024-10-18
申请号:CN202410746404.9
申请日:2024-06-11
Applicant: 中国科学院信息工程研究所
Abstract: 本发明公开了一种基于差分隐私的多用户隐私保护图像检索方法及系统,属于信息安全技术领域。首先,密钥生成中心为图像所有者和查询用户生成私钥及转换密钥。图像所有者利用深度哈希模型提取图像特征,并通过私钥加密和差分隐私技术添加随机扰动,生成密态索引,同时图像使用AES加密后上传至云端。云服务提供商处理密态索引并存储。查询用户生成查询陷门并上传云端,云服务根据转换密钥处理查询陷门,计算相似度得分并返回相关结果。本发明实现了多用户场景下的隐私保护大规模图像检索,可以在实现快速准确搜索的同时保证数据的隐私安全。
-
公开(公告)号:CN113434357B
公开(公告)日:2023-04-11
申请号:CN202110534643.4
申请日:2021-05-17
Applicant: 中国科学院信息工程研究所
IPC: G06F11/30 , G06F16/18 , G06F40/216
Abstract: 本发明公开了一种基于序列预测的日志异常检测方法及装置,包括:解析待检测日志序列,得到待检测日志键序列;将待检测日志键序列输入日志异常检测模型,获取日志异常检测结果。本发明通过基于语义的预处理模块构造了日志键的嵌入向量,从周围序列学习目标信息的特性,从而可以保留更多的语义特征,适用于规则多、规模大的平台日志数据,获取更高的检测精度,提高了模型的训练效率。
-
公开(公告)号:CN113722608A
公开(公告)日:2021-11-30
申请号:CN202110825699.5
申请日:2021-07-21
Applicant: 中国科学院信息工程研究所
IPC: G06F16/9536 , G06F16/9535
Abstract: 本发明公开了一种迭代副信息指导下基于关联关系学习的协同过滤方法及装置,将用户与物品的异质副信息集成到评分记录矩阵;利用生成的偏好预测矩阵,对每一用户进行物品推荐。本发明通过对用户和物品的不同类型的异质副信息进行重要性区分,利用神经因子分解机挖掘各个类型的异质副信息之间的关联关系,并通过迭代的指导充分发挥用户和物品的异质副信息的作用,从而实现对用户和物品的综合理解,提高用户对物品偏好预测的准确度。
-
公开(公告)号:CN110175248B
公开(公告)日:2021-08-31
申请号:CN201910270855.9
申请日:2019-04-04
Applicant: 中国科学院信息工程研究所
IPC: G06F16/51 , G06F16/55 , G06F16/583 , G06N3/04 , G06N3/08
Abstract: 本发明涉及一种基于深度学习和哈希编码的人脸图像检索方法和装置。该方法针对现有的人脸图像检索中人脸特征表达不充分、特征区分力不够的问题,提出人脸空间网络和人脸空间损失来自动地挖掘人脸图像中有区分力的人脸区域,降低背景信息的影响;同时哈希网络学习人脸特征和哈希码之间的内在关系,将人脸图像映射成哈希码,显著地降低检索的计算和存储代价;哈希网络中多尺度的人脸特征通道增强模块增强了人脸特征中区分力强的维度。本发明提供的交替训练的策略使得两个网络有机的融合在一起,减少了人脸特征提取和哈希码生成之间的信息损失,在增强了人脸特征的区分力的同时,增强了生成的哈希码的区分力,提高人脸检索的准确度。
-
-
-
-
-
-
-
-
-