一种上下文增强的语义可搜索加密方法及系统

    公开(公告)号:CN119808124A

    公开(公告)日:2025-04-11

    申请号:CN202411904010.8

    申请日:2024-12-23

    Abstract: 本发明公开了一种上下文增强的语义可搜索加密方法及系统。本方法为:1)使用已标注的查询‑文档对数据训练所选模型,得到最优模型并部署在客户端;2)客户端生成密钥,利用最优模型为待上传的文档生成文档向量表示hd,然后利用密钥对hd进行加密,得到加密后的文档向量并上传至服务器端;3)服务器端存储文档向量并构建对应的索引I;4)客户端通过最优模型对输入的查询生成查询向量表示hq,然后使用密钥对hq进行加密,得到最终加密后的查询陷门Tq并上传至服务器端;5)服务器端计算查询陷门Tq与索引I之间的相似度分数,选择分数最高的前k个结果返回给客户端。本发明不仅保证了搜索的准确率,而且提高了数据安全性。

    一种基于非易失存储器的列式存储索引方法及装置

    公开(公告)号:CN116257523A

    公开(公告)日:2023-06-13

    申请号:CN202310096644.4

    申请日:2023-02-10

    Abstract: 本发明公开一种基于非易失存储器的列式存储索引方法及装置,涉及计算机领域,本发明针对指标列实时更新,通过在NVM中建立缓存池,利用NVM的特点,通过两阶段批量更新,构建Main和Delta结构,Main包括多个Segment,每个Segment包含元数据信息和数据信息;Delta包括两个Delta文件,更新时进行交替;在内存中为Delta文件构建Bloom Filter进行更新数据的查询和判断。针对指标列在传统段合并时造成严重写放大的问题,本发明在创建索引时用元数据信息合并来替代传统的列存索引合并,从而在保证读写性能不下降的情况下,减少内存空间的占用以及读写放大。针对低基数维度列,对其创建倒排索引,大幅减少内存空间占用并提升等值查询性能。

    一种基于共享存储池的分布式事务处理方法

    公开(公告)号:CN103399894A

    公开(公告)日:2013-11-20

    申请号:CN201310311824.6

    申请日:2013-07-23

    Abstract: 本发明涉及一种基于共享存储池的分布式事务处理方法,包括:基于哈希将分布式文件系统目录全路径映射到元数据服务器;从需参与分布式事务的元数据服务器集合中指定一个协调器和多个参与器;元数据服务器评估其需要完成的分布式事务操作,若不能完成向协调器汇报“终止”,否则汇报“提交”并锁定资源;协调器根据参与器汇报结果向共享存储池的全局日志中写入“提交”或“终止”,并通知参与器;参与器执行分布式事务操作或者取消锁定资源;当有协调器或参与器故障时,第一个从共享存储池中检查分布式事务状态的参与器或协调器将分布式事务的状态设为“终止”。本发明解决了分布式文件系统中元数据服务在可扩展环境下的快速事务处理问题。

    基于序列预测的日志异常检测方法及装置

    公开(公告)号:CN113434357B

    公开(公告)日:2023-04-11

    申请号:CN202110534643.4

    申请日:2021-05-17

    Abstract: 本发明公开了一种基于序列预测的日志异常检测方法及装置,包括:解析待检测日志序列,得到待检测日志键序列;将待检测日志键序列输入日志异常检测模型,获取日志异常检测结果。本发明通过基于语义的预处理模块构造了日志键的嵌入向量,从周围序列学习目标信息的特性,从而可以保留更多的语义特征,适用于规则多、规模大的平台日志数据,获取更高的检测精度,提高了模型的训练效率。

    基于非易失存储器的LSM树的存储组织方法及键值存储系统

    公开(公告)号:CN118502644A

    公开(公告)日:2024-08-16

    申请号:CN202310110753.7

    申请日:2023-02-14

    Abstract: 本发明公开一种基于非易失存储器的LSM树的存储组织方法及键值存储系统,涉及计算机领域,通过在内存中建立非易失存储器的活跃区的索引;在非易失存储器中采用单层存储分区域的存储方式,将内存中的数据写入活跃区,写满后再转换为非活跃区,将内存中的索引持久化为非活跃区的索引文件;再将非活跃区的数据文件合并并存储在磁盘上。本发明利用非易失存储器的随机读写和可字节寻址等特性,对现有的LSM树存储引擎进行优化,改善原有结构的写放大和长时间写入后性能下降的问题,提高存储引擎的整体性能。

    基于序列预测的日志异常检测方法及装置

    公开(公告)号:CN113434357A

    公开(公告)日:2021-09-24

    申请号:CN202110534643.4

    申请日:2021-05-17

    Abstract: 本发明公开了一种基于序列预测的日志异常检测方法及装置,包括:解析待检测日志序列,得到待检测日志键序列;将待检测日志键序列输入日志异常检测模型,获取日志异常检测结果。本发明通过基于语义的预处理模块构造了日志键的嵌入向量,从周围序列学习目标信息的特性,从而可以保留更多的语义特征,适用于规则多、规模大的平台日志数据,获取更高的检测精度,提高了模型的训练效率。

    基于多层布隆过滤器的存储系统及存储方法

    公开(公告)号:CN118466842A

    公开(公告)日:2024-08-09

    申请号:CN202410647110.0

    申请日:2024-05-23

    Abstract: 本发明公开了基于多层布隆过滤器的存储系统及存储方法,属于数据存储技术领域。本发明在RocksDB的基础上增加多层布隆过滤器仓库、布隆过滤器缓冲区,设计根据文件之间的访问频率差异,给访问频率高的文件分配位数更多的布隆过滤器,给访问频率更低的文件分配位数更少的布隆过滤器,从而在不增加原有内存空间占用的情况下,降低布隆过滤器的误判率,提高系统整体的读性能。

    一种基于非易失性内存的动态图存储方法及装置

    公开(公告)号:CN118259830A

    公开(公告)日:2024-06-28

    申请号:CN202410292960.3

    申请日:2024-03-14

    Abstract: 本发明公开了一种基于非易失性内存的动态图存储方法及装置,涉及计算机领域,在DRAM中建立哈希表;在NVM中预分配顶点数组和每个顶点的后缀比特树的根节点,每个顶点的后缀比特树用来存储该顶点的邻接边,后缀比特树的根节点以数组形式预先统一分配内存,顶点数组中的每个顶点和根节点共享同一个索引;在每个邻接边插入之前,先检查该边的源顶点和目的顶点ID的映射关系是否已保存在哈希表中;如果没有,则采取顶点数组中下一个未使用的位置的索引作为顶点ID的哈希值,并将该顶点ID的映射关系保存到哈希表,同时将该顶点存到顶点数组对应的位置。本发明充分利用NVM可字节寻址、非易失性等特点,支持高性能的图更新及图分析能力。

Patent Agency Ranking