一种基于Kubernetes的数据网格实现方法

    公开(公告)号:CN118227583A

    公开(公告)日:2024-06-21

    申请号:CN202211629454.6

    申请日:2022-12-19

    IPC分类号: G06F16/21 G06F21/62

    摘要: 本发明公开了一种基于Kubernetes的数据网格实现方法,涉及云计算和数据管理技术领域,解决了数据所有权和数据共享之间的矛盾难以调和、数据基础设施维护成本较高、数据管理难度大、团队职责割裂等技术问题,其技术方案要点是通过结合Kubernetes云的特性以及数据网格设计理念,提出了一套满足云原生特性的数据管理平台实现方法,能够有效解决数据所有权与数据共享之间的矛盾难以调和、数据基础设施维护成本较高、数据管理难度大、团队职责割裂等问题。

    一种基于LSM_Tree的面向SSD的时序数据存储方法和系统

    公开(公告)号:CN116414839B

    公开(公告)日:2024-06-11

    申请号:CN202310402127.5

    申请日:2023-04-14

    摘要: 本发明涉及一种基于LSM_Tree的面向SSD的时序数据存储方法和系统。该方法在WAL模块提供了多个WALWriter,将接收的数据均分到每个WALWriter,数据可以并行写入WAL文件;在将缓存Cache写入磁盘SSTables文件时,通过FieldValues的字段值数量对SeriesKey进行排序,只将FieldValues的字段值数量达到阈值的时序数据写入SSTable文件,不满足条件的数据继续在缓存中,有利于SSTable文件中保存尽可能大的SeriesKey的数据,减小较小文件合并时数据被重复读取的概率。本发明充分利用了SSD内部并行性,提高了整个存储系统的写入吞吐,并能够减小写放大问题,延长SSD磁盘寿命,降低存储成本。

    一种高效的随机化同态比较方法、装置、设备及存储介质

    公开(公告)号:CN118157836A

    公开(公告)日:2024-06-07

    申请号:CN202410170014.1

    申请日:2024-02-06

    IPC分类号: H04L9/00 H04L9/08

    摘要: 本发明公开了一种高效的随机化同态比较方法、装置、设备及存储介质,包括:获取n维的二进制向量a和二进制向量b的密文;通过同态判断二进制向量a和二进制向量b的密文在所有位置的比特是否相等,生成不相等向量inE的密文;针对相应的同态化比较问题,基于不相等向量inE的密文得到二进制向量a和二进制向量b之间的同态比较结果。本发明可以有效地判断两个二进制向量之间的大小。

    基于分布式车载声学器件的非接触儿童存在性检测方法及系统

    公开(公告)号:CN118144717A

    公开(公告)日:2024-06-07

    申请号:CN202410172773.1

    申请日:2024-02-07

    摘要: 本发明公开了一种基于分布式车载声学器件的非接触儿童存在性检测方法及系统,所述方法包括:基于车载分布式多扬声器发送的ZC序列信号,计算车载多麦克风系统接收的每一麦克风的CIR信号;联合位于同一位置两个麦克风的CIR信号进行动态分量增强,并根据动态分量增强后的信号方差,得到是否存在儿童体动的第一检测结果;在第一检测结果为未存在儿童体动的情况下,利用自相关系数在分布式多扬声器‑分布式多麦克风的路径集合中选择出呼吸候选路径后,对所有呼吸候选路径上的声音信号进行组合增强,并根据组合增强后的信号,得到是否存在儿童呼吸的第二检测结果。本发明可以对儿童的存在性进行有效检测,且具有全覆盖,低成本和高灵敏度的优势。

    一种基于场景感知的大模型少样本上下文学习驱动的知识查询语句智能生成方法和系统

    公开(公告)号:CN118093820A

    公开(公告)日:2024-05-28

    申请号:CN202410228838.X

    申请日:2024-02-29

    IPC分类号: G06F16/332 G06F16/33

    摘要: 本发明涉及一种基于场景感知的大模型少样本上下文学习驱动的知识查询语句智能生成方法和系统。该方法的步骤包括:对用户输入的自然语言问题即目标问题进行逻辑骨架解析;根据目标问题,从知识库中检索出相关的知识组件;使用大模型进行少样本上下文学习,实现对知识组件的选择;根据逻辑骨架和选择的知识组件构建逻辑表达式,得到知识查询语句。本发明通过场景学习和知识查询语句生成的结合,不仅提高了知识问答的准确性和执行效率,同时也显著降低了成本,展现出卓越的泛化能力和广泛的应用前景。

    一种基于博主增强的短视频推荐方法及装置

    公开(公告)号:CN117216318B

    公开(公告)日:2024-05-28

    申请号:CN202311168848.0

    申请日:2023-09-11

    发明人: 赖伟江 金蓓弘

    摘要: 本发明公开了一种基于博主增强的短视频推荐方法及装置。所述方法包括:获取用户的历史交互短视频记录和博主的历史发布短视频记录,构造异质图;利用异质图中的用户和短视频二分图通过图神经网络计算得到短视频视图的用户、博主和短视频的向量表示;利用异质图中的用户‑博主二分图通过图神经网络计算得到博主视图的用户、博主和短视频的向量表示;采用跨视图对比学习,保持同一用户、博主或短视频节点再两个视图下的向量表示之间的一致性;基于短视频视图和博主视图的用户、博主和短视频向量表示,获取用户的短视频推荐结果。本发明可以实现低开销、精确的短视频推荐。

    一种面向大数据处理框架的高效半自动垃圾回收方法和系统

    公开(公告)号:CN116860658B

    公开(公告)日:2024-05-28

    申请号:CN202310739729.X

    申请日:2023-06-21

    IPC分类号: G06F12/02 G06F8/73 G06F9/50

    摘要: 本发明涉及一种面向大数据处理框架的高效半自动垃圾回收方法和系统,通过区分大数据框架中的普通对象与数据对象,本发明消除了垃圾收集过程中数据对象不必要的标记和复制开销。本发明包括:数据对象分析器为大数据框架开发者提供两个注解,分别表示数据对象的创建和释放,Java虚拟机可以根据注解跟踪数据对象的生命周期,并优化数据对象的管理;基于标签的分配器可以有效地区分数据对象和普通对象,并将它们分开存储在堆空间中;基于消息的垃圾收集器可以消除数据对象不必要的标记和复制开销。与同类产品相比,本发明可以有效地减少大数据应用的垃圾收集时间和运行时间,提高Java虚拟机在大数据环境下的内存管理效率。

    一种基于LLM多源异构信息融合的二进制漏洞数据集构建方法和装置

    公开(公告)号:CN118013526A

    公开(公告)日:2024-05-10

    申请号:CN202311412980.1

    申请日:2023-10-27

    IPC分类号: G06F21/57 G06N5/04 G06F8/53

    摘要: 本发明涉及一种基于LLM多源异构信息融合的二进制漏洞数据集构建方法和装置,该方法包括:1)批量编译二进制文件TP构建开源二进制包的BDB(TP);2)从漏洞信息发布平台获取漏洞信息经过预处理构成VulnVecDB,利用向量搜索在VulnVecDB中获取VulnID对应的漏洞信息,利用微调后的LLM进行知识推理获取VulnID对应的精确漏洞信息;3)根据精确漏洞信息从BDB(TP)中查找对应二进制文件后利用反汇编引擎提取VulnEntity,构建VulnAssFuncDB。本发明为了解决对物联网固件中二进制软件进行漏洞准确定位困难的问题,提出一种融合多源异构漏洞信息并结合LLM知识推理,从而精确获取二进制软件包中漏洞位置以及相关漏洞函数代码的方法,能够帮助安全研究人员迅速获得漏洞样本,增强物联网固件的安全漏洞挖掘的有效性。