一种基于工作流的数据分析模型计算引擎系统及运行方法

    公开(公告)号:CN113886111B

    公开(公告)日:2024-06-25

    申请号:CN202111205487.3

    申请日:2021-10-15

    Abstract: 本发明提供了一种基于工作流的数据分析模型计算引擎系统及方法,包括服务接口模块、模型加载解析模块、模型调度模块、模型运行模块和模型运行管理模块。服务接口模块:提供对外服务接口。模型加载解析模块:将模型描述文件中的模型要素转换为对象。模型调度模块:实现模型任务级和内部组件级双层调度管理,基于权重的任务调度方法,将资源、优先级、任务在队列中等待时间及任务处理数据量的大小等因素全部考虑在内。模型运行模块:支持输入类、输出类、数据分析类等多种类型组件的执行。模型运行管理模块:包括日志管理和任务状态管理,利用将日志聚合后按时间分片的方法,可大大提高日志查询效率,快速定位系统产生的BUG。

    一种跨地域分布数据中心任务调度方法及系统

    公开(公告)号:CN113886029A

    公开(公告)日:2022-01-04

    申请号:CN202111204158.7

    申请日:2021-10-15

    Abstract: 本发明提供了一种跨地域分布数据中心任务调度方法及系统,包括资源管理模块、任务调度模块、任务运行管理模块、任务执行模块和故障恢复模块。资源管理模块:采用心跳信号和集群可用资源表来记录集群运行状态和可用资源情况;任务调度模块:基于消息队列接收用户提交的任务,采用优先队列,结合任务执行优先值来管理任务队列,并根据各地域集群的资源使用情况,任务运行所需数据及集群资源利用率,选择最优集群下发任务,完成任务调度与运行;任务运行管理模块:包括日志管理模块、状态管理模块和结果反馈模块,主要提供日志查询功能和任务运行状态记录功能;故障恢复模块,提高调度系统的稳定性和容错性,为用户提供更好的使用体验。

    一种基于工作流的数据分析模型计算引擎系统及运行方法

    公开(公告)号:CN113886111A

    公开(公告)日:2022-01-04

    申请号:CN202111205487.3

    申请日:2021-10-15

    Abstract: 本发明提供了一种基于工作流的数据分析模型计算引擎系统及方法,包括服务接口模块、模型加载解析模块、模型调度模块、模型运行模块和模型运行管理模块。服务接口模块:提供对外服务接口。模型加载解析模块:将模型描述文件中的模型要素转换为对象。模型调度模块:实现模型任务级和内部组件级双层调度管理,基于权重的任务调度方法,将资源、优先级、任务在队列中等待时间及任务处理数据量的大小等因素全部考虑在内。模型运行模块:支持输入类、输出类、数据分析类等多种类型组件的执行。模型运行管理模块:包括日志管理和任务状态管理,利用将日志聚合后按时间分片的方法,可大大提高日志查询效率,快速定位系统产生的BUG。

    一种融合注意力机制与卷积神经网络的事件抽取方法

    公开(公告)号:CN115964497A

    公开(公告)日:2023-04-14

    申请号:CN202310154608.9

    申请日:2023-02-23

    Abstract: 本发明公开了一种融合注意力机制与卷积神经网络的事件抽取方法,其步骤包括:1)利用文本编码器对待提取文本内容进行特征表示,得到该待提取文本的分布式特征;2)利用特征提取器从所述分布式特征中提取该待提取文本的语境特征及词汇之间的关联信息;3)将该待提取文本的语境特征及词汇之间的关联信息输入事件触发词分类器,输出该待提取文本的事件触发词,然后基于该待提取文本的事件触发词确定该待提取文本的事件类型;4)事件元素分类器根据该待提取文本的事件类型、语境特征,对该待提取文本中每个分词依次进行判断是否为事件元素;5)使用元素角色分类器识别每一所述事件元素的角色类别。本发明大大提升了事件抽取的准确率且效率高。

    面向SM3口令的安全性评估方法及系统

    公开(公告)号:CN118300774A

    公开(公告)日:2024-07-05

    申请号:CN202410286091.3

    申请日:2024-03-13

    Abstract: 本发明公开一种面向SM3口令的安全性评估方法及系统,属于安全评估技术领域。所述方法包括:构建目标SM3口令的彩虹表;基于CUDA线程组实现SM3算法的并行化计算;根据字符表以及该字符表中字符出现的频率表,生成该彩虹表的规约函数;基于并行SM3算法的SM3加密函数和所述彩虹表的规约函数查询彩虹表,以得到目标SM3口令的安全性评估结果。本发明可以通过快速查询的彩虹表系统,来实现对SM3口令的安全性评估。

    一种面向对话文本的事件抽取方法及系统

    公开(公告)号:CN112818122A

    公开(公告)日:2021-05-18

    申请号:CN202110142967.3

    申请日:2021-02-02

    Abstract: 本发明涉及一种面向对话文本的事件抽取方法及系统,其方法包括:步骤S1:周期性获取对话文本集;步骤S2:对对话文本集进行两次过滤,得到事件相关对话文本集;步骤S3:创建事件模板,在事件相关对话文本集中,根据事件模板,并通过事件模板中的触发词进行事件类别划分,得到候选事件;对候选事件进行事件元素进行识别,实现从对话文本集的事件抽取。本发明提供的一种面向对话文本的事件抽取方法及系统,基于模式识别与机器学习方法相结合进行事件抽取,节约事件模板编制成本,降低数据稀疏性,提高事件抽取准确率。

    一种融合表示学习和分治策略的大规模本体合并方法

    公开(公告)号:CN110059194B

    公开(公告)日:2022-04-08

    申请号:CN201910155583.8

    申请日:2019-03-01

    Abstract: 本发明公开了一种融合表示学习和分治策略的大规模本体合并方法,其步骤包括:1)对于待合并的两本体,学习每一本体的组成要素在假设的公共语义空间中的语义表示;2)根据本体层级结构将每一本体中的所有类别划分为若干不相交的类别簇;然后根据同一类别簇中的类别在本体中的层级结构,恢复该类别簇中类别之间的关系,得到该本体的块集合;3)根据两待合并本体的块集合生成两本体之间的块映射,并基于本体的组成要素的语义表示对块进行对齐;4)将对齐后的本体区分为源本体和目标本体,将源本体和目标本体之间等价的类别合并成一个公共的类别放入一合并本体中,然后将源本体中剩余的类别信息放入该合并本体中,完成两本体合并。

    一种融合表示学习和分治策略的大规模本体合并方法

    公开(公告)号:CN110059194A

    公开(公告)日:2019-07-26

    申请号:CN201910155583.8

    申请日:2019-03-01

    Abstract: 本发明公开了一种融合表示学习和分治策略的大规模本体合并方法,其步骤包括:1)对于待合并的两本体,学习每一本体的组成要素在假设的公共语义空间中的语义表示;2)根据本体层级结构将每一本体中的所有类别划分为若干不相交的类别簇;然后根据同一类别簇中的类别在本体中的层级结构,恢复该类别簇中类别之间的关系,得到该本体的块集合;3)根据两待合并本体的块集合生成两本体之间的块映射,并基于本体的组成要素的语义表示对块进行对齐;4)将对齐后的本体区分为源本体和目标本体,将源本体和目标本体之间等价的类别合并成一个公共的类别放入一合并本体中,然后将源本体中剩余的类别信息放入该合并本体中,完成两本体合并。

Patent Agency Ranking