一种基于并行流处理的ICT系统运行日志分析方法

    公开(公告)号:CN111949633B

    公开(公告)日:2021-11-30

    申请号:CN202010767753.0

    申请日:2020-08-03

    Abstract: 本发明公开了一种基于并行流处理的ICT系统运行日志分析方法。本发明建立的基于RDMA的并行分布式日志处理平台,当数据流在Spark集群中传输时,数据流直接从本地节点内存传输到目的节点内存,不需要通信双方操作系统的介入,大大降低了CPU占用率和网络时延。提出的在线日志流解析方法,设置了缓存模板集,经过两次过滤和结果汇总后的筛错重解析,显著增强了日志解析算法的准确性和鲁棒性。日志解析结果汇总后,通过基于元数据映射的结构化日志压缩方法,将所有元数据顺序编码,映射关系字典存储,将元数据编码映射后直接压缩,显著降低了日志存储空间。

    一种基于多步聚类的拖网渔船行为判别方法

    公开(公告)号:CN110033051B

    公开(公告)日:2021-08-20

    申请号:CN201910314059.0

    申请日:2019-04-18

    Abstract: 本发明公开了一种基于多步聚类的拖网渔船行为判别方法。本发明综合考虑速度、角度、经纬度、时间等时空数据建立多维距离模型,并采用时序近邻计算准则计算轨迹点间相似度距离矩阵,大幅降低了矩阵计算时间,使用OPTICS算法与ξ‑steep自动识别簇方法实现基于非全局参数的轨迹划分,得到轨迹段,再基于轨迹段之间相似度距离使用k‑means算法实现轨迹段再次聚类,从而实现轨迹点的分类,再通过对分类进行特征提取,建立拖网渔船行为判别模型,实现拖网渔船行为的快速判别。实验表明,本发明具有低参数敏感性、高精度、高通用性、耗时少等优点,可应用于大批量拖网渔船行为的快速判定。

    面向智慧校园的网页表数据与关系型数据库数据集成方法

    公开(公告)号:CN113139143A

    公开(公告)日:2021-07-20

    申请号:CN202110350187.8

    申请日:2021-03-31

    Abstract: 本发明公开了面向智慧校园的网页表数据与关系型数据库数据集成方法。本发明通过多分类器计算所有数据表对应属性列的相似度,获得属性关联关系后进行初步数据集成,有效降低属性之间的不确定性。通过爬虫获取校园网页中离散的网页表数据,使用混合标签匹配器得到多个网页表的标签映射关系,再将这些网页表缝合为一张较大网页表。将这缝合后的网页表转换为结构化数据表,与初步集成后的数据特征表进行数据集成,提高了集成数据完整性。本发明在传统的数据集成中增加了对校园网页中网页表数据的集成方法,使得最后得到的用户特征表更加完善,将网络上的数据与本地数据结合起来,进一步提升数据集成的准确率,发现有价值的潜在信息。

    一种面向跨界服务可持续变更的组织架构建模方法

    公开(公告)号:CN112926214A

    公开(公告)日:2021-06-08

    申请号:CN202110267933.7

    申请日:2021-03-12

    Abstract: 本发明公开了一种面向跨界服务可持续变更的组织架构建模方法。本发明是在组织架构变更发生前,将业务流程活动与组织架构的初始状态进行结构化关联;当组织架构变更发生时,对变更进行结构化定义,同时更新相应的业务流程定义,记录组织架构的变更情况;在组织架构变更完成后,将组织架构的最新版本号更新到业务流程定义中;根据组织架构变更前后的状态、变更情况以及本发明中定义的变更类型,确定业务流程中受到组织架构变更影响的活动,并相应地调整业务流程定义,使得业务流程模型能针对组织架构持续变更进行自动调整。本发明使得业务流程在执行过程中能感知到组织架构变更这一动态行为,并及时地进行调整。

    一种音视频流分布式同步方法

    公开(公告)号:CN112770165A

    公开(公告)日:2021-05-07

    申请号:CN202011578814.5

    申请日:2020-12-28

    Abstract: 本发明公开了一种音视频流分布式同步方法。本发明抽象音视频帧组概念,以逻辑时钟为基准,同步音视频帧组开始时间,音频设备以逻辑时钟为基准,组内自适应调整处理频率;视频设备基于逻辑时钟和音频时钟,实现帧组内自适应调整处理频率。在无需引入第三方设备和专业传输线的情况下,实现局域网内的音视频多设备同步。针对音频播放时延的平滑处理,可有效减少丢帧或快进概率,与视频保持一致。本发明在多设备之间以帧组粒度进行同步,降低了整体通信量,帧组内自适应调整频率,将时间平摊至多帧,进一步有效降低快进或花屏概率。该发明可实现在普适场景下实现音频分流,突破设备、通信和性能瓶颈,打造智能家庭影院。

    面向反应堆堆芯组件数值模拟的有限元撕裂对接法及系统

    公开(公告)号:CN112733401A

    公开(公告)日:2021-04-30

    申请号:CN202011607981.8

    申请日:2020-12-30

    Abstract: 本发明公开一种面向反应堆堆芯组件数值模拟的有限元撕裂对接法及系统。n个计算节点中每个计算节点均设有上述有限元撕裂对接系统,每个计算节点拥有g块类GPU加速器。本发明采用了负载均衡策略,使得各进程的稠密矩阵内存大小趋于平均值,充分利用集群资源,加快求解速度。采用HIP编程,使得有限元撕裂对接法运行在NvidiaCUDA平台和AMDROMc平台。在迭代求解过程的稠密矩阵向量乘阶段中,采用动态分配矩阵策略,使得不同处理器分配到合适的计算量,以充分利用计算资源,加快求解速度。在向量内积阶段,采用了向量内积加速策略和通信计算重叠策略,通过引入通信线程,减少通信等待时间,加快向量内积速度。

    一种基于并行流处理的ICT系统运行日志分析方法

    公开(公告)号:CN111949633A

    公开(公告)日:2020-11-17

    申请号:CN202010767753.0

    申请日:2020-08-03

    Abstract: 本发明公开了一种基于并行流处理的ICT系统运行日志分析方法。本发明建立的基于RDMA的并行分布式日志处理平台,当数据流在Spark集群中传输时,数据流直接从本地节点内存传输到目的节点内存,不需要通信双方操作系统的介入,大大降低了CPU占用率和网络时延。提出的在线日志流解析方法,设置了缓存模板集,经过两次过滤和结果汇总后的筛错重解析,显著增强了日志解析算法的准确性和鲁棒性。日志解析结果汇总后,通过基于元数据映射的结构化日志压缩方法,将所有元数据顺序编码,映射关系字典存储,将元数据编码映射后直接压缩,显著降低了日志存储空间。

    一种基于多模态学习的电力攻击识别方法

    公开(公告)号:CN111786979A

    公开(公告)日:2020-10-16

    申请号:CN202010587171.4

    申请日:2020-06-24

    Abstract: 本发明涉及一种基于多模态学习的电力攻击识别方法。本发明包含三部分内容:分布式多模态数据监控单元;模态队列和多模态数据监控中台,三部分的步骤依次实现了多模态监控数据的生成、发送与攻击判断。分布式多模态数据监控单元,利用覆盖层网络实现集群中各局域网的多模态数据生成与采样同步。模态队列利用并行模态队列算法,约束缓存多模态数据的发送。多模态数据监控中台用于判断、存储、查阅多模态监控数据,其中判断过程利用了多源注意力门控循环记忆网络算法,以滑动窗口的方式拉取多模态数据,实现时序感知的多模态电力攻击的判断。本发明可以有效减少监控运行时对原生系统服务的负担,并提升电力攻击检测的效果。

Patent Agency Ranking