-
公开(公告)号:CN114201498B
公开(公告)日:2025-01-21
申请号:CN202111574081.2
申请日:2021-12-21
Applicant: 北京明朝万达科技股份有限公司
IPC: G06F16/22 , G06F16/242 , G06F16/215 , G06F18/23213 , G06F8/30
Abstract: 本发明实施例提供了一种数据处理方法、装置、电子设备及可读存储介质,其中,所述方法包括:在接收到用户的第一输入的情况下,根据所述第一输入,配置数据源集,所述数据源集包括多个数据源;在接收到用户的第二输入的情况下,根据所述第二输入及所述数据源集中各所述数据源的库表,配置处理策略;根据所述处理策略,从各所述数据源获取原始数据集进行处理,以完成数据汇聚及存储。本发明实施例解决了传统的数据整合思路不便于对复杂异构数据源进行数据处理及分析的问题。
-
公开(公告)号:CN112685142B
公开(公告)日:2024-07-16
申请号:CN202011628305.9
申请日:2020-12-30
Applicant: 北京明朝万达科技股份有限公司
Abstract: 本发明公开了一种分布式数据处理系统。其中,该系统包括:多个异构数据源节点,每个所述异构数据源节点包括多个不同的独立数据库,所述数据库用于存储业务数据;多个局部事务管理器,所述局部事务管理器与所述异构数据源节点一一对应,每个所述局部事务管理器用于调用对应的线程执行对异构数据源节点中的事务处理请求;全局事务管理器,与每个所述局部事务管理器通信,所述全局事务管理器用于为每个所述局部事务管理器分配对应的线程。本发明解决了现有技术中在同时引入多种数据源时难以对多种数据源中的数据进行操作的技术问题。
-
公开(公告)号:CN110727643B
公开(公告)日:2022-04-19
申请号:CN201910875130.2
申请日:2019-09-16
Applicant: 北京明朝万达科技股份有限公司
Abstract: 本发明提供一种基于机器学习的文件分类管理方法及系统,所述系统包括:第三方业务系统、智能分类分级系统、数据文件存储系统、数据文件使用方系统。所述智能分类分级系统,扫描监听上传的文件,解析描述文件,利用AI分级分类模块进行分类、分级,对分类分级结果进行加密,进行机器学习,之后进行二次分类、分级,再由所述敏感数据分析及加密模块抓取敏感数据,并对所述敏感数据进行二次加密,将加密后的数据文件上传到数据文件存储系统。根据本发明的方案,能够使数据文件的安全性及使用效率得到保证。数据文件中的数据经过敏感数据分析模块的分析与计算,敏感数据被二次加密,大大增加了企业、单位对数据文件使用的便捷性和安全性。
-
公开(公告)号:CN114201498A
公开(公告)日:2022-03-18
申请号:CN202111574081.2
申请日:2021-12-21
Applicant: 北京明朝万达科技股份有限公司
IPC: G06F16/22 , G06F16/242 , G06F16/215 , G06K9/62 , G06F8/30
Abstract: 本发明实施例提供了一种数据处理方法、装置、电子设备及可读存储介质,其中,所述方法包括:在接收到用户的第一输入的情况下,根据所述第一输入,配置数据源集,所述数据源集包括多个数据源;在接收到用户的第二输入的情况下,根据所述第二输入及所述数据源集中各所述数据源的库表,配置处理策略;根据所述处理策略,从各所述数据源获取原始数据集进行处理,以完成数据汇聚及存储。本发明实施例解决了传统的数据整合思路不便于对复杂异构数据源进行数据处理及分析的问题。
-
公开(公告)号:CN111143633A
公开(公告)日:2020-05-12
申请号:CN201911350141.5
申请日:2019-12-24
Applicant: 北京明朝万达科技股份有限公司 , 宜昌市公安局
IPC: G06F16/903 , G06K9/62
Abstract: 本申请提供了一种数据解密方法、装置、电子设备及存储介质,所述方法包括:获得待解密数据,所述待解密数据为包含不完整信息的数据;将所述待解密数据与待碰撞数据进行比对,获得相似度大于预设阈值的数据,所述待碰撞数据为包含完整信息的数据;将所述相似度大于预设阈值的数据确定为所述待解密数据对应的解密结果。本申请提供的数据解密方法,针对待解密数据中的待解密部分(例如:用*号遮盖的部分),通过与多个待碰撞数据进行碰撞比较的方式,获得其解密结果,能最大程度地将待解密数据中的不完整信息还原成完整信息,帮助业务人员更好地展开数据分析,进而提升业务人员的工作效率。
-
公开(公告)号:CN110727643A
公开(公告)日:2020-01-24
申请号:CN201910875130.2
申请日:2019-09-16
Applicant: 北京明朝万达科技股份有限公司
Abstract: 本发明提供一种基于机器学习的文件分类管理方法及系统,所述系统包括:第三方业务系统、智能分类分级系统、数据文件存储系统、数据文件使用方系统。所述智能分类分级系统,扫描监听上传的文件,解析描述文件,利用AI分级分类模块进行分类、分级,对分类分级结果进行加密,进行机器学习,之后进行二次分类、分级,再由所述敏感数据分析及加密模块抓取敏感数据,并对所述敏感数据进行二次加密,将加密后的数据文件上传到数据文件存储系统。根据本发明的方案,能够使数据文件的安全性及使用效率得到保证。数据文件中的数据经过敏感数据分析模块的分析与计算,敏感数据被二次加密,大大增加了企业、单位对数据文件使用的便捷性和安全性。
-
公开(公告)号:CN109255556A
公开(公告)日:2019-01-22
申请号:CN201811244482.X
申请日:2018-10-24
Applicant: 北京明朝万达科技股份有限公司
Abstract: 在本发明实施例公开了一种风险管控方法和装置,所述方法包括:根据用户在设定时间内的外发文件涉密个数和本地文件涉密个数确定用户在坐标系上对应的样本点,再对所述样本点进行聚类,根据每个样本点的聚类得分确定对应用户的泄密风险系数,评估出用户的泄密风险等级,最终根据所述用户泄密风险等级制定风险管控策略。通过上述方法,实现了对用户的分类风险管控,对于泄密风险等级较高的用户,实施严格的管控策略,使整体的泄密风险得到了降低;对于泄密风险等级较低的用户,相应的管控策略放松,这样,使客户端的功能相对减少,为客户端减负,提高了客户端的运行效率,进而提升了办公效率。
-
公开(公告)号:CN112732758B
公开(公告)日:2024-06-14
申请号:CN202011637761.X
申请日:2020-12-31
Applicant: 北京明朝万达科技股份有限公司
IPC: G06F16/2455 , G06F16/248 , G06F16/22
Abstract: 本发明提供了一种异构数据处理方法、装置、电子设备和可读存储介质。其中,提供接入至少两个异构数据源的异构数据处理平台,在异构数据处理平台上,可以接收对数据专题的第一输入,并响应于第一输入根据专题标识匹配数据查询信息,由于数据专题对应至少一个异构数据源,因此,可以根据数据查询信息在数据专题对应的异构数据源中查询获得异构数据。此时,由于异构数据源已接入异构数据展示平台,因此,在确定专题查询信息后可以通过异构数据展示平台直接访问异构数据源,无需向数据中心搬迁、整合不同异构数据源中的异构数据后再提供数据服务,从而降低了平台运营、维护、数据整合成本,提高了异构数据分析、展示的效率。
-
公开(公告)号:CN112148740B
公开(公告)日:2023-12-08
申请号:CN202011062985.2
申请日:2020-09-30
Applicant: 北京明朝万达科技股份有限公司
Abstract: 本申请公开了一种数据传输方法、装置、存储介质及电子装置。该方法包括:在接收到目标指令的情况下,将业务系统的存储服务器内的文件,传输至数据库系统的主节点的服务器的目标目录下,并检测目标目录对应的文件的大小;在目标目录对应的文件小于等于预设容量的情况下,将目标目录对应的文件通过主节点导入至数据库系统的多个数据节点中;在目标目录对应的文件大于预设容量的情况下,通过GPFDIST服务将目标目录对应的文件导入数据库系统的多个数据节点中。通过本申请,解决了相关技术中采用离线传输方式将业务系统的业务数据传输至数据系统时,导入效率低的问题。
-
公开(公告)号:CN113014640A
公开(公告)日:2021-06-22
申请号:CN202110202139.4
申请日:2021-02-23
Applicant: 北京明朝万达科技股份有限公司
IPC: H04L29/08 , H04L29/06 , H04L12/741 , H04L12/26
Abstract: 本申请提供的一种请求处理方法、装置、电子设备及存储介质,接收终端发送的服务调用请求,服务调用请求至少包括:检验参数、路由信息,在对检验参数鉴权通过后,在路由关系中查询路由信息相对应的路由地址,路由关系通过第一网域的网关和第二网域的网关协商生成。在路由地址指向第二网域的网关时,通过将服务调用请求转发给第二网域的网关以获取服务调用响应,并将服务调用响应发送给终端。通过服务调用请求和路由关系生成路由地址,根据路由地址指向的网域获取服务调用响应,无需在各个网域各自部署一套装置即可实现网域的相互联系,降低了应用环境要求,避免占用网域各自的资源,使用成本低,充分利用了现有资源,不会产生资源冗余。
-
-
-
-
-
-
-
-
-