-
公开(公告)号:CN115794962A
公开(公告)日:2023-03-14
申请号:CN202211484172.1
申请日:2022-11-24
Applicant: 中通服咨询设计研究院有限公司
Abstract: 本发明提供一种基于湖仓一体的数据中台架构包括:数据采集层、数据湖存储层以及数据服务层;其中,数据采集层对数据中台外的其它应用数据进行采集;数据湖存储层提供数据存储并对数据存储进行监控;数据服务层根据数据湖存储层提供的数据提供统一的对外服务。能够方便的进行数据管理和挖掘;采用技术服务和业务服务相结合的方式,采用容器技术提供弹性伸缩,将业务服务部署在容器集群中,对外提供高可用的服务。支持所有类型的结构化、半结构化和非结构化数据;能够根据业务需要实现实时、批量、全量、增量等采集方式;有助于在开始数据探索之前确定正确的数据集;能力组件协同工作在数据湖构建中发挥重要作用,提升数据中台数据分析和处理能力。
-
公开(公告)号:CN115794863A
公开(公告)日:2023-03-14
申请号:CN202211565237.5
申请日:2022-12-07
Applicant: 中通服咨询设计研究院有限公司
IPC: G06F16/242 , G06F16/25 , G06F16/955
Abstract: 本发明提供了一种基于数据湖的数据中台API自动生成系统,包括数据采集模块、数据编目模块、API自动配置模块、API自动生成模块、API自动部署模块;本发明可以数据资源目录的不同主题数据,自适应调整主题数据服务API接口,自动生成服务API接口,该方法以一种高效简单的方式实现服务API接口的自动生成,可实现数据层与应用层的解耦并高效的生成API接口并自动部署,为项目实际建设者提供有效的原子能力。
-
公开(公告)号:CN118504563A
公开(公告)日:2024-08-16
申请号:CN202410474462.0
申请日:2024-04-19
Applicant: 中通服咨询设计研究院有限公司
IPC: G06F40/295 , G06F40/186 , G06F16/34 , G06F40/289 , G06F16/35 , G06F16/31 , G06N3/04 , G06F16/332
Abstract: 本发明提出了一种基于大语言模型的命名实体识别方法及系统,其中,方法包括:对LangChain架构进行优化;设计提示词模板;设计大语言模型摘要提取器和大语言模型实体提取器;构建向量化数据库;使用提示词模板,优化后的LangChain架构,大语言模型实体提取器,以及向量化数据库,根据用户输入的命名实体识别任务,输出待识别文档的命名实体识别结果,完成基于大语言模型的命名实体识别;所述系统,用于实现上述的方法,包括:文档预处理模块、向量化模块和命名实体识别模块。
-
-