-
公开(公告)号:CN110602235B
公开(公告)日:2022-08-23
申请号:CN201910897511.0
申请日:2019-09-23
Applicant: 北京中农信达信息技术有限公司
Inventor: 陈晓迪
Abstract: 本发明公开了一种PB级遥感影像数据服务发布与切片技术,包括如下步骤:由Geoserver通过选择原始数据目录,根据选择的数据格式,调用GDAL提供的方法获取每个栅格数据的基本信息,对不符合要求的数据进行过滤,并通过日志进行记录;由Geoserver未执行过的任务进行预处理,预处理包括调用GDAL提供的栅格数据切片方法来多线程执行多个切片处理任务,并输出到对应任务名称的文件目录下;由Geoserver将每个预处理任务完成后的栅格数据集作为一个待发布图层,根据基本配置中的Geoserver相关信息,利用Geoserver管理器调用Geoserver提供的Rest接口实现图层的批量发布。
-
公开(公告)号:CN111563081A
公开(公告)日:2020-08-21
申请号:CN202010276951.7
申请日:2020-04-09
Applicant: 农业农村部规划设计研究院 , 北京中农信达信息技术有限公司
Abstract: 本发明公开了一种矢量要素并行计算方法、装置、存储介质及终端,该方法包括:根据Spark计算框架构建分布式要素数据集模型;根据分布式要素数据集模型对外部数据进行数据读取;根据读取后的数据进行数据重分区;将四叉树索引和二叉树索引结合对重分区后的数据创建本地空间索引;对创建本地空间索引后的数据进行数据处理和分析。通过实施本发明,基于四叉树索引和二叉树索引结合使用的方式,为重分区后的数据创建本地空间索引,采用此种方式构建的复合空间索引能够极大的提高空间数据的叠加分析效率,解决了现有技术采用传统矢量要素分析方法处理海量矢量要素时效率较低的技术问题。
-
公开(公告)号:CN110602235A
公开(公告)日:2019-12-20
申请号:CN201910897511.0
申请日:2019-09-23
Applicant: 北京中农信达信息技术有限公司
Inventor: 陈晓迪
Abstract: 本发明公开了一种PB级遥感影像数据服务发布与切片技术,包括如下步骤:由Geoserver通过选择原始数据目录,根据选择的数据格式,调用GDAL提供的方法获取每个栅格数据的基本信息,对不符合要求的数据进行过滤,并通过日志进行记录;由Geoserver未执行过的任务进行预处理,预处理包括调用GDAL提供的栅格数据切片方法来多线程执行多个切片处理任务,并输出到对应任务名称的文件目录下;由Geoserver将每个预处理任务完成后的栅格数据集作为一个待发布图层,根据基本配置中的Geoserver相关信息,利用Geoserver管理器调用Geoserver提供的Rest接口实现图层的批量发布。
-
公开(公告)号:CN117743730A
公开(公告)日:2024-03-22
申请号:CN202311794201.9
申请日:2023-12-25
Applicant: 北京中农信达信息技术有限公司
Abstract: 本发明提供一种基于维度树自动指标关联计算的方法及系统,涉及数据处理技术领域,包括:针对业务建立维度树,包括建立维度节点,设置维度节点的属性;根据业务的变化和发展,在维度树中任一维度节点下建立下一级的维度节点,下一级的维度节点继承其上一级维度节点的属性;在维度树中选择维度节点挂载指标,先选择指标类型,包括基础指标和复合指标,再定义指标的计算规则,最后将该指标挂载到该维度节点下;计算指标时,确认指标所在的维度节点,判断指标的类型,计算指标结果。本发明根据项目实际需求动态的增加和计算指标,满足业务的变化和发展需求,提高数据处理的效率和准确性。
-
公开(公告)号:CN116246133A
公开(公告)日:2023-06-09
申请号:CN202211619664.7
申请日:2022-12-15
Applicant: 北京中农信达信息技术有限公司
IPC: G06V10/80 , G06V10/766 , G06V20/13
Abstract: 本发明提出了一种基于多源影像的时序指数数据融合方法及装置,方法包括:从目标区域获取两种基础遥感影像数据集以及目标遥感影像数据集,基于预设时间间隔需求,对应的标准时间序列以及无云时序数据集,进一步构建对应的回归模型以及融合数据集;对融合数据集进行重构处理,以获得第一基础遥感结果数据集;利用第一基础遥感结果数据集构建第二基础遥感结果数据集;利用第二基础遥感结果数据集,确定结果数据集。本发明提供的方法是选择基于自定义需求构建标准的时间序列,并且依照时间序列来分别构建时序数据集,考虑了时间间隔的情况,采用计算时间上的权重来重新构建时间间隔内的代表性数据,满足自定义时间分辨率的需要,也减少了后续时间对照的差异性。
-
公开(公告)号:CN117862074A
公开(公告)日:2024-04-12
申请号:CN202311518192.0
申请日:2023-11-14
Applicant: 盐城市盐都区互联网农业发展中心 , 北京中农信达信息技术有限公司
Abstract: 本发明涉及大闸蟹养殖生产技术领域,具体为一种大闸蟹全产业链管理系统,包括防护外壳,防护外壳的内部安装有用于大闸蟹全产业链管理的数据处理器,防护外壳的内壁上安装有行走机构,行走机构上安装有清扫机构,清扫机构上安装有水平往复驱动机构。该种大闸蟹全产业链管理系统,通过凸轮与直齿轮同时转动,使得弹簧杆的活动端处于往复移动状态,通过连杆促使滑块向外两侧移动,在凸轮不在抵触弹簧杆时,弹簧杆自身的弹力使其活动端回来原来的位置,则会通过连杆带动滑块向内两侧移动,实现滑块的往复移动,进一步通过刷毛清理防护外壳内壁通风孔处的灰尘,避免因灰尘堆积影响该大闸蟹全产业链管理系统的散热效率。
-
公开(公告)号:CN110955656A
公开(公告)日:2020-04-03
申请号:CN201910897531.8
申请日:2019-09-23
Applicant: 北京中农信达信息技术有限公司
Inventor: 陈晓迪
Abstract: 本发明所提出的矢量数据拓扑运算索引优化机制与构建方法的实现步骤在于:S1、基于Shapefile文件中的矢量要素空间范围和要素偏移量创建四叉索引树索引文件,并将四叉索引树作为初始索引树,树内节点存储根据矢量要素划分的空间范围,范围内存储要素编码,编码可换算为偏移量,通过偏移量可获取要素实体;S2、迭代四叉索引树所有节点并获取节点范围和节点内要素;S3、将二叉树作为承接对四叉索引树查询后结果要素的子树;S4、进行矢量数据拓扑分析,作为运算结果,采用此种索引方式,可大幅度节省计算机资源,计算亿级以内数据量要素。
-
公开(公告)号:CN118051562A
公开(公告)日:2024-05-17
申请号:CN202410203720.1
申请日:2024-02-23
Applicant: 北京中农信达信息技术有限公司
Inventor: 曹立宁
Abstract: 本发明公开了一种分布式多线程数据同步方法及系统,方法包括:根据配置的所要同步数据的数据来源、目标数据源、同步速率和执行周期,生成整库数据同步任务;根据用户所选择的需要同步的数据库,将整库数据同步任务分解得到数据同步子任务;由执行器分布式并行执行数据同步子任务;利用任务轮询机制对数据同步子任务进行轮询检测,将执行完成后的子任务移除并添加新的子任务,使得执行中的子任务数量保持预设任务并行度阈值,直至所有数据同步完成。通过本发明的技术方案,解决了单机模式数据同步硬件资源有限问题,同时具备同步任务运行资源可扩展性,简化了任务配置过程,解决了批量执行方式资源浪费问题。
-
公开(公告)号:CN118051511A
公开(公告)日:2024-05-17
申请号:CN202410203712.7
申请日:2024-02-23
Applicant: 北京中农信达信息技术有限公司
Inventor: 曹立宁
IPC: G06F16/215 , G06F16/28 , G06F16/25
Abstract: 本发明公开了一种海量数据快速校验及异常数据处理方法及系统,方法包括:提交数据检查任务至数据库集群,根据数据检查任务对应数据源,分区加载对应的数据;解析数据检查任务中预配置的检查规则,并根据检查规则生成检查任务工作流;自动执行检查任务工作流,获取检查筛选得到的异常数据,并对异常数据进行异常数据处理。通过本发明的技术方案,支持数据全生命周期管控,且只加载一次原始数据即可完成多规则的数据质量检查,实现了海量数据质检任务的高效处理,无需用户针对异常数据手动配置处理逻辑,极大的简化了繁琐的用户配置程序,实现了数据检查到数据处理的一站式全自动化配置。
-
公开(公告)号:CN117708858A
公开(公告)日:2024-03-15
申请号:CN202311820938.3
申请日:2023-12-27
Applicant: 北京中农信达信息技术有限公司
Abstract: 本发明提供一种数据自动化加密和解密的方法及系统,涉及数据处理技术领域,包括:识别目标业务系统的数据源配置,收集表特征和表血缘关系;基于决策树模型构建数据加密规则决策方法,得到标准加密决策树模型;将目标业务系统的业务数据及表特征、表血缘关系代入标准加密决策树模型,判断业务数据中每个数据项的决策结果;通过表特征和表血缘关系训练针对目标业务系统的决策树模型;构建加解密执行工厂并配置多种加解密算法,根据决策结果执行加解密。本发明通过动态代理、动态加载插件包的形式与原业务系统集成,达成加密解密的环境,在加解密过程中,分析原系统的特征,判断加密和解密的最优路径,减少人工成本和系统资源的过度消耗。
-
-
-
-
-
-
-
-
-