-
公开(公告)号:CN116594748B
公开(公告)日:2024-09-03
申请号:CN202310572668.2
申请日:2023-05-19
Applicant: 航天宏图信息技术股份有限公司
IPC: G06F9/48 , G06F9/50 , G06N3/0464 , G06N3/0442 , G06N3/084 , G06N3/082 , G06N3/096
Abstract: 本申请提供了一种针对任务的模型定制处理方法、装置、设备和介质,涉及任务处理技术领域,该方法包括:基于预先构建的意图理解集成模型将待处理任务分解为多个子任务,并基于不同子任务之间的关联性进行时序编码,确定子任务的执行顺序;针对每个子任务,根据模型粒度在模型库中搜索匹配相应的子任务模型;响应针对子任务模型的调参请求,对子任务模型进行定制处理,得到针对待处理任务的定制模型,以通过定制模型按照子任务的执行顺序对待处理任务进行处理。本申请在处理任务体量大、任务种类多的情况下,降低任务处理复杂度、简化神经网络参数,降低训练样本需求量,提升任务处理的效率同时降低计算时的内存消耗,提升了任务处理的准确性。
-
公开(公告)号:CN118210825B
公开(公告)日:2024-07-26
申请号:CN202410634809.3
申请日:2024-05-22
Applicant: 航天宏图信息技术股份有限公司
IPC: G06F16/2453 , G06F16/2455 , G06F16/22
Abstract: 本发明提供了数据库查询性能优化方法、装置、电子设备和存储介质,通过扩展PostgresSQL内存缓冲区域得到索引共享缓冲区域,该索引共享缓冲区域供索引数据申请使用,且独立于共享缓冲区域维护,考虑到在索引的检索过程中,越接近根节点的索引数据越频繁地被读取访问,所以,索引共享缓冲区域的淘汰策略保证在进行换入换出操作时,索引数据所处的层级越低,越接近根节点,被淘汰的几率越低,越不容易被换出,建立了索引共享缓冲区域的写回进程,该写回进程的唤醒时间间隔更长,且单次写回修改的索引数据的数据量更少,保证了索引数据可以更长时间地留在索引共享缓冲区域内,在执行查询语句时减少使用索引数据的读取消耗,从而能极大地改善查询性能。
-
公开(公告)号:CN117649101A
公开(公告)日:2024-03-05
申请号:CN202410122462.4
申请日:2024-01-30
Applicant: 航天宏图信息技术股份有限公司
IPC: G06Q10/0631 , G06Q10/101
Abstract: 本发明提供了一种自动及协同相结合的卫星影像生产方法、装置及设备,涉及遥感数据处理技术领域,包括:获取卫星影像数据和待执行的影像生产任务集;其中,影像生产任务集包括多个生产任务,生产任务的任务类型包括自动类型或协同类型;在执行影像生产任务集的过程中,结合待执行的当前生产任务的任务类型,对卫星影像数据或者前一生产任务输出的过程数据进行自动处理或协同生产,得到当前生产任务输出的过程数据;在影像生产任务集执行结束时,确定卫星影像数据对应的处理结果。本发明可以在保障影像处理质量的同时,解决了因自动处理与大规模人工处理相分离而导致整体效率低的问题,从而提升了规模化影像生产处理的效率。
-
公开(公告)号:CN113254175A
公开(公告)日:2021-08-13
申请号:CN202110582353.7
申请日:2021-05-27
Applicant: 航天宏图信息技术股份有限公司 , 上海宏图空间网络科技有限公司
Abstract: 本申请实施例提供一种算法调度方法、数据处理流程驱动方法及装置,涉及遥感数据处理技术领域。该方法包括轮询动态队列服务,以获取动态任务队列中待执行的算法任务;执行所述算法任务;将所述算法任务的执行结果发送至状态机服务,以使所述状态机服务根据所述执行结果更新算法执行状态,并根据流程定义调整动态任务队列中待执行的算法任务;基于状态机服务和动态队列的业务流程驱动和监控技术以及基于轮询的算法任务执行模型,解决了现有方法无法管理更新大量的遥感影像处理算法,方便灵活的进行流程编排和调度监控各种遥感影像数据处理任务的问题。
-
公开(公告)号:CN119669497A
公开(公告)日:2025-03-21
申请号:CN202411721567.8
申请日:2024-11-28
Applicant: 航天宏图信息技术股份有限公司
Abstract: 本发明提供了一种无人值守的遥感影像处理方法、系统、设备及介质,涉及遥感影像处理技术领域,包括:通过扫描管理模块按照扫描项描述的扫描规则执行数据扫描操作得到待处理遥感影像;通过任务中心模块针对待处理遥感影像创建影像处理任务,基于扫描项从流程管理模块内调用目标遥感处理业务流程;通过资源中心模块为影像处理任务分配计算资源;通过任务中心模块利用计算资源针对待处理遥感影像执行目标遥感处理业务流程得到目标处理成果;通过数据管理模块对目标处理成果执行入库操作。本发明不仅可以显著提升遥感影像处理的通用性,而且能够进一步提升遥感影像处理的自动化程度,以减少人工干预,提升大规模遥感影像处理的效率。
-
公开(公告)号:CN118466857B
公开(公告)日:2024-11-15
申请号:CN202410924390.5
申请日:2024-07-11
Applicant: 航天宏图信息技术股份有限公司
Abstract: 本发明提供了一种大尺寸数据写入方法、装置、设备及介质,包括:初始化数据写入事务,以在目标数据库中申请连续内存缓冲区,并为连续内存缓冲区添加目标标记,数据写入事务用于保证将至少一条待处理数据写入至磁盘的物理页面流程中的数据完整性和一致性,目标标记用于使连续内存缓冲区被数据写入事务独占使用;按照连续内存缓冲区的运行机制,将各待处理数据连续且正序地缓存至连续内存缓冲区内,以及将连续内存缓冲区内缓存的数据写入至磁盘的物理页面;在待处理数据写入完毕之后,针对连续内存缓冲区执行清理操作,以及针对目标标记执行删除操作。本发明可以有效降低申请Buffer的时间消耗,同时能够有效地减少磁盘寻址时间。
-
公开(公告)号:CN117649101B
公开(公告)日:2024-05-14
申请号:CN202410122462.4
申请日:2024-01-30
Applicant: 航天宏图信息技术股份有限公司
IPC: G06Q10/0631 , G06Q10/101
Abstract: 本发明提供了一种自动及协同相结合的卫星影像生产方法、装置及设备,涉及遥感数据处理技术领域,包括:获取卫星影像数据和待执行的影像生产任务集;其中,影像生产任务集包括多个生产任务,生产任务的任务类型包括自动类型或协同类型;在执行影像生产任务集的过程中,结合待执行的当前生产任务的任务类型,对卫星影像数据或者前一生产任务输出的过程数据进行自动处理或协同生产,得到当前生产任务输出的过程数据;在影像生产任务集执行结束时,确定卫星影像数据对应的处理结果。本发明可以在保障影像处理质量的同时,解决了因自动处理与大规模人工处理相分离而导致整体效率低的问题,从而提升了规模化影像生产处理的效率。
-
公开(公告)号:CN118210825A
公开(公告)日:2024-06-18
申请号:CN202410634809.3
申请日:2024-05-22
Applicant: 航天宏图信息技术股份有限公司
IPC: G06F16/2453 , G06F16/2455 , G06F16/22
Abstract: 本发明提供了数据库查询性能优化方法、装置、电子设备和存储介质,通过扩展PostgresSQL内存缓冲区域得到索引共享缓冲区域,该索引共享缓冲区域供索引数据申请使用,且独立于共享缓冲区域维护,考虑到在索引的检索过程中,越接近根节点的索引数据越频繁地被读取访问,所以,索引共享缓冲区域的淘汰策略保证在进行换入换出操作时,索引数据所处的层级越低,越接近根节点,被淘汰的几率越低,越不容易被换出,建立了索引共享缓冲区域的写回进程,该写回进程的唤醒时间间隔更长,且单次写回修改的索引数据的数据量更少,保证了索引数据可以更长时间地留在索引共享缓冲区域内,在执行查询语句时减少使用索引数据的读取消耗,从而能极大地改善查询性能。
-
公开(公告)号:CN118210455A
公开(公告)日:2024-06-18
申请号:CN202410627166.X
申请日:2024-05-21
Applicant: 航天宏图信息技术股份有限公司
IPC: G06F3/06
Abstract: 本发明提供了一种超长字段数据读写性能优化方法、装置、电子设备和存储介质,该方法中,每个数据块的大小与数据页的存储容量相同,可以大幅度减少原始数据拆分得到的数据块的数量,建立了有效的数据块组织方式,保证多个数据块按正序地连续地存储到待写入的连续数据页中,多个数据块写入时,预先申请并占用多个待写入的连续数据页,通过线程池并行有序地将多个数据块写入对应的待写入的连续数据页,随着拆分的数据块的数量的减少和并行化的引入,可以极大地提升写入性能,读取原始数据时,寻找到起始的数据页的位置,后续仅需连续读取目标连续数据页(即多个连续数据页)即可完成原始数据的读取,极大地减少磁盘寻址时间,提升了读取性能。
-
公开(公告)号:CN116594748A
公开(公告)日:2023-08-15
申请号:CN202310572668.2
申请日:2023-05-19
Applicant: 航天宏图信息技术股份有限公司
IPC: G06F9/48 , G06F9/50 , G06N3/0464 , G06N3/0442 , G06N3/084 , G06N3/082 , G06N3/096
Abstract: 本申请提供了一种针对任务的模型定制处理方法、装置、设备和介质,涉及任务处理技术领域,该方法包括:基于预先构建的意图理解集成模型将待处理任务分解为多个子任务,并基于不同子任务之间的关联性进行时序编码,确定子任务的执行顺序;针对每个子任务,根据模型粒度在模型库中搜索匹配相应的子任务模型;响应针对子任务模型的调参请求,对子任务模型进行定制处理,得到针对待处理任务的定制模型,以通过定制模型按照子任务的执行顺序对待处理任务进行处理。本申请在处理任务体量大、任务种类多的情况下,降低任务处理复杂度、简化神经网络参数,降低训练样本需求量,提升任务处理的效率同时降低计算时的内存消耗,提升了任务处理的准确性。
-
-
-
-
-
-
-
-
-