-
公开(公告)号:CN119739745B
公开(公告)日:2025-05-16
申请号:CN202510259257.7
申请日:2025-03-06
Applicant: 广东南方数码科技股份有限公司
IPC: G06F16/2453 , G06F16/215 , G06F16/25 , G06F16/27 , G06F16/2458 , G06F16/29 , G06F16/22
Abstract: 本发明涉及大数据技术领域,公开了一种时空大数据的任务调度方法、装置及存储介质,其中,该方法包括:对原始时空数据进行ETL清洗和标准化处理,得到符合OGC规范的统一格式时空数据;对所述统一格式时空数据进行空间降维运算并构建时空索引,得到时空索引数据集;将所述统一格式时空数据按照时空特征进行分布式存储并压缩,得到分区压缩数据;对所述分区压缩数据建立多维度查询索引,得到任务分配方案;基于所述任务分配方案执行分布式数据检索,得到原始查询结果;对所述原始查询结果进行数据完整性校验和空间关系重构,得到目标查询数据。该方法实现了计算资源的合理分配,有效降低各节点性能压力,提升了数据的可用性和互操作性。
-
公开(公告)号:CN113032509B
公开(公告)日:2022-06-24
申请号:CN202110316812.7
申请日:2021-03-23
Applicant: 广东南方数码科技股份有限公司
Abstract: 本申请提供一种基于分布式集群的地图切片方法、装置、设备及介质,涉及地理信息系统技术领域。该方法包括:根据待切片区域的边界值,计算目标瓦片的瓦片级别下待生成的各目标瓦片的行列号以及边界值;对各目标瓦片的边界值以及各地理区域的边界值分别进行编码,得到各目标瓦片对应的编码值以及各地理区域的对应的编码值,形成第一集合以及第二集合;将第一集合和第二集合进行关联,得到关联数据;使用分布式集群中的多个执行器分别对各关联数据进行裁切处理,得到裁切处理结果数据;根据关联数据中的目标瓦片的瓦片级别和行列号以及作为值的裁切处理结果数据,使用各执行器生成各目标瓦片的瓦片数据。这样可以提高矢量数据切片的效率。
-
公开(公告)号:CN107017908B
公开(公告)日:2020-08-28
申请号:CN201710237510.4
申请日:2017-04-12
Applicant: 广东南方数码科技股份有限公司
IPC: H04B1/3827 , H04L29/06 , H04L29/08
Abstract: 本发明涉及通信技术领域,具体涉及一种基于智能穿戴设备的高并发物联网大数据通信方法,它采用如下的技术方案:其由激活类通信协议、定位类通信协议、设置类通信协议、功能类通信协议、系统类通信协议和警报指令通信协议组成;上述六大类通信协议之间互不影响冲突,上述六大类通信协议存于可储存介质中;它针对智能穿戴设备的高并发物联网大数据通信问题,建立了统一规范的通信标准,免除构建中间件成本,免除购买第三方服务成本,免除高并发物联网大数据通信下智能穿戴设备间通信兼容性无法得到保障的问题。
-
公开(公告)号:CN107017908A
公开(公告)日:2017-08-04
申请号:CN201710237510.4
申请日:2017-04-12
Applicant: 广东南方数码科技股份有限公司
IPC: H04B1/3827 , H04L29/06 , H04L29/08
Abstract: 本发明涉及通信技术领域,具体涉及一种基于智能穿戴设备的高并发物联网大数据通信协议,它采用如下的技术方案:其由激活类通信协议、定位类通信协议、设置类通信协议、功能类通信协议、系统类通信协议和警报指令通信协议组成;上述六大类通信协议之间互不影响冲突,上述六大类通信协议存于可储存介质中;它针对智能穿戴设备的高并发物联网大数据通信问题,建立了统一规范的通信标准,免除构建中间件成本,免除购买第三方服务成本,免除高并发物联网大数据通信下智能穿戴设备间通信兼容性无法得到保障的问题。
-
公开(公告)号:CN119739745A
公开(公告)日:2025-04-01
申请号:CN202510259257.7
申请日:2025-03-06
Applicant: 广东南方数码科技股份有限公司
IPC: G06F16/2453 , G06F16/215 , G06F16/25 , G06F16/27 , G06F16/2458 , G06F16/29 , G06F16/22
Abstract: 本发明涉及大数据技术领域,公开了一种时空大数据的任务调度方法、装置及存储介质,其中,该方法包括:对原始时空数据进行ETL清洗和标准化处理,得到符合OGC规范的统一格式时空数据;对所述统一格式时空数据进行空间降维运算并构建时空索引,得到时空索引数据集;将所述统一格式时空数据按照时空特征进行分布式存储并压缩,得到分区压缩数据;对所述分区压缩数据建立多维度查询索引,得到任务分配方案;基于所述任务分配方案执行分布式数据检索,得到原始查询结果;对所述原始查询结果进行数据完整性校验和空间关系重构,得到目标查询数据。该方法实现了计算资源的合理分配,有效降低各节点性能压力,提升了数据的可用性和互操作性。
-
公开(公告)号:CN106777271A
公开(公告)日:2017-05-31
申请号:CN201611240235.3
申请日:2016-12-29
Applicant: 广东南方数码科技股份有限公司
IPC: G06F17/30
Abstract: 本发明公开了一种基于基于服务资源池的自动搭建系统构建方法,该基于基于服务资源池的自动搭建系统构建方法具体步骤如下:S1:建立自动搭建系统容器框架,S2:构建数据资源池、插件资源池、界面资源池三大资源池,S3:基于数据资源池,设置WebGIS系统的标题、logo、底图、范围、比例尺、导航条和版权信息,S4:基于插件资源池,设置WebGIS系统的各功能组件,S5:基于界面资源池,设置WebGIS系统的界面皮肤样式,S6:对基于上述资源池自动搭建的WebGIS系统进行预览,S7:保存自动搭建的WebGIS系统。本发明解决非专业用户方便使用地理信息系统的问题,解决行业用户地理信息数据快速发布使用问题,解决专业用户地理信息系统开发效率低下问题。
-
公开(公告)号:CN114490912A
公开(公告)日:2022-05-13
申请号:CN202210131612.9
申请日:2022-02-14
Applicant: 广东南方数码科技股份有限公司
IPC: G06F16/29 , G06F16/951 , H04L67/00
Abstract: 本发明提供了一种瓦片数据的下载方法及装置,涉及地理信息的技术领域,包括:先获取地图网站在当前页面上的地图设置信息;其中,地图设置信息包括:当前缩放级别;然后基于地图设置信息和预设的切片定位算式,计算指定区域在当前缩放级别下的第一行列号范围;最后基于第一行列号范围,利用网络爬虫技术对指定区域的瓦片数据进行并行下载。本发明中的网络爬虫技术是多线程下载,并且根据需求只针对指定区域的瓦片数据进行下载,而不是针对全部区域,因此本发明可以节约下载时间,避免网络资源浪费。
-
公开(公告)号:CN114490662A
公开(公告)日:2022-05-13
申请号:CN202210131913.1
申请日:2022-02-14
Applicant: 广东南方数码科技股份有限公司
IPC: G06F16/22 , G06F16/215 , G06F16/242 , G06F16/25
Abstract: 本发明提供了一种工作流数据的存储方法及装置,涉及计算机的技术领域,包括:当监测到任一工作流执行触发事件时,先获取触发事件的明细数据,并将明细数据存储至本地数据库;然后基于ETL对明细数据进行消息处理,得到流程变更数据;再将流程变更数据按照消息队列的方式存储至Kafka数据源,并在成功存储后将明细数据从本地数据库中删除;最后将流程变更数据按照预设条件转换成目标工作流数据,并将目标工作流数据存储至ElasticSearch数据源。本发明中同一工作流执行的触发事件的明细数据对应一条目标工作流数据,在查询时只需要一个ElasticSearch数据源即可实现所有工作流数据的查询,因此提高了查询效率。
-
公开(公告)号:CN113032509A
公开(公告)日:2021-06-25
申请号:CN202110316812.7
申请日:2021-03-23
Applicant: 广东南方数码科技股份有限公司
Abstract: 本申请提供一种基于分布式集群的地图切片方法、装置、设备及介质,涉及地理信息系统技术领域。该方法包括:根据待切片区域的边界值,计算目标瓦片的瓦片级别下待生成的各目标瓦片的行列号以及边界值;对各目标瓦片的边界值以及各地理区域的边界值分别进行编码,得到各目标瓦片对应的编码值以及各地理区域的对应的编码值,形成第一集合以及第二集合;将第一集合和第二集合进行关联,得到关联数据;使用分布式集群中的多个执行器分别对各关联数据进行裁切处理,得到裁切处理结果数据;根据关联数据中的目标瓦片的瓦片级别和行列号以及作为值的裁切处理结果数据,使用各执行器生成各目标瓦片的瓦片数据。这样可以提高矢量数据切片的效率。
-
-
-
-
-
-
-
-