一种写时拷贝方法、装置、设备及计算机可读存储介质

    公开(公告)号:CN115826878B

    公开(公告)日:2023-05-16

    申请号:CN202310108005.5

    申请日:2023-02-14

    Abstract: 本申请公开了一种写时拷贝方法、装置、设备及计算机可读存储介质,涉及云计算技术领域,包括获取cluster的大小与block的大小;若所述cluster的大小与所述block的大小的比值达到预设阈值,则创建block位图;以block为最小粒度,将源数据块中的目标数据拷贝到新数据块;在所述block位图中记录所述新数据块的首地址与所述源数据块的首地址以及所述新数据块中各数据块的更新状态。该方法能够提高写时拷贝的执行速度,提高系统整体响应能力。

    一种梯度数据同步方法及装置

    公开(公告)号:CN116090551A

    公开(公告)日:2023-05-09

    申请号:CN202310202801.5

    申请日:2023-03-06

    Abstract: 本申请公开了一种梯度数据同步方法及装置,涉及深度学习技术领域,包括:比较训练平台的第一个维度上的带宽与第二个维度上的带宽的大小;若带宽比较结果满足预设条件,则比较所述第一个维度上的负载与所述第二个维度上的负载的大小;根据负载比较结果,确定待聚合数据的调度顺序;根据所述调度顺序对所述待聚合数据块执行分层Allreduce操作,得到梯度数据同步结果。该方法能够提高分层Allreduce的整体宽带利用率,提高梯度数据的同步效率。

    一种数据迁移方法、装置及电子设备和存储介质

    公开(公告)号:CN115826885B

    公开(公告)日:2023-05-09

    申请号:CN202310140582.2

    申请日:2023-02-21

    Inventor: 李雪生 张凯 孙斌

    Abstract: 本申请公开了一种数据迁移方法、装置及电子设备和存储介质,涉及存储技术领域,该方法包括:接收用户态的应用程序发送的数据传输请求;将所述数据传输请求对应的读写数据划分为多个数据子段;利用多个数据迁移线程并行对多个所述数据子段在所述用户态的应用程序和内核态的缓存之间进行数据迁移;其中,所述数据迁移线程与所述数据子段一一对应。本申请提高了用户态和内核态之间的数据迁移效率。

    跨机柜服务器内存池化方法、装置、设备、服务器及介质

    公开(公告)号:CN116028232A

    公开(公告)日:2023-04-28

    申请号:CN202310166793.3

    申请日:2023-02-27

    Abstract: 本发明公开了一种跨机柜服务器内存池化方法、装置、设备、服务器及介质,属于服务器领域,用于对服务器内存进行池化。考虑到同一服务器集群中不同服务器机柜的内存使用情况不同,本申请在不同服务器机柜间搭建了通信装置,服务器机柜可以向其他服务器机柜申请第一目标设备的内存使用权,在申请到内存使用权后,便可以实现跨机柜对于设备内存的使用,在不增加内存设备数量的基础上满足了各个服务器机柜的内存使用需求,且提升了资源利用率。

    一种请求处理方法、系统、设备及计算机可读存储介质

    公开(公告)号:CN115774621B

    公开(公告)日:2023-04-28

    申请号:CN202310092878.1

    申请日:2023-02-10

    Inventor: 谢鹏 张建刚 郭坤

    Abstract: 本申请公开了一种请求处理方法、系统、设备及计算机可读存储介质,应用于计算机技术领域,获取待处理的请求信息;将请求信息添加至请求任务队列中;计算请求信息与用户使用场景的匹配度;基于匹配度预取与请求信息对应的应答数据并保存至内存中;若请求信息出请求任务队列,则从内存中读取对应的应答数据进行反馈。本申请中,在获取待处理的请求信息之后,可以将请求信息添加至请求任务队列中;并计算请求信息与用户场景的匹配度,并基于该匹配度预取与请求信息对的应答数据保存至内存中,这样当需要处理请求信息时,可以快速从内存中读取相应的应答数据进行反馈,提高了对请求信息的应答效率。

    一种文本信息处理方法、系统、设备及计算机存储介质

    公开(公告)号:CN115994536A

    公开(公告)日:2023-04-21

    申请号:CN202310294417.2

    申请日:2023-03-24

    Abstract: 本申请公开了一种文本信息处理方法、系统、设备及计算机存储介质,涉及AIGC技术领域,获取待处理的目标文本信息;对目标文本信息进行分词处理,得到目标词语;基于目标词语解析目标文本信息所描述的内容类型;若内容类型为静态内容,则基于文本生成图像模型生成目标文本信息对应的目标图片;若内容类型为动态内容,则基于文本生成视频模型生成目标文本信息对应的目标视频。本申请在内容类型为静态内容时,基于AIGC生成目标文本信息对应的目标图片,可以在内容类型为动态内容时,基于AIGC生成目标文本信息对应的目标视频,实现了自动应用AIGC来将目标文本信息转换为对应的目标图片或目标视频,提高了AIGC的自主处理能力。

    一种实时视频处理方法、装置、设备及存储介质

    公开(公告)号:CN115955581A

    公开(公告)日:2023-04-11

    申请号:CN202310246608.1

    申请日:2023-03-15

    Abstract: 本发明公开了一种实时视频处理方法、装置、设备及存储介质,涉及视频处理技术领域。该方法应用于存储业务系统,包括:获取用户发送的视频数据处理请求;若所述视频数据处理请求为写请求,则通过目标通道将所述写请求对应的待存储视频写入存储节点下目标块文件中的目标时间段子文件,并根据所述目标块文件及所述目标时间段子文件的信息更新所述目标通道的元数据;若所述视频数据处理请求为读请求,则通过查询所述目标通道的元数据确定所述读请求对应的目标视频数据。通过存储业务系统执行包含视频写入和读取的视频应用业务,实现取流业务与视频数据存储的解耦,录像检索只需检索作为全局元数据的通道元数据,长时间范围内的检索也能做到秒级返回。

    一种基于跨域设备的模型训练方法、装置、设备及介质

    公开(公告)号:CN115953651A

    公开(公告)日:2023-04-11

    申请号:CN202310232993.4

    申请日:2023-03-13

    Abstract: 本申请公开了一种基于跨域设备的模型训练方法、装置、设备及介质,涉及深度学习领域。该方法中,当属性信息与预测属性信息之间的差值时大于第一阈值,更新模型并使用更新后的模型再次对目标对象进行识别,当两者之间的差值小于或等于第一阈值,完成对模型的训练。在模型训练过程中,将第一费歇耳信息矩阵拆分为第二费歇耳矩阵,求解各第二费歇耳矩阵的逆矩阵,并进行迭代;在相邻两次迭代的改变量小于第二阈值时利用上一次迭代的第二费歇耳信息矩阵的第二逆矩阵作为当前次迭代的第二费歇耳信息矩阵的逆矩阵。可见,减小了迭代过程中的计算量以及费歇耳信息矩阵更新频率,较准确、高效地对目标对象进行识别;此外,避免了模型转存造成的资源浪费。

    一种元数据负载均衡方法、装置、设备及可读存储介质

    公开(公告)号:CN115952005A

    公开(公告)日:2023-04-11

    申请号:CN202310161610.9

    申请日:2023-02-24

    Inventor: 臧林劼

    Abstract: 本发明公开了一种元数据负载均衡方法、装置、设备及可读存储介质,涉及分布式存储技术领域,包括:获取分布式文件存储集群中各元数据服务分别对应的元数据负载压力信息;根据各元数据负载压力信息确定元数据迁移时刻、待元数据迁移的各目标元数据服务及各目标元数据服务之间的待迁移元数据数量;获取各目标元数据服务中各子树分区分别对应的迁移参数;根据各迁移参数确定导出子树分区和导入子树分区;当达到元数据迁移时刻时,将待迁移元数据数量的元数据从导出子树分区迁移至导入子树分区。本发明提升了对业务负载特征的辨识度,较大地降低了产生对元数据进行不必要、无效的迁移的概率,具有较好的元数据负载均衡特性。

Patent Agency Ranking