-
公开(公告)号:CN105549915A
公开(公告)日:2016-05-04
申请号:CN201510993850.0
申请日:2015-12-25
Applicant: 曙光信息产业(北京)有限公司 , 曙光信息产业股份有限公司
IPC: G06F3/06
CPC classification number: G06F3/0604 , G06F3/0643 , G06F3/0647
Abstract: 本发明提供了一种磁盘坏块隔离方法及系统,包括:数据服务器读取一个底层的对象文件时如果发现其对应的磁盘扇区损坏,则将该对象文件移动到一个特定的坏块目录中,然后由元数据服务器主导,借助分布式文件系统中的冗余数据,在该分布式文件系统的其他位置重建该对象文件。由于数据服务器将包含坏块的对象文件移动到坏块目录,而不是直接删除,于是该坏块不会被再次使用,从而避免了磁盘控制器将坏块重映射到磁盘保留区,避免了坏块对磁盘性能和整个分布式文件系统性能的影响。
-
公开(公告)号:CN119441153A
公开(公告)日:2025-02-14
申请号:CN202411474207.2
申请日:2024-10-22
Applicant: 曙光信息产业股份有限公司 , 曙光信息产业(北京)有限公司
IPC: G06F16/16 , G06F16/174 , G06F16/18 , G06F16/17
Abstract: 本申请涉及数据存储技术领域,尤其涉及一种数据处理方法、装置、设备及存储介质,用以提高LSM数中不同键的删除效率。其中,方法包括:对于日志结构合并LSM树的任意层级,获取层级关联的各个待处理文件,即只读内存表或源SST,将其中的第一类key排序并遍历,根据预设的判定条件确定key是否无效;其中,判定条件包括如下至少一种:key自身或其对应的value满足第一取值条件,key自身或其对应的value与其前序key自身或其对应的value满足第二取值条件;第一类key为各个待处理文件中不相同的key;对于各个待处理文件,通过有效key的键值对数据生成目标SST。
-
公开(公告)号:CN116680281A
公开(公告)日:2023-09-01
申请号:CN202310538549.5
申请日:2023-05-12
Applicant: 曙光信息产业(北京)有限公司
IPC: G06F16/23
Abstract: 本申请涉及一种数据一致性校验方法、装置、计算机设备、存储介质和计算机程序产品。所述方法包括:响应于数据一致性校验请求,获取目标数据块组中各数据块当前记录的标识序列;标识序列是数据块的数据更新时生成的、用于表征当前数据块更新时目标数据块组中各数据块的更新时序;根据目标数据块组对应的基准标识序列和预设的序列匹配规则,将基准标识序列与各数据块当前记录的标识序列进行匹配处理,得到各数据块的匹配结果;基准标识序列用于表征目标数据块组的全局更新时序;根据各数据块的匹配结果确定目标数据块组的数据一致性校验结果。采用本方法能够节约资源开销。
-
公开(公告)号:CN117851102A
公开(公告)日:2024-04-09
申请号:CN202311799037.0
申请日:2023-12-25
Applicant: 曙光信息产业股份有限公司 , 曙光信息产业(北京)有限公司
IPC: G06F11/07
Abstract: 本申请涉及一种数据修复方法、装置、计算机设备、存储介质和计算机程序产品。所述方法包括:获取故障存储单元的故障地址;基于故障地址确定目标存储单元,基于目标存储单元采集修复数据,并基于修复数据修复故障存储单元。通过采用本方法,可以基于故障的存储单元的地址与存储单元之间的对应关系,确定故障地址对应的目标存储单元,并在目标存储单元中采集修复数据,基于采集到的修复数据对故障的存储单元进行修复,实现故障的逻辑块地址的数据修复,避免计算大量校验数据,保证数据修复的准确度以及效率。
-
公开(公告)号:CN119766684A
公开(公告)日:2025-04-04
申请号:CN202411924226.0
申请日:2024-12-24
Applicant: 曙光信息产业股份有限公司 , 曙光信息产业(北京)有限公司
IPC: H04L43/08 , H04L43/12 , H04L67/141 , H04L67/143
Abstract: 本申请提供了一种测试系统、方法、装置、设备及介质,用以提高测试效率。该方法中客户端可以在接收到测试命令之后,向服务端发送短连接请求,服务端在接收到短连接请求时,可以与客户端之间建立短连接;客户端在识别到与服务端之间建立短连接后,可以将测试命令发送给服务端;服务端在接收到测试命令后,可以获取测试命令相应的数据信息,并将数据信息返回给客户端,客户端在接收到数据信息后,客户端与服务端之间可以断开短连接,及时释放系统资源,基于此,可以实现提高测试效率的目的。
-
公开(公告)号:CN106775468B
公开(公告)日:2020-01-10
申请号:CN201611111319.7
申请日:2016-12-06
Applicant: 曙光信息产业(北京)有限公司
IPC: G06F3/06
Abstract: 本发明公开了一种分布式事务的实现方法和实现系统,该实现方法包括:创建事务及事务ID;一次提交事务到与事务对应的元数据节点,元数据节点包括快速存储设备;根据事务ID二次提交事务到与事务对应的目标对象。本发明通过为各个元数据节点均配置一个快速存储设备,将事务直接发送到目的元数据节点的快速存储设备中,避免了单独设置事务存储节点带来的写入数据需要两次下盘的问题和事务存储节点故障导致提供服务时间延长的问题,减少了一次提交的时间,简化了事务的处理流程。
-
公开(公告)号:CN105630875A
公开(公告)日:2016-06-01
申请号:CN201510953865.4
申请日:2015-12-17
Applicant: 曙光信息产业(北京)有限公司 , 曙光信息产业股份有限公司
IPC: G06F17/30
CPC classification number: G06F16/182 , G06F16/13 , G06F16/17
Abstract: 本发明提供了一种文件修复方法和系统,通过对修复流程的加锁进行限制,当修复流程试图对文件加锁时,如果该锁存在使用者,则不排队抢占锁,而是直接失败,等待下一轮修复时再进行尝试;当修复流程加锁成功后,设置锁属性为可抢占,从而避免了正常业务持有的锁被修复流程抢占,以及正常业务等待修复释放锁的情况,解决了故障文件修复流程的执行会导致正常业务流程响应时间延长的问题,降低了数据修复对正常业务的影响。
-
公开(公告)号:CN117873385A
公开(公告)日:2024-04-12
申请号:CN202311799581.5
申请日:2023-12-25
Applicant: 曙光信息产业(北京)有限公司 , 曙光信息产业股份有限公司
IPC: G06F3/06
Abstract: 本申请涉及一种垃圾回收方法、装置、设备、存储介质和程序产品。所述方法包括:从第一独立磁盘冗余阵列组RAID包含的需要进行重组的数据块中确定冷热程度相同的目标数据块,第一RAID组为进行垃圾回收的RAID组,若目标数据块的数量不为预设值的整数倍,则将目标数据块重组为至少一个第二RAID组,其中,预设值为标准RAID组中包含的数据块的数量,至少一个第二RAID组中存在非标准RAID组,非标准RAID组中包含的数据块数量不等于预设值。采用本方法能够提高RAID组性能。
-
公开(公告)号:CN106775468A
公开(公告)日:2017-05-31
申请号:CN201611111319.7
申请日:2016-12-06
Applicant: 曙光信息产业(北京)有限公司
IPC: G06F3/06
Abstract: 本发明公开了一种分布式事务的实现方法和实现系统,该实现方法包括:创建事务及事务ID;一次提交事务到与事务对应的元数据节点,元数据节点包括快速存储设备;根据事务ID二次提交事务到与事务对应的目标对象。本发明通过为各个元数据节点均配置一个快速存储设备,将事务直接发送到目的元数据节点的快速存储设备中,避免了单独设置事务存储节点带来的写入数据需要两次下盘的问题和事务存储节点故障导致提供服务时间延长的问题,减少了一次提交的时间,简化了事务的处理流程。
-
-
-
-
-
-
-
-