-
公开(公告)号:CN117130564A
公开(公告)日:2023-11-28
申请号:CN202311199622.7
申请日:2023-09-18
Applicant: 北京计算机技术及应用研究所
IPC: G06F3/06
Abstract: 本发明涉及一种无锁多控制器磁盘阵列系统,属于数据存储技术领域。为了避免多控磁盘阵列系统在多控多活模式下因共享锁引起的性能开销,提高磁盘阵列系统的性能和可靠性,本发明设计了一种无锁的多控磁盘阵列系统。该系统通过私有客户端对IO请求进行分割,按RAID条带组织方式发送请求到相应存储节点,避免了条带冲突和缓存不一致问题,充分发挥了多控的硬件优势;同时,重构了RAID数据管理机制,各控制器只需要管理自己的数据空间,避免了多控制器之间RAID重建时的频繁调度和重复重建,实现了并发重构,对热备空间的重构效率有极大地提升。
-
公开(公告)号:CN115269322A
公开(公告)日:2022-11-01
申请号:CN202210881328.3
申请日:2022-07-26
Applicant: 北京计算机技术及应用研究所
IPC: G06F11/30
Abstract: 本发明涉及一种基于多维数据融合的硬盘状态通用监测方法,属于数据存储技术领域。该方案中设计了一套硬盘空间状态轻量级映射表DMAP与硬盘细粒度IO统计方法;通过对SMART数据、Kernel日志、DMAP、IO细粒度信息处理、筛选得到的多维特征数据进行横向对比,实时快速地定位异常硬盘;通过对异常硬盘多维数据进行融合决策,排除状态误判,准确发现慢盘、故障盘。本发明是一种轻量级应用技术,能够在不影响存储业务的同时,提供快速定位慢盘、坏盘的服务,有效支撑存储系统的高性能、高可靠性。
-
公开(公告)号:CN114816792A
公开(公告)日:2022-07-29
申请号:CN202210419234.4
申请日:2022-04-20
Applicant: 北京计算机技术及应用研究所
IPC: G06F9/54
Abstract: 本发明涉及一种基于专用通道的远程函数调用方法,属于数据存储技术领域。本发明的方法中形成独立的远程函数调用动态库,并通过线程池高性能调度应用程序发起的远程调用,通过哈希表快速索引远程服务集合、分发数据并收集返回函数执行结果,通过桩函数使用不同的通信协议收发数据,并且可以添加新的通信协议,进而对外提供了完整的函数调用、服务注册、协议替换接口。本发明创新性地实现了支持多通信协议的远程函数调用方法,在保证数据传输效率的同时,提供了规范的程序调用方法,简化了多机应用程序的开发流程。
-
公开(公告)号:CN113377709B
公开(公告)日:2022-07-19
申请号:CN202110635461.6
申请日:2021-06-08
Applicant: 北京计算机技术及应用研究所
IPC: G06F16/13 , G06F16/16 , G06F16/182 , G06F3/06 , G06F11/10
Abstract: 本发明涉及一种基于哈希的HDFS后端存储系统,涉及数据存储技术领域。本发明在HDFS的DataNode部分添加哈希函数,用于将HDFS的数据块ID映射成相应的内存和磁盘地址偏移,DataNode可以根据地址偏移直接与内存和磁盘进行数据交互,绕过了原有的本地文件系统层,HDFS后端存储系统相关的元数据存储在磁盘首部,集群重启时可根据元数据重建内存数据结构,从而保证了数据的安全性和一致性。本发明缩短了HDFS的IO路径,提高了HDFS的存取性能,提升了用户的数据存储体验。
-
公开(公告)号:CN113157808B
公开(公告)日:2023-02-03
申请号:CN202110460354.4
申请日:2021-04-27
Applicant: 北京计算机技术及应用研究所
Abstract: 本发明涉及一种基于内存和轻量级数据库的配置文件同步系统及方法,涉及数据存储技术领域。本发明为多节点集群或分布式集群提供一种轻量、快速的配置文件同步系统及方法,其通过对内存数据库、后端数据库和管理模块的合理设计,能够规避管理服务单节点故障、提升系统管理性能和可靠性;简化节点加入步骤、降低节点加入难度。
-
公开(公告)号:CN113377709A
公开(公告)日:2021-09-10
申请号:CN202110635461.6
申请日:2021-06-08
Applicant: 北京计算机技术及应用研究所
IPC: G06F16/13 , G06F16/16 , G06F16/182 , G06F3/06 , G06F11/10
Abstract: 本发明涉及一种基于哈希的HDFS后端存储系统,涉及数据存储技术领域。本发明在HDFS的DataNode部分添加哈希函数,用于将HDFS的数据块ID映射成相应的内存和磁盘地址偏移,DataNode可以根据地址偏移直接与内存和磁盘进行数据交互,绕过了原有的本地文件系统层,HDFS后端存储系统相关的元数据存储在磁盘首部,集群重启时可根据元数据重建内存数据结构,从而保证了数据的安全性和一致性。本发明缩短了HDFS的IO路径,提高了HDFS的存取性能,提升了用户的数据存储体验。
-
公开(公告)号:CN114816792B
公开(公告)日:2024-04-09
申请号:CN202210419234.4
申请日:2022-04-20
Applicant: 北京计算机技术及应用研究所
IPC: G06F9/54
Abstract: 本发明涉及一种基于专用通道的远程函数调用方法,属于数据存储技术领域。本发明的方法中形成独立的远程函数调用动态库,并通过线程池高性能调度应用程序发起的远程调用,通过哈希表快速索引远程服务集合、分发数据并收集返回函数执行结果,通过桩函数使用不同的通信协议收发数据,并且可以添加新的通信协议,进而对外提供了完整的函数调用、服务注册、协议替换接口。本发明创新性地实现了支持多通信协议的远程函数调用方法,在保证数据传输效率的同时,提供了规范的程序调用方法,简化了多机应用程序的开发流程。
-
公开(公告)号:CN116185284A
公开(公告)日:2023-05-30
申请号:CN202211655199.2
申请日:2022-12-21
Applicant: 北京计算机技术及应用研究所
IPC: G06F3/06
Abstract: 本发明涉及一种基于数据块活跃度的分层存储系统,属于数据存储技术领域。分层存储系统采用两层存储层次:NVMeSSD层和SATA SSD/HDD层,NVMeSSD层为高级层,SATASSD/HDD层为低级层,分层存储系统根据数据块的访问频率,在无人干预的情况下,实现数据在高级层和低级层之间动态迁移。本发明根据数据块的访问频率,在无人干预的情况下,实现数据在高级层和低级层之间动态迁移。
-
公开(公告)号:CN115878032A
公开(公告)日:2023-03-31
申请号:CN202211507834.2
申请日:2022-11-24
Applicant: 北京计算机技术及应用研究所
IPC: G06F3/06
Abstract: 本发明涉及一种MDRAID快速重构系统及方法,属于数据存储技术领域。该方案通过条带位图和文件系统分析器感知存储空间有效数据,减少无效的重构,提高了RAID的重构效率,对稀疏的存储空间,极大地缩短了重构时间;同时引入了动态局部重组的方案,将丢失的有效数据重构到新的RAID空间,既发挥了阵列中多盘的并发优势,又实现了无热备盘条件下RAID系统的自愈。
-
公开(公告)号:CN116450718A
公开(公告)日:2023-07-18
申请号:CN202310295881.3
申请日:2023-03-24
Applicant: 北京计算机技术及应用研究所
Abstract: 本发明涉及一种基于双控设备的触发式管理系统,属于数据存储技术领域。该系统逻辑上分为接口层模块、数据层模块和处理层模块,在收到请求时增量更新系统状态数据,并提供了数据全量同步的接口,实现了完整的双控系统管理方案。本发明中,一个控制器会通过RPC获取并整合另一个控制器的数据,保障了数据的同步;读操作直接从数据库获取数据,无需遍历所有外设,降低了读操作延时;写操作触发式更新相关的数据,无需全量重写数据库,降低了写操作的延时。
-
-
-
-
-
-
-
-
-