一种元数据集群并行分发处理方法和系统

    公开(公告)号:CN105119978B

    公开(公告)日:2019-05-24

    申请号:CN201510432254.5

    申请日:2015-07-21

    Inventor: 李雪生 张延良

    Abstract: 本发明公开了一种元数据集群并行分发处理方法和系统,包括:并行接收元数据集群网络连接的网络报文,并将接收到的网络报文按照预先设置的优先级分发到元数据集群对应的优先级处理队列中,所述优先级处理队列包括具有不同优先级的处理子队列;根据优先级处理队列中处理子队列的优先级上送网络报文,且并发上送不同优先级处理队列中优先级相同的处理子队列的网络报文。通过本发明,提高了元数据集群控制报文处理实时性,实现了元数据集群高负载状态稳定运行。

    一种分布式文件系统元数据信息获取方法

    公开(公告)号:CN105389350B

    公开(公告)日:2019-02-15

    申请号:CN201510713689.7

    申请日:2015-10-28

    Inventor: 张延良 李雪生

    Abstract: 本发明公开了一种分布式文件系统元数据信息获取方法,该方法包括:在文件系统的元数据服务器上设置命令接口;将元数据信息的数据命令发送至所述命令接口,所述数据命令用于将所需要的元数据输出至预设文件中;通过所述命令接口将所述数据命令的命令参数传输至元数据代码中;通过所述元数据服务器检测到所述数据命令的时间信息,在所述命令接口执行所述元数据代码,输出与所述时间信息对应的元数据信息。该方法实现提高获取元数据信息的效率,提升元数据信息的准确性。

    一种基于文件的测试方法及装置

    公开(公告)号:CN105740134B

    公开(公告)日:2018-03-20

    申请号:CN201610066497.6

    申请日:2016-01-29

    Inventor: 于鲁宪 李雪生

    Abstract: 本发明公开了一种基于文件的测试方法及装置,其中,该方法包括:实时获取指定文件的指定数据,指定数据为与指定文件接收到的由NAS网关发送的请求信息相对应的数据;当判断出指定数据不符合预设要求时,模拟对指定文件的文件参数进行修改,得到模拟参数,并当判断出模拟参数对应的指定文件的指定数据符合预设要求时,按照模拟参数对指定文件的文件参数进行实际修改。由此,对指定文件的指定数据进行实时获取,从而通过指定数据的分析判断其是否符合预设要求,如果否,则模拟对指定文件的文件参数进行修改的过程,并在确定合适的模拟参数后,按照模拟参数对文件参数进行实际修改,以避免对文件参数的多次修改严重影响指定文件的读写性能的问题。

    一种处理文件请求的方法与系统

    公开(公告)号:CN105094992A

    公开(公告)日:2015-11-25

    申请号:CN201510622867.5

    申请日:2015-09-25

    Inventor: 李雪生 张延良

    CPC classification number: G06F17/30

    Abstract: 本发明公开了一种处理文件请求的方法与系统,将总内存空间按第一预设规则分成多个内存池,将每个内存池分别与一个对应的元数据处理线程进行绑定,将每个元数据线程分别与一个对应的服务核进行绑定,将全部元数据按第二预设规则与各所述元数据处理线程建立对应关系,并根据每个元数据标识和对应的线程编号生成目录表,接受元数据请求,确定所述元数据请求中的各目标元数据的元数据标识,根据各所述目标元数据的元数据标识通过所述目录表查找各所述目标元数据对应的各目标元数据处理线程,将各所述目标元数据分别存储至对应的目标元数据处理线程具有绑定关系的内存池中,提高多线程的缓存性能以及内存访问性能。

    一种处理文件请求的方法与系统

    公开(公告)号:CN105094992B

    公开(公告)日:2018-11-02

    申请号:CN201510622867.5

    申请日:2015-09-25

    Inventor: 李雪生 张延良

    Abstract: 本发明公开了一种处理文件请求的方法与系统,将总内存空间按第一预设规则分成多个内存池,将每个内存池分别与一个对应的元数据处理线程进行绑定,将每个元数据线程分别与一个对应的服务核进行绑定,将全部元数据按第二预设规则与各所述元数据处理线程建立对应关系,并根据每个元数据标识和对应的线程编号生成目录表,接受元数据请求,确定所述元数据请求中的各目标元数据的元数据标识,根据各所述目标元数据的元数据标识通过所述目录表查找各所述目标元数据对应的各目标元数据处理线程,将各所述目标元数据分别存储至对应的目标元数据处理线程具有绑定关系的内存池中,提高多线程的缓存性能以及内存访问性能。

    一种基于文件的测试方法及装置

    公开(公告)号:CN105740134A

    公开(公告)日:2016-07-06

    申请号:CN201610066497.6

    申请日:2016-01-29

    Inventor: 于鲁宪 李雪生

    CPC classification number: G06F11/3466 G06F17/30197

    Abstract: 本发明公开了一种基于文件的测试方法及装置,其中,该方法包括:实时获取指定文件的指定数据,指定数据为与指定文件接收到的由NAS网关发送的请求信息相对应的数据;当判断出指定数据不符合预设要求时,模拟对指定文件的文件参数进行修改,得到模拟参数,并当判断出模拟参数对应的指定文件的指定数据符合预设要求时,按照模拟参数对指定文件的文件参数进行实际修改。由此,对指定文件的指定数据进行实时获取,从而通过指定数据的分析判断其是否符合预设要求,如果否,则模拟对指定文件的文件参数进行修改的过程,并在确定合适的模拟参数后,按照模拟参数对文件参数进行实际修改,以避免对文件参数的多次修改严重影响指定文件的读写性能的问题。

    一种分布式文件系统NAS网关的流量控制方法及系统

    公开(公告)号:CN105553874A

    公开(公告)日:2016-05-04

    申请号:CN201510954957.4

    申请日:2015-12-17

    Inventor: 吕强 李雪生

    CPC classification number: H04L47/20

    Abstract: 本发明公开了一种分布式文件系统NAS网关的流量控制方法及系统,该方法包括:当检测到待接收的流量请求消息时,并不是直接接收这个流量请求消息,而是先判断接收标志位的当前状态是否为可接收状态;只有接收标志位的当前状态为可接收状态时,才接收流量请求消息;否则,启动定时器并进行计时;当计时达到预设时间阈值时,返回判断接收标志位的当前状态是否为可接收状态,以此可以留出上述时间阈值的时间来处理那些已经接收但还未处理完的流量请求消息。可见,本发明有效实现了避免处理阻塞,进而使得系统处于平稳、高效的工作状态的目的。

    一种读写数据免拷贝系统与方法

    公开(公告)号:CN105512286B

    公开(公告)日:2019-09-24

    申请号:CN201510894367.7

    申请日:2015-11-27

    Inventor: 李雪生

    Abstract: 本发明公开了一种读写数据免拷贝系统和方法,系统包括:网络通信模块、共享缓存池模块和NAS协议转换模块,网络通信模块直接将数据请求数据放入共享缓存池模块,NAS协议转换模块直接引用所述共享缓存池中的请求数据进行格式转换,所述网络通信模块直接将所述共享缓存池中格式转换后的请求数据发送至目的端,使用共享缓存池模块直接进行网络数据的缓存,网络通信模块和NAS协议转换模块可以直接使用共享缓存池模块中的数据,无需再次拷贝,实现了读写数据缓存的零拷贝,减少了网络延时,用户体验好。

    一种分布式文件系统性能瓶颈定位方法、装置和系统

    公开(公告)号:CN105488202B

    公开(公告)日:2018-12-18

    申请号:CN201510906179.1

    申请日:2015-12-09

    Inventor: 张延良 李雪生

    Abstract: 本发明提供一种分布式文件系统性能瓶颈定位方法、装置和系统,其中方法包括:通过元数据服务器创建预设数目的文件,得到该元数据服务器创建每个文件的第一速率或创建所有文件消耗的第一总时间,通过数据服务器在每个文件中分别写入预设大小的数据,预设大小小于预设阈值,得到该数据服务器写入每个数据的第二速率或写入所有数据消耗的第二总时间,若第一数据大于第二数据或第一总时间小于第二总时间,则确定数据服务器性能瓶颈,若第一数据小于第二数据或第一总时间大于第二总时间,则确定元数据服务器性能瓶颈,能够直观地分析出整个分布式文件系统的瓶颈点。

    一种存储文件管理方法及装置

    公开(公告)号:CN105224255B

    公开(公告)日:2018-10-30

    申请号:CN201510660798.7

    申请日:2015-10-14

    Inventor: 李雪生 张延良

    Abstract: 本发明公开了一种存储文件管理方法及装置,包括:接收访问请求,确定发送访问请求的客户端为目标客户端,其中,访问请求包括读操作请求和写操作请求;确定访问请求在存储文件中对应的数据段为目标数据段,判断目标数据段是否为具有分段锁的数据段,具有分段锁的数据段为正在被其他客户端进行写操作的数据段;如果是,则阻塞目标客户端的访问请求,如果否,则判断访问请求的类型,如果访问请求为写操作请求,则确定目标数据段为具有分段锁的数据段,并允许目标客户端对目标数据段进行写操作,如果访问请求为读操作请求,则允许目标客户端对目标数据段进行读操作。由此,使得其他客户端无法对正在被执行写操作的数据段进行访问,提高了读数据性能。

Patent Agency Ranking