-
公开(公告)号:CN111061565B
公开(公告)日:2023-08-25
申请号:CN201911292796.1
申请日:2019-12-12
Applicant: 湖南大学
Abstract: 本发明公开了一种Spark环境下的两段式流水线任务调度方法及系统。所述方法包括以下阶段:网络空闲阶段任务调度,该阶段为共生任务及等待任务分配CPU资源,当正在运行的任务有共生任务时,在其执行完成后,将其占用的CPU资源分配给其共生任务;否则,在其执行完成后,按照Spark环境优先级的调度将其占用的CPU资源分配给相应等待任务;网络需求阶段任务调度,该阶段为正在运行的任务匹配数据拉取时间大于其剩余完成时间的等待任务作为共生任务,并对共生任务进行调度。所述系统,其包括网络空闲阶段任务调度模块和网络需求阶段任务调度模块。本发明实现流水线作业,能够实现提高CPU资源及网络资源利用率、从而有效地减少了资源的空闲时间和job的完成时间。
-
公开(公告)号:CN111061910B
公开(公告)日:2020-12-15
申请号:CN201911294985.2
申请日:2019-12-16
Applicant: 湖南大学
Abstract: 本发明公开了一种基于HBase和Solr的视频特征数据查询方法,包括以下步骤:服务端接收来自用户的特征数据查询请求,并根据该特征数据查询请求在索引存储集合中进行检索,以得到多个特征数据ID值;服务端根据步骤一得到的多个特征数据ID值在HBase数据库中检索对应的特征数据集合,并将该特征数据集合返回给用户;本发明通过建立配置文件,使用特征数据ID值关联特征数据和索引,从而提高数据检索的效率和准确率,因此,能够解决现有视频监控系统由于特征数据存储时间的拉长和特征数据量的增加,导致无法对这些海量特征数据进行准确查询的技术问题。
-
公开(公告)号:CN104765912B
公开(公告)日:2017-09-12
申请号:CN201510133549.2
申请日:2015-03-25
Applicant: 湖南大学 , 上海拖拉机内燃机有限公司
IPC: G06F17/50
Abstract: 本发明涉及一种铝板冲压工艺的稳健性优化方法,属于铝板冲压技术领域。本发明包括下述步骤:(1)设定初试冲压工艺参数,并以此参数为条件建立零件冲压工艺数型;(2)建立冲压工艺数型的有限元模型,进行冲压仿真模拟;(3)选择模拟结果处于安全区所对应的冲压工艺参数数值,作为基础冲压工艺参数数值;(4)以冲压工艺参数作为影响冲压质量的控制因子,以铝板材料参数作为影响冲压质量的噪声因子,并安排试验表格;(5)定义每次模拟实验的质量评价指标;(6)计算信噪比(SN);(7)选择信噪比(SN)值最高时所对应的一组控制因子数值,作为最佳冲压工艺参数数值。
-
公开(公告)号:CN103852382B
公开(公告)日:2016-02-10
申请号:CN201410076641.5
申请日:2014-03-04
Applicant: 湖南大学
IPC: G01N3/18
Abstract: 本发明涉及一种高强钢板热成形极限图的建立方法,其特征在于包括以下步骤:A.在密封箱3中将试件加热到950℃,并保温5分钟,使其完全奥氏体化,然后令其冷却到实验所需测量的温度;B.采用在密封箱中的胀形模具建立各温度下高强钢板单拉、双等拉、平面应变及中间状态的成形极限线;C.对于温度在400℃以下的成形极限线,要以大于临界冷却速度vk冷却到实验所需测量温度,以发生马氏体相变,并且通过计算得到;D.采用差值方法在origin软件中将各温度下成形极限线连接成两个曲面,定义为三维成形极限面。本发明所述的热成形极限图的建立方法可以判断高强钢板热成形性能,成形极限面越高则高强钢板的热成形性能越好。
-
公开(公告)号:CN103852388B
公开(公告)日:2015-09-16
申请号:CN201410076406.8
申请日:2014-03-04
Applicant: 湖南大学
IPC: G01N3/28
Abstract: 本发明涉及一种金属板材热成形极限实验装置及测试方法,其包括:冲头(1),气体单向阀(2),密封箱(3),压边圈(4),凹模(6),凹模压杆密封圈(7),凹模液压泵(8),高速摄像头(9),进气管(10),红外感温装置(11),通气孔(12),照明灯(13),钢化玻璃(14),支架(15),电阻丝(16),压边圈支座(17),冲头液压泵连杆密封圈(18),密封箱支座(19),冲头液压泵(20)。本发明所述的热成形极限实验装置可以在实验过程中对试件加热,可以防止在外部加热试样再移到模具中所产生的误差。
-
公开(公告)号:CN110955732A
公开(公告)日:2020-04-03
申请号:CN201911294970.6
申请日:2019-12-16
Applicant: 湖南大学
Abstract: 本发明公开了一种用于在Spark环境中实现分区负载均衡的方法,包括:接收用户发送的Spark应用程序,对该Spark应用程序进行解析,以得到表征多个弹性分布式数据集RDD之间关系的RDD图、以及调度阶段的有向无环图DAG,根据DAG图依次确定每两个相邻调度阶段之间的依赖关系,并对得到的所有依赖关系中的宽依赖关系进行编号,设置计数器cnt=1,判断cnt是否大于宽依赖关系的总数,如果不是则对第cnt个宽依赖关系对应的Map端中最后一个RDD中的所有分区中的数据进行采样,以得到表征数据键分布的、每个分区对应的哈希表,将得到的所有分区对应的哈希表进行合并。本发明能够在解决大数据计算中数据倾斜问题的同时,优化计算资源的分配,缩短程序运行时间。
-
公开(公告)号:CN110955732B
公开(公告)日:2020-12-01
申请号:CN201911294970.6
申请日:2019-12-16
Applicant: 湖南大学
Abstract: 本发明公开了一种用于在Spark环境中实现分区负载均衡的方法,包括:接收用户发送的Spark应用程序,对该Spark应用程序进行解析,以得到表征多个弹性分布式数据集RDD之间关系的RDD图、以及调度阶段的有向无环图DAG,根据DAG图依次确定每两个相邻调度阶段之间的依赖关系,并对得到的所有依赖关系中的宽依赖关系进行编号,设置计数器cnt=1,判断cnt是否大于宽依赖关系的总数,如果不是则对第cnt个宽依赖关系对应的Map端中最后一个RDD中的所有分区中的数据进行采样,以得到表征数据键分布的、每个分区对应的哈希表,将得到的所有分区对应的哈希表进行合并。本发明能够在解决大数据计算中数据倾斜问题的同时,优化计算资源的分配,缩短程序运行时间。
-
公开(公告)号:CN111061565A
公开(公告)日:2020-04-24
申请号:CN201911292796.1
申请日:2019-12-12
Applicant: 湖南大学
Abstract: 本发明公开了一种Spark环境下的两段式流水线任务调度方法及系统。所述方法包括以下阶段:网络空闲阶段任务调度,该阶段为共生任务及等待任务分配CPU资源,当正在运行的任务有共生任务时,在其执行完成后,将其占用的CPU资源分配给其共生任务;否则,在其执行完成后,按照Spark环境优先级的调度将其占用的CPU资源分配给相应等待任务;网络需求阶段任务调度,该阶段为正在运行的任务匹配数据拉取时间大于其剩余完成时间的等待任务作为共生任务,并对共生任务进行调度。所述系统,其包括网络空闲阶段任务调度模块和网络需求阶段任务调度模块。本发明实现流水线作业,能够实现提高CPU资源及网络资源利用率、从而有效地减少了资源的空闲时间和job的完成时间。
-
公开(公告)号:CN110955526B
公开(公告)日:2022-10-21
申请号:CN201911296432.0
申请日:2019-12-16
Applicant: 湖南大学
IPC: G06F9/50
Abstract: 本发明公开了一种用于在分布式异构环境下实现多GPU调度的方法,其根据Java计算任务创建对应的GPU本地计算任务,并通过数据分块和任务分解,将GPU本地任务划分为更细粒度的GPU本地子任务,然后根据数据本地性以及从节点上所有GPU的流资源状态和内存资源状态将GPU本地子任务调度到指定GPU上执行,从而充分平衡各个GPU上的工作负载,降低Spark应用程序的执行时间。本发明能够解决现有分布式异构Spark处理框架中存在的吞吐量低、无法有效利用多个GPU、以及由于缺乏有效的GPU负载均衡策略导致的时间开销大的技术问题。
-
公开(公告)号:CN104765912A
公开(公告)日:2015-07-08
申请号:CN201510133549.2
申请日:2015-03-25
Applicant: 湖南大学 , 上海拖拉机内燃机有限公司
IPC: G06F17/50
Abstract: 本发明涉及一种铝板冲压工艺的稳健性优化方法,属于铝板冲压技术领域。本发明包括下述步骤:(1)设定初试冲压工艺参数,并以此参数为条件建立零件冲压工艺数型;(2)建立冲压工艺数型的有限元模型,进行冲压仿真模拟;(3)选择模拟结果处于安全区所对应的冲压工艺参数数值,作为基础冲压工艺参数数值;(4)以冲压工艺参数作为影响冲压质量的控制因子,以铝板材料参数作为影响冲压质量的噪声因子,并安排试验表格;(5)定义每次模拟实验的质量评价指标;(6)计算信噪比(SN);(7)选择信噪比(SN)值最高时所对应的一组控制因子数值,作为最佳冲压工艺参数数值。
-
-
-
-
-
-
-
-
-