Hadoop大数据平台中基于网络I/O代价评估的ReduceTask数据本地性调度方法

    公开(公告)号:CN105426255B

    公开(公告)日:2019-04-19

    申请号:CN201510999364.X

    申请日:2015-12-28

    Inventor: 尚凤军 闫辰云

    Abstract: 本发明涉及一种Hadoop大数据平台中基于网络I/O代价评估的ReduceTask数据本地性调度方法,属于云计算平台优化技术领域。该方法通过评估以每个所记录的Host节点为ReduceTask执行节点时,其它节点上的Map输出数据拷贝到该Host节点的网络I/O代价,以此作为分配ReduceTask的优先权,来为优先权高的节点分配Reduce任务,从而达到降低Map输出数据拷贝到Reduce节点的网络I/O代价,使得所选Reduce节点具有最佳的数据本地性。该方法为ReduceTask的分配加入了数据本地性,从而使得Shuffle阶段的数据拷贝带来的网络负载降低,节省了Hadoop集群的网络带宽资源。

    一种Hadoop大数据平台中基于备份任务运行时间估计的调度方法

    公开(公告)号:CN106168912B

    公开(公告)日:2019-04-16

    申请号:CN201610609466.0

    申请日:2016-07-28

    Abstract: 本发明涉及一种Hadoop大数据平台中基于备份任务运行时间估计的调度方法,属于云计算平台优化技术领域。该方法采用SDN带宽感知能力,建立BWRE备份任务运行时间估计模型,对基于备份任务推测执行机制的备份任务调度方法进行优化;通过为节点任务请求者TTi分配备份任务时加入慢任务的剩余时间与预启动备份任务在该TTi上的估计运行时间之间的对比,增加此备份任务的可信赖程度,即相信这个备份任务能够比原始慢任务更早结束,从而提高备份任务的有效率。该方法这不仅可以缩短作业周转时间,还可以降低无效备份任务带来的系统资源浪费。

    一种编码感知绿色机会路由方法

    公开(公告)号:CN108616953A

    公开(公告)日:2018-10-02

    申请号:CN201810283060.7

    申请日:2018-04-02

    Inventor: 尚凤军 李燕

    Abstract: 本发明属于电通信技术领域,公开了一种编码感知绿色机会路由方法,所述编码感知绿色机会路由方法每个节点不再将信息发送给固定的下一跳节点,采用后选择的方式,选择数据包的候选转发节点,根据转发节点的优先级顺序,依次转发数据,选择下一跳节点。本发明引入机会路由对编码感知绿色路由进行路由设计,机会路由的原理是每个节点不再将信息发送给固定的下一跳节点,采用后选择的方式,选择数据包的候选转发节点,根据设计的转发节点的优先级顺序,依次转发数据,选择的下一跳节点往往具有较好的性能,可以提高信息传输的成功率,并且增加网络中的吞吐量。

    一种改进朴素贝叶斯算法的安卓恶意程序检测方法

    公开(公告)号:CN108491719A

    公开(公告)日:2018-09-04

    申请号:CN201810214427.X

    申请日:2018-03-15

    Inventor: 尚凤军 李雅琳

    Abstract: 本发明公开了一种改进朴素贝叶斯算法的安卓恶意程序检测方法,与现有技术相比,本发明过属性加权方式对朴素贝叶斯分类算法进行改进,来提高朴素贝叶斯算法的分类性能。通过对不同特征属性进行加权处理,而加权的系数是需要量化的,那么本发明就根据信息增益率求得的权值与互信息求得的权值结合的方式得到新的权值。为了防止其中一种算法得到的权值过大而影响新权值的确定,在各个求得权值后进行了归一化处理,以此来提高加权朴素贝叶斯分类算法的分类性能,进而提高Android应用程序检测模型的准确性。

    一种android应用程序恶意性的静态检测方法

    公开(公告)号:CN105426762B

    公开(公告)日:2018-08-14

    申请号:CN201510999378.1

    申请日:2015-12-28

    Inventor: 尚凤军 邓小林

    Abstract: 本发明涉及一种android应用程序恶意性的静态检测方法,属于Android平台下应用程序安全性检测技术领域。该方法首先通过计算偏相关系数对Android应用程序权限特征属性进行相关性分析,达到对权限特征集进行降维预处理的目的;其次利用互信息和笛卡尔积方法,对降维后的权限特征集进行相关性聚类去冗余,并设定阈值,避免过拟合的现象,以此得到新的分类权限特征集的集合Xnew,达到权限聚类后的权限特征集之间几乎是相互独立关系的目的;最后,在权限聚类后的基础上,构建朴素贝叶斯分类器,并对其进行改进,达到能使应用程序分类决策相关性高,进而提高Android应用程序恶意性检测的可靠性。

    一种基于软件定义网络的服务感知的流策略定制方法

    公开(公告)号:CN108259367A

    公开(公告)日:2018-07-06

    申请号:CN201810025363.9

    申请日:2018-01-11

    Inventor: 尚凤军 胡尚平

    Abstract: 本发明属于流量调度技术领域,公开了一种基于软件定义网络的服务感知的流策略定制方法,流识别与流调度都是在控制器,通过扩展控制器的基础模块,开发出服务流识别分类和服务流策略调度两个模块,分别处理流的分类和调度功能。本发明是一种在软件定义网络(SDN)中,较为合理的流识别和流调度方案,能够对流进行服务层面的感知,较为精确的识别分类服务流,为不同类别的服务流制定不同的QoS级别的转发策略,提升企业门户面向用户所提供的业务访问所需的服务质量得到保障,提升用户对该服务的体验质量(QoE),同时在一定程度上保证了链路的负载均衡和利用率。

    传感器网络中基于节点缓冲区占用率的退避方法

    公开(公告)号:CN104507125B

    公开(公告)日:2018-05-25

    申请号:CN201510002834.0

    申请日:2015-01-05

    Inventor: 尚凤军 毛冉

    CPC classification number: Y02D70/00

    Abstract: 本发明涉及一种传感器网络中基于节点缓冲区占用率的退避方法,包括以下步骤:1)利用协调器在一个时隙内接收到的数据包个数,及一个超帧时隙内信道最多能传输数据包的个数,计算超帧时隙利用率;2)利用阈值对超帧时隙利用率进行分析,并动态调整占空比,降低传感器节点的能耗;3)利用MAC层缓冲区现存的数据包个数,得到节点缓存占用率,当其超过一定范围时,认为该节点负荷较重,应为其竞争信道提供便利;相反,若缓存中数据包不多时,可以让其保持现状或者增大该节点退避次数。该方法既能有效的解决传统算法对能耗的忽略,又能通过基于缓冲区占用率的自适应退避算法,使得每个传感器节点都能尽可能多的竞争到信道,传输数据包。

    一种Hadoop大数据平台中基于备份任务运行时间估计的调度方法

    公开(公告)号:CN106168912A

    公开(公告)日:2016-11-30

    申请号:CN201610609466.0

    申请日:2016-07-28

    CPC classification number: G06F9/4881 H04L67/1097

    Abstract: 本发明涉及一种Hadoop大数据平台中基于备份任务运行时间估计的调度方法,属于云计算平台优化技术领域。该方法采用SDN带宽感知能力,建立BWRE备份任务运行时间估计模型,对基于备份任务推测执行机制的备份任务调度方法进行优化;通过为节点任务请求者TTi分配备份任务时加入慢任务的剩余时间与预启动备份任务在该TTi上的估计运行时间之间的对比,增加此备份任务的可信赖程度,即相信这个备份任务能够比原始慢任务更早结束,从而提高备份任务的有效率。该方法这不仅可以缩短作业周转时间,还可以降低无效备份任务带来的系统资源浪费。

    一种关键帧传输方法
    79.
    发明公开

    公开(公告)号:CN104506874A

    公开(公告)日:2015-04-08

    申请号:CN201510002585.5

    申请日:2015-01-05

    Inventor: 尚凤军 秦发军

    Abstract: 本发明涉及一种关键帧传输方法,属于无线多媒体传感器网络技术领域。该方法包括以下步骤:步骤一:路由端进行网络传输环境的判断,并制定一个阀值,以此来判断网络传输环境是否畅通;步骤二:如果根据阀值判定该网络传输环境是不畅通的,则传输比特信息回编码端,告知此时网络传输环境是比较尖锐,要求编码端进行编码方式的改变;步骤三:编码端根据传回的比特信息进行编码方式的改变,即将DCT后的信息进行高低频带的划分,然后将高频带部分进行删除只保留低频带部分,然后再进行编码传输。本方法解决了因网络传输环境尖锐导致关键帧传输出现问题进而影响解码端画面无法解码恢复的问题,可以应用于无线多媒体传感器网络,取得较好的传输结果。

    无线传感器网络中基于速度采样区的移动节点定位方法

    公开(公告)号:CN103260238A

    公开(公告)日:2013-08-21

    申请号:CN201210584490.5

    申请日:2012-12-28

    Abstract: 一种用来在无线传感器网络中移动节点定位的方法构建节点的运动模型,通过牛顿插值法大致得到节点的运动轨迹针对节点移动的速度假定一个最大移动速度,以及一个最小移动速度。利用设定的速度区间,将样本采集区域尽可能地缩小,最后在进行节点位置的过滤,排除掉节点不可能出现的位置,从而进一步减小节点可能的范围和在预测时的工作量。通过构建节点的运动模型,进行节点的运动预测、对节点不可能存在的位置进行过滤,降低定位误差率从而提高待定位节点的定位精度。

Patent Agency Ranking