公开(公告)号：CN103678158B

公开(公告)日：2016-11-02

申请号：CN201310732673.1

申请日：2013-12-26

Applicant: 中国科学院信息工程研究所

Inventor： 周晓阳 ,  王树鹏 ,  张永铮 ,  吴广君 ,  王海平 ,  李斌斌

IPC: G06F12/06

Abstract: 本发明涉及一种数据布局优化方法，具体包括以下步骤：步骤1：接收业务系统输入的连续数据流；步骤2：将数据流划分为连续无交叉的多个数据块；步骤3：判断待处理的数据块是否达到缓存上限，如果是，进行下一步；否则，跳转至步骤1；步骤4：计算得到缓存中的所有数据块的指纹；步骤5：将缓存中数据块的指纹与指纹列表中的指纹进行匹配，将匹配的数据块标记为重复数据块；将不指纹匹配的指纹存入指纹列表中；步骤6：更新数据块信息表中的数据块的物理位置信息；步骤7：根据数据块信息表中的各个数据块的物理位置信息存储对应的数据块。本发明提高了数据的顺序性，降低了数据布局的离散化，提高了重复数据删除系统的顺序读写性能。

公开(公告)号：CN103226520B

公开(公告)日：2016-09-07

申请号：CN201310113105.3

申请日：2013-04-02

Applicant: 中国科学院信息工程研究所

Inventor： 王勇 ,  王树鹏 ,  张永铮 ,  吴广君 ,  李斌斌 ,  安丰春 ,  王曦

IPC: G06F12/0871 ,  G06F3/06

Abstract: 本发明涉及一种集群内存自适应管理方法、服务器集群。其中，集群内存自适应管理方法包括：对于数据服务器集群中的每个数据服务器，在使用前对该数据服务器按照变步长加性增长方式进行内存预分配，将内存分割为设定数目的片组，每个片组的总容量相等，每个片组包含容量相等的多个分片。本发明的集群内存自适应调管理方法，采用优化模式的内存预先分配的策略，保证了内存的合理分片，从而提高了内存的存取效率，也减少了内存碎片的产生。此外，本发明的集群内存自适应调管理方法能够进行内存自适应调整，大大提高了内存的自治能力和稳定性。

公开(公告)号：CN103218176B

公开(公告)日：2016-02-24

申请号：CN201310113197.5

申请日：2013-04-02

Applicant: 中国科学院信息工程研究所

Inventor： 王勇 ,  王树鹏 ,  张永铮 ,  王曦 ,  吴广君 ,  李斌斌 ,  安丰春

IPC: G06F3/06 ,  G06F12/02

Abstract: 本发明涉及一种数据处理方法及装置。其中，数据处理方法包括：创建共享内存环，所述共享内存环为存储待操作数据的环形结构空间；在对共享内存环中下一个操作目的单元进行操作前，将所述下一个操作目的单元的操作标志位设置为对应下一个操作的操作类型；判断所述下一个操作目的单元是否能够进行所述下一个操作；根据判断结果对所述下一个操作目的单元中的数据进行处理。本发明的数据处理方法及装置，设计了一种共享内存中的环形数据结构，结合生产者和消费者的数据协调规则和共享内存环覆写机制，基于原子位操作对环的控制标识位进行更新，提高了数据并行处理场景下共享资源的数据读写效率，减小数据同步的开销，从而解决了共享资源读写效率低、同步开销大的问题。