期刊文献+

基于文件等级的Ceph数据冗余存储策略的研究 被引量:7

Research on Data Placement Strategy for Ceph Based on File Level
在线阅读 下载PDF
导出
摘要 文章针对Ceph文件系统的可靠性和安全性进行了重点研究。系统的可靠性和安全性一般通过数据容错技术实现。广泛应用的数据容错技术有完全副本和纠删码。完全副本将数据复制成多份进行分散存储,这种方式会降低存储效率并浪费存储空间;而纠删码虽然可以有效利用存储空间,但由于需要对数据进行编码存储,访问数据时需要对其进行解码操作,使得数据的访问效率较低。文章结合这两种容错机制,在Ceph文件系统的基础上,提出了基于文件等级进行冗余存储的策略。该策略提供完全副本和纠删码两种存储方式,用户可以根据文件的等级划分来选择适合的存储方案。该方案确保重要数据具有高安全性,并能有效利用存储空间。 This paper focuses on the reliability and security of the Ceph distributed fi le system. The reliability and security of the system are realized through the data fault tolerance mechanism. The widely used data fault tolerance techniques include full copy scheme and erasure code scheme. Full copy scheme copies the data into multiple copies for distributed storage, which reduces the storage effi ciency and wastes the storage space. Erasure codes scheme can use the storage space effi ciently, but it need store the data encoded, and decode the data when accesses them, which makes the data access effi ciency low. Combining the two data fault tolerance mechanisms, on the basis of the Ceph distributed fi le system, this paper designs a data placement strategy based on the fi le level. The strategy both provides the full copy scheme and the erasure code scheme, which users can select the appropriate storage scheme based on the fi le level. The strategy ensures that the important data have high security and can effectively use the storage space.
作者 刘莎 楚传仁
出处 《信息网络安全》 2016年第4期50-54,共5页 Netinfo Security
基金 浙江省自然科学基金青年基金[LQ12F01001] 浙江省固态存储和数据安全关键技术重点科技创新团队项目[2013TD03] 浙江省固态硬盘和数据安全技术重点实验室资助项目[2015E10003]
关键词 对象文件系统 Ceph 数据容错机制 纠删码 完全副本 object-based file system Ceph data fault tolerance mechanism erasure code full copy
  • 相关文献

参考文献11

二级参考文献65

  • 1陆全,徐仲,叶正麟.Hankel矩阵和Vandermonde矩阵之逆的新矩阵表示式及快速算法[J].陕西师范大学学报(自然科学版),2005,33(1):11-14. 被引量:4
  • 2董科军,冯家宏,阎保平.一种基于Erasure Code的分布式文件系统模型[J].计算机工程,2005,31(20):93-95. 被引量:6
  • 3仝秋娟,柴军锋.Cauchy矩阵Moore-Penrose逆的快速算法[J].西安邮电学院学报,2005,10(4):136-138. 被引量:1
  • 4周婧,王意洁,阮炜,李思昆.面向海量数据的数据一致性研究[J].计算机科学,2006,33(4):137-140. 被引量:18
  • 5田敬,张大为,代亚非,等.ESStore:P2P网络的可靠存储协议[C]//全国网络与信息安全技术研讨会.2005.
  • 6Kubiatowqicz J,Bindel D,Chen Yan,et al.Ocean Store:An Architecture for Global-scale Persistent Storage[C] //Proc.of ASPLOS'00.[S.l.] :ACM Press,2000.
  • 7Reed I S,Solomon G.Polynomial Codes Over Certain Finite Fields[J].Journal of the Society for Industrial and Applied Mathematics,1960,8(2):300-304.
  • 8Jay J.Wylie and Ram Swaminathan.Determining fault tolerance of XOR-based erasure codes efficiently[J].In DSN-2007,pages 206-215.IEEE,June 2007.
  • 9Zhou Aoying. Data intensive computing-challenges of data management techniques[J]. Communications of CCT, 2009, 5(7): 5O-53.
  • 10Shvachko K, Kuang H, Radia S, et al. The Hadoop distributed file system[C]//Proceedings of the 26th IEEE Symposium on Mass Storage Systems and Technologies (MSST '10). Washington, DC, USA: IEEE Computer Society, 2010: 1-10.

共引文献331

同被引文献38

引证文献7

二级引证文献13

相关作者

内容加载中请稍等...

相关机构

内容加载中请稍等...

相关主题

内容加载中请稍等...

浏览历史

内容加载中请稍等...
;
使用帮助 返回顶部