基于Hadoop的云安全存储系统的设计与实现开题报告

1. 研究目的与意义（文献综述）

1.1 研究目的及意义

随着信息技术的迅猛发展，互联网的普及，全球的数据量正以指数级的趋势增长。根据权威部门的调研，2020年全球的数据量将达到35.2 zb(1 zb=10亿 tb)，是2009年数据量的44倍。股票交易、天文数据、天气预报、军事应用和网络购物等大量领域都会产生无比庞大的数据量，并对数据存储和调用的提出越来越高的要求。在这个大环境下，云计算的概念应运而生，它是人们发掘互联网价值的产物。云计算将帮助人们跟有效地发挥互联网的作用。就目前的情况而言，用云计算来处理数据资源已经成为一个不可阻挡的趋势，发展出一种快捷有效的技术来应对大量数据势在必行。

云储存是伴随着云计算的发展而出现的，是云计算的延伸和发展。随着人们利用云计算系统进行大量数据的存储、调用，云计算系统就渐渐变成了云存储系统。用户使用云存储系统对数据进行存储、访问已经数据管理服务，不同于传统存储一样只使用某个特定的存储设备。因此云储存除了充当一个储存系统外，也可以视作为一种服务。现如今，各大网络公司都在推出自家的云存储服务，国外的诸如amazon的 simplestorage service、google的google storage fordevelopers和微软的windows live skydrive，国内的也有360云盘、百度云盘、华为网盘等。

2. 研究的基本内容与方案

本文将研究hdfs多副本存储技术和身份认证技术,针对其中存在的问题提出了改进方法，实现一种基于hadoop的云安全存储系统，并验证系统的安全性和可行性。

拟利用数字信封加密技术对hadoop原本的kerberos身份认证机制进行改进。数字信封技术是一种将非对称加密技术和对称加密技术相结合的加密技术，可以克服私有秘钥加密中秘钥分发困难和公开密钥中加密时间长的问题，保持加密的灵活性和高效性。

拟提出一套基于评价指标的hdfs副本分布策略，利用加权评价指标矩阵的解，改进副本分部策略，使系统在兼顾考虑节点cpu利用率、内存使用率的同时，注重集群各点储存空间使用率的均衡。

3. 研究计划与安排

第1－3周：查阅相关文献资料，明确研究内容，了解研究所需理论基础。

确定方案，完成开题报告。

第4－5周：熟悉掌握基本理论，完成英文资料的翻译，熟悉开发环境。

4. 参考文献（12篇以上）

[1] 孙珊珊.基于hadoop的云计算数据安全性研究[d]. 武汉理工大学, 2013

[2] 张兴.基于hadoop的云存储平台的研究与实现[d]. 电子科技大学, 2013

[3] 郭耀华.基于云存储的数据存储系统的设计与实现[d]. 北京邮电大学, 2012