基于mapreduce性能优化的-研究

《基于mapreduce性能优化的-研究》由会员上传分享，免费在线阅读，更多相关内容在教育资源-天天文库。

1、目录上海师范大学硕士学位论文目录摘要...............................................................IIAbstract..........................................................III目录...............................................................IV第1章绪论........................................................

2、.11.1研究背景.....................................................11.2国内外研究现状...............................................21.3本文主要创新点...............................................41.4本文主要内容安排.............................................4第2章Hadoop核心技术...............................

3、...............62.1Hadoop系统的主要特点........................................62.2Hadoop核心技术介绍..........................................72.2.1HDFS工作原理..........................................72.2.2MapReduce框架的工作原理及特点.........................8第3章MapReduce性能优化策略的设计......................

4、..........123.1设计的考量.................................................123.2MapReduce性能优化策略的设计................................153.3集群负载的指标..............................................193.3.1单个系统参数的负载指标................................193.3.2预测负载指标...................................

5、.......203.4性能优化算法................................................22第4章仿真实验与结果分析..........................................264.1实验环境....................................................264.2系统仿真....................................................264.2.1优化效果对比.......................

6、...................264.2.2调整过量的优化........................................29第5章总结和展望..................................................315.1全文的总结.................................................315.2研究展望...................................................32参考文献......................

7、.....................................33攻读硕士期间的研究成果.............................................35致谢...............................................................36IV万方数据上海师范大学硕士学位论文第1章绪论第1章绪论1.1研究背景随着搜索引擎的广泛应用，以及电子商务的迅速崛起，云计算这个词已经变得越发热门了。自Google分别在2003、2004、2006年在SOAP和OSDI上分别[1]

8、[2]发表了GFS（GoogleFileSystem）分布式数据存储系统,Map