基于hadoop的电信经营数据分析系统的设计与实现

《基于hadoop的电信经营数据分析系统的设计与实现》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、？太摩次ｆＴＩＡＮＪＩＮＵＮＩＶＥＲＳＩＴＹ中国第—所现代大学ＦＯＵＮＤＥＤＩＮ１８９５工程硕士学位论文领域：软件工程作者姓名：＿开￥賴＿受指导教师：张翠红局级工程师企业导师：天津大学研究生院２０１５年１２月独创性声明本人声明所呈交的学位论文是本人在导师指导下进行的研宄工作和取得的研宄成果，除了文中特别加以标注和致谢之处外，论文中不包含其他人已经发表或撰写过的研宂成果，也不包含为获得天孝大学或其他教育机构的学位或证一书而使用过的材料。与我同工作的同志对本研宂所做的任何贡献均已在论文中作了明确的说明并表示了谢意。

2、学位论文作者签名乂｛／？签字日期年月｜日＾＾学位论文版权使用授权书本学位论文作者完全了解天津大学有关保留、使用学位论文的规定。特授权天津大学可以将学位论文的全部或部分内容编入有关数据库进行检索、■＝同意学校，并采用影印、缩印或扫描等复制手段保存汇编以供查阅和借阅向国家有关部门或机构送交论文的复印件和磁盘。（保密的学位论文在解密后适用本授权说明）学位论文作者签名导师签名：ｌ签字日期：年月曰签字曰期：ｗ／ｙ年丨月曰｝｜基于Hadoop的电信经营数据分析系统的设计与实现DesignandImplementationofTelecomBusinessData

3、AnalysisPlatformbasedonHadoop领域：软件工程作者姓名：杜妍妍指导教师：李素梅副教授企业导师：张翠红高级工程师天津大学软件学院二零一五年十二月摘要人类已经进入了大数据时代，数据资产成为了企业的核心竞争力，如何围绕电信企业的大数据资产，构建大数据生态系统，以用户体验为导向，创新商业模式，成为了电信企业面临的重要任务。面向电信企业的大数据分析平台，其建设的原则是建设完善的、高性能的、开放的平台；大数据能力平台构建的稳定性是最重要的，重点需要关注部件的性能，以及对某项技术的更新换代。同时提供大数据应用能力开发的开发环境DevelopStudio，使大数据合作伙伴能够直

4、接在这个平台上开发应用、发布应用和运行应用。同时，大数据平台的基本架构实现全部云化。基于电信企业对经营分析大数据的需求，本文对基于Hadoop的电信经营分析大数据分析平台的架构进行了设计并对部分功能模块进行了实现。对基于Hadoop的电信运营商大数据平台进行了设计与实现，对此平台的数据、技术架构进行了设计，对架构中的信息整合、数据资产、能力开放等模块进行了设计；，对Hadoop集群在本系统中的应用模式与应用特点进行了设计，对增强的Hadoop架构，以及Hadoop中的HDFS、MapReduce、HBase、MPP等增强功能进行了在系统中的设计。对平台的资源管理模块的实现进行了描述，对运

5、维管控模块进行了实现，尤其对元数据的管理和数据安全进行了详细的实现。实际使用的结果表明，Hadoop架构适合进行电信经营数据的分析统计。本文设计实现的大数据经营分析平台具有很强的实用性。关键词：Hadoop；经营数据分析；大数据；HDFS；MapReduceABSTRACTAspeopleenteringtheeraofbigdata,dataassetshaveturnedthecorecompetitivenessofenterprises.Howtobuildanecosystemofbigdataaroundthelargedataassetsoftelecomenterpris

6、esandabusinessmodelwiththeorientationofuserexperience,hasbecomeasignificanttaskfacedbytelecomenterprises.Theprincipleoftheconstructionoftelecombusinessdataanalysisplatformistobuildaperfecthigh-performanceopenplatform.Stabilityofthebigdataanalysisplatformisthemostimportant,whilethekeypointsinclude

7、performanceofcomponentsandupgradingofsometechnique.Itisnecessarytoprovideanenvironmentofbigdataapplicationdevelopment,theDevelopStudio,tomakesurethatpartnersinbigdatacoulddirectlydevelop,releaseandrunapplicationsonthis