基于海量数据的数据产品处理技术研究

《基于海量数据的数据产品处理技术研究》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、河北工业大学硕士学位论文基于海量数据的数据产品处理技术研究姓名：杨静申请学位级别：硕士专业：计算机应用技术指导教师：顾军华20040301基于海量数据的数据产品处理技术研究摘要近十几年，随着科学技术飞速的发展，经济和社会都取得了极大的进步，与此同时，计算机应用系统的不断发展和完善，在各个领域产生了大量的历史数据，这些历史数据可能已经不被应用系统引用，但它们却有着非常大的查询和分析价值。但是只要是对海量的信息加以利用都离不开底层对数据的操作。然而，数据不断膨胀往往给应用系统带来一些难以忍受的后果，最典型的是系统在运行过程中资源消耗需求量越来越大，运行效率

2、明显降低，随着时间的推移，达到难以忍受的程度。于是，本文从产品库的角度提出了对于海量数据查询效率问题的一种解决方案，即数据产品处理模型，主要探讨了海量数据在关系数据库中的应用。本文由三部分组成：第一部分讨论了海量数据的产生、现状以及目前的～些处理技术。第二部分提出了数据产品处理模型。随着制造技术和生产工艺的不断改进，现代计算机技术的飞速进步，硬件存储设备的存储能力越来越大，价格也越来越便宜：基于这个前提，本文本着牺牲一些空间换取一些效率的思想，提出此模型，并分析了它的理论基础，论述了它实施的可行性，给出了它的基本的实现思想。第三部分结合天津新巨升电子的

3、预算资会管理项目的报表系统，探讨了它在实际项目中的应用，分析了实施此模型对系统性能的影响。关键词：数据产品，数据产品处理模型，海量数据苎三童茎墼塑竺墼丝兰曼竺些垫查塑堑————————————————一MASSDATABASEDRESEARCHOFDATAPRODUCTPRoPOSALTECHNOLOGYABSTRACTIthasbeennearformorethantenyears．withthedevelopmentatfullspeedofscienceandtechnology,economyandsocietyallmadegreatprog

4、ress．Meanwhile，theconstantdevelopmentandperfectingOfcomputerapplicationsystemhasproducedalargeflrnountofhistoricaldataineachfield．Thesehistoricaldataarenotperhapsusedandquotedsystematically,buttheyhaveverygreatinquiryandanalysevalue．Buttheutilizationwillnotdowithoutthequeryopera

5、tiontothenlassdata．However,thedataexpansionoftenbringssomeinsufferableconsequencessystematicallyandconstantly，themosttypicaloneisasystemresourcesconsumptiondemandsbiggerlyandbiggerlyinthecourseofrurming，operationalefficiencyisreducedobviously,astimegoesonreachingtheinsufferabled

6、egree。Then．thisthesishasputfbrw盯dakindofsolutiontothemassdataproblemfromtheangleoftheproductsstorehouse，namelytheDataProductsDisposalModel．Thisthesisconsistsofthreeparts：Thefirstpartofitstudiestheproduceandcurrentsituationofmassdataandthepresentsolutiontoit．Thesecondpartproposes

7、theDataProductDisposalModel．Withtheimprovingofmodemcomputertechnology,thememoryabilityofthehardwarestoringequipmentislargerandlarger,whilethepriceischeaperandcheaper．Attheprerequisite，thisthesisputsfor、vardthismodelbasingonthethinkingofexchangingspaceforefficiency,analyzesitsthe

8、oreticalfoundation，describesthefeasibilitythati