面向网络流的数据管理系统设计与实现

《面向网络流的数据管理系统设计与实现》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、专业学位硕士学位论文面向网络流的流数据管理系统设计与实现DesignandImplementationofDataStreamManagementSystemforNetworkDataFlow学31117013大连理工大学DalianUniversityofTechnology大连理工大学学位论文独创性声明作者郑重声明：所呈交的学位论文，是本人在导师的指导下进行研究工作所取得的成果。尽我所知，除文中已经注明引用内容和致谢的地方外，本论文不包含其他个人或集体已经发表的研究成果，也不包含其他已申请学位或其他用途使用过的成果。与我一同工作的同志对本研究所

2、做的贡献均已在论文中做了明确的说明并表示了谢意。若有不实之处，+本人愿意承担相关法律责任。学位论文题目：作者签名：大连理工大学专业学位硕士学位论文摘要随着Intemet的高速发展和普及，网络已经和人们的日常生产生活密不可分。Intemet上数以亿记的各种数据源，每时每刻都在产生着海量的数据流，另外，由于硬件设备也日趋发展与完善，越来越多的领域部门也会自动的产生高速的海量数据流，如金融服务、网络通信数据、移动通信数据等等。这些数据连续到达、速度快、流量巨大，而且持续变化，这样的数据被称为流数据。因为流数据的这些特点都使得传统的数据管理系统很难或者无法对

3、这些数据进行详细分析和管理，因此，设计开发一种用于流数据管理的系统，具有重要的现实意义。本文针对现实应用的实际需求，开发面向网络流量的流数据管理系统。系统运行在GUNLinux系统环境下，主要使用C／C抖开发，设计实现了针对当前网络中的数据流进行捕获分析管理，可以为用户提供基于特定IP的实时查询以及相关的频繁项统计等功能。本篇论文详细描述了系统中数据流采集模块、流数据处理引擎、数据库交互模块、概要数据结构、用户查询解析模块以及用户接口模块等6个主要模块的设计与实现。本篇论文所描述的管理系统是对网络流数据分析的基础，该系统改变了原来常用的以传统的静态数

4、据库来管理流数据的尴尬情况，大大减少了人们在对大量数据进行频繁项查询等查询时的等待时间，同时也满足了在一些应用的情况下，对数据需要数据实时分析结果的要求。关键词：流数据；流数据管理系统；DSMS；网络数据流；频繁项DesignandImplementationofStreamDataManagementSystemforNetworkDataFlowAbstractWiththerapiddevelopmentandwidespreadpopularizationoftheIntemet。thenetworkhasbecomeanindispensa

5、blepartofproductionandourdavylife．ViatheInternet曲i11iollSofdatasourcesaregeneratedmeverysecond．Additionally，duetotheimprovementofhardwaredevices，VarlOUSfieldsofdepartmentsaretotallycapableofproducingsequencesofhigh-speedmassdataautomatically，continuously，andprecisely，whichweals

6、onaIlleitstreamdataforshort．Becauseofthosecharacteristicsofthestreamdata，itisdifficuIt．orsayit，impossibletoanalysisandmanagethesedata．Thedesignandimplementationofmanagementsystemisofgreatsignificance．Intinspaper，wedesignastreamdatamanagementsystemfornetworkdataflow．fortheactual

7、needsofreal-world．ThesystemisbasedonGNULinuxsystem,anddevelopedbvtheC／C++language，whichcanprovideuserswithspecificIP．basedreal-timequeriesandfrequentitemstatistics；,Inthisthesis，wedescribetheimportantsixmodulesofthesystemdigitally．Thesystemdiscussedinthispaperchangesphenomenont

8、hatweusetraditionalstaticdatabasetomanagethestreamdata