云计算与大数据-孟小峰.pdf

《云计算与大数据-孟小峰.pdf》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。

1、CloudComputingandBigDataXiaofengMengRenminUniversityofChina数据挖掘教学研讨会，北京,2012,8,9Outline1IntroductiontoBigData2CloudComputingandBigData3ChallengingProblems4OurWork5Conclusion数据挖掘教学研讨会，北京,2012,8,9Outline1IntroductiontoBigData2CloudComputingandBigData3ChallengingProblems4OurWork5Conclusi

2、on数据挖掘教学研讨会，北京,2012,8,9BigDataissohot!GoogleTrendsofBigDataBigDataAcrosstheFederalGovernment(USA,March,2012)数据挖掘教学研讨会，北京,2012,8,9数据挖掘教学研讨会，北京,2012,8,9WhatisBigData?数据挖掘教学研讨会，北京,2012,8,9DB(Database)vs.BD(BigData)“Smalldata”，VeryLargeDatabase（VLDB）数据工程MB,结构数据DataEngineering以数据为对象解决

3、其存储和管理问题BigData，ExtremelyLargeDatabase（XLDB）数据思维>PB，非结构数据DataThinking以数据为资源解决诸领域问题数据挖掘教学研讨会，北京,2012,8,9社会的数字化与数字的社会化社会的数字化：数据足迹（dataprint）在数字化时代，各色人等有意无意留下的数据足迹越来越丰富数据足迹是有社会意义（socialmeaning）的，蕴含着社会结构数字的社会化：数据足迹及其结构本身就是社会结构和过程的一个环节，不断塑造着新的社会秩序和关系数据挖掘教学研讨会，北京,2012,8,9数据思维：计算社会科学

4、一切社会解释、监控、预测与规划都离不开对数据足迹的收集、整理和分析计算社会科学方法：基于特定社会需要，在特定社会理论指导下，收集、整理和分析数据足迹，以便进行社会解释、监控、预测与规划的过程和活动数据挖掘教学研讨会，北京,2012,8,9WhatCanBigDatado?Prediction数据挖掘教学研讨会，北京,2012,8,9WhatCanBigDatado?华尔街根据民众情绪抛售股票对冲基金依据购物网站的顾客评论，分析企业产品销售情况银行根据求职网站的岗位数量，推断就业率投资机构收集并分析上市企业声明，从中寻找破产的蛛丝马迹美国疾病控制和

5、预防中心依据网民搜索，分析全球范围内流感等病疫的传播情况美国总统奥巴马的竞选团队依据选民的微博，实时分析选民对总统竞选人的喜好数据挖掘教学研讨会，北京,2012,8,9WhatCanBigDatado?FraudDetectionHealthcareTransportationTelecommunicationsLifesciencesFinancialtransactions……….数据挖掘教学研讨会，北京,2012,8,9安阳殷墟遗址（公元前1300，距今3300年）甲骨文大坑，1万7千余片数据挖掘教学研讨会，北京,2012,8,9BigDat

6、aApplication应用用户数精确度可靠度数据量反应科学计算少极高低--中等Tera慢股市交易大量高极高Gega快Web数据大量中等--高中等Peta快微博数据大量中等--高中等100Peta快。。。数据挖掘教学研讨会，北京,2012,8,9Outline1IntroductiontoBigData2CloudComputingandBigData3ChallengingProblems4OurWork5Conclusion数据挖掘教学研讨会，北京,2012,8,9CloudComputingandBigDataCloudComputingisjustlik

7、ethehighwaywhichcansupportavarietyoftransportationBigDatacanbeseenasonevehicleonthehighwayCloudComputingisinfrastructurewhileBigDataisitsserviceobject数据挖掘教学研讨会，北京,2012,8,9BigDataAnalysisPipelineCollaborationofcloudcomputingcangreatlypromotetheseprocessInterpretationAnalysisIntegrati

8、onExt