关于大数据你必须要了解的知识

关于大数据你必须要了解的知识

ID:25318048

大小:1.57 MB

页数:34页

时间:2018-11-19

关于大数据你必须要了解的知识_第1页
关于大数据你必须要了解的知识_第2页
关于大数据你必须要了解的知识_第3页
关于大数据你必须要了解的知识_第4页
关于大数据你必须要了解的知识_第5页
资源描述:

《关于大数据你必须要了解的知识》由会员上传分享,免费在线阅读,更多相关内容在教育资源-天天文库

1、大数据什么是大数据大数据原理和构成大数据应用大数据价值BigData目录什么是大数据BigData什么是大数据HadoopIBM英特尔HP数据商业智能数据库服务器SAPHANANoSQLSQLHDFS预测数据流运算节点机器学习并行计算磁盘阵列甲骨文AMD内存计算GoogleMapreduce可视化GbPbTbZbBigData什么是大数据由多个软件、硬件部分组成的一个数据系统一个执行体系有别于传统企业数据中心,用来应对现代海量数据化的生活,商业环境。不是一个行业,而是一种新的数据处理方法是关于数据的运输和处理,以及最后有效使用的体系与云计算一样都是一种新的生

2、产组织形式Web2.0时代的解决方案大数据(bigdata),或称巨量资料,指的是所涉及的资料量规模巨大到无法透过目前主流软件工具,在合理时间内达到撷取、管理、处理、并整理成为帮助企业经营决策更积极目的的资讯BigData什么是大数据大数据的目的原始数据的处理和分类存储将存储的数据调取并分析最终提供决策依据归类数据类型有效分析组合大数据的特点4V海量高速多样精确BigData什么是大数据1KB=1024字节存储单位1MB=1024KB1GB=1024MB1TB=1024GB1PB=1024TB=1,048,576GB1EB=1024PB=1,073,741,

3、824GB1ZB=1024EB=1,099,511,627,776GB100万G10亿G1万亿G22亿台215万台2100台500G硬盘电脑15寸电脑排成行可以往返一次月球BigData什么是大数据Volume海量1PB=1024TB=1,048,576GB1EB=1024PB=1,073,741,824GB1ZB=1024EB=1,099,511,627,776GBIntel:人类文明开始到2003年地球共产生了5EB数据.2012年全年,全球产生数据2.7ZB是2003年以前的500倍2015年,全球估计产生数据8ZB,等于1800万个美国国会图书馆44

4、%35ZB2000年数字信息占全球数据量的25%75%都在报纸胶片磁带等媒介2013年数字信息98%非数字信息2%BigData什么是大数据商业数据现状Twitter2007年5000条微博更新/天2008年30万条微博更新/天2009年250万条微博更新/天2010年3500万条微博更新/天2011年2亿条微博更新/天2013年4亿条微博更新/天2013年上传时长12年的视频/天2013年用户分享25亿条信息/天我国一个一线城市的健康档案数据5PB/年我国一个智慧城市的数据800PB/年一个单数据表几亿-几百亿条记录下线商品14亿件,在线商品8亿件淘宝数据

5、库存了20PB数据平均每月增加1.5PB智能移动终端设备的巨量增长BigData什么是大数据Velocity高速6000万用户登录/天20亿次页面访问/天每天1.2亿次网站访问响应时间小于100毫秒大数据的惊人不止是在数量上,同时数据还是巨量具有动态分析价值的数据。访问响应时间的加快,数据库读写速度的加快,对电商企业来说就等于多成交。对于很多情况下,动态的数据价值远大于静态数据,比如气象预测,灾难预测,快消行业等。由于输入速度加快,所以要求输出速度也要加快BigData什么是大数据Variety多样数据:结构化数据半结构化数据非结构化数据指关系型数据表指关系

6、结构与内容混合在一起的数据类型文档、视频、音频、图片20%结构化80非结构化企业数据2012年互联网产生的数据25%结构化75非结构化50%-70%源于人与人的互动BigData什么是大数据Veracity准确大数据的核心思想之一准确源自于对全部数据的处理分析基础数据的真实准确性,才能保证结果的有效性。BigData什么是大数据大数据VS云计算两者都是生产方式改变为主,生产资料改变为辅,提高生产效率。云计算是将计算和存储,由本地转移到了云端。大数据则是提供了一套新的计算和存储工作原理。二者有本质的不同,但却是一个完整的体系。大数据可以是云计算的心脏,云计算是

7、大数据服务的通路。BigData什么是大数据大数据VS物联网物联网是大数据的流程中的第一层采集层物联网网关以上就进入了大数据工作范畴。局部域内的物联网应用解决方案等同于这个域内的大数据系统大数据原理和构成大数据的核心工作思路大数据系统颠覆了传统数据中心的工作逻辑传统数据系统工作逻辑:运算系统调动数据库的数据,数据的移动。大数据系统工作逻辑:运算系统直接部署至数据处,数据仅架构内移动。BigData大数据原理和构成BigData大数据原理和构成传统数据系统工作原理客户客户客户客户客户客户互联网路由器访问请求负载均衡服务器集群DBDBDBDB数据库集群数据调用请

8、求数据移动结果反馈BigData大数据原理和构成Ha

当前文档最多预览五页,下载文档查看全文

此文档下载收益归作者所有

当前文档最多预览五页,下载文档查看全文
温馨提示:
1. 部分包含数学公式或PPT动画的文件,查看预览时可能会显示错乱或异常,文件下载后无此问题,请放心下载。
2. 本文档由用户上传,版权归属用户,天天文库负责整理代发布。如果您对本文档版权有争议请及时联系客服。
3. 下载前请仔细阅读文档内容,确认文档内容符合您的需求后进行下载,若出现内容与标题不符可向本站投诉处理。
4. 下载文档时可能由于网络波动等原因无法下载或下载错误,付费完成后未能成功下载的用户请联系客服处理。