云计算大数据处理-数据立方与hive对比测试

云计算大数据处理-数据立方与hive对比测试

ID:5859748

大小:318.50 KB

页数:10页

时间:2017-12-26

云计算大数据处理-数据立方与hive对比测试_第1页
云计算大数据处理-数据立方与hive对比测试_第2页
云计算大数据处理-数据立方与hive对比测试_第3页
云计算大数据处理-数据立方与hive对比测试_第4页
云计算大数据处理-数据立方与hive对比测试_第5页
资源描述:

《云计算大数据处理-数据立方与hive对比测试》由会员上传分享,免费在线阅读,更多相关内容在学术论文-天天文库

1、云计算大数据处理分布式数据库-数据立方与Hive对比测试报告一、目的最近进行了云创存储的数据立方性能测试,并将其与开源数据仓库Hive进行了对比,从而得出在廉价的服务器上两者的性能测试结果。二、测试内容本次测试主要从数据查询方面进行对比测试,具体测试内容如下:1.统计单表记录数测试项序号测试内容执行SQLhive1统计查询800W条selectcount(*)frome_mp_power_curve;2统计查询1000W条selectcount(*)froma_tmnl_task;数据立方1统计查询800W条selectcount(*)frome_mp_pow

2、er_curve;2统计查询1000W条selectcount(*)froma_tmnl_task;1.查询单表字段数据测试项序号测试内容执行SQLhive1查询e_mp_power_curve表selectid,DATA_TYPE,DATA_POINT_FLAG,DATA_WHOLE_FLAGfrome_mp_power_curvewhereid=100001100;2查询a_tmnl_taskselectTMNL_TASK_ID,TERMINAL_ID,TASK_IDfroma_tmnl_taskwheretmnl_task_id=100001000;数据

3、立方1查询e_mp_power_curve表selectid,DATA_TYPE,DATA_POINT_FLAG,DATA_WHOLE_FLAGfrome_mp_power_curvewhereid=100001100;2查询a_tmnl_taskselectTMNL_TASK_ID,TERMINAL_ID,TASK_IDfroma_tmnl_taskwheretmnl_task_id=100001000;2.两表join查询测试项序号测试内容执行SQLhive1A表1000W数据,B表800W,两表joinselectp.ID,o.TMNL_TASK_IDf

4、roma_tmnl_taskojoinE_MP_POWER_CURVEpon(o.TMNL_TASK_ID=p.idandp.id>=100000000andp.id<100625000)orderbyo.TMNL_TASK_IDlimit100000;2A表1000W数据,B表1000W,两表joinselecta.TMNL_TASK_ID,a.TMNL_TASK_IDfroma_tmnl_taskainnerjoina_tmnl_task_objoon(a.TMNL_TASK_ID=o.TMNL_TASK_IDanda.TMNL_TASK_ID>=1000

5、00000anda.TMNL_TASK_ID<100625000)limit100000;数据立方1查询e_mp_power_curve表selectp.ID,o.TMNL_TASK_IDfroma_tmnl_taskojoinE_MP_POWER_CURVEpon(o.TMNL_TASK_ID=p.idandp.id>=100000000andp.id<100625000)orderbyo.TMNL_TASK_IDlimit100000;2查询a_tmnl_taskselecta.TMNL_TASK_ID,a.TMNL_TASK_IDfroma_tmnl_t

6、askainnerjoina_tmnl_task_objoon(a.TMNL_TASK_ID=o.TMNL_TASK_IDanda.TMNL_TASK_ID>=100000000anda.TMNL_TASK_ID<100625000)limit100000;1.三表join查询测试项序号测试内容执行SQLhive1A表1000W数据,B表800W,C表800W三表joinselectp.ID,o.TMNL_TASK_IDfroma_tmnl_taskojoinE_MP_POWER_CURVEpon(o.TMNL_TASK_ID=p.idandp.id>=100

7、000000andp.id<100625000)orderbyo.TMNL_TASK_IDlimit100000;数据立方1A表1000W数据,B表800W,C表800W三表joinselectp.ID,o.TMNL_TASK_IDfroma_tmnl_taskojoinE_MP_POWER_CURVEpon(o.TMNL_TASK_ID=p.idandp.id>=100000000andp.id<100625000)orderbyo.TMNL_TASK_IDlimit100000;三.测试环境Hive数据立方控制节点数量(台)11处理节点数量(台)99cpu

8、IntelE5-26202.0G/15

当前文档最多预览五页,下载文档查看全文

此文档下载收益归作者所有

当前文档最多预览五页,下载文档查看全文
温馨提示:
1. 部分包含数学公式或PPT动画的文件,查看预览时可能会显示错乱或异常,文件下载后无此问题,请放心下载。
2. 本文档由用户上传,版权归属用户,天天文库负责整理代发布。如果您对本文档版权有争议请及时联系客服。
3. 下载前请仔细阅读文档内容,确认文档内容符合您的需求后进行下载,若出现内容与标题不符可向本站投诉处理。
4. 下载文档时可能由于网络波动等原因无法下载或下载错误,付费完成后未能成功下载的用户请联系客服处理。