hive常常用命令

《hive常常用命令》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。

1、↵大数据学习总结  公司对大数据方面也做了不少的培训，自己也学习了一些，在实际应用中也有所体会。针对大数据和关系型数据库有几点感触比较深刻：1.数据存储位置不同。Hive是建立在Hadoop之上的，所有Hive的数据都是存储在HDFS中的。而数据库则可以将数据保存在块设备或者本地文件系统中。2.数据更新。由于Hive是针对数据仓库应用设计的，而数据仓库的内容是读多写少的。因此，Hive中不支持对数据的改写和添加，所有的数据都是在加载的时候中确定好的。而数据库中的数据通常是需要经常进行修改的，因此可以使用INSERTINTO... VALUES添加数据，使用UPDATE...SET修改数据.

2、这也是在汇总数据比较痛苦的地方。~~(>_<)~~3.访问速度。hive在查询时有延迟，因为没有索引需要扫描整个表，还有就是mapreduce框架，MapReduce本身具有较高的延迟，所以在利用它来执行hive查询时就会多的延迟了。Hive不适合在线数据查询，针对数据量比较小的表数据库更快一些。目前来说除了详单其他数据量还不是特别大，访问速度很多时候没有关系型数据库查询的快。    还有很多不同的地方，这里就不多说了，就简单说一下常用的命令吧：一、Hive 1.1建表：CREATE[EXTERNAL]TABLE[IFNOTEXISTS]table_name [(col_namedata_

3、type[COMMENTcol_comment],...)] [COMMENTtable_comment] [PARTITIONEDBY(col_namedata_type[COMMENTcol_comment],...)] [CLUSTEREDBY(col_name,col_name,...) [SORTEDBY(col_name[ASC

4、DESC],...)]INTOnum_bucketsBUCKETS] [ROWFORMATrow_format] [STOREDASfile_format] [LOCATIONhdfs_path]举例说明：CREATEEXTERNALTABLEIFNO

5、TEXISTSIN_BILL_GG_D1512( SOURCE_TYPE                STRING ,BIZ_TYPE                  STRING...)PARTITIONEDBY(dtstring)ROWFORMATDELIMITED FIELDSTERMINATEDBY','LINESTERMINATEDBY''LOCATION'/etldata/cdr/gg/1512';1.2Hive下查看数据表信息的方法：方法1：查看表的字段信息  desctable_name;方法2：查看表的字段信息及元数据存储路径  descextendedtable

6、_name;方法3：查看表的字段信息及元数据存储路径  descformattedtable_name;Ef:hive>descformattedt_cdr_wn1609;OK#col_namedata_typecommentsystem_typestringrecord_typestringmsisdnstringreal_numberstringstart_datetimestringend_datetimestringcall_durationintsession_idstringnas_ipstringnas_portstringnas_typestringip_addressst

7、ringstatusstringservice_attrstringdata_flowupintdata_flowdninthome_area_codestringvlanidstringroam_typestringbilling_typestringuser_typestringfee1intfee2intfee3intold_fee1intold_fee2intold_fee3intinfo_fee1stringinfo_fee2stringinfo_fee3stringfile_namestringdeal_timestringid_nointgroup_idstringprodu

8、ct_codestringregion_codestringbrand_codestringdealfilestringerror_codestringrb_file_namestringcall_timesint#PartitionInformation#col_namedata_typecommentdeal_datestringsys_typestring#DetailedTableInformationDatab