hive如何创建分区

小编给大家分享一下hive如何创建分区,相信大部分人都还不怎么了解,因此分享这篇文章给大家参考一下,希望大家阅读完这篇文章后大有收获,下面让我们一起去了解一下吧!

创新互联主营会同网站建设的网络公司,主营网站建设方案,app软件开发公司,会同h5成都小程序开发搭建,会同网站营销推广欢迎会同等地区企业咨询

 HIVE的分区通过在创建表时启用partitionby实现,用来partition的维度并不是实际数据的某一列,具体分区的标志是由插入内容时给定的。当要查询某一分区的内容时可以采用where语句,形似where tablename.partition_key >a来实现。

创建含分区的表。

命令原型:

CREATE TABLE page_view(viewTime INT, userid BIGINT,

     page_urlSTRING, referrer_url STRING,

     ip STRINGCOMMENT 'IP Address of the User')

COMMENT 'This isthe page view table'

PARTITIONED BY(dtSTRING, country STRING)

CLUSTEREDBY(userid) SORTED BY(viewTime) INTO 32 BUCKETS

ROW FORMATDELIMITED

   FIELDSTERMINATED BY '\001'

   COLLECTION ITEMSTERMINATED BY '\002'

   MAP KEYSTERMINATED BY '\003'

STORED ASSEQUENCEFILE;

Eg:

建表:

CREATE TABLE c02_clickstat_fatdt1

(yyyymmdd  string,

id              INT,

ip               string,

country          string,

cookie_id        string,

page_id          string  ,  

clickstat_url_id int,

query_string     string,

refer            string

)PARTITIONED BY(dt STRING)

row format delimited fields terminated by '\005' stored astextfile;

装载数据:

LOAD DATA INPATH'/user/admin/SqlldrDat/CnClickstat/20101101/19/clickstat_gp_fatdt0/0' OVERWRITEINTO TABLE c02_clickstat_fatdt1

PARTITION(dt='20101101');

访问某一个分区

SELECT count(*)

    FROMc02_clickstat_fatdt1 a

    WHERE a.dt >='20101101' AND a.dt < '20101102';

以上是“hive如何创建分区”这篇文章的所有内容,感谢各位的阅读!相信大家都有了一定的了解,希望分享的内容对大家有所帮助,如果还想学习更多知识,欢迎关注创新互联行业资讯频道!


标题名称:hive如何创建分区
网页路径:http://hxwzsj.com/article/ipijhj.html

其他资讯

Copyright © 2025 青羊区翔捷宏鑫字牌设计制作工作室(个体工商户) All Rights Reserved 蜀ICP备2025123194号-14
友情链接: 企业网站建设 成都网站建设 成都网站建设推广 网站设计公司 成都网站建设 外贸网站设计方案 营销型网站建设 定制级高端网站建设 教育网站设计方案 成都网站设计 网站建设公司 成都商城网站建设 成都网站设计公司 自适应网站设计 成都网站制作 营销网站建设 成都网站制作公司 成都定制网站建设 成都响应式网站建设 营销型网站建设 成都网站制作 移动手机网站制作