web | Java

Hive的动态分区和静态分区?

千锋教育

静态分区 SP(static partition)


1、静态分区是在编译期间指定的指定分区名


2、支持load和insert两种插入方式 


2.1load方式

1)会将分区字段的值全部修改为指定的内容

2)一般是确定该分区内容是一致的时候才会使用


2.2insert方式

1)必须先将数据放在一个没有设置分区的普通表中

2)该方式可以在一个分区内存储一个范围的内容

3)从普通表中选出的字段不能包含分区字段


3、适用于分区数少,分区名可以明确的数据 动态分区 DP(dynamic partition)

1、根据分区字段的实际值,动态进行分区


2、是在sql执行的时候进行分区


3、需要先将动态分区设置打开(set hive.exec.dynamic.partition.mode=nonstrict )


4、只能用insert方式


5、通过普通表选出的字段包含分区字段,分区字段放置在最后,多个分区字段按照分区顺序放置 静态分区与动态分区的主要区别在于静态分区是手动指定,而动态分区是通过数据来进行判断。