天天看点

kettle hive 表动态分区思路

首先得新建两张表

一张按照原始表结构设计,第二张是准备分区的表

这边我的分区字段是quotime

kettle hive 表动态分区思路

然后在转换添加sql

kettle hive 表动态分区思路

里面可以这么写

kettle hive 表动态分区思路

这样当第一次运行时会把表数据放到第一张表里,第二次时会把第一张表数据动态分区到第二张分区表里

其中有两个要注意的,

1.建立分区表时要添加分隔符,比如

row format delimited fields terminated by ';'
           

2.以上方法导入时要在查询的最后一位添加part的分区字段

kettle hive 表动态分区思路

继续阅读