天天看点

hive内部表和外部表的区别

内部表&外部表

未被external修饰的是内部表(managed table)可省略,被external修饰的为外部表(external table);

区别:

内部表数据由Hive自身管理,外部表数据由HDFS管理;

内部表数据存储的位置是hive.metastore.warehouse.dir(默认:/user/hive/warehouse)加location '/input/table_data';指定路径,外部表数据的存储位置由自己制定;

删除内部表会直接删除元数据(metadata)及存储数据;删除外部表仅仅会删除元数据,HDFS上的文件并不会被删除;

对内部表的修改会将修改直接同步给元数据,而对外部表的表结构和分区进行修改,则需要修复(MSCK REPAIR TABLE table_name;)

如下,进行试验进行理解

创建内部表t1

create table t1(
    id      int
   ,name    string
   ,hobby   array<string>
   ,add     map<String,string>
)
row format delimited
fields terminated by ','
collection items terminated by '-'
map keys terminated by ':'
;      

2. 查看表的描述:desc t1; 

3.上传数据:

load data local inpath '/home/hadoop/Desktop/data' overwrite into table t1;      
load data local inpath '/home/hadoop/Desktop/data' overwrite into table t1;      

local:复制上传,从Linux本地文件系统上传到表格

无local:剪切上传,从hdfs文件系统上传到表格

创建一个外部表t2

create external table t2(
    id      int
   ,name    string
   ,hobby   array<string>
   ,add     map<String,string>
)
row format delimited
fields terminated by ','
collection items terminated by '-'
map keys terminated by ':'
location '/user/t2'
;      

因而外部表仅仅删除元数据