Impala 数据刷新

感情迁移 提交于 2020-01-10 02:58:50

1. refresh

refresh 用于刷新某个表或者某个分区的数据信息,它会重用之前的表元数据,仅仅执行文件刷新操作。

主要用于表中元数据未修改,数据的修改,例如insert into、load data、alter table add partition、llter table drop partition等,如果直接修改表的hdfs文件(增加、删除或者重命名)也需要指定refresh刷新数据信息。

# 刷新表
refresh [table]

# 刷新分区                    
refresh [table] partition [partition]

 

2. invalidate metadata

invalidate metadata 用于刷新全库或者某个表的元数据,包括表的元数据和表内的文件数据。

它会首先清除表的缓存,然后从metastore中重新加载全部数据并缓存,该操作代价比较重。

主要用于在hive中修改了表的元数据,需要同步到impalad,例如 create table / drop table / alter table add columns等

# 重新加载所有库中的所有表
invalidate metadata;

# 重新加载指定的某个表              
invalidate metadata [table]
易学教程内所有资源均来自网络或用户发布的内容,如有违反法律规定的内容欢迎反馈
该文章没有解决你所遇到的问题?点击提问,说说你的问题,让更多的人一起探讨吧!