配置单元表保留支持

guykilcj  于 2021-05-27  发布在  Hadoop
关注(0)|答案(1)|浏览(277)

我想支持在配置单元表上保留旧分区。基本上,我需要在特定的时间段后自动删除配置单元分区。我可以手动执行此操作,也可以使用脚本执行此操作,但我注意到每个配置单元表中都存在保留属性,但我找不到有关它的许多信息。
例如,在配置单元表中使用descibe时,有一个保留属性

desc formatted my_hive_table;
>>>
col_name                data_type                comment
...
Retention:              0                        NULL
...

我发现了2014年的jira,但我不确定它是否得到了实施,以及如何实施。
有人能确认hive是否支持此功能吗?如果支持,如何正确配置它?

egdjgwm8

egdjgwm81#

我认为它在hive3中是可用的,至少它在hdp中,因为3.1.4请参见此处的配置https://docs.cloudera.com/hdpdocuments/hdp3/hdp-3.1.4/using-hiveql/content/hive-set-partition-retention.html

相关问题