首页 > 代码库 > Hive: TApplicationException: Internal error processing get_partition_names 错误的解决方法
Hive: TApplicationException: Internal error processing get_partition_names 错误的解决方法
有时候,某些非常规的操作会导致将要建立数据库/表与保存在metastore里的数据库/表的信息发生冲突,导致无法建立相应的数据库/表。举个例子:如果没有使用常规的drop database/table去删除一个数据库或是表,而是直接在hdfs上删除了相应的文件夹或文件,比如:/user/hive/warehouse/xxxxx.db,然后当你重新试图使用建库脚本建库时,有可能会报出:
FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. org.apache.thrift.TApplicationException: Internal error processing get_partition_names
(备注:为了完整而干净的删除一个数据库,我们可以选择在使用cascade关键字来drop一个database,例如:drop database if exists your-database cascade;)
当然,这里是报出的partition的信息混乱了,也有可能其他元数据出了问题,我们这里只以这个错误信息为例来说明一下解决方法:
是的,原因就像上面提到的,你将要建立的库和metastore中保存的库的元数据冲突了,这时候,我们只能手动删除metastore中的相关数据了!连接到metastore使用的数据库(这里假定是mysql),这个错误是与partition有关的,所以我们要清除partition表里的相关信息,如果我们只有一个库,我们可以简单且粗暴的清空这几个表:
truncate table PARTITION_KEY_VALS; truncate table PARTITION_PARAMS; truncate table PARTITIONS;
如果你有多个库,那你需要使用delete table .... where ... 来有选择的删除指定库里的表的partition信息了。
Hive: TApplicationException: Internal error processing get_partition_names 错误的解决方法
声明:以上内容来自用户投稿及互联网公开渠道收集整理发布,本网站不拥有所有权,未作人工编辑处理,也不承担相关法律责任,若内容有误或涉及侵权可进行投诉: 投诉/举报 工作人员会在5个工作日内联系你,一经查实,本站将立刻删除涉嫌侵权内容。