解决hive1.2.1不支持update更新操作

最新推荐文章于 2024-12-14 17:21:44 发布

原创

最新推荐文章于 2024-12-14 17:21:44 发布 · 3.6k 阅读

收录于

本文介绍在Hive中启用事务支持及行级更新的详细步骤，包括配置hive-site.xml，重启服务，以及创建支持事务的表结构。同时，解决在更新操作中遇到的错误，如更新分桶列值的限制。

在pk环境下部署了一套原生hadoop环境，hive版本1.2.1，开发在用代码对hive表做update操作时报错：

Caused by: org.apache.hadoop.hive.ql.parse.SemanticException: Attempt to do update or delete using transaction manager that does not support these operations.
at org.apache.hadoop.hive.ql.parse.UpdateDeleteSemanticAnalyzer.analyzeInternal(UpdateDeleteSemanticAnalyzer.java:65)
at org.apache.hadoop.hive.ql.parse.BaseSemanticAnalyzer.analyze(BaseSemanticAnalyzer.java:227)
at org.apache.hadoop.hive.ql.Driver.compile(Driver.java:424)
at org.apache.hadoop.hive.ql.Driver.compile(Driver.java:308)
at org.apache.hadoop.hive.ql.Driver.compileInternal(Driver.java:1122)
at org.apache.hadoop.hive.ql.Driver.compileAndRespond(Driver.java:1116)
at org.apache.hive.service.cli.operation.SQLOperation.prepare(SQLOperation.java:110)

Hive从0.14版本开始支持事务和行级更新，但缺省是不支持的，需要一些附加的配置。要想支持行级insert、update、delete，需要配置Hive支持事务。

修改hive-site.xml，增加如下配置参数：