SemanticException org.apache.hadoop.ipc.RemoteException(java.io.IOException):

最新推荐文章于 2024-09-26 09:18:27 发布

原创

最新推荐文章于 2024-09-26 09:18:27 发布 · 750 阅读

标签

#hive

收录于

本文档描述了在项目中使用Hive运行自定义函数时遇到的SemanticException，具体表现为RemoteException和java.io.IOException。经过分析，发现原因是DataNode故障。为解决此问题，建议执行的操作是退出Hive并重启整个Hadoop集群。

项目场景：

在hive运行自定义函数时报错

问题描述：

hive> select myfunction1("Hello Hive Hello Hadoop,Hello World!");
FAILED: SemanticException org.apache.hadoop.ipc.RemoteException(java.io.IOException): File /tmp/hive/wl/0de96e32-daea-4f9a-b23c-5a87295f1a8f/hive_2021-11-22_16-57-22_553_3163225586976661456-1/dummy_path/dummy_file could only be replicated to 0 nodes instead of minReplication (