Error during job, obtaining debugging information... FAILED: Execution Error, return code 2 from org

最新推荐文章于 2024-06-02 21:45:11 发布
原创 最新推荐文章于 2024-06-02 21:45:11 发布 · 3.2k 阅读 · 20 ·
本内容遵循CC 4.0 BY-SA版权协议
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
标签
#hive #本地模式 #Errorduringjob
博客内容涉及Hadoop MapReduce任务执行时遇到的内存不足问题，报错为'java.lang.OutOfMemoryError: Java heap space'。解决方法包括设置Hive执行模式为本地模式，通过在hive-site.xml中添加配置'hive.exec.mode.local.auto'为'true'来避免内存不足导致的Job失败。

报错：
Error during job, obtaining debugging information...
FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask

解决：
失败原因
经查发现发现/tmp/hadoop/.log提示java.lang.OutOfMemoryError: Java heap space，原因是namenode内存空间不够，jvm不够新job启动导致。

解决方法
将你的hive可以设置成本地模式来执行任务试试：

set hive.exec.mode.local.auto=true;

一劳永逸：

在hive-site.xml 文件添加配置

<property>  
  <name>hive.exec.mode.local.auto</name>  
  <value>true</value>  
</property> 

hive实现单词统计
m0_61232019的博客
11-14 2127
一、前期准备 二、操作步骤 1.在hive下创建一个数据库 ​编辑 2. 在wordcount库下创建一个表 3. 在虚拟机上创建一个文件 4. 将在linux上创建的data文件，上传到新建的hive的worltest表中 5. 进入hive, 查询表wordtest信息 6. 新建一个wordtest1表，只有一列值，用来储存wordtest表数据中的内容 7. 将表wordtest中的数据存放进新建的表wordtest1中 ​编辑8. 查询wordtest1表中的信息 9.
hive使用count()函数卡在kill command报错：Error during job, obtaining debugging information...
lkx99661014的博客
03-01 2646
本文借鉴：https://blog.csdn.net/qq_41428711/article/details/86169029 Attention： 卡在kill command 百度上有很多 解决的帖子，但是他们的方法解决不了我的问题，所以我仔细观察了一下他们大部分kill command 后面的路径最后都是/bin/hadoop，但我的是/bin/mapred。所以有同样问题的朋友要确认一...
hive运行报错Error during job, obtaining debugging information..FAILED: Execution Error, return code 2
lina_999的博客
01-26 2690
hive运行报错Error during job, obtaining debugging information..FAILED: Execution Error, return code 2
Error during job, obtaining debugging information...FAILED: Execution Error, return code 2 from org
weixin_45998042的博客
06-02 1083
因为我试了其中的两三种解决办法，然后把Hadoop，hive，MySQL都重启一次，进入hive，突然可以插入一条数据，但是，等我插入第二条的时候又不行了，然后我又全都重启一遍，还是不行，但是！在hive中插入数据，结果报错如下：Error during job, obtaining debugging information...FAILED: Execution Error, return code 2 from org。看了别人解决的方法，不是很行，可能是因为软件，或者电脑的原因？
Hive中运行任务报错：Error during job, obtaining debugging information...
热门推荐
IT Baicn的博客
01-09 1万+
错误 Ended Job = job_1545829388777_0070 with errors Error during job, obtaining debugging information... FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask MapReduc...
Hive执行SQL语句报错
Lingchen_Liu的博客
01-26 1774
用hive执行以下SQL语句： select count(id) from test; 控制台输出以下错误信息： Error during job, obtaining debugging information... FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask 通过查阅资料发现代码无法执行的原因是因为NameNode的内存不足，临时的解决方法是在将Hive的运行模式修改
hive报错--code1/2/3
qq_46893497的博客
12-21 9824
return code 1 原因： 'Error while processing statement: FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.MoveTask' 报错是抄的，多次实践证明，执行hive sql ERROR 返回 return code 1 基本上是执行的HQL无法加入到对应的用户队列中。 解决方法 1： 执行HQL前，加入 set MapReduce.q
Hive报错Error during job, obtaining debugging information...
weixin_46429290的博客
07-15 6426
在hive中执行插入数据时出现错误 注意：其实正常来说在hive中一般是不会插入数据的，这里测试原因使用了插入 这个报错的主要原因就是namenode内存空间不够，JVM剩余内存空间不够新job运行所致 这个错误把hive模式设置为本地模式运行即可 可以通过命令查看hive是否本地运行 set hive.exec.mode.local.auto; 设置为本地模式将其改成true即可 set hive.exec.mmode.local.auto=true; 问题解决，可以正常进行insert into
hive报错：Error during job, obtaining debugging information...
m0_73699458的博客
01-02 986
修改hive-site.xml文件添加下列内容。解决方法将hive改为本地运行。失败原因JVM虚拟机内存不够。
大数据——hive插入动态分报错（Error during job, obtaining debugging information... ）
蜂蜜柚子加苦茶
10-10 2650
hive插入动态分区报错在hive中插入动态分区时报错：原因解决办法动态分区的相关配置 在hive中插入动态分区时报错： Error during job, obtaining debugging information… FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask 原因 创建的动态分区数超过节点默认允许创建的最大动态分区数，超过了总共默认允许创建的最大动态分区数。 解决办
【HIVE】count(*) sum() 报错：Error during job, obtaining debugging information...
奥利文儿的博客
12-10 1611
在命令行中看不到具体的错误信息，需要在Hadoop YARN平台可视化web界面找到日志记录。在HIVE查询数据过程中，出现count()、sum()的汇总函数时，查询失败，报以下错误。
hive生产实践问题（一）在使用Hive Client跑job时，一直提示job被kill，
xuxu96
03-31 4173
然后观察YARN的WebUI进行查看，如图： 然后观察Hive Client的控制台输出，如下： Launching Job 1 out of 3 Number of reduce tasks is set to 0 since there’s no reduce operator Starting Job = job_1552895066408_0001, Tracking URL = htt...
HIVE：Hive插入数据失败，数据不显示的问题解决
zuodingquan666的博客
12-16 4813
首先我们来查看报错信息： Ended Job = job_1639620592561_0002 with errors Error during job, obtaining debugging information... Examining task ID: task_1639620592561_0002_m_000000 (and more) from job job_1639620592561_0002 Task with the most failures(4): ----- Task I
hive运行mapreduce任务出现报错Error during job, obtaining debugging information...
2020xyz的博客
10-23 2453
问题描述： hive建表之后进行insert数据插入操作时，出现以下报错： Error during job, obtaining debugging information... 解决步骤： 实际上导致执行hive出现该报错信息的原因非常多，通过网上搜索相关报错信息发现很多人说是namenode或者hive等的jvm内存不足，结果实际测试发现调大内存也不行； 并且此时我实际执行wordcount测试用例又能成功运行；据此也基本可以排除jvm内存不足的问题； 网上不少人提议采用本
hive插入数据后报错 FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
qq_52699757的博客
11-09 1385
hive插入数据后报错 FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值