关于在hue当中执行shell脚本，报错Stdoutput Warning: /opt/cloudera/parcels/CDH-5.14.0-1.cdh5.14.0.p0.24/bin/..b/sq...

最新推荐文章于 2022-05-25 22:00:00 发布

转载最新推荐文章于 2022-05-25 22:00:00 发布 · 1.4k 阅读

0 ·

本内容遵循CC 4.0 BY-SA版权协议

原文链接：http://www.cnblogs.com/gxgd/p/9628029.html

标签

#shell #大数据 #数据库

收录于

本文介绍了在使用Hue进行工作流操作时遇到的Accumulo导入失败的问题及其解决方法。通过创建特定目录并在shell脚本中设置环境变量ACCUMULO_HOME，成功解决了警告提示并确保了Accumulo组件正常工作。

今天在使用hue做工作流，执行shell脚本的时候出现出现下面这个问题

Stdoutput Warning: /opt/cloudera/parcels/CDH-5.14.0-1.cdh5.14.0.p0.24/bin/..b/sqoop/../accumulo does not exist! Accumulo imports will fail.

Stdoutput Please set $ACCUMULO_HOME to the root of your Accumulo installation.

Heart beat
Heart beat
Heart beat

出现这个问题我们的第一反应就是这个目录不存在肯定是去见这个目录。但是其实不然我们只要见下面的目录，然后在脚本中引入上面的报错的这个环境变量就可以正常的运行：

解决办法：

mkdir /var/lib/accumulo
export ACCUMULO_HOME=/var/lib/accumulo  （这个地方一定是配置在脚本当中，不是在机器的环境变量当中）

至此问题得到了解决。

转载于:https://www.cnblogs.com/gxgd/p/9628029.html

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

weixin_30296405

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

hue 用oozie调度shell（sqoop）脚本问题

qq_43688472的博客

06-23

486

hue 用oozie调度shell（sqoop）脚本问题真是搞了好几天 hue上的日志问题给的太有迷惑性了问题一：用户权限问题对应的更改文件权限就可以了 HADOOP_USER_NAME=${wf:user()} 让oozie找到Hadoop集群上面的用户。问题二：文件找不到问题将文件上传的到hdfs的路径，也要注意权限问题然后：问题三：sqoop的shell找不到com.mysql.jdbc.Driver java.lang.RuntimeException: Could not l

参与评论您还未登录，请先登录后发表或查看评论

关于在hue当中通过oozie提交各类文件的总结（shell脚本，hive ，mr）

weixin_30835649的博客

03-19

1377

在ｏｏｚｉｅ上面提交作业报错的解决办法：（１）在ｏｏｚｉｅ上将写好的好ｓｑｏｏｐ脚本添加上来的时候，这个时候报错。说一直没有权限：解决方法：（１）首先想到的时去修改这个文件的权限。然后修改之后还是不行。然后尝试各种各样的问题（ｈｕｅ采用的是４.１.０，ｏｏｚｉｅ采用的是４.２.０，ｓｑｏｏｐ采用的是１.４.６）（２）然后就找到ｙａｒｎ的这个配置文件。然后这个文...

Sqoop提示$ACCUMULO_HOME警告

L, there!

07-09

1万+

Sqoop运行提示警告： Warning: /opt/cloudera/parcels/CDH-5.16.1-1.cdh5.16.1.p0.3/bin/../lib/sqoop/../accumulo does not exist! Accumulo imports will fail. Please set $ACCUMULO_HOME to the root of your Accumul...

HUE平台oozie 调度系统设置踩坑记录

数据挖掘爱好者

01-18

4102

通过oozie调用hive和shell脚本都没有问题。shell脚本需要先上传到hdfs 的某个目录下，只要账户对这个目录有读权限就行。Stdoutput Warning: /opt/cloudera/parcels/CDH-5.13.0-1.cdh5.13.0.p0.29/bin/../lib/sqoop/../accumulo does not exist! Accumulo imports

hive往mysql迁移数据sqoop报错注意事项

weixin_43370502的博客

10-09

1915

最近在帮同事迁移数据的时候sqoop老是报错，错误也不明显，在网上搜了一圈也没找，然后自己根据错误一步一步进行了排查，最终找到了原因，看到数据、表字段类型以及迁移表名是才恍悟，在做数据同步时一定要心细一些，不然问题五花八门错误如下： [root@master ~]# sqoop export --connect “jdbc:mysql://172.23.20.142:3306/tds?useUn...

CDH安装时报错：/opt/cloudera/parcels/.flood/.../CDH-6.3.2-1.cdh6.3.2.p0.1605554-el7.parcel does not exist

东城庞太师

05-25

1303

原因：磁盘空间不足。解决：优先查看节点的磁盘空间，根目录大小不要小于30G. 根目录空间扩容到30G 以上，（每台都要）。

cdh5.14 sqoop 问题记录

坚哥笔记

04-04

2433

sqoop1 client报错:Warning: /opt/cloudera/parcels/CDH-5.12.0-1.cdh5.12.0.p0.29/bin/../lib/sqoop/../accumulo does not exist! Accumulo imports will fail.Please set $ACCUMULO_HOME to the root of your Accumu...

CDH-5.14.2集群安装

奋斗的小鸟专栏

05-16

5499

1、所有主机root用户密码一致Ping检测网络链接是否正常telnet检测服务端口能否正常访问2、CentOS 6 相关网络配置：Ø 修改网络ip地址#vi/etc/sysconfig/network-scripts/ifcfg-eth0 修改eth0 网卡信息IP等.内容如下： ...

sqoop-1.4.6安装及常见问题解决

SCGH_Fx的专栏

06-20

1万+

环境：ubuntu16.0.4，hadoop-2.7.3，hbase-1.3.0，zookeeper-3.4.10，hive-2.1.1 从网上下载sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz。点我下载然后解压到用户主目录下面 ubuntuserver@Master:~$tar -zxvf sqoop-1.4.6.bin__hadoo

Sqoop异常:Please set $ACCUMULO_HOME to the root of your Accumulo installation.

12-07

5876

shell-init: 获取当前目录时出错: getcwd: 无法访问父目录: 没有那个文件或目录chdir: 获取当前目录时出错: getcwd: 无法访问父目录: 没有那个文件或目录chdir: 获取当前目录时出错: getcwd: 无法访问父目录: 没有那个文件或目录Warning: /mnt/software/sqoop-1.4.6-cdh5.7.0/../hcatalog do...

数仓学习（一）环境搭建

weixin_39561762的博客

10-23

2601

文章目录1. 环境安装1.1 准备三台虚拟机，分别是hadoop102、hadoop103、hadoop1041.1.1 vagrant虚拟机配置1.1.2 虚拟机安装1.2 修改root用户密码1.3 修改host配置文件1.4 新增hadoop用户1.5 配置免密登录1.6 配置xsync脚本1.6 创建工作目录1.6 JDK安装1.7 bash脚本配置路径说明1.8 生成模拟数据1.9 xcall脚本2. 安装分布式群集2.1 安装Hadoop2.1.1 安装2.1.2 配置环境变量2.1.3 分发2

sqoop的基本语法详解及可能遇到的错误

热门推荐

01-15

1万+

1 sqoop介绍 Apache Sqoop是专为Apache Hadoop和结构化数据存储如关系数据库之间的数据转换工具的有效工具。你可以使用Sqoop从外部结构化数据存储的数据导入到Hadoop分布式文件系统或相关系统如Hive和HBase。相反，Sqoop可以用来从Hadoop的数据提取和导出到外部结构化数据存储如关系数据库和企业数据仓库。 Sqoop专为大数据批量传输设计，能够分割数...

java sqoop 1.4.5_sqoop1.4.5 导入 hive IOException running import job: java.io.IOException: Hive exited...

weixin_39827036的博客

02-25

478

sqoop 导入 hivehive.HiveImport: Exception in thread "main" java.lang.NoSuchMethodError: org.apache.thrift.EncodingUtils.setBit(BIZ)BERROR tool.ImportTool: Encountered IOException running import job: jav...

sqoop的安装与使用

sunflower_cao的专栏

10-21

7791

Sqoop即 SQL to Hadoop ，是一款方便的在传统型数据库与Hadoop之间进行数据迁移的工具，充分利用MapReduce并行特点以批处理的方式加快数据传输，发展至今主要演化了二大版本，Sqoop1和Sqoop2。 Sqoop工具是hadoop下连接关系型数据库和Hadoop的桥梁，支持关系型数据库和hive、hdfs，hbase之间数据的相互导入，可以使用全表导入和增量导入。那么为什么选择Sqoop呢？高效可控的利用资源，任务并行度，超时时间。数据类型映射与转化，可自动进行，用户

Alex 的 Hadoop 菜鸟教程: 第12课 Sqoop1 安装/导入/导出教程

软件哲学

12-01

1万+

sqoop是用于在传统关系型数据库跟hdfs之间进行数据导入导出的工具。目前sqoop已经出了2，但是截至当前，sqoop2还是个半成品，不支持hbase，功能还很少，所以我还是主要讲sqoop1

大数据教程（13.5）sqoop数据迁移工具安装&简单导入实例

weixin_34233421的博客

03-18

501

2019独角兽企业重金招聘Python工程师标准>>> ...

Sqoop常用操作命令

曹利荣的博客

01-19

4688

sqoop的所有操作脚本在$SQOOP_HOME/bin 目录下 sqoop脚本 1、 [hadoop@hadoop001 bin]$ sqoop Warning: /home/hadoop/apps/sqoop-1.4.6-cdh5.7.0/../hbase does not exist! HBase imports will fail. Please set $HBASE_HOME ...

sqoop学习笔记（1）—— sqoop安装和数据导入

一角残叶的博客

09-10

641

1 介绍 sqoop是apache旗下一款“Hadoop和关系数据库服务器之间传送数据”的工具。导入数据：MySQL，Oracle导入数据到Hadoop的HDFS、HIVE、HBASE等数据存储系统；导出数据：从Hadoop的文件系统中导出数据到关系数据库 1.1 工作机制将导入或导出命令翻译成mapreduce程序来实现。在翻译出的mapreduce中主要是对inputfo...