Hive单机版安装部署

最新推荐文章于 2025-08-01 10:00:02 发布

原创

最新推荐文章于 2025-08-01 10:00:02 发布 · 1.6k 阅读

标签

#hive #hadoop #数据仓库 #大数据

一、相关软件包下载地址：

CentOS-7-x86_64-DVD-2207-02.iso:
https://mirrors.tuna.tsinghua.edu.cn/centos/7/isos/x86_64/
jdk-8u181-linux-x64.tar.gz:
https://repo.huaweicloud.com/java/jdk/8u181-b13/
Hadoop:
https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/hadoop-3.2.4/
Mysql mysql-5.7.25-1.el7.x86_64.rpm-bundle.tar:
https://downloads.mysql.com/archives/community/
Mysql-connector mysql-connector-java-5.1.47.tar.gz:
https://downloads.mysql.com/archives/c-j/
Hive:
https://dlcdn.apache.org/hive/hive-3.1.2/
XSHELL:
https://www.xshell.com/zh/free-for-home-school/

二、准备文件

在根目录下建立software文件夹：mkdir software
压缩文件传输到software文件夹中。

解压命令：
gz文件：tar -zxvf 文件名
Mysql文件: tar -xvf 文件名
文件夹改名：mv 源文件夹名目标文件夹名

三、部署JDK

打开配置文件：vi /etc/profile
在文件最下方添加：

export JAVA_HOME=/software/jdk
export PATH=$PATH:$JAVA_HOME/bin

保存退出，使文件生效：source /etc/profile
查看java版本：java -version
在这里插入图片描述

四、部署hadoop

打开配置文件：vi /etc/profile
在文件最下方添加：

export HADOOP_HOME=/software/hadoop
export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin

保存退出，生效：source /etc/profile
查看hadoop版本： hadoop version
在这里插入图片描述

配置SSH免密：

ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa
cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_ke	ys
chmod 0600 ~/.ssh/authorized_keys

进入/software/hadoop/etc/hadoop文件夹
Hadoop-env.sh在最后面加入：

export JAVA_HOME=/software/jdk
export HDFS_NAMENODE_USER=root
export HDFS_SECONDARYNAMENODE_USER=root
export HDFS_DATANODE_USER=root

Yarn-env.sh最后面加入：

export YARN_REGISTRYDNS_SECURE_USER=root
export YARN_RESOURCEMANAGER_USER=root
export YARN_NODEMANAGER_USER=root

修改core-site.xml:

<configuration>
    <property>
      <name>fs.defaultFS</name>
      <value>hdfs://localhost:9000</value>
    </property>
    
    <property>
      <name>hadoop.tmp.dir<