Ambari-安装&配置&优化

安装过程中碰到的问题

jdk, seLinux, ssh等略过

ambari 安装

解压
tar zxf /opt/ambari/HDP-UTILS-1.1.0.21-centos7.tar.gz -C /var/www/html/hdp-utils/
tar zxf /opt/ambari/HDP-2.6.3.0-centos7-rpm.tar.gz -C /var/www/html/
tar zxf /opt/ambari/ambari-2.6.0.0-centos7.tar.gz -C /var/www/html/

createrepo .
修改对应的路径
vim /etc/yum.repo.d/ambari.repo

#VERSION_NUMBER=2.6.0.0-267
[ambari-2.6.0.0]
name=ambari Version - ambari-2.6.0.0
baseurl=http://hdp-101/ambari/centos7/2.6.0.0-267/
gpgcheck=0
gpgkey=http://hdp-101/ambari/centos7/2.6.0.0-267/RPM-GPG-KEY/RPM-GPG-KEY-Jenkins
enabled=1
priority=1

vim /etc/yum.repo.d/hdp.repo

#VERSION_NUMBER=2.6.3.0-235
[HDP-2.6.3.0]
name=HDP Version - HDP-2.6.3.0
baseurl=http://hdp-101/HDP/centos7/2.6.3.0-235/
gpgcheck=1
gpgkey=http://hdp-101/HDP/centos7/2.6.3.0-235/RPM-GPG-KEY/RPM-GPG-KEY-Jenkins
enabled=1
priority=1


[HDP-UTILS-1.1.0.21]
name=HDP-UTILS Version - HDP-UTILS-1.1.0.21
baseurl=http://hdp-101/hdp-utils/
gpgcheck=1
gpgkey=http://hdp-101/hdp-utils/RPM-GPG-KEY/RPM-GPG-KEY-Jenkins
enabled=1
priority=1

yum clean all && yum makecache
报错多半是路径没有对应好
yum install -y ambari-server
ambari-server setup …
配置mysql驱动
ambari-server setup --jdbc-db=mysql --jdbc-driver=/path/to/mysql/mysql-connector-java.jar
驱动版本与mysql版本要对应上，否则会报版本相关的问题。推荐使用mysql-connector-java-8.0 版本
ambari-server start …

ambari add server

agent一直注册失败，解决方案如下：

1. 查看 openssl 版本：

   [root@ambari ~]# openssl version
   OpenSSL 1.0.2k-fips 26 Jan 2017

   [root@ambari ~]# rpm -qa | grep openssl
   openssl-libs-1.0.2k-12.el7.x86_64
   openssl-1.0.2k-12.el7.x86_64

如果低于 openssl-1.0.1e-16.el6.x86_64 版本，则需要更新到 openssl-1.0.1e-16.el6.x86_64 及以上版本

2. 查看 Python 版本：

   [root@ambari ~]# python -V
   Python 2.7.5

如果低于 Python 2.7 版本，则升级 Python 到 2.7 及以上版本。

3. 编辑 /etc/python/cert-verification.cfg 配置文件，将 [https] 节的 verify 项设为禁用：

    [root@ambari ~]# vi /etc/python/cert-verification.cfg
    # Possible values are:
    # 'enable' to ensure HTTPS certificate verification is enabled by default
    # 'disable' to ensure HTTPS certificate verification is disabled by default
    # 'platform_default' to delegate the decision to the redistributor providing this particular Python version

    # For more info refer to https://www.python.org/dev/peps/pep-0493/
    [https]
    verify=disable

4. 编辑 /etc/ambari-agent/conf/ambari-agent.ini 配置文件，在 [security] 节部分，确保设置如下两个值，其它值保持不变：

    [root@ambari ~]# vi /etc/ambari-agent/conf/ambari-agent.ini

    [security]
    ssl_verify_cert=0
    force_https_protocol=PROTOCOL_TLSv1_2

服务配置&优化

HDFS

关闭用户权限

hadoop综合问题记录

1、hdfs无法启动

错误：

2020-04-24 17:10:49,863 - Retrying after 10 seconds. Reason: 
Execution of '/usr/hdp/current/hadoop-hdfs-namenode/bin/hdfs dfsadmin -fs 
hdfs://hdp-101:8020 -safemode get | grep 'Safe mode is OFF'' returned 1. 

解决：

su hdfs //切换到hdfs用户，若关闭了hdfs的权限则可略过这一步
hadoop dfsadmin -safemode leave //让namenode离开安全模式

2. metrics空白，url报错，config一直加载

原因很简单，把Adblock关掉！！！
把Adblock关掉！！！
把Adblock关掉！！！
把Adblock关掉！！！
把Adblock关掉！！！
一直困扰了我一两天！！！疯狂查日志重装啥的，都没用！！