远程访问Cloudera-Manager使用的postgres数据库

最新推荐文章于 2024-06-12 15:24:38 发布

原创最新推荐文章于 2024-06-12 15:24:38 发布 · 1.6k 阅读

3 ·

本内容遵循CC 4.0 BY-SA版权协议

标签

#CDH #postgres

CDH 专栏收录该内容

1 篇文章

订阅专栏

本文介绍了如何在Cloudera-Manager安装CDH时，使用内嵌的PostgreSQL数据库，并详细说明了如何查看数据库密码以及如何通过squirrelsql进行远程访问，包括设置postgres允许远程连接、下载JDBC驱动以及连接数据库的步骤。

文章部分参考采用Cloudera-Manager安装CDH时，采用内嵌数据库各数据库用户密码的保存位置

概述

在采用Cloudera-Manager安装cdh时，通常使用内嵌的PostgreSQL数据库。
Cloudera-Manager除了保存CDH集群的配置元数据的scm数据库外，还为Activity Monitor（活动监控）、Service Monitor（服务监控）、Report Manager（报告管理）、Host Monitor（主机监控）、Cloudera Navigator（Cloudera导航）等信息分别创建数据amon、smon、rmon、hmon、nav相应的数据。
如果你运行了Hive服务，Cloudera-Manager还会创建hive数据库用于保存hive metastore即建表的元数据等。
在实际使用中，如果需要查看数据库内容，直接在服务器上跑命令较为麻烦，因此采用远程访问的方式。

查看数据库密码

   # scm数据库的用户名，密码
   more /etc/cloudera-scm-server/db.properties


   #其他数据库（如amon,hmon,smon,rman,nav）的用户名、密码
   more /etc/cloudera-scm-server/db.mgmt.properties

   #数据库管理者（相当于oracle DBA）cloudera-scm的用户名、密码
   /var/lib/cloudera-scm-server-db/data/generated_password.txt

   #hive数据库的用户名、密码
   #You can find the databaes admin(cloudera-scm) password in /var/lib/cloudera-scm-server-db/data/generated_password.txt.
   #If you start the Hive Metastore Server, the hive password will be in its hive-site.xml. You can see this file by clicking on your Hive Metastore Server, then clicking on Processes, expanding Show, and clicking on hive-site.xml.
   #http://xxxx:7180/cmf/process/808/config?filename=hive-site.xml
  #即hive数据库的密码可以在hive-site.xml中发现。

远程访问postgres

这里使用squirrelsql进行可视化访问。squirrelsql相关信息参考官网，这里不再赘述。

设置postgres可远程访问。

#查看当前postgres启动命令
ps -o ruser=cloudera-scm -e -o pid,ppid,c,stime,tty,time,cmd|grep postgres
#cloudera-scm      1687      1  0 Oct29 ?        00:00:07 /usr/bin/postgres -D /var/lib/cloudera-scm-server-db/data
#可以看到 postgres 启动时使用了/var/lib/cloudera-scm-server-db/data目录
vim /var/lib/cloudera-scm-server-db/data/pg_hba.conf
#添加想要远程访问的主机ip，如：
host    all         all         192.168.34.1/24      trust
# reload配置
# 这里需要注意，因为postgres是由cloudera-scm用户启动的，所以reload也需要用cloudera-scm用户。
# 按照以下步骤设置
vim /etc/passwd
#将cloudera-scm:x:496:493:Cloudera Manager:/var/lib/cloudera-scm-server:/sbin/nologin 改成如下：
cloudera-scm:x:496:493:Cloudera Manager:/var/lib/cloudera-scm-server:/bin/bash
# 执行下列命令reload
su cloudera-scm -l -c "pg_ctl reload -D /var/lib/cloudera-scm-server-db/data"
# 之后可以将/etc/passwd中修改的再改回来

下载postgres的jdbc驱动
下载地址
连接postgres
第一步，设置postgres驱动。

第二步，连接
填写相关信息，注意cdh的postgres端口号为7432。如：jdbc:postgresql://ip:7432/scm 账号名为scm，密码为上面第一步中查看到的密码。

连接成功后如下图：