在AWS EC2中部署和使用Apache Superset的方案

原创

于 2022-09-09 18:48:36 发布 · 808 阅读

标签

#aws #apache #docker #大数据

本文详细介绍了如何在AWS EC2环境中部署Apache Superset，包括启动EC2实例、下载Docker文件、配置管理员、设置数据库驱动，以及处理常见错误。同时，文章还涉及到IAM角色与安全组的配置，特别是与AWS Athena和RedShift的集成。此外，还提供了Superset配置数据源和创建仪表板的教程。

本文将讲解如何在AWS EC2中部署Apache Superset，并通过AWS Glue连接AWS S3、AWS RDS、AWS RedShift中的数据，进行可视化展现。

1 Superset部署

1.1 启动AWS EC2

启动一台Amazon Linux EC2并安装启动docker环境，需要机型为t.xlarge及以上，EBS盘20GB以上。

sudo yum update -y

# install python3 gcc
sudo yum install -y python3 libpq-dev python3-dev
sudo yum install -y gcc gcc-c++

# add following into ~/.bashrc
echo "export PATH=/usr/local/bin:$PATH" >> ~/.bashrc
echo "alias python=python3" >> ~/.bashrc
echo "alias pip=pip3" >> ~/.bashrc
source ~/.bashrc
python --version

# install docker
sudo yum -y install docker
sudo usermod -a -G docker ec2-user
sudo systemctl start docker
sudo systemctl status docker
sudo systemctl enable docker
sudo chmod 666 /var/run/docker.sock
docker ps

# install docker-compose
sudo curl -L "https://github.com/docker/compose/releases/download/1.25.4/docker-compose-$(uname -s)-$(uname -m