StarRocks入门部署

本文介绍了高性能分析型数据仓库StarRocks,包括其系统架构,如前端节点FE负责元数据管理等,后端节点BE负责数据存储和SQL执行;还阐述了数据管理特性,采用列式存储和分区分桶机制。此外,给出了简单部署步骤,含部署前准备和手动部署各节点及集群搭建等。

目录

一、StarRocks整体介绍

1.1、系统架构图:

1.2、FE相关

1.3、BE相关

1.4、数据管理特性

二、简单部署

2.1、部署前准备

2.2、手动部署

 2.2.1、部署Leader FE节点

2.2.2、部署BE节点

2.2.3、关联FE、BE,搭建StarRocks集群

2.2.4、给root设置密码:


一、StarRocks整体介绍

StarRocks 是一款高性能分析型数据仓库。广泛应用于实时数仓、OLAP 报表、数据湖分析等场景。官网:StarRocks @ StarRocks_intro @ StarRocks Docs

1.1、系统架构图:

1.2、FE相关

FE 是 StarRocks 的前端节点,负责管理元数据,管理客户端连接,进行查询规划,查询调度等工作。每个 FE 节点都会在内存保留一份完整的元数据,这样每个 FE 节点都能够提供无差别的服务。

1.2.1、Leader FE

  • Leader 从 Follower 中自动选出,进行选主需要集群中有半数以上的 Follower 节点存活。如果 Leader 节点失败,Follower 会发起新一轮选举。
  • Leader FE 提供元数据读写服务。只有 Leader 节点会对元数据进行操作,Follower 和 Observer 只有读取权限。Follower 和 Observer 元数据写入请求路由到 Leader 节点,Leader 更新完数据后,会同步给 Follower 和 Observer。必须有半数以上的 Follower 节点同步成功才算作元数据写入成功

1.2.2、Follower

  • 只有元数据读取权限,无写入权限。通过回放 Leader 的元数据日志来异步同步数据。
  • 参与 Leader 选举,必须有半数以上的 Follower 节点存活才能进行选主。

1.2.3、Observer

  • 主要用于扩展集群的查询并发能力,可选部署。
  • 不参与选主,不会增加集群的选主压力。
  • 通过回放 Leader 的元数据日志来异步同步数据。

1.3、BE相关

BE 是 StarRocks 的后端节点,负责数据存储、SQL执行等工作。

  • 数据存储方面,StarRocks 的 BE 节点都是完全对等的,FE 按照一定策略将数据

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值