目录
一、StarRocks整体介绍
StarRocks 是一款高性能分析型数据仓库。广泛应用于实时数仓、OLAP 报表、数据湖分析等场景。官网:StarRocks @ StarRocks_intro @ StarRocks Docs
1.1、系统架构图:

1.2、FE相关
FE 是 StarRocks 的前端节点,负责管理元数据,管理客户端连接,进行查询规划,查询调度等工作。每个 FE 节点都会在内存保留一份完整的元数据,这样每个 FE 节点都能够提供无差别的服务。
1.2.1、Leader FE
- Leader 从 Follower 中自动选出,进行选主需要集群中有半数以上的 Follower 节点存活。如果 Leader 节点失败,Follower 会发起新一轮选举。
- Leader FE 提供元数据读写服务。只有 Leader 节点会对元数据进行写操作,Follower 和 Observer 只有读取权限。Follower 和 Observer 将元数据写入请求路由到 Leader 节点,Leader 更新完数据后,会同步给 Follower 和 Observer。必须有半数以上的 Follower 节点同步成功才算作元数据写入成功。
1.2.2、Follower
- 只有元数据读取权限,无写入权限。通过回放 Leader 的元数据日志来异步同步数据。
- 参与 Leader 选举,必须有半数以上的 Follower 节点存活才能进行选主。
1.2.3、Observer
- 主要用于扩展集群的查询并发能力,可选部署。
- 不参与选主,不会增加集群的选主压力。
- 通过回放 Leader 的元数据日志来异步同步数据。
1.3、BE相关
BE 是 StarRocks 的后端节点,负责数据存储、SQL执行等工作。
-
数据存储方面,StarRocks 的 BE 节点都是完全对等的,FE 按照一定策略将数据

本文介绍了高性能分析型数据仓库StarRocks,包括其系统架构,如前端节点FE负责元数据管理等,后端节点BE负责数据存储和SQL执行;还阐述了数据管理特性,采用列式存储和分区分桶机制。此外,给出了简单部署步骤,含部署前准备和手动部署各节点及集群搭建等。

1998

被折叠的 条评论
为什么被折叠?



