大数据之LibrA数据库系统介绍

最新推荐文章于 2023-10-27 15:15:00 发布
原创 最新推荐文章于 2023-10-27 15:15:00 发布 · 1k 阅读 · 1
标签
#大数据 #数据库
LibrA是一个开源分布式数据库，基于Postgres-XC，支持标准SQL和高并发数据分析。它采用Share-nothing架构，提供数据并行处理、HA、ACID事务和安全性。查询与存储流程详细描述了其工作原理和扩展能力。
简介

LibrA是一个基于开源数据库Postgres-XC开发的分布式并行关系型数据库系统。

LibrA提供了以下功能：

  • 标准SQL支持

    支持标准的SQL92/SQL2003规范，支持GBK和UTF-8字符集，支持SQL标准函数与OLAP分析函数，支持存储过程。

  • 数据库存储管理功能

    支持表空间，支持在线扩容功能。

  • 提供组件管理和数据节点HA（High Availability）

    支持数据库事务ACID特性（即原子性Atomicity、一致性Consistency、隔离性Isolation和持久性Durability），支持单节点故障恢复，支持负载均衡等。

最低0.47元/天 解锁文章
library数据库
12-10
SQL Sever2000教学中的library数据库
Libra客户端使用
01-07
文章目录1. libra net1.1. test net1.2. local net2. CLI cmd2.1. client help2.2. client example2.3. CLI cmd3. account3.1. account help3.2. account create3.3. account list3.4. account write3.5. account recover3.6. account mint4. query4.1. query help4.2. query balance4.3. query sequence4.4. query account_sta
MPP架构数据库优化总结——华为LibrA(MPPDB、GuassDB)
热门推荐
蒋含竹的博客
09-21 2万+
大数据在关系型数据处理这块，为了能够快速的查询、写入海量的数据，通常会采用MPP (Massively Parallel Processing)架构的分布式数据库。华为LibrA(MPPDB、GuassDB)与GreenPlum正是这样一款产品。通常实际生产环境中，每张表会存入海量的数据（例如我这里会有4TB、8TB、14TB等大小的表），为了解决这些存有海量数据的表的性能问题，需要给出很多优化方案，在这里我总结出工作中常用的一些优化手段。
大数据之LibrA数据库常见术语（五）
weixin_42874480的博客
10-25 372
数据库复制服务启动的时候主机启动的一个线程。LibrA定期将已提交的事务数据和未提交的事务数据存到磁盘，这些数据用来和Redo日志一起在数据库重启和崩溃时恢复数据库。高可用性（HighAvailability），通过尽量缩短因日常维护操作（计划）和突发的系统崩溃（非计划）所导致的停机时间，以提高系统和应用的可用性。基于时间点恢复是LibrA备份恢复的一个特性，是指在备份数据和WAL日志正常的情况下，数据可以恢复到指定时间点。系统自动识别软件和数据流上的错误并自动修正错误的能力，提升系统的稳定性和可靠性。
大数据之LibrA数据库常见术语（七）
weixin_42874480的博客
10-26 461
Online Analytical Processing，联机分析处理，是数据仓库系统最主要的应用，专门设计用于支持复杂的分析操作，侧重对决策人员和高层管理人员的决策支持，可以根据分析人员的要求快速、灵活地进行大数据量的复杂查询处理，并且以一种直观而易懂的形式将查询结果提供给决策人员，以便准确掌握企业（公司）的经营状况，了解对象的需求，制定正确的方案。Namenode是hadoop系统中的一个中心服务器，负责管理文件系统的名字空间(namespace)以及客户端对文件的访问。计算机记录自身活动的记录。
Huawei Libra数据库常用语句
08-20 3363
1、空间查询 (1)数据库占用空间查询 select pg_size_pretty（pg_database_size('db_data')); (2)模式占用空间查询 select pg_size_pretty(sum(pg_relation_size(relid))) from pg_stat_user_tables where sc...
大数据之LibrA数据库常见术语（六）
weixin_42874480的博客
10-25 425
LLVM是构架编译器（compiler）的框架系统，以C++编写而成，用于优化以任意程序语言编写的程序的编译时间（compile-time）、链接时间（link-time）、运行时间（run-time）以及空闲时间（idle-time），对开发者保持开放，并兼容已有脚本。数据库并发控制协议的一种，它的基本算法是一个元组可以有多个版本，不同的查询可以工作在不同的版本上。管理表内空闲空间的机制，通过记录每个表内空闲空间信息，并建立易于查找的数据结构，可以加速对空闲空间进行的操作（例如INSERT）。
大数据之LibrA数据库系统上下电管理
weixin_42874480的博客
10-20 393
系统管理员进行例行维护停机后需要重新启动服务器与FusionInsight LibrA集群。如果安装双机Manager，上电后HA将确定主备管理节点。系统启动完成后需要启动依赖集群运行的上层业务。
大数据之LibrA数据库系统部署方案
weixin_42874480的博客
10-19 561
FusionInsight LibrA集群的组网方案中包含如下节点，如所示。
大数据之LibrA数据库系统概览
weixin_42874480的博客
10-20 838
实时监控”页面如所示，用户可单击刷新按钮手动刷新当前页面，也可在点刷新按钮前选择自动刷新时长，刷新时长包括：每30秒刷新一次、每60秒刷新一次、停止刷新。实时监控数据（监控时间轴产生的新曲线，一个刷新周期后可见）最多保留2个小时，可以查看最近1小时实时监控数据。用户可单击设置按钮自定义显示项，最多可同时显示9个窗口，监控列表如所示，其中“服务概览”始终显示。
大数据之LibrA数据库系统服务部署原则及运行环境要求
weixin_42874480的博客
10-19 511
FusionInsight LibrA集群由多种服务按照一定的逻辑架构组合而成，每个服务包含一个或多个角色，每个角色可以部署一个或多个实例。安装集群时，选择不同的服务角色部署到各服务器中。通常在《配置规划工具》中填写各节点的服务角色信息，并生成相应的配置文件，用于安装集群时使用。各服务角色的内存要求和部署原则如所示。
大数据之LibrA数据库常见术语（一）
weixin_42874480的博客
10-23 414
然而，一个8位组却构成了一个字节，可用于表示如一个英文字母，十进制数字，或其它字符等多种类型的信息。表中的每一行包含3个字段的内容，姓名字段包含姓名，城市字段包含城市，国家字段包含国家。也就是说，环内的任何一个节点的主，或者备，或从备，依然在环内。FusionInsight LibrA双机方案中的一个节点，用于作为主机的备份，在主机异常时，备机会切换到主机状态，以确保能正常提供数据服务。并发控制是LibrA提供的一种多线程管理机制，用来保证多线程环境下在数据库中执行的操作是安全的和一致的。
大数据之LibrA数据库常见术语（九）
weixin_42874480的博客
10-27 389
因此，不可能直接存储非常大的字段值。数据库复制过程中，主机接受到备机的连接请求后创建的一个线程的名称。数据库使用统计信息估算查询代价，以查找代价最小的查询计划，统计信息一般是数据库自动收集的，包括表级信息（元组数、页面数等）和列级信息（列的值域分布直方图）。实现事务日志的标准方法，是指对数据文件（表和索引的载体）持久化修改之前必须先持久化相应的日志。数据库启动时创建的一个写Redo日志的线程，用于将内存中的日志写入到持久性设备（如：磁盘）。数据库定期启动的清理垃圾元组的线程，根据配置参数可以同时启动多个。
华为FusionInsight LibrA融合数据仓库
openeis的专栏
06-20 9611
华为LibrA是一款企业级数据仓库解决方案，可汇聚和实时分析各行业PB级海量大数据，具备高性能、高可靠、高扩展、高安全以及兼容标准ANSI SQL 99/2003和PostgreSQL生态等特性。关键信息时PostgreSQL。有的国产MPP数据库是MySQL风格的。作为替代Oracle database数据库，迁移到PostgreSQL还是比MySQL要容易得多。...
Libra(技术解读) （2）
xiaoxifei的专栏
06-30 1237
Libra区块链是一个分散的、可编程的数据库，旨在支持一种低波动性的加密货币，该加密货币将能够作为全球数十亿人的有效交换媒介。我们提出了一项关于Libra协议的建议，该协议实施了Libra区块链，旨在创建一个金融基础设施，以促进创新、降低进入壁垒和改善金融服务的获取。为了验证liba协议的设计，我们构建了一个开源原型实现——liba核心——以期通过全球协作推动这个新生态系统的发展。 liba协议允...
大数据之LibrA数据库常见术语（二）
weixin_42874480的博客
10-23 577
实际上，其它关键程序的状态经常在同一时间进行转储，例如处理器寄存器，包括程序指标和栈指针、内存管理信息、其它处理器和操作系统标记及信息。一个查询的执行可以分解为一个或多个查询操作符，是构成一个查询执行的最基本单位。常见的查询操作符包括表扫描（Scan），表关联（Join），表聚集（Aggregation）等。存储过程（StoredProcedure）是在大型数据库系统中，一组为了完成特定功能的SQL语句集，经编译后存储在数据库中，用户通过指定存储过程的名称并设置参数（如果该存储过程带有参数）来执行它。
大数据之LibrA数据库常见术语（十）
weixin_42874480的博客
10-27 559
减少数据文件大小的方法被普遍称为数据压缩，尽管其正式名称为源编码（数据源的编码，然后将其存储或传输）。整个事务中的所有操作，要么全部完成，要么全部不完成，不可能停滞在中间某个环节。FusionInsight LibrA双机方案中的一种数据同步机制，是指把主机中数据增量同步给备机，即只同步主备间有差异的数据。转储文件是一种特定类型的trace文件。转储文件为响应事件过程中一次性输出的诊断数据，trace文件指诊断数据的连续输出。存储数据库元信息的表，元信息包括数据库中的用户表、索引、列、函数和数据类型等。
大数据之LibrA数据库常见术语（三）
weixin_42874480的博客
10-24 392
Extension Connector是LibrA提供的功能模块，使用它可以将SQL语句发送到集群外部的Oracle数据库、Spark和其他LibrA集群，并在当前库中返回执行结果，实现跨集群处理数据。Extract-Transform-Load，描述将数据从来源端经过抽取（extract）、转换（transform）、加载（load）至目的端的过程。数据库中，一段指包含一个或多个区域的数据库中的一部分。DBLINK是定义一个数据库到另一个数据库路径的对象，通过它可以查询远程数据库对象。
关于Facebook的Libra（目前是联盟链，以后会向公链进行过度）
lucyLee的博客
07-26 1522
Libra白皮书 Libra的使命： 建立一套简单的、无国界的货币和为数十亿人服务的金融基础设施。 为什么选择使用Blockchain构建该金融基础设施？采用Blockchain还存在哪些问题？ 区块链和加密货币具有许多独特的属性，因而具备解决金融服务可用性和信誉问题的潜力。 这些属性包括： 分布式管理，确保网络不受单一实体控制；开放访问，允许任何能连接互联网的人参与其中；以及安全加密...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

红烧小肥杨

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值