【Doris Weekly】2020.12.21～2021.01.10

最新推荐文章于 2025-10-15 02:36:38 发布
原创 最新推荐文章于 2025-10-15 02:36:38 发布 · 324 阅读 · 0
本期【Doris Weekly】汇总了2020年12月21日至2021年1月10日的开发进展，包括新功能、Bug修复和性能优化。新增基于分区分桶的数据均衡逻辑、bitmap_xor函数；修复Routine Load数据丢失、查询物化视图等问题；优化Json导入性能、BE单测执行时间等。

 

观众朋友们：

 

 

早上好！

 

 

今天是2021年01月12日星期二，农历腊月初二。 2021年的第一篇 【Doris一周要闻】， 比 以往时候来的更晚一些😛

 

本次 为您带来的是2020年12月21日～2021年01月10日的三周总结。

 

 

 

 

01 统计数据

共有 20 位作者提交了 41 个Commit。感谢以下作者的贡献：

 

HuangWei, xinghuayu007, Zhengguo Yang, Skysheepwang, HappenLee, 曹建华, 令狐少侠, BlueChild, weizuo93, wangbo, mengqinghuan, lihuigang, kangkaisen, gengjun-git, caiconghui, Yingchun Lai, Mingyu Chen, Lijia Liu, Dam1029, 924060929

 

最近 3 周，共修改新增代码行 5784 ，删除代码行 1383。

 

 

 

 

 

▼

 

02 主要进展

2.1   新增功能

  • https://github.com/apache/incubator-doris/pull/5010

    支持一种新的基于分区分桶数量

最低0.47元/天 解锁文章
Doris（20）：Doris的函数—数学函数
u013938578的博客
04-29 2524
使用说明：每次查询的随机序列都会重置，多次调用rand 函数会产生相同的结果。功能：进制转换函数，返回某个整数在特定进制下的的字符串形式。使用说明：如果你需要确保所有返回值都是负值，可以使用-abs(a)函数。功能：返回log以base为底数，以a为指数的对数值。功能：将参数a的符号位取反，如果参数是负值，则返回正值。功能：返回参数的原值，即使参数是负的，仍然返回原值。功能：返回log以10为底数，以a为指数的对数值。功能：返回log以2为底数，以a为指数的对数值。功能：返回0～1之间的随机值。
Doris--常用函数的使用
wudonglianga的专栏
08-18 2645
1. 将数据 分组后将不同的列转化为一行例如 mysql> select tagId,userid,tagTime,tagValue from tags_detailed; +-------+--------+------------+----------+ | tagId | userid | tagTime | tagValue | +-------+--------+------------+----------+ | 100 | 101 | 2021-08-14 | 中国
在Doris数据库中，可以使用 PERCENTILE 函数来查询中位数
2401_83441752的博客
03-25 1389
的 50% 百分位数，即中位数。是你想要计算中位数的列，
Doris--基础--13.1--SQl函数--数学函数
zhou920786312的博客
03-10 1900
功能： 返回参数的绝对值返回类型：double类型使用说明：使用该函数需要确保函数的返回值是整数。
Doris 的聚合模型及使用
goTsHgo的博客
11-26 1673
Doris 的聚合模型主要用于，在这种表中，Doris 会根据用户指定的聚合函数对具有相同主键的数据进行聚合。聚合模型定义了数据的聚合方式，是聚合表存储和计算的核心。
Doris Weekly & FAQ】2021.07.19~2021.08.01
ucanuup_的博客
08-05 4718
观众朋友们：...
【Doris Weekly】2020.10.12～2020.10.18
ucanuup_的博客
10-20 199
观众朋友们： 晚上好！ 今天是2020年10月20日星期二，农历九月初四...
【Doris Weekly】2020.03.08～2021.03.21
ucanuup_的博客
03-22 231
观众朋友们： 下午好！ 今天是2021年03月22日星期一，农历二月初十。又是一年赏樱好时节，春风与Doris向您问好~ 欢迎收看【Doris近日要闻】~本次为您带来的是2021年03月08日～2021年03月21日的双周总结。 01 统计数据 共有18位作者提交了43个Commit。感谢以下作者的贡献： Zhengguo Yang, Mingyu Chen, stdpain, HappenLee,...
Doris数据操作分类详解
sunxunyong的博客
07-11 1626
4、SelectDB提供了免费的可视化的数据迁移工具X2Doris，目前支持了Apache Doris/Hive/Kudu、StarRocks数据库往Doris迁移的工作。FE会根据tablet成功副本数判断导入是否成功，如果成功，该导入的事务被commit，导入数据可见。Label的主要作用是唯一标识一个导入任务，并且能够保证相同的Label仅会被成功导入一次。如果失败，该导入的事务会被rollback，相应的tablet也会被清理。Doris导入任务中，BE会提交写入成功的Tablet ID到FE。
DorisDB系列文档(七) 物化视图
HANG.NIAN
04-25 2179
名词解释 Duplicate 数据模型：DorisDB中的用于存放明细数据的数据模型，建表可指定，数据不会被聚合。 Base 表：DorisDB 中通过 CREATE TABLE 命令创建出来的表。 Materialized Views 表：简称 MVs，物化视图。 使用场景 在实际的业务场景中，通常存在两种场景并存的分析需求：对固定维度的聚合分析 和 对原始明细数据任意维度的分析。 例如，在销售场景中，每条订单数据包含这几个维度信息（item_id, sold_time, customer_id
Apache Doris数组函数：复杂数据类型处理
最新发布
gitblog_00192的博客
10-15 624
在数据分析中，我们经常需要处理诸如用户标签列表、商品属性集合等多值数据。传统关系型数据库对这类数据的处理往往捉襟见肘，而Apache Doris作为高性能的统一分析数据库，提供了强大的数组（Array）数据类型支持和丰富的数组函数，让复杂数据类型处理变得简单高效。本文将详细介绍Apache Doris中常用的数组函数及其应用场景，帮助你轻松应对多值数据处理挑战。 ## 数组函数概述 Apach...
Doris中架构和mysql语法的差异
weixin_46726560的博客
07-05 1705
Doris 的架构只设FE,BE 两种角色，两个进程，不依赖于外部组件，方便部署和运维，FE和BE都可线性扩展。：主要是用来达到元数据的高可用，保证单节点宕机的情况下，元数据能够实时地在线恢复，而不影响整个服务。percentile 函数适用于对结果的精确性要求较高的场景，但可能在处理大型数据时效率较低。函数的优点在于它对大数据集的计算速度较快，适用于对结果的近似度要求不高的场景。这里还有doris的聚合函数的部分差异（按照中位数的函数差异）percentage 是要计算的百分位数，以小数形式表示。
percentile_approx函数
weixin_43581124的博客
04-19 3162
percentile(col, p)：percentile要求输入的字段必须是int类型的 percentile_approx(col, p)：percentile_approx则是数值类似型的都可以 ； percentile_approx(abs(col), array(0.1, 0.2, 0.3, 0.4, 0.5, 0.6, 0.7, 0.8, 0.9)) 输出多位分位数。 ...
Doris ： ROLLUP 与 物化视图
悦上心灵的博客
05-16 2322
Apache Doris 为分析而生
percentile_approx函数用法
wj1298250240的博客
11-12 1万+
hive里面有个percentile函数和percentile_approx函数，其使用方式为percentile(col, p)、percentile_approx(col, p)，p∈(0,1)p∈(0,1) 其中percentile要求输入的字段必须是int类型的，而percentile_approx则是数值类似型的都可以。 其实percentile_approx还有一个参数B：percentile_approx(col, p，B)。参数B控制内存消耗的近似精度，B越大，结果的准确度越高。默认
Doris：数组数据类型array使用介绍
闫玉林的博客
03-15 4498
【代码】Doris：数组数据类型array使用介绍。
hive percentile和percentile_approx 计算千分数
热门推荐
yisun123456的博客
07-26 7万+
1、hive 计算千分位数: percentile函数和percentile_approx函数: 其使用方式为percentile(col, p)、percentile_approx(col, p,B)， .返回col列p分位上的值。B用来控制内存消耗的精度。实际col中distinct的值<B返回的时精确的值。 其中percentile要求输入的字段必须是int类型的，而percent...
Apache Doris 0.15 Release 版本正式发布
锋哥聊DORIS数仓
11-29 541
亲爱的社区小伙伴们，历时数个月精心打磨，我们很高兴地宣布，Apache Doris 于 2021 年 11月 29日迎来了 0.15.0Release 版本的正式发布！有 99位 Contributor为 Apache Doris 提交了近700项优化和修复，在此我们也对所有贡献者表示最真诚的感激！ 在 0.15.0 Release 版本中，我们增加了诸多新功能，对 Apache Doris 的查询性能、易用性、稳定性方面等进行了全面优化：新增资源划分和隔离功能，用户可以通过资源标签的...
percentile_approx计算方法
coolmsn8786的博客
04-22 5152
参考: http://blog.sina.com.cn/s/blog_72e6be570101w731.html percentile(array,p)算法一般是： 将数组array从小到大排序，计算(n-1)*p的整...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

ApacheDoris

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值