【Doris Weekly】2020.12.21～2021.01.10

 

观众朋友们：

 

 

早上好！

 

 

今天是2021年01月12日星期二，农历腊月初二。 2021年的第一篇 【Doris一周要闻】， 比 以往时候来的更晚一些😛

 

本次 为您带来的是2020年12月21日～2021年01月10日的三周总结。

 

 

 

 

01 统计数据

共有 20 位作者提交了 41 个Commit。感谢以下作者的贡献：

 

HuangWei, xinghuayu007, Zhengguo Yang, Skysheepwang, HappenLee, 曹建华, 令狐少侠, BlueChild, weizuo93, wangbo, mengqinghuan, lihuigang, kangkaisen, gengjun-git, caiconghui, Yingchun Lai, Mingyu Chen, Lijia Liu, Dam1029, 924060929

 

最近 3 周，共修改新增代码行 5784 ，删除代码行 1383。

 

 

 

 

 

 

 

 

▼

 

02 主要进展

2.1   新增功能

• https://github.com/apache/incubator-doris/pull/5010

  支持一种新的基于分区分桶数量的数据均衡逻辑

• https://github.com/apache/incubator-doris/pull/5098

  支持 bitmap_xor 函数

 

2.2   Bug修复 

• https://github.com/apache/incubator-doris/pull/5093

  修复在某些情况下，Routine Load 消费kafka数据时，可能会导致数据丢失的问题 

• https://github.com/apache/incubator-doris/pull/5115

  修复desc语句查看所有物化视图，可能返回 Malformed packet 的问题

• https://github.com/apache/incubator-doris/pull/5113

  修复BE启动加载数据目录时，可能导致BE宕机的问题

• https://github.com/apache/incubator-doris/pull/5160

修复非Master FE重复发送非query请求到Master FE的问题

• https://github.com/apache/incubator-doris/pull/5065

  修复partition cache命中逻辑错误的问题 

• https://github.com/apache/incubator-doris/pull/5145

  修复对空表执行bucket join 时报错的问题

• https://github.com/apache/incubator-doris/pull/5172

  修复percentile_approx函数返回结果错误的问题

• https://github.com/apache/incubator-doris/pull/511

  修复Olap Scanner 线程结束调用顺序的问题

• https://github.com/apache/incubator-doris/pull/5139

  修复对空分区的表创建colocation属性时报错的问题

• https://github.com/apache/incubator-doris/pull/5165

  修复CTE语句中查询物化视图时报错的问题

• https://github.com/apache/incubator-doris/pull/5189

  修复min max 函数对string 类型的列的null值处理不正确的问题

• https://github.com/apache/incubator-doris/pull/5202

  将Spark-Doris-Connector 中字符串编码修改为 utf8

 

2.3   功能改进

• https://github.com/apache/incubator-doris/pull/5114

  优化 Json 数据的导入性能

• https://github.com/apache/incubator-doris/pull/5152

       优化一些compaction的rowset选择逻辑，使得选择策略更加准确

• https://github.com/apache/incubator-doris/pull/5131

  优化BE单测的执行时间

• https://github.com/apache/incubator-doris/pull/5140

  优化导入语句中声明列的映射和转换关系的逻辑，使得使用上更加明晰

• https://github.com/apache/incubator-doris/pull/5104

  优化colocation join的执行逻辑，使得查询计划更加均匀的在多个BE节点上执行

• https://github.com/apache/incubator-doris/pull/5092

  优化谓词下推逻辑，支持将 is null 和 is not null 下推到存储引擎

• https://github.com/apache/incubator-doris/pull/51​​​​​​​48

  BE端新增直方图监控指标类

• https://github.com/apache/incubator-doris/pull/5008

  优化BE端Page Cache，将Page分为data cache 和 index cache

• https://github.com/apache/incubator-doris/pull/5133

  优化bucket join 中BE节点选择逻辑

• https://github.com/apache/incubator-doris/pull/5112

  FE端增加更多JVM相关的监控项

• https://github.com/apache/incubator-doris/pull/5170

  增加一个会话变量用于控制insert 操作中，事务生效的超时时间

 

 

 

观众朋友们，本期的Doris一周要闻节目就播送完了。

感谢您的收看，我们下周再见！

 

 

 

【往期回顾】

【Doris Weekly】2020.12.14～2020.12.20

【Doris Weekly】2020.12.07～2020.12.13

【Doris Weekly】2020.11.30～2020.12.06

 

 

欢迎扫码关注：

Apache Doris(incubating)官方公众号

 

相关链接：

Apache Doris官方网站：

http://doris.incubator.apache.org

Apache Doris Github：

https://github.com/apache/incubator-doris

Apache Doris 开发者邮件组：

dev@doris.apache.org 

 

 

 

 

本文分享自微信公众号 - ApacheDoris（gh_80d448709a68）。
如有侵权，请联系 support@oschina.cn 删除。
本文参与“OSC源创计划”，欢迎正在阅读的你也加入，一起分享。