木白841
码龄3年
关注
提问 私信
  • 博客:8,984
    8,984
    总访问量
  • 8
    原创
  • 126,592
    排名
  • 104
    粉丝
  • 0
    铁粉
IP属地以运营商信息为准,境内显示到省(区、市),境外显示到国家(地区)
IP 属地:上海市
  • 加入CSDN时间: 2022-05-21
博客简介:

weixin_71195617的博客

查看详细资料
  • 原力等级
    当前等级
    1
    当前总分
    85
    当月
    3
个人成就
  • 获得157次点赞
  • 内容获得0次评论
  • 获得84次收藏
创作历程
  • 8篇
    2024年
成就勋章
创作活动更多

超级创作者激励计划

万元现金补贴,高额收益分成,专属VIP内容创作者流量扶持,等你加入!

去参加
  • 最近
  • 文章
  • 代码仓
  • 资源
  • 问答
  • 帖子
  • 视频
  • 课程
  • 关注/订阅/互动
  • 收藏
搜TA的内容
搜索 取消

Doris——高并发点查实践

选择Prepare模式随机传参,其中[Parameter values]和[Parameter types]需要和SQL中的[?行缓存复用了 Doris 中的 LRU Cache 机制来保障内存的使用。需要注意文件名、即对应 [prepare参数生成] 的csv文件存放路径, 以及csv列对应的字段名称和分隔符的填写。压测过程中,BE的CPU大致使用50%(其中包括Jmeter进程的),内存使用率较低。导出查询结果集(通过dbeaver自身的功能导出csv数据作为prepare参数)。
原创
发布博客 2024.09.12 ·
1861 阅读 ·
37 点赞 ·
0 评论 ·
27 收藏

Doris——冷热数据分层

Doris冷热数据分层核心策略和参数使用
原创
发布博客 2024.09.11 ·
939 阅读 ·
12 点赞 ·
0 评论 ·
11 收藏

Doris——索引的创建和命中

doris索引的使用及注意事项
原创
发布博客 2024.09.10 ·
2039 阅读 ·
36 点赞 ·
0 评论 ·
28 收藏

doris实践——Compaction 策略

time_series compaction策略踩坑实践
原创
发布博客 2024.09.09 ·
1036 阅读 ·
23 点赞 ·
0 评论 ·
11 收藏

doris通过catalog读取maxcomput和同步数据存在数据丢失问题分享

1.doris对null不是很友好,在使用doris的时候需要尽量避免null值2.为什么要使用catalog呢,一是方便,二catalog同步数据比datax效率会高很多,因为datax同步数据的时候需要将数据落盘再load进doris。catalog同步数据直接内存对接就可以了(注意使用catalog同步数据到doris的时候,原始表里面不能有null值,否则也可能存在丢数据的情况)
原创
发布博客 2024.09.06 ·
481 阅读 ·
6 点赞 ·
0 评论 ·
1 收藏

doris异常——be单节点内存异常--release 2.0.8

doris异常——be单节点内存异常问题解决
原创
发布博客 2024.09.06 ·
909 阅读 ·
22 点赞 ·
0 评论 ·
4 收藏

记一次doris任务出错--内存爆满

结合对我们数据和了解和各个任务运行数据量的大小,考虑到是因为大任务并行导致集群资源波动大,峰值过高。所以我们将大任务做强制依赖,错峰出行。比如任务A、B、C之间没有血缘关系,我们强制让任务A依赖于任务B,任务B依赖任务C。doris集群新增调度任务后,任务出错频率很高,报错内容:Process has no memory available, cancel top memory used load。新增任务后内存波动非常大,峰值达到服务器80%的上限,导致任务失败。
原创
发布博客 2024.09.05 ·
754 阅读 ·
5 点赞 ·
0 评论 ·
1 收藏

doris异常——任务运行缓慢,内存异常,io异常,compaction score居高不下

doris使用的时候非必要场景下尽量避免主键模型和聚合模型,特别是高频任务。
原创
发布博客 2024.09.05 ·
939 阅读 ·
16 点赞 ·
0 评论 ·
0 收藏