Doris导入数据错误success replica num is 1 ＜ quorum replica num 2 while error backends

已于 2022-04-16 13:43:31 修改
阅读量3.7k 收藏 2
点赞数 1
分类专栏： Doris 文章标签： 大数据 big data
于 2022-04-16 11:42:57 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/NullNullAgo/article/details/124190343
版权

1. Doris导入几十万条数据时，部分数据成功，查看FE日志报以下错误

success replica num is 1 < quorum replica num 2 while error backends

2. 查看官方文档

min_replication_num_per_tablet默认值是1，结果集较大时，可能需要增大该值

3. 此时这样登录FE服务器 修改fe.conf 文件 添加 min_replication_num_per_tablet = 3

设置多少取决于报错的时候是多少，我这里报错是2，所以我设置3，问题就得到解决

程序员在线炒粉
关注
  • 1
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 3
    评论
专栏目录
doris 1064 - errCode = 2, detailMessage = Exceeded the maximum number of child expressions (10000).
weixin_43581113的博客
01-24 4302
doris 1064 - errCode = 2, detailMessage = Exceeded the maximum number of child expressions (10000). 因为 where in (list) list太长 可以用多个or拼接
doris的tablet副本修复相关情况总结
任培培的博客
05-28 6746
在使用doris的时候，由于一些极端情况的出现或者doris本身bug的原因，会出现一些tablet损害的情况，导致数据的插入和查询受到影响，下面总结一下doris副本出现损坏时进行修复的一些情况
redis集群搭建踩坑指南
Arrogant_95的博客
12-25 584
最近在网上一台服务器上搭建了一个3主3从的redis集群，在这记录一下搭建过程中的踩坑过程。 先贴出参考的博客： https://blog.csdn.net/pistolove/article/details/58298755 https://www.cnblogs.com/jasonZh/p/9547079.html 坑1：版本不够，想要搭建redis集群需要redis版本足够，然后ruby版本...
深入Doris实时数仓：导入本地数据
热门推荐
码到三十五
04-24 2万+
Doris 的每一个导入作业，不论是使用 Broker Load 进行批量导入，还是使用 INSERT 语句进行单条导入，都是一个完整的事务操作。导入事务可以保证一批次内的数据原子生效，不会出现部分数据写入的情况。 同时，一个导入作业都会有一个 Label。这个 Label 是在一个数据库（Database）下唯一的，用于唯一标识一个导入作业。Label 可以由用户指定，部分导入功能也会由系统自动生成。
4.Doris数据导入导出
woshiwjma956的博客
01-25 1342
该功能可以将用户指定的表或分区的数据，以指定的文件格式，通过 Broker 进程或 S3协议/HDFS协议 导出到远端存储上，如 对象存储 / HDFS。Doris 的每一个导入作业，不论是使用 Broker Load 进行批量导入，还是使用 INSERT 语句进行单条导入，都是一个完整的事务操作。Doris支持创建外部表，创建完成之后可以通过SELECT语句直接查询外部表的数据，也可以通过INSERT INTO SELECT 的方式导入外部表的数据。用户可以修改已经创建的作业的部分属性。
doris broker方式从hdfs导入数据到doris
格格颜心
11-30 1927
doris从hdfs导入数据的方式， 采用broker方式，需要kerberos认证的场景 亲测可用 欢迎留言提问
Doris hdfs数据导入doris动态分区表
@羲凡—只为更好的活着
01-07 3608
@羲凡——只为了更好的活着 Doris hdfs数据导入doris动态分区表 本文重点 1.动态分区表创建 2.读取路径作为分区参数 3.预聚合增加count列——set (cnt = 1) 4.broker load 的 hdfs HA 配置 前期准备 1.安装好doris——Doris 编译安装(完整版) 2.doris基本知识扫盲 Doris的数据模型主要分为3类:Aggregate、Duplicate、Unique; Doris支持单分区和复合分区两种建表方式; 单分区指的是只指定分桶; 复合分区指
Doris系列12-数据导入之Broker Load
只是甲的博客
01-10 1108
文章目录一. Broker Load 概述二. 基本操作2.1 创建导入2.1.1 Label2.1.2 数据描述类参数2.1.3 导入作业参数2.1.4 strict mode 与 source data 的导入关系2.2 查看导入2.3 取消导入三. 相关系统配置3.1 FE 配置四. 案例4.1 导入Hive orc格式表4.2 导入Hive text格式表参考: 一. Broker Load 概述 Broker load 是一个异步的导入方式，支持的数据源取决于 Broker 进程支持的数据源。 用
doris数据分析教程
04-08
│ 02-Doris的简介.mp4 │ 03-Doris的核心特性.mp4 │ 04-Doris的发展历程.mp4 │ 05-OLTP和OLAP的区别.mp4 │ 06-OLAP存储引擎的分类.mp4 │ 07-Doris的应用场景和使用企业.mp4! │ 08-Doris的架构-极简架构.mp4 │...
Apache Doris数据分析综合案例实战
05-07
Apache Doris数据分析综合案例实战
基于Flink+Doris构建高性能高扩展的全端实时数据仓库视频教程
06-21
基于Flink+Doris构建高性能高扩展的全端实时数据仓库视频教程 课程具体数仓报表应用指标包括：实时大屏分析、流量分析、订单分析、商品分析、商家分析等，数据涵盖全端（PC、移动、小程序）应用，与互联网企业大数据...
基于Flink+Doris构建电商实时数据分析平台（PC、移动、小程序）
05-19
本课程基于真实热门的互联网电商业务场景为案例讲解，具体分析指标包含：AB版本分析，下砖分析，营销分析，订单分析，终端分析等，能承载海量数据的实时分析，数据分析涵盖全端（PC、移动、小程序）应用。
基于Apache Doris的数据中台建设思路规划
03-06
基于Apache Doris的数据中台建设思路规划
apache大数据各组件部署搭建（超级详细）
weixin_43977307的博客
05-30 1638
准备3台服务器用于集群部署，系统建议CentOS7+，2核8G内存172.19.195.228 hadoop101 172.19.195.229 hadoop102 172.19.195.230 hadoop103 2. 安装包下载准备 数仓部署组件安装包： 链接：https://pan.baidu.com/s/1Wjx6TNkedMTmmnuWREW-OQ 提取码：bpk0已经把相关组件均上传至网盘，也可自行去各自官方地址去下载收集；3台机器的/etc/hosts主机名解析配置： 4. 配置服务器之间免密
深入解析CRM客户关系系统：技术架构与功能实现的融合创新
最新发布
m0_65038841的博客
05-31 410
通过以上技术架构和功能实现，CRM客户关系管理系统能够帮助企业实现客户信息的集中管理、销售过程的自动化、营销活动的精准投放以及客户服务的提升，从而提高企业的市场竞争力和客户满意度。容器化与微服务：采用Docker和Kubernetes等技术，实现系统的容器化和微服务架构，提高系统可扩展性和部署灵活性。营销活动管理：创建、发布和管理各种营销活动，如优惠券、促销活动和线上线下活动等，支持活动效果分析。客户信息管理：实现对客户基本信息的录入、查询、修改和删除功能，支持多维度客户细分和标签管理。
ElasticSearch(es)使用游标读取全部数据
weixin_45947759的博客
05-31 178
【代码】ElasticSearch(es)使用游标读取全部数据。
Apache Impala 4.4.0正式发布了！
Stiga Huang的专栏
05-28 925
Apache Impala 4.4.0正式发布了！
doris如何做数据导入
06-03
DorisDB提供了多种数据导入方式，包括： 1. 使用DorisDB自带的数据导入工具：DorisDB提供了命令行工具doris-loader，可以将文本文件、CSV文件、JSON文件等格式的数据导入到DorisDB中。 2. 使用DorisDB的RESTful API接口：DorisDB提供了RESTful API接口，可以通过编写脚本或调用API来进行数据的导入。 3. 使用第三方ETL工具：DorisDB支持和第三方ETL工具（如Kettle、DataX等）进行集成，可以通过这些工具将数据导入到DorisDB中。 无论采用哪种方式，数据导入前需要先创建好数据表，并根据实际情况设置好数据表的字段类型、分区方式等参数，以确保数据导入的正确性和高效性。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值