StarRocks导入报错close index channel failed解决方案

最新推荐文章于 2024-11-28 14:28:38 发布
最新推荐文章于 2024-11-28 14:28:38 发布
阅读量1.4k 收藏 1
点赞数 1
分类专栏： 数据库 大数据 StarRocks 文章标签： 数据仓库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Yuchen914/article/details/122983180
版权

Tablet_versions超限问题解决方案

报错：ype:LOAD_RUN_FAIL; msg:close index channel failed, load_id=fddba07e-ea0e-41c7-9e27-21cdde73319c

原因：
导入频率太快，compaction没能及时合并导致版本数过多，默认版本数1000

应急解决方案：

tablet_max_versions这个条大些可以恢复 ，默认是1000， 但调大会影响查询速率

稳妥处理方案：

1.增大单次导入数据量，降低频率
2.调整compaction策略，加快合并（调整完需要观察内存和io）be.conf cumulative_compaction_num_threads_per_disk = 4
base_compaction_num_threads_per_disk = 2
cumulative_compaction_check_interval_seconds = 2

StarRocks 报错以及解决方案
lg4546的专栏
12-22 4712
1 搭建starRocks 只有一台机器 按照官方网站 提供语句 , 创建 明细模型表 CREATE TABLE IF NOT EXISTS detail ( event_time DATETIME NOT NULL COMMENT "datetime of event", event_type INT NOT NULL COMMENT "type of event", user_id INT COMMENT "id of user" device_code IN...
java.lang.IllegalArgumentException: Illegal character in path at index 40解决方案
weixin_43178406的博客
07-17 8万+
本文主要介绍了java.lang.IllegalArgumentException: Illegal character in path at index 40解决方案，希望能对使用Java的同学们有所帮助。 文章目录 1. 问题描述 2. 问题复现 3. 原因分析 4. 解决方案 4.1 方案一 4.2 方案二 5. 修复后
DataX迁移数据到StarRocks大表报too many version问题记录
凉茶冰
08-06 1242
这里其实有一个实际实施时候的困难点，业务人员对数仓的特性不了解，了解数仓特性的技术人员对业务不了解，然后基于数仓又开发了更上层的数据中台等应用，让业务人员直接使用，这就造成实际实施的时候，很难讲数仓的威力发挥出来，因为业务人员没办法明确知道那些列或者那些字段作为分桶键效果更好。对于分区一般都有一个基本的认知，基于分区键，将数据进行不同分区的数据路由，分桶是SR独有的概念，在分区下面又有分桶，基于分桶再对数据做二次的分布，并提供副本机制。这样每天凌晨迁移数据的时候，都是只迁移增量的数据。
StarRocks导入问题:too many tablet version解决方法
weixin_43993184的博客
02-17 7522
背景： 实时导入过程中经常遇到导入失败报错too many tablet version的情况，此原因是因为StarRocks内部，表级别version数量有1000的限制，通常见于数据写入频次过高，数据合并来不及从而堆积大量的verison。本文主要介绍此种情况下如何恢复导入任务。 现象： 导入失败时检索be日志 grep 'too many tablet versions' /data/xxx/starrocks/be/log/be.WARNING 会发现如下错误 恢复步骤：
[深入解析StarRocks：高性能分析数据库的魅力与挑战]
最新发布
afTFODguAKBF的博客
11-28 349
StarRocks在处理复杂分析任务时展示了其强大的性能和灵活性。然而，要充分发挥其潜力，需要结合特定业务需求进行配置和优化。建议查看官方文档和社区资源以获取更多支持和最佳实践。
StarRocks入门到熟练
docsz的博客
08-28 2903
starrocks 3.1集群
第3.4章：StarRocks数据导入——Routine Load
爱吃辣条的博客
02-20 2038
第3.4章：StarRocks数据导入-Routine Load
StarRocks日常运维之“压缩雪崩”
qq_35200943的博客
01-05 1459
记录一次StarRocks压缩雪崩的调查及解决流程
TypeError: object supporting the buffer APl required解决方案
热门推荐
weixin_43178406的博客
08-10 11万+
 本文主要介绍了TypeError: object supporting the buffer APl required解决方案，希望能对使用Python的同学们有所帮助。 文章目录 1. 问题描述 2. 解决方案
[已解决] 中央仓库jar包上传报错：Event: Failed: Checksum Validation
谙忆-陈浩翔
01-11 2839
[已解决] 中央仓库jar包上传报错：Event: Failed: Checksum Validation 文章目录问题描述解决方案参考资料 问题描述 最近在向Maven中央仓库上传包后，进行close时，出现如下的问题。 Event: Failed: Checksum Validation ypeId checksum-staging failureMessage Requires one-of SHA-1: /wiki/primo/generator/primo-generat
webdriver.close 报错问题 解决方案
知否
01-23 3279
解决方案转载自：  http://blog.csdn.net/aerchi/article/details/43985099 使用appium wd.close()时遇见报错： Method is not implemented .. 在使用webdriver操作时，点击主窗口的链接，会弹出子窗口。此时就会有两个窗口，如主窗口
加载torchvision模型时出现RemoteDisconnected: Remote end closed connection without response的解决方案
weixin_43178406的博客
12-14 5万+
本文主要介绍了加载torchvision模型时出现RemoteDisconnected: Remote end closed connection without response的解决方案，希望能对使用python加载torchvision模型的同学们有所帮助。 文章目录 1. 问题描述 2. 解决方案
海山数据库（He3DB）技术干货：StarRocks Compaction机制解析及性能调优
weixin_42744640的博客
04-08 1256
本文以StarRocks新发布的3.2.1版本为基准，介绍了新架构下生产者-消费者模型的Compaction任务管理框架。针对任务管理框架的核心问题，即如何挑选rowset进行Compaction，介绍了基于大小分层的rowset挑选策略，并分析了Compaction紧迫程度评估指标Score的影响因素，总结了该策略的优点；其次阐述了Compaction的调度执行流程；最后，从两个典型场景角度出发，作了Compaction性能调优的思考。
使用StarRocks遇到的问题汇总 FAQ
Yuchen914的博客
12-01 7675
日常记录 不断更新 导入 insert into 问题: insert的时候报这个错，是什么情况？ sql:ssb-flat_insert.flat insert error. Msg: （1064, ‘index channel has intoleralbe failure’） 问题截图: 解决方式: streaming_load_rpc_max_alive_time_sec=2400 tablet_writer_open_rpc_timeout_sec=120 be/conf/be.conf 配置中
DataX同步数据到StarRocks问题记录
凉茶冰
09-10 4104
DataX同步mysql数据到StarRocks遇到的关于特殊字符等相关问题总结。
Doris BE 配置中文描述
gaofeng的博客
06-11 4222
be配置-有道云链接 摘自社区张家锋老师翻译，感谢锋哥的贡献，我也会不断完善配置说明 BE 配置项 该文档主要介绍 BE 的相关配置项。 BE 的配置文件 be.conf 通常存放在 BE 部署路径的 conf/ 目录下。 而在 0.14 版本中会引入另一个配置文件 be_custom.conf。该配置文件用于记录用户在运行是动态配置并持久化的配置项。 BE 进程启动后，会先读取 be.conf 中的配置项，之后再读取 be_custom.conf 中的配置项。be_custom.conf 中的配置项会覆盖
Channel closed； cannot ack/nack 和 MQ的重复消费/重复发送消息问题（记RabbitMQ使用的几个小坑）
whiteBearClimb的博客
09-28 1万+
首先上改良后的代码（改良前的代码和基本的配置使用在：RabbitMQ的介绍/安装和SpringBoot集成简单使用（MacBook版））： Application.yml： spring: application: name: cloud-purchase-service rabbitmq: host: 127.0.0.1 port: 5672 username: guest password: 123456 Controller： @Autowired
深入解析TCP CLOSE_WAIT状态原因与解决方案
资源摘要信息:"在TCP/IP网络通信中，TCP连接的close_wait状态是一个重要的知识点。TCP协议是互联网中最基础的协议之一，它通过三次握手机制建立连接，并通过四次分手机制结束连接。close_wait状态是连接结束过程中的...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值