clickhouse unexpected packet data received from client,stack strace

最新推荐文章于 2024-07-05 14:20:22 发布
最新推荐文章于 2024-07-05 14:20:22 发布
阅读量735 收藏
点赞数
分类专栏： spark 文章标签： clickhouse 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_43701760/article/details/128968982
版权

clickhouse写数据报错：
clickhouse unexpected packet data received from client,stack strace
根据网上文章说的解决办法，讲写入数据repartition(1),但是依然报错

查看原数据发现建表时使用的分区栏位在表中只对应一条数据，那么使用这样的栏位作为分区的依据，在写入数据时，会生成相同数量的分区，导致系统崩溃【崩溃是猜的】

解决方法

然后重新建表，使用维度较宽的栏位
一次性写入10万条数据，十几秒完成

刚接触clickhouse，在没有任何调优操作的情况下进行的测试，
如有描述错误的地方，请指正

晴々明雅
关注
专栏目录
clickhouse-driver:用于ClickHouse列式数据库的Golang驱动程序
05-17
Clickhouse驱动程序 用于Golang驱动程序-面向列的数据库，以稳定和可持续的方式管理大量数据。 目前，它为全球第二大Web分析平台Yandex.Metrica提供支持，该平台拥有超过13万亿个数据库记录和每天超过200亿个事件，可直接从非聚合数据中即时生成自定义报告。 关于 为现有库开发额外功能的几个月让我感到失望。 因此，我决定创建Clickhouse驱动程序，该驱动程序不仅应包括周末项目的内容，还应包括真正性能产品的所有内容。 特征 集群支持 支持身份验证连接 ssl加密连接的自定义传输 进入惯用接口 平衡集群中的连接 例子 建立连接 // simple connection conn := clickhouse . NewConn ( "localhost:8123" , clickhouse . NewHttpTransport ()) // connection
ClickHouse常见问题及其解决方案
热门推荐
fighting
05-29 4万+
1 概述   在对ClickHouse进行分布表+复制表+zookeeper保证高可用的情况下进行性能测试时遇到如下坑，进行整理 2 分布表join问题Unknown identifier: LO_CUSTKEY, context:… 1.1 问题描述   SQL如下： SELECT count(1) FROM performance.line_all AS c LEFT JOIN performance.customer_all AS l ON l.C_CUSTKEY = c.LO_CUSTKEY  
python连接clickhouse，UnexpectedPacketFromServerError: Code: 102
最新发布
猛犸象
07-05 568
python连接clickhouse，UnexpectedPacketFromServerError: Code: 102
记一次clickhouse踩坑，code: 101与code: 100
FZCLSG的博客
10-29 2926
前端和测试反馈某个功能查询时间特别长，还偶尔会有查询失败返回500的情况，查询时间长比较正常，后续也在优化这个查询流程，但查询失败需要找找原因，于是找运维拿了日志看看具体报错的情况。 错误码是101和100 ...
com.github.clickhousepower.jdbc.ClickhouseSQLException:DB:Exception: Unexpected packet Data received
qq_43701760的博客
03-28 718
clickhouse 写入数据出现stack track
ClickHouse 问题总结（持续更新）
qq_40694671的博客
01-16 3570
Too many parts(XXX). Merges are processing significantly slower than inserts. Memory limit (for query) exceeded:would use 10.01GiB (attempt to allocate chunk of 386,753,325 bytes), maximum: 8.00 GiBCan’t get data for node /clickhouse/tables/XXX。
ClickHouse报错解决：Code: 194. DB::Exception: Received from localhost:9000, 127.0.0.1. DB::Exception: Pas
个人博客
07-06 2万+
下午在使用ClickHouse的时候遇到了报错： root@ubuntu:/home/zhang# clickhouse-client ClickHouse client version 19.9.3.31 (official build). Connecting to localhost:9000 as user default. Code: 194. DB::Exception: Receiv...
python操作clickhouse，报错Code: 102. Unexpected packet from server None
qwe123_166的博客
10-20 6902
今天用python操作clickhouse时，报错 提示8123端口不可用，但是8123端口在dbeaver上用的很正常，连接的配置项也都是一样的。 最后终于弄清楚了 是python里的clickhouse_driver用的tcp端口9000。dbeaver用的jdbc连接走的http所以可以用8123端口。 把python中连接的端口换成9000。Code: 102.问题完美解决。 ...
clickhouse-client连接报错
weixin_40278610的博客
11-06 3541
的配置文件＜listen_host＞::＜/listen_host＞后，2、再去连接clickhouse客户端，连接失败。说明本机没有开放ipv6，只能对ipv4生效。4、修改listen_host的值。
UNEXPECTED INCONSISTENCY: RUN fsck MANUALLY
09-14
"UNEXPECTED INCONSISTENCY: RUN fsck MANUALLY" 是一个常见的错误消息，它出现在Linux操作系统中，尤其是在系统突然关机或非正常关闭后。这个错误表明文件系统（File System）存在一致性问题，需要进行检查和修复。...
vc提示unexpected end of file found的原因分析
09-03
在编程过程中，尤其是在使用Visual C++ (vc) 进行开发时，可能会遇到一个常见的编译错误：“unexpected end of file found”。这个错误通常意味着编译器在预期找到文件结束标记时，没有找到相应的配对符号，导致解析...
Vue父组件向子组件传值以及data和props的区别详解
01-19
data:{ msg:'123 -我是父组件中的数据' }, 2.引用子组件 父组件可以在引用子组件的时候，通过属性绑定的形式，把需要传递给子组件的数据，以属性绑定的形式，传递到子组件内部，供子组件使用。 把父组件传递过来...
Bitvise SSH Client 7.45 (window安装包)
11-19
Bitvise SSH Client 7.45，此安装包... Error class: Flow, code: ComponentException, message: Exception in component: Windows CNG (x86) with additions: AsymKey: CngAgree: unexpected secretData->cbStruct.）
[已解决] urllib.error.HTTPError: HTTP Error 400: Invalid header received from client的解决方案
honeyShi's Blog
07-15 1万+
来自Udacity的冒犯语检测的实验 右边这段代码用python2.7可以运行，python3就会报错 如何解决？ 如下： 原代码： def check_profanity(text_to_check): connection = ur.urlopen( "http://www.wdylike.appspot.com/?q=" + text_to_check) o...
clickhouse系列之二:clickhouse遇到的报错问题及解决方法
a904364908的博客
08-20 3万+
问题一,启动报错 启动参数:sudo clickhouse-server --config-file=/etc/clickhouse-server/config.xml 2020.08.20 18:49:28.189321 [ 29338 ] {} <Error> Application: DB::Exception: Effective user of the process (root) does not match the owner of the data (clickhouse). R
SQL SERVER数据库复制中出现logread代理失败的错误日志获取及分析办法
PDZSPDZS的专栏
11-08 993
经常在复制的过程中遇到快照不成功或者读日志不成功的情况 。如下图所示：为一种典型的logread失败的情况 ，但遇到这种情况光靠图形界面和作业的信息看不出什么细节来，一般可跟踪问题的原因可以通过以下对LOGREAD作业的修改来获取详细的信息。然后再根据这些细节信息来处理问题。 找到该作业，按如下图所示修改作业中的readlog步骤。 然后再修改该作业的高级属性，将重试将数改为0，以
服务器发送了一个意外的数据包。received:3,expected:20
Looking的博客
03-04 9615
一般出现这个问题是由于新版的 sshd 可能与 XShell 存在兼容性问题（最近刚好 XShell 连接机器的时候出现了这个问题，根据自己的解决方法，稍微写一下）。 解决方法：在 XShell 连不上的那个机子上的 /etc/ssh/sshd_config 最后增加以下一行： KexAlgorithms curve25519-sha256@libssh.org,ecdh-sha2-nistp256,ecdh-sha2-nistp384,ecdh-sha2-nistp521,diffie-hell..
数据库报错ORA
corpse2010的专栏
05-12 6393
ORA-12500 to ORA-12699 ORA-12500: TNS:listener failed to start a dedicated server process Cause: The process of starting up a dedicated server process failed. The executable could not be found
clickhouse TOO_MANY_UNEXPECTED_DATA_PARTS
09-05
clickhouse TOO_MANY_UNEXPECTED_DATA_PARTS错误是指在ClickHouse数据库中出现了过多的意外数据分区。这种错误通常发生在进行数据插入或合并操作时，由于某些原因导致系统无法正确处理数据分区。解决这个问题的方法主要包括以下几步： 1. 首先，需要查看ClickHouse运行日志，以确定具体的错误信息和堆栈跟踪。错误信息可能会提供一些关于出现这个错误的原因的线索。 2. 检查系统的硬盘空间和可用内存情况。如果硬盘空间不足或可用内存不够，可能会导致数据分区失败。确保系统有足够的资源来处理数据分区操作。 3. 如果出现TOO_MANY_UNEXPECTED_DATA_PARTS错误，可以尝试使用ClickHouse提供的修复工具来解决问题。可以使用`CLEANUP`语句来清理无效的数据分区，或使用`OPTIMIZE`语句来优化表的物理结构。 4. 如果以上方法无法解决问题，可以考虑重新创建表并重新加载数据。备份数据后，可以尝试删除原来的表，并使用相同的表结构重新创建表。然后将备份的数据文件复制到新表的数据目录中。 5. 确保ClickHouse的配置文件中设置了合适的参数，如max_memory_usage_for_all_queries和max_partitions_per_insert等参数。这些参数可以控制ClickHouse的内存使用和数据分区情况，避免出现过多的意外数据分区。 综上所述，解决clickhouse TOO_MANY_UNEXPECTED_DATA_PARTS错误的方法包括查看运行日志、检查系统资源、使用修复工具、重新创建表并重新加载数据，以及配置合适的参数来控制内存使用和数据分区。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *2* *3* [ClickHouse 问题总结（持续更新）](https://blog.csdn.net/qq_40694671/article/details/122516999)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 100%"] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值