impala jdbc连接异常 socket is closed by peer

异常现象:

          jdbc报socket is closed by peer

异常原因:

impala的jdbc连接只能保持连接时的底层存储快照,如果使用连接池,那么当impala底层数据存储更改后,jdbc执行sql查询时会报异常

出现问题场景:

         我遇到的问题场景是在spark通过hive直接写入parquet文件,用impala jdbc的方式进行INVALIDATE METADATA table,查询报链接异常,此问题是因为我使用了链接池,链接是在spark写入文件前建立的,因此impala底层日志报找不到文件的错,jdbc报socket is closed by peer

结论:

       如果impala的底层存储文件通过spark或者hive直接写入文件,最好不要用连接池,每次查询建立新的链接。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值