关于flume使用SpoolDir监控目录传入文件时报出java.nio.charset.MalformedInputException: Input length = 1，个人解决方案

最新推荐文章于 2024-03-29 17:46:56 发布
最新推荐文章于 2024-03-29 17:46:56 发布
阅读量749 收藏 2
点赞数
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_43391071/article/details/100082696
版权

错误总结

今天测试flume框架时使用SpoolDir监控目录的形式启动了flume，传入文件时报出了如下错误：
在这里插入图片描述
解决方法有两种：以下两种方法都可试一试
（1）问题原因：source组件的属性 inputCharset 默认的是 UTF-8, 但实际读取的文件类型是 ANSI（GBK）。
解决方案：a1.sources.s1.inputCharset = GBK //将 inputCharset 设置为 GBK 即可。

（2）指向的目录下不能有文件，必须都是文件夹（咳咳。。小编就是这个导致错误）
在这里插入图片描述

成茂龙
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
flumeng-plugins-udp:使用java nio消费udp消息的flume-ng源码插件
06-19
使用java nio消费udp消息的flume-ng源码插件 Flume-ng ( )。 该插件基于 Apache Flume 1.5.0.1 和 Redis 2.8.17。 特征 源消费udp消息 Netty ( ) 使用 用法 构建或下载 jar。 使用mvn clean package检出和构建 将flumeng-plugins-udp-[VERSION].jar或flumeng-plugins-udp-[VERSION]-jar-with-dependencies.jar复制到您的flume 库路径中。 将配置文件或示例配置文件复制或创建到某个位置。 跑步。 以下推荐是此 udp 源的示例 bin/flume-ng agent -n agent -c conf -f conf/example-UDP.properties -Dflume.root.logger=DEB
基于java的开发源码-日志服务器 Apache Flume.zip
02-29
基于java的开发源码-日志服务器 Apache Flume.zip 基于java的开发源码-日志服务器 Apache Flume.zip 基于java的开发源码-日志服务器 Apache Flume.zip 基于java的开发源码-日志服务器 Apache Flume.zip 基于java的...
IDEA报错：java.nio.charset.MalformedInputException: Input length = 1
最新发布
weixin_53676834的博客
03-29 713
java.nio.charset.MalformedInputException: Input length = 1和Input length = 2
解决flume监听文件夹，上传文件时出现java.nio.charset.MalformedInputException: Input length = 1
tanxinji的博客
06-27 673
 使用flume监听文件夹报错: java.nio.charset.MalformedInputException: Input length = 1 at java.nio.charset.CoderResult.throwException(CoderResult.java:281) ~[?:1.8.0_151] at org.apache.flume.serialization.ResettableFileInputStream.readChar(ResettableFileInputStream.j
flume报java.nio.charset.MalformedInputException: Input length = 1 解决方案
热门推荐
Nicole Cao的博客
11-03 1万+
Flume读取文件的过程中，遇到了如下的错误： 问题原因：source组件的属性 inputCharset 默认的是 UTF-8, 但实际读取的文件类型是 ANSI（GBK）。 解决方案：a1.sources.r2.inputCharset = GBK  //将 inputCharset 设置为 GBK 即可。
Flume报错：java.nio.charset.MalformedInputException: Input length = 1
关注网络安全、云原生安全
03-15 1450
报错信息： [ERROR - org.apache.flume.source.SpoolDirectorySource$SpoolDirectoryRunnable.run(SpoolDirectorySource.java:256)] FATAL: Spool Directory source r1: { spoolDir: /home/frankyu/serverlogs }: Uncaug...
java.nio.charset.MalformedInputException: Input length = 1
weixin_44026997的博客
10-09 597
出现这个异常，多数是SpringBoot中的yml文件编码问题，yml文件中有中文，比如注解。 解决办法，将文件编码设置和项目编码一致。 或者直接删除中文
Flume1.9.0配置.docx
09-14
Flume1.9.0配置.docx
flume-ng-core-1.7.0.jar
09-29
通过修改Flume源码flume-ng-core-1.7.0.jar，解决Flume传出单行日志上限2048的问题，下载替换flume的lib目录下的原flume-ng-core-1.7.0.jar即可
Nodejs使用archiver-zip-encrypted库加密压缩文件时报错(解决方案)
01-20
前几天在维护一个nodejs写的命令行工具，要增加一个压缩zip文件时加密码功能。压缩文件时使用了 archiver 库，加密码使用了 archiver-zip-encrypted 库。在windows系统上测试时，发现会概率的出现以下异常： events.js:174 throw er; // Unhandled 'error' event ^ Error: file data stream has unexpected number of bytes at ByteCounter. ( xxx\node_modules\yazl\index.js:162:99) at ByteCount
01.flume中的sink-batchsize和channel的transactionCapacity大小之间的注意点.mp4
04-28
01.flume中的sink-batchsize和channel的transactionCapacity大小之间的注意点.mp4
java flume hbase_flume java.nio.charset.MalformedInputException
weixin_27228507的博客
02-24 184
电影评分大作业，flume启动后报如此异常16/07/11 10:48:08 ERROR source.SpoolDirectorySource: FATAL: Spool Directory source r1: { spoolDir: /mnt/project/bootcamp/practise/movielens/data/ml-1m/ }: Uncaught exception in Sp...
java NIO Exception in thread "main" java.nio.charset.MalformedInputException: Input length = 1
shukebai的专栏
04-20 2628
package com.nio; import java.io.File; import java.io.FileInputStream; import java.io.IOException; import java.nio.ByteBuffer; import java.nio.CharBuffer; import java.nio.channels.FileChannel;
Java NIO 报java.nio.charset.MalformedInputException: Input length = 1异常
良木
12-06 1360
开发spring boot时遇见的问题，主要原因是配置文件中有中文，编码格式无法解析引起的。 解决方案：
【问题篇】java.nio.charset.MalformedInputException: Input length = 1解决
weixin_56995925的博客
10-14 2150
进行运行以前的代码，突然报错了，java.nio.charset.MalformedInputException: Input length = 1。 解决方式：
flume 报错 java.nio.charset.MalformedInputException:Input lenth =1怎么解决
10-19
flume报错java.nio.charset.MalformedInputException: Input length = 1通常是由于flume接收到的数据编码格式不正确导致的。解决方案如下： 1.检查flume配置文件中的编码格式是否正确。 2.检查flume接收到的数据是否...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值