使用flume-spooldir类型的非“utf-8”文件收集问题

ecbunoof 于 2021-06-04 发布在 Flume

关注(0)|答案(1)|浏览(336)

我的flume spool目录包含非“utf-8”文件。因此，当我尝试收集java.nio.charset.malformedinputexception时，会出现一个错误。更改.conf文件的编码选项也会导致错误。我必须使用spooldir类型。如何收集非“utf-8”文件。
在此处输入图像描述

flume Encoding cloudera utf-8

来源：https://stackoverflow.com/questions/40781987/problems-with-non-utf-8-file-collection-using-flume-spooldir-type

1条答案

按热度按时间

我们日志文件的编码是拉丁文5（土耳其语）
通过在conf文件中添加以下行来修复此问题：

AGENTNAME.sources.SOURCENAME.inputCharset = ISO-8859-9

赞(0）回复(0）举报 2021-06-04

相关问题

热门标签

Java query python Node 开发语言 request Util 数据库 Table 后端算法 Logger Message Element Parser

最新问答

xxl-job 安全组扫描到执行器端口服务存在信息泄露漏洞
回答(1) 发布于 3个月前
xxl-job 不能和nacos兼容？
回答(3) 发布于 3个月前
xxl-job 任务执行完后无法结束，日志一直转圈
回答(3) 发布于 3个月前
xxl-job-admin页面上查看调度日志样式问题
回答(1) 发布于 3个月前
xxl-job 参数512字符限制能否去掉
回答(1) 发布于 3个月前