springxd是否可以配置为具有flume的文件通道功能?

yizd12fk  于 2021-06-02  发布在  Hadoop
关注(0)|答案(1)|浏览(319)

我有一个原型,使用Flume,并想端口它的SpringXD。一切看起来都很好,但我找不到Flume的水道。
我可以配置springxd在磁盘上存储任何不可交付的文件,直到它们再次可交付吗?
我需要将音频文件从远程收集器发送到一个可能有多个spring xd示例的集中式hdfs。
谢谢。

4c8rllxm

4c8rllxm1#

这可能有助于您的案例:http://docs.spring.io/spring-xd/docs/current-snapshot/reference/html/#csv-高密度光纤
这使您能够将file->hdfs作为批处理作业运行。
如果您想以流的形式运行它,您可以设置如下流 file | hdfs .

相关问题