如何为远程机器配置合流hdfs接收器连接器？

v9tzhpje 于 2021-06-07 发布在 Kafka

关注(0)|答案(2)|浏览(232)

如何配置hdfs接收器连接器从'a'kafka机器到'b'hadoop机器我怎么做？有什么好例子吗？

2条答案

在计算机“c”上运行kafka connect（设置 bootstrap.servers 指向机器“a”）。然后使用hdfs connector和 hdfs.url 指向机器“b”，从机器“a”上的kafka主题流式传输数据。

connect-standalone etc/kafka/connect-standalone.properties etc/kafka-connect-hdfs/quickstart-hdfs.properties

假设kafka在机器a上运行。只需在quickstart-hdfs.properties中进行更改

hdfs.url=hdfs://url.of.machine.B:9000

确保您能够正确地从a连接到b。