kafka connect能成为hadoop集群的一部分吗?

ljo96ir5  于 2021-05-31  发布在  Hadoop
关注(0)|答案(1)|浏览(257)

我目前使用的hadoop集群有10个节点(1个名称节点和9个数据节点),其中hbase、hive、kafka、zookeeper和hadoop的其他echo系统正在运行。现在我想从rdbms中获取数据并将其实时存储在hdfs中。我们可以在同一个集群中使用合流源连接器和hdfs2接收器连接器吗?还是需要为kafka connect使用单独的集群?

xfyts7mz

xfyts7mz1#

对。kafka connect是一个独立的java进程,就像您提到的其他组件一样。
kafka connect需要单独的群集吗
这将是首选,但是可选的

相关问题