如何在amazon msk中使用kafka连接适配器?根据aws文档,它支持kafka connect,但没有关于如何设置适配器和使用它的文档。
7ajki6be1#
afaik amazon msk不提供托管连接器,因此您必须自己运行它们。这是通过运行kafka connect worker进程(一个jvm)并为其提供一个或多个连接器配置来完成的。从kafka连接工作者的Angular 来看,它只需要一个kafka集群来连接;不管它是msk还是本地的,因为它最终只是一个消费者/生产者。您可以在这里看到更多内容,包括现场演示:https://rmoff.dev/bbuzz19-kafka-connect有关配置kafka connect以使用云托管的kafka平台(在本例中为合流云)的示例,请参阅本文。如果您对云中的托管连接器感兴趣,请查看confluent cloud中提供的连接器。免责声明:我为confluent工作:)
1条答案
按热度按时间7ajki6be1#
afaik amazon msk不提供托管连接器,因此您必须自己运行它们。这是通过运行kafka connect worker进程(一个jvm)并为其提供一个或多个连接器配置来完成的。
从kafka连接工作者的Angular 来看,它只需要一个kafka集群来连接;不管它是msk还是本地的,因为它最终只是一个消费者/生产者。
您可以在这里看到更多内容,包括现场演示:https://rmoff.dev/bbuzz19-kafka-connect
有关配置kafka connect以使用云托管的kafka平台(在本例中为合流云)的示例,请参阅本文。
如果您对云中的托管连接器感兴趣,请查看confluent cloud中提供的连接器。
免责声明:我为confluent工作:)