bigquery以kafka为源

zc0qhyus  于 2021-06-07  发布在  Kafka
关注(0)|答案(2)|浏览(516)

我有一个来自网页的流式数据加载到bigquery,我想连接bigquery到kafka作为一个源。是否有任何类似kafka connect的连接器用于bigquery sink。
谢谢你,巴拉

5jvtdoz2

5jvtdoz21#

对于kafka的bigquery,我找不到任何直接api。但是,您可以通过1或python客户端为google bigquery导出bigquery中的数据。然后,可以使用kafka python客户端将数据导入kafka。
对于kafka到bigquery,kafka connect bigquery connector和bigquery kafka connect是apache kafka到google bigquery的常见接收器连接器。
有关更多信息,请检查使用kafka connect将数据从kafka加载到bigquery。

1hdlvixo

1hdlvixo2#

我没有测试/使用它,但是google已经和simba合作为bq提供odbc和jdbc驱动程序。这可能与jdbc连接器一起使用?
https://cloud.google.com/bigquery/providers/simba-drivers/

相关问题