我有一个来自网页的流式数据加载到bigquery,我想连接bigquery到kafka作为一个源。是否有任何类似kafka connect的连接器用于bigquery sink。谢谢你,巴拉
5jvtdoz21#
对于kafka的bigquery,我找不到任何直接api。但是,您可以通过1或python客户端为google bigquery导出bigquery中的数据。然后,可以使用kafka python客户端将数据导入kafka。对于kafka到bigquery,kafka connect bigquery connector和bigquery kafka connect是apache kafka到google bigquery的常见接收器连接器。有关更多信息,请检查使用kafka connect将数据从kafka加载到bigquery。
1hdlvixo2#
我没有测试/使用它,但是google已经和simba合作为bq提供odbc和jdbc驱动程序。这可能与jdbc连接器一起使用?https://cloud.google.com/bigquery/providers/simba-drivers/
2条答案
按热度按时间5jvtdoz21#
对于kafka的bigquery,我找不到任何直接api。但是,您可以通过1或python客户端为google bigquery导出bigquery中的数据。然后,可以使用kafka python客户端将数据导入kafka。
对于kafka到bigquery,kafka connect bigquery connector和bigquery kafka connect是apache kafka到google bigquery的常见接收器连接器。
有关更多信息,请检查使用kafka connect将数据从kafka加载到bigquery。
1hdlvixo2#
我没有测试/使用它,但是google已经和simba合作为bq提供odbc和jdbc驱动程序。这可能与jdbc连接器一起使用?
https://cloud.google.com/bigquery/providers/simba-drivers/