基于apachekafka的数据库传感器流数据发生器

aiqt4smr  于 2021-06-07  发布在  Kafka
关注(0)|答案(0)|浏览(190)

为了进行基准测试,我必须模拟一个在线数据流(时间序列数据),由各种数据库接收。
在这个特定的用例中,时间序列数据应该以非常高的频率记录。
我会用apachekafka处理这个流。
流本质上是由许多实值数字组成的,带有它们的时间戳和文本标签。
我见过许多kafka生产者的例子,但是没有一个能很好地适合我的用例:我如何使用kafka来生成和处理这样的数据流??
编辑:
使用pythonapi,我现在能够直接将数据发送到各种数据库。剩下的问题是速度:我的目标频率接近15khz。
使用相同的(多线程)python脚本,我几乎不能达到2khz。
有什么建议吗?

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题