实时数据集成kafka、hadoop、avro和hdfs是如何结合在一起的,有什么样的体系结构可以进行数据集成

8iwquhpp  于 2021-05-29  发布在  Hadoop
关注(0)|答案(1)|浏览(305)

我试图了解什么样的体系结构可以用于实时数据集成,以及所有的部分是如何组合在一起的。
我曾试图在互联网上研究,但找不到好的资源。
有人能解释一下如何使用hadoopkafka和其他组件来进行实时数据集成吗。
如果可能的话,您可以提供在哪里使用实时数据集成。任何用例。
如果你知道任何资源/教程,如果你能分享我会非常高兴
提前谢谢

r7knjye2

r7knjye21#

请允许我谦虚地提出我在这个问题上所做的两次谈话。
从概念上讲,我们可以了解实时集成的内容和原因:https://talks.rmoff.net/said0w/the-changing-face-of-etl-event-driven-architectures-for-data-engineers
在实践中:https://talks.rmoff.net/pzc6za/apache-kafka-and-ksql-in-action-lets-build-a-streaming-data-pipeline

相关问题