将日志文件kafka移动到hadoop

Question

我想将日志文件从kafka移动到hdfs文件系统。 这个过程使用哪些工具？我尝试了Confluent，但是我无法用融合来成功完成这个过程。我试图找到另一种工具。

Answer 1

我想将日志文件从kafka移动到hdfs文件系统。这个过程使用哪些工具

HDFS connector for Kafka Connect工作得很好，并广泛使用，取得了巨大的成功。

我不能成功，这个过程与融合

可能是最好的，如果你描述你所面临的实际问题。如果你遇到了一种经过验证的技术的问题，换用另一种技术并不一定能帮到你。