卡夫卡推荐系统配置

Question

我期待我们涌入Kafka在一段时间内提高到2 TB/day左右。我打算设置一个带有2 brokers的卡夫卡群集（每个群集都在单独的系统上运行）。推荐的硬件配置是什么？2 TB/day？

Answer 1

对于卡夫卡我不确定是否有特定的配置。至少我可以告诉你一些关于卡夫卡的基本知识。您需要知道每秒获得的消息数量，因为这会确定您需要的RAM。确保你有足够的硬盘存储空间。没有必要获得SSD，因为系统将首先使用RAM来存储数据。仍然可能需要相当高速的硬盘来确保队列的刷新过程不会降低您的系统。

我也推荐使用3卡夫卡经纪人和3或4动物园管理员服务器。