Spark Streaming在哪里运行？

Question

据我所知，Spark可以使用Spark Streaming来分析流。 卡夫卡可以接收来自多个来源的数据。 我不明白的是，如果我有一个Kafka集群接收来自多个数据源的数据，数据是否会通过Spark Streaming运行发送到数据库？或者在应用程序服务器上运行Spark Streaming？

Answer 1

如果您使用Spark Streaming，则需要设置Spark群集，然后将Spark Streaming作业提交给群集。因此，您将不得不2个集群：Kafka + Spark（或者实际上是3个，因为您还需要Kafka的Zookeeper集群）。