Mapreduce工作：组合器没有减速器

Question

我注意到，如果我将减速器的数量设置为0，组合器将无法工作。没有减速器的情况下可以使用组合器吗？谢谢。

Answer 1

不，它不是。即使使用指定的减速器，也不保证组合器的使用。所以组合器是严格的优化，可以但不一定在Reducers之前调用。如果没有减速器，这些将永远不会被调用。

Answer 2

组合器的全部目的是'合并'部分映射器输入，以便在发送到缩减器时映射输出消耗更少的网络带宽。没有减速器，使用组合器的重点就变得没有实际意义。因此，不，这是不可能的。