哪个job map reduce可以做，但apache crunch不能？

Question

我正在研究apache紧缩。据我所知，crunch是基于map-reduce框架的抽象框架。我打算使用紧缩而不是map-reduce框架。

我的问题是map-reduce可以做哪些工作，但是关键不能呢？

Answer 1

我不认为有什么像mapreduce可以做和apache紧缩不能。 Apache紧缩是一个在Mapreduce上工作的框架，就像Hive，Pig一样。事实上，它通过编写DoFn来简化映射，从而简化映射，并且紧缩使用执行计划程序和引擎来实现映射中的业务逻辑或缩小阶段。与纯粹的地图缩减代码相比，加入等概念可以轻松实现。