1
当执行Hive查询时，会执行多少个Mapper/Reducer或执行Hive查询时，如何确定如何执行Map Mapper和Reducer？执行Hive查询时分配了多少Mappers和Reducers
A
回答
3
映射器的数量取决于由jobclient计算的输入拆分的数量。
而且配置单元查询就像是一系列Map缩减作业。如果您编写一个简单的查询，如select Count(*) from Employee只会执行一个Map reduce程序。如果您提供包含大量聚合和连接等的复杂查询，则将执行一系列Map Reduce程序，该程序将较早的MR阶段输出用作下一个MR阶段的输入，并将最终结果转储到HDFS中。
减速的数量可以通过开发者在蜂巢壳牌被设置为mapred.reduce.tasks = X
相关问题
- 1. Mapreduce：比mappers更多的reducers？
- 2. Hive如何执行查询？
- 3. Hive查询执行时间太长
- 4. 如何在查询中分配运行Hive查询的值
- 5. 查询中打开了多少个plpython执行环境？
- 6. Hierarchical Hibernate，执行多少个查询？
- 7. 如何增加hadoop中mapreduce程序中mappers和reducers的数量？
- 8. 在Hive上执行Spark SQL查询
- 9. 如何在hadoop中执行hive查询
- 10. 减少此查询的执行时间
- 11. 如何减少查询执行时间
- 12. 减少SQL查询的执行时间
- 13. 减少MySQL查询执行时间
- 14. 减少查询的执行时间
- 15. 减少WMI查询执行时间
- 16. 执行查询时hive是否运行hadoop？
- 17. 如何减少多个查询的执行时间？
- 18. HIVE总和查询
- 19. Hadoop HIVE - 如何查询部分行
- 20. 如果SQL查询执行超过DB2中分配的时间，则执行SQL查询执行
- 21. mysql查询执行时间|减少查询
- 22. Hive多个子查询和组由
- 23. Hive查询在通过spark执行时返回错误答案
- 24. 在WSo2的Hive表上执行查询时得到的错误
- 25. Hadoop中的Mappers and Reducers必须是静态类吗？
- 26. Malloc - >分配了多少内存？
- 27. NSMutableArray arrayWithCapacity - 分配了多少内存？
- 28. Hadoop Hive查询：多连接
- 29. Hive与多个子查询
- 30. 执行多行SQLite查询
你能告诉我一些文档/ archtechture或过程图。这样我可以更好地理解内部工作的蜂巢查询。 – techprat