寻找全面审查在Hadoop

Question

我要寻找Hadoop的一些表现回顾（300-600框集群，商品硬件），尤其是在以下几个方面：

1. 高并发读&写
2. 网站爬行
3. MapReduce的，并行计算
4. 反向索引

Answer 1

这并不像特别的问题，也许这就是为什么没有人回答到现在。基准测试可以最好地分析3-600节点群集上的性能。

然而，我发现关于Hadoop和它的实现在生产一些非常有趣的文章：

• Hadoop Architecture and its Usage at Facebook
• How Rackspace Now Uses MapReduce And Hadoop To Query Terabytes Of Data
• 一些性能测试的文章中找到Hadoop Sorts a Petabyte in 16.25 Hours and a Terabyte in 62 Seconds
• 此外，一个非常有趣blog related to Hadoop
• 另一篇与facebook和hadoop相关的文章是Hive - A Petabyte Scale Data Warehouse using Hadoop

我希望这些链接能让你开始，并给你所有你需要的信息。