如何计算非常大的数据集发生与PHP

Question

比方说，我想跟踪的时候出现一个词数...

//Update the totals 
foreach($arrayOfWords as $word) { 
    $totals[$word] = $totals[$word] + 1; 
} 

现在，想象一下，认为这个代码的小块被称为数百次，每次每次在$ arrayWords中有数千个新单词，导致数百万条目在关联数组$ total中。尽管操作很简单（将现有值加1），但当我们接近数百万个条目时，PHP速度显着下降。

你可以想一个更好的方法来统计事件（最好不使用数据库）吗？

Answer 1

下面就来加快它

//Update the totals 
foreach($arrayOfWords as $word) { 
    $totals[$word]++; 
} 

无需搜索相同关键字的散列内连续两次只是为了增加其价值的一种方式。另外，（只是一个笔记）我看不出$totals的长度如何超过$arrayOfWords的长度，除非您在代码中的其他位置添加单词$totals。

Answer 2

结合的Mark Baker和quickshiftin的建议，下面的代码应该是相当快一点，如果输入的单词列表包含了许多重复的话：

$counts = array_count_values($words); 
foreach($counts as $word => $count) { 
    $totals[$word] += $count; 
} 

这就是说，在任何情况下，PHP可能不是这种海量数据处理的最佳工具。但是，如果不知道更多关于为什么您想要这样做，很难建议具体的替代方案。