Python线程的剖析

Question

我想弄清楚如何在我的应用程序中测量几个python线程的性能。我目前有几个基于用户输入在不同线程上执行的任务，我想测量每个线程的执行时间，甚至是内存消耗。我试图使用cProfile（在线程的每个实例上，然后我将数据写入文件，然后汇总所有结果），并取得了有限的成功。另外，我还有一些阻塞IO的问题，这会影响我的结果。无论如何有效地分析我的应用程序？

Answer 1

有几种不同的方法来解决这个问题。 cProfile很棒，并附带Python，但很多人将多线程分析视为一个问题。解决这个问题的一种方法是对每个线程运行cProfile的单独实例，然后使用Stats.add合并结果。

如果没有你期望的那么有用，另一种方法是使用Yappi，我已经成功使用了几个特殊的多线程情况。它有很好的文档，所以你不应该有太多的麻烦设置它。

有关内存特定的性能分析，请查看Heapy。但是请注意，如果你的代码不好，它可能会创建一些你见过的最大的日志文件！