用多线程处理文件的正确方法是什么？

Question

我正在尝试处理大小约为4g字节的文件。我希望它是多线程的，所以我将使用seek来调整文件处理程序。

首先我会确定在哪里破坏文件，一旦完成，我将有一个搜索点阵列。

然后在每个线程我重新打开文件进行读取，e.g open my $fh2, '<input' or die $!;

这似乎愚蠢的。

有没有更好的解决方案？该文件太大，我无法直接将任何部分加载到内存中。

Answer 1

您可以试试Perl threads。所以你只会打开文件一次，但并行处理。

Answer 2

创建一个boss模型，'boss'进程将读取数据&传递给'workers'。