Linux - 将多个CSV文件合并为一个

Question

我试图将存储在CSV文件中的多个结果连接在一起，第一列作为索引。

问题是我有各种数量的文件，并且索引结果可能因文件而异，有些结果较少。

在Linux中，脚本化过程将所有文件合并到一个文件中最简单的方法是什么，空白字段为空结果？我遇到过Linux加入，粘贴和列没有运气。 Mybe我应该尝试使用另一种工具，或者Python或Perl？

数据文件是这样的：

文件1：

  header1 header2 header3 
result_A 10   11  12 
result_B 13   14  15 
result_C 16   17  18 
result_D 19   20  21 
result_E 22   23  24 
result_F 25   26  27 

文件2：

  header1 header2 header3 
result_B 40   41  42 
result_F 43   44  45 

文件3：

  header1 header2 header3 
result_C 60  61  62 
result_D 63  64  65 
result_F 66  67  68 

并希望的结果应该是这样的：

  file1 file1  file1 file2 file2  file2  file3 file3  file3 
      header1 header2 header3 header1 header2 header3  header1 header2 header3 
result_A 10  11  12               
result_B 13  14  15   40  41  42        
result_C 16  17  18          60  61  62 
result_D 19  20  21          63  64  65 
result_E 22  23  24               
result_F 25  26  27   43  44  45   66  67  68 

Answer 1

UNIX join应该让你很长的路要走：

join -a 1 -e '0' "-t " -j 1 
    <(sort <(join -a 1 -e '0' "-t " -j 1 <(sort file1) <(sort file2))) 
    <(sort file3) 

（全部在同一行）。请注意0​​在引号内有TAB字符。输入^V<Tab>。

如果你知道的输入进行排序，这将是更好地使用

join -a 1 -e '0' "-t " -j 1 
    <(join -a 1 -e '0' "-t " -j 1 file1 file2) 
    file3 

（全部在一行上）打印：

id  header1 header2 header3 header1 header2 header3 header1 header2 header3 
result_A  10  11  12 
result_B  13  14  15  40  41  42 
result_C  16  17  18  60  61  62 
result_D  19  20  21  63  64  65 
result_E  22  23  24 
result_F  25  26  27  43  44  45  66  67  68 

现在，你可以看到，在我的Cygwin系统-e '0'显然不能像广告一样工作。我建议在不同的系统上尝试这个，因为我不认为在标准UNIX实用程序中发现了这样一个重要的错误。

Answer 2

csvjoin from csvkit should also work。