将共享相同标题的文件分组，然后将它们连接起来。

Question

我在Ubuntu上使用Bash，我的问题如下：

我在某个文件夹中有几十个.TXT文件。

据我所知，他们都有一个标题(我相信每个标题保持在一行，但不是100%确定)。但是，它们不需要共享相同的头。五个文件可能有相同的头，而另一个文件可能有一个唯一的头。

最终，我想要做的是连接共享相同头的文件。以下问题(用相同的头连接多个文件)的答案解释了如何将多个文件与相同的标题连接在一起，但是在我的示例中，我首先需要对共享相同标题的文件进行分组，然后再将它们连接起来(并且只将第一个文件的标题保留在所述组中)。

欢迎任何想法:)谢谢！

Answer 1

awk '
  FNR==1{
    if (!($0 in h)){file=h[$0]=i++}
    else{file=h[$0];next}
  }
  {print >> (file)}
' *.txt

如果awk位于文件的第一行：

• 如果报头在头数组h中不存在，那么将数字i++ (最初为零)设置为文件名，并将其放在数组的键$0中。
• 否则(如果标题已经在数组h中)，从数组中获取文件名并读取下一行。

最后，将该行打印到相应的文件中。

但我得到了“太多打开的文件”之类的东西。

GNU awk根据需要处理打开和关闭文件，以避免这种情况，但其他awk可能不会这样做。在这种情况下，请选择

awk '
  FNR==1{
    if (!($0 in h)||file!=h[$0]){close(file)}
    if (!($0 in h)){file=h[$0]=i++}
    else{file=h[$0];next}
  }
  {print >> (file)}
' *.txt

请记住，这可能会慢一些。