bash - 在 bash 中只保留第一个重复条目

Question

这是我的数据结构:

First   A   1385
First   B   8364
First   C   9734
First   C   9625
Second  A   3566
Second  B   9625
Second  B   0238

我如何删除重复的行条目(第 1 列和第 2 列中的信息)并保留它的第一次出现。
我想删除:First C 9625 和 Second B 0238 因为它们是 First C 和 Second B 的第二次出现>，对于这样的结果:

First   A   1385
First   B   8364
First   C   9734
Second  A   3566
Second  B   9625

我尝试过什么:

awk '{print $1"\t"$2}' FILE  | 
   sort -u | 
   while read LINE; do 
      echo $LINE | 
      tr ' ' '\t' | 
      grep -m1 -F -f - FILE
   done

我刚刚学习 bash 编码，我的解决方案非常笨拙。我相信可以用一个 bash 命令做我想做的事情。

Answer 1

$ awk '!seen[$1,$2]++' file
First   A   1385
First   B   8364
First   C   9734
Second  A   3566
Second  B   9625

这就是为什么您需要在字段之间添加 , 的原因:

$ cat file
ab c
a  bc
$
$ awk '!seen[$1,$2]++' file
ab c
a  bc
$ awk '!seen[$1$2]++' file
ab c