删除文件中bash中特定参数的重复值

Question

我有一个文件

cat file
ab,12
ab,45
ab,23
bh,32
bl,12
ab,10
bh,13

并且文件具有带有第一个参数的重复行

我需要输出具有由逗号分隔的特定参数的唯一值

例如输出

cat file
ab,12
bh,32
bl,12

Answer 1

以下命令适用于您的示例：

sort -u -s -t, -k1,1

Answer 2

假设OP想要在$1打印第一次出现的值，这里是awk one-liner：

awk -F"," 'NR==1{print;next} !($1 in a){a[$1]=$0} END{for(i in a) print a[i]}' file