排序和唯一的 csv 文件

Question

使用 linux 命令，我有一个引用的 csv 文件，我按第一列和第二列排序，现在我想删除它们在第一列和第二列中匹配的重复项，怎么做？ uniq 似乎还不够，不是吗？

Answer 1

您可以反转（rev）文件，然后 uniq 忽略前 N-2 个字段（除了前两列之外的所有字段），然后再次 rev。

rev | uniq -f N-2 -u | rev

Answer 2

好的，我更好地了解您现在需要什么。 使用 awk 怎么样？

http://www.unix.com/shell-programming-scripting/62574-finding-duplicates-columns-removing-lines.html