如何在vim中删除密切重复的行

Question

我有以下几行：

123 abcd 456 xyz
123 abcd 678 xyz
234 egfs 434 ert
345 fggfgf 456 455 rty
234 egfs 422 ert 33

所以在这里，如果第一个字段对于多行是相同的，则认为它们是重复的。 因此，在上面的例子中，123在2行中是相同的，它们被认为是重复的（尽管它们在中间的一个字段中不同）。 类似地，具有234的行是重复的。 我需要删除这些重复的行。

由于它们不是100％重复，因此sort u无效。 有谁知道我如何删除这些重复的行？

Answer 1

这对于awk来说是一个非常简单的任务，我会用awk来做。 在vim中，您可以执行以下操作：

% !awk '\!a[$1]++'

然后你得到：

123 abcd 456 xyz
234 egfs 434 ert
345 fggfgf 456 455 rty

如果你在shell中做，你不必逃避! ：

awk '!a[$1]++' file

Answer 2

g/\%(^\1\>.*$\n\)\@<=\(\k\+\).*$/d

Answer 3

使用我的PatternsOnText插件很容易。 它允许指定重复检查忽略的模式; 在你的情况下，这将是第一个（空格分隔）字段之后的所有内容：

%DeleteDuplicateLinesIgnoring / .*/