合并几乎相同的数据行

Question

我有大量的数据（英国和美国邮政地址）超过100,000，其中在几乎相同的行中包含重复或ALMOST相同的数据行（具有5列），这五列中的四列具有完全匹配的数据，例如： AAAA BBBB CCCCCC CCCCCCCC CCCCCCCC 11.111 22.222 AAAA BBBB CCCCCC CCCCCCCC 11.111 22.222 DDDD EEEE FF FFFFF FFFFF FFFFFFFFF 33.33 44.444 DDDD EEEE FF FFFFF FFFFF 33.33 44.444 GGGG HHHH IIII IIIII IIIIIIII 55.555 66.666 GGGG HHHH IIII IIIII 55.555 66.666这些重复的（或几乎重复的行）我无法管理，我想要结束的是： AAAA BBBB CCCCCC CCCCCCCC CCCCCCCC 11.111 22.222 DDDD EEEE FF FFFFF FFFFF FFFFFFFFF 33.33 44.444 GGGG HHHH IIII IIIII IIIIIIII 55.555 66.666例如，丢弃列“更短”的数据长度

Answer 1

您可以通过执行以下步骤来实现这一目标-1.在第1列上排序2.在第2列上排序3.在第4列上排序4.在第5列上排序5.永久地对行进行重新排序（在顶部打开），现在您将看到-全部这些行永久排序。 在第1栏上空白。
结果将是-
================================================== =============

AAAA BBBB CCCCCC CCCCCCCC CCCCCCCC 11.111 22.222
BBBB CCCCCC CCCCCCCC 11.111 22.222
DDDD EEEE FF FFFFF FFFFF FFFFFFFFF 33.33 44.444
EE FF FFFFF FFFFF 33.33 44.444
GGGG HHHH IIII IIIII IIIIIIII 55.555 66.666
HHHH IIII IIIII 55.555 66.666

===================================================================  

现在，选择第一列上所有空白的行，然后删除所有行。