linux bash按'yymmdd'而不是'ddmmyy'列格式对文本文件进行排序，然后按时间排序，然后删除重复项

Question

问候。 我需要对文本文件中的行进行排序，该文本文件有 11 个字段，以逗号分隔。

• 第 10 列包含格式为“ddmmyy”的日期
• 第 1 列包含格式为“hhmmss.sss”的时间戳

- 排序标准 1，按第 10 列排序，但首先按年，然后按月，然后按天，就像日期格式是'yymmdd'而不是'ddmmyy'

- 排序标准 2，按第 2 列排序，包含时间戳。

这是一个示例文件

$GPSACP: 100054.764,1056.0063N,00002.9733E,1.75,91.0,3,236.46,0.40,0.22,280521,05
$GPSACP: 140054.764,1056.0063N,00002.9733E,1.75,91.0,3,236.46,0.40,0.22,160621,05
$GPSACP: 210038.264,1026.4147N,00129.9725E,3.75,87.0,3,43.87,2.58,1.39,160621,03
$GPSACP: 210038.265,1026.4147N,00129.9725E,3.75,87.0,3,43.87,2.58,1.39,160615,03
$GPSACP: 100038.265,1026.4147N,00129.9725E,3.75,87.0,3,43.87,2.58,1.39,280717,03
$GPSACP: 100038.265,1026.4147N,00129.9725E,3.75,87.0,3,43.87,2.58,1.39,280518,03
$GPSACP: 210039.264,1026.4147N,00129.9725E,3.75,87.0,3,43.87,2.58,1.39,280521,03
$GPSACP: 211054.764,1057.0063N,00002.9733E,1.75,91.0,3,236.46,0.40,0.22,280521,05
$GPSACP: 211054.764,1056.0063N,00002.9733E,1.75,91.0,3,236.46,0.40,0.22,160621,05
$GPSACP: 210538.264,1026.4148N,00129.9725E,3.75,87.0,3,43.87,2.58,1.39,160614,03
$GPSACP: 210538.265,1026.4147N,00129.9725E,3.75,87.0,3,43.87,2.58,1.39,160621,03
$GPSACP: 211638.265,1026.5147N,00129.9725E,3.75,87.0,3,43.87,2.58,1.39,280521,03
$GPSACP: 211539.264,1026.4147N,00129.9725E,3.75,87.0,3,43.87,2.58,1.39,280521,03

这就是我希望得到的结果：

$GPSACP: 210538.264,1026.4148N,00129.9725E,3.75,87.0,3,43.87,2.58,1.39,160614,03

$GPSACP: 210038.265,1026.4147N,00129.9725E,3.75,87.0,3,43.87,2.58,1.39,160615,03

$GPSACP: 100038.265,1026.4147N,00129.9725E,3.75,87.0,3,43.87,2.58,1.39,280717,03

$GPSACP: 100038.265,1026.4147N,00129.9725E,3.75,87.0,3,43.87,2.58,1.39,280518,03

$GPSACP: 100054.764,1056.0063N,00002.9733E,1.75,91.0,3,236.46,0.40,0.22,280521,05
$GPSACP: 211638.265,1026.5147N,00129.9725E,3.75,87.0,3,43.87,2.58,1.39,280521,03
$GPSACP: 211539.264,1026.4147N,00129.9725E,3.75,87.0,3,43.87,2.58,1.39,280521,03
$GPSACP: 210039.264,1026.4147N,00129.9725E,3.75,87.0,3,43.87,2.58,1.39,280521,03
$GPSACP: 211054.764,1057.0063N,00002.9733E,1.75,91.0,3,236.46,0.40,0.22,280521,05
$GPSACP: 140054.764,1056.0063N,00002.9733E,1.75,91.0,3,236.46,0.40,0.22,160621,05
$GPSACP: 210038.264,1026.4147N,00129.9725E,3.75,87.0,3,43.87,2.58,1.39,160621,03
$GPSACP: 210538.265,1026.4147N,00129.9725E,3.75,87.0,3,43.87,2.58,1.39,160621,03
$GPSACP: 211054.764,1056.0063N,00002.9733E,1.75,91.0,3,236.46,0.40,0.22,160621,05

我想使用 bash 排序，但我不知道如何以不同的顺序处理日期。

任何帮助表示赞赏。

谢谢。 马里奥。

Answer 1

假设每一行都以$GPSACP:开头，或者没有一行，你可以使用sort ：

sort -t, -k10.5,10.6 -k10.3,10.4 -k10.1,10.2 -k1,1 input.txt

这有效地将第 10 列分成三个 2 位数的块，然后可以独立排序。 然后它按第 1 列进行子排序。（因为第 1 列前缀是常量，它不影响排序。） -t选项将列分隔符更改为逗号。

---

如果$GPSACP:前缀不是恒定的，如果您有一个支持“稳定排序”选项（ -s ）的sort版本，那么您可以按（空格分隔的）第 2 列进行预排序，然后按列的部分排序10：

sort -k2 input.txt | sort -t, -k10.5,10.6 -k10.3,10.4 -k10.1,10.2 -s