如何从文件中获取模式并在unix中搜索另一个文件

Question

我有2个文件File1和File2。 File1有一些以“|”分隔的值。 例如，

A|a
C|c
F|f

File2也有一些以“|”分隔的值。 例如，

a|1
b|2
c|3
d|4
e|5

File1中的第2列与File2的第1列相似。

我必须创建具有预期输出的第三个文件File3

A|a|1
C|c|3

我尝试在循环中获取每个记录，并使用“awk”在File2中搜索它。

它工作正常，但问题是File1和File2都有超过500万条记录。

我需要优化的解决方案。

Answer 1

你可以用这个awk ，

awk -F'|' 'NR==FNR{a[$2]=$1;next} $1 in a { print a[$1],$1,$2 }' OFS="|" file1 file2 > file3

更清晰的方式：

awk  'BEGIN{ OFS=FS="|";} NR==FNR{a[$2]=$1;next} $1 in a { print a[$1],$1,$2 }' file1 file2 > file3

根据@Kent的建议：

如果你的file2在file3有你想要的两列以上，那么，

awk  'BEGIN{ OFS=FS="|";} NR==FNR{a[$2]=$1;next} $1 in a { print a[$1],$0 }' file1 file2 > file3

这里，

FS - 现场分离器

OFS - 输出场分离器

Answer 2

这是创建join目的：

$ join -t '|' -o '1.1,1.2,2.2' -1 2 -2 1 file1 file2
A|a|1
C|c|3

man join了更多细节，并特别注意需要在连接字段上排序的文件（即file1的第2个字段和file2的第1个字段），因为您发布的样本输入是。