在 AWK 中定义变量 [重复]

Question

这个问题在这里已经有了答案：

如何在正则表达式中使用 awk 变量？ (5 个回答)

昨天关门。

我试图在 AWK 中提及 varaibel。 我尝试了一些我以前使用过的，但无法弄清楚我做错了什么......

cat tld.csv
co.uk
com

代码

while read -r ip 
do

awk -v i="$ip" -F, '$1 ~ /i$/ {print $0}' full-database.csv > tld-specific-database/$ip.csv


done < tld.csv

猫全数据库.csv

a.com,bbb
co.uk,ddd
a.comi,bbb
c.ukip,ddd

预期结果

cat co.uk.csv
    co.uk,ddd

cat com.csv
    a.com,bbb

我现在得到的是

cat co.uk.csv
    a.comi,bbb

cat com.csv
    a.comi,bbb

Answer 1

您可以在awk中轻松完成所有操作，只需重定向到$1并在末尾附加".csv"即可。 它可以短至：

awk -F, '{ print > $1".csv" }' full-database.csv

唯一需要的awk知识是您需要引用".csv"以便将其视为字符串并与$1连接。

Output

在您的full-database.csv输入文件上运行短脚本将生成以下 output 文件：

a.com.csv
a.comi.csv
c.ukip.csv
co.uk.csv

（如果comi是一个错字——请告诉我）

output文件内容为：

$ cat a.com.csv
a.com,bbb

$ cat a.comi.csv
a.comi,bbb

$ cat c.ukip.csv
c.ukip,ddd

$ cat co.uk.csv
co.uk,ddd

看看事情，让我知道这是否是你要找的，或者我是否误解了你的问题。 我很乐意进一步提供帮助。

---

使用 tld.csv（用于 tld 名称）和 full-database.csv 作为输入

我再次考虑了您的问题，您似乎想同时使用这两个文件并检查原始tld.csv名称是否匹配，但如果不匹配，则需要split() "."上的名称并在最后一部分再试一次。 总而言之，您将拥有：

awk -F, '
  NR == FNR {                         # fill a array with tld
    a[$1] = $1
    next
  }
  {                                   ## Process full-database.csv
    if ($1 in a)                      # is $1 already in a?
      print > $1 ".csv"               # output into csv if so
    else {                            # otherwise
      split ($1, tld, ".")            # split $1 into tld array
      if (tld[2] in a)                # check if last part in a
        print > a[tld[2]]".csv"       # if so, print into csv
    }
  }
' tld.csv full-database.csv

Output

现在您只有两个 output 文件：

$ l1 *.csv
co.uk.csv
com.csv

其中包含：

$ cat co.uk.csv
co.uk,ddd

和

$ cat com.csv
a.com,bbb

对这个问题的两种解释听起来都很合理——我会让你知道是否有一个、两个或一个都不对。

Answer 2

您要匹配的是变量 i 的值，而不是实际的字符（或字符串） i：

awk -F, -v i="$ip" '$1 ~ i "$"' db.csv >$ip.csv

或者稍微简洁的在变量值中包含 $

awk -F, -v i="$ip$" '$1 ~ i' db.csv >$ip.csv

（无论哪种方式，默认操作都是print $0 ，因此您可以忽略它）。

但是您几乎可以像https://stackoverflow.com/users/3422102/david-c-rankin所说的那样一次性完成此操作，如果tld.csv中的模式数量如您所示相当小，那么效率更高如果fulldb.csv很大（您没有显示，但“完整”建议）：

awk -F, 'NR==FNR{x[$0];next} { for(i in x) if($1 ~ i "$") print > i ".csv" }' tld.csv fulldb.csv

或者如果您不喜欢NR==FNR技巧

awk -F, 'BEGIN{while((getline<"tld.csv")>0) x[$0]} { for(i in x) ... }' fulldb.csv

Answer 3

bash shell 替代选项。

#!/usr/bin/env bash

while IFS= read -ru3 tld; do
  while IFS= read -r full_data; do
    full_data_no_comma="${full_data%,*}"
    full_data_no_period="${full_data_no_comma#*.}"
    if [[ "$tld" = @("$full_data_no_comma"|"${full_data_no_period}") ]]; then
      printf '%s > %s\n' "$full_data" "tld-specific-database/$tld.csv"
      break
    fi
  done < "$2"
done 3< "$1"

---

然后根据脚本传递文件。

script.sh tld.csv full-database.csv 

---

Output

co.uk,ddd > tld-specific-database/co.uk.csv
a.com,bbb > tld-specific-database/com.csv

---

如果您对 output 更改感到满意

printf '%s > %s\n' "$full_data" "tld-specific-database/$tld.csv"

至

echo "$full_data" > "tld-specific-database/$tld.csv"

创建所需的文件及其内容。

---

检查创建的内容。

head tld-specific-database/*

Output

==> tld-specific-database/com.csv <==
a.com,bbb

==> tld-specific-database/co.uk.csv <==
co.uk,ddd

---

• 对于大型数据/文件集/大小，此解决方案将非常慢。