在 master csv 中搜索关键字，如果关键字存在，则更新输入 csv 第二列值为 true 或 false

Question

输入 csv - new_param.csv

价值如 -

ID
Identity
as-uid
cp_cus_id
evs
k_n

master.csv 的价值如下 -

A, xyz, id, abc
n, xyz, as-uid, abc, B, xyz, ne, abc
q, xyz, id evs, abc
3, xyz, k_n, abc, C, xyz, ad, abc
1, xyz, zd, abc
z, xyz, ID, abc

需要 Output 已更新 new_param.csv - 第二列为真或假

ID,true
Identity,false
as-uid,true
cp_cus_id,false
evs,true
k_n,true

试过以下代码 output -

#!/bin/bash

declare -a keywords=(`cat new_param.csv`)
 
length=${#keywords[@]}

for (( j=0; j<length; j++ ));
do
 a= LC_ALL=C awk -v kw="${keywords[$j]}" -F, '{for (i=1;i<=NF;i++) if ($i ~ kw) {print i}}' master.csv
b=0
if [ $a -gt $b ]
then
  echo true $2 >> new_param.csv
else
  echo false $2 >> new_param.csv
fi
done

请帮助某人！

试过上面提到的代码但没有帮助我

错误如-

test.sh: line 29: [: -gt: unary operator expected test.sh: line 33: -f2: command not found

Answer 1

awk -v RS=', |\n' 'NR == FNR { a[$0] = 1; next }
        { gsub(/,.*/, ""); b = "" b $0 (a[$0] ? ",true" : ",false") "\n" }
        END { if (FILENAME == "new_param.csv") printf "%s", b > FILENAME }' master.csv new_param.csv

Answer 2

试试这个Shellcheck -clean pure Bash 代码：

#! /bin/bash -p

outputs=()

while read -r kw; do
    if grep -q -E "(^|[[:space:],])$kw([[:space:],]|\$)" master.csv; then
        outputs+=( "$kw,true" )
    else
        outputs+=( "$kw,false" )
    fi
done <new_param.csv

printf '%s\n' "${outputs[@]}" >new_param.csv

• 您可能需要调整与grep -E一起使用的正则表达式，具体取决于您想要算作匹配的确切内容。

Answer 3

使用grep查找完全匹配的单词：

$ grep -owf new_param.csv master.csv | sort -u
ID
as-uid
evs
k_n

然后将其提供给awk以匹配new_param.csv条目：

awk '
BEGIN   { OFS="," }
FNR==NR { a[$1]; next }
        { print $1, ($1 in a) ? "true" : "false" }
' <(grep -owf new_param.csv master.csv | sort -u) new_param.csv

这会产生：

ID,true
Identity,false
as-uid,true
cp_cus_id,false
evs,true
k_n,true

一旦确认结果正确，OP 可以将> new_param.csv添加到awk脚本的末尾，例如：

awk 'BEGIN { OFS="," } FNR==NR ....' <(grep -owf ...) new_parame.csv > new_param.csv
                                                                     ^^^^^^^^^^^^^^^

Answer 4

替代awk选项：

使用 a ,作为字段分隔符，并将master.csv的每条记录的第三个字段连接到变量m 。 其次，从new-params.csv文件中读取每条记录，使用index函数判断m变量字符串中是否存在该记录。

 awk -F", " '
FNR==NR{m=m$3}
FNR<NR{print $0 (index(m,$0) ? ",true" : ",false")}                           
' master.csv new-params.csv

Output：

ID,true
Identity,false
as-uid,true
cp_cus_id,false
evs,true
k_n,true