bash方法从csv文件中删除最后4列

Question

有没有办法使用bash删除某些输入CSV文件的最后四列？ 最后四列可以包含从一行到另一行的长度不同的字段，因此仅从每行的末尾删除一定数量的字符是不够的。

Answer 1

如果所有行具有相同数量的字段，则剪切可以执行此操作，否则执行awk。

cut -d, -f1-6 # assuming 10 fields

如果要控制输出seperater使用--output-delimiter = string，将打印出前6个字段

awk -F , -v OFS=, '{ for (i=1;i<=NF-4;i++){ printf $i, }; printf "\n"}'

循环到多个字段-4的字段并打印出来。

Answer 2

cat data.csv | rev | cut -d, -f-5 | rev

rev反转这些行，所以如果所有行都具有相同的列数并不重要，它将始终删除最后一行4.这仅在最后4列本身不包含任何逗号时才有效。

Answer 3

如果知道列数，可以使用cut 。 例如，如果您的文件有9列，并且逗号是您的分隔符：

cut -d',' -f -5

但是，这假定csv文件中的数据不包含任何逗号。 cut也会将引号内的逗号解释为分隔符。

Answer 4

awk -F, '{NF-=4; OFS=","; print}' file.csv

或者

awk -F, -vOFS=, '{NF-=4;print}' file.csv

将删除每行的最后4列。

Answer 5

awk one-liner：

awk -F, '{for(i=0;++i<=NF-5;)printf $i", ";print $(NF-4)}'  file.csv

使用awk over cut的优点是，你不必计算你有多少列，以及你想要保留多少列。 因为你想要的是删除最后4列。

看测试：

kent$  seq 40|xargs -n10|sed 's/ /, /g'           
1, 2, 3, 4, 5, 6, 7, 8, 9, 10
11, 12, 13, 14, 15, 16, 17, 18, 19, 20
21, 22, 23, 24, 25, 26, 27, 28, 29, 30
31, 32, 33, 34, 35, 36, 37, 38, 39, 40

kent$  seq 40|xargs -n10|sed 's/ /, /g' |awk -F, '{for(i=0;++i<=NF-5;)printf $i", ";print $(NF-4)}'
1,  2,  3,  4,  5,  6
11,  12,  13,  14,  15,  16
21,  22,  23,  24,  25,  26
31,  32,  33,  34,  35,  36

Answer 6

这可能适合你（GNU sed）：

sed -r 's/(,[^,]*){4}$//' file

Answer 7

这种awk解决方案以黑客的方式

awk -F, 'OFS=","{for(i=NF; i>=NF-4; --i) {$i=""}}{gsub(",,,,,","",$0);print $0}' temp.txt

Answer 8

当CVS文件带有带<逗号>字符的带引号的字段时，所提到的方法都不会正常工作。 因此，使用<逗号>字符作为字段分隔符有点困难。

以下两篇文章现在非常方便：

• 使用awk有效解析CSV的最有效方法是什么？
• [U＆L]如何在Linux中删除文件的最后一列 （注意：这仅适用于GNU awk）

由于您使用GNU awk，因此可以执行以下任何一项：

$ awk -v FPAT='[^,]*|"[^"]+"' -v OFS="," 'NF{NF-=4}1'

或者使用任何awk，你可以这样做：

$ awk 'BEGIN{ere="([^,]*|\042[^\042]+\042)"
             ere=","ere","ere","ere","ere"$"
       }
       {sub(ere,"")}1'