从csv文件中删除最后4列的Unix方法

zbq4xfa0  于 2023-05-20  发布在  Unix
关注(0)|答案(8)|浏览(138)

有没有一种方法可以使用bash来删除一些输入CSV文件的最后四列?最后四列的字段每行的长度可能不同,因此仅从每行的末尾删除一定数量的字符是不够的。

2lpgd968

2lpgd9681#

如果所有行都有相同数量的字段,则可以使用cut,否则可以使用awk。

cut -d, -f1-6 # assuming 10 fields

将打印出前6个字段,如果你想控制输出separater使用--output-delimiter=string

awk -F , -v OFS=, '{ for (i=1;i<=NF-4;i++){ printf $i, }; printf "\n"}'

在字段上循环,直到字段数为-4并打印出来。

rhfm7lfc

rhfm7lfc2#

cat data.csv | rev | cut -d, -f-5 | rev

rev将行反转,所以如果所有行的列数都相同也没关系,它总是会删除最后4行。这只适用于最后4列本身不包含任何逗号的情况。

jtjikinw

jtjikinw3#

如果知道列数,可以使用cut。例如,如果您的文件有9列,逗号是分隔符:

cut -d',' -f -5

但是,这假定csv文件中的数据不包含任何逗号。cut也会将引号内的逗号解释为分隔符。

sqyvllje

sqyvllje4#

awk -F, '{NF-=4; OFS=","; print}' file.csv

或者可选地

awk -F, -vOFS=, '{NF-=4;print}' file.csv

将删除每行的最后4列。

rqenqsqc

rqenqsqc5#

这可能对你有用(GNU sed):

sed -r 's/(,[^,]*){4}$//' file
ac1kyiln

ac1kyiln6#

当CVS文件中的字段带有引号时,上述方法都不能正常工作,所以只使用-字符作为字段分隔符有点困难。
以下两个帖子现在非常方便:

由于您使用的是GNU awk,因此您可以执行以下两项中的任何一项:

$ awk -v FPAT='[^,]*|"[^"]+"' -v OFS="," 'NF{NF-=4}1'

或者使用任何awk,您可以执行:

$ awk 'BEGIN{ere="([^,]*|\042[^\042]+\042)"
             ere=","ere","ere","ere","ere"$"
       }
       {sub(ere,"")}1'
btqmn9zl

btqmn9zl7#

awk一行程序:

awk -F, '{for(i=0;++i<=NF-5;)printf $i", ";print $(NF-4)}'  file.csv

与cut相比,使用awk的优点是,您不必计算有多少列,以及希望保留多少列。因为你想要的是删除最后4列。
参见测试:

kent$  seq 40|xargs -n10|sed 's/ /, /g'           
1, 2, 3, 4, 5, 6, 7, 8, 9, 10
11, 12, 13, 14, 15, 16, 17, 18, 19, 20
21, 22, 23, 24, 25, 26, 27, 28, 29, 30
31, 32, 33, 34, 35, 36, 37, 38, 39, 40

kent$  seq 40|xargs -n10|sed 's/ /, /g' |awk -F, '{for(i=0;++i<=NF-5;)printf $i", ";print $(NF-4)}'
1,  2,  3,  4,  5,  6
11,  12,  13,  14,  15,  16
21,  22,  23,  24,  25,  26
31,  32,  33,  34,  35,  36
a0x5cqrl

a0x5cqrl8#

这个awk解决方案以黑客的方式

awk -F, 'OFS=","{for(i=NF; i>=NF-4; --i) {$i=""}}{gsub(",,,,,","",$0);print $0}' temp.txt

相关问题