我有一个包含重复值的文件。基于一些字段(字段2,field3),我需要删除重复项,并更改字段(ID)的顺序,这是文件的唯一关键字。我怎样才能做到这一点呢?
例如。我的文件(test.txt)包含
1,Eng,ECE
2,Eng,ECE
3,Eng,CS
4,Eng,CS我希望输出结果如下
1,Eng,ECE
2,Eng,CS我已经使用以下命令删除了重复项
awk -F ',' '!a[$2$3]++' test.txt > test1.txt现在如何更改ID字段的顺序?
发布于 2019-11-29 01:59:23
您可以使用
awk -F ',' -v "OFS=," '!a[$2$3]++ { $1=++i; print}'这将对从1开始的第一个字段重新编号。
发布于 2019-11-29 14:04:45
另一种方法:
awk 'BEGIN { FS=OFS="," }
($2,$3) in seen { next }
{ seen[$2,$3] = 1; print ++seqno, $2, $3 }' test.txt
1,Eng,ECE
2,Eng,CShttps://stackoverflow.com/questions/59093016
复制相似问题