首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >如何基于多个动态列删除重复项

问如何基于多个动态列删除重复项
EN

Unix & Linux用户
提问于 2022-03-28 22:36:55
回答 1查看 127关注 0票数 0

使用bash(awk),如何根据多列从管道分隔的文件中删除重复项,但需要将列作为输入参数传递。我在文件中有下面的数据

代码语言:javascript
复制
Insert|val1|val2|val3|val4 
Insert|val1a|val2|val3a|val4

我想要删除基于输入参数的重复项。有时,我希望使用位置1和位置3删除行,有时使用position2和position3。我在用这个

代码语言:javascript
复制
 awk -F, '!seen[$1,$3 ]++ '

但是不知道如何参数化$1,$2

EN

回答 1

Unix & Linux用户

回答已采纳

发布于 2022-03-30 13:10:29

这可能就是你想要做的:

代码语言:javascript
复制
$ awk -v c='1 3' -F'|' 'BEGIN{split(c,k," ")} {key=""; for (i in k) key=key FS $(k[i])} !seen[key]++' file
Insert|val1|val2|val3|val4
票数 0
EN
页面原文内容由Unix & Linux提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://unix.stackexchange.com/questions/697161

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档