如何在unix bash中删除文本文件中的重复行？

发布时间：2020-12-16 01:14:24 所属栏目：安全来源：网络整理

导读：参见英文答案 Remove duplicate entries using a Bash script 4个我只有一个包含多行的file.txt,我想删除重复的行而不对文件进行排序.我可以在unix bash中使用什么命令？ file.txt的样本 orangejuice;orange;juice_applepineapplejuice;pineapple;juice_pin

参见英文答案 > Remove duplicate entries using a Bash script 4个
我只有一个包含多行的file.txt,我想删除重复的行而不对文件进行排序.我可以在unix bash中使用什么命令？

file.txt的样本

orangejuice;orange;juice_apple
pineapplejuice;pineapple;juice_pineapple
orangejuice;orange;juice_apple

输出样本：

orangejuice;orange;juice_apple
pineapplejuice;pineapple;juice_pineapple

使用awk的一种方法：

awk '!a[$0]++' file.txt

（编辑：李大同）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!