LinuxSir.cn,穿越时空的Linuxsir!

 找回密码
 注册
搜索
热搜: shell linux mysql
查看: 1373|回复: 4

求助~不排序有什么办法删除掉文件中的重复行?

[复制链接]
发表于 2008-5-7 15:31:49 | 显示全部楼层 |阅读模式
想把文本里重复的行留下一行后其它重复的都删掉
要怎么做呢?
sort + uniq 要排序。。
郁闷
先谢谢了
发表于 2008-5-7 16:06:40 | 显示全部楼层
awk '!a[$0]++'
回复 支持 反对

使用道具 举报

 楼主| 发表于 2008-5-7 16:20:26 | 显示全部楼层
谢谢ls的
这么短的一句。。
佩服一下
回复 支持 反对

使用道具 举报

发表于 2008-5-7 19:53:56 | 显示全部楼层
分成这两种情况,应该有利于大家查询:

1.重复的多行只留下一行(不管相邻还是不相邻)
2.相邻的重复的多行只留下一行

ly5066113在上面写的是第一种,如果是第二种情况的话:
sed '$!N; /^\(.*\)\n\1$/!P; D'
网上抄的作弊条。。。。。
回复 支持 反对

使用道具 举报

发表于 2008-5-8 10:21:46 | 显示全部楼层
好方法,学习了。
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 注册

本版积分规则

快速回复 返回顶部 返回列表