知识屋:更实用的电脑技术知识网站
所在位置:首页 > 操作系统 > linux

linux去掉文件重复行

发布时间:2014-09-05 13:56:54作者:知识屋

linux去掉文件重复行
 
在统计某些数据的时候,文件中往往存在一些重复的行,
那如何去掉这些重复的行呢?
 
用强大的awk可以轻松实现文件内容行去重。
awk '!a[$0]++' 文件
 
例如文件 123.txt 的内容是
1
1
2
2
3
3
awk '!a[$0]++' 123.txt
 
将会输出
1
2
3
 
(免责声明:文章内容如涉及作品内容、版权和其它问题,请及时与我们联系,我们将在第一时间删除内容,文章内容仅供参考)
收藏
  • 人气文章
  • 最新文章
  • 下载排行榜
  • 热门排行榜