linux中的ubiq命令用途,Linux uniq 命令

Linux uniq 命令

Linux uniq 命令用于检查及删除文本文件中重复出现的行列，一般与 sort 命令结合使用。

uniq 可检查文本文件中重复出现的行列。

语法

uniq [-cdu][-f][-s][-w][--help][--version][输入文件][输出文件]

参数：

-c或--count 在每列旁边显示该行重复出现的次数。

-d或--repeated 仅显示重复出现的行列。

-f或--skip-fields= 忽略比较指定的栏位。

-s或--skip-chars= 忽略比较指定的字符。

-u或--unique 仅显示出一次的行列。

-w或--check-chars= 指定要比较的字符。

--help 显示帮助。

--version 显示版本信息。

[输入文件] 指定已排序好的文本文件。如果不指定此项，则从标准读取数据；

[输出文件] 指定输出的文件。如果不指定此选项，则将内容显示到标准输出设备(显示终端)。

实例

文件testfile中第 2、3、5、6、7、9行为相同的行，使用 uniq 命令删除重复的行，可使用以下命令：

uniq testfile

testfile中的原有内容为：

$ cat testfile #原有内容

test 30

Hello 95

Linux 85

使用uniq 命令删除重复的行后，有如下输出结果：

$ uniq testfile #删除重复行后的内容

test 30

Hello 95

Linux 85

检查文件并删除文件中重复出现的行，并在行首显示该行重复出现的次数。使用如下命令：

uniq -c testfile

结果输出如下：

$ uniq -c testfile #删除重复行后的内容

3 test 30 #前面的数字的意义为该行共出现了3次

4 Hello 95 #前面的数字的意义为该行共出现了4次

2 Linux 85 #前面的数字的意义为该行共出现了2次

当重复的行并不相邻时，uniq 命令是不起作用的，即若文件内容为以下时，uniq 命令不起作用：

$ cat testfile1 # 原有内容

test 30

Hello 95

Linux 85

test 30

Hello 95

Linux 85

test 30

Hello 95

Linux 85

这时我们就可以使用 sort：

$ sort testfile1 | uniq

Hello 95

Linux 85

test 30

统计各行在文件中出现的次数：

$ sort testfile1 | uniq -c

3 Hello 95

3 Linux 85

3 test 30

在文件中找出重复的行：

$ sort testfile1 | uniq -d

Hello 95

Linux 85

test 30

linux中的ubiq命令用途,Linux uniq 命令相关推荐

Linux中新建用户用不了sudo命令问题：rootr is not in the sudoers file.This incident will be reported解决
Linux中新建用户用不了sudo命令问题:rootr is not in the sudoers file.This incident will be reported解决参考:https://b ...
suse 新增用户oracle,在SUSE Linux中让其他用户能运行Oracle命令
SUSE Linux中让其他用户能运行Oracle命令的方法介绍: suid/guid的问题: 要求非Oracle用户也能运行sqlplus等oracle命令. 解决方法: 假如希望设置s u i d ...
linux 中常见的压缩和解压缩的命令
# linux 中常见的压缩和解压缩的命令一.tar 1.解压: tar zxvf filename.tar 2.压缩: tar czvf filename.tar dirname 二.gz 1.解 ...
字串处理 expr在linux中是一个功能非常强大的命令。通过学习做一个小小的总结。
expr在linux中是一个功能非常强大的命令.通过学习做一个小小的总结. 1.计算字符串的长度.我们可以用awk中的length(s)进行计算.我们也可以用echo中的echo ${#string} ...
linux中的 ip addr 和 ip link命令详解
linux中的 ip addr 和 ip link命令详解一.ip addr命令我是使用的linux系统是redhat7.3,其它linux的相关操作大同小异(在这里不做赘述) 1.查看 (1). ...
在windows或linux中使用VIM/VI复制粘贴内容命令及设置大全
在windows或linux中使用VIM/VI复制粘贴内容命令及设置大全行复制: [yy]复制光标所在行 [p]在光标位置粘贴复制的内容多行复制: [v]从当前位置进行可视化模式([Ctrl+v] ...
Linux中vi不保存强制退出的命令是什么？
本篇文章介绍了Linux中vi不保存强制退出的命令,相信大部分人都不太了解,为了让大家更加了解,小编给大家总结了以下内容,话不多说,一起往下看吧. 所有的 Unix Like 系统都会内建 vi 文书 ...
linux命令wget的url路径太长,Linux中WGET下载https链接及WGET命令的详解
Linux中WGET下载https链接及WGET命令的详解使用如下的命令下载https链接: ```bash wget -r -np -nd --accept=gz --no-check-certi ...
Linux下dpkg的用法,linux中管理包的apt和dpkg命令用法
1,apt-get命令 apt-get是debian,ubuntu发行版的包管理工具,与红帽中的yum工具非常类似,适用于deb包管理式的操作系统,主要用于自动从互联网的软件仓库中搜索.安装.升级.卸 ...
19. linux中权限详解，Linux权限位，读写执行权限真正含义，chmod详解
linux中权限详解,Linux权限位,读写执行权限真正含义,chmod详解文章目录 Linux权限位读写执行三种权限真正含义和作用权限对文件的作用权限对目录的作用示例 chmod 使用数 ...

linux中的ubiq命令用途,Linux uniq 命令

linux中的ubiq命令用途,Linux uniq 命令相关推荐

最新文章

热门文章