linux命令详解——uniq，wc，tr

于 2024-03-23 00:31:04 发布
阅读量781 收藏 4
点赞数 26
分类专栏： linux命令 文章标签： linux 运维 服务器
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/hzk45679/article/details/136950703
版权

 uniq

uniq可以对查看内容去重

但在我们使用时会发现，uniq的去重逻辑是，当遇到连续多行内容相同时，去除重复行，而对间隔重复内容，无法实现去重功能

这里想到可以将sort与uniq结合使用，先对文件内容进行排序，将相同内容行紧邻，然后再使用uniq去重（使用管道符将一个命令的结果作为另一个命令的输入）

对于uniq命令来说，可以使用参数-c来统计重复行出现次数

wc

 wc(word counts)可以统计出现的单词字节数字，出现的次数，并进行打印

其常用参数有，-l打印行数，-c打印字节数，-w打印单词数，-L打印最长行的长度

值得注意的是，这里advd只有四个字符，使用wc统计字符数却有5个，是因为末尾还有一个$符号表示行结尾

tr

 tr命令可以从标准输入中替换删除增减字符集

-d参数可以对指定字符集内容进行删除

除了使用管道符，还可以使用重定向符号，使用文件内容作为标准输入 

ZK_H
关注
  • 26
    点赞
  • 踩
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
LINUX的基本命令
yaoyaoya_cth的博客
04-11 1227
Linux的基本命令
Linux系统CentOS-7版本的命令（常用）
cdbdqn001的博客
01-02 1万+
1、查看Linux虚拟机内核版本信息： cat /etc/redhat-release 2、查看Linux虚拟机当前版本： uname -a 3、查看本地主机所有网卡（接口）信息： ip addr 4、设置服务器访问的DNS： vi或者vim /etc/resolv.conf #一般情况下是设置nameserver 114.114.114.114 5、当使用ping + ip地址或...
`sort | 的一个版本uniq -c` 输出在解析每一行时实时更新
06-28
uniqtoosort | uniq -c版本sort | uniq -csort | uniq -c输出在解析每一行时实时更新。用法将一些基于行的东西输送到uniqtoo ，就像你在sort | uniq -csort | uniq -c 。这是一个计算此存储库中文件扩展名的示例，其间有 0.5 秒的延迟。您还可以将输入作为文件或文件描述符作为参数提供。$ uniqtoo input.txt安装锈/货物$ cargo install uniqtoo二进制文件将放在你的~/.cargo/bin ，它应该在你的 shell 的$PATH 。码头工人可以从 Docker Hub 和 GitHub Container Registry 获得带有二进制文件的容器。jakewharton/uniqtooghcr.io/jakewharton/uniqtoo使用docker run而不是直接使用二进制文件。input_command | docker run -i -a STDIN -a STDOUT jakewharton/uniqtoo执照Copyright 2021 Jake Wharton
linux uniq
清闲居
01-14 1万+
uniq [选项] 文件 说明：这个命令读取输入文件，并比较相邻的行。在正常情况下，第二个及以后更多个重复行将被删去，行比较是根据所用字符集的排序序列进行的。该命令加工后的结果写到输出文件中。输入文件和输出文件必须不同。如果输入文件用“- ”表示，则从标准输入读取。 该命令各选项含义如下：、 – c 显示输出中，在每行行首加上本行在文件中出现的次数。它可取代- u和- d选项。
Linux 中uniq -c
chengjue3354的博客
12-25 6921
今天通过日志来统计系统的执行情况，通过uniq -c之后发现还是存在重复列。 查看uniq的说明，uniq去重，应该是行之间连续的重复。所以先进行排序 sort，在uniq -c 进行统计 ...
Linux命令篇之wc命令和tr命令
weixin_34279061的博客
02-25 204
wc统计文件里面有多少单词，多少行，多少字符。wc语法[root@www~]# wc [-lwm]选项与参数：-l ：仅列出行；-w ：仅列出多少字(英文单字)；-m ：多少字符；默认使用wc统计/etc/passwd#wc /etc/passwd40 451719 /etc/passwd40是行数，45是单词数，1719是字节数wc的命令比较简单使用，每个参数...
linux sort uniq -c
朝着梦想 渐行前进
08-25 1717
linux sort
linux 列转行函数,Linux 文本行列转换
weixin_34052916的博客
05-03 1202
使用awk进行行列转换假设有一个文件test，包含的数据遵循以下格式：同一行数据，单词之间为1个空格" "每一行都有同样多的数据，个数相同处理命令：awk '{for(i=1;i<=NF;i=i+1){a[NR,i]=$i}}END{for(j=1;j<=NF;j++){str=a[1,j];for(i=2;i<=NR;i++){str=str " " a[i,j]}prin...
Linux 私房菜 笔记（完结）
qq_57065913的博客
03-14 3783
目录 第一章 计算机概论 第一章 计算机概论
linux常用命令-part2
热门推荐
chinayuan的专栏
05-01 2万+
Ubuntu,Fedora,Debian,CentOS中文怎么发音 有奔头， 费德勒， 迪扁， 桑托斯。 乌版图 菲朵拉 德槟 森头斯 ================================ 使用find和wc命令统计代码行数 ================================ wc -l `find . -name "*.js" | xargs`
uniqify:uniq和uniq -c用于网络！ http
04-28
cljsbuild-example-simple 这是一个使用 ， 和的示例Web应用程序。 它演示了如何使用lein-cljsbuild将ClojureScript构建到JavaScript中。 要处理此示例项目，您首先需要安装 。 运行应用 设置并启动服务器，如下所示： $ cd example-projects/simple $ lein cljsbuild once $ lein ring server-headless 3000 现在，将您的Web浏览器指向http://localhost:3000 ，然后查看运行中的Web应用程序！
linux中uniq c命令详解,linux uniq 命令整理
weixin_34357614的博客
05-01 1344
无论是工作中使用还是应付各种面试，linux uniq 都是必须要掌握的 linux 基本命令之一。uniq 一般和 sort 一起用，用来对排序好的内容去重uniq 对排序好的内容进行去重语法：uniq[-cdu][-f][-s][-w][--help][--version][输入文件][输出文件]选项：-c或--count在每列旁边显示该行重复出现的次数-d或--repeated仅显示重...
linux中uniq c命令详解,Linux系统中uniq命令的基本使用教程
weixin_42357916的博客
05-01 1万+
uniq [选项] 文件说明：这个命令读取输入文件，并比较相邻的行。在正常情况下，第二个及以后更多个重复行将被删去，行比较是根据所用字符集的排序序列进行的。该命令加工后的结果写到输出文件中。输入文件和输出文件必须不同。如果输入文件用“- ”表示，则从标准输入读取。该命令各选项含义如下：、– c 显示输出中，在每行行首加上本行在文件中出现的次数。它可取代- u和- d选项。– d 只显示重复行。– ...
Linux操作系统 uniq命令
WORLD_NO_ONE的博客
10-06 333
uniq 命令经常和 sort 命令结合在一起使用。uniq 从标准输入或单个文件名参数接受数据有序列表，默认情况下，从数据列表中删除任何重复行。 uniq 只能用于排过序的数据输入，因此，uniq 要么使用管道，要么将排过序的文件作为输入，并总是以这种方式与 sort 命令结合起来使用。 uniq 命令是 unique 的缩写。 命令格式 uniq [选项][文件名] 常用参数 参数 描述 -c 在每行前加上表示相应行目出现次数的前缀编号 -d 只输出重复的行 -u 只显示唯一的行 -D 显示所有重复的行
在linux中的uniq命令,在linux 操作系统中uniq命令的说明和使用
weixin_42131790的博客
05-02 76
在linux 操作系统中uniq命令的说明和使用uniq命令的作用：显示唯一的行，对于那些连续重复的行只显示一次！接下来通过实践实例说明：[root@stu100 ~]# cat testboy took bat homeboy took bat homegirl took bat homedog brought hat homedog brought hat homedog brought ha...
Linux Shell脚本编程－－Uniq命令
thewebcode
08-02 180
uniq uniq命令可以去除排序过的文件中的重复行，因此uniq经常和sort合用。也就是说，为了使uniq起作用，所有的重复行必须是相邻的。 uniq语法 [root@www ~]# uniq [-icu] 选项与参数： -i ：忽略大小写字符的不同； -c ：进行计数 -u ：只显示唯一的行 testfile的内容如下 cat testfile ...
Linux下uniq命令详解及C/C++代码实现
chen1415886044的博客
09-15 2379
Linux uniq 命令用于从文件中删除所有重复的行。uniq 命令的一个限制是它只能识别文件中相邻或彼此相邻的重复项。它可以单独使用，但通常与其他命令一起使用，例如识别文件中的冗余信息。首先执行“uniq”命令将仅识别相邻的重复项，然后使用“sort”命令将它们按字母顺序排序。uniq命令用于删除有序文件中的重复行并将结果输出到标准输出。从上面的输出中，命令“sort test1.txt | uniq -c”计算一个单词重复的次数。
Linux命令：uniq命令和wc命令
最新发布
dl_11的博客
03-04 774
uniq 命令用于检查及删除文本文件中重复出现的行列。它通过对输入文本进行比较，找出相邻的重复行，并只输出其中的一行。如果文件没有排序，uniq 默认只会删除相邻的重复行，不会删除不相邻的重复行。因此，通常在使用 uniq 之前，会先使用 sort 命令对文件进行排序。wc 命令可以统计文本文件中的字符数、单词数和行数。它对于快速获取文件的统计信息非常有用，比如检查文件的大小、评估文本内容的长度等。wc 命令可以处理各种类型的文本文件，包括纯文本文件、源代码文件等。
Linux常用命令——uniq命令
AI的博客
01-16 1560
用于报告或忽略文件中的重复行，一般与sort命令结合使用。报告或忽略文件中的重复行。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值