文本处理cut-sort-wc

最新推荐文章于 2024-09-11 14:10:29 发布

wxdoop

最新推荐文章于 2024-09-11 14:10:29 发布

阅读量276

点赞数

分类专栏： linux常用指令文章标签：大数据

本文链接：https://blog.csdn.net/qq_36235098/article/details/100529551

版权

linux常用指令专栏收录该内容

6 篇文章 0 订阅

订阅专栏

	ooxx12121212ooxx
	ooxx 12121212
	oox 12121212
	1212 ooxx 1212
	oo3xx
	oo4xx
	ooWxx
	oomxx
	$ooxx
	oo1234xx
	ooxyzxx

cut：显示切割的行数据

	f：选择显示的列
	s：不显示没有分隔符的行
	d：自定义分隔符

在这里插入图片描述
取一到三列也可以这样做

在这里我们发现第一行数据没有分隔符，但是也出现了。
此时我们可以使用-s

显示第3列

表示有分隔符，并且只显示第三列，上一次执行的前两条都没有第三列数据，因此为空

sort：排序文件的行

n：按数值排序
r：倒序
t：自定义分隔符
k：选择排序列
u：合并相同行
f：忽略大小写

排序可以按字典a,b,c，1，11，2，22
也可以按1，2，3

在这里插入图片描述
不指定参数时，默认以首字母排序

在这里插入图片描述
使用价格排序，默认以字典排序

在这里插入图片描述
以数字排序

以字典排序

使用字母以数字排序，结果还是会以字典排序

wc

在这里插入图片描述

在这里插入图片描述
行数，单词数，字符数（此时要使用cat -A 查看）

在这里插入图片描述

此时就不会出现文件名

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

wxdoop

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

专栏目录

Shell脚本学习指南之文本处理工具

09-15

Shell脚本学习中，文本处理工具是不可或缺的一部分，它们能够帮助我们高效地处理文本数据，进行排序、去重、...在实际应用中，还可以结合其他命令如`grep`、`cut`、`tr`等进行组合使用，以满足更丰富的文本处理需求。

Linux 文本处理 cut sort wc sed awk

binglong180

02-11

853

cut cut：显示切割的行数据 f：选择显示的列 s：不显示没有分隔符的行 d：自定义分隔符 sort：排序文件的行 n：按数值排序 r：倒序 t：自定义分隔符 k：选择排序列 u：合并相同行 f：忽略大小写原文档 oxx12121212ooxx ooxx 12121212 oox 12121212 1212 ooxx 1212 oo3xx oo4xx ooWxx oomxx $ooxx oo...

参与评论您还未登录，请先登录后发表或查看评论

linux正则表达式

qq_42609511的博客

02-03

276

grep：显示匹配行 v：反显示 e：使用扩展正则表达式 //创建一个grep.txt文本 ooxx12121212ooxx ooxx 12121212 oox 12121212 1212 ooxx 1212 oo3xx oo4xx ooWxx oomxx $ooxx oo1234xx ooxyzxx 找出所有含有ooxx的行 grep “ooxx” grep.txt ```java [root@node01 ~]# cat grep.txt oxx12121212ooxx ooxx 121212

linux grep 正则表达式

binglong180

02-10

518

匹配规则匹配操作符 \ 转义字符 . 匹配任意单个字符 [1249a]，[^12],[a-k] 字符序列单字符占位 ^ 行首 $ 行尾 \&lt;,\&gt;：\&lt;abc 单词首尾边...

Linux cut命令教程：如何高效地处理文本(附案例详解和注意事项)

u012964600的博客

12-25

2931

Linux cut命令介绍 cut命令是一个命令行实用程序，它允许你从指定的文件或管道数据中剪切出部分内容，并将结果打印到标准输出。该命令通过字段、分隔符、字节位置和字符来剪切行的部分。 Linux cut命令适用的Linux版本 cut命令在所有主流的Linux发行版中都可以使用，包括但不限于Ubuntu, Debian, Fedora, CentOS等。如果你发现你的系统中没有预装这个命令，你可以通过包管理器来安装它。例如，在基于Debian的系统中，你可以使用apt-get来安装： [linux@ba

运维（17）-shell grep

阿甘兄

09-05

346

1.作用 Linux系统中grep命令是一种强大的文本搜索工具，它能使用正则表达式搜索文本，并把匹配的行打印出来。grep全称是Global Regular Expression Print，表示全局正则表达式版本，它的使用权限是所有用户。 grep家族包括grep、egrep和fgrep。egrep和fgrep的命令只跟grep有很小不同。egrep是grep的扩展，支持更多的re元字符， f...

RHCE技术培训-文本处理工具介绍.pptx

10-11

本单元主要介绍了以下几种工具：less、cat、head、tail、grep、cut、wc、sort、diff和patch。 1. **less 和 cat**： - `cat`命令常用于连接（concatenate）多个文件并将其内容通过STDOUT显示。它也用于查看单个...

Linux 常用文本处理命令和vim文本编辑器

09-14

在Linux系统中，文本处理命令和文本编辑器是日常操作中的重要工具，它们能帮助用户高效地管理和操作文本文件。本文将详细介绍一些常用的Linux文本处理命令以及vim文本编辑器。首先，我们来看一些常见的文本处理...

Linux文本处理命令合集

11-19

### Linux文本处理命令合集详解 #### diff/patch：查找/修补文本差异 - **diff** 命令用于比较两个文件之间的不同之处。 - `diff version1.txt version2.txt`：简单地列出两个文件之间的不同行。 - `diff -u ...

文本处理工具之cut

|汾西公子

09-13

377

cut工具 1、过滤以：为分隔符的第一列 # cut -d: -f1 passwd 2、过滤以：为分隔符的第一列和第7列，并只显示前10行 # cut -d: -f1,7 passwd |head 3、过滤以1到5个字符，并只显示前10行 # cut -c1-5 passwd |head 4、过滤10个字符之后的所有行 5、查看服务器的运行级别 # runlevel 6、过滤服务器运行级别 # runlevel |cut -d ' ' -f2 # runl..

cut 提取文本字符串

杰森-伯恩的博客

01-25

828

业务同学发过来一个需求，需要统计日志记录中匹配关键字"ECOXXXXXXX"的数量有多少 19-01-18 16:28:56.943 [ForkJoinPool.commonPool-worker-4] INFO com.ecall.fasteroms.distribution.task.AutoSplitOutOrderService [269] - ECO180511560 -&g...

flink增量检查点启动恢复的时间是很久的，业务上不能接受，怎么处理

最新发布

goTsHgo的博客

09-11

633

针对增量检查点恢复时间长的问题，可以从多个方面进行优化，包括合并检查点、提升存储性能、优化 RocksDB 配置、并行化恢复过程等。同时，也可以考虑替代方案，如多活架构、预热恢复、降低状态依赖和改进状态管理策略。此外，在业务层面上，适当调整业务容忍度和提高用户透明度也是有效的应对措施。通过综合应用这些策略，可以有效地降低恢复时间并提高业务的连续性和可靠性。

HBase

赞的心路历程

09-09

548

安装包：链接:提取码: 5up7。

衡石分析平台使用手册-新手上路介绍

zandy1011的博客

09-06

1194

以下概括阐述了产品基本理念，这些理念贯穿我们的整个产品开发和设计，并最终体现为产品的功能形态。我们希望衡石分析平台可以成为各个领域的行业人员进行业务分析的称手兵器，简单稳定，容易上手。

如何确定kafka与zookeeper版本的对应关系

别来沾边儿

09-09

665

真希望官方可以贴心的整理出所有版本和zookeeper的对应关系，从目前kafka发展的趋势来看，都已经移除zookeeper依赖了，这件事也是木戏，哈哈哈；从解压目录我们可以kafka的源码是基于gradle的，我们只需要去gradle的依赖中找找zookeeper依赖的版本即可；搜索zookeeper关键字，可以看到Kafka2.7.2对应的Zookeeper版本为3.5.9。大家可以额外思考一下，如果用更高版本的zookeeper，kafka运行会不会有问题？这嘎嘎一列版本对应关系，哪来的呢？

大数据Flink（一百一十四）：PyFlink的作业开发入门案例

Lansonli（蓝深李）的博客

09-07

1039

编写Flink程序，读取表中的数据，并根据表中的字段信息进行统计每个单词出现的数量。编写Flink程序，接收socket的单词数据，并以逗号进行单词拆分打印。注意：socketTextStream后的ip是云服务器ecs的公网ip。注意read_text_file后的地址要与实际地址对应。安装nc: yum install -y nc）（如果没有安装可以使用yum。开启netcat，监听。在ecs依次发送单词。

Dubbo 与 Zookeeper 在项目中的应用：原理与实现详解

lssffy的博客

09-11

1517

Dubbo 是阿里巴巴开源的高性能、轻量级的 RPC 框架，主要用于提供分布式服务架构下的远程服务调用。Dubbo 的设计初衷是为了解决微服务架构下服务之间的远程调用、负载均衡、服务路由等问题。它通过将每个服务都模块化并封装为独立的服务，使得服务间可以通过网络进行调用。Zookeeper 是一个分布式协调服务，旨在解决分布式系统中的数据管理问题。它可以提供配置管理、分布式锁、集群管理、服务发现等功能。Zookeeper 采用树形数据结构存储数据，并通过简单的 API 实现高效的节点监控和管理。

三.海量数据实时分析-FlinkCDC实现Mysql数据同步到Doris

墨家巨子@俏如来

09-07

1320

通过上面的 route 配置，会将 app_db.orders 表的结构和数据同步到 ods_db.ods_orders 中。这样，就可以将诸如 app_db.order01、app_db.order02、app_db.order03 的表汇总到 ods_db.ods_orders 中。参考：https://nightlies.apache.org/flink/flink-cdc-docs-release-3.0/zh/docs/get-started/quickstart/mysql-to-doris/

linux 文本处理

04-17

Linux文本处理是指在Linux操作系统下对文本文件进行各种操作和处理的技术。Linux提供了丰富的命令行工具和脚本语言，可以方便地进行文本处理。以下是一些常用的Linux文本处理工具和技术： 1. grep：用于在文本中搜索指定的模式，并输出匹配的行。可以使用正则表达式进行高级搜索。 2. sed：流编辑器，用于对文本进行替换、删除、插入等操作。可以通过脚本编写复杂的文本处理逻辑。 3. awk：强大的文本处理工具，可以按照指定的字段进行分割、过滤、计算等操作。支持自定义函数和变量。 4. cut：用于按列切割文本文件，可以选择输出指定的列。 5. sort：对文本进行排序，默认按照字母顺序排序，也可以按照数字、日期等其他方式排序。 6. uniq：去除重复的行，只保留唯一的行。 7. tr：用于字符转换，可以进行大小写转换、字符替换等操作。 8. wc：统计文件中的行数、单词数和字符数。 9. head和tail：分别用于显示文件的前几行和后几行。 10. awk、sed和grep的正则表达式：正则表达式是一种强大的模式匹配语言，可以用于在文本中查找、替换和过滤。这些工具和技术可以组合使用，实现复杂的文本处理任务。在Linux中，文本处理是非常常见和重要的操作，对于系统管理员、开发人员和数据分析师等来说都是必备的技能。