Shell脚本 | 数据处理相关常用命令

最新推荐文章于 2024-04-15 17:32:16 发布
最新推荐文章于 2024-04-15 17:32:16 发布
阅读量828 收藏 2
点赞数
分类专栏： Linux & Shell Script 文章标签： linux shell
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43875517/article/details/107254693
版权

常用命令

写入文件路径到lst

  • 写入当前文件夹下文件的绝对路径：ls | sed.
// 写入当前文件夹下全部文件绝对路径
ls | sed "s:^:`pwd`/:" > all_file.lst
// 写入当前文件夹下第一个文件绝对路径
ls | sed "s:^:`pwd`/:" head -n 1 > first_file.lst
  • 写入指定文件夹下特定后缀文件的绝对路径： ls.
ls -R $dir/*.txt > text.lst
  • 写入指定文件夹(dir)下所有名称含字符串string的txt文件绝对路径： find | grep.
最低0.47元/天 解锁文章
Dazza Lark
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Shell 文件
123
09-26 2万+
  Shell 文件是以某种方式将一些命令放在一起得到的文件，常称为 Shell 脚本。 Shell 文件通常以“#!/bin/sh”开始， #!后面指定解释器，如下是一个简单的 Shell 文件的内容： #!/bin/sh echo "hello world!"   文件名为 aa.sh，增加可执行权限后，在 Shell 中即可运行，将在终端打印hello world!”字符串。 $chmod +x aa.sh $./aa.sh hello world!   执行 Shell 脚本有多种方式：   （
【linux】飞书linux版本安装
ipfpm的博客
01-24 6581
（1）官网下载地址：飞书音视频电话会议APP软件下载-考勤打卡软件下载-飞书APP官网 选中linux版本下载。 （2）下载完成后，使用sudo dpkg -i 安装。（自己的是ubuntu系统） （3）启动飞书bytedance （4）输入用户名密码即可 （5）注意如果登录时出现： 可以尝试把飞书路径 ~/. config/LarkShell文件夹删除，然后重启飞书。 ...
shell中的数据处理：grep, sed, cut, awk_cut awk grep
最新发布
m0_60388419的博客
04-15 756
利用cut是分不了ll的，因为ll的默认输出格式是table而不是tab进行分隔的，而如果为cut执行分隔符，那么也只能是一个字符的。但是awk不同awk默认的是n个空格作为分隔符的，并且awk也支持分隔符为多个字符。awk的简介：其实一门编程语言，支持条件判断，数组，循环等功能，与grep，sed被称为linux三剑客。ll -Sh挺好用的，按顺序，从大到小。eg:以’:'为分隔符，截取出/etc/passwd的第二列到最后一列。eg:以’:'为分隔符，截取出/etc/passwd的第一列到第三列。
清理脚本
weixin_30872733的博客
02-14 87
清理脚本 1 #!/bin/sh 2 3 rm -rf /etc/crontab 4 echo "SHELL=/bin/bash">>/etc/crontab 5 echo "PATH=/sbin:/bin:/usr/sbin:/usr/bin">>/etc/crontab 6 echo "MAILTO=root">>/etc/cr...
9 个实用 Shell 脚本，建议收藏！
虫虫的博客
02-24 671
9 个实用 Shell 脚本，建议收藏！
25个好用的Shell脚本常用命令分享
09-15
这里我们将深入探讨25个实用的Shell脚本常用命令，它们涵盖了文件操作、进程管理、文本处理和网络通信等多个方面。 1. `du -h` 和 `sort -rn`: 这两个命令组合在一起可以列出所有目录的大小，并按照大小进行降序...
mysql常用备份命令和shell备份脚本分享
12-14
本文将详细介绍MySQL的常用备份命令以及如何编写shell脚本来自动化备份过程。 首先，让我们来看看MySQL提供的几个基本备份命令： 1. **备份多个数据库**： 使用`mysqldump`工具，你可以一次性备份多个数据库。...
shell基础认识和常用命令学习
09-20
Linux Shell 基础知识和常用命令学习 Shell 是一个命令行解释器，提供了用户与操作系统之间的交互接口。Shell 的主要功能是读取用户的命令，解释命令，并将其传递给操作系统执行。Linux 中有多种 Shell，常用的有 ...
shell 调度的常用命令
01-20
本文将深入讲解如何使用shell脚本来处理日期、变量以及调度DML（数据操作语言）查询。 首先，我们要理解shell脚本在大数据场景中的作用。当开发出DML语句，如SQL查询后，我们需要一个自动化的方式来执行这些查询，...
shell脚本shell脚本shell脚本
02-19
Shell脚本是Linux/Unix操作系统中的命令行脚本语言，用于自动化执行一系列系统操作。它是一种强大的工具，能够帮助用户批量处理任务、管理系统资源、执行周期性任务以及整合多个命令到一个可执行文件中。在深入讲解...
shell 数据处理
cnhunke的博客
02-09 671
在linux系统中，大多数时候我们从键盘读取输入，在终端显示输出，而我们在键盘中输入的内容，多数都是执行命令，这些命令属于终端程序，除了终端程序还有图形程序和屏幕程序（如vim），不管是哪一种程序都会涉及到输入，输出，错误，多数情况下，我们在键盘输入信息，在显示器查看信息（正确的信息和错误的信息），这些输入的信息我们称之为标准输入（可以用0表示），输出的信息我们称之为标准输出（可以用1表示），而错误的信息（可以用2表示），我们称之为标准错误。利用前面的提到0，1，2这三个数字，我们可以这样做。
shell中的数据处理：grep, sed, cut, awk_cut awk grep(1)
2401_83973943的博客
04-14 377
c #以字符为单位进行分割 character注意：不加-d选项，默认为制表符，不是空格/bin/bash #代表可以登录的用户/sbin/nologin #代表不可以登录的用户，就是系统中自带的用户eg:以’:'为分隔符，截取出/etc/passwd的第一列跟第三列eg:以’:'为分隔符，截取出/etc/passwd的第一列到第三列eg:以’:'为分隔符，截取出/etc/passwd的第二列到最后一列：ll之后的列为什么我用ll|cut -f1取到的是一整个字段而不是一列？
shell脚本数据处理
qq_32330469的博客
07-04 821
大数据，数据开发相关以及数据运维相关脚本总结
什么是shell？shell的用途是啥？
Syntactic Sugar
09-29 4308
场景：只知道写shell脚本，却不知道什么是shell？那shell是什么呢？找到了之前在腾讯课堂上看的视频，这是课件笔记 你学Linux的话，不懂shell等同于不懂linux shell是操作系统的最外层，shell可以合并编程语言以控制进程和文件，以及启动和控制其他程序。 简单来说：shell就是一个用户跟操作系统之间交互的命令解释器 感觉像是java和虚拟机的关系一样 在一些复杂的Linux维护工作中,大量重复的输入和交互操作不但费时费力,而且容易出错. 编写脚本的好处:批量的处
Linux定时调度shell脚本（Cron）
热门推荐
熊浪的博客
10-24 1万+
sudo crontab -e 5 * * * *每小时第5分钟执行 */5 * * * *每5分钟执行 0 2 * * * 每天凌晨2点执行 cron是一个linux下的定时执行工具，可以在无需人工干预的情况下运行作业。由于Cron 是Linux的内置服务，但它不自动起来，可以用以下的方法启动、关闭这个服务： /sbin/service crond start //启动服务
shell中的数据处理：grep, sed, cut, awk
QING的博客
07-20 653
简单介绍 grep、cut、awk、sed 常常应用在查找日志、数据、输出结果等等，并对我们想要的数据进行提取。 通常grep，sed命令是对行进行提取，cut跟awk是对列进行提取。 简单理解：grep是简化版的sed，cut是简化版的awk grep命令 grep应用场景：通常对数据进行 行的提取 语法： grep [选项]...[内容]...[file] -v #对内容进行取反提取，也就是去除没有这个内容的行 -n #对提取的内容显示行号 -w #精确匹配 ????-o
shell数据处理命令
09-27 126
1.sort - sort lines of text files
3.3 shell处理数据文件
QiuSaMa的博客
10-02 118
1.排序数据 命令：sort 常用参数： -n 把数字识别成数字而不是字符，并按值的大小排序 -M 按月排序 -r 反序排序，升序变降序 2.搜索数据 命令：grep 格式： grep [options] pattern [file] 如：搜索文件中指定字符的行：（在file1中搜索字符t的行） grep -n t file1 grep命令还可..
shell 脚本常用命令
05-31
以下是 Shell 脚本中常用的命令： 1. echo：输出文本或变量值 2. read：接收用户输入 3. if：条件语句 4. for：循环语句 5. while：循环语句 6. case：多分支语句 7. test：测试文件或字符串是否存在，以及比较数值 8. grep：文本搜索工具 9. sed：流编辑器，用于文本替换 10. awk：文本处理工具，可进行简单数据分析和处理 此外，还有一些常用的命令，如 cd（切换目录）、ls（列出目录中的文件）、mkdir（创建目录）等。这些命令在 Shell 脚本中也常被使用。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值