awk指定列修改

最新推荐文章于 2023-04-05 19:26:19 发布
置顶 最新推荐文章于 2023-04-05 19:26:19 发布
阅读量2.5w 收藏 14
点赞数 9
分类专栏： Linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/wangxin6722513/article/details/46050615
版权

遇到个处理文本文件的问题

cat test.txt

"355356"        "1700870"       "1"     "0202"  ""
"355356"        "1700871"       "2"     ""    "02046"   
"355356"        "1700870"       ""    "2"     "02046"    
"1700870"       "1700873"       ""    "1"     "0202" 
把第2列是1700870的数据改为1700888

起初我得想法是直接用sed,

sed -i "s,1700870,1700888,g"  test.txt

得到数据如下，一开始我认为这种方法并无问题，可后来发现犯了很傻的错误。 第一列的最后一个字段也被替换了。

"355356"        "1700888"       "1"     "0202"  ""
"355356"        "1700871"       "2"     ""    "02046"   
"355356"        "1700888"       ""    "2"     "02046"    
"1700888"       "1700873"       ""    "1"     "0202"

后来用awk去解决这个问题

思路是对第二列等于1700870的行做处理

awk -F "\"" '{if ($4==1700870) $4=1700888}'  test.txt
什么结果都没有打印，后来在网上搜了一下，想打印处理过的文本要么用print，要么在最后加个1，这里的1是个省略符，等价于 /.*/ 如下：

awk -F "\"" '{if ($4==1700870) $4=1700888}1'  test.txt

结果如下

 355356          1700888         1       0202     
"355356"        "1700871"       "2"     ""    "02046"   
 355356          1700888               2       02046     
"1700870"       "1700873"       ""    "1"     "0202"
不知道为什么引号没了，准定不符合规则，原因是在awk处理每一行数据的时候会把输出分隔符用默认的”空格“代替，所以我们发现每个

处理过的行都没了引号。

搜索了一下awk的用法，发现awk用法如下：

 
 

  
  $0           表示整个当前行
 
 

 
 

  
  $1           每行第一个字段
 
 

 
 

  
  NF          字段数量变量
 
 

 
 

  
  NR          每行的记录号，多文件记录递增
 
 

 
 

  
  FNR        与NR类似，不过多文件记录不递增，每个文件都从1开始
 
 

 
 

  
  \t            制表符
 
 

 
 

  
  \n           换行符
 
 

 
 

  
  FS          BEGIN时定义分隔符
 
 

 
 

  
  RS
  
         
  
  输入的记录分隔符， 默认为换行符(即文本是按一行一行输入)
 
 

 
 

  
  ~            匹配，与==相比不是精确比较
 
 

 
 

  
  !~           不匹配，不精确比较
 
 

 
 

  
  ==         等于，必须全部相等，精确比较
 
 

 
 

  
  !=           不等于，精确比较
 
 

 
 

  
  &&　     逻辑与
 
 

 
 

  
  ||             逻辑或
 
 

 
 

  
  +            匹配时表示1个或1个以上
 
 

 
 

  
  /[0-9][0-9]+/   两个或两个以上数字
 
 

 
 

  
  /[0-9][0-9]*/    一个或一个以上数字
 
 

 
 

  
  FILENAME 文件名
 
 

 
 

  
  OFS      
  
  输出字段分隔符， 默认也是空格，可以改为制表符等
 
 

 
 

  
  ORS        输出的记录分隔符，默认为换行符,即处理结果也是一行一行输出到屏幕
 
 

 
 

  
  -F'[:#/]'   定义三个分隔符

可以在输出时候自己指定输出分隔符OFS。

awk -F "\"" '{OFS="\""} {if ($4==1700870) $4=1700888}1'  test.txt

结果如下符合需求：

"355356"        "1700888"       "1"     "0202"  ""
"355356"        "1700871"       "2"     ""    "02046"   
"355356"        "1700888"       ""    "2"     "02046"    
"1700870"       "1700873"       ""    "1"     "0202"

但上面的awk语法太难看，所以改进一下

awk  'BEGIN{FS=OFS="\""} {if ($4==1700870) $4=1700888}1'  test.txt
把定义的输入和输出字符放到BEGIN里面，增强了程序的可读性。


JNeuman
关注
  • 9
    点赞
  • 踩
  • 14
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
linux中修改某行某列字符串,Linux替换指定列的字符串（awk 命令）
weixin_32224617的博客
04-28 1万+
假设有文件test.txt，想把test.txt文件第三列含有的good替换为bye，并把替换后的文件保存为test_bye.txt，只需要如下命令。test.txtgo go good gomy my go goodbye my good byetest_bye.txtgo go bye gomy my go goodbye my bye byeawk -F " " '{if ($3==good...
LINUX与UNIX_Shell编程指南(上）
08-23
目 录 译者序 前言 第一部分 shell 第1章 文件安全与权限 1 1.1 文件 1 1.2 文件类型 2 1.3 权限 2 1.4 改变权限位 4 1.4.1 符号模式 4 1.4.2 chmod命令举例 5 1.4.3 绝对模式 5 1.4.4 chmod命令的其他例子 6 1.4.5 可以选择使用符号模式或绝对模式 7 1.5 目录 7 1.6 suid/guid 7 1.6.1 为什么要使用suid/guid 8 1.6.2 设置suid/guid的例子 8 1.7 chown和chgrp 9 1.7.1 chown举例 9 1.7.2 chgrp举例 9 1.7.3 找出你所属于的用户组 9 1.7.4 找出其他用户所属于的组 10 1.8 umask 10 1.8.1 如何计算umask值 10 1.8.2 常用的umask值 11 1.9 符号链接 12 1.9.1 使用软链接来保存文件的多个映像 12 1.9.2 符号链接举例 12 1.10 小结 13 第2章 使用find和xargs 14 2.1 find命令选项 14 2.1.1 使用name选项 15 2.1.2 使用perm选项 16 2.1.3 忽略某个目录 16 2.1.4 使用user和nouser选项 16 2.1.5 使用group和nogroup选项 16 2.1.6 按照更改时间查找文件 17 2.1.7 查找比某个文件新或旧的文件 17 2.1.8 使用type选项 17 2.1.9 使用size选项 18 2.1.10 使用depth选项 18 2.1.11 使用mount选项 18 2.1.12 使用cpio选项 18 2.1.13 使用exec或ok来执行shell命令 19 2.1.14 find命令的例子 20 2.2 xargs 20 2.3 小结 21 第3章 后台执行命令 22 3.1 cron和crontab 22 3.1.1 crontab的域 22 3.1.2 crontab条目举例 23 3.1.3 crontab命令选项 23 3.1.4 创建一个新的crontab文件 24 3.1.5 列出crontab文件 24 3.1.6 编辑crontab文件 24 3.1.7 删除crontab文件 25 3.1.8 恢复丢失的crontab文件 25 3.2 at命令 25 3.2.1 使用at命令提交命令或脚本 26 3.2.2 列出所提交的作业 27 3.2.3 清除一个作业 27 3.3 &命令 27 3.3.1 向后台提交命令 28 3.3.2 用ps命令查看进程 28 3.3.3 杀死后台进程 28 3.4 nohup命令 29 3.4.1 使用nohup命令提交作业 29 3.4.2 一次提交几个作业 29 3.5 小结 30 第4章 文件名置换 31 4.1 使用* 31 4.2 使用？ 32 4.3 使用[...]和[!...] 32 4.4 小结 33 第5章 shell输入与输出 34 5.1 echo 34 5.2 read 35 5.3 cat 37 5.4 管道 38 5.5 tee 39 5.6 标准输入、输出和错误 40 5.6.1 标准输入 40 5.6.2 标准输出 40 5.6.3 标准错误 40 5.7 文件重定向 40 5.7.1 重定向标准输出 41 5.7.2 重定向标准输入 42 5.7.3 重定向标准错误 42 5.8 结合使用标准输出和标准错误 43 5.9 合并标准输出和标准错误 43 5.10 exec 44 5.11 使用文件描述符 44 5.12 小结 45 第6章 命令执行顺序 46 6.1 使用&& 46 6.2 使用|| 46 6.3 用（）和{ }将命令结合在一起 47 6.4 小结 48 第二部分 文本过滤 第7章 正则表达式介绍 49 7.1 使用句点匹配单字符 50 7.2 在行首以^匹配字符串或字符序列 50 7.3 在行尾以$匹配字符串或字符 51 7.4 使用*匹配字符串中的单字符或其重复 序列 51 7.5 使用\屏蔽一个特殊字符的含义 52 7.6 使用[]匹配一个范围或集合 52 7.7 使用\{\}匹配模式结果出现的次数 53 7.8 小结 55 第8章 grep家族 56 8.1 grep 57 8.1.1 双引号引用 57 8.1.2 grep选项 57 8.1.3 查询多个文件 57 8.1.4 行匹配 57 8.1.5 行数 58 8.1.6 显示非匹配行 58 8.1.7 精确匹配 58 8.1.8 大小写敏感 58 8.2 grep和正则表达式 58 8.2.1 模式范围 59 8.2.2 不匹配行首 59 8.2.3 设置大小写 59 8.2.4 匹配任意字符 59 8.2.5 日期查询 59 8.2.6 范围组合 60 8.2.7 模式出现机率 60 8.2.8 使用grep匹配“与”或者“或”模式 61 8.2.9 空行 61 8.2.10 匹配特殊字符 61 8.2.11 查询格式化文件名 61 8.2.12 查询IP地址 61 8.3 类名 62 8.4 系统grep命令 62 8.4.1 目录 63 8.4.2 passwd文件 63 8.4.3 使用ps命令 63 8.4.4 对一个字符串使用grep 64 8.5 egrep 64 8.6 小结 65 第9章 AWK介绍 66 9.1 调用awk 66 9.2 awk脚本 67 9.2.1 模式和动作 67 9.2.2 域和记录 67 9.2.3 awk中正则表达式及其操作 70 9.2.4 元字符 70 9.2.5 条件操作符 70 9.2.6 awk内置变量 73 9.2.7 NF、NR和FILENAME 74 9.2.8 awk操作符 75 9.2.9 内置的字符串函数 78 9.2.10 字符串屏蔽序列 80 9.2.11 awk输出函数printf 81 9.2.12 printf修饰符 81 9.2.13 awk数组 86 9.3 小结 88 第10章 sed 用法介绍 89 10.1 sed怎样读取数据 89 10.2 调用sed 89 10.2.1 保存sed输出 90 10.2.2 使用sed在文件中查询文本的方式 90 10.2.3 基本sed编辑命令 90 10.3 sed和正则表达式 91 10.4 基本sed编程举例 91 10.4.1 使用p（rint）显示行 91 10.4.2 打印范围 91 10.4.3 打印模式 92 10.4.4 使用模式和行号进行查询 92 10.4.5 匹配元字符 92 10.4.6 显示整个文件 92 10.4.7 任意字符 92 10.4.8 首行 92 10.4.9 最后一行 93 10.4.10 打印行号 93 10.4.11 附加文本 93 10.4.12 创建sed脚本文件 94 10.4.13 插入文本 94 10.4.14 修改文本 95 10.4.15 删除文本 96 10.4.16 替换文本 96 10.5 使用替换修改字符串 97 10.6 将sed结果写入文件命令 97 10.7 从文件中读文本 98 10.8 匹配后退出 98 10.9 显示文件中的控制字符 99 10.10 使用系统sed 99 10.10.1 处理控制字符 99 10.10.2 处理报文输出 101 10.10.3 去除行首数字 101 10.10.4 附加文本 102 10.10.5 从shell向sed传值 102 10.10.6 从sed输出中设置shell变量 102 10.11 快速一行命令 102 10.12 小结 103 第11章 合并与分割 104 11.1 sort用法 104 11.1.1 概述 104 11.1.2 sort选项 104 11.1.3 保存输出 105 11.1.4 sort启动方式 105 11.1.5 sort对域的参照方式 105 11.1.6 文件是否已分类 105 11.1.7 基本sort 106 11.1.8 sort分类求逆 106 11.1.9 按指定域分类 106 11.1.10 数值域分类 106 11.1.11 唯一性分类 107 11.1.12 使用k的其他sort方法 108 11.1.13 使用k做分类键排序 108 11.1.14 指定sort序列 108 11.1.15 pos用法 108 11.1.16 使用head和tail将输出分类 109 11.1.17 awk使用sort输出结果 109 11.1.18 将两个分类文件合并 110 11.2 系统sort 110 11.3 uniq用法 111 11.4 join用法 112 11.5 cut用法 114 11.5.1 使用域分隔符 115 11.5.2 剪切指定域 115 11.6 paste用法 116 11.6.1 指定列 116 11.6.2 使用不同的域分隔符 116 11.6.3 paste命令管道输入 117 11.7 split用法 117 11.8 小结 118 第12章 tr用法 119 12.1 关于tr 119 12.1.1 字符范围 119 12.1.2 保存输出 120 12.1.3 去除重复出现的字符 120 12.1.4 删除空行 120 12.1.5 大写到小写 121 12.1.6 小写到大写 121 12.1.7 删除指定字符 121 12.1.8 转换控制字符 122 12.1.9 快速转换 122 12.1.10 匹配多于一个字符 123 12.2 小结 123 第三部分 登录环境 第13章 登录环境 125 13.1 /etc/profile 125 13.2 用户的$HOME.profile 128 13.3 stty用法 129 13.4 创建.logout文件 131 13.5 小结 131 第14章 环境和shell变量 132 14.1 什么是shell变量 132 14.2 本地变量 132 14.2.1 显示变量 133 14.2.2 清除变量 133 14.2.3 显示所有本地shell变量 133 14.2.4 结合变量值 134 14.2.5 测试变量是否已经设置 134 14.2.6 使用变量来保存系统命令参数 135 14.2.7 设置只读变量 135 14.3 环境变量 136 14.3.1 设置环境变量 136 14.3.2 显示环境变量 136 14.3.3 清除环境变量 137 14.3.4 嵌入shell变量 137 14.3.5 其他环境变量 139 14.3.6 set命令 140 14.3.7 将变量导出到子进程 140 14.4 位置变量参数 141 14.4.1 在脚本中使用位置参数 142 14.4.2 向系统命令传递参数 142 14.4.3 特定变量参数 143 14.4.4 最后的退出状态 144 14.5 小结 145 第15章 引号 146 15.1 引用必要性 146 15.2 双引号 146 15.3 单引号 147 15.4 反引号 147 15.5 反斜线 148 15.6 小结 149
linux awk 某一列替换成指定的内容
tanghuan0827的博客
04-14 5422
awk -F ',' '{OFS=","} $45="12"' bak.sql 指定分隔符 输出分隔符 某一列变为12 也可以根据条件，某一列变为什么值 转载地址： https://www.aikaiyuan.com/7000.html
使用awk用一个列替换另一个文件中的列？
简云的博客
10-14 2124
转自使用awk用一个列替换另一个文件中的列？ - 程序园 (voidcn.com) 我有两个文件： f1: 111 aaa 444 222 bbb 555 333 ccc 666 f2: 111 333 000 444 222 444 111 555 333 555 555 666 如何使用awk替换“f1”中的第二列,使用“f2”中的第三列？ 尝试： awk 'FNR==NR{a[NR]=$3;next}{$2=a[FNR]}1' f2 f1 输出： 111 00
linux的shell修改文件某一列,Linux下awk命令shell脚本修改处理某一列数据方法实例...
weixin_42349978的博客
04-30 3503
问题描述：在用informatica从oracle数据库中导出数据生成文件后，发现其中一列数据导出格式有问题，本来字段为number型，我在PowerCenter Designer 的mapping中没有设置好类型转换，结果生成的文件中格式变成“xxx.000000000000000”。刚好这时候oracle中导出源表被同事清空了，没办法再重新导，这时候，只有想着用awk命令把文件处理一下，再上传...
linux改变某一列的数,linux awk修改文件数据的某一列后生成新的文件
weixin_42527654的博客
05-26 1323
例如：文件A.txt内容：|aaa|bbb|ccc|ddd|eee|脚本：test.sh#!/bin/shfor ((i = 0 ; i < 10 ; i++))doawk -F '|' -v var=$i '{for(i = 1 ; i < NF ; i++){if(i==4){printf "%06d",var;printf "|";}else{printf $i;printf "...
Linux shell编程指南
05-29
本书共分五部分，详细介绍了shell编程技巧，各种UNIX命令及语法，还涉及了UNIX下的文字处理以及少量的系统管理问题。本书内容全面、文字简洁流畅，适合Shell编程人员学习、参考。 目 录 译者序 前言 第一部分 shell 第1章 文件安全与权限 1 1.1 文件 1 1.2 文件类型 2 1.3 权限 2 1.4 改变权限位 4 1.4.1 符号模式 4 1.4.2 chmod命令举例 5 1.4.3 绝对模式 5 1.4.4 chmod命令的其他例子 6 1.4.5 可以选择使用符号模式或绝对模式 7 1.5 目录 7 1.6 suid/guid 7 1.6.1 为什么要使用suid/guid 8 1.6.2 设置suid/guid的例子 8 1.7 chown和chgrp 9 1.7.1 chown举例 9 1.7.2 chgrp举例 9 1.7.3 找出你所属于的用户组 9 1.7.4 找出其他用户所属于的组 10 1.8 umask 10 1.8.1 如何计算umask值 10 1.8.2 常用的umask值 11 1.9 符号链接 12 1.9.1 使用软链接来保存文件的多个映像 12 1.9.2 符号链接举例 12 1.10 小结 13 第2章 使用find和xargs 14 2.1 find命令选项 14 2.1.1 使用name选项 15 2.1.2 使用perm选项 16 2.1.3 忽略某个目录 16 2.1.4 使用user和nouser选项 16 2.1.5 使用group和nogroup选项 16 2.1.6 按照更改时间查找文件 17 2.1.7 查找比某个文件新或旧的文件 17 2.1.8 使用type选项 17 2.1.9 使用size选项 18 2.1.10 使用depth选项 18 2.1.11 使用mount选项 18 2.1.12 使用cpio选项 18 2.1.13 使用exec或ok来执行shell命令 19 2.1.14 find命令的例子 20 2.2 xargs 20 2.3 小结 21 第3章 后台执行命令 22 3.1 cron和crontab 22 3.1.1 crontab的域 22 3.1.2 crontab条目举例 23 3.1.3 crontab命令选项 23 3.1.4 创建一个新的crontab文件 24 3.1.5 列出crontab文件 24 3.1.6 编辑crontab文件 24 3.1.7 删除crontab文件 25 3.1.8 恢复丢失的crontab文件 25 3.2 at命令 25 3.2.1 使用at命令提交命令或脚本 26 3.2.2 列出所提交的作业 27 3.2.3 清除一个作业 27 3.3 &命令 27 3.3.1 向后台提交命令 28 3.3.2 用ps命令查看进程 28 3.3.3 杀死后台进程 28 3.4 nohup命令 29 3.4.1 使用nohup命令提交作业 29 3.4.2 一次提交几个作业 29 3.5 小结 30 第4章 文件名置换 31 4.1 使用* 31 4.2 使用？ 32 4.3 使用[...]和[!...] 32 4.4 小结 33 第5章 shell输入与输出 34 5.1 echo 34 5.2 read 35 5.3 cat 37 5.4 管道 38 5.5 tee 39 5.6 标准输入、输出和错误 40 5.6.1 标准输入 40 5.6.2 标准输出 40 5.6.3 标准错误 40 5.7 文件重定向 40 5.7.1 重定向标准输出 41 5.7.2 重定向标准输入 42 5.7.3 重定向标准错误 42 5.8 结合使用标准输出和标准错误 43 5.9 合并标准输出和标准错误 43 5.10 exec 44 5.11 使用文件描述符 44 5.12 小结 45 第6章 命令执行顺序 46 6.1 使用&& 46 6.2 使用|| 46 6.3 用（）和{ }将命令结合在一起 47 6.4 小结 48 第二部分 文本过滤 第7章 正则表达式介绍 49 7.1 使用句点匹配单字符 50 7.2 在行首以^匹配字符串或字符序列 50 7.3 在行尾以$匹配字符串或字符 5
AWK--根据条件修改某一列的值
热门推荐
qq_24336773的博客
04-11 3万+
现有如下的数据： 要求将最后一列的0,1,2分别替换为相应的lable标签，即 0–Setosa，1–Versicolor，2–Virginica。 首先想到的便是awk，awk可以很方便地获取某一列的内容并对其进行修改。 简单回顾下AWK的用法： $0 &nbsp;&nbsp;&nbsp; 表示整个当前行 $1 &nbsp;&nbsp;&nbsp; 每行...
Linux工具：awk按字符分割，并对指定列替换，并对被处理过的行进行打印
Brave_heart4pzj的博客
04-05 884
Linux
【linux】awk常用处理文件命令示例-替换/格式化/条件选择/求和/正则/子字符串
lillianqdzpw
11-15 5673
awk常用处理文件命令示例，字符替换、格式化输出、根据条件选择输出、列求和、正则匹配、子字符串、外部变量、文件转置、列分割
[awk] awk分隔列并添加/替换某列内容
petrel2015的博客
12-06 3401
需求 两个表结构类似，迁移过程中mysqldump后得到一些insert sql语句 SQL insert 语句文件中想增加字段内容 具体来说如： INSERT INTO `table_fruit` VALUES (apple,banana,orange,peach,pear) 希望变成 INSERT INTO `table_fruit` VALUES (apple,banana,pear,coconut,orange,peach,pear) 解析需求 可以看作是通过“，”逗号作为分隔符，在第3列后添加
Linux与unix shell编程指南（1-16）
08-12
目 录 译者序 前言 第一部分 shell 第1章 文件安全与权限 1 1.1 文件 1 1.2 文件类型 2 1.3 权限 2 1.4 改变权限位 4 1.4.1 符号模式 4 1.4.2 chmod命令举例 5 1.4.3 绝对模式 5 1.4.4 chmod命令的其他例子 6 1.4.5 可以选择使用符号模式或绝对模式 7 1.5 目录 7 1.6 suid/guid 7 1.6.1 为什么要使用suid/guid 8 1.6.2 设置suid/guid的例子 8 1.7 chown和chgrp 9 1.7.1 chown举例 9 1.7.2 chgrp举例 9 1.7.3 找出你所属于的用户组 9 1.7.4 找出其他用户所属于的组 10 1.8 umask 10 1.8.1 如何计算umask值 10 1.8.2 常用的umask值 11 1.9 符号链接 12 1.9.1 使用软链接来保存文件的多个映像 12 1.9.2 符号链接举例 12 1.10 小结 13 第2章 使用find和xargs 14 2.1 find命令选项 14 2.1.1 使用name选项 15 2.1.2 使用perm选项 16 2.1.3 忽略某个目录 16 2.1.4 使用user和nouser选项 16 2.1.5 使用group和nogroup选项 16 2.1.6 按照更改时间查找文件 17 2.1.7 查找比某个文件新或旧的文件 17 2.1.8 使用type选项 17 2.1.9 使用size选项 18 2.1.10 使用depth选项 18 2.1.11 使用mount选项 18 2.1.12 使用cpio选项 18 2.1.13 使用exec或ok来执行shell命令 19 2.1.14 find命令的例子 20 2.2 xargs 20 2.3 小结 21 第3章 后台执行命令 22 3.1 cron和crontab 22 3.1.1 crontab的域 22 3.1.2 crontab条目举例 23 3.1.3 crontab命令选项 23 3.1.4 创建一个新的crontab文件 24 3.1.5 列出crontab文件 24 3.1.6 编辑crontab文件 24 3.1.7 删除crontab文件 25 3.1.8 恢复丢失的crontab文件 25 3.2 at命令 25 3.2.1 使用at命令提交命令或脚本 26 3.2.2 列出所提交的作业 27 3.2.3 清除一个作业 27 3.3 &命令 27 3.3.1 向后台提交命令 28 3.3.2 用ps命令查看进程 28 3.3.3 杀死后台进程 28 3.4 nohup命令 29 3.4.1 使用nohup命令提交作业 29 3.4.2 一次提交几个作业 29 3.5 小结 30 第4章 文件名置换 31 4.1 使用* 31 4.2 使用？ 32 4.3 使用[...]和[!...] 32 4.4 小结 33 第5章 shell输入与输出 34 5.1 echo 34 5.2 read 35 5.3 cat 37 5.4 管道 38 5.5 tee 39 5.6 标准输入、输出和错误 40 5.6.1 标准输入 40 5.6.2 标准输出 40 5.6.3 标准错误 40 5.7 文件重定向 40 5.7.1 重定向标准输出 41 5.7.2 重定向标准输入 42 5.7.3 重定向标准错误 42 5.8 结合使用标准输出和标准错误 43 5.9 合并标准输出和标准错误 43 5.10 exec 44 5.11 使用文件描述符 44 5.12 小结 45 第6章 命令执行顺序 46 6.1 使用&& 46 6.2 使用|| 46 6.3 用（）和{ }将命令结合在一起 47 6.4 小结 48 第二部分 文本过滤 第7章 正则表达式介绍 49 7.1 使用句点匹配单字符 50 7.2 在行首以^匹配字符串或字符序列 50 7.3 在行尾以$匹配字符串或字符 51 7.4 使用*匹配字符串中的单字符或其重复 序列 51 7.5 使用\屏蔽一个特殊字符的含义 52 7.6 使用[]匹配一个范围或集合 52 7.7 使用\{\}匹配模式结果出现的次数 53 7.8 小结 55 第8章 grep家族 56 8.1 grep 57 8.1.1 双引号引用 57 8.1.2 grep选项 57 8.1.3 查询多个文件 57 8.1.4 行匹配 57 8.1.5 行数 58 8.1.6 显示非匹配行 58 8.1.7 精确匹配 58 8.1.8 大小写敏感 58 8.2 grep和正则表达式 58 8.2.1 模式范围 59 8.2.2 不匹配行首 59 8.2.3 设置大小写 59 8.2.4 匹配任意字符 59 8.2.5 日期查询 59 8.2.6 范围组合 60 8.2.7 模式出现机率 60 8.2.8 使用grep匹配“与”或者“或”模式 61 8.2.9 空行 61 8.2.10 匹配特殊字符 61 8.2.11 查询格式化文件名 61 8.2.12 查询IP地址 61 8.3 类名 62 8.4 系统grep命令 62 8.4.1 目录 63 8.4.2 passwd文件 63 8.4.3 使用ps命令 63 8.4.4 对一个字符串使用grep 64 8.5 egrep 64 8.6 小结 65 第9章 AWK介绍 66 9.1 调用awk 66 9.2 awk脚本 67 9.2.1 模式和动作 67 9.2.2 域和记录 67 9.2.3 awk中正则表达式及其操作 70 9.2.4 元字符 70 9.2.5 条件操作符 70 9.2.6 awk内置变量 73 9.2.7 NF、NR和FILENAME 74 9.2.8 awk操作符 75 9.2.9 内置的字符串函数 78 9.2.10 字符串屏蔽序列 80 9.2.11 awk输出函数printf 81 9.2.12 printf修饰符 81 9.2.13 awk数组 86 9.3 小结 88 第10章 sed 用法介绍 89 10.1 sed怎样读取数据 89 10.2 调用sed 89 10.2.1 保存sed输出 90 10.2.2 使用sed在文件中查询文本的方式 90 10.2.3 基本sed编辑命令 90 10.3 sed和正则表达式 91 10.4 基本sed编程举例 91 10.4.1 使用p（rint）显示行 91 10.4.2 打印范围 91 10.4.3 打印模式 92 10.4.4 使用模式和行号进行查询 92 10.4.5 匹配元字符 92 10.4.6 显示整个文件 92 10.4.7 任意字符 92 10.4.8 首行 92 10.4.9 最后一行 93 10.4.10 打印行号 93 10.4.11 附加文本 93 10.4.12 创建sed脚本文件 94 10.4.13 插入文本 94 10.4.14 修改文本 95 10.4.15 删除文本 96 10.4.16 替换文本 96 10.5 使用替换修改字符串 97 10.6 将sed结果写入文件命令 97 10.7 从文件中读文本 98 10.8 匹配后退出 98 10.9 显示文件中的控制字符 99 10.10 使用系统sed 99 10.10.1 处理控制字符 99 10.10.2 处理报文输出 101 10.10.3 去除行首数字 101 10.10.4 附加文本 102 10.10.5 从shell向sed传值 102 10.10.6 从sed输出中设置shell变量 102 10.11 快速一行命令 102 10.12 小结 103 第11章 合并与分割 104 11.1 sort用法 104 11.1.1 概述 104 11.1.2 sort选项 104 11.1.3 保存输出 105 11.1.4 sort启动方式 105 11.1.5 sort对域的参照方式 105 11.1.6 文件是否已分类 105 11.1.7 基本sort 106 11.1.8 sort分类求逆 106 11.1.9 按指定域分类 106 11.1.10 数值域分类 106 11.1.11 唯一性分类 107 11.1.12 使用k的其他sort方法 108 11.1.13 使用k做分类键排序 108 11.1.14 指定sort序列 108 11.1.15 pos用法 108 11.1.16 使用head和tail将输出分类 109 11.1.17 awk使用sort输出结果 109 11.1.18 将两个分类文件合并 110 11.2 系统sort 110 11.3 uniq用法 111 11.4 join用法 112 11.5 cut用法 114 11.5.1 使用域分隔符 115 11.5.2 剪切指定域 115 11.6 paste用法 116 11.6.1 指定列 116 11.6.2 使用不同的域分隔符 116 11.6.3 paste命令管道输入 117 11.7 split用法 117 11.8 小结 118 第12章 tr用法 119 12.1 关于tr 119 12.1.1 字符范围 119 12.1.2 保存输出 120 12.1.3 去除重复出现的字符 120 12.1.4 删除空行 120 12.1.5 大写到小写 121 12.1.6 小写到大写 121 12.1.7 删除指定字符 121 12.1.8 转换控制字符 122 12.1.9 快速转换 122 12.1.10 匹配多于一个字符 123 12.2 小结 123 第三部分 登录环境 第13章 登录环境 125 13.1 /etc/profile 125 13.2 用户的$HOME.profile 128 13.3 stty用法 129 13.4 创建.logout文件 131 13.5 小结 131 第14章 环境和shell变量 132 14.1 什么是shell变量 132 14.2 本地变量 132 14.2.1 显示变量 133 14.2.2 清除变量 133 14.2.3 显示所有本地shell变量 133 14.2.4 结合变量值 134 14.2.5 测试变量是否已经设置 134 14.2.6 使用变量来保存系统命令参数 135 14.2.7 设置只读变量 135 14.3 环境变量 136 14.3.1 设置环境变量 136 14.3.2 显示环境变量 136 14.3.3 清除环境变量 137 14.3.4 嵌入shell变量 137 14.3.5 其他环境变量 139 14.3.6 set命令 140 14.3.7 将变量导出到子进程 140 14.4 位置变量参数 141 14.4.1 在脚本中使用位置参数 142 14.4.2 向系统命令传递参数 142 14.4.3 特定变量参数 143 14.4.4 最后的退出状态 144 14.5 小结 145 第15章 引号 146 15.1 引用必要性 146 15.2 双引号 146 15.3 单引号 147 15.4 反引号 147 15.5 反斜线 148 15.6 小结 149 第四部分 基础shell编程 第16章 shell脚本介绍 151 16.1 使用shell脚本的原因 151 16.2 脚本内容 151 16.3 运行一段脚本 152 16.4 小结 153
home-commands:我的〜bin *命令
05-15
自己的指挥小组 echo-sd（bash 4或ksh 93u或zsh 4.3） >猝死<发电机 >猝死<生成器扩展的POSIX Shell脚本出现日历2013-博客 塔特（bash 4或ksh 93u或zsh 4.3）垂直书写发生器 ddp（sh，GNU或Mac OS X dd） dd（1）定期输出执行量和转移量 git-diff-normal（sh，sed，awk） 将git-diff（1）与vimdiff（1）结合使用的包装器 参考：在vimdiff-Qiita中使用更智能的算法（耐心，直方图） httpstatus（sh） 使用httpstatus快速查找HTTP状态代码！ ifne（Perl）仅在有输入时执行指定的命令 imaputf7（Ruby） IMAP UTF-7（修改后的UTF-7）编码器/解码器 iwscan（sh，iwlist）扫描接入点并列出概述 jwdif
Linux基础命令与根目录一览表-思维导图.pdf
07-08
ls：列出目录内容。 cd：切换工作目录。 pwd：显示当前工作目录的路径。 mkdir：创建新目录。 touch：创建空文件或更新文件的访问和修改时间。 rm：删除文件或目录。 cp：复制文件或目录。 mv：移动文件或目录，也...
linux awk命令-文件内容编辑
weixin_44576709的博客
01-05 1222
F,：判定逗号“,”是分隔符，此时空格就不算分隔符了（除非同时指定逗号和空格都为分隔符），就算是被空格隔开的字符串也会被判定为同一列，如图只有第三行原本是用逗号隔开的，现在被打印出来了第1和第3个元素，其他行没有逗号，所以全部字母or数字和空格都判定为第一列并打印出来了。1、默认情况下awk识别列与列之间的空格为分隔符，可以通过参数-F更改分隔符的识别对象为其它符号，可以同时指定多个符号为分隔符。2、'{$1 $2}'和'{$1,$2}' 的中间可以是逗号或者空格，显示结果会有所不同，下面会有案例。
awk 将匹配到的某列/行置空
youyouJaney的博客
06-06 700
awk匹配某列
Linux文本处理三剑客之awk报告生成器
qxdbb的博客
02-14 701
Linux文本处理三剑客之awk报告生成器 一，awk 1.概述 起源：20世纪70年代诞生于贝尔实验室，现在centos7用的是gawk 之所以叫 AWK是因为其取了三位创始人 Alfred Aho，Peter weinberger, 和Brian Kernighan 的Family Name的首字符。 概述：AWK是一种处理文本文件的语言，是一个强大的文本分析工具。专门为文本处理设计的编程语言，也是行处理软件，通常用于扫描、过滤、统计汇总工作，数据可以来自标准输入也可以是管道或文件 2.工作原理: 当读
shell awk 删除列
最新发布
07-28
要在awk中删除列，可以使用print语句来输出不包含指定列的行。以下是一个示例： ```shell awk '{ $2 = ""; print }' file.txt ``` 在这个例子中，我们使用awk命令来处理文件file.txt。通过将第二列设置为空字符串，我们删除了第二列，并使用print语句输出结果。 如果要删除多个列，可以按照相同的逻辑将对应的列设置为空字符串。例如，要删除第二列和第四列，可以使用以下命令： ```shell awk '{ $2 = $4 = ""; print }' file.txt ``` 这样会将第二列和第四列都设置为空字符串，从而删除了这两列，并输出结果。 请注意，这些操作不会修改原始文件，而是在屏幕上输出处理后的结果。如果需要将结果保存到文件中，可以使用重定向操作符将输出写入到新文件中： ```shell awk '{ $2 = ""; print }' file.txt > newfile.txt ```

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值