grep 去除特定行_awk/sed/grep删除与其他文件中的字段匹配的行

最新推荐文章于 2024-04-28 15:54:39 发布
最新推荐文章于 2024-04-28 15:54:39 发布
阅读量2.2k 收藏
点赞数
文章标签： grep 去除特定行
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_29416629/article/details/111902990
版权

我有一个file1，有几行(几十)，和一个更长的file2(〜500,000行)。每个文件中的行不相同，尽管有一些相同的字段的子集。我想从file1中的每一行获取字段3-5，并搜索file2以获得相同的模式(只是这三个字段按相同的顺序排列 - 在file2中，它们落在字段2-4中)。如果发现任何匹配，那么我想从file1中删除相应的行。awk/sed/grep删除与其他文件中的字段匹配的行

例如，文件1：

2016-01-06T05:38:31 2016-01-06T05:23:33 2016006 120E A TM Current

2016-01-06T07:34:01 2016-01-06T07:01:51 2016006 090E B TM Current

2016-01-06T07:40:44 2016-01-06T07:40:41 2016006 080E A TM Alt

2016-01-06T07:53:50 2016-01-06T07:52:14 2016006 090E A TM Current

2016-01-06T08:14:45 2016-01-06T08:06:33 2016006 080E C TM Current

文件2：

2016-01-06T07:35:06.87 2016003 100E C NN Current 0

2016-01-06T07:35:09.97 2016003 100E B TM Current 6303

2016-01-06T07:36:23.12 2016004 030N C TM Current 0

2016-01-06T07:37:57.36 2016006 090E A TM Current 399

2016-01-06T07:40:29.61 2016006 010N C TM Current

最低0.47元/天 解锁文章
asta谢
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
grep 去除特定行_如何“grep”出文件的特定行范围
weixin_39616547的博客
02-23 1259
我经常会grep -n whatev文件找到我正在寻找的东西。 说输出是1234: whatev 15555: whatev 26643: whatev 3如果我想在1234和5555之间提取线条，是否有工具可以做到这一点？ 对于静态文件，我有一个脚本，它执行文件的wc -l然后进行数学运算以使用tail和head将其拆分，但这对于不断写入的日志文件来说效果不佳。请参阅stackoverflow....
grep 去除特定行_使用sort，grep LINUX从列表中删除行
weixin_33252222的博客
12-23 351
I have a list that looks like:#Population, Year, County3900, 1969, Beaver3798, 1970, Beaver3830, 1971, Beaver3864, 1972, Beaver3993, 1973, Beaver3976, 1974, Beaver4064, ...
Linux文本处理grep详解_删除grep过滤的内容 linux
最新发布
2401_83621603的博客
04-28 711
最近很多小伙伴找我要Linux学习资料，于是我翻箱倒柜，整理了一些优质资源，涵盖视频、电子书、PPT等共享给大家！
grep 去除匹配内容 -v
码灵的博客
01-16 1906
cat test.log | grep -v "#" | grep -v "^$"
grep 删除文件内的调试行
心中天堂的专栏
12-21 2760
1.delete debug lines grep -v DBGY test.c > newtest.c 2.save debug lines grep DBGY test.c > newtest.c or  sed -n '/DBGY/p' test.c > newtest.c 3.delete debug lines with vim cm
Shell按关键词匹配删除行
热门推荐
大太阳的博客
03-26 1万+
待处理文本jiafeimao@jiafeimaodeMacBook-Pro:~$ cat testshell 111 222 333 111删除命令jiafeimao@jiafeimaodeMacBook-Pro:~$ sed -i -e '/111/d' testshell效果jiafeimao@jiafeimaodeMacBook-Pro:~$ cat testshel...
linux sed删除指定行_linux/unix下如何删除文本文件中的空行，使用sed、awk、grep
weixin_40001372的博客
11-28 643
如何使用linux 命令行删除文本文件中的空行？这类似于我们在上一篇文章中介绍的如何删除包含指定字符串的文本文件的方式。我们仍然可以使用sed命令，awk命令和grep命令来完成此操作。让我们在下面详细查看操作示例。以下内容是测试文件的内容，我们将使用以下内容进行示例演示。hello, this is an example of deleting empty lines in a text fil...
linux系统，awk，grep，sed
08-13
主要减少linux系统中的查询三剑客grep,awk,sed的使用方法和详解，适合linux初学进行学习，适合在日常对于文本内容或者命令执行结果的搜索，可以完善和简便自己的工作内容和完善对于shell脚本的使用。
Shell正则表达式之grep、sed、awk实操笔记
09-15
主要介绍了Shell正则表达式之grep、sed、awk实操笔记,本文使用grep、sed、awk配合正则达到了一些需求和目的,需要的朋友可以参考下
正则表达式RE以及grep、awk和sed工具的用法详解
01-09
例如 vi, grep, awk ,sed 等等工具，因为她们有支持正则表达式， 所以，这些工具就可以使用正则表达式的特殊字符来进行字串的处理。但例如 cp, ls 等指令并未支持正则表达式， 所以就只能使用 Bash 自己本身的...
文本三剑客：grep sed awk
01-07
grep和正则表达式 什么是正则表达式： 正则表达式用于描述字符排列和匹配模式的一种语法规则。它主要用于字符串的模式分隔、匹配、查找及替换操作 元字符 * 重复匹配前一个字符0到多次 . 匹配除了换行符外...
Shell用sed命令删除特定行的方法
01-08
sed命令作为一个强大的shell命令，可以快速删除任意特定的行列，配合awk命令可以轻松地操作批量处理文件，下面就来看看吧！ sed命令常用到的两个选项： -i : 直接在文件上编辑 （edit files in place） -e[默认选项]：只在命令行输出，而文件不改变（add the script to the commands to be executed） 注：使用sed命令可以使用 -i 或者 -e 选项（以下例子仅以-i举例） sed命令删除特定行号 删除第N行 sed -i 'Nd' filename 删除第N~M行 sed -i 'N,Md' filen
uniq命令 去除文件中的重复行
01-09
uniq命令全称是“unique”，中文释义是“独特的，唯一的”。该命令的作用是用来去除文本文件中连续的重复行，中间不能夹杂其他文本行。去除了重复的，保留的都是唯一的，也就是独特的，唯一的了。 我们应当注意的是，它和sort的区别，sort只要有重复行，它就去除，而uniq重复行必须要连续，也可以用它忽略文件中的重复行。 语法格式：uniq [参数] [文件] 常用参数： -c 打印每行在文本中重复出现的次数 -d 只显示有重复的纪录，每个重复纪录只出现一次 -u 只显示没有重复的纪录 参考实例 删除连续文件中连续的重复行： [root@linuxcool ~]# cat
shell编程-文本文件处理（grep sed awk文本三剑客）
01-07
一、grep和正则表达式 1、正则表达式 以一串字符作为表达式向系统传达意思（过滤匹配数据），元字符是描述字符的字符，正则表达式是有一串字符和元字符构成的字符串，主要功能为文本查询和字符串操作，匹配文本 大...
linux awk 模式匹配,linux-Awk脚本匹配模式,然后在定界符后删除...
weixin_31068491的博客
05-14 136
我有一个文件,其中有几行包含字母数字字符串,例如ZINC123345667_123,其后是其他行.现在,我只需要删除包含“ ZINC”的字符串中的定界符“ _”之后的数字,而其余的其他行则保持不变.我尝试使用下面的awk命令,但仅获得了带有“ ZINC”的行,而未获得其他行.我的原始数据：Name: ZINC00000036_1Grid Score: -23.17083...
【shell】ps 结合grep查找时，去掉grep自身匹配的那行
栾金鹿
06-09 5916
想用ps命令判断当前的进程是否还在，为了防止误判，还有去掉grep进程查找的那行。 例如, !/bin/sh STATUS=`ps |grep "transmission-daemon"|grep -v "grep"` if [ ! -z "$STATUS" ];then         echo "on" else         echo "off" fi
linux 排序去重复,如何用grep、sort、sed、uniq等linux工具彻底清除重复行？
weixin_39538962的博客
05-14 748
如何用grep、sort、sed、uniq等linux工具彻底清除重复行？这个问题真的很难写，因为我看不出任何东西能赋予它意义。但这个例子显然是直截了当的。如果我有这样的文件：12234在解析文件之后，删除重复的行，如下所示：^{pr2}$我知道这是我写的一个python脚本。创建一个名为clean_duplicates.py的文件，并将其运行为：import sys## To run it us...
【Shell案例】【awk匹配、grep查找文件内的字符串】6、去掉空行（删除空行）
USTSD的博客
04-29 1736
描述写一个 bash脚本以去掉一个文本文件 nowcoder.txt中的空行示例:假设 nowcoder.txt 内容如下：abc 567 aaabbb ccc 你的脚本应当输出：abc567aaabbbccc 方法1：循环+打印非空的行 【循环读行，只能用while实现】 #!/bin/bash while read line do if [[ -z $line ]] th...
linux查找内容删除行,linux – 如何grep整行,传递给sed,删除行？
weixin_33657499的博客
05-09 2530
以下命令将查找字符串的所有出现并删除找到此字符串的文件的内容.find / -maxdepth 1 -xdev -type f -exec grep -i "stringtofind" -l {} \; -exec sed -i '/./d' {} \;我已经尝试修改它只是删除找到字符串的行但无法使其工作.例如测试文件：blah blah blahblah blah blah teststring...
Linux三剑客：AWK, SED, Grep详解与高效应用
Linux三剑客，即awk、sed和grep，是Unix和Linux环境中三个强大的文本处理工具，对于提升Linux系统的文本分析和数据处理能力具有关键作用。这些工具在初学者和高级用户中都十分实用，无论是在数据筛选、格式转换还是...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值