[bash]fgrep

最新推荐文章于 2024-06-11 09:34:23 发布
最新推荐文章于 2024-06-11 09:34:23 发布
阅读量1.5k 收藏
点赞数
分类专栏： linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/apsvvfb/article/details/51901066
版权
这篇博客讨论了如何在大型文件中高效地查找和处理数据。内容涉及多个程序，如程序1、2和3，其中程序1处理数据速度较慢。文章重点介绍了fgrep命令，尽管它不支持正则表达式，但在特定场景下比grep更适用。作者还分享了如何处理大型文件中特定行范围的方法，并引用了一个关于快速提取文件中指定行的链接。
摘要由CSDN通过智能技术生成

这篇日志的题目好想叫做<论编程不好是怎样一种体验>…

文件

1.input file (10万行)

"ClipID","yfcc100m_hash"
"YFCC100M53595ec67db890b7ad32dfa375196dec","53595ec67db890b7ad32dfa375196dec"
"YFCC100Md6d7f154d7ad0a367353b8a4c7f868","d6d7f154d7ad0a367353b8a4c7f868"
"YFCC100Mabfa822c14bcac4c0f45deb97d18b5f","abfa822c14bcac4c0f45deb97d18b5f"
"YFCC100Md665346779ab26f33f3e537462daf3a","d665346779ab26f33f3e537462daf3a"
"YFCC100M2c7480e2c372a568f5efe91e323ea022","2c7480e2c372a568f5efe91e323ea022"
"YFCC100Mf2b1ab759b93a444efcff0f1d8db86ad","f2b1ab759b93a444efcff0f1d8db86ad"
"YFCC100M3430141d3e43fd1dc903147ecbbe3c","3430141d3e43fd1dc903147ecbbe3c"
"YFCC100M3fd1fb7996b492bc324f50fe6510cd31","3fd1fb7996b492bc324f50fe6510cd31"
"YFCC100M5bab830a1651bbcd45476a2a589d8","5bab830a1651bbcd45476a2a589d8"
"YFCC100Me967f4132a9490dea9890d551d4313e","e967f4132a9490dea9890d551d4313e"
"YFCC100M7617ffd88e62dcec4563f958eb879","7617ffd88e62dcec4563f958eb879"
"YFCC100Mc397a76d6b461ab0319bbadb2ee7997","c397a76d6b461ab0319bbadb2ee7997"
"YFCC100Mb44854aeaa7ab878b606699bf46a94a","b44854aeaa7ab878b606699bf46a94a"
"YFCC100M4db1d3a7dafad886ebaf4121aff4a921","4db1d3a7dafad886ebaf4121aff4a921"
"YFCC100M716414c3a7cc5dca529a9dd32a8d9bed","716414c3a7cc5dca529a9dd32a8d9bed"
"YFCC100M721b1d73bfad7edb75e364bce5a7ba88","721b1d73bfad7edb75e364bce5a7ba88"
"YFCC100Md6452731b2e6fd49bdc81791b522","d6452731b2e6fd49bdc81791b522"
"YFCC100Mdccadda6f254e2c0612b563cc0fc2ff8","dccadda6f254e2c0612b563cc0fc2ff8"
"YFCC100Mf0db32256c23de67e3f42824b622d1d5","f0db32256c23de67e3f42824b622d1d5"

2.hash file (4G)
//identifier, hash value

37941   f81e7c3af3799b60b7dbd514c67184af
37946   dfdb5ed692372b7fde1be75a17b45fcc
38121   df85d12e831af19b1e5ccff79169df45
38129   d919459df4a5d7b0a2ae56bbfcffa9dd
38143   32d6f03a3dc5ad04af8919e333e95d7
38225   f4281b87d46177294726c7d933366a2
38389   7ff9a834d0d25f47d50a3d9bec68dd
38395   017fdbe9f414c3933cb92dc64fc6d56
38397   716b13e1bfa95c40569b817a5ebccf0
38408   e05beeaa8528a98742ceae5ac4f2718
38414   c239c75be9558cedd65a6b1a5e6deee8
38425   516754853cb6f40682f5d28d3458f
69471   ecea8b8d25ba22c3326136666927e0
69500   f02cb5ad1113481e9368bd3aa09b971a
69604   7ebf6e2e9ccda758a525a1af70123f
69606   50c1c3d43ea4d1dd70579681b4adf15
69725   65ec648d1525d9158c5f6b5fce2ee8
69802   e377a4faf03e6a26cd845fff5cce44
69895   53e6707335874eac29b69b5782f94061
69941   ae0915a8b9233286ebf29e5a981c7d
70023   3ef140ec0f976448fa85e779fdcdde
70110   7c1db88bea789d5e238580f9c776f99e
最低0.47元/天 解锁文章
三枚目
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
ubuntu shell启动文件/etc/profile、.profile、.bashrc、/etc/bash.bashrc之间的区别和联系
二进制君
08-26 1697
Bash登陆(login)的时候，Profile执行的顺序 1）先执行全局profile, /etc/profile 2）接着bash会检查使用者的HOME目录中，是否有 .bash_profile 或者 .bash_login或者 .profile，若有，则会执行其中一个，执行顺序为： .bash_profile 最优先 > .bash_login其次 > .profile 最后 我发现ubuntu只有.profile文件。 /etc/profile: 此文件为系统的每个用户设置环境信息，它做
[Linux] shell 学习(二):bash配置文件的读取
FightFightFight的博客
06-24 2276
给命令设置别名 当命令过长时，可以给命令设置一个别名，alias flag=command用来设置别名，如： # 用lg代替长命令 $ alias lg='ls | grep test' 如果想要查看所有的别名，就直接使用alias: jyq@ubuntu:~$ alias alias alert='notify-send --urgency=low -i "$([ $? = 0 ] ...
grep/egrep/fgrep 用法-文本处理三剑客之一
weixin_44983653的博客
07-01 1699
grep/egrep/fgrep 用法grep/egrep/fgrep 简介文本处理三剑客grep 含义egrep 含义fgrep 含义正则表达式grep 用法OPTION基本正则表达式元字符字符匹配匹配字数位置锚定分组及应用grep 用法示例1grep 用法示例2扩展正则表达式OPTION字符匹配次数匹配位置锚定分组及引用egrep 用法示例fgrep grep/egrep/fgrep 简介 文...
fgrep
weixin_34352005的博客
08-19 268
fgrep命令文件过滤分割与合并fgrep命令是用来搜索 file 参数指定的输入文件（缺省为标准输入）中的匹配模式的行。fgrep 命令特别搜索 Pattern 参数，它们是固定的字符串。如果在 File 参数中指定一个以上的文件 fgrep 命令将显示包含匹配行的文件。fgrep 命令于 grep 和 egrep 命令不同，因为它搜索字符串而不是搜索匹配表达式的模式。fg...
深入理解Linux中的fgrep命令：高效搜索文本内容
最新发布
听风的鱼鱼儿
06-11 368
命令的工作原理是逐行读取指定的文件，并将每一行与给定的模式进行匹配。默认不解释正则表达式，而是将模式作为固定字符串进行搜索，这使得它在处理不包含正则表达式的搜索时更加高效。（Fast Grep）命令是这一领域中的一个重要工具，它允许用户快速搜索文本文件中的指定内容。命令是一个用于搜索文本的实用程序，它允许用户在指定的文件中搜索与给定模式匹配的文本行。命令，探讨其在数据处理和分析中的用途，并给出一些实用的示例和最佳实践。不解释正则表达式，因此它在进行不包含正则表达式的搜索时更加快速和高效。
linux grep egrep fgrep bash条件判断 bash测试 if 条件判断
weixin_34029680的博客
05-19 219
1.grep中的位置锚定，用于指定字符出现的位置 ^锚定行首,^char $锚定行尾,char$ ^$空白行 \<char锚定词首=\bchar char\>锚定词尾=char\b grep分组 \(\) \(ab\)*xy表示ab出...
矩阵置零
WindrunnerMax
06-25 954
矩阵置零 给定一个m x n的矩阵，如果一个元素为0，则将其所在行和列的所有元素都设为0。请使用原地算法。 示例 输入: [ [1,1,1], [1,0,1], [1,1,1] ] 输出: [ [1,0,1], [0,0,0], [1,0,1] ] 输入: [ [0,1,2,0], [3,4,5,2], [1,3,1,5] ] 输出: [ [0,0,0,0], [0,4,5,0], [0,3,1,0] ] 题解 /** * @param {nu
grep、egrep、fgrep
Rachel Wang的little tree
07-29 436
转自http://blog.chinaunix.net/uid-7374279-id-3849705.html 一、grep家族简介 1、Unix的grep家族包括：grep、egrep和fgrep 1）grep （1）grep （global search regular expression(RE) and print out the line，全面搜索正则表达式并把行
.net core在 Linux 环境下使用 bash 执行 top -n1 | fgrep 'Cpu(s)'
06-06
在 .NET Core 中，可以通过调用外部程序来执行 bash 命令。可以使用 `Process.Start` 方法来启动一个进程，并执行 top -n1 | fgrep 'Cpu(s)' 命令。示例代码如下： ```csharp using System; using System....
Bash+Sed+Awk(1).pdf
03-30
Linux提供了一些用于文件查找和文本处理的工具，例如find命令和grep工具家族（grep、egrep、fgrep）。这些工具能够帮助用户快速找到符合特定模式的文件或文本内容。 ### 正则表达式 正则表达式（Regular ...
Linux fgrep命令教程：全面解析fgrep命令的使用方法（附实例详解和注意事项）
u012964600的博客
02-21 1696
fgrep（全称：Fixed Global Regular Expression Print）是一个在文件中搜索固定字符串的过滤器。这个命令在你需要搜索包含大量正则表达式元字符（如“^”、“$”等）的字符串时非常有用。
Linux命令之查找文件中符合条件的字符串fgrep
二木成林
06-05 1224
`fgrep` 命令相当于执行 `grep` 命令加上 `-F` 选项，即搜索文件中的指定字符串。`fgrep` 命令作用与 `grep` 和 `egrep` 命令不同，因为它搜索字符串而不是搜索匹配表达式的模式。`fgrep` 命令使用快速的压缩算法。`$`、`*`、`[`、`|`、`(`、`)` 和 `\` 等字符串被 `fgrep` 命令......
文本搜索必学命令-grep egrep fgrep用法以及正则表达式
weixin_34277853的博客
03-06 165
一、grep、egrep、fgrep命令 本文中主要介绍了linux系统下grep egrep fgrep命令和正则表达式的基本参数和使用格式、方法。（注释：文中fg代表例子，） 1.1、基本定义： grep（global search regular RE ) and print out the line,全面搜索正则表达式并把行打印出来）是一种强...
【Linux】一步一步学Linux——fgrep命令(了解)(51)
C/C++软件工程师、嵌入式软件工程师、物联网研发工程师、C/C++讲师、物联网讲师、嵌入式讲师---欢迎大家一起交流(私信添加博主微信)
07-18 1547
00. 目录 文章目录00. 目录01. 命令概述02. 命令格式03. 常用选项04. 参考示例05. 附录 01. 命令概述 本指令相当于执行grep指令加上参数"-F"，Linux fgrep命令用于查找文件里符合条件的字符串。 fgrep命令是用来搜索 file参数指定的输入文件（缺省为标准输入）中的匹配模式的行。fgrep 命令特别搜索 Pattern 参数，它们是固定的字符串。如果在 ...
grep、fgrep 和 egrep 命令
Starting
11-10 5854
<br /> <br /><br />这组命令以指定模式搜索文件，并通知用户在什么文件中搜索到与指定的模式匹配的字符串，并打印出所有包含该字符串的文本行，在该文本行的最前面是该 行所在的文件名。 grep 命令一次只能搜索一个指定的模式；egrep 命令检索扩展的正则表达式（包括表达式组和可选项）；fgrep 命令检索固定字符串，它不识别正则表达式，是快速搜索命令。<br />这组命令在搜索与定位文件中特定的主题方面非常有用。要搜索的模式可以被认为是一些关键词，您可以用它们来搜索文件中包含的这些关键词
【Shell 命令集合 文档编辑】Linux 在文件中查找指定的字符串 fgrep命令使用指南
探索C++编程的奥秘，分享深入的技术见解和实践，旨在激发读者创造力与解决问题的思维。
06-24 1868
在文件中查找指定的字符串，并将包含该字符串的行输出到标准输出。
linux fgrep命令参数及用法详解---linux查询匹配命令
热门推荐
lxpbs8851的专栏
03-14 1万+
fgrep 命令:      fgrep 命令是用来查找一个或多个与给出的字符串或词组相匹配文件中的行。fgrep 查询速度比grep命令快，但是不够灵活：它只能找固定的文本，而不是规则表达式。 语法:   语法是      fgrep [命令选项] pattern [file]   -a 把二进制数据视作文本在行中输出。 -b 显示在每一行输出前的输入
linux基本命令grep egrep fgrep用法以及正则表达式
我的日志
03-08 882
一、grep、egrep、fgrep命令   本文中主要介绍了linux系统下grep egrep fgrep命令和正则表达式的基本参数和使用格式、方法。（注释：文中fg代表例子，） 1.1、基本定义：         grep（global search regular RE ) and print out the line,全面搜索正则表达式并把行打印出来）是一种强大的文本搜
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值