shell读取文件的每行并进行处理

最新推荐文章于 2024-04-24 15:47:54 发布
最新推荐文章于 2024-04-24 15:47:54 发布
阅读量2.1k 收藏 1
点赞数
分类专栏： linux 文章标签： 哈希算法 散列表 算法
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Saber190919/article/details/125991639
版权 
#!/bin/bash

while read row
do
	hash=$(echo "$row" | awk '{print $1}' | awk -F':' '{print $2}' );
	url=$(echo "$row" | awk '{print $2}');
	val=$(curl -o "$hash" -XGET "$url");
	dl_md5=$(md5sum "$hash" | awk '{print $1}')
	if [ "$hash" != "$dl_md5" ]; then
 	    echo "$hash" + " - " + "$dl_md5"	
	fi
done < tmp.csv
Chaos_Yeats
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
利用Shell脚本循环读取文件中每一行的方法详解
01-20
前言 本文主要给大家介绍了关于使用Shell脚本循环读取文件每一行的相关内容，分享出来供大家参考学习，下面话不多说了，来一起看看详细的介绍吧。 一、使用for循环 for line in `cat filename` do echo $line done 或者 for line in $(cat filename) do echo $line done 二、使用while循环 while read -r line do echo $line done < filename While循环中read命令从标准输入中读取一行，并将内容保存到变量line中。在这里，-r选项保证读入的
Shell脚本中awk的使用
jcrhl321的博客
04-26 4979
一、awk 1、awk工作原理 逐行读取文本，默认以空格或TAB键为分隔符进行分隔，将分隔所得的各个字段保存到内建变量中，并按模式或者条件执行编辑命令。 sed命令常用于一整行的处理，而awk比较倾向于将一行分成多个“字段”然后再进行处理。 awk信息的读入也是逐行读取的，执行结果可以通过print的功能将数据字段打印显示。 在使用awk命令的过程中，可以使用逻辑操作符“&&”表示“与”、“| |”表示“或”、“!“表示“非”;还可以进行简单的数学运算，如+、-、*、/、%、^..
【Shell 命令集合 文件管理】Linux 文本处理工具 awk命令使用指南
探索C++编程的奥秘，分享深入的技术见解和实践，旨在激发读者创造力与解决问题的思维。
06-24 691
`awk`是一种强大的文本处理工具，在Linux中广泛使用。它的设计目的是用于处理结构化的文本数据，通过对数据的分析和处理，可以进行搜索、过滤、格式化等操作
【shell】awk基本用法
sodaloveer的博客
05-06 2076
awk基本用法及举例
Shell中的awk
weixin_45305723的博客
04-24 1625
一、awk基本介绍 1、awk工作原理 逐行读取文本，默认以空格或tab键为分隔符进行分隔，将分隔所得的各个字段保存到内建变量中，并按模式或者条件执行编辑命令。 awk倾向于将一行分成多个"字段"然后再进行处理。 awk信息的读入也是逐行读取的，执行结果可以通过print的功能将字段数据打印显示。 使用awk命令的过程中,可以使用逻辑操作符"&&"表示"与"、"|"表示"或"、"!"表示"非"，还可以进行简单的数学运算，如+、-、*、/、%、^分别表示加、减、乘、除、取余和乘方。
Shell之awk命令
热门推荐
weixin_62466637的博客
12-28 1万+
一、工作原理 逐行读取文本，默认以空格或tab键为分隔符进行分隔，将分隔所得的各个字段保存到内建变量中，并按模式或者条件执行编辑命令。 sed命令常用于--整行的处理，而awk比较倾向于将一行分成多个“字段"然后再进行处理。awk信息的读入也是逐行读取的，执行结果可以通过print的功能将字段数据打印显示。 在使用awk命令的过程中,可以使用逻辑操作符“&&”表示“与”、“11”表示“或”、 “!”表示“非”; 还可以进行简单的数学运算，如+、-、*、/、号、^分别表示加、减、乘、除、
shell-awk
DCHAO的博客
12-15 2002
一、verview awk是个文本处理的程序，它将一个文件分为行和列，以类似二维表的方式进行处理。 awk逐行扫描文件，寻找匹配特定模式的行，并在这些行上进行指定的操作。它包含2部分：模式匹配(用于找到要处理的行)和处理。pattern {action} awk有两个特殊的模式：BEGIN和END，他们被放置在没有读取任何数据之前以及在所有数据读取完成以后执行。 二、语法 1. 命令 awk程序的基本格式如下： awk options program file program '\模式字符串\ {程序}
【shell 编程大全】awk详解
weixin_42373116的博客
03-01 1288
今天我们会将awk单独分为一个章节，因为其实awk本身是可以作为一个体系的，所以单独拿出来一章 ，不过分。
shell 循环读取文件中每一行的方法详解
小楼一夜听春雨，深巷明朝卖杏花
09-11 5243
使用while循环和for循环都是读取文件中每一行的常见方法。while循环适用于处理大型文件，而for循环适用于处理小型文件。在使用这两种方法时，需要注意文件中每一行的格式，以便正确读取和处理每一行的内容。
Shell脚本中awk命令介绍
asdfg___xiaobai的博客
10-30 2418
1.2 awk处理文本方式 1. awk的处理文本和数据的方式是这样的， 2. 它逐行扫描文件，从第一行到最后一行， 3. 寻找匹配的特定模式的行，并在这些行上进行你想要的操作。 4. 如果没有指定处理动作，则把匹配的行显示到标准输出（屏幕）。 5. awk分别代表其作者姓氏的第一个字母，因为他的作者是三个人，分别是Alfred Aho、Peter Weinberger、Kernighan
读取文件SHELL并判断文件生成时间，低于5分钟文件不拷贝。
07-15
读取文件SHELL并判断文件生成时间，考虑到文件可能没有生成完，低于5分钟文件不拷贝。并且可以循环处理，分别判断生成的时间
利用Shell解析处理XML的方法汇总
09-15
主要给大家总结介绍了关于利用Shell解析处理XML的方法，分别介绍了关于xmlint、xpath和xml2三种工具的使用，文中通过示例代码介绍的非常详细，需要的朋友可以参考借鉴，下面随着小编来一起学习学习吧。
读取配置文件的shell脚本实现
07-29
最近，在从事开发工作的过程中，遇到了一个需求：用shell脚本实现对配置文件的读取，并将读取到的配置项...为了完成该需求，我们考虑使用awk命令，该命令把文件中的内容逐行的读入，按照特定的规则对每行记录进行处理。
shell文件处理笔记之插入文本到文件的方法
09-15
主要给大家介绍了关于shell文件处理之插入文本到文件的方法，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面跟着小编来一起学习学习吧。
【算法基础】第五章：动态规划
最新发布
m0_65787507的博客
04-24 484
DP：【1】状态表示：需要几个维度来表示状态（1）集合（所有选法，带有约束条件）（2）属性（最大值、最小值、数量）【2】状态计算：如何算出每一步的状态，对应集合的划分（不重+不漏）**DP的优化：**对代码/计算方程做变形。
力扣HOT100 - 543. 二叉树的直径
qq_61504864的博客
04-23 184
【代码】力扣HOT100 - 543. 二叉树的直径。
视频质量评价 BRISQUE算法详细介绍
小金牛来了
04-21 70
视频质量评价 BRISQUE算法详细介绍
【错题集-编程题】数组中的最长连续子序列（排序 + 模拟）
Elena's Blog
04-24 264
因为题目不要求位置连续，那么就可以直接想到排序（我把这一块理解错了，导致没有排序去做），接着就是简单的模拟。，然而实际上这道题目要求的是。小心处理数字相同的情况。
二分答案算法
2301_79980806的博客
04-21 1030
跟二分查找类似，当我们要找某个量的最值的时候，可以在这个两最小可能的取值，和最大可能的取值之间二分，来快速找到答案check函数为了验证中间值是否符合题目要求，根据是否来决定下一轮区间界限是作曲兼缩小，还是右区间缩小。
shell读取文件每一行并分割
09-12
在shell中，要读取文件每一行并进行分割，可以使用`read`命令和内建的字段分隔符IFS（Internal Field Separator）来实现。 首先，我们需要将文件的内容逐行读取出来。可以使用`while`循环加`read`命令来实现，每次读取文件的一行内容，然后进行分割处理。 ```bash #!/bin/bash filename="文件名.txt" # 需要读取的文件名 # 设置IFS为换行符，使read命令按行读取文件内容 IFS=$'\n' # 逐行读取文件内容并分割 while read -r line; do # 根据需求进行分割处理，例如按空格分割 words=($line) # 遍历分割后的字段 for word in "${words[@]}"; do echo "$word" done done < "$filename" ``` 在脚本中，我们首先设置IFS为换行符，这样`read`命令就可以按行读取文件内容。然后，在循环中使用`read`命令读取文件的每一行，并将其赋值给变量`line`。接下来，利用分隔符（默认是空白符）对`line`进行分割处理，这里使用空格作为分隔符。分割后的字段会存储在数组`words`中。然后，我们可以遍历该数组，对每个字段进行操作，例如输出或赋给其他变量等。 需要注意的是，以上的示例脚本只是演示了一种常见的实现方式，分割的方式可以根据具体的需求进行调整，例如可以使用逗号、制表符等作为分隔符，并相应地修改IFS的值。另外，还需要根据具体情况处理特殊字符和空白行等异常情况。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值