shell - 09 - Shell文本处理三剑客 - sed -文件内容操作详解(1)

先自我介绍一下，小编浙江大学毕业，去过华为、字节跳动等大厂，目前阿里P7

深知大多数程序员，想要提升技能，往往是自己摸索成长，但自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！

因此收集整理了一份《2024年最新Python全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友。

既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，涵盖了95%以上Python知识点，真正体系化！

由于文件比较多，这里只是将部分目录截图出来，全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频，并且后续会持续更新

如果你需要这些资料，可以添加V获取：vip1024c （备注Python）

正文

this is read by the standalone daemon and embedded servers

[client]

port=3306

socket=/tmp/mysql.socket

#ThisSegmentForserver

[server]

innodb_buffer_pool_size=91750M

innodb_buffer_pool_instances=8

innodb_buffer_pool_load_at_startup=1

innodb_buffer_pool_dump_at_shutdown=1

innodb_data_file_path=ibdata1:1G:autoextend

innodb_flush_log_at_trx_commit=1

innodb_log_buffer_size=32M

innodb_log_file_size=2G

innodb_log_files_in_group=2

innodb_max_undo_log_size=4G

innodb_undo_directory=undolog

innodb_undo_tablespaces=95

#thisisonlyforthemysqldstandalonedaemon

[mysqld]

port=3306

socket=/tmp/mysql.sock

basedir=/usr/local/mysql

datadir=/data/mysql

pid-file=/data/mysql/mysql.pid

user=mysql

bind-address=0.0.0.0

sort_buffer_size=16M

join_buffer_size=16M

thread_cache_size=3000

interactive_timeout=600

wait_timeout=600

#ThisSegmentFormysqld_safe

[mysqld_safe]

log-error=/var/log/mariadb/mariadb.log

pid-file=/var/run/mariadb/mariadb.pid

max_connections=1000

open_files_limit=65535

thread_stack=512K

external-locking=FALSE

max_allowed_packet=32M

#thisisonlyforembeddedserver

[embedded]

gtid_mode=on

enforce_gtid_consistency=1

log_slave_updates

slave-rows-search-algorithms=‘INDEX_SCAN,HASH_SCAN’

binlog_format=row

binlog_checksum=1

relay_log_recovery=1

relay-log-purge=1

#usethisgroupforoptionsthatolderserversdon’tunderstand

[mysqld-5.5]

key_buffer_size=32M

read_buffer_size=8M

read_rnd_buffer_size=16M

bulk_insert_buffer_size=64M

myisam_sort_buffer_size=128M

myisam_max_sort_file_size=10G

myisam_repair_threads=1

lock_wait_timeout=3600

explicit_defaults_for_timestamp=1

innodb_file_per_table=1

脚本练习 - 需求分析

1、获取文件中所有的段 function get_all_segment

利用sed 命令 通过 ‘[…]‘过滤出所有的段，同时替换掉’[‘与’]’,并输出

2、获取文件中每一段的配置项的个数 function count_items_in_segment

利用 sed 命令提取两个段之间的内容,同时还需过滤掉两段之间的空白行与注释行，

得到的就是配置项的信息。

脚本如下：

#!/bin/bash

FILE_NAME=/root/lesson/5.6/my.cnf

function get_all_segments

{

echo “sed -n '/\[.*\]/p' $FILE_NAME | sed -e 's/\[//g' -e 's/\]//g'”

}

function count_items_in_segment

{

items=sed -n '/\['$1'\]/,/\[.*\]/p' $FILE_NAME | grep -v "^#" | grep -v "^$" | grep -v "\[.*\]"

index=0

for item in $items

do

index=expr $index + 1

done

echo $index

}

number=0

for segment in get_all_segments

do

number=expr $number + 1

items_count=count_items_in_segment $segment

echo “$number: $segment $items_count”

done

利用 sed 删除文件内容

---

删除命令对照表

一些 sed 删除命令的练习小案例

1、删除/etc/passwd中的第15行

sed -i ‘15d’ /etc/passwd

2、删除/etc/passwd中的第8行到第14行的所有内容

sed -i ‘8,14d’ passwd

3、删除/etc/passwd中的不能登录的用户(筛选条件：/sbin/nologin) sed -i ‘//sbin/nologin/d’ passwd

4、删除/etc/passwd中以mail开头的行，到以yarn开头的行的所有内容 sed -i ‘/^mail/,/yarn/d’ passwd

5、删除/etc/passwd中第一个不能登录的用户，到第13行的所有内容

sed -i ‘//sbin/nologin/,13d’ passwd

6、删除/etc/passwd中第5行到以ftp开头的所有行的内容

sed -i ‘5,/^ftp/d’ passwd

7、删除/etc/passwd中以yarn开头的行到最后行的所有内容 sed -i ‘/^yarn/,$d’ passwd

典型需求

1、删除配置文件中的所有注释行和空行

sed -i '/[:blank:]*#/d;/^$/d' file

2、在配置文件中所有不以#开头的行前面添加*符号，注意：以#开头的行不添加

sed -i 's/^[^#]/\*&/g' file

附：该需求在实际应用场景中没有什么实际意义，这里仅做展示用。

利用 sed 修改文件内容

---

修改命令对照表

同样来一个小练习

1、修改/etc/passwd中第1行中第1个root为ROOT sed -i ‘1s/root/ROOT/’ passwd

2、修改/etc/passwd中第5行到第10行中所有的/sbin/nologin为/bin/bash

sed -i ‘5,10s//sbin/nologin//bin/bash/g’ passwd

3、修改/etc/passwd中匹配到/sbin/nologin的行，将匹配到行中的login改为大写的LOGIN

sed -i ‘//sbin/nologin/s/login/LOGIN/g’ passwd

4、修改/etc/passwd中从匹配到以root开头的行，到匹配到行中包含mail的所有行。修改内为将这些所有匹配到的行中的bin改为HADOOP

sed -i ‘/^root/,/mail/s/bin/HADOOP/g’ passwd

5、修改/etc/passwd中从匹配到以root开头的行，到第15行中的所有行，修改内容为将这些行中的nologin修改为SPARK

sed -i ‘/^root/,15s/nologin/SPARK/g’ passwd

6、修改/etc/passwd中从第15行开始，到匹配到以yarn开头的所有航，修改内容为将这些行中的bin换位BIN

sed -i ‘15,/^yarn/s/bin/BIN/g’ passwd

现在能在网上找到很多很多的学习资源，有免费的也有收费的，当我拿到1套比较全的学习资源之前，我并没着急去看第1节，我而是去审视这套资源是否值得学习，有时候也会去问一些学长的意见，如果可以之后，我会对这套学习资源做1个学习计划，我的学习计划主要包括规划图和学习进度表。

分享给大家这份我薅到的免费视频资料，质量还不错，大家可以跟着学习

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

需要这份系统化的资料的朋友，可以添加V获取：vip1024c （备注python）

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！
1个学习计划，我的学习计划主要包括规划图和学习进度表。

分享给大家这份我薅到的免费视频资料，质量还不错，大家可以跟着学习

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

需要这份系统化的资料的朋友，可以添加V获取：vip1024c （备注python）
[外链图片转存中…(img-9SlzlfFr-1713187594007)]

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！