Shell脚本使用随笔

最新推荐文章于 2022-10-19 01:07:16 发布
最新推荐文章于 2022-10-19 01:07:16 发布
阅读量205 收藏
点赞数
分类专栏： shell脚本 文章标签： shell mysql 索引
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zhangjielong_/article/details/119563123
版权

Shell脚本录

对比两个数据库索引差别：

select new_table_name, new_columu_name, new_index_name, case new_non_unique when '0' then 'yes' when '1' then 'no' end, new_index_type
	from(select
		   table_name as new_table_name, column_name as new_columu_name, group_concat(index_name) as new_index_name, group_concat(non_unique) as new_non_unique, group_concat(index_type) as new_index_type
	from
		   information_schema.statistics 
	where
		   table_schema = '${ORIGINDATABASE}' and index_name <> 'PRIMARY' 
	group by
		   new_table_name, new_columu_name) new
	left join (
	select
		   table_name as old_table_name, column_name as old_columu_name, group_concat(index_name) as old_index_name, group_concat(non_unique) as old_non_unique, group_concat(index_type) as old_index_type
	from
		   information_schema.statistics 
	where
		   table_schema = '${TARGETDATABASE}' and index_name <> 'PRIMARY' 
	group by
		   old_table_name, old_columu_name) old
	on new.new_table_name = old.old_table_name and new.new_columu_name = old.old_columu_name
	where old.old_index_name is null

#脚本连接Mysql执行sql语句并将结果输出到文件中
${MYSQL} -h${HOSTNAME} -P${POST} -u${USERNAME} -p${PASSWORD} -s -e"sql语句" > filename

#将${PATH}/${OUTSQL}路径的文件导入mysql
PATH="`pwd`"
${MYSQL} -h${HOSTNAME} -P${POST} -u${USERNAME} -p${PASSWORD} <${PATH}/${OUTSQL}

#多行注释
:<<! 
#被注释的内容    
!

更新旧数据库的索引，需要新数据库的索引结构文件

#!/bin/bash
MYSQL="/usr/bin/mysql" #mysql 程序
HOSTNAME="172.16.0.24" #mysql 主机名
POST="3306" #mysql 端口
USERNAME="root"
PASSWORD="root"
DATABASE="eds_manager_update_index" #待更新数据库
TARGETINDEX="newIndex.txt" #最新的索引结构文件
INDEX="index.txt" #待更新数据库的索引结构文件
OUTDIFFTXT="diff.txt" #输出差异文件
OUTSQL="update.sql" #可执行sql脚本文件
if [[ -e `pwd`/${OUTDIFFTXT} ]]
then
        echo `pwd`/${OUTDIFFTXT}文件已存在
        exit
fi
if [[ -e `pwd`/${OUTSQL} ]]
then
        echo `pwd`/${OUTSQL}文件已存在
        exit
fi
# 生成待更新数据库的索引结构文件
${MYSQL} -h${HOSTNAME} -P${POST} -u${USERNAME} -p${PASSWORD} -s -e"select
        table_name, column_name, group_concat(index_name) as index_name, case group_concat(non_unique) when '1' then 'no' when '0' then 'yes' end as non_unique, group_concat(index_type) as index_type
from
        information_schema.statistics 
where
        table_schema = '${DATABASE}' and index_name <> 'PRIMARY' 
group by
        table_name,column_name" > ${INDEX}
# 生成差异文件
while read line
do
array=($line)
        a=`grep -w ${array[0]} ${INDEX}| grep -cw ${array[1]}`
        if [[ ${a} -eq 0 ]]
        then
                echo $line >> ${OUTDIFFTXT}
        fi
done < ${TARGETINDEX}

if [[ ! -e `pwd`/${OUTDIFFTXT} ]]
then
        echo ${DATABASE}索引已是最新
        exit
fi
declare -a prev
tableName=""
indexName=""
column=""
index=0
# 根据差异文件生成可执行的sql语句
while read line
do
                cur=(${line})
                if [[ ${tableName} == ${cur[0]} ]] && [[ ${indexName} == ${cur[2]} ]]
                then
                                column="${column}, \`${cur[1]}\`"
                else
                                if [[ ${index} -ne 0 ]]
                                then
                                                if [[ ${prev[3]} == ${UNI} ]]
                                                then
                                                                echo alter table \`${DATABASE}\`.\`${prev[0]}\` add unique index \`${prev[2]}\`\(${column}\) using ${prev[4]}\; >> ${OUTSQL}
                                                else
                                                                echo alter table \`${DATABASE}\`.\`${prev[0]}\` add index \`${prev[2]}\`\(${column}\) using ${prev[4]}\; >> ${OUTSQL}
                                                fi
								else
                                                let "index+=1"
                                fi
                                column="\`${cur[1]}\`"
                fi
                tableName="${cur[0]}"
                indexName="${cur[2]}"
                prev=(${line})
done < ${OUTDIFFTXT}
if [[ ${prev[3]} == ${UNI} ]]
then
                echo alter table \`${DATABASE}\`.\`${prev[0]}\` add unique index \`${prev[2]}\`\(${column}\) using ${prev[4]}\; >> ${OUTSQL}
else
                echo alter table \`${DATABASE}\`.\`${prev[0]}\` add index \`${prev[2]}\`\(${column}\) using ${prev[4]}\; >> ${OUTSQL}
fi
#默认直接执行差异索引的sql文件
${MYSQL} -h${HOSTNAME} -P${POST} -u${USERNAME} -p${PASSWORD} <`pwd`/${OUTSQL}

对比一个服务器下的两个数据库的索引结构，更新旧数据库

#!/bin/bash
HOSTNAME="172.16.0.24" #Mysql服务器主机名/IP
POST="3306" #Mysql 端口
USERNAME="root" #Mysql用户名
PASSWORD="root" #Mysql用户密码
MYSQL="/usr/bin/mysql" #Mysql程序
PATH="`pwd`"
ORIGINDATABASE="eds_manager_init_index" #源数据库
TARGETDATABASE="eds_manager_update_index" #目标数据库
PATH="`pwd`" #文件路径
OUTDIFFTXT="diff.txt" #对比差异文件
OUTSQL="update.sql" #可执行脚本
UNI="yes" #判断是否是唯一索引
declare -a prev #文件前一行的内容
tableName=""
indexName=""
column=""
index=0

if [[ -e ${PATH}/${OUTDIFFTXT} ]]
then
        echo ${PATH}/${OUTDIFFTXT}文件已存在
        exit
fi
if [[ -e ${PATH}/${OUTSQL} ]]
then
        echo ${PATH}/${OUTSQL}文件已存在
		exit
fi
${MYSQL} -h${HOSTNAME} -P${POST} -u${USERNAME} -p${PASSWORD} -s -e"select new_table_name, new_columu_name, new_index_name, case new_non_unique when '0' then 'yes' when '1' then 'no' end, new_index_type
	from(select
		   table_name as new_table_name, column_name as new_columu_name, group_concat(index_name) as new_index_name, group_concat(non_unique) as new_non_unique, group_concat(index_type) as new_index_type
	from
		   information_schema.statistics 
	where
		   table_schema = '${ORIGINDATABASE}' and index_name <> 'PRIMARY' 
	group by
		   new_table_name, new_columu_name) new
	left join (
	select
		   table_name as old_table_name, column_name as old_columu_name, group_concat(index_name) as old_index_name, group_concat(non_unique) as old_non_unique, group_concat(index_type) as old_index_type
	from
		   information_schema.statistics 
	where
		   table_schema = '${TARGETDATABASE}' and index_name <> 'PRIMARY' 
	group by
		   old_table_name, old_columu_name) old
	on new.new_table_name = old.old_table_name and new.new_columu_name = old.old_columu_name
	where old.old_index_name is null" > ${OUTDIFFTXT}
while read line
do
		cur=(${line})
		if [[ ${tableName} == ${cur[0]} ]] && [[ ${indexName} == ${cur[2]} ]]
		then
				column="${column}, \`${cur[1]}\`"
		else
				if [[ ${index} -ne 0 ]]
				then
						if [[ ${prev[3]} == ${UNI} ]]
						then
								echo alter table \`${TARGETDATABASE}\`.\`${prev[0]}\` add unique index \`${prev[2]}\`\(${column}\) using ${prev[4]}\; >> ${OUTSQL}
						else
								echo alter table \`${TARGETDATABASE}\`.\`${prev[0]}\` add index \`${prev[2]}\`\(${column}\) using ${prev[4]}\; >> ${OUTSQL}
						fi
				else
						let "index+=1"
				fi
				column="\`${cur[1]}\`"
		fi
		tableName="${cur[0]}"
		indexName="${cur[2]}"
		prev=(${line})
done < ${OUTDIFFTXT}
if [[ ${prev[3]} == ${UNI} ]]
then
		echo alter table \`${TARGETDATABASE}\`.\`${prev[0]}\` add unique index \`${prev[2]}\`\(${column}\) using ${prev[4]}\; >> ${OUTSQL}
else
		echo alter table \`${TARGETDATABASE}\`.\`${prev[0]}\` add index \`${prev[2]}\`\(${column}\) using ${prev[4]}\; >> ${OUTSQL}
fi
#默认直接执行差异索引的sql文件
#若想自定义执行，注释下面这行语句再运行脚本
#之后查看${PATH}/${OUTSQL}这个路径的脚本文件自主选择
#最后进入mysql 执行 source ${PATH}/${OUTSQL} 语句
${MYSQL} -h${HOSTNAME} -P${POST} -u${USERNAME} -p${PASSWORD} <${PATH}/${OUTSQL}

注意事项 ：

  • if 语句第二个括号要与语句之间保持一个空格

  • pwd 要在 grep 后面出现，不然会出现grep command not found

  • `要用反斜杠

  • cat /dev/null > filename 清空文件

  • touch filename 创建文件 或者 vim filename

  • 运行前用chmod 777 filename.sh 给权限 然后在用./filename.sh

  • 允许用户root从ip为172.16.x.xx的主机连接到mysql服务器，并使用root作为密码

    GRANT ALL PRIVILEGES ON *.* TO 'root'@'172.16.x.xx' IDENTIFIED BY 'root' WITH GRANT OPTION;
FLUSH   PRIVILEGES;
zhangjielong_
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
MATLAB自学笔记（一）
wangzhejie的博客
12-11 3179
自留空间
shell脚本内使用pwd命令
优质后端技术知识记录
10-31 2万+
#!/bin/bash path=`pwd` echo $path 坑，第2行处不是单引号
Linux Shell脚本一文读懂
zhouzhiwengang的专栏
10-19 1299
shell脚本是一个文件，里面存放的是特定格式的指令，系统可以使用脚本解析器翻译或解析指令并执行（无需编译）。shell脚本的本质是 shell命令的有序集合算符说明举例+加法`expr $a + $b` 结果为 30。-减法`expr $a - $b` 结果为 -10。*乘法`expr $a \* $b` 结果为 200。/除法`expr $b / $a` 结果为 2。%取余`expr $b % $a` 结果为 0。=赋值a=$b 把变量 b 的值赋给 a。
Linux基础学习（一）【cd、pwd、mkdir、rmdir、$PATH命令详解】
Be Like
07-17 725
本文参考《鸟哥的Linux私房菜》基础学习篇（第三版） 目录的相关操作： .　　　　　 代表此目录层 ..　　　　　代表上一层目录 -　　　　　 代表前一个工作目录 ~　　　　　代表“目前用户身份”所在的主文件夹 ~account　 代表 account 这个用户的主文件夹（account是个账号的名称） cd（切换目录） 命令格式： cd [相对路径或绝对路径] 范例：...
Linux入门教程（五）
小威的博客
07-04 306
全局变量 USER 当前用户的用户名 HOME 当前用户的主目录 PATH 环境变量 将一个新路径加入到环境变量 使用pwd查看当前的路径，使用 PATH=$PATH:pwd输出的结果即可以将当前路径加入到环境变量中。 一些命令 1.zip 压缩文件 *表示压缩所有的文件。 zip workspace.zip -r workspace/* 表示将worksapce下所有子文件和子文件夹中的内容都变成压缩包。 -r表示循环。 2.unzip 解压 unzip worksapce.zip 3.tar 其中
Shell脚本编程100例
01-07
以上这些例子涵盖了基本的Shell脚本操作，如变量使用、条件判断、流程控制、系统命令调用以及定时任务设置等。通过学习和实践这些脚本，可以深入了解Shell脚本编程，提升系统管理能力。对于Linux系统管理员、开发者...
openEuler中使用shell脚本
11-20
/bin/bash`（或其他Shell路径）作为首行，声明该脚本使用的Shell解释器。接着是脚本主体，包含各种命令、变量、控制结构等。 4. **权限及执行**：要使Shell脚本可执行，需使用`chmod +x scriptname.sh`命令赋予其...
shell脚本使用手册
05-18
在.sh文件里说明shell脚本的编写方法，清晰便于检索
Shell脚本中使用function（函数）示例
09-15
主要介绍了Shell脚本中使用function（函数）示例,本文着重讲解的是如何在shell脚本中使用自定义函数,并给出了两个例子,需要的朋友可以参考下
109个shell脚本合计
08-10
109个有用的shell脚本，帮助学习shell
Mac上flutter的环境搭建
01-20
一、安装flutter SDK 1、按照官网说明，获取flutter SDK 如图下载其最新可用的安装包 https://flutter.dev/docs/get-started/install/macos# 2、下载后，将安装包解压到你要安装的目录，如图，我放在了这里 3、添加flutter相关工具到path 打开终端输入命令行 vim ~/.bash_profile 如上图，输入a,将打开编辑模式，增加一行 export PATH=`pwd`/flutter/bin:$PATH `pwd`是你flutter的安装目录，同时将环境变量添加到文件中 export PUB_HOSTE
export PYTHONPATH=$PWD:$PYTHONPATH
qq_38261075的博客
12-27 4795
我们经常在一个目录下采用命令调用另一个目录下的文件，例如： python ../../tools/demo.py 在当前目录下回退两级，再调用tools目录下的demo.py，这样的话有可能遇到某个文件中的函数或者变量不被定义的问题，这样的话想解决的话，可以采用如下两种方法： （1）将那个找不到的文件移动到当前执行文件的同级目录，但是这样可能会引起别的问题，而且那个文件可能在别的目录下也被多个文件调用，所以这样解决只是暂时性; （2）在当前目录和项目主目录下执行 export PYTHONPAT
实例讲解3--sed命令f
swming12的专栏
03-30 618
21．sed提取最后一个目录名和程序名 例如从../../etc/passwd或者/etc/passwd得到passwd 方法一：使用临时文件 #得到当前路径，输出到a文件       pwd >a       #读取a文件，过滤首字母/和尾字母/，将结果输出到b文件 sed's/^\///g' a  | sed ‘s/\/$//g’ >b     while fgrep \/ b
Shell编程之特殊字符
刘瑞东的专栏
05-10 1168
# 注释 1. 表示注释 #注释 2. 在引号中间和\#等表示#本身 3.echo ${PATH#*:} # 参数替换,不是一个注释 4.echo $(( 2#101011 )) # 数制转换,不是一个注释 echo "The # here does not begin a comment." echo 'The # here does not begin a comment.' ec
MATLAB：如何保存图片到指定文件夹的三种方法
热门推荐
Tsingke
07-25 2万+
MATLAB：如何保存图片到指定文件夹的三种方法 方法一 在matlab中，直接imwrite()保存图片，会保存到当前工作目录文件夹或其子文件夹。 1 %直接保存 2 imwrite(picture,'test1.png') 3 4 %在当前工作目录下新建文件夹并保存 5 mkdir image % 如果文件夹已存在，会有警告，但不影响运行 6 imwrite(pictur...
flutter-Mac系统下安装之export PATH=`pwd`/flutter/bin:$PATH
weixin_38251977的博客
12-08 2782
明天实践，然后写下整个过程。
修改Ubuntu默认Shell
modi000的博客
06-09 4009
奇怪的错误 在linux下的shell脚本中，第一行一般会指明该脚本的执行程序名，以便为该脚本拥有执行权限时可以通过脚本名直接运行。 我在控制台上一般通过 sh 命令执行shell脚本，如sh xxx.sh;所以有次我新建一个shell脚本时，脚本第一行写的是#!/bin/sh，如下所示： ———————————————— 版权声明：本文为CSDN博主「beikejinmiao」的原创文章，遵循CC 4.0 BY-SA版权协议，转载请附上原文出处链接及本声明。 原文链接：https://blog.cs.
shell脚本中的export和PWD的作用
J_bean的博客
11-22 1万+
shell脚本中的export和PWD的作用 （1）export 功能说明：设置或显示环境变量。 语法：export [-fnp][变量名称]=[变量设置值]。 补充说明：在shell中执行程序时，shell会提供一组环境变量。export可新增，修改 删除环境变量，供后续执行的程序使用。export的效力仅限于该次登陆操作。 参数： 　-f 　代表[变量名称]中为函数名称。
linux字符表示法,LINUX Shell特殊字符的表示方法 -电脑资料
weixin_36393718的博客
05-15 551
# 注释1. 表示注释 #注释2. 在引号中间和\#等表示#本身3.echo ${PATH#*:} # 参数替换,不是一个注释4.echo $(( 2#101011 )) # 数制转换,不是一个注释echo "The # here does not begin a comment."echo 'The # here does not begin a comment.'echo The \# her...
shell脚本使用scp
最新发布
04-10
shell脚本使用scp命令可以在Linux之间复制文件和目录[^1]。下面是一个使用shell脚本实现自动化scp复制的例子[^2]： ```shell #!/bin/sh expect -c " spawn scp -r root@10.110.16.139:/opt/server/Gresource/resource-console-1.1.0-SNAPSHOT.jar . expect { \"*password*\" { set timeout 300; send \"!QAZ2wsx\r\"; } } expect eof" ``` 这个脚本使用了expect命令，它可以自动化处理与scp命令交互的过程。在脚本中，首先使用spawn命令启动scp命令，并指定要复制的远程文件路径和目标路径。然后，使用expect命令来匹配密码提示，并发送密码。最后，使用expect eof命令等待scp命令执行完毕。 请注意，这个脚本中的密码是明文存储的，为了安全起见，建议使用其他方式来处理密码，例如使用SSH密钥认证。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值