第十七章：Linux之大数据定制篇 大数据定制篇-Shell编程

最新推荐文章于 2023-02-16 19:23:25 发布
最新推荐文章于 2023-02-16 19:23:25 发布
阅读量415 收藏 3
点赞数
文章标签： shell linux java 编程语言 python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_44662961/article/details/106988803
版权

第十七章：Linux之大数据定制篇 大数据定制篇-Shell编程

1、为什么要学习Shell编程

  1. Linux运维工程师在进行服务器集群管理时，需要编写Shell程序来进行服务器管理。
  2. 对于JavaEE和Python程序员来说，工作的需要，你的老大会要求你编写一些Shell脚本进行程序或者是服务器的维护，比如编写一个定时备份数据库的脚本。
  3. 对于大数据程序员来说，需要编写Shell程序来管理集群。

2、Shell是什么

Shell是一个命令行解释器，它为用户提供了一个向Linux内核发送请求以便运行程序的界面系统级程序，用户可以用Shell来启动、挂起、停止甚至是编写一些程序。
在这里插入图片描述

3、Shell脚本的执行方式

  • 脚本格式要求
1) 脚本以#!/bin/bash开头
2) 脚本需要有可执行权限
  • 编写第一个Shell脚本
    • 需求说明
    创建一个Shell脚本，输出hello world!
    在这里插入图片描述
    脚本的常用执行方式
    • 方式1(输入脚本的绝对路径或相对路径)
1)首先要赋予helloworld.sh 脚本的+x权限
2)执行脚本

在这里插入图片描述
• 方式2(sh+脚本)
说明：不用赋予脚本+x权限，直接执行即可。
在这里插入图片描述

4、Shell的变量

Shell的变量的介绍

  1. Linux Shell中的变量分为，系统变量和用户自定义变量。
  2. 系统变量：
$HOME、$PWD、$SHELL、$USER等等
比如： echo $HOME 等等

在这里插入图片描述
3. 显示当前shell中所有变量：set\

Shell变量的定义

  • 基本语法
  1. 定义变量：变量=值
  2. 撤销变量：unset 变量
  3. 声明静态变量：readonly变量，注意：不能unset
  • 快速入门
    案例1：定义变量A
    案例2：撤销变量A
    在这里插入图片描述
    案例3：声明静态的变量B=2，不能unset
    在这里插入图片描述
    案例4：可把变量提升为全局环境变量，可供其他shell程序使用

定义变量的规则

  1. 变量名称可以由字母、数字和下划线组成，但是不能以数字开头。
  2. 等号两侧不能有空格
  3. 变量名称一般习惯为大写

将命令的返回值赋给变量

  1. A=ls -la 反引号，运行里面的命令，并把结果返回给变量A
  2. A=$(ls -la) 等价于反引号
    在这里插入图片描述

5、设置环境变量

基本语法

  1. export 变量名=变量值 （功能描述：将shell变量输出为环境变量）
  2. source 配置文件 （功能描述：让修改后的配置信息立即生效）
  3. echo $变量名 （功能描述：查询环境变量的值）
    在这里插入图片描述

快速入门

  1. 在/etc/profile文件中定义TOMCAT_HOME环境变量
    在这里插入图片描述
  2. 查看环境变量TOMCAT_HOME的值
    echo $TOMCAT_HOME
  3. 在另外一个shell程序中使用 TOMCAT_HOME
    在这里插入图片描述
    注意：在输出JAVA_HOME 环境变量前，需要让其生效
    source /etc/profile

6、位置参数变量

介绍
当我们执行一个shell脚本时，如果希望获取到命令行的参数信息，就可以使用到位置参数变量
比如 ： ./myshell.sh 100 200 , 这个就是一个执行shell的命令行，可以在myshell 脚本中获取到参数信息
基本语法

$n （功能描述：n为数字，$0代表命令本身，$1-$9代表第一到第九个参数，十以上的参数需要用大括号包含，如${10}）
$* （功能描述：这个变量代表命令行中所有的参数，$*把所有的参数看成一个整体）
$@（功能描述：这个变量也代表命令行中所有的参数，不过$@把每个参数区分对待）
$#（功能描述：这个变量代表命令行中所有参数的个数）

应用实例
案例：编写一个shell脚本 positionPara.sh ， 在脚本中获取到命令行的各个参数信息。
在这里插入图片描述

7、预定义变量

基本介绍
就是shell设计者事先已经定义好的变量，可以直接在shell脚本中使用
基本语法
$$ （功能描述：当前进程的进程号（PID））
$! （功能描述：后台运行的最后一个进程的进程号（PID））
$？ （功能描述：最后一次执行的命令的返回状态。如果这个变量的值为0，证明上一个命令正确执行；如果这个变量的值为非0（具体是哪个数，由命令自己来决定），则证明上一个命令执行不正确了。）
应用实例
在一个shell脚本中简单使用一下预定义变量
在这里插入图片描述

8、运算符

基本介绍
学习如何在shell中进行各种运算操作。
基本语法

1) “$((运算式))”或“$[运算式]”
2) expr m + n 
注意expr运算符间要有空格
3) expr m - n
4) expr \*, /, % 乘，除，取余

应用实例

案例1：计算（2+3）X4的值
① $（（运算式））
在这里插入图片描述
② $[运算式]
在这里插入图片描述
③ expr
在这里插入图片描述
案例2：请求出命令行的两个参数[整数]的和
在这里插入图片描述

9、条件判断

判断语句

  • 基本语法
    [ condition ]（注意condition前后要有空格）
    #非空返回true，可使用$?验证（0为true，>1为false）
  • 应用实例
    [ shell ] 返回true
    [] 返回false
    [condition] && echo OK || echo notok 条件满足，执行后面的语句
  • 常用判断条件
  1. 两个整数的比较
    = 字符串比较
    -lt 小于
    -le 小于等于
    -eq 等于
    -gt 大于
    -ge 大于等于
    -ne 不等于
  2. 按照文件权限进行判断 -r 有读的权限
    -w 有写的权限
    -x 有执行的权限
  3. 按照文件类型进行判断 -f 文件存在并且是一个常规的文件
    -e 文件存在
    -d 文件存在并是一个目录
  • 应用实例
    案例1：“ok"是否等于"ok”
    在这里插入图片描述
    案例2：23是否大于等于22
    在这里插入图片描述
    案例3：/root/shell/aaa.txt 目录中的文件是否存在
    在这里插入图片描述

10、流程控制

if 判断

  • 基本语法
if [ 条件判断式 ];then 
程序
fi 
或者
if [ 条件判断式 ] 
then 
程序
elif [条件判断式]
then
程序
fi

注意事项：
1）[ 条件判断式 ]，中括号和条件判断式之间必须有空格
2) 推荐使用第二种方式
• 应用实例
案例：请编写一个shell程序，如果输入的参数，大于等于60，则输出 “及格了”，如果小于60,则输出 “不及格”
在这里插入图片描述
case语句

  • 基本语法
case $变量名 in 
"值1"）
如果变量的值等于值1，则执行程序1 
;; 
"值2"）
如果变量的值等于值2，则执行程序2 
;; 
…省略其他分支… 
*）
如果变量的值都不是以上的值，则执行此程序
;; 
esac

• 应用实例
案例1 ：当命令行参数是 1 时，输出 “周一”, 是2 时，就输出"周二"， 其它情况输出 “other”
在这里插入图片描述
for循环

  • 基本语法1
for 变量 in 值1 值2 值3… 
do 
程序
done
  • 应用实例
    案例1 ：打印命令行输入的参数
    在这里插入图片描述
  • 基本语法2
for (( 初始值;循环控制条件;变量变化 )) 
do 
程序
done
  • 应用实例
    案例1 ：从1加到100的值输出显示 [这里可以看出$* 和 $@ 的区别]
    在这里插入图片描述
    while循环
  • 基本语法1
while [ 条件判断式 ] 
do 
程序
done

• 应用实例
案例1 ：从命令行输入一个数n，统计从 1+…+ n 的值是多少？
在这里插入图片描述

11、read读取控制台输入

  • 基本语法
    read(选项)(参数) 选项：
    -p：指定读取值时的提示符；
    -t：指定读取值时等待的时间（秒），如果没有在指定的时间内输入，就不再等待了。。
    参数
    变量：指定读取值的变量名
    应用实例
    案例1：读取控制台输入一个num值
    案例2：读取控制台输入一个num值，在10秒内输入。
    在这里插入图片描述

12、函数

函数介绍
shell编程和其它编程语言一样，有系统函数，也可以自定义函数。系统函数中，我们这里就介绍两个。

系统函数

  • basename
    基本语法
    功能：返回完整路径最后 / 的部分，常用于获取文件名
    basename [pathname] [suffix]
    basename [string] [suffix] （功能描述：basename命令会删掉所有的前缀包括最后一个（‘/’）字符，然后将字符串显示出来。
    选项：
    suffix为后缀，如果suffix被指定了，basename会将pathname或string中的suffix去掉。
  • 应用实例
    案例1：请返回 /home/aaa/test.txt 的 “test.txt” 部分
    在这里插入图片描述
  • dirname基本语法
    功能：返回完整路径最后 / 的前面的部分，常用于返回路径部分
    dirname 文件绝对路径 （功能描述：从给定的包含绝对路径的文件名中去除文件名（非目录的部分），
    然后返回剩下的路径（目录的部分））
  • 应用实例
    案例1：请返回 /home/aaa/test.txt 的 /home/aaa
    在这里插入图片描述
    自定义函数
  • 基本语法
[ function ] funname[()]
{
Action;
[return int;]
}调用直接写函数名：funname [值]
  • 应用实例
    案例1：计算输入两个参数的和， getSum
    在这里插入图片描述

13、Shell编程综合案例

需求分析

  1. 每天凌晨 2:10 备份 数据库 atguiguDB 到 /data/backup/db
  2. 备份开始和备份结束能够给出相应的提示信息
  3. 备份后的文件要求以备份时间为文件名，并打包成 .tar.gz 的形式，比如：
    2018-03-12_230201.tar.gz
  4. 在备份的同时，检查是否有10天前备份的数据库文件，如果有就将其删除。
    在这里插入图片描述
    在这里插入图片描述
    代码实现：
    在这里插入图片描述
    以上就是关于LinuxShell编程的介绍，如果有不当之处或者遇到什么问题，欢迎在文章下面留言~
    如果你想了解更多关于Linux的内容，可以查看：Linux学习目录（超详细）
仰望与追逐
关注
  • 0
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Linux之大数据定制篇 - 17.大数据定制篇-Shell编程
weixin_42469070的博客
05-06 471
Linux之大数据定制篇 - 17.大数据定制篇-Shell编程为什么要学习Shell编程Shell是什么Shell脚本的执行方式脚本格式编写第一个shell脚本脚本的常用执行方式Shell的变量Shell变量介绍shell变量的定义快速入门shell变量的定义设置环境变量基本语法快速入门位置参数变量介绍基本语法位置参数变量预定义变量基本介绍基本语法应用实例 连接视频 为什么要学习Shell编程 1、Linux运维工程师在进行服务器集群管理时，需要编写Shell程序来进行服务器管理。 2、对应JavaEE
linux之大数据定制篇
Hubert的博客
03-29 3922
目录1.Shell编程1.1 shell脚本的执行方式1.2 shell变量1.2.1 系统变量1.2.2 自定义变量1.2.3 将命令的返回值赋给变量1.3 设置环境变量 1.Shell编程 Linux运维工程师在进行服务器集群管理时，需要编写Shell程序来进行服务器管理。 对于JavaEE和Python程序员来说，工作的需要，你的老大会要求你编写一些Shell脚本进行程序或者是服务器的维护，比如编写一个定时备份数据库的脚本。 对于大数据程序员来说，需要编写Shell程序来管理集群。 1.1 she
（2）BigData linux基础之shell操作
SmileTimLi的博客
04-18 247
shell相关命令的使用
linux 两个变量的值,Linux shell编程（二）高级变量
weixin_30129025的博客
05-12 242
高级变量，有3个主题：(1)变量扩展 ${变量名称} $(filename)(2)命令替换 ${命令} $(ls /)(3)算术扩展 $((算术式))$((9+9))1. 测试变量“存在于否”的基本用法语法：${待测变量-默认值}用例：unset mynamer=${myname-'basher'}echo ...
linux程序设计实验
liudaka的博客
04-26 1225
【实验题目】 linux程序设计实验 【实验目的与要求】 Linux常用命令 Linux下的shell命令 Linux下的c编程 Linux API编程 【实验原理】 Linux常用命令 Linux下的shell命令 Linux下的c编程 Linux API编程 【实验内容】 给出下面的shell脚本，对该shell脚本中的内容逐行分析并执行查看结果。 输入文件名，判断在当...
Linux全栈技术实战-Linux开山篇+Linux基础篇+Shell+Linux实操篇+Python大数据定制篇
08-30
├─001Linux开山篇_内容介绍.mp4 ├─002Linux开山篇_学习方向 .avi ├─003Linux开山篇_应用领域.avi ├─004Linux开山篇_学习阶段和方法分享 .avi ├─005Linux基础篇_Linux介绍 .avi ├─006Linux基础篇_Linux和...
shaoyayu#big_data_learning#005-大数据-7Linux-shell编程-21
07-25
Linux的变量作用域：本地局部位置特殊环境本地变量当前的shell拥有生命周期随shell如果当前的进程结束以后，变量就会被销毁。局部变量只能local用于函
大数据Shell编程.zip
09-25
大数据Shell编程是现代数据分析领域中一个重要的技能组合，它结合了大数据处理的高效能与Shell脚本的强大自动化能力。在大数据环境中，Shell脚本被广泛用于数据预处理、数据迁移、日志分析以及自动化任务执行等多个...
大数据技术原理及应用课实验8 ：Flink初级编程实践
最新发布
01-16
在本实验"大数据技术原理及应用课实验8：Flink初级编程实践"中，主要目标是熟悉Flink编程基础和使用IntelliJ IDEA工具来构建Flink程序。实验环境包括Ubuntu 18.04或16.04操作系统，IntelliJ IDEA作为开发工具，以及...
Linux shell 编程
胡嚞衎的博客
06-11 486
​ Shell 是一个用 C 语言编写的程序，这个应用程序提供了一个界面，用户通过这个界面访问操作系统内核的服务。 Shell 脚本（shell script），是一种为 shell 编写的脚本程序。 业界所说的 shell 通常都是指 shell 脚本，但shell 和 shell script 是两个不同的概念。
写一个生成1到100随机数的Linux c语言程序
weixin_42577243的博客
02-16 685
以下是一个生成1到100随机数的Linux C语言程序的示例代码： #include <stdio.h> #include <stdlib.h> #include <time.h> int main() { int random_num; srand(time(NULL)); random_num = rand() % 100 + 1;...
Linux学习笔记
黄坤的博客
05-15 226
目录1、Linux基本篇1、Linux目录结构2、vi和vim2.1 基本介绍2.2 常见的三种模式及转换2.3练习案例3、开机、重启、登录、注销4、用户管理4.1 添加用户4.2 删除用户4.3 查询用户信息4.4 切换用户4.5 用户组5、实用指令5.1 指定运行级别5.2 例子：如何找回root密码5.3 帮助指令5.4 文件目录类1、pwd2、ls3、cd4、mkdir5、touch6、cp7、rm8、mv9、cat10、>和>>11、echo12、head13 、tail14、l
linux程序条件判断实例二,Linux Shell编程
weixin_39887961的博客
05-01 253
Shell是一个命令解释器，它可以为用户提供一个向Linux内核发送请求以便运行程序的界面系统程序，用户可以通过Shell来启动、挂起、停止甚至是编写一些程序。1. Shell编程快速入门要求：脚本以#!/bin/bash开头脚本需要可执行权限执行方式：赋予xxx.sh脚本+x权限，执行脚本chmod 755 xxx.sh./xxx.sh不用赋予+x权限，直接执行sh ./xxx.sh2. She...
Shell编程——流程控制if case for
shujuku____的博客
02-20 327
if 判断 • 基本语法 if [ 条件判断式 ];then 程序 fi 或者 if [ 条件判断式 ] then 程序 elif [条件判断式] then 程序 fi 注意事项：（1） [ 条件判断式 ]，中括号和条件判断式之间必须有空格 (2) 推荐使用第二种方式 • 应用实例 案例：请编写一个shell程序，如果输入的参数，大于等于60，则输出 "及格了"，如果小于 60,则...
Linux进阶之路——shell脚本解决系统管理常见问题
Face_to_sun
04-14 577
一、编写shell脚本，求1到100的和 #!/bin/sh sum=0 i=1 while test $i -le 100 do sum=`expr $sum + $i` i=$(expr $i + 1) done echo $sum 二、编写shell脚本，从键盘输入两个数，求这两个数的和 #!/bin/sh read a read b echo $(expr $...
编写一个程序，检查变量的值是否大于 60。如果是，则打印文本“大于 60！
qq_53394650的博客
07-19 694
package HomeWork; import java.util.Scanner; public class Test12 { public static void main(String[] args) { // TODO Auto-generated method stub Scanner in = new Scanner(System.in); System.out.println("请输入一个数："); int num...
Linux shell脚本基础学习
weixin_34049032的博客
04-27 76
Linux shell脚本基础学习这里我们先来第一讲，介绍shell的语法基础，开头、注释、变量和 环境变量，向大家做一个基础的介绍，虽然不涉及具体东西，但是打好基础是以后学习轻松地前提。1. Linux 脚本编写基础◆1.1 语法基本介绍1.1.1 开头程序必须以下面的行开始（必须方在文件的第一行）：#!/bin/sh符号#!用来告诉系统它后面的参数是用来执行该文件的程序。...
Shell编程
qq_2913164570的博客
08-19 156
文章目录一、Shell是什么？二、Shell脚本的执行方式三、Shell的变量设置环境变量位置参数变量预定义变量四、运算符五、条件判断六、流程控制if判断case语句for循环while循环七、read读取控制台输入八、函数九、Shell编程综合案例 一、Shell是什么？ Shell是一个命令解释器，它为用户提供了一个向Linux内核发送请求以便运行程序的界面系统级程序，用户可以用shell来启动、挂起、停止甚至是编写一些程序。 二、Shell脚本的执行方式 脚本格式要求 1.脚本以#！/bin/b
Linux与大数据
小心小梦
07-29 3013
Linux基本命令 多数命令都可以在网上查到用法，只简单提下我常用的 .表示当前目录； cd进入用户主目录；mkdir建立新目录； cat由第一行开始显示档案内容； pwd命令用作显示工作目录的路径名称； ll显示详细信息；ls显示文件； wc -l *统计当前目录下的所有文件行数； 复制：cp 源文件（夹） 新文件（夹）； 剪切/粘贴：mv 源文件（夹） 新文件（夹）； vi...
C语言编写的Shell：Linux交互桥梁与编程入门
Shell编程是Linux系统中至关重要的组成部分，它是由C语言编写的一系列命令解释器，为用户提供了一种直接与操作系统内核交互的接口。作为既是命令语言又是程序设计语言，Shell允许用户通过命令行界面执行一系列任务，...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值