Hadoop搭建笔记(13)

本文是我学习Hadoop搭建过程中的各种笔记,内容来自于各种公开的教程,起点非常低,从Linux基础开始,直至在PC上搭建Hadoop成功,是真正的从零开始。

感谢过程中帮助我的各位认识的和不认识的老师。

23、shell中的运算符

shell和其他编程语言一样,支持多种运算符,包括:

数学运算符(加,减,乘,除,模)、

关系运算符(大,小,比较)

布尔运算符(是,非,and)

字符串运算符(判断字符串是否为空,是否相等)

文件运算符(文件是否有读写权限,文件是否存在)

原生bash不支持简单的数学运算,但是可以通过其他命令来实现,例如awk和expr(最常用)

expr是一款表达式计算工具,使用它能完成表达式的求值操作。

例如,两数相加(注意使用反引号`,而不是单引号 ’)

#!/bin/bash

val=`expr 3+3`

echo”两数之和为:$val”

执行脚本,输出结果如下所示:

两数之和为:6

注意:

表达式和运算符之间要有空格,例如 2+2 是不对的,必须写成 2 + 2 ,这与我们熟悉的大多数编程语言不一样。

完整的表达式要被 ` ` 包含 注意这个字符不是常用的单引号,在Esc建下边

算数运算符

下表列出了常用的算术运算符,假定变量a为10,变量b为20:

运算符

说明

举例

+

加法

`eapr $a + $b`    结果为 30

-

减法

`eapr $a - $b`    结果为 10

*

乘法

`eapr $a \* $b`    结果为 200

/

除法

`eapr $a / $b`    结果为  2

%

取余

`eapr $a % $b`    结果为 0

=

赋值

a=$b`  把变量b的值赋给a

操作:

[root@hadoop01 ~]# vi ./al.sh

#!/bin/bash    (注意:bash后面不可以有/)

a=20

b=10

echo `expr $a + $b`

echo `expr $a - $b`

echo `expr $a \* $b`   (*不能直接用乘号,要加一个反斜杠\)

echo `expr $a / $b`

echo `expr $a % $b`    (取模)

[root@hadoop01 ~]# chmod 744 ./al.sh

[root@hadoop01 ~]# al.sh

30

10

200

2

0

1、 关系运算符

关系运算符只支持数字,不支持字符串,除非字符串的值是数字。

下表为常用的关系运算符,假定变量a为10,变量b为20:

运算符

说明

举例

-eq

检测两个数是否相等,相等返回true

[$a –eq $b]返回false

-ne

检测两个数是否相等,不相等返回false

[$a –ne $b]返回true

-gt

检测左边的数是否大于右边的,如果是,返回true

[$a –gt $b]返回false

-lt

检测左边的数是否小于右边的,如果是,返回true

[$a –lt $b]返回true

-ge

检测左边的数是否大于等于右边的,如果是,返回true

[$a –ge $b]返回false

-le

检测左边的数是否小于等于右边的,如果是,返回true

[$a –le $b]返回ture

关系运算符实例:

[root@hadoop01 ~]# vi ./al.sh

#!/bin/bash

a=10

b=20

if [ $a -eq $b ]    注意一点加空格!

then

echo “$a == $b”

fi      fi结束

if [ $a -gt $b ]   

then

echo “$a > $b”

fi

if [ $a -ge $b ]   

then

echo “$a >= $b”

fi

if [ $a -le $b ]   

then

echo “$a <= $b”

fi    【不会被打印出来】

if [ $a –ne $b ]   

then

echo “$a != $b”

fi

清除脚本,按住d

2、 布尔运算符

下表列出了常用的布尔运算符,假定变量a为10,变量b为20:

运算符

说明

举例

! 非运算

表达式为true,则返回false,否则返回true

[! false] 返回true

-o 或运算

有一个表达式为true,则返回true

[ $a –lt 20 –o $b –gt 100]返回true

-a 与运算

两个表达式为true,才返回true

[ $a –lt 20 –a $b –gt 100]返回false

4、逻辑运算符

下表列出了常用的逻辑运算符,假定变量a为10,变量b为20:

运算符

说明

举例

|&&

逻辑的 AND

[[ $a –lt 100 && $b –gt100 ]] 返回false

| |

逻辑的 OR

[[ $a –lt 100 | | $b –gt100 ]] 返回true

5、字符串运算符

下表列出常用的字符串运算符,假定变量a为“abc”,b为变量“efg”

运算符

说明

举例

=

检测两个字符串是否相等,相等返回true

[ $a = $b ] 返回false

!=

检测两个字符串是否相等,不相等返回true

[ $a != $b ] 返回 true

-z

检测字符串长度是否为0,为0返回true

[ -z $a] 返回 false

-n

检测字符串长度是否为0,不为0返回true

[ -n $a ] 返回 true

-str

检测字符串是否为空,不为空返回true

[ $a ] 返回 ture

[root@hadoop01 ~]# vi ./al.sh

#!/bin/bash

 

a=’this’

b=’this’

if [ $a = $b ]

then

echo “$a == $b”

fi

 

if [ $a != $b ]

then

echo “$a != $b”

fi

 

if [ -z $a ]

then

echo “$a is 0”

fi

if [ -n $a ]

then

echo “$a is not 0”

fi

 

if [ $a ]

then

echo “$a is not null”

fi  

 

[root@hadoop01 ~]# al.sh

this’ == ’this’

this’ is not 0

this’ is not null

文件测试运算符

文件测试运算符用于检测 Unix 文件的各种属性

操作符

说明

举例

-b file

检测文件是否是块设备文件,如果是,返回true

[ -b $file ] 返回 false

-c file

检测文件是否是字符设备文件,如果是,返回true

[ -c $file ] 返回 false

-d file

检测文件是否是目录,如果是,返回true

[ -d $file ] 返回 false

-f file

检测文件是否是普通文件(既不是目录,也不是设备文件),如果是,返回true

[ -f $file ]

-g file

检测文件是否设置了SGID,如果是,返回true

[ -g $file ] 返回 false

-k file

检测文件是否是设置了粘着位(Sticky Bit),如果是,返回true

[ -k $file ] 返回 false

-p file

检测文件是否是具名管道,如果是,返回true

[ -p $file ] 返回 false

-u file

检测文件是否设置了SGID位,如果是,返回true

[ -u $file ] 返回 false

-r file

检测文件是否可读,如果是,返回true

[ -r $file ] 返回 false

-w file

检测文件是否可写,如果是,返回true

[ -w $file ] 返回 false

-x file

检测文件是否可执行,如果是,返回true

[ -x $file ] 返回 false

-s file

检测文件是否为空(文件大小是否大于0),如果是,返回true

[ -s $file ] 返回 false

-e file

检测文件(包含目录)是否存在,如果是,返回true

[ -e $file ] 返回 false

实例:

变量file表示文件“/home/shell/first.sh”,它的大小为100字节,具有rwx权限,下面代码将检测该文件的各种属性:

[root@hadoop01 shell]#vi if.sh

#!/bin/bash

file= "/home/shell/first.sh"

if [ -r $file ]

then

echo "可读"

if

if [ -x $file ]

then

echo "可执行"

if

if [ -f $file ]

then

echo "is file"

if

if [ -d $file ]

then

echo "is directory"

if

if [ -s $file ]

then

echo "file is not null"

if

if [ -e $file ]

then

echo "file is exists"

if

#!/bin/bash

file=”/home/shell/first.sh”

if [ -r $file ]

then

echo”文件可读”

else

echo”文件不可读”

fi

 

24、shell中的if else

shell脚本中的流程控制

写成一行这么写:if[ ]; then echo“”;fi

单一的if:(表达式必须有空格)

if[]

then

cmd1

fi

单一的if else :(表达式必须有空格,else后不能有then)

if[]

then

cmd1

else

cmd2

fi

if else-if else :(elif后必须有then)

if condition1

then

     command1

elif condition2

then

command2

else

commandN

fi

案例:

[root@hadoop01 shell]#vi if.sh

#!/bin/bash

a=10

b=20

c=15

if [ $a -gt $b ]

then

echo "$a > $b"

fi

if [ $a -lt $b ]

then

echo "$a < $b"

else

echo "$a is not sammer $b"

fi

if [ $a -lt $b ]

then

echo "$a < $b"

elif [ $a -gt $b -a $b -lt $c ]

then

echo "$a > $b and $b < $c"

else

echo "$a < $b"

fi

[root@hadoop01 shell]# chmod 744 ./if.sh

[root@hadoop01 shell]# if.sh

10 < 20

10 < 20

 

不要写大于小于的符号,

大于:-gt,小于:-lt。

if 后面一点要有then,无论if还是elif

有if的地方,后面一定更控制条件

1、资源项目源码均已通过严格测试验证,保证能够正常运行; 2、项目问题、技术讨论,可以给博主私信或留言,博主看到后会第一时间与您进行沟通; 3、本项目比较适合计算机领域相关的毕业设计课题、课程作业等使用,尤其对于人工智能、计算机科学与技术等相关专业,更为适合; 4、下载使用后,可先查看README.md或论文文件(如有),本项目仅用作交流学习参考,请切勿用于商业用途。 5、资源来自互联网采集,如有侵权,私聊博主删除。 6、可私信博主看论文后选择购买源代码。 1、资源项目源码均已通过严格测试验证,保证能够正常运行; 2、项目问题、技术讨论,可以给博主私信或留言,博主看到后会第一时间与您进行沟通; 3、本项目比较适合计算机领域相关的毕业设计课题、课程作业等使用,尤其对于人工智能、计算机科学与技术等相关专业,更为适合; 4、下载使用后,可先查看README.md或论文文件(如有),本项目仅用作交流学习参考,请切勿用于商业用途。 5、资源来自互联网采集,如有侵权,私聊博主删除。 6、可私信博主看论文后选择购买源代码。 1、资源项目源码均已通过严格测试验证,保证能够正常运行; 2、项目问题、技术讨论,可以给博主私信或留言,博主看到后会第一时间与您进行沟通; 3、本项目比较适合计算机领域相关的毕业设计课题、课程作业等使用,尤其对于人工智能、计算机科学与技术等相关专业,更为适合; 4、下载使用后,可先查看README.md或论文文件(如有),本项目仅用作交流学习参考,请切勿用于商业用途。 5、资源来自互联网采集,如有侵权,私聊博主删除。 6、可私信博主看论文后选择购买源代码。
应用背景为变电站电力巡检,基于YOLO v4算法模型对常见电力巡检目标进行检测,并充分利用Ascend310提供的DVPP等硬件支持能力来完成流媒体的传输、处理等任务,并对系统性能做出一定的优化。.zip深度学习是机器学习的一个子领域,它基于人工神经网络的研究,特别是利用多层次的神经网络来进行学习和模式识别。深度学习模型能够学习数据的高层次特征,这些特征对于图像和语音识别、自然语言处理、医学图像分析等应用至关重要。以下是深度学习的一些关键概念和组成部分: 1. **神经网络(Neural Networks)**:深度学习的基础是人工神经网络,它是由多个层组成的网络结构,包括输入层、隐藏层和输出层。每个层由多个神经元组成,神经元之间通过权重连接。 2. **前馈神经网络(Feedforward Neural Networks)**:这是最常见的神经网络类型,信息从输入层流向隐藏层,最终到达输出层。 3. **卷积神经网络(Convolutional Neural Networks, CNNs)**:这种网络特别适合处理具有网格结构的数据,如图像。它们使用卷积层来提取图像的特征。 4. **循环神经网络(Recurrent Neural Networks, RNNs)**:这种网络能够处理序列数据,如时间序列或自然语言,因为它们具有记忆功能,能够捕捉数据中的时间依赖性。 5. **长短期记忆网络(Long Short-Term Memory, LSTM)**:LSTM 是一种特殊的 RNN,它能够学习长期依赖关系,非常适合复杂的序列预测任务。 6. **生成对抗网络(Generative Adversarial Networks, GANs)**:由两个网络组成,一个生成器和一个判别器,它们相互竞争,生成器生成数据,判别器评估数据的真实性。 7. **深度学习框架**:如 TensorFlow、Keras、PyTorch 等,这些框架提供了构建、训练和部署深度学习模型的工具和库。 8. **激活函数(Activation Functions)**:如 ReLU、Sigmoid、Tanh 等,它们在神经网络中用于添加非线性,使得网络能够学习复杂的函数。 9. **损失函数(Loss Functions)**:用于评估模型的预测与真实值之间的差异,常见的损失函数包括均方误差(MSE)、交叉熵(Cross-Entropy)等。 10. **优化算法(Optimization Algorithms)**:如梯度下降(Gradient Descent)、随机梯度下降(SGD)、Adam 等,用于更新网络权重,以最小化损失函数。 11. **正则化(Regularization)**:技术如 Dropout、L1/L2 正则化等,用于防止模型过拟合。 12. **迁移学习(Transfer Learning)**:利用在一个任务上训练好的模型来提高另一个相关任务的性能。 深度学习在许多领域都取得了显著的成就,但它也面临着一些挑战,如对大量数据的依赖、模型的解释性差、计算资源消耗大等。研究人员正在不断探索新的方法来解决这些问题。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Demoatnes

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值