大数据基础之shell（一）：shell概述

已于 2023-02-04 19:48:43 修改
阅读量187 收藏
点赞数 1
分类专栏： 大数据之基础shell 文章标签： 大数据
于 2023-01-16 21:58:19 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/yiluohan0307/article/details/128709741
版权

大数据之shell-第一章 shell概述

大数据程序员为什么要学习Shell呢？

  • 需要看懂运维人员编写的 Shell 程序。
  • 偶尔会编写一些简单 Shell 程序来管理集群、提高开发效率。

Shell 是一个命令行解释器，它接收应用程序/用户命令，然后调用操作系统内核。

https://cdn.jsdelivr.net/gh/yiluohan1234/PicgoImg/img/shell/202205260913175.jpg

Shell 还是一个功能相当强大的编程语言，易编写、易调试、灵活性强。

yiluohan0307
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
大数据之Shell编程
weixin_44857218的博客
03-25 294
今天学习的shell编程，重点是shell脚本怎么编译运行的，他怎么定义变量，还有特殊变量基本语法的用法等，都是基础好好打基础
尚硅谷大数据视频_Shell视频教程
10-26
Shell是一个功能相当强大的编程语言，易编写、易调试、灵活性强。Shell可以帮助我们来管理大数据集群，提高开发效率。本课程详细讲 解：Shell解析器、变量、运算符、条件判断、流程控制、函数、cut、sed、awk、sort...
大数据学习：shell脚本
X_Serendipity的博客
12-14 446
shell脚本
大数据之Shell基础
小M呀~之大数据系列
01-06 1247
目录 1.shell概述 2.shell脚本入门 2.1 shell 解析器 2.2 脚本格式 3.shell中的变量 3.1 系统变量 3.2 自定义变量 4.运算符 4.1基本语法 4.2 案例实操： 5.条件判断 5.1 基本语法 5.2 常用判断条件 6.流程控制 6.1 if判断 6.1.1 基本语法 6.1.2 案例实操 6.2 case语句 6.2.1 基本语法 6.2.2 案例实操 6.3 for循环 6.3.1 基本语法 6.3.2 案例实操.
大数据：关于Shell的介绍
Aa112233aA1的博客
06-03 392
Shell在计算机科学中俗称“壳”，是提供给使用者使用界面的进行与系统交互的软件，通过接收用户输入的命令执行相应的操作，Shell分为图形界面Shell和命令行式Shell。 HDFS Shell包含类似Shell的命令，示例如下： hadoop fs hadoop dfs hdfs dfs 上述命令中，“hadoop fs”是使用面最广，可以操作任何文件系统，如本地系统、HDFS等，“hadoop dfs”则主要针对HDFS文件系统，已经被“hdfs dfs”代替。 文件系统（FS）Shell包含了
大数据手册(Linux)--Linux shell教程
WilenWu
06-22 437
Shell Shell 是一个用 C 语言编写的程序，它是用户使用 Linux 的桥梁。Shell 既是一种命令语言，又是一种程序设计语言。 Shell 是指一种应用程序，这个应用程序提供了一个界面，用户通过这个界面访问操作系统内核的服务。 Shell 变量 定义变量时，变量名和等号之间不能有空格 还可以用控制/循环语句给变量赋值 使用变量，只要在变量名前面加美元符号$即可 变量名外面加...
大数据习题-这是一份大数据相关的考试试卷和一些课程内容概述
03-17
1. 大数据概述部分主要考查了大数据的基本概念、特征、发展阶段、思维转变、计算模式等基础知识。 2. Hadoop部分重点考查了Hadoop的核心组成、特性、生态系统组件以及HDFS相关的理论和操作。 3. HBase部分着重考查...
大数据习题（2024）-大数据概述部分主要考查了大数据的基本概念、特征、发展阶段、思维转变、计算模式等基础知识
最新发布
03-17
大数据概述部分主要考查了大数据的基本概念、特征、发展阶段、思维转变、计算模式等基础知识。 Hadoop部分重点考查了Hadoop的核心组成、特性、生态系统组件以及HDFS相关的理论和操作。 HBase部分着重考查了HBase作为...
BigDataRoadshow-labs:大数据路演的存储库 - 实验室
05-29
路演议程通常的流程如下： 09:00 - 10:15：“成为数据驱动型企业的旅程” 10:15 - 10:30：茶歇10:30 - 12:00：物联网演示和架构概述12:00 - 1:00：午餐和羽毛之鸟讨论1:00 - 3:00：实践技术研讨会该存储库包含动手...
cuny_msda_is622:CUNY MS Data Anayltics课程IS622大数据与机器学习的资源
04-29
概述该脚本为基于debianLinux系统设置了完整的Hadoop和Spark环境。 它还安装了关联的R绑定，以直接从R运行这些系统。请注意，它假定使用的是新环境，因此，如果您有现有Linux系统，则应查看脚本并注释掉不想运行的...
学习Hadoop第二十三课（Shell简单入门）
u012453843的专栏
10-30 1036
上节课我们一起学习了Sqoop（数据迁移工具），这节课我们一起简单学习一下Shell脚本。      首先我们来新建一个test.sh文件，并在文件内输入一句用来输出的语句，如下所示。 [root@itcast03 ~]# vim test.sh echo '123'       保存上面的内容，我们试着执行一下test.sh，发现会报如下所示的提示，说没有权限执行。 [root@itc
什么是Shell
秋雨ヾ的博客
11-17 171
第1章 Shell概述 第2章 Shell解析器 （1）Linux提供的Shell解析器有： [jinghnag@hadoop101 ~]$ cat /etc/shells /bin/sh /bin/bash /sbin/nologin /bin/dash /bin/tcsh /bin/csh （2）bash和sh的关系 [jinghnag@hadoop101 bin]$ ll | grep...
大数据技术之shell
weixin_43816759的博客
06-14 202
1．脚本格式脚本以#!/bin/bash开头（指定解析器）2．第一个Shell脚本：helloworld（2022/5/30 17:50-18:30）需求：创建一个Shell脚本，输出helloworld创建一个datas文件夹，用来存放后续的脚本创建一个helloworld脚本输入脚本内容（i：进行编辑；esc：取消编辑；wq：退出）脚本常用执行方式采用bash或sh+脚本的相对路径或绝对路径（不用赋予脚本+x权限）采用输入脚本的绝对路径或相对路径执行脚本（必须具有可执行权限+x）注意：第一种执行方法，本
大数据shell基础
qq_41586263的博客
10-09 324
一、常用shell命令 1、管道命令：| 命令1 | 命令2 命令1的输入作为命令2的输入 2、抓取命令 grep命令 （可以使用正则表达式来过滤） 3、查找命令 find命令 选项参数：-type, -name, -size, -perm… 如果上面这个不行可以在*.log上加引号 4、流编辑器 sed命令 sed (stream editor)是一种在线编辑器，它一次处理一行内容...
大数据技术之Shell
weixin_43436831的博客
05-14 233
第1章 Shell概述 大数据程序员为什么要学习Shell呢？ 1）需要看懂运维人员编写的Shell程序。 2）偶尔会编写一些简单Shell程序来管理集群、提高开发效率。 第2章 Shell解析器 （1）Linux提供的Shell解析器有： [bambooJohn@hadoop101 ~]$ cat /etc/shells /bin/sh /bin/bash /sbin/nologin /usr/bin/sh /usr/bin/bash /usr/sbin/nologin ...
大数据之Shell: Shell概述
weixin_43597208的博客
05-17 211
目录1.Shell概述1.什么是shell?2.什么是编译型语言，什么是解释型语言？2.Shell解析器1.Linux提供的Shell解析器有:2.bash和sh的关系：sh是bash的一个快捷方式;3.Centos默认的解析器是bash3. Shell脚本入门 1.Shell概述 1.什么是shell? shell 是一个命令行解释器，它接受应用程序/用户命令，然后调用操作系统内核； shell 还是功能相当强大的编程语言，易编写，易调试，灵活性强； 2.什么是编译型语言，什么是解释型语言？ 编译型语言:
四、大数据技术之shell编程
qq_38132995的博客
05-10 599
一、shell简要介绍 1）Linux提供的Shell解析器有： # cat /etc/shells /bin/sh /bin/bash /sbin/nologin /bin/dash /bin/tcsh /bin/csh 2）bash和sh的关系，属于 ll | grep bash -rwxr-xr-x. 1 root root 941880 5月 11 2016 bash lrwxrwxrwx. 1 root root 4 5月 27 2017 sh -> bash 3）Ce
Linux--shell脚本造大数据
FreshBreeze的专栏
07-31 2651
#!/bin/bash msgid=4981 while read var1 do echo $msgid","$var1",tsst,content made by qhd for performance testing zzzzzzzzzzzzzzzzzz,Ctrip,2014-07-03 07:37:59.520,0,NULL,READ,F,2014-07-03 11:18:24.2
OLAP设计和实现
03-08 863
第一讲 简介 首先，啥叫数据仓库？ 数据仓库就是数据的仓库！用外文说叫Data Warehouse，简称DW。 是不是哐当倒下一片啊，要不咱换个专业点的说法？ 数据仓库是一个面向主题的、集成的、相对稳定的、反映历史变化的、包含商业信息的数据集合，用于支持管理决策。 看得懂不？谅你也不懂。 算了，别叫这真了。 等你明白了舍生取义，你自然会明白什么是数据仓库的。   数据仓库里面有大
大数据开发的shell脚本
09-08
下面是一个示例的大数据开发的shell脚本： ```bash #!/bin/bash # 设置变量 input_dir="/path/to/input" output_dir="/path/to/output" log_file="/path/to/logs" # 创建输出目录 mkdir -p $output_dir # 执行...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

yiluohan0307

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值