大数据-linux基础操作,虚拟机,shell编程

最新推荐文章于 2023-07-12 15:08:10 发布
最新推荐文章于 2023-07-12 15:08:10 发布
阅读量307 收藏 2
点赞数
分类专栏： BigData FAQ Summary 文章标签： 网络 linux java 大数据 centos
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_45154559/article/details/105065546
版权

目录

在这里插入图片描述
重点:bin:存放二进制可执行文件
etc:存放系统配置文件
home:存放所以用户文件根目录
usr:存放系统应用程序,比较重要的目录/usr/local管理员软件安装目录

局域网工作机制和网络配置

在这里插入图片描述
在这里插入图片描述

vmware虚拟网络的配置介绍

在这里插入图片描述
在这里插入图片描述

linux网络配置

在这里插入图片描述

方法一:

终端输入:setup
在这里插入图片描述
查看网络配置: ifconfig
发现网络ip地址并未改变,因为改完不会立刻生效需要在输入:
service network restart

方法二:vi /etc/sysconfig/network-scripts/ifcfg-ens32

在这里插入图片描述
在这里插入图片描述
通过配置映射,可以通过主机名称直接访问不同的虚拟机

文件常用操作命令

1.日常操作命令

查看当前所在工作目录:

pwd

查看当前系统时间

date

查看有谁在线(那些人登录到了服务器)

who查看当前在线
last查看最近的登录历史记录

2.文件系统操作

查看根目录下的文件信息

ls /
ls -al -a是显示隐藏文件 -l是以更详细的列表形式显示

切换目录

cd /home

创建和删除操作

在这里插入图片描述
rm -r * 当前目录下所有内容全部删除

拷贝和移动文件

在这里插入图片描述
在这里插入图片描述
~在linux中表示家目录
-p 递归创建
.表示当前目录
tree在这里插入图片描述
在这里插入图片描述
cp在这里插入图片描述
在这里插入图片描述
mv
在这里插入图片描述
在这里插入图片描述

文件内容命令

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
cat 文件1 文件2 > 文件3
将文件1和文件2内容合并输出到文件3中
more
在这里插入图片描述
在这里插入图片描述
空格向下翻页
grep
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
行首匹配
在这里插入图片描述
行尾匹配
在这里插入图片描述

其他命令

在这里插入图片描述
echo
在这里插入图片描述
echo + 重定向
在这里插入图片描述
管道
在这里插入图片描述

远程管理命令

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
ifconfig
在这里插入图片描述
127.0.0.1被称为本地回环/环回地址,一般用来测试本机网卡是否正常

使用管道+grep命令 可以直接过滤,显示出ip地址内容
在这里插入图片描述
ping
在这里插入图片描述
在这里插入图片描述

远程登录和复制文件

在这里插入图片描述
在这里插入图片描述
scp终端命令主要是Mac电脑和虚拟机进行交互
在这里插入图片描述
scp
在这里插入图片描述

SSH

在这里插入图片描述
客户端->服务器私钥传递数据,服务器拿到数据后通过客户端的ssh-copy-id得到公钥进行解密,解密后返回数据通过服务器传递公钥加密数据,传回客户端,客户端在通过自己的私钥进行解密
在这里插入图片描述

用户权限

在这里插入图片描述
在这里插入图片描述

文件权限
在这里插入图片描述
文件权限分位三个组，分别是当前文件拥有者权限，组权限，其他用户权限。

在这里插入图片描述
硬链接就是当前目录有几种方式到达
在这里插入图片描述
chmod
在这里插入图片描述
在这里插入图片描述

组管理

在这里插入图片描述
groupadd在这里插入图片描述

用户管理

在这里插入图片描述
useradd
在这里插入图片描述
在这里插入图片描述
id
在这里插入图片描述
passwd文件
在这里插入图片描述
who

在这里插入图片描述
在这里插入图片描述
usermod
在这里插入图片描述
在这里插入图片描述
which
在这里插入图片描述
bin存储的是可执行文件
而sbin存储的是系统可执行文件
在这里插入图片描述
su
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
chmod
在这里插入图片描述

系统信息

在这里插入图片描述
date，cal
在这里插入图片描述
df -h
在这里插入图片描述
在这里插入图片描述
ps
在这里插入图片描述
kill
在这里插入图片描述

其他命令

在这里插入图片描述
在这里插入图片描述
find
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

一个文件创建软连接,一但删除掉源文件,软连接也就失效.而硬链接,删除源文件并不会影响硬链接文件
在这里插入图片描述

打包压缩

在这里插入图片描述
打包
在这里插入图片描述
解包
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

软件安装

在这里插入图片描述

虚拟机克隆注意事项

在这里插入图片描述
在这里插入图片描述
这里有一个小技巧,可以直接把mac地址这个文件删除掉,从启电脑他会自动生成新的mac地址
在这里插入图片描述
在这里插入图片描述
dd直接删除这一行.完成上述两个操作,就完成mac配置了.
在这里插入图片描述

SSH协议

在这里插入图片描述

文件上传下载

在这里插入图片描述
在这里插入图片描述

查找文件

案例模板:
在这里插入图片描述

创建文件

1.touch somefile.1 创建一个名字叫somefile.1的空文件
2.echo “i miss you” > somefile.2 利用重定向>的功能,将一条指令的输出结果写入到一个文件夹中,如果文件夹不存在,进行创建
echo “i miss you” >> somefile.2 使用单>会覆盖源文件内容,而两个>>是追加的意思
3.用文本编辑器来编辑生成文件: vi somefile.4 首先会进入命令模式,使用i进行添加内容按ESC退出编辑模式,然后输入:wq保存退出
在这里插入图片描述

4.基本的用户管理

useradd angela 添加用户angela
要修改密码才能登陆
passwd angela 按提示输入密码
为用户配置sudo权限:用root编辑 vi /etc/sudoers
在这里插入图片描述
sudo 用其他身份执行命令
su变更身份

5.系统管理操作

1.查看主机名称:hostname
2.修改主机名(重启后无效)hostname hadoop
3.修改主机名(重启后永久生效)vi /etc/sysconfig/network
4.修改ip:vi /etc/sysconfig/network-scripts/ifcfg-ens33
5.日期date
Ctrl+c:终止进程
Ctrl+z:挂起
查看当前系统信息:uname
设置时区tzselect
hwclock --systohc 将硬件时钟调整为与目前的系统时钟一致。
last 列出目前与过去登入系统的用户相关信息
shutdown 系统关机指令。
halt关闭系统
reboot重启
alias cls="clear"起别名,clear起一个别名cls 然后别忘记source一下文件目录
cd 空cd是返回家目录
cd - 从家目录返回上一次目录(按照的是操作顺序返回)
cd …返回上一级目录

程序猿与汪
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Shell 编程入门（一）
.
08-07 6664
Shell 简介 什么是 Shell？ shell 是操作系统提供给我们用户来访问系统资源的一个接口。 shell 同时还是一个 Linux 下的命令行解释器，类似 Windows 下的 cmd。 shell 同时还是解释型的脚本语言：运行时翻译，执行一条语句翻译一条，每次执行程序都需要进行解释。 Shell 的发展 shell 有多个版本：Bourne Shell，C Sh...
Linux下shell编程
小鹏的专栏
07-02 926
Linux下一个““石头、剪刀、布”问题的Shell脚本实现”，主要应用shell脚本编程实现良好的人机交互猜拳游戏
Linux虚拟机中shell编程（入门）
weixin_46752181的博客
06-22 8200
文章目录shell script（shell脚本）第一个shell脚本： Hello World！shell变量shell运算符算数运算符关系运算符布尔运算符逻辑运算符字符串运算符文件测试运算符 shell script（shell脚本） Shell 是一个用 C 语言编写的程序，它是用户使用 Linux 的桥梁。Shell 既是一种命令语言，又是一种程序设计语言。 Shell 是指一种应用程序，这个应用程序提供了一个界面，用户通过这个界面访问操作系统内核的服务。 Shell 脚本（shell script
Linux虚拟机中的Shell命令
zhaozisha的博客
07-08 4093
Linux虚拟机中的Shell命令基本操作1.      关机命令：halt、reboot、poweroff2.      查看匹配网卡：ifconfig3.      清屏：clear（保留之前得信息）reset（清空）4.      当前用户：who（查看登陆信息）who -l（查看登陆信息和登陆终端的进程pid）5.      帮助手册：man6.      路径表示方法：相对路径（从根开始...
Linux7.6—Shell编程 虚拟机相互免密钥
qq_45794091的博客
09-19 432
虚拟机相互免密钥
大数据-Scala编程基础_教学指导
08-20
大数据培训班的这门课程主要涵盖Scala编程基础，内容重点在于帮助学员掌握Scala语言开发环境的搭建以及其基本语法，同时理解Scala中的函数式编程范式。Scala是一种多范式的编程语言，它完美地结合了面向对象编程和...
大数据必备基础linux教程
02-18
通过以上内容的学习，你将具备在Linux环境下进行基本操作的能力，为后续深入学习大数据相关技术打下坚实基础。请务必动手实践，因为“实践是检验真理的唯一标准”，只有通过实际操作，你才能真正掌握这些知识。祝你...
02大数据开发必备基础.pdf
10-09
总的来说，这个教程涵盖了大数据开发所需的关键技能，从虚拟机集群的搭建，到Linux操作系统的运用，再到Shell命令和脚本编程，这些知识将帮助开发者构建坚实的基础，以应对复杂的大数据处理任务。
大数据shell入门到精通视频教程
12-10
#### 三、Shell脚本编程基础 - **变量定义与使用**：包括环境变量、用户自定义变量及其使用方法。 - **条件判断与循环控制**：学习`if`语句、`for`循环、`while`循环等控制结构。 - **函数定义与调用**：如何定义和...
201808达内大数据Linux阶段学习课后笔记
01-17
这份“201808达内大数据Linux阶段学习课后笔记”涵盖了Linux基础到高级应用的诸多方面，旨在帮助学习者深入理解Linux系统及其在大数据环境中的应用。 笔记首先可能会介绍Linux的基础知识，包括Linux的历史、哲学...
快速生成虚拟机shell脚本
weixin_41701302的博客
02-04 1587
#!/bin/bash read -p "请输入将要做模版的虚拟机：" BASEVM read -p "请输入新的虚拟机名字：" NEWVM qemu-img create -f qcow2 -b /var/lib/libvirt/images/${BASEVM}.qcow2 /var/lib/libvirt/images/${NEWVM}.qcow2 &>/dev/null cp ...
Linux虚拟机shell学习。
Richard_Lio的博客
03-23 356
shell是什么？ 我认为shell其实是一个命令解释器，它的作用是解释用户输入的命令和程序，相当于人和计算机的交流，一种交互方式。 关于shell的一些命令。 !!：用来执行上一条指令。 !n：即执行第n（数字）条命令。 !字符串：用来执行历史中最近一次以某某字符串开头的指令。 alias：别名，即可看到系统预设的别名。 ...
Linux系统与shell编程（1.安装虚拟机VMware以及基于VMware下安装Ubuntu）
沉晨尘宸的博客
03-14 285
安装虚拟机VMware以及Ubuntu一.安装虚拟机VMware二.安装Ubuntu 一.安装虚拟机VMware 从公众号安装 VMware公众号安装 一直下一步下一步改个路径什么的常规操作 然后安装Ubuntu 二.安装Ubuntu 官网下载 然后打开VMware选择创建虚拟机 在这里插入图片描述 ...
【Linux】shell编程基础（超详细，入门看这一篇就够了）
默默发展，无声壮大~
05-09 7421
1.Shell编程语言具有普通编程语言的很多特点，比如它也有循环结构和分支控制结构等，用这种编程语言编写的Shell程序与其他应用程序具有同样的效果2,shell支持具有字符串值的变量。shell变量不需要专门的说明语句，可通过赋值语句完成变量并予以赋值。在命令行或shell脚本文件中使用$name的形式引用变量name的值其中，name是变量名，它的值是string，"="是赋值符号。变量名由以字母或下划线开头的字母、数字和下划线字符序列组成。
基于linux下的虚拟机控制及shell壳层
Logbook的博客
05-13 467
我们上机环境就是使用红帽公司的Linux编译器。就如linux系统后右键选择“open in teriminal”,接下来进行输入一些控制虚拟机的命令： 1.虚拟机的控制：[kiosk@foundation0 Desktop]$ rht-vmctl   view     desktop   #显示虚拟机[kiosk@foundation0 Desktop]$ rht-vmctl   start  ...
最全Linux Shell详细教程
最新发布
独旅天涯
07-12 2万+
若不存在，则创建一个文件，使用touch来创建，创建完成后离开；如果存在，判断该名称是否为文件，若为文件，则显示其行数；如果不是文件，则离开；我们在这里就在本地测试学习，因此我在这里先不建议大家这么着急去买服务器来学，这样比较费钱，等我们学好这些基础之后，再去上手服务器，那将是手到擒来。condition 一般为条件表达式，如果返回值为 false，则继续执行循环体内的语句，否则跳出循环。这里又到了最后了，补充一下printf跟echo命令是一样的作用，因此我就不演示了，统一用echo来输出。
VMware安装CentOS 7及Linux Shell脚本
qq_62656514的博客
11-06 3355
VMware安装CentOS 7(包括配置静态ip) 及Linux Shell脚本
linux虚拟机之ubuntu的Shell编程（7/10）
qq_59819866的博客
11-16 2502
当命令或程序语句不在命令行下执行，而是通过一个程序文件来执行时，该程序文件就被称为Shell脚本。在Shell脚本里内置了很多命令、语句及循环控制，然后将这些命令一次性执行完毕，这种通过文件执行脚本的方式称为非交互的方式。Shell脚本语言很适合用于处理纯文本型的数据，而Linux系统中几乎所有的配置文件、日志文件，以及绝大对数的启动文件都是纯文本类型的文件。1．shell脚本就是由Shell命令组成的执行文件，将一些命令整合到一个文件中，进行处理业务逻辑，脚本不用编译即可运行。为该脚本文件添加执行权限。
Shell编程
王陈锋的博客
12-19 1082
1、了解shell的概念2、了解shell变量的种类及其使用3、理解和掌握条件测试的原理和方法4、掌握用VI创建shell脚本的方法5、掌握shell脚本的执行方法 1、CPU：P4 1.6GHz 内存：1G 2、Windows7操作平台，Vmware虚拟机1、if、case等条件语句的使用2、for、while、until等循环语句的使用方法#! /bin/bashread var1read var2read var3read var4read var5read var6read var7read
Spark3.3编程实践：大数据实验六 - 文件操作与去重
这不仅锻炼了对基本数据操作的理解，也为后续编写独立应用程序打下了基础。 接下来，学生被鼓励使用Scala语言编写程序，因为Scala是Spark的首选编程语言。他们需要编写一个JAR包，利用sbt工具进行编译，并通过`...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值