基于Centos7的Linux Shell（含Hadoop shell），Linux运维开发者跳槽指南

先自我介绍一下，小编浙江大学毕业，去过华为、字节跳动等大厂，目前阿里P7

深知大多数程序员，想要提升技能，往往是自己摸索成长，但自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！

因此收集整理了一份《2024年最新Linux运维全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友。

既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，涵盖了95%以上运维知识点，真正体系化！

由于文件比较多，这里只是将部分目录截图出来，全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频，并且后续会持续更新

如果你需要这些资料，可以添加V获取：vip1024b （备注运维）

正文

• 文件操作：（增、删、改、查）
  → 新建文件（增）：touch
  → 删除文件（删）：rm -rf
  → 修改文件（改）：vi或vim （visual interface，vim是vi的加强版）
  → 查询文件（查）：cat
• 分页查看文件:more filePath (例：more hello.txt)
  • Enter: 向下n行， 需要定义，默认为1行.
  • 空格键: 向下滚动一屏 后者 Ctrl + F
  • B键： 返回上一屏 或者 Ctrl + B
  • q: 退出more
• 分页查看文件:less hello.txt
  • 语法： less[参数] 文件
  • 参数：-m ：显示类似more 命令的百分比.
    -n : 显示每行的行号.
  • 相关操作：
    空格键：前进一页 或 page down
    b: 后退一页 或 page up
    d: 前进半页
    u：后退半页
    回车键：前进一行 或使用方向键向下
    y： 后退一行 或者 使用方向键向上。
    /字符串：向下搜索
    ？字符串：向上搜索
    v：进行vim编辑器
    左右方向键： 相当于水平滚动条
    q：退出
• 只查看最后几行：(常用于常看日志文件)
  tail -f hello.txt #循环读取
  tail -n100 hello txt #显示100行
  ctrl + c： 退出
  tail & hello.txt #表示后台运行， 否则占用终端。
  (例：touch /root/test/aaa.txt)
  (例：rm /root/test/aaa.txt -rf)
  (例：vim /root/test/aaa.txt)注;“i进入编辑，:wq保存退出”
  (例：cat /root/test/aaa.txt)

4 . vi或vim编辑器

• vi或vim是linux中的文件编辑器
• vim编辑器有3种模式：命令模式、编辑模式、底行模式

5. 压缩和解压命令

• tar压缩解压
  说明：（-z:调用gzip指令，-c:create新建tar文件，-x:extract解压tar文件，-v:verbose显示运行过程信息，-f：file指定文件名）
  压缩：tar -zcvf 压缩结果 指定路径文件
  解压：tar -zxvf 指定路径文件 -C 指定路径
  △ 扩充：
  tar -zPcvf 加上P可以使用绝对路径结果
  (例：tar -zcvf test.tar.gz test)
  (例：tar -zxvf /root/test.tar.gz -C /home/samsung )
  (例：tar -zPcvf /home/samsung/test.tar /root/test)
• 压缩包尽量使用.tar.gz后缀，否则不知道是压缩打包文件。
• zip 压缩解压
  压缩：zip -r 压缩结果 指定路径文件
  解压：unzip -d 指定路径 指定路径文件
  (例：zip -r test.zip test)
  (例：unzip -d /home/samsung /root/test.zip)

6. 其它常用命令

• wget(进行相关文件的下载)
  格式：wget 下载链接
  注意：使用此命令进行下载， 在哪个路径下使用， 就会将文件下载到哪个位置.
  wgt http://download.redis.io/releases/redis-4.0.2.tar.gz

• grep (内容查询)
  语法：grep 字符串 文件名称 # 查询在某文件中是否存在该字符串
  例：grep hello 1.txt #查询1.txt中是否存在“hello”字符串
  grep hello 1.txt --color #高亮显示查找到的内容

• which（2进制文件查询）
  语法：which 二进制的文件名
  查看某个二进制文件是否存在
  例：which cd #是否存在cd二进制指令

• ps（进程查询）
  语法：
  ps #查看ps命令本身的进程和当前终端进程
  ps -ef #查看当前linux系统所有的进程
  例：ps -ef

• kill（杀死进程）
  语法：kill -9 进程的pid #杀死指定pid的进程
  或kill -SIGKILL 进程的pid
  例: kill -9 123456 #杀死pid为123456的进程

• | （管道）
  语法：命令1 | 命令2 | 命令3 #前面的查询结果作为后面的查询条件。
  类比 流水线从前往后作业.
  例：ps -ef | grep mysqld

• useradd、passwd、userdel、whoami、who am i （用户管理）
  useradd samsung #创建新用户samsung
  passwd 或者passwd samsung # 密码设置
  userdel -r samsung #删除用户samsung
  userdel -rf samsung #强制删除用户samsung
  who #
  whoami # 只查看当前用户名
  who am i #查看当前用户何时登录进来的

• sudo （用户切换）
  sudo -su root # 切换至root用户
  su root

• chmod （文件权限）
  d rwx rwx rwx #文件类型 所属用户user(u) 用户组group(g) 其它用户other(o) 所有用户all(a)

• 文件权限分为3种:read(r:4),write(w:2),executable(x：1)

• 文件用户角色分为3种：user(U),group(g),other(o)

• 文件赋权方式分为3种：
  文件默认权限是：644 （rw_r__r__）
  1.直接进行±权限
  chmod u+x 文件
  chmod g-r 文件
  2.通过数字进行
  chmod 777 文件
  3.通过赋值进行
  chmod u=rwx,g=rx,o=rw 文件
  例:chmod u=rwx,g=rx,0=rw 1.txt

• hostname、ifconfig、systemctl、service(网络和服务)
  hostname #查询当前主机名
  vim /etc/hostname #修改当前主机名
  vim /etc/hosts #设置所有主机的主机名
  ifconfig #查看当前主机的IP和mac物理地址
  vim /etc/sysconfig/network-scripts/ifcfg-ens33
  注：centos7.*都是使用systemctl，兼容service不推荐，
  centos6. :service 服务
  systemctl stop mysqld #关闭mysql服务
  systemctl start mysqld #打开mysql服务
  systemctl status mysqld #查看mysql服务的状态
  systemctl enable mysqld #打开mysql开机自启动服务
  systemctl disable mysqld #关闭mysql开机自启动服务

• rz、sz（文件上传和下载）
  yum install -y lrzsz #安装 lrzsz
  rz 然后指定文件 #上传指定文件
  sz 文件名 # 下载文件

• 其它(ln、clear、su、exit、shutdown、halt、reboot、sync、data)
  ln -s 目标文件 快捷 #创建快捷方式
  例：ln -s /root/1.txt /root/ai.txt
  clear 或 ctrl +l #清屏
  su -用户 #切换其它用户登录
  exit 或 ctrl +d #退出当前用户
  shutdown -h now #立即进行关机
  shutdown -h 1 #1分钟后关机
  shutdown -h now #立刻关机（类似断电关机）
  shutdown -r now # 现在重新启动计算机
  halt #立刻关机(centos)(类似不断关机)
  reboot # 重启计算机
  sync #将当前内存中的数据同步到磁盘
  data #显示当前时间
  data +%Y #显示当前年份
  data +%m #显示当前月份
  data +%d #显示当前是那一天
  data “+%Y-%M-%D %H:%M:%S”(功能描述，显示年月日时分秒)

Hadoop Shell

Hadoop提供了文件系统的shell命令使用格式如下：

hadoop fs：既可以操作HDFS,也可以操作本地系统。

hdfs dfs：只能操作HDFS系统

• 1.ls命令

• 格式：hadoop fs -ls URI
  作用：类似linux的ls命令，显示文件列表
  hadoop fs -ls / #显示文件列表
  hadoop fs -ls -R #递归显示文件列表

• 2.mkdir命令

• 格式：hadoop fs -mkdir [-p]
  作用：以中的URI作为参数，创建目录。使用-p参数可以递归创建目录
  例：hadoop fs -mkdir /dir1
  hadoop fs -mkdir -p /aaa/bbb/ccc

• 3.put命令

• 格式：hadoop fs -put …
  作用：将单个的源文件或者多个源文件srcs从本地文件系统上传到目标文件系统中。
  

最全的Linux教程，Linux从入门到精通

======================

1. linux从入门到精通(第2版)

2. Linux系统移植

3. Linux驱动开发入门与实战

4. LINUX 系统移植 第2版

5. Linux开源网络全栈详解 从DPDK到OpenFlow

第一份《Linux从入门到精通》466页

====================

内容简介

====

本书是获得了很多读者好评的Linux经典畅销书**《Linux从入门到精通》的第2版**。本书第1版出版后曾经多次印刷，并被51CTO读书频道评为“最受读者喜爱的原创IT技术图书奖”。本书第﹖版以最新的Ubuntu 12.04为版本，循序渐进地向读者介绍了Linux 的基础应用、系统管理、网络应用、娱乐和办公、程序开发、服务器配置、系统安全等。本书附带1张光盘，内容为本书配套多媒体教学视频。另外,本书还为读者提供了大量的Linux学习资料和Ubuntu安装镜像文件，供读者免费下载。

本书适合广大Linux初中级用户、开源软件爱好者和大专院校的学生阅读，同时也非常适合准备从事Linux平台开发的各类人员。

需要《Linux入门到精通》、《linux系统移植》、《Linux驱动开发入门实战》、《Linux开源网络全栈》电子书籍及教程的工程师朋友们劳烦您转发+评论

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

需要这份系统化的资料的朋友，可以添加V获取：vip1024b （备注运维）

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

需要这份系统化的资料的朋友，可以添加V获取：vip1024b （备注运维）
[外链图片转存中…(img-rY9I0HbG-1713231576464)]

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！