一.Linux目录结构
| 目录 | 作用 |
| / | Linux系统的根目录，一般只存放目录 |
| /bin和/usr/bin | 命令（二进制）文件目录，包含可供root用户和普通用户所使用的Linux命令和二进制文件，包含shell解析器等 |
| /boot | 系统引导和内核目录，存放引导装载文件 |
| /dev | 设备目录，存放各个硬件设备的信息，例如光驱、硬盘等 |
| /etc | 系统级别的配置文件存放的目录，一般由配置管理员来使用 |
| /home | 所有普通用户的家目录 |
| /lib、/usr/lib、 /usr/local/lib | 系统使用的函数库的目录 |
| /lost+fount | 在ext2和ext3文件系统中，系统崩溃时记录信息的目录 |
| /opt | 给主机额外安装软件所摆放的目录 |
| /proc | 重要的需要放置在内存中的数据 |
| /root | root用户的的根目录 |
| /sbin、/usr/sbin /usr/local/sbin | 放置的是系统管理员（root）才能使用的命令，普通用户只能进行查看，而/bin目录中的命令普通用户也可以使用 |
| /tmp | 存放应用程序产生的临时数据不能在此目录下存放重要数据 |
| /var | 系统一般运行时需要改变的数据 |
| /sys | 系统相关文件存放目录 |
| /usr | 应用程序相关目录命令、函数库、共享包、内核源码 |
1.快捷键
基本操作和命令
Ctrl+R 查找历史输入过的命令
Ctrl+C 终止或退出当前操作
2.Table键的使用
①、自动补全命令或目录
②、在某个目录下只有一个目录的时候可以不用输入首字母直接敲table即可自动补全目录
③、双击table时一般为显示所有命令或者列出某个目录下的所有目录和文件
二. LinuxShell操作
1. Linux系统级别命令
1.1 查看当前Linux系统信息
uname-a 显示系统及版本的所有信息
uname-r 显示内核版本
uname–m 显示计算机是多少位系统
1.2 查看系统小版本
cat/etc/redhat-release
1.3 查看当前主机名
hostname
1.4 查看第一个网卡
ifconfigeth0 eth0第一网卡
1.5 查看和设置系统时间
date 查看时间
date -s "2015-5-8 19:48:00" 设置系统时间
1.6 设置时区
执行tzselect命令-->选择Asia-->选择China-->选择east China - Beijing, Guangdong, Shanghai, etc-->
设置完后会出现Therefore TZ='Asia/Shanghai' will be used.
1.7 设置系统时间同步到硬件时钟
hwclock--systohc
1.8 查看进程
ps -fe | grep redis 查看进程 管道过滤 redis的进行
ps -ef | grep java 检查java进程是否存在
1.9 PS是LINUX下最常用的也是非常强大的进程查看命令
//以下这条命令是检查java进程是否存在.
ps -ef |grep java
下面对命令选项进行说明:
-e 显示所有进程。
-f 全格式。
ps e 列出程序时，显示每个程序所使用的环境变量。
ps f 用ASCII字符显示树状结构，表达程序间的相互关系
grep命令是一种强大的文本搜索工具，它能使用正则表达式搜索文本，并把匹配的行打印出来。grep全称是Global Regular Expression Print，表示全局正则表达式版本，它的使用权限是所有用户。
1.10 显示当前在运行的进程包括对CPU 内存使用量
top -s
1.11 管道 |
cmd1| cmd2 将cmd1输出结果交给cmd2命令来执行
1.12 grep过滤
grep //输出包含指定字符串的行
-i //忽略大小写
-v //取反
--color //突出显示查找字符串
1.13 重新启动Linux操作系统
reboot
init6
1.14 关闭Linux操作系统
shutdown -h now
init 0
1.15 图形和命令行转换
vi /etc/inittab 可以修改开始默认模式 id:5:initdefault: 将5改为3，之后开机默认是命令模式，可以init 5 进入图形界面
init 3 命令行模式
init 5 图形化
1.16 显示守护进程目录树
pstree
1.17 显示所有正在运行的进程
ps -aux
1.18 显示所有正在运行java 进程
jps
1.19 结束正在运行的指定进程(参照33)
kill -9 pid
1.20 linux 不进去系统更改root密码
①.在grub选项菜单按e进入编辑模式
②.编辑kernel那行 输入” 1”（空格1）
③.按B重启存的
④.进入后执行下列命令
root@#passwd root (配置root的密码)
Enter new unix password:输入新的密码
root@#init 6
1.21 wgeturl 通过命令下载网页
wget http://192.168.21.41/lrzsz.rpm
2. Linux磁盘与U盘操作
2.1 显示系统的磁盘空间用量
df –h //显示磁盘分区信息
mkfs.ext3 /dev/sdb1 //格式化硬盘分区
fdisk -l //查看磁盘分区
fdisk /dev/sdb //硬盘分区51显示磁盘分区
2.2 挂载 （将u盘挂载）
进入 /media（媒体） 文件夹，在里面创建upan文件夹 mkdir upan，然后进行挂载。
mount -t vfat /dev/sdb1 /media/umnt //挂载
umount /media/umnt //卸载
2.3 linux文件格式
ext4 vfat
2.4 windows文件格式
fat32 ntfs
3. Linux账号与组操作
3.1 账户
①、超级账户 root uid = 0
②、普通账户 uid > = 500
③、系统账户 uid = 1 ~ 499
/etc/passwd //保存账户的信息
/etc/shadow //保存账户密码信息
/root //root用户家目录
/home/xxx //普通用户xxx的家目录
3.2 添加和删除用户 useradd
useradd //创建用户
-u 指定uid
-d 指定宿主目录
-s 指定使用shell
-e 指定用户过期时间
-g 指定基本组
-G 指定附加组
useraddopenlab //创建openlab 用户
gpasswd-a openlab gropenlab //将用户加入到组中
gpasswd-d openlab gropenlab //将用户从组中删除
echo "123456" | passwd --stdin feige //不通过交互信息，直接改用户密码
userdel //删除用户 不删除用户文件
userdel-r //连主目录一起删除
id openlab //显示用户信息
3.3 创建用户组
groupadd manager 创建一个manager用户组
好处：可以统一的去管理用户
3.4 创建用户
useradd -G manager tom 创建tom用户并分配到manager用户组
useradd -G manager tom2
3.5 更改密码方式1
passwd tom 更改tom 的密码 若不加passwd 更改的当前用户的密码
3.6 更改密码方式2
echo "root" | passwd - stdin root //不通过交互信息，直接改用户密码
3.7 删除指定的账号
userdel tom2
3.8 锁定帐户 tom2 禁止其登录
usermod -L tom2
3.9 切换当前用户帐户为 admin
su – admin 切换带admin用户
3.10 显示当前登录用户帐户
whoami
3.11 查看系统文件判断添加用户组添加用户操作是否正确
cat /etc/passwd
cat /etc/group
4. Linux文件文件夹操作
4.1 查看当前位置
pwd 显示当前的位置
4.2 显示当前目录的文件列表
ls /home 显示home文件夹下的内容列表
ls –l /home 显示根目录下的home文件下的文件列表
4.3 递归显示/目录的文件列表
ls -R /home R必须是大写
4.4 显示文件或文件夹详细信息
权限：读取\写入\可执行
归属关系：所有者\所属组\其他用户
-|rw-|---|---.1 root root 1771 4月 28 2015 anaconda-ks.cfg
①② ③ ④ ⑤ ⑥ ⑦ ⑧ ⑨
①：文件类型
- 文件
d 目录
l 链接
②：所有者权限（u）
r 读 4
w 写 2
x 执行 1
③：所属组权限（g）
r 读 4
w 写 2
x 执行 1
④：其他用户权限（o）
r 读 4
w 写 2
x 执行 1
⑤：所有者
⑥：所属组
⑦：文件大小
⑧：最后修改时间
⑨：文件名
4.5 创建文件夹和文件
mkdir /tmp/test01 //在根目录下的tmp文件夹中创建test01空文件夹
mkdir /data1/hadoop/hdfs/name -p //创建多级文件夹
touch /tmp/test01/file.txt //在根目录下的tmp文件夹中的test01文件夹创建空文件file.txt Linux 是没有后缀名字，自行加入为了更直观的区分
4.6 复制文件
cp /tmp/file1.txt /opt //复制/tmp中的file1.txt文件到/opt中
4.7 复制目录
cp-r /tmp/test01 /opt //递归的方式复制/tmp中的test01 文件夹到/opt中
4.8 移动，剪切，重命名
mv/opt/test01 /tmp
mv/opt/file1.txt /tmp/file2.txt
4.9 删除
rm file.txt //删除file.txt文件
rm-r data //删除data目录（递归式删除）
rm-f //强制删除
rm –rfdata //常用命令 不可恢复
4.10 文件内容查看
cat-n //查看内容时显示行号
cat/etc/redhat-release //不显示行号
cat-n /etc/passwd //查看内容时显示行号
4.11 设置文件所有者拥有对文件读写执行权限
chmod 777 /data0/my.cnf
4.12 目录文件显示多行可上下翻查
less/etc/passwd
4.13 显示文件的头10行或尾10行
tail //默认查看文件尾10行
head //默认查看文件头10行
-n 数字 //查看指定头几行
#tail /etc/passwd
#head /etc/passwd
#tail -n 2 /etc/passwd //查看文件末尾两行
#head -n 3 /etc/passwd
#head-n 12 /etc/passwd | tail -n 5
4.13 重定向> >>
>先清空文件内容，后写入新的内容
#ls -l /root > /tmp/file1.txt
>>追加新的内容，旧的内容不会消除
#ls -l /root >> /tmp/file1.txt
4.14 屏幕打印 echo
echo"No Hello World..." //打印到屏幕
echo “hello word” /data0/my.cnf //打印到文件
echo “hello word” >> /data0/my.cnf //打印追加到文件
4.15 文本编辑器 VIM
vimfile
:q //退出
:w //保存
:wq //保存退出
:q! //强制退出
4.16 打包 tar原理
tar
-c 打包
-x 解包
-f 必须要
-C 指定解包位置
-v 输出信息
-z 压缩
4.17 打包 tar案例（tar命令平常就代替了gz命令）
//将一个文件打包
# tar -cvf folder.tarfile1.txt
//将多个文件打成一个包
# tar -cvf folder.tarfile1.txt file2.txt
# tar –cvffile.tar *.jpg (常用方法)
//解包到当前目录
# tar -xvf folder.tar (常用方法)
//解包到指定目录
# tar -xvf folder.tar-C /home/sss
//将多个文件打包并压缩
# tar -zcvf file.tar.gzfolder1 floder2
//将文件解包并解压缩
# tar -zxvf file.tar.gz (常用方法)
4.18 使用 tar备份指定目录
//将/data0/内容包括子目录中内容备份至 /data3/data0.tar.gz
tar -zcvf /data3/data0.tartar.gz /data0
4.19 恢复 tar文件中的内容
/data3/data0.tar.gz 至 /data2
tar -zxvf /data3/data0.tar.gz -C /data2
4.20 给shell命令起别名
vi /etc/bashrc
在文件最后一行添加
alias cls=’clear’
保存退出后输入
source /etc/bashrc 生效
4.21 修改指定文件文件的所属组所有者为hadoop用户
chown -r hadoop:hadoop /data3/data0.tar.gz
4.22 which查找cmd命令所在路径
# which reboot
4.23 locate 文件查找-效率很快（用的是数据库）
# locate httpd.conf //查找文件按所在
# updatedb //更新数据库，使之生效
4.24 find 文件查找-效率很慢
# find / -name httpd.conf
# find / -name httpd.conf
find 路径 条件
# find / -name httpd.conf -exec ls -l {} \;
find 路径 条件 -exec cmd {} \;
5. Linux网络与安全级别操作
5.1 修改主机名
# vim /etc/sysconfig/network
NETWORKING=yes
HOSTNAME=hadoop1 修改这里
别忘了重启文件
# service network restart
# hostname hadoop1 //临时修改
5.2 修改主机名与IP地址映射文件
# vim /etc/hosts //解析文件
修改主机和IP之间的映射，因为程序之间是不记IP的只记主机名称，
192.168.10.11 hadoop1
5.3 常见服务端口
web tcp 80
telnet tcp 23
ssh tcp 22
ftp tcp 20/21
smtp tcp 25
pop3 tcp 110
imap tcp 143
dns tcp/udp 53
可以参考/etc/services
5.4 关闭防火墙
查看防护墙状态
service iptables status
关闭
service iptables stop
查看防火墙开机启动状态
chkconfig iptables –list
关闭开机启动
chkconfig iptables off
5.6 改虚拟机ip地址
5.6.1 删网卡
vim/etc/udev/rules.d/70-persistent-net.rules
//eth0删掉 eth1改成eth0
克隆的虚拟机需要删母版的网卡
5.6.2 改IP
# vi/etc/sysconfig/network-scripts/ifcfg-eth0 注意MAC地址和UUID
DEVICE=eth0
TYPE=Ethernet
UUID=d06a4eee-dd5c-45e5-afbc-38a8a8440bd9
ONBOOT=yes
NM_CONTROLLED=yes
BOOTPROTO=none
HWADDR=00:0C:29:74:E7:3E
IPADDR=192.168.10.11
PREFIX=24
GATEWAY=192.168.10.254
DNS1=192.168.10.254
DEFROUTE=yes
IPV4_FAILURE_FATAL=yes
IPV6INIT=no
NAME="System eth0"
# service networkrestart //别忘了重启文件
5.7 更改环境变量
# vi /etc/profile //进入profile文件
exportJAVA_HOME=/home/bigdata/jdk/ //JDK安装路径
export HADOOP_HOME=/home/bigdata/hadoop/
exportCLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar:
export PATH=$PATH:$JAVA_HOME/bin:/home/bigdata/protoc/bin:$ZOOKEEPER_HOME/bin:$ZOOKEEPER_HOME/conf:$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$HIVE_HOME/bin:
# source /etc/profile 使之生效
5.8 设置SSH免登陆
telnet：明文 ssh：加密 ssh 默认端口22
#ssh root@192.168.10.11
#ssh -l root 192.168.10.11
计算机A每次SSH远程连接计算机B时，都需要输入密码。当有些软件需要频繁使用SSH连接其他计算机时，这个时候需要人工填写计算机B的密码，这个会造成大量无用操作，不利于程序的使用。
在为了避免这类问题的发生，而且也要兼顾安全问题（设置SSH免密码登陆后，SSH这台计算就不需要密码即可登陆，存在安全隐患），使用公钥和私钥方式解决SSH免密码登陆问题，而且只在一边做，另一边不做，这样也达到了安全的问题。一般是那台机器需要SSH远程其他机器，就在这台机器上设置SSH免登陆操作。
"公私钥"认证方式简单的解释:首先在客户端上创建一对公私钥 （公钥文件：~/.ssh/id_rsa.pub； 私钥文件：~/.ssh/id_rsa）。然后把公钥放到服务器上（~/.ssh/authorized_keys）, 自己保留好私钥.在使用ssh登录时,ssh程序会发送私钥去和服务器上的公钥做匹配.如果匹配成功就可以登录了。
ssh 无密码登录要使用公钥与私钥。linux下可以用ssh-keygen生成公钥/私钥对.
5.8.1 方法一
① 、在master机下生成公钥/私钥对。
# ssh-keygen -t rsa
连续按三次回车键就生成了钥匙
② 、追加到key文件当中
# cat ~/.ssh/id_rsa.pub >>~/.ssh/authorized_keys
③ 、将master机子上的key给其他机子上发送一份
# scp ~/.ssh/authorized_keysslave1:/root/.ssh/
# scp ~/.ssh/authorized_keysslave2:/root/.ssh/
远程的发送给其他机器，前面在点的隐藏文件或文件夹
④ 、测试
# ssh slave2 直接进入slave2不用密码
# exit 退出链接
5.8.2方法二（推介）
1) 主机生成秘钥
# ssh-keygen -t rsa
2) 然后给每台机器拷贝一份，包括主机本身
# ssh-copy-id hadoop01
# ssh-copy-id hadoop02
# ssh-copy-id hadoop03
第一次拷贝需要送入密码
5.8.3方法三
5.9 传送文件 scp
①传单个文件
scp/home/bigdata/jdk-7u79-linux-x64.tar.gz hadoop2:/home/bigdata/
//scp文件路径加文件名 接收方主机名字:保存路径
② 传送多个文件，用的是递归的方式
scp -r/home/bigdata/jdk1.7.0_79/ hadoop2:/home/bigdata/
5.10 下载文件 scp
#scp root@192.168.10.11:/root/love.txt /tmp/ //只发目录
#scp -P 30741 root@192.168.1.11:/tmp/love.txt /tmp //对指定端口发生文件
#scp -r /tmp/hadoop root@192.168.1.11:/tmp/ //目录下的所有文件
5.10 操作新linux系统流程
① 检查vmware上该虚拟机的网卡是否开启
② 检查vmware虚拟机的vm1网卡是否设置ip地址
③ 关闭NetworkManager网络管理服务
④ 关闭防火墙
⑤ 更改ip地址
⑥ 更改主机名称和主机映射
⑦ 使用连接工具（xshell）进行连接
⑧ 如果出现问题按照以上流程检查
三、克隆
克隆完需要改网卡，改IP，改UUID，改MAC地址，改主机名称
vi /etc/udev/rules.d/70-persistent-net.rules
将0网卡删了，因为他是母版机器的，然后将1网卡改成0
vi/etc/sysconfig/network-scripts/ifcfg-eth0
然后将MAC改了，MAC在克隆虚拟机的时候，会自动创建
Uuid随便改一个，改ip。
vi/etc/sysconfig/network 这个是改主机名字
NETWORKING=yes
HOSTNAME=hadoop2 修改这里
vi /etc/hosts hosts这个是改映射文件,主机和IP之间的映射，因为程序之间是不记IP的只记主机名称
192.168.10.11hadoop1
192.168.10.12 hadoop2
init 6 重启机器
四、快照
五、添加笔记
1.Linux安装软件有三种方式
tar 减压安装
rpm –ivh xxx.rpm 安装包安装，不需要联网
yum 联网下载安装
rpm -qa 可以查看安装的软件
# rpm -qa|grep ntp 查找有ntp的安装
171
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
