日常梳理-linux

一、常用命令：

查看系统参数

查看系统编码 locale

进程最大打开文件数 ulimit -n

系统最大打开文件数 cat /proc/sys/fs/file-max

查看cpu使用情况 top

查看内存可用情况 free

查看磁盘的空间 df -lh xx路径

查看磁盘分区状态 lsblk

lsblk -f
查看块设备的文件系统类型及UUID

查看当前目录使用的总空间大小 du -h --max-depth=0

查看当前目录下某文件使用空间大小 du -h --max-depth=1 文件名

查看文件行数 wc -l 文件名

查看端口占用 netstat -aon|grep 端口

根据端口查占用进程 lsof -i:端口

设置session不过期 export TMOUT=0

curl命令

post请求，data数据中包含单引号，使用’‘’

curl -X POST -H 'Content-type:application/json' -d '{"key1":"value1";"key2":"'\''127.0.0.1:8080'\''"}'  http://ip:port/xxx

二、常见问题

1. 时区问题，导致时间转换时差12小时

EDT：指美国东部夏令时间，波士顿、纽约市、华盛顿哥伦比亚特区，都在这个时区内，跟北京时间有12小时的时差，晚12小时。

调整时区为CST：

mv /etc/localtime /etc/localtime.bak
ln -s /usr/share/zoneinfo/Asia/Shanghai  /etc/localtime
date

2. Linux报too many open files的解决方案

进程最大打开文件数 ulimit -n
系统最大打开文件数 cat /proc/sys/fs/file-max

3. 提示bash: $‘\241llll’: command not found

vi /etc/profile
在环境变量中，添加

PATH.PATH:/usr/local/sbin:/usr/local/bin:/sbin:/bin:/usr/sbin:/usr/bin:/root/bin/

以我本地为例：

export PATH=:$JAVA_HOME/bin:PATH.PATH:/usr/local/sbin:/usr/local/bin:/sbin:/bin:/usr/sbin:/usr/bin:/root/bin/

4. 删除乱码文件

ll -rtli 
find ./ -inum 27930571 -exec rm {} \;

5. su切换用户，提示“This account is currently not available”

情况1
id xx用户 查看是否有该用户，无，则进行新增。
情况2
su - xx用户 放在脚本里执行
情况3
cat /etc/pas*|grep xx用户
xxxxx:/sbin/nologin
vim /etc/pas*
#找到用户所在行，/sbin/nolog 调整成**/bin/bash**

三、磁盘分区挂载

例：将/dev/vdc 进行分区，然后挂载到/cfps2目录下
1、lsblk 查看磁盘分区状态
2.分区
fdisk /dev/vdc(以实际为准)
w 保存
3、设置文件系统类型
mkfs -t ext4 /dev/vdc1
4、查看文件系统糊弄
lsblk -f
5.挂载
mount /dev/vdc1 /cfps2
卸载挂载点
umount /dev/vdc1

四、基本命令

用户

添加用户

添加用户 useradd xxx

创建用户，指定组，指定附加组，指定家目录

useradd 参数：
-G GROUPS：指定额外组(不指定，默认组名和用户名一样)。
-b 指定用户家目录（不指定，默认/home/用户名）

创建xxx用户，指定组xxx,指定附加组xxx，家目录为/

1. 先创建用户组：
   groupadd xxx
2. 再创建用户：
   useradd xxx -g xxx -G xxx -b /
3. 设置密码
   passwd xxx 空格，按提示输入密码

删除用户 userdel xxuser

查看所有用户 cat /etc/passwd

用户组：

添加用户组 groupadd xxgroup

验证是否添加

tail -n 2 /etc/group

删除用户组 groupdel xxgroup

查看用户组

查看所有用户组 cat /etc/group

查看xx用户所属组 groups xxuser

查看当前用户所属组 groups

将xx用户添加进xx工作组 usermod -G xxgroup xxuser

主机名

查看主机名 hostname

修改主机名

(重启后无效) hostname hadoop

(重启后永久生效) vi /ect/sysconfig/network

修改IP

(重启后无效) ifconfig eth0 192.168.12.22

(重启后永久生效) vi /etc/sysconfig/network-scripts/ifcfg-eth0

查看有谁在线（哪些人登陆到了服务器）

who 查看当前在线
last 查看最近的登陆历史记录

文件权限

文件权限的操作

linux文件权限的描述格式解读
drwxr-xr-x （也可以用二进制表示 111 101 101 --> 755）

d：标识节点类型（d：文件夹 -：文件 l:链接）
r：可读 4
w：可写 2
x：可执行 1
第一组rwx： 表示这个文件的拥有者对它的权限：可读可写可执行
第二组r-x： 表示这个文件的所属组对它的权限：可读，不可写，可执行
第三组r-x： 表示这个文件的其他用户（相对于上面两类用户）对它的权限：可读，不可写，可执行

修改文件权限
chmod g-rw haha.dat 表示将haha.dat对所属组的rw权限取消
chmod o-rw haha.dat 表示将haha.dat对其他人的rw权限取消
chmod u+x haha.dat 表示将haha.dat对所属用户的权限增加x

也可以用数字的方式来修改权限
chmod 664 haha.dat
就会修改成 rw-rw-r–

如果要将一个文件夹的所有内容权限统一修改，则可以-R参数
chmod -R 770 aaa/
chown angela:angela aaa/ <只有root能执行>

目录没有执行权限的时候普通用户不能进入
文件只有读写权限的时候普通用户是可以删除的(删除文件不是修改它,是操作父及目录),只要父级目录有执行和修改的权限

为用户配置sudo权限

用root编辑 vi /etc/sudoers 或 visudo
在文件的如下位置，为hadoop用户添加一行即可
root ALL=(ALL) ALL
hadoop ALL=(ALL) ALL

然后，hadoop用户就可以用sudo来执行系统级别的指令
[hadoop@shizhan ~]$ sudo useradd huangxiaoming

配置主机之间的免密ssh登陆

三台虚拟机ssh免密码互相通信
node01
node02
node03

三台虚拟机执行以下命令，生成公钥与私钥

ssh-keygen -t rsa

拷贝公钥到同一台机器

ssh-copy-id node01

复制第一台机器node01的认证到其他机器

scp /root/.ssh/authorized_keys node02:/root/.ssh
scp /root/.ssh/authorized_keys node03:/root/.ssh

Linux目录结构：

bin (binaries)存放二进制可执行文件
boot 存放用于系统引导时使用的各种文件
dev (devices)用于存放设备文件
etc (etcetera)存放系统配置文件

usr (unix shared resources)用于存放共享的系统资源,主要存放的是一些软件程序以及这些程序所需要使用的库。

• /usr：系统级的目录，可以理解为C:/Windows/。
• /usr/lib：理解为C:/Windows/System32。
• /usr/local：用户级的程序目录，可以理解为C:/Progrem Files/。用户自己编译的软件默认会安装到这个目录下。

/opt （可选的）用来安装附加软件包，是用户级的程序目录，可以理解为D:/Software。安装到/opt目录下的程序，它所有的数据、库文件等等都是放在同个目录下面。

home 存放用户文件的根目录
lib (library)存放跟文件系统中的程序运行所需要的共享库及内核模块
mnt (mount)系统管理员安装临时文件系统的安装点
tmp (temporary)用于存放各种临时文件
var (variable)用于存放运行时需要改变数据的文件(比如log文件)
root 超级用户目录
sbin (super user binaries)存放二进制可执行文件，只有root才能访问