Linux 网络文件共享介绍
- 一.常见的存储类型
- 二.文件传输协议 FTP
-
- 2.1 FTP 工作原理
- 2.2 常见的 FTP 软件
- 2.2.1 vsftpd 软件
-
- 2.2.2 vsftpd 服务常见配置
-
- 2.2.2.1 命令端口配置
- 2.2.2.2 主动模式端口
- 2.2.2.3 被动模式端口范围
- 2.2.2.4 使用当地时间
- 2.2.2.5 使用匿名用户登录
- 2.2.2.6 允许匿名上传文件
- 2.2.2.7 指定匿名用户的上传文件的默认的所有者和权限
- 2.2.2.8 Linux 系统用户
- 2.2.2.9 将系统用户映射为指定的 guest 用户
- 2.2.2.10 限定系统用户在指定目录
- 2.2.2.11 启用日志
- 2.2.2.12 启用提示信息
- 2.2.2.13 PAM 模块实现用户访问控制
- 2.2.2.14 是否启用控制用户登录的列表文件
- 2.2.2.15 vsftpd 服务指定用户身份运行
- 2.2.2.16 连接数限制
- 2.2.2.17 传输速率,字节/秒
- 2.2.2.18 连接时间:秒为单位
- 2.2.2.19 优先以文本方式传输
- 2.2.2.20 实现基于 SSL 的 FTPS
- 2.2.3 vsftpd 虚拟用户概念
- 2.2.4 基于文件验证的虚拟用户
- 2.2.5 基于 mysql 验证的虚拟用户
- 三.文件共享服务
- 四.SAMBA 服务
- 五.数据同步 rsync
- 六.案例
一.常见的存储类型
目前常见的存储类型有 DAS,NAS,SAN 等,最主要的区别是硬盘存储媒介是如何
于处理器连接的,以及处理器使用何种方式来访问磁盘,以及访问磁盘使用
的协议(网络协议、I/O 协议)。
-
三种存储类型如下
- 直连式存储:Direct-Attached Storage,简称 DAS
- 网络附加存储:Network-Attached Storage,简称 NAS
- 存储区域网络:Storage Area Network,简称 SAN
1.1 DAS 类型的存储
- DAS 存储是最常见的一种存储方式,尤其是在中小企业应用中。PC 中的硬盘或只
有一个外部 SCSI 接口的 JBOD 都属于 DAS 架构。DAS 是指存储设备直接连接到
服务器总线上,存储设备只与一台独立的主机连接,其他主机不能使用这个存储
设备。DAS 存储设备与服务器主机之间的连接通道通常采用 SCSI 连接,DAS 存储
设备主要是磁盘阵列(RAID: Redundant Arrays of Independent Disks)、磁盘簇
(JBOD:Just a Bunch Of Disks)等。
1.2 NAS 类型的存储
- NAS 存储就是存储设备通过标准的网络拓扑结构(比如以太网)添加到一群计算
机上。与 DAS 以及 SAN 不同,NAS 是文件级的存储方法。采用 NAS 较多的
功能是用来进行文件共享。 - NAS 存储也通常被称为附加存储,顾名思义,就是存储设备通过标准的网络拓
扑结构(例如以太网)添加到一群计算机上。NAS 是文件级的存储方法,它的重
点在于帮助工作组和部门级机构解决迅速增加存储容量的需求。如今更多的人
们采用 NAS 较多的功能是用来文档共享、图片共享、电影共享等等,而且随着
云计算的发展,一些 NAS 厂商也推出了云存储功能,大大方便了企业和人们等
个人用户的使用。 - NAS 产品是真正即插即用的产品。NAS 设备一般支持多计算机平台,用户通过
网络支持协议可进入相同的文档,因而 NAS 设备无需改造即可用于混合
Unix/Windows NT 局域网内,同时 NAS 的应用非常灵活。但 NAS 有一个关
键性问题,即备份过程中的带宽消耗。与将备份数据流从 LAN 中转移出去的
存储区域网(SAN)不同,NAS 仍使用网络进行备份和恢复。NAS 的一个缺点
是它将存储事务由并行 SCSI 连接转移到了网络上。这就是说 LAN 除了必须
处理正常的最终用户传输流外,还必须处理包括备份操作的存储磁盘请求。
1.3 SAN 类型的存储
- 存储区域网络,这个是通过光纤通道或以太网交换机连接存储阵列和服务器主机,
最后成为一个专用的存储网络。SAN 经过十多年历史的发展,已经相当成熟,成
为业界的事实标准(但各个厂商的光纤交换技术不完全相同,其服务器和 SAN
存储有兼容性的要求)。
- SAN 提供了一种与现有 LAN 连接的简易方法,并且通过同一物理通道支持广
泛使用的 SCSI 和 IP 协议。SAN 不受现今主流的、基于 SCSI 存储结构的
布局限制。特别重要的是,随着存储容量的爆炸性增长,SAN 允许企业独立地增
加它们的存储容量。SAN 的结构允许任何服务器连接到任何存储阵列,这样不管
数据置放在那里,服务器都可直接存取所需的数据。因为采用了光纤接口,SAN
还具有更高的带宽。 - 如今的 SAN 解决方案通常会采取以下两种形式:光纤信道以及 iSCSI 或者基于
IP 的 SAN,也就是 FC SAN 和 IP SAN。光纤信道是 SAN 解决方案中大家最熟
悉的类型,但是,最近一段时间以来,基于 iSCSI 的 SAN 解决方案开始大量出
现在市场上,与光纤通道技术相比较而言,这种技术具有良好的性能,而且价格低
廉。
-
SAN 的优势:
-
随着存储容量的增长,SAN 允许企业独立地增加他们的存储容量。SAN 允许任
何服务器连接到任何存储阵列(好处是:不管数据放在哪里,服务器都可以直接
存取所需的数据) -
由于使用光纤接口,SAN 具有更高的带宽。除了 FC 连接,SAN 连接还有
ISCSI(SCSI over IP)以及 SAS(Serial Attached SCSI)接口。 - 光纤接口可以提供 10 公里那么长那么远的连接长度,非常容易实现物理分离的存储
1.4 三种存储类型的比较
- 技术上
处理器----存储 连接类型 | 有无网络 | 媒介 | I/O 协议 | 带宽 | 是否容量共享 | 是否数据共享 |
---|---|---|---|---|---|---|
DAS | NO | 使用并行 SCSI,光纤通道 | SCSI | 40MBps-160MBps,取决于媒介 | 手动配置,默认不共享 | NO |
SNA | YES | 最常用光纤网络,后来也可基于以太网 | SCSI | 100MBps or 200MBps | YES | 数据共享需要特定软件配合,如 SANergy |
NAS | YES | 以太网 | NFS,CIFS | 10Mbps–1Gbps | YES | YES |
- 优缺点和使用场景
-
三种存储架构的应用场景
-
DAS 虽然比较古老了,但是还是很适用于那些数据量不大,对磁盘访问速度要求
较高的中小企业 -
NAS 多适用于文件服务器,用来存储非结构化数据,虽然受限于以太网的速度,
但是部署灵活,成本低 -
SAN 则适用于大型应用或数据库系统,缺点是成本高、较为复杂
- 应用和磁盘的交互
二.文件传输协议 FTP
2.1 FTP 工作原理
File Transfer Protocol(FTP):文件传输协议,是用于在计算机网络上的客户机和服务器
之间传输文件的标准应用层协议。FTP 是基于客户端/服务器模型(C/S),并且使用不同的连
接来工作,将控制和数据传输分开,控制通道使用 TCP/21 端口,数据通道端口视情况而定。
FTP 用户可以使用明文登录协议进行身份验证,通常是用户名和密码的形式,但如果服务器配
置允许,则可以匿名连接(此时连接的用户名为 ftp 或者 anonymous)。对于保护用户名和密
码并对内容进行加密的安全传输,FTP 通常使用 SSL/TLS (FTPS)或 SSH 文件传输协议
(SFTP)进行保护。
第一个 FTP 客户端应用程序是在操作系统具有图形用户界面之前开发的命令行程序,并且到
目前仍然随大多数 Windows、Unix 和 Linux 操作系统一起提供。此后,许多 FTP 客户端
和自动化实用程序被开发用于桌面、服务器和移动设备。
-
FTP 工作时使用两种模式:从服务器角度来说
-
主动模式(PORT style): 服务器主动连接客户端
控制通道:客户端:随机 port —> 服务器:21/tcp
数据通道:客户端:随机 port <—服务器:20/tcp -
被动模式(PASV style): 客户端主动连接服务器
控制通道:客户端:随机 port —> 服务器:21/tcp
数据通道:客户端:随机 port —> 服务器:随机 port /tcp
例如:服务器被动模式数据端口
227 Entering Passive Mode (172,16,0,1,224,59)
客服端主动连接服务器
可以在客户端看到该消息,服务器数据端口计算:224*256+59
-
FTP 服务状态码
- 1XX:信息 125:数据连接打开
- 2XX:成功类状态 200:命令 OK 230:登录成功
- 3XX:补充类 331:用户名 OK
- 4XX:客户端错误 425:不能打开数据连接
- 5XX:服务器错误 530:不能登录 用户认证:
- 匿名用户:ftp,anonymous,对应 Linux 用户 ftp
- 系统用户:Linux 用户,用户/etc/passwd,密码/etc/shadow
- 虚拟用户:特定服务的专用用户,独立的用户/密码文件
2.2 常见的 FTP 软件
-
常见的 FTP 服务端软件
- Wu-ftpd,Proftpd,Pureftpd
- Filezilla Server,Serv-U,Wing FTP Server,IIS
-
vsftpd:Very Secure FTP Daemon,CentOS 默认 FTP 服务器高速,稳定,下载速度是
WU-FTP 的两倍,据 ftp.redhat.com 提供的数据:FTP 单机最多可支持 15000 个并发连接。 常见的 FTP 客户端软件
-
ftp
ftp -A ftpserver port -A 主动模式 –p 被动模式
-
lftp
lftp –u username ftpserver
lftp username@ftpserver
-
lftpget
lftpget ftp://ftpserver/pub/file
- gftp:GUI centos5 最新版 2.0.19 (11/30/2008)
- wget
- curl
- filezilla,FTP Rush,CuteFtp,FlashFXP,LeapFtp
2.2.1 vsftpd 软件
vsftpd 由 vsftpd 包提供,不由 xinetd 管理
用户认证配置文件:/etc/pam.d/vsftpd
- 服务启动文件
/usr/lib/systemd/system/vsftpd.service
/etc/rc.d/init.d/vsftpd
- 配置文件
/etc/vsftpd/vsftpd.conf
帮助:man 5 vsftpd.conf
-
配置文件格式
option=value
等号两端不能有空格 -
用户和其共享目录
匿名用户(映射为系统用户 ftp )共享文件位置:/var/ftp
系统用户共享文件位置:用户家目录
虚拟用户共享文件位置:为其映射的系统用户的家目录
2.2.2 vsftpd 服务常见配置
2.2.2.1 命令端口配置
listen_port=21
2.2.2.2 主动模式端口
connect_from_port_20=YES 主动模式端口为20
ftp_data_port=20 (默认) 指定主动模式的端口
2.2.2.3 被动模式端口范围
linux 客户端默认使用被动模式
windows 客户端默认使用主动模式
pasv_min_port=6000 0为随机分配
pasv_max_port=6010
2.2.2.4 使用当地时间
use_localtime=YES 默认为NO,GMT时区
2.2.2.5 使用匿名用户登录
anonymous_enable=YES 支持匿名用户
no_anon_password=YES 匿名用户略过口令检查 , 默认NO
2.2.2.6 允许匿名上传文件
anon_upload_enable=YES 匿名上传,注意:文件系统权限
anon_mkdir_write_enable=YES 匿名建目录
anon_world_readable_only 只能下载全部读的文件, 默认YES
anon_umask=0333 指定匿名上传文件的umask,默认077
anon_other_write_enable=YES 可删除和修改上传的文件, ,默认NO
2.2.2.7 指定匿名用户的上传文件的默认的所有者和权限
chown_uploads=YES 默认NO
chown_username=wang
chown_upload_mode=0644
2.2.2.8 Linux 系统用户
local_enable=YES 是否允许 linux 用户登录
write_enable=YES 允许 linux 用户上传文件
local_umask=022 指定系统用户上传文件的默认权限
2.2.2.9 将系统用户映射为指定的 guest 用户
guest_enable=YES 所有系统用户都映射成 guest 用户
guest_username=ftp 配合上面选项才生效,指定 guest 用户
local_root=/ftproot guest 用户登录所在目录
2.2.2.10 限定系统用户在指定目录
- 禁锢所有系统在家目录中
chroot_local_user=YES 禁锢系统用户,默认NO,即不禁锢
- 禁锢或不禁锢特定的系统用户在家目录中,与上面设置功能相反
chroot_list_enable=YES
chroot_list_file=/etc/vsftpd/chroot_list
当 chroot_local_user=YES 时,则 chroot_list 中用户不禁锢
当 chroot_local_user=NO 时,则 chroot_list 中用户禁锢
2.2.2.11 启用日志
wu-ftp日志:默认启用
xferlog_enable=YES 启用记录上传下载日志,此为默认值
xferlog_std_format=YES 使用wu-ftp日志格式,此为默认值
xferlog_file=/var/log/xferlog 可自动生成, 此为默认值
vsftpd日志:默认不启用
dual_log_enable=YES 使用vsftpd日志格式,默认不启用
vsftpd_log_file=/var/log/vsftpd.log 可自动生成, 此为默认值
2.2.2.12 启用提示信息
- 登录提示信息
ftpd_banner="welcome to mage ftp server"
banner_file=/etc/vsftpd/ftpbanner.txt
- 目录访问提示信息
dirmessage_enable=YES 此为默认值
message_file=.message 信息存放在指定目录下.message ,此为默认值
2.2.2.13 PAM 模块实现用户访问控制
pam_service_name=vsftpd pam配置文件:/etc/pam.d/vsftpd
/etc/vsftpd/ftpusers 默认文件中用户拒绝登录
2.2.2.14 是否启用控制用户登录的列表文件
userlist_enable=YES 此为默认值
userlist_deny=YES(默认值) 黑名单,不提示口令,NO为白名单
userlist_file=/etc/vsftpd/users_list 此为默认值
2.2.2.15 vsftpd 服务指定用户身份运行
nopriv_user=nobody
此为默认值
2.2.2.16 连接数限制
max_clients=0 最大并发连接数
max_per_ip=0 每个 IP 同时发起的最大连接数
2.2.2.17 传输速率,字节/秒
anon_max_rate=0 匿名用户的最大传输速率
local_max_rate=0 本地用户的最大传输速率
2.2.2.18 连接时间:秒为单位
connect_timeout=60 主动模式数据连接超时时长
accept_timeout=60 被动模式数据连接超时时长
data_connection_timeout=300 数据连接无数据输超时时长
idle_session_timeout=60 无命令操作超时时长
2.2.2.19 优先以文本方式传输
ascii_upload_enable=YES
ascii_download_enable=YES
2.2.2.20 实现基于 SSL 的 FTPS
- 查看是否支持 SSL
[root@centos8 ~]