squid代理服务器

squid代理服务器

nginx也可以代理：反向代理--------负载均衡
squid:正向代理服务器。例：vpn
squid ：正向代理，缓存加速，acl过滤控制

代理的工作机制

1、代替客户端向网站请求数据，不需要访问代理的IP地址。
直接请求网站，代理服务器可以请求和响应，可以隐藏真实ip
2、客户端访问目标网站之后（静态web元素）保存到缓存中，发送给客户端。下一次所有的客户机都可以使用缓存访问。加速访问速度
数据流向

squid的作用：

1、资源获取，代替客户端获取目标服务器的资源
2、加速访问，代理服务器可能与目标服务器距离更近，可以起到一起的加速作用。
3、缓存作用，代理服务器可以保存目标服务器获取的资源，客户端下次再请求目标服务器可以直接访问访问缓存即可。减轻目标服务器的压力。
4、隐藏真实的ip地址。代理服务器代替客户端请求。客户端的信息不会显示。
squid nginx

squid代理的类型：

1、传统的代理，正向代理，需要在客户
2、透明代理，客户端不再需要指定代理服务器的地址和端口，而是通过默认端上指定好代理服务器的地址和端口。而是通过默认路由来进行转发。（squid服务器，网关）
3、反向代理，在反向代理的squid服务器当中缓存了请求资源，将资源直接返回给客户端，否则，代理服务器代替客户端向web服务器发起请求，然后再把请求的资源相应给客户端，同时把响应缓存在本地，后续请求者都可以使用响应的缓存
有缓存，直接相应缓存内容；没有缓存，才会代替客户端请求web资源，响应结果保存在代理服务器，代理服务器再相应给客户端。客户端再次请求会直接右代理服务器响应
 

区别：

SNAT和DNAT	代理服务器squid
网络层	应用层
数据包(改变数据头部的源目的ip和目的ip)	不改变数据包的任何信息，直接把数据包发给代理，代理通过应用层过滤的方式来实现转发。似路由器

test1 :客户端 192.168.233.10
test2: squid   192.168.2333.20 (做透明代理会需要双网卡)
web页面: nginx1 192.168.233.61
                nginx2 192.168.233.62

安装 Squid 服务

systemctl stop firewalld
setenforce 0
安装依赖环境	yum -y install gcc gcc-c++ make
解压 		tar -xf squid-3.5.28.tar.gz
进入解压包	cd squid-3.5.28/
./configure --prefix=/usr/local/squid \ 
--sysconfdir=/etc \ 
--enable-arp-acl \
--enable-linux-netfilter \
--enable-linux-tproxy \
--enable-async-io=100 \
--enable-err-language="Simplify_Chinese" \ 
--enable-underscore \
--disable-poll \ 
--enable-epoll \ 
--enable-gnuregex

make -j 6 && make install

ln -s /usr/local/squid/sbin/* /usr/local/sbin/

useradd -M -s /sbin/nologin squid

chown -R squid:squid /usr/local/squid/var/		
#此目录用于存放缓存文件

注释

--sysconfdir=/etc \ 
配置文件路径 

--enable-arp-acl \ 
开启acl过滤模式

--enable-linux-netfilter \ 
开启内核过滤 

--enable-linux-tproxy \ 
支持透明模式

--enable-async-io=100 \ 
异步IO

--enable-err-language="Simplify_Chinese" \ 
错误信息的显示语言 

--enable-underscore \ 
允许URL地址中含有下划线

vim /etc/squid.conf

--56行--插入
http_access allow all				#放在 http_access deny all 之前，允许任意客户机使用代理服务，控制规则自上而下匹配
http_access deny all
http_port 3128						#用来指定代理服务监听的地址和端口(默认的端口号为 3128)


--61行--插入
cache_effective_user squid			#添加，指定程序用户，用来设置初始化、运行时缓存的账号,否则启动不成功
cache_effective_group squid			#添加，指定账号基本组

coredump_dir /usr/local/squid/var/cache/squid		#指定缓存文件目录

 通过端口看是否启动

netstat -antp |grep squid

检测配置文件是否正确

squid -k parse

运行过程是否正常

squid -N -d1

4．创建 Squid 服务脚本

vim /etc/init.d/squid

#!/bin/bash
#chkconfig: 2345 90 25
PID="/usr/local/squid/var/run/squid.pid"
CONF="/etc/squid.conf"
CMD="/usr/local/squid/sbin/squid"

case "$1" in
   start)
     netstat -natp | grep squid &> /dev/null
     if [ $? -eq 0 ]
     then
       echo "squid is running"
     else
       echo "正在启动 squid..."
       $CMD
     fi
   ;;
   stop)
     $CMD -k kill &> /dev/null
     rm -rf $PID &> /dev/null
   ;;
   status)
     [ -f $PID ] &> /dev/null
        if [ $? -eq 0 ]
          then
            netstat -natp | grep squid
          else
            echo "squid is not running"
        fi
   ;;
   restart)
      $0 stop &> /dev/null
      echo "正在关闭 squid..."
      $0 start &> /dev/null
      echo "正在启动 squid..."
   ;;
   reload)
      $CMD -k reconfigure
   ;;
   check)
      $CMD -k parse
   ;;
   *)
      echo "用法：$0{start|stop|status|reload|check|restart}"
   ;;
esac

chmod +x /etc/init.d/squid
chkconfig --add squid
chkconfig --level 35 squid on

正向代理

实验组件部署
Squid代理服务器：192.168.233.20
web服务器：192.168.233.30
客户机：192.168.233.10

-------------Squid代理服务器----------------
vim /etc/squid.conf
......
http_access allow all
http_access deny all
http_port 3128
cache_effective_user squid
cache_effective_group squid
--63行--插入
cache_mem 2000 G
reply_body_max_size 100 MB
maximum_object_size 100 MB

service squid restart
systemctl restart squid

#生产环境中还需要修改防火墙规则
iptables -F
iptables -I INPUT -p tcp --dport 3128 -j ACCEPT

#查看 Squid 访问日志的新增记录中的缓存命中情况
tail -f /usr/local/squid/var/logs/access.log
TCP_MEM_HIT/200

TCP_REFRESH_UNMODIFIED/304: TCP_REFRESH_UNMODIFIED 表示该请求是由于缓存未过期，
直接返回未修改的响应。304 表示 HTTP 状态码为 304（未修改）。

#查看 Web 访问日志的新增记录
tail -f /var/log/httpd/access_log
在浏览器输入Web服务器IP地址访问，查看Web服务器访问日志，显示的是由代理服务器替客户机在访问。

squid -m PURGE http://192.168.233.30
#清除缓存，指定对象服务器的url.
#客户机的代理配置
打开浏览器，工具-->Internet选项-->连接-->局域网设置-->开启代理服务器（地址：Squid服务器IP地址，端口：3128）

cache_mem 2000 G				
#指定缓存功能所使用的内存空间大小，便于保持访问较频繁的WEB对象，容量最好为4的倍数，单位为MB，建议设为物理内存的1/4

reply_body_max_size 100 MB
#允许用户下载的最大文件大小，以字节为单位，当下载超过指定大小的Web对象时，浏览器的报错页面中会出现“请求或访问太大”的提示默认设置0表示不进行限制

maximum_object_size 100 MB
#允许保存到缓存空间的最大对象大小，以KB为单位，超过大小限制的文件将不被缓存，而是直接转发给用户

构建透明代理服务器

还原到安装成功配置

Squid服务器：双网卡，内网ens33：192.168.233.20  外网ens36：12.0.0.254
Web 服务器：12.0.0.12
客户机：192.168.233.10

-----Squid服务器配置-----
vim /etc/squid.conf
......
http_access allow all
http_access deny all
--60行--修改添加提供内网服务的IP地址，和支持透明代理选项 transparent
#http_port 3128
http_port 192.168.233.20:3128 transparent
#之前的端口配置注释掉,重启之后会有端口冲突，记得杀掉之前的进程。

squid -k parse

squid -N -d1

systemctl restart squid

#开启路由转发，实现本机中不同网段的地址转发
echo 'net.ipv4.ip_forward = 1' >> /etc/sysctl.conf
sysctl -p

#修改防火墙规则
iptables -F
iptables -t nat -F
iptables -t nat -I PREROUTING -i ens33 -s 192.168.233.0/24 -p tcp --dport 80 -j REDIRECT --to 3128	
#用于转发http协议

iptables -t nat -I PREROUTING -i ens33 -s 192.168.233.0/24 -p tcp --dport 443 -j REDIRECT --to 3128	
#用于转发https协议

iptables -I INPUT -p tcp --dport 3128 -j ACCEPT

反向代理

还原到安装成功配置

如果 Squid 反向代理服务器中缓存了该请求的资源，则将该请求的资源直接返回给客户端；否则反向代理服务器将向后台的 Web 服务器请求资源，然后将请求的应答返回给客户端，同时也将该应答缓存在本地，供下一个请求者使用。

工作机制：
●缓存网页对象，减少重复请求
●将互联网请求轮训或按权重分配到内网Web服务器
●代理用户请求，避免用户直接访问Web服务器，提高安全

vim /etc/squid.conf
......
--60行--修改，插入
http_port 192.168.233.20:80 accel vhost vport
cache_peer 192.168.233.61 parent 80 0 no-query originserver round-robin max_conn=30 weight=1 name=web1
cache_peer 192.168.233.62 parent 80 0 no-query originserver round-robin max_conn=30 weight=1 name=web2
cache_peer_domain web1 web2 www.kgc.com
#表示对www.kgc.com的请求，squid向192.168.233.61和192.168.233.62的80端口发出请求


iptables -F
iptables -t nat -F

http_port 80 accel vhost vport #squid从一个缓存变成了一个Web服务器反向代理加速模式，
这个时候squid在80端口监听请求，同时和web server的请求端口(vhost vport)绑定，
这个时候请求到了squid，squid是不用转发请求的，而是直接要么从缓存中拿数据要么向绑定的端口直接请求数据。
accel ：反向代理加速模式
vhost ：支持域名或主机名来表示代理节点
vport ：支持IP和端口来表示代理节点

parent ：代表为父节点，上下关系，非平级关系
80 ：代理内部web服务器的80端口
0 ：没有使用icp（电信运营商），表示就一台squid服务器
no-query ：不做查询操作，直接获取数据
originserver ：指定是源服务器
round-robin ：指定 squid 通过轮询方式将请求分发到其中一台父节点
max_conn ：指定最大连接数
weight ： 指定权重
name ：设置别名