squid缓存代理

最新推荐文章于 2022-11-17 13:00:09 发布
最新推荐文章于 2022-11-17 13:00:09 发布
阅读量562 收藏
点赞数
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Mzx168168/article/details/82048457
版权

如何提高网站访问速度?

1)前端(优化)

2)提供网站带宽(1000M)、上行、下行对等，一般公司双线介入

3)缓存

浏览器缓存(浏览器会缓存常使用数据，缓存到客户端硬盘)

服务器缓存

网络优化：CDN技术

一、服务器缓存(代理)

1.分类

1)正向代理：部署在企业内部，实现企业内部客户端访问公网加速(ACL、缓存)

  传统代理：需在客户端指向正向代理服务器的IP及端口，方可正常使用

  透明代理：将正向代理服务器作为网关，客户端只需指明网关地址即可

2)反向代理：部署在企业内部，实现公网客户端访问内部服务器加速


2.缓存方式

1)硬盘：速度慢、缓存时间长

2)内存：速度快、重启后缓存丢失


二、Squid

  基于硬盘的缓存方式，支持正向及反向两种代理

1、代理的工作机制

1)Squid服务器中有缓存

  当客户机通过代理来请求Web页面时，指定的代理服务器会先检查自己的缓存，如果缓存中已经有客户机需要的页面，则直接将缓存中的页面内容反馈给客户机


2)Squid服务器中没有缓存

  如果缓存中没有客户机要访问的页面，则由代理服务器向Internet发送访问请求，当获得返回的Web页面以后，将网页数据保存到缓存中并发送给客户机


  HTTP代理的缓存加速对象主要是文字、图像等静态Web元素,使用缓存机制后，当客户机在不同的时候访问同一Web元素，或者不同的客户机访问相同的Web元素时，可以直接从代理服务器的缓存中获得结果。这样就大大减少了向Internet提交重复的Web请求的过程，提高了客户机的Web访问响应速度

  由于客户机的Web访问请求实际上是由代理服务器来代替完成的，从而可以隐藏用户的真实IP地址，起到一定的保护作用。另一方面，代理服务器担任着类似“经纪人”的角色，所以有机会针对要访问的目标、客户机的地址、访问的时间段等进行过滤控制


正向代理(传统代理)

  环境准备：两台，一台linu作为squid代理及网关(两块网卡，第一块vmnet1、第二块桥接)，另一台windows客户端(vmnet1)


#部署gateway

1.IP配置

1)rm -rf /etc/udev/rules.d/70-persistent-net.rules

2)vim /etc/sysconfig/network-scripts/ifcfg-eth0

DEVICE=eth0
TYPE=Ethernet
ONBOOT=yes
NM_CONTROLLED=no
BOOTPROTO=static
IPADDR=192.168.1.1
NETMASK=255.255.255.0

3)reboot

4)cp /etc/sysconfig/network-scripts/ifcfg-eth0 /etc/sysconfig/network-scripts/ifcfg-eth1

DEVICE=eth1
TYPE=Ethernet
ONBOOT=yes
NM_CONTROLLED=no
BOOTPROTO=dhcp

5)/etc/init.d/network restart


2.开启路由功能

1)vim /etc/sysctl.conf

  net.ipv4.ip_forward = 1

2)sysctl -p

3)iptables -t nat -I POSTROUTING -s 192.168.1.0/24 -j SNAT --to-source 192.168.13.206


#部署squid

1.编译安装Squid

    配置Squid的编译选项时，将安装目录设为/usr/local/squid，其他具体选项根据实际需求来定，配置前可参考“./configure  --help”给出的说明

1)tar -zxvf squid-3.4.6.tar.gz -C /usr/src/

2)cd /usr/src/squid-3.4.6/

3)./configure --prefix=/usr/local/squid --sysconfdir=/etc/ --enable-linux-netfilter --enable-arp-acl --enable-linux-tproxy --enable-async-io=100 --enable-err-language="Simplify_Chinese" --enable-underscore --enable-poll


选项详解

--prefix=/usr/local/squid           #安装目录
--sysconfdir=/etc/                  #单独将配置文件修改到其他目录
--enable-arp-acl                    #可以在规则中设置直接通过客户端MAC进行管理，防止客户端使用IP欺骗
--enable-linux-netfilter              #使用内核过滤
--enable-linux-tproxy                #支持透明模式
--enable-async-io=值                  #异步I/O，提升存储性能
--enable-err-language="Simplify_Chinese" #错误信息的显示语言
--enable-underscore                    #允许URL中有下划线
--enable-poll                         #使用Poll()模式，提升性能
--enable-gnuregex                      #使用GNU正则表达式--enable-gnuregex

4)make && make install

5)echo "PATH=$PATH:/usr/local/squid/sbin" >>/etc/profile && source /etc/profile

6)useradd -M -s /sbin/nologin squid

7)chown -R squid:squid /usr/local/squid/var/


2.更改配置

1)vim /etc/squid.conf

 56 http_access allow all   #允许所有访问
 61 cache_effective_user squid   #指定运行用户
 62 cache_effective_group squid   #指定运行组
 63 visible_hostname xueluo.org   #指定当前主机名
 65 cache_dir ufs /usr/local/squid/var/cache/squid 100 16 256 #启用缓存
 68 #coredump_dir /usr/local/squid/var/cache/squid  #注释改行
2)squid -k parse #检测配置文件(/etc/squid.conf)是否有问题

3)squid -z  #创建缓存目录


3.启动服务

1)vim /etc/init.d/squid

#!/bin/bash
# chkconfig: 2345 90 25
# config: /etc/squid.conf
# pidfile: /usr/local/squid/var/run/squid.pid
# Description: Squid - Internet Object Cache

PID="/usr/local/squid/var/run/squid.pid"
CONF="/etc/squid.conf"
CMD="/usr/local/squid/sbin/squid"

case "$1" in
    start)
        netstat -utpln | grep squid &>/dev/null
        if [ $? -eq 0 ]
            then
                echo "Squid is running"
            else
            $CMD
        fi
        ;;
    stop)
        $CMD -k kill &>/dev/null
        rm -rf $PID &>/dev/null
        ;;
    status)
        [ -f $PID ] &>/dev/null
        if [ $? -eq 0 ]
            then
                netstat -utpln | grep squid
            else
                echo "Squid is not running"
        fi
        ;;
    restart)
        $0 stop &>/dev/null
        echo "正在关闭Squid..."
        $0 start &>/dev/null
        echo "正在启动Squid..."
        ;;
    reload)
        $CMD -k reconfigure
        ;;
    check)
        $CMD -k parse
        ;;
    *)
        echo "用法：{ start | stop | restart | reload | check | status}"
        ;;
esac

2)chmod +x /etc/init.d/squid

3)chkconfig --add squid

4)/etc/init.d/squid start

5)netstat -utpln | grep 3128


4.验证

  IE-->代理服务器(192.168.1.1 3128) --> 119.75.213.61

1)tail -f /usr/local/squid/var/logs/access.log

正向代理(透明代理)

  环境准备：两台，一台linu作为squid代理及网关(两块网卡，第一块vmnet1、第二块桥接)，另一台windows客户端(vmnet1)


#部署gateway

1.IP配置

1)rm -rf /etc/udev/rules.d/70-persistent-net.rules

2)vim /etc/sysconfig/network-scripts/ifcfg-eth0

DEVICE=eth0
TYPE=Ethernet
ONBOOT=yes
NM_CONTROLLED=no
BOOTPROTO=static
IPADDR=192.168.1.1
NETMASK=255.255.255.0

3)reboot

4)cp /etc/sysconfig/network-scripts/ifcfg-eth0 /etc/sysconfig/network-scripts/ifcfg-eth1

DEVICE=eth1
TYPE=Ethernet
ONBOOT=yes
NM_CONTROLLED=no
BOOTPROTO=dhcp

5)/etc/init.d/network restart


2.开启路由功能

1)vim /etc/sysctl.conf

  net.ipv4.ip_forward = 1

2)sysctl -p

3)iptables -t nat -I POSTROUTING -s 192.168.1.0/24 -j SNAT --to-source 192.168.13.206


#部署squid

1.编译安装Squid

    配置Squid的编译选项时，将安装目录设为/usr/local/squid，其他具体选项根据实际需求来定，配置前可参考“./configure  --help”给出的说明

1)tar -zxvf squid-3.4.6.tar.gz -C /usr/src/

2)cd /usr/src/squid-3.4.6/

3)./configure --prefix=/usr/local/squid --sysconfdir=/etc/ --enable-linux-netfilter --enable-arp-acl --enable-linux-tproxy --enable-async-io=100 --enable-err-language="Simplify_Chinese" --enable-underscore --enable-poll


选项详解

--prefix=/usr/local/squid           #安装目录
--sysconfdir=/etc/                  #单独将配置文件修改到其他目录
--enable-arp-acl                    #可以在规则中设置直接通过客户端MAC进行管理，防止客户端使用IP欺骗
--enable-linux-netfilter              #使用内核过滤
--enable-linux-tproxy                #支持透明模式
--enable-async-io=值                  #异步I/O，提升存储性能
--enable-err-language="Simplify_Chinese" #错误信息的显示语言
--enable-underscore                    #允许URL中有下划线
--enable-poll                         #使用Poll()模式，提升性能
--enable-gnuregex                      #使用GNU正则表达式--enable-gnuregex

4)make && make install

5)ln -s /usr/local/squid/sbin/* /usr/local/sbin/

6)useradd -M -s /sbin/nologin squid

7)chown -R squid:squid /usr/local/squid/var/


2.更改配置

1)vim /etc/squid.conf

 56 http_access allow all   #允许所有访问
 60 http_port 192.168.1.1:3128 transparent
 61 cache_effective_user squid   #指定运行用户
 62 cache_effective_group squid   #指定运行组
 63 visible_hostname xueluo.org   #指定当前主机名
 65 cache_dir ufs /usr/local/squid/var/cache/squid 100 16 256 #启用缓存
 68 #coredump_dir /usr/local/squid/var/cache/squid  #注释改行


2)iptables -t nat -I PREROUTING -i eth0 -s 192.168.1.0/24 -p tcp --dport 80 -j REDIRECT --to 3128

3)squid -k parse #检测配置文件(/etc/squid.conf)是否有问题

4)squid -z  #创建缓存目录

3.启动服务

1)vim /etc/init.d/squid

#!/bin/bash
# chkconfig: 2345 90 25
# config: /etc/squid.conf
# pidfile: /usr/local/squid/var/run/squid.pid
# Description: Squid - Internet Object Cache

PID="/usr/local/squid/var/run/squid.pid"
CONF="/etc/squid.conf"
CMD="/usr/local/squid/sbin/squid"

case "$1" in
    start)
        netstat -utpln | grep squid &>/dev/null
        if [ $? -eq 0 ]
            then
                echo "Squid is running"
            else
            $CMD
        fi
        ;;
    stop)
        $CMD -k kill &>/dev/null
        rm -rf $PID &>/dev/null
        ;;
    status)
        [ -f $PID ] &>/dev/null
        if [ $? -eq 0 ]
            then
                netstat -utpln | grep squid
            else
                echo "Squid is not running"
        fi
        ;;
    restart)
        $0 stop &>/dev/null
        echo "正在关闭Squid..."
        $0 start &>/dev/null
        echo "正在启动Squid..."
        ;;
    reload)
        $CMD -k reconfigure
        ;;
    check)
        $CMD -k parse
        ;;
    *)
        echo "用法：{ start | stop | restart | reload | check | status}"
        ;;
esac

2)chmod +x /etc/init.d/squid

3)chkconfig --add squid

4)/etc/init.d/squid start

5)netstat -utpln | grep 3128

4.测试

  IE --> 119.75.213.61

1)tail -f /usr/local/squid/var/logs/access.log

三、Squid的ACL

    Squid提供了强大的代理控制机制，通过合理设置ACL(Access  Control  List，访问控制列表)并进行限制，可以针对源地址、目标地址、访问的URL路径、访问的时间等各种条件进行过滤

    在配置文件squid.conf中，ACL访问控制通过以下两个步骤来实现：其一，使用acl配置项定义需要控制的条件；其二，通过http_access配置项对已定义的列表做“允许”或“拒绝”访问的控制

1.定义访问控制列表

    每一行acl配置可以定义一条访问控制列表，格式如下所示

    acl  列表名称  列表类型  列表内容  ...

    其中，“列表名称”由管理员自行指定，用来识别控制条件；“控制类型”必须使用Squid预定义的值，对应着不同类别的控制条件；“列表内容”是要控制的具体对象，不同类型的列表所对应的内容也不一样，可以有多个值（以空格分割，为“或”的关系）

    通过上述格式可以发现，定义访问控制列表时，关键在于选择“列表类型”并设置具体的条件对象。Squid预定义类型有很多种，常用的包括源地址、目标地址、访问时间、访问端口等


列表类型 列表内容示例   含义/用途

src  192.168.1.168
  192.1681.0/24
  192.168.1.0-192.168.3.0/24 源IP地址、网段、IP地址范围

dst  216.163.137.3
  61.135.167.0/24
  www.playboy.com   目标IP地址、网段、主机名

port  80
  443
  8080    目标端口


dstdomain .qq.com
  .msn.com   目标域，匹配域内所有站点

time  MTWHF  8:30-17:30
  12:00-13:00
  AS    字母表示一星期天中各天的缩写
  M--Monday
  T--Tuesday
  W--Wednesday
  H--Thursday
  F--Friday
  A--Saturday
  S--Sunday

maxconn  20    每个客户机的并发连接数

url_regex url_regex -i ^rtsp://
  url_regex -i ^emule://  目标资源的URL地址，-i表示忽略大小写

urlpath_regex urlpath_regex -i \.mp3$  目标资源的整个URL路径，-i表示忽略大小写

Blog：http://blog.51cto.com/painting

Mzx168168
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
squid缓存代理服务器
xiaol_csdn_xiaol的博客
06-24 699
web缓存的工作机制 缓存网页对象，减少重复请求 squid 主要提供缓存加速、应用层过滤控制的功能。 代替客户机问网站请求数据，从而可以隐藏用户的真实Ip地址。 将获得的网页数据（静态Web元素）保存到缓存中并发送给客户机，以便下次请求相同的数据时快速响应。代理服务器的概念 代理服务器是一个位于客户端和原始（资源）服务器之间的服务器，为了从原始服务器取得内容，客户端向代理服务器发送一个请求并指定目标原始服务器，然后代理服务器向原始服务器转交请求并将获得的内容返回给客户端。 缓存代理对于Web至关重要，尤其
Web缓存服务——Squid代理服务器应用
Yuzhang2046的博客
05-22 1172
Squid 主要提供缓存加速、应用层过滤控制的功能。代理服务器能代替用户去访问公网，并且能把访问到的数据缓存到服务器本地，等用户下次再访问相同的资源的时候，代理服务器直接从本地回应给用户。当本地没有的时候,我代替你去访问公网，我接收你的请求，我先在我自己的本地缓存找，如果我本地缓存有，我直接从我本地的缓存里回复你；如果我在我本地没有找到你要访问的缓存的数据，那么代理服务器就会代替你去访问公网。
Squid缓存代理服务器
云计算运维工程师的成长之路
11-08 1262
acl 列表名称 列表类型 列表内容#在配置文件中指定使用配置项acl localhost src 192.168.110.10/24 #源地址为 192.168.80.10acl MYLAN src 192.168.116.0/24 192.168.1.0/24 #客户机网段acl destinationhost dst 192.168.80.13/32 #目标地址为 192.168.80.13acl MC20 maxconn 20 #最大并发连接 20。
web缓存—Squid代理服务
qq_62462797的博客
11-04 886
1.squid的相关知识 1.1 squid的概念1.2 squid代理的工作机制 其主要作用有：1.3 Squid 代理的类型 1.4 squid代理服务器和SNAT|DNAT的区别 2.Squid 服务的安装和运行 2.1 安装Squid服务 2.2 修改 Squid 的配置文件2.3 Squid 的运行控制 2.4 创建 Squid 服务脚本，进行系统服务管理 3. 构建传统代理服务器（正向代理） 实验设计实验需求 实验组件部署1 配置代理服务器 2、web服务器安装apache3、客户机的代理配
Squid缓存代理
weixin_55905026的博客
08-07 248
Squid缓存代理Squid代理服务器 Squid代理服务器 Squid代理服务器是基于Unix的代理服务器（proxy server），它主要提供缓存加速、应用层过滤控制的功能，缓存网页对象，可以减少重复请求 1.功能 缓存加速 应用层过滤控制 2.工作机制 代替客户机向网站请求数据，从而隐藏用户的真实IP地址 将获得的网页数据保存到缓存中，对下次请求相同数据时做到快速响应 ...
squid缓存服务器的研究
12-02
suqid 缓存服务器整理的相关内容，可以参考的。适合于centos7系统的
Squid缓存代理服务器的安装与配置（普通代理 透明代理 反向代理）
03-26
Squid缓存代理服务器的安装与配置（普通代理 透明代理 反向代理） Squid缓存代理服务器是一种流行的代理服务器和Web缓存服务器软件，广泛应用于提高Web服务器速度、缓存万维网、域名系统和其他网络搜索、帮助网络...
squid：Squid Web代理缓存
02-03
Squid 是一个功能强大的开源 Web 代理缓存服务器，它被广泛用于互联网内容缓存和数据加速。Squid 支持多种协议，包括 HTTP、HTTPS、FTP、ICAP 和 ECAP，使得它能处理各种网络请求。在本文中，我们将深入探讨 Squid ...
squid缓存详细配置
10-16
文档为squid缓存服务的配置文档，系统为CentOS部署，本人自己部署成功后整理的文档，绝对清晰。
缓存代理服务器Squid-教程
12-03
Squid是一个高性能的代理缓冲服务器，也许你已经用过Windows平台下的WinGate，MS Proxy Server等功能类似的产品。Squid是一个应用级代理，在保证客户端主机和服务器主机网络连通后，需要客户端软件做相应的设置后...
Shell脚本实现精准清除Squid缓存
09-15
在本场景中，我们讨论的脚本是一个专门用于清理Squid缓存的工具。Squid是一款广泛使用的开源代理缓存服务器，它能够提高网络访问速度，减少带宽消耗。然而，随着时间的推移，缓存可能会积累大量无用或过时的数据，...
【squid缓存服务器】
qq_56589727的博客
11-17 1001
通俗的概述：squid是一种用来缓存网页浏览器数据的软件。接受来自人们需要下载的目标（object）的请求并适当的处理这些请求。也就是说，如果一个人逛微博突然想把这个图片保存下来，那么本地客户端会请求squid为他取得这个页面。squid随之连接到远程服务器并向这个页面发出请求。然后，squid将远程服务器返回到客户端机器的数据，复制一份到squid服务器的本地。当内网下一次有人需要这个相同的图片时， squid可以直接从自己的本地磁盘中读到它，不再需要去公网访问远程服务器，而是直接本地缓存给它。
squid配置7-禁止缓存设置
汪翰翔的Blog
09-28 3674
<br /><br />#acl QUERY urlpath_regex -i cgi-bin /? /.asp /.php /.jsp /.cgi<br />acl denyssl urlpath_regex -i ^https://<br />#no_cache deny QUERY<br />no_cache deny denyssl
Squid 缓存代理（原理 + 安装配置）
热门推荐
shenyuanhaojie的博客
11-03 4万+
文章目录一、Squid 简介1. Squid 的作用2. Web 代理的工作机制3. 代理服务器的概念4. 代理服务器的作用5. 代理的基本类型(1) 传统代理(2) 透明代理(3) 反向代理6. 使用正向代理（传统代理、透明代理）的好处7. 反向代理的工作机制二、Squid 的安装与配置1. 编译安装2. 修改 Squid 的配置文件3. Squid 的运行控制4. 创建 Squid 服务脚本 一、Squid 简介 1. Squid 的作用 Squid 主要提供缓存加速、应用层过滤控制的功能。 2. W
如何关闭squid的缓存功能
雜貨鋪
12-16 6193
增加下面两行： acl NCACHE method GET no_cache deny NCACHE
html css js网页设计
07-12
HTML、CSS和JavaScript是构建网页和网站的基本技术，它们共同工作来创建和设计用户界面。下面是关于这三种技术的详细介绍： ### HTML (HyperText Markup Language) - **定义**：HTML是构建网页内容的标准标记语言。 - **作用**：用于创建网页的结构和内容，如段落、链接、图片、表格等。 - **语法**：使用标签（如 `<p>`, `<div>`, `<a>`, `<img>` 等）来定义网页元素。 ### CSS (Cascading Style Sheets) - **定义**：CSS是一种样式表语言，用于描述HTML文档的呈现方式。 - **作用**：用于设置网页的布局、颜色、字体和其他视觉元素。 - **语法**：通过选择器（如 `p`, `.myclass`, `#myid` 等）应用样式规则。 ### JavaScript - **定义**：JavaScript是一种脚本语言，通常用于网页上实现交互功能。 - **作用**：允许网页与用户进行交互，如响应用户操作、动态更新内容、动画效果等。 - **语法**：Java
2023年数字乡村建设解决方案PPT(34页).pptx
最新发布
07-12
数字乡村建设解决方案旨在通过数字化转型促进乡村振兴和农业农村现代化。该方案强调了数字乡村建设的战略机遇，以"1+3+5"工程为总体框架，即一个大数据中心、三大服务平台和五类主题应用。方案着重于乡村治理、产业发展和公共服务三大问题，通过完善治理体系、升级治理能力、强化产业链条和改善资源配置来推动乡村全面振兴。 方案中提出的数字乡村大数据中心是信息资源的集散地，依托大数据、AI、物联网等新技术，实现数据驱动的决策支持。三大服务平台包括产业服务、民生服务和治理服务，旨在提升农业生产智能化、经营网络化，同时优化乡村治理结构和提升服务效能。五类主题应用覆盖生产管理、流通营销、行业监管、公共服务和乡村治理，通过具体业务应用体系，实现农业全产业链的数字化管理和服务。 预期建设效益包括通过信息技术促进乡村优势产业发展，形成城郊融合型数字乡村治理新模式，以及创新服务方式，提升服务能力，保障农民权益。整体而言，该方案以数字化为手段，推动乡村经济、治理、文化等多方面的全面升级和发展。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值