理论+实验·CDN缓存加速传统模式与透明模式

最新推荐文章于 2021-12-12 23:42:14 发布
最新推荐文章于 2021-12-12 23:42:14 发布
阅读量271 收藏
点赞数
分类专栏： 缓存加速 文章标签： cdn linux 传统代理 透明代理
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_47153668/article/details/108431509
版权

理论+实验·CDN缓存加速传统模式与透明模式

文章目录

一、Squid安装介绍

1.1 缓存代理概述

  • Web代理的工作机制
    • 缓存网页对象,减少重复请求
  • 代理的基本类型
    • 传统代理:适用于Internet,需明确指定服务端
    • 透明代理:客户机不需指定代理服务器的地址和端口,而是通过默认路由、防火墙策略将WEb访问重定向给代理服务器处理
  • 使用代理的好处
    • 提高Web访问速度
    • 隐藏客户机的真实IP地址

1.2 Squid安装及运行

  • 编译安装Squid 3.4.6
//安装前预安装环境//
[root@squid ~]# yum -y install gcc gcc-c++
//解压缩源码包//
[root@squid ~]# tar zxvf squid-3.4.6.tar.gz -C /opt/
//进行编译安装//
[root@squid ~]# cd /opt/squid-3.4.6/
[root@squid squid-3.4.6]# ./configure \
--prefix=/usr/local/squid \
--sysconfdir=/etc \
--enable-arp-acl \
--enable-linux-netfilter \
--enable-linux-tproxy \
--enable-async-io=100 \
--enable-err-language="Simplify_Chinese" \
--enable-underscore \
--enable-poll \
--enable-gunregex
[root@squid squid-3.4.6]# make && make install
//优化选项//
[root@squid squid-3.4.6]# ln -s /usr/local/squid/sbin/* /usr/local/sbin/
//创建squid非登录账户//
[root@squid squid-3.4.6]# useradd -M -s /sbin/nologin squid
[root@squid squid-3.4.6]# chown -R squid.squid /usr/local/squid/var/
[root@squid squid-3.4.6]# vim /etc/squid.conf
...
http_access allow all			//允许所有//
#http_access deny all
...
http_port 3128
cache_effective_user squid		//管理用户设为squid//
cache_effective_group squid		//管理用户组设为squid//
...
[root@squid squid-3.4.6]# squid -k parse		//验证语法是否有问题//
[root@squid squid-3.4.6]# squid -z				//初始化squid//
2020/09/06 10:44:07 kid1| Set Current Directory to /usr/local/squid/var/cache/squid
2020/09/06 10:44:07 kid1| Creating missing swap directories
2020/09/06 10:44:07 kid1| No cache_dir stores are configured.

[root@squid squid-3.4.6]# squid					//开启squid//
[root@squid squid-3.4.6]# netstat -ntap | grep 3128		//查看端口是否已开启//
tcp6       0      0 :::3128                 :::*                    LISTEN      42748/(squid-1)

二、传统代理

2.1 实验环境

squid 20.0.0.10

web 20.0.0.20

Win10 20.0.0.200

需要准备好squid-3.4.6源码包

2.2 配置Squid服务器

//手工编译安装squid代理服务器===>传统模式//
[root@squid ~]# yum -y install gcc gcc-c++
[root@squid ~]# tar zxvf squid-3.4.6.tar.gz -C /opt/
[root@squid ~]# cd /opt/squid-3.4.6/
[root@squid squid-3.4.6]# ./configure \
--prefix=/usr/local/squid \
--sysconfdir=/etc \
--enable-arp-acl \
--enable-linux-netfilter \
--enable-linux-tproxy \
--enable-async-io=100 \
--enable-err-language="Simplify_Chinese" \
--enable-underscore \
--enable-poll \
--enable-gunregex
[root@squid squid-3.4.6]# make && make install
[root@squid squid-3.4.6]# ln -s /usr/local/squid/sbin/* /usr/local/sbin/
[root@squid squid-3.4.6]# useradd -M -s /sbin/nologin squid
[root@squid squid-3.4.6]# chown -R squid.squid /usr/local/squid/var/
[root@squid squid-3.4.6]# vim /etc/squid.conf
...
http_access allow all			//允许所有//
#http_access deny all
...
http_port 3128
cache_effective_user squid		//管理用户//
cache_effective_group squid
...
[root@squid squid-3.4.6]# squid -k parse		//验证语法//
[root@squid squid-3.4.6]# squid -z				//初始化代理服务器//
2020/09/06 10:44:07 kid1| Set Current Directory to /usr/local/squid/var/cache/squid
2020/09/06 10:44:07 kid1| Creating missing swap directories
2020/09/06 10:44:07 kid1| No cache_dir stores are configured.

[root@squid squid-3.4.6]# squid					//开启//
[root@squid squid-3.4.6]# netstat -ntap | grep 3128		//查看是否已开启//
tcp6       0      0 :::3128                 :::*                    LISTEN      42748/(squid-1)     

//添加启动脚本//
[root@squid squid-3.4.6]# cd /etc/init.d/
[root@squid init.d]# vim squid
#!/bin/bash
#chkconfig: 2345 90 25
PID="/usr/local/squid/var/run/squid.pid"
CONF="/etc/squid.conf"
CMD="/usr/local/squid/sbin/squid"
case "$1" in
  start)
        netstat -ntap | grep squid &> /dev/null
        if [ $? -eq 0 ]
        then
          echo "squid is runing"
        else
          echo "正在启动 squid..."
          $CMD
        fi
  ;;
  stop)
        $CMD -k kill &> /dev/null
        rm -rf $PID &>/dev/null
  ;;    
  status)
        [ -f $PID ] &> /dev/null
          if [ $? -eq 0 ]
          then 
            netstat -ntap | grep squid
          else
            echo "squid is not runing"
          fi
  ;;      
  restart)
        $0 stop &> /dev/null
        echo "则会个你在关闭 squid..."
                $0 start &> /dev/null
        echo "正在启动 squid..."
  ;;
  reload)
        $CMD -k reconfigure
  ;;
  check)
        $CMD -k parse
  ;;
  *)
        echo "用法: $0{start|stop|status|restart|reload|check}"
  ;;
esac
[root@squid init.d]# chmod +x squid 
[root@squid init.d]# chkconfig --add squid 
[root@squid init.d]# chkconfig --level 35 squid on

//传统模式//
[root@squid init.d]# vim /etc/squid.conf
...
http_port 3128
cache_effective_user squid
cache_effective_group squid
cache_mem 64 MB									//缓存空间//
reply_body_max_size 10 MB						//允许用户下载的最大文件//
maximum_object_size 4096 KB						//存储文件的大小最大时4096KB//
...
[root@squid init.d]# iptables -F
[root@squid init.d]# iptables -t nat -F
[root@squid init.d]# setenforce 0
[root@squid init.d]# iptables -I INPUT -p tcp --dport 3218 -j ACCEPT
[root@squid init.d]# pkill squid
[root@squid init.d]# squid

2.3 配置Web服务器

[root@web ~]# systemctl stop firewalld
[root@web ~]# setenforce 0
[root@web ~]# yum -y install httpd
[root@web ~]# systemctl start httpd

2.4 使用Win 10 配置

浏览器上面设置手动代理
在这里插入图片描述

设置好代理之后在浏览器输入"20.0.0.20"web服务器的IP地址
在这里插入图片描述

查看web服务器的日志文件可以看出是从squid代理服务器来访问的说明实验成功
在这里插入图片描述

三、透明代理

3.1 实验环境

squid 20.0.0.10|20.0.10.1

web 20.0.0.20

Win10 20.0.0.200

需要准备好squid-3.4.6源码包

需要在squid服务器设置双网卡

ens33: 20.0.0.10

ens36: 20.0.10.1

3.2 配置squid服务器

//配置双网卡//
[root@squid ~]# cd /etc/sysconfig/network-scripts/
[root@squid network-scripts]# cp -p ifcfg-ens33 ifcfg-ens36
[root@squid network-scripts]# vim ifcfg-ens36
...
NAME=ens36											//改成ens36//
UUID=4ad6e1fd-8713-4e99-9a0b-08f11c6ed8be			//UUID删除//
DEVICE=ens36										//改成ens36//
ONBOOT=yes
IPADDR=20.0.10.1				
NETMASK=255.255.255.0
[root@squid network-scripts]# service network restart
Restarting network (via systemctl):                        [  确定  ]
[root@squid network-scripts]# vim /etc/sysctl.conf
...
net.ipv4.ip_forward=1
[root@squid network-scripts]# sysctl -p
net.ipv4.ip_forward = 1


[root@squid network-scripts]# vim /etc/squid.conf
...
# Squid normally listens to port 3128
http_port 20.0.10.1:3128 transparent
...

[root@squid network-scripts]# squid -k parse
[root@squid network-scripts]# iptables -t nat -I PREROUTING -i ens36 -s 20.0.10.0/24 -p tcp --dport 80 -j REDIRECT  --to 3128
[root@squid network-scripts]# iptables -t nat -I PREROUTING -i ens36 -s 20.0.10.0/24 -p tcp --dport 443 -j REDIRECT --to 3128
[root@squid network-scripts]# iptables -I INPUT -p tcp --dport 3218 -j ACCEPT
[root@squid network-scripts]# pkill squid
[root@squid network-scripts]# squid

3.3 配置web服务器

之前浏览器设置过代理设置的话这里需要将其关闭

在这里插入图片描述

查看日志文件,显示代理服务器的IP就说明实验成功了
在这里插入图片描述

weixin_47153668
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
CDN 缓存测试实验
weixin_40359302的博客
11-14 2063
一丶试验要求   CDN基础实验----基于nginx+squid实现缓存功能 1、搭建两个web服务，使用nginx实现。 一个做源站（然后域名为：www.cdntest.com），配置实现功能：提供可以访问的web服务； 另一个做反向代理，接收用户的请求，配置实现功能是：代理到后端的squid。 2、搭建一个squid服务，配置实现如下功能： 1）txt缓存1个月，jpg文件不缓...
探索CDN之二：Squid与简易CDN实验
tyy2016
07-04 3121
探索CDN之二：Squid与简单CDN实验本系列文章将从初学者视角，一步一步循序渐进地探索CDN的相关知识。本文为系列第二篇，进一步介绍CDN的知识、Squid缓存服务器和简单的CDN实验。主要内容如下：探索CDN之二Squid与简单CDN实验 进一步聊聊CDN Squid缓存服务器 简单的CDN实验 参考资料进一步聊聊CDN？在上一篇文章里，曾讲到CDN是“内容分发网络”，依赖于一组代理服务器来提
有赞透明多级缓存解决方案（TMC）
weixin_33853794的博客
11-26 236
一、引子 1-1. TMC 是什么 TMC ，即“透明多级缓存（ Transparent Multilevel Cache ）”，是有赞 PaaS 团队给公司内应用提供的整体缓存解决方案。 TMC 在通用“分布式缓存解决方案（如 CodisProxy + Redis ，如有赞自研分布式缓存系统 zanKV ）”基础上，增加了以下功能： 应用层热点探测 应用层本地缓存 应用层缓存命中统计 以帮助...
redis+spring实现透明缓存
qq_40995780的博客
07-24 388
1、什么是Redis： Redis是由意大利人Salvatore Sanfilippo（网名：antirez）开发的一款内存高速缓存数据库。Redis全称为：Remote Dictionary Server（远程数据服务），该软件使用C语言编写，Redis是一个key-value存储系统，它支持丰富的数据类型，如：string、list、set、zset(sorted set)、hash。 ...
SCDN实验
qq_63991004的博客
12-12 1365
1 以192.168.1.0/24分配16个子网 子网掩码为255.255.255.240
Fikker 缓存加速软件CDN主控
08-16
**Fikker缓存加速软件CDN主控详解** Fikker是一款专为专业网站设计的高性能缓存加速服务器软件，旨在提升网站的加载速度和响应能力，改善用户体验。作为国内率先推出的此类解决方案，Fikker引入了先进的Webcache...
cdn模式下vue的基本用法详解
10-17
在CDN（内容分发网络）模式下使用Vue，开发者可以直接引用Vue.js库的CDN链接，无需在项目中本地安装。下面将详细介绍在CDN模式下Vue的基本用法。 首先，Vue的核心特性之一是它的虚拟DOM（Virtual DOM），它通过对比...
应用多级缓存模式支撑海量读服务
02-26
而且在各种面试过程中或多或少会被问及一些缓存相关的问题，如缓存算法、热点数据与更新缓存、更新缓存与原子性、缓存崩溃与快速恢复等各种与缓存相关的问题。而这些问题中有些问题又是与场景相关，因此如何合理应用...
使用CDN缓存后的网站的过程
最新发布
09-25
使用CDN缓存后的网站的过程
呆错图床系统源码图片CDN加速与破J防盗链功能
07-02
新版呆错PHP图床系统源码 图片外链+图床API+图片CDN加速,呆错图床系统是一款免费的PHP图床程序，核心功能是提供图片外链服务、图床API服务、图片CDN加速与破J防盗链。 图片上传 支持本地储存、FTP储存、第三方云储存...
探索CDN之四：回到CDN实验
tyy2016
07-06 978
探索CDN之四：回到CDN实验本系列文章将从初学者视角，一步一步循序渐进地探索CDN的相关知识。本文为系列第四篇，在前面探索的基础上，回到CDN实验，思考如何加入BIND完成实验，并思考如何集群化。主要内容如下：探索CDN之四回到CDN实验 加入BIND 集群化的Squid 参考资料加入BIND？在上一次的试验中，使用了最土的办法——修改/etc/hosts来进行DNS解析，那么在上篇文章中对BIN
CDN原理以及实验部署操作步骤
每天进步亿点点
02-14 1436
varnish squid代理软件 nginx
Linux -- 代理服务器（Squid Server）的配置与应用1
weixin_34270865的博客
09-17 590
一、代理服务器的配置与应用随着Internet的迅速发展，宽带网络接入量快速增多，Internet终端用户数迅速膨胀，网络管理员面临的问题越来越多，问题也越来越严重，如IP资源匮乏、用户访问计费、内部网络安全等一系列问题。面临如此多的问题，我们迫切需要一个行之有效的方案应对，这个方案就是我们本章要重点学习的代理服务器。本章将介绍代理服务器的基本概念、工作原理、配置和使用方法等...
Squid代理服务器应用
HB199753的博客
11-06 1254
目录 前言 一、Squid的脚本概念 1、Squid的作用 2、Web代理的工作机制 3、代理服务器的概念 4、代理服务器的作用 5、代理的基本类型 6、使用正向代理（传统代理、透明代理）的好处 7、反向代理的工作机制 二、Squid的安装及配置 1、各服务器的环境部署 2、安装Squid服务 2.1 编译安装Squid 2.2 修改Squid的配置文件 2.3 Squid的运行控制 2.4 创建Squid服务脚本 三、构建传统代理服务器 1、服务器配置 2...
各 CDN 对 HTTP2 的支持情况
Bpazy的博客
01-20 1514
本文是各 CDN 对 HTTP2 支持情况的整理。 各位可以补充，欢迎提 PR 或者 Issue 到 https://github.com/Bpazy/cdn_http2_support 核实后我会更新文档。 DNS 服务商 是否支持 HTTP2 访问 回源是否支持 HTTP2 Cloudflare 是 否 阿里云 CDN 是 否 腾讯云 CDN 是 否 ...
Squid中文权威指南 第四章（快速配置向导）
颓废中糜烂
04-02 655
第4章 快速配置向导4.1 squid.conf语法Squid的配置文件相对规范。它与其他许多unix程序相似。每行以配置指令开始，后面跟着数字值或关键字。在读取配置文件时，squid忽略空行和注释掉的行（以#开始）。如下是一些配置行示例：cache_log /squid/var/cache.log # define the localhost ACL
从概念到实例详细讲解squid配置
私_有_云
06-10 4571
Squid将远程Internet对象保存为本地拷贝，当本地用户再次访问这些对象时，Squid可以直接快速地提供对这些对象的访问，而不必再次占用带宽访问远程服务器上的对象。 一. 代理服务简介 1. 什么是代理服务器(Proxy Server)    代理服务可以代表其它计算机传递数据包或信息,这些数据包和信息包括网页、电子邮件、多媒体文件和其它网络应用程序等。通过它的文件缓存和访问控
Squid代理服务器应用及实验部署
whb1751178448的博客
03-04 432
文章目录前言一、pandas是什么？二、使用步骤1.引入库2.读入数据总结 前言 提示：这里可以添加本文要记录的大概内容： 例如：随着人工智能的不断发展，机器学习这门技术也越来越重要，很多人都开启了学习机器学习，本文就介绍了机器学习的基础内容。 提示：以下是本篇文章正文内容，下面案例可供参考 一、pandas是什么？ 示例：pandas 是基于NumPy 的一种工具，该工具是为了解决数据分析任务而创建的。 二、使用步骤 1.引入库 代码如下（示例）： import numpy as np import
基于redis分布式缓存实现（新浪微博案例）
weixin_33859844的博客
07-11 1501
第一：Redis 是什么？ Redis是基于内存、可持久化的日志型、Key-Value数据库 高性能存储系统，并提供多种语言的API. 第二：出现背景 数据结构(Data Structure)需求越来越多, 但memcache中没有, 影响开发效率 性能需求, 随着读操作的量的上升需要解决，经历的过程有: 数据库读写分离(M/S)–>数据库使用多个Slave–>增加Cach...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值