正向代理, 反向代理, proxy_pass, proxy_set_header, proxy_redirect, proxy_buffer, proxy_cache

Nginx正向代理
  • Nginx正向代理使用场景并不多见。
    需求场景1:
    如果在机房中,只有一台机器可以联网,其他机器只有内网,内网的机器想用使用yum安装软件包,在能能联网的机器上配置一个正向代理即可。

  • Nginx正向代理配置文件

server {
    listen 80 default_server;
    resolver 119.29.29.29;
    location /
    {
        proxy_pass http://$host$request_uri;
    }
     access_log /data/logs/zd.log main;
}
  • Nginx正向代理配置执行说明

    • resolver

语法:resolver address;
示例:resolver 119.29.29.29;
官方解释:http://nginx.org/en/docs/http/ngx_http_core_module.html#resolver
Configures name servers used to resolve names of upstream servers into addresses;
将后端服务器的域名转化成IP;

address为DNS服务器的地址,国内通用的DNS 119.29.29.29为dnspod公司提供。 国际通用DNS 8.8.8.8或者8.8.4.4为google提供。
其他可以参考 http://dns.lisect.com/

  • default_server

之所以要设置为默认虚拟主机,是因为这样就不用设置server_name了,任何域名解析过来都可以正常访问。

  • proxy_pass

该指令用来设置要代理的目标url,正向代理服务器设置就保持该固定值即可。

  • 客户机访问时,需要把要访问的域名都指向这个正向代理服务器IP(修改vhosts);

  • 测试,在浏览器使用http代理,即使本机不能上网,也能通过代理服务器上网;
    在这里插入图片描述

    • 重启浏览器后,打开网页访问360问答,正向代理虚拟主机产生如下日志;
    • 可以取消浏览器的正向代理设置,正向代理虚拟主机将没有日志产生;
192.168.87.1 - - [30/Oct/2019:14:30:47 +0800] "GET http://wenda.so.com/search/?q=duff&src=tab_www HTTP/1.1" 302 167 "https://www.so.com/s?ie=utf-8&fr=home&src=home_home&q=duff" "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_14_6) AppleWebKit/605.1.15 (KHTML, like Gecko) Version/12.1.2 Safari/605.1.15" "-" 

反向代理

  • Nginx反向代理在生产环境中使用很多的。

  • 场景1:
    域名没有备案,可以把域名解析到香港一台云主机上,在香港云主机做个代理,而网站数据是在大陆的服务器上。

基本配置:

server 
{
    listen 80;
    server_name aminglinux.com;
    
    location /
    {
        proxy_pass http://123.23.13.11/;
        proxy_set_header Host   $host;
        proxy_set_header X-Real-IP      $remote_addr;
        proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
    }
}

proxy_set _header意义

  • 建立三个虚拟主机;
a.com.conf

server
{
    listen 80;
    server_name www.head.com;
    location /
    {
        proxy_pass http://127.0.0.1:8080/;
        #proxy_set_header Host   $host;
        proxy_set_header X-Real-IP      $remote_addr;
        proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
    }
}

b.com.conf

server
{
    listen 8080;
    location /
    {
        root /data/wwwroot/b.com/;    #里面是bc.html, 内容是"b.com listen 8080";
        index index.html index.htm;
    }
access_log /data/logs/b.log main;
}

c.com.conf

server {
        listen 8080;
        server_name www.head.com;
         location / {
        root /data/wwwroot/c.com/;		#里面是bc.html,内容是"c.com listen 8080 server head.com"
        index index.html index.htm;
    }
access_log /data/logs/c.log main;
}

a.com.conf是侦听www.head.com 80端口,代理127.0.0.1:8080;
b.com.conf是侦听8080端口;
c.com.conf是侦听www.head.com:8080;

  • 测试结果:
[root@draft vhost]# !curl
curl -x127.0.0.1:80 www.head.com/bc.html
b.com listen 8080

b.com.conf虚拟主机的日志
127.0.0.1 - - [30/Oct/2019:22:26:22 +0800] "GET /bc.html HTTP/1.0" 200 18 "-" "curl/7.29.0" "127.0.0.1" 
  • 详解:
    curl命令-x127.0.0.1:80相当于其会访问本机的80端口,配合指定的域名www.head.com,就是对应了a.com.conf;配置会找到后端服务器127.0.0.1:8080;
    这时对应上了b.com.conf,显示了root目录下的bc.html;

  • 测试2,把a.com.conf配置里面的#号去掉;
    测试结果如下:

[root@draft vhost]# curl -x127.0.0.1:80 www.head.com/bc.html
c.com listen 8080 server head.com
[root@draft vhost]# curl -x127.0.0.1:8080 www.head.com/bc.html
c.com listen 8080 server head.com

c.com.conf虚拟主机的日志
127.0.0.1 - - [30/Oct/2019:21:57:39 +0800] "GET /bc.html HTTP/1.0" 200 34 "-" "curl/7.29.0" "127.0.0.1"
  • 详解2:
    curl -x127.0.0.1:80 www.head.com/bc.html跟之前一样找到后端服务器127.0.0.1:8080但是"proxy_set_header Host $host;"同时把$host传递给后方服务器,即访问目标变成curl -x127.0.0.1:8080 www.head.com/bc.html, 对应的就是c.com.html的配置,显示内容就不一样;
    这样可以显示出"proxy_set_header Host $host;"的意义;
  • 注意
    b.com.conf要在c.com.conf前面实验才会成功,如果b.com.conf改成d.com.conf,在做第一个实验时,也是跟第二个实验的结果一样,因为d.com.conf和c.com.conf都是侦听着8080端口,哪一个排在前面就先实施那个,实施了c.com.conf后就跟d.com.conf没关系了;
    虚拟主机配置时,IP,端口,域名都对应上了就万无一失,不会访问到其他的虚拟主机上去;

proxy_pass配置说明

  • 格式很简单: proxy_pass URL;
    其中URL包含:传输协议(http://, https://等)、主机名(域名或者IP:PORT)、uri。

示例如下:
proxy_pass http://www.aminglinux.com/;
proxy_pass http://192.168.200.101:8080/uri;
proxy_pass unix:/tmp/www.sock;

  • 对于proxy_pass的配置有几种情况需要注意。
示例2:
location /aming/
{
    proxy_pass http://192.168.1.10;
    ...
}


示例3:
location /aming/
{
    proxy_pass http://192.168.1.10/;  #/aming/被替代成/;
    ...
}

示例4:
location /aming/
{
    proxy_pass http://192.168.1.10/linux/; #/aming/被替代成/linux/;
    ...
}

示例5:
location /aming/
{
    proxy_pass http://192.168.1.10/linux;
    ...
}

假设server_name为www.aminglinux.com
当请求http://www.aminglinux.com/aming/a.html的时候,以上示例2-5分别访问的结果是

示例2:http://192.168.1.10/aming/a.html

示例3:http://192.168.1.10/a.html

示例4:http://192.168.1.10/linux/a.html

示例5:http://192.168.1.10/linuxa.html
  • 我们应该尽量使用示例3和示例4的配置方法,不容易发生错误;

proxy_set_header

  • proxy_set_header用来设定被代理服务器接收到的header信息。

  • 语法:proxy_set_header field value;
    field为要更改的项目,也可以理解为变量的名字,比如HOST,value为变量的值

  • proxy_set_header host
    如果不设置proxy_set_header,则默认host的值为proxy_pass后面跟的那个域名或者IP(一般写IP),
    比如示例4,请求到后端的服务器上时,完整请求uri为:http://192.168.1.10/linux/a.html
    如果设置proxy_set_header,如 proxy_set_header host $host;
    比如示例4,请求到后端的服务器完整uri为:http://www.aminglinux.com/linux/a.html

  • proxy_set_header X-Real-IP $remote_addr;和proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
    用来设置被代理端接收到的远程客户端IP,如果不设置,则header信息中并不会透传远程真实客户端的IP地址。
    可以用如下示例来测试:

示例6(被代理端)
server{
	listen 8080;
	server_name www.aminglinux.com;
	root /tmp/123.com_8080;
	index index.html;
        location /linux/ {
	    echo "$host";
	    echo $remote_addr;
	    echo $proxy_add_x_forwarded_for;
	}
}

示例7(代理服务器上)
server {
    listen 80;
    server_name www.aminglinux.com;
    location /aming/
    {
	proxy_pass http://192.168.87.133:8080/linux/;
	proxy_set_header host $host;
	proxy_set_header X-Real-IP      $remote_addr;
    proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
    }
}

测试结果:
 $ curl -x192.168.87.133:80 www.aminglinux.com/aming/
www.aminglinux.com
192.168.87.148
192.168.87.1, 192.168.87.148
代理服务器修改成如下配置:
server {
    listen 80;
    server_name www.aminglinux.com;
    location /aming/
    {
	proxy_pass http://192.168.87.133:8080/linux/;
	#proxy_set_header host $host;
	#proxy_set_header X-Real-IP      $remote_addr;
    #proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
    }
}

测试结果:
$ curl -x192.168.87.133:80 www.aminglinux.com/aming/
192.168.87.133
192.168.87.148
192.168.87.148

proxy_redirect

该指令用来修改被代理服务器返回的响应头中的Location头域和“refresh”头域。
语法结构为:
proxy_redirect redirect replacement;
proxy_redirect default;
proxy_redirect off;

下面展示需要用到的情形:

代理设置:
server {
    listen 80;
    server_name www.aminglinux.com;
        index index.html;
   location /
    {
        proxy_pass http://127.0.0.1:8080;
        proxy_set_header host $host;
#       proxy_set_header X-Real-IP      $remote_addr;
#    proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
    }
}
后端服务器设置:
server{
        listen 8080;
        server_name www.aminglinux.com;
        root /data/wwwroot/aming.com/;
        index index.html;
}
curl测试:
[root@draft vhost]# curl -x127.0.0.1:80 www.aminglinux.com/aming -I
HTTP/1.1 301 Moved Permanently
Server: nginx/1.14.2
Date: Wed, 30 Oct 2019 15:52:20 GMT
Content-Type: text/html
Content-Length: 185
Connection: keep-alive
Location: http://www.aminglinux.com:8080/aming/
  • 注意:返回301有几个先决条件
  1. location后面必须是/;
  2. proxy_pass后面的URL不能加uri,只能是IP或者IP:port结尾,并不能以/结尾;
  3. 访问的uri必须是一个真实存在的目录,如,这里的aming必须是存在的
  4. 访问的时候,不能以/结尾,只能是 www.aminglinux.com/aming
  • 这种情形会指向了www.aminglinux.com:8080但其实我们是需要访问后端的8080,这个代理服务器的8080可能是没有开的,或者另外一个业务,这样就会影响客户获取信息;

  • 虽然,这4个条件挺苛刻,但确实会遇到类似的请求。解决方法是,加一行proxy_redirect http://$host:8080/ /;

示例9:

server {
    listen 80;
    server_name www.aminglinux.com;
    index  index.html;

    location /
    {
	proxy_pass http://127.0.0.1:8080;
	proxy_set_header host $host;
	proxy_redirect http://$host:8080/ /;
	proxy_set_header X-Real-IP      $remote_addr;
    proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
    }
}

测试结果:
[root@draft vhost]# curl -x127.0.0.1:80 www.aminglinux.com/aming -I
HTTP/1.1 301 Moved Permanently
Server: nginx/1.14.2
Date: Wed, 30 Oct 2019 16:18:39 GMT
Content-Type: text/html
Content-Length: 185
Location: http://www.aminglinux.com/aming/
Connection: keep-alive

proxy_buffering设置

  • proxy_buffering主要是实现被代理服务器的数据和客户端的请求异步。

为了方便理解,我们定义三个角色,A为客户端,B为代理服务器,C为被代理服务器。

当proxy_buffering开启,A发起请求到B,B再到C,C反馈的数据先到B的buffer上,
然后B会根据proxy_busy_buffer_size来决定什么时候开始把数据传输给A。在此过程中,如果所有的buffer被写满,
数据将会写入到temp_file中。

相反,如果proxy_buffering关闭,C反馈的数据实时地通过B传输给A。

  • 以下配置,都是针对每一个http请求的。
  1. proxy_buffering on;
    该参数设置是否开启proxy的buffer功能,参数的值为on或者off。
    如果这个设置为off,那么proxy_buffers和proxy_busy_buffers_size这两个指令将会失效。
    但是无论proxy_buffering是否开启,proxy_buffer_size都是生效的

  2. proxy_buffer_size 4k;
    该参数用来设置一个特殊的buffer大小的。
    从被代理服务器(C)上获取到的第一部分响应数据内容到代理服务器(B)上,通常是header,就存到了这个buffer中。
    如果该参数设置太小,会出现502错误码,这是因为这部分buffer不够存储header信息。建议设置为4k。

  3. proxy_buffers 8 4k;
    这个参数设置存储被代理服务器上的数据所占用的buffer的个数和每个buffer的大小。
    所有buffer的大小为这两个数字的乘积。

  4. proxy_busy_buffer_size 16k;
    在所有的buffer里,我们需要规定一部分buffer把自己存的数据传给A,这部分buffer就叫做busy_buffer。
    proxy_busy_buffer_size参数用来设置处于busy状态的buffer有多大。

对于B上buffer里的数据何时传输给A,我个人的理解是这样的:
1)如果完整数据大小小于busy_buffer大小,当数据传输完成后,马上传给A;
2)如果完整数据大小不少于busy_buffer大小,则装满busy_buffer后,马上传给A;

  1. proxy_temp_path
    语法:proxy_temp_path path [level1 level2 level3]
    定义proxy的临时文件存在目录以及目录的层级。

例:proxy_temp_path /usr/local/nginx/proxy_temp 1 2;
其中/usr/local/nginx/proxy_temp为临时文件所在目录,1表示层级1的目录名为一个数字(0-9),2表示层级2目录名为2个数字(00-99)

  1. proxy_max_temp_file_size
    设置临时文件的总大小,例如 proxy_max_temp_file_size 100M;

  2. proxy_temp_file_wirte_size
    设置同时写入临时文件的数据量的总大小。通常设置为8k或者16k。

  • proxy_buffer示例
server
{
    listen 80;
    server_name www.aminglinux.com;
    proxy_buffering on;
	proxy_buffer_size 4k;
    proxy_buffers 2 4k;
    proxy_busy_buffers_size 4k;
    proxy_temp_path /tmp/nginx_proxy_tmp 1 2;
	proxy_max_temp_file_size 20M;
	proxy_temp_file_write_size 8k;
	
	location /
	{
	    proxy_pass      http://192.168.10.110:8080/;
        proxy_set_header Host   $host;
        proxy_set_header X-Real-IP      $remote_addr;
        proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;

	}

}

proxy_cache设置

  • proxy_cache将从C上获取到的数据根据预设规则存放到B上(内存+磁盘)留着备用,
    A请求B时,B会把缓存的这些数据直接给A,而不需要再去向C去获取。

  • proxy_cache相关功能生效的前提是,需要设置proxy_buffering on;

  • proxy_cache主要参数

  1. proxy_cache
    语法:proxy_cache zone|off

默认为off,即关闭proxy_cache功能,zone为用于存放缓存的内存区域名称。
例:proxy_cache my_zone;

从nginx 0.7.66版本开始,proxy_cache机制开启后会检测被代理端的HTTP响应头中的"Cache-Control"、"Expire"头域。
如,Cache-Control为no-cache时,是不会缓存数据的。

  1. proxy_cache_bypass
    语法:proxy_cache_bypass string;

该参数设定,什么情况下的请求不读取cache而是直接从后端的服务器上获取资源。
这里的string通常为nginx的一些变量。

例:proxy_cahce_bypass $cookie_nocache $arg_nocache$arg_comment;
意思是,如果$cookie_nocache $arg_nocache$arg_comment这些变量的值只要任何一个不为0或者不为空时,
则响应数据不从cache中获取,而是直接从后端的服务器上获取。

  1. proxy_no_cache
    语法:proxy_no_cache string;

该参数和proxy_cache_bypass类似,用来设定什么情况下不缓存。

例:proxy_no_cache $cookie_nocache $arg_nocache $arg_comment;
表示,如果$cookie_nocache $arg_nocache $arg_comment的值只要有一项不为0或者不为空时,不缓存数据。

  1. proxy_cache_key
    语法:proxy_cache_key string;

定义cache key,如: proxy_cache_key $scheme$proxy_host$uri$is_args$args;(该值为默认值,一般不用设置)

  1. proxy_cache_path
    语法:proxy_cache_path path [levels=levels] keys_zone=name:size [inactive=time] [max_size=size]

path设置缓存数据存放的路径;

levels设置目录层级,如levels=1:2,表示有两级子目录,第一个目录名取md5值的倒数第一个值,第二个目录名取md5值的第2和3个值。如下图:
在这里插入图片描述

  1. keys_zone设置内存zone的名字和大小,如keys_zone=my_zone:10m

  2. inactive设置缓存多长时间就失效,当硬盘上的缓存数据在该时间段内没有被访问过,就会失效了,该数据就会被删除,默认为10s。

  3. max_size设置硬盘中最多可以缓存多少数据,当到达该数值时,nginx会删除最少访问的数据。

例:proxy_cache_path /data/nginx_cache/ levels=1:2 keys_zone=my_zone:10m inactive=300s max_size=5g

proxy_cache示例

http 
{
    ...;
    
    proxy_cache_path /data/nginx_cache/ levels=1:2 keys_zone=my_zone:10m inactive=300s max_size=5g;
    
    ...;
    
    server
    {
        listen 80;
        server_name www.aminglinux.com;
        proxy_buffering on;
    	proxy_buffer_size 4k;
        proxy_buffers 2 4k;
        proxy_busy_buffers_size 4k;
        proxy_temp_path /tmp/nginx_proxy_tmp 1 2;
    	proxy_max_temp_file_size 20M;
    	proxy_temp_file_write_size 8k;
	
	
	
	    location /
	    {
	        proxy_cache my_zone;
	        proxy_pass      http://192.168.10.110:8080/;
            proxy_set_header Host   $host;
            proxy_set_header X-Real-IP      $remote_addr;
            proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;

	    }

    }
}

说明:核心配置为proxy_cache_path那一行。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值