nginx笔记

  1. 介绍
    nginx用途:
    a.静态http服务器;
    b.反向代理(反向代理为何叫反向代理)。正向代理中,proxy和client同属一个LAN,对server透明;反向代理中,proxy和server同属一个LAN,对client透明;
    c.负载均衡,比如通过统一的域名进入然后将请求转发到不同的服务器上,以减轻单台服务器的压力;
    d.虚拟主机,不同域名访问同一个服务器上的不同的应用;
    e.限流;
    中文文档:http://tengine.taobao.org/nginx_docs/cn/docs/

  2. 源码安装

     sudo apt-get update
     sudo apt-get install build-essential zlib1g-dev libpcre3 libpcre3-dev libssl-dev libxslt1-dev libxml2-dev libgd2-xpm-dev libgeoip-dev libgoogle-perftools-dev libperl-dev libtool
     sudo apt-get install openssl
     # 最新链接见http://nginx.org/en/download.html
     wget http://nginx.org/download/nginx-1.14.0.tar.gz
     tar -zxvf nginx-1.14.0.tar.gz
     cd nginx-1.14.0
     ./configure --prefix=/usr/local/nginx --with-http_ssl_module --with-stream --with-mail=dynamic
     make
     make install
     # -c指定配置文件路径
     sudo /usr/local/nginx/sbin/nginx -c /usr/local/nginx/conf/nginx.conf
     # 查看nginx进程:
     ps -ef|grep nginx
     
    参考:[](https://www.linuxidc.com/Linux/2017-09/147157.htm) 
    
  3. yum安装

     创建文件:/etc/yum.repos.d/nginx.repo
     ```
     [nginx]
     name=nginx repo
     baseurl=http://nginx.org/packages/OS/OSRELEASE/$basearch/
     gpgcheck=0
     enabled=1
     ```
     将“OS”替换为“rhel”或者“centos”,根据系统版本是6.x或者7.x将“OSRELEASE”替换为“6”或者“7” 。
     参考:[](http://nginx.org/en/linux_packages.html#stable)
    
  4. 控制命令

     # 直接关闭 nginx
     nginx -s stop
     # 会在处理完当前正在的请求后退出,也叫优雅关闭
     nginx -s quit
     # 重新加载配置文件,相当于重启
     nginx -s reload
     # 重新打开日志文件
     nginx -s reopen
    
  5. 配置文件位置
    /usr/local/nginx/conf, /etc/nginx, /usr/local/etc/nginx

  6. 配置示例一

     # this is a comment
     events {  
         worker_connections  4096;  ## Default: 1024
     }
     http {    
         server {          
             listen 80;        
             server_name  domain1.com www.domain1.com;        
             access_log  logs/domain1.access.log  main;
             root        html;
             location ~ \.php$ {
                 fastcgi_pass 127.0.0.1:1025;
             }
             # /data/www
             location / {    
                 root /data/www;
             }
         # /data/images
             location /images/ {    
                 root /data;
             }
         }
         server {
             listen 8080;
             server_name domain2.com www.domain2.com;
             access_log logs/domain2.access.log  main;
             root html;
             location / {
                 proxy_pass http://localhost:8080;
             }
             # 以.gif .jpg .png结尾的url
             location ~ \.(gif|jpg|png)${
                 root /data/images;
             }
         }
     }
    
  7. 配置示例二(负载均衡)(参考

     # 工作模式及连接数上限
     events {
         use epoll; # epoll是多路复用IO(I/O Multiplexing)中的一种方式,但是仅用于linux2.6以上内核,可以大大提高nginx的性能
         worker_connections 1024; # 单个后台worker process进程的最大并发链接数
         # multi_accept on; 
     }
     http {
         # 设定负载均衡的服务器列表
         upstream mysvr {
             # weigth参数表示权值,权值越高被分配到的几率越大
             # 本机上的Squid开启3128端口
             server 192.168.8.1:3128 weight=5;
             server 192.168.8.2:80  weight=1;
             server 192.168.8.3:80  weight=6;
         }
         server {          
             listen 80;        
             server_name  domain1.com www.domain1.com;        
             access_log  logs/domain1.access.log  main;
             root        html;
             location / {
                 root   /root;#定义服务器的默认网站根目录位置
                 index index.php index.html index.htm;#定义首页索引文件的名称
                 proxy_pass  http://mysvr; # 请求转向mysvr定义的服务器列表
                 
                 # 以下是一些反向代理的配置可删除.
                 proxy_redirect off;
    
                 # 后端的Web服务器可以通过X-Forwarded-For获取用户真实IP
                 proxy_set_header Host $host;
                 proxy_set_header X-Real-IP $remote_addr;
                 proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
                 client_max_body_size 10m;       #允许客户端请求的最大单文件字节数
                 client_body_buffer_size 128k;   #缓冲区代理缓冲用户端请求的最大字节数,
                 proxy_connect_timeout 90;       #nginx跟后端服务器连接超时时间(代理连接超时),单位:秒
                 proxy_send_timeout 90;          #后端服务器数据回传时间(代理发送超时),单位:秒
                 proxy_read_timeout 90;          #连接成功后,后端服务器响应时间(代理接收超时),单位:秒
                 proxy_buffer_size 4k;           #设置代理服务器(nginx)保存用户头信息的缓冲区大小
                 proxy_buffers 4 32k;            #proxy_buffers缓冲区,网页平均在32k以下的话,这样设置
                 proxy_busy_buffers_size 64k;    #高负荷下缓冲大小(proxy_buffers*2)
                 proxy_temp_file_write_size 64k; #设定缓存文件夹大小,大于这个值,将从upstream服务器传
             }
         }
     }
    
  8. upstream负载均衡策略

     # 轮询,每一个请求按时间顺序逐一分配到不同的后端服务器。假设后端服务器down掉。能自己主动剔除。尽管这样的方式简便、成本低廉。但缺点是:可靠性低和负载分配不均衡。适用于图片服务器集群和纯静态页面服务器集群。
     upstream servers { 
         server 10.0.6.108:7080; 
         server 10.0.0.85:8980; 
     }
     # 权重,指定轮询几率
     upstream servers{ 
         server 10.0.0.77 weight=5; 
         server 10.0.0.88 weight=10; 
     }
     # 每一个请求按訪问ip的hash结果分配。这样每一个訪客固定訪问一个后端服务器,能够解决session的问题。
     upstream servers{ 
         ip_hash; 
         server 10.0.0.10:8080; 
         server 10.0.0.11:8080; 
     }
     # fair(第三方,需要安装upstream-fair),按后端服务器的响应时间来分配请求。响应时间短的优先分配。与weight分配策略相似。
     upstream servers{      
         server 10.0.0.10:8080; 
         server 10.0.0.11:8080; 
         fair; 
     }
     # url_hash (第三方),按访问url的hash结果来分配请求,使每个url定向到同一个后端服务器,后端服务器为缓存时比较有效。 在upstream中加入hash语句,server语句中不能写入weight等其他的参数,hash_method是使用的hash算法
     upstream servers { 
         hash $request_uri; 
         hash_method crc32; 
         server localhost:8080;
         server localhost:8081;
     } 
    
  9. 备用服务器
    在平时不使用,nginx不会给它转发任何请求。只有当其他节点全部无法连接的时候,nginx才会启用这个节点。

     upstream  testproxy  {
         server   127.0.0.1:8080;
         server   192.168.1.15:8080 backup;
     }
    
  10. 日志字段

    $remote_addr 	客户端地址
    $remote_user 	客户端用户名称
    $time_local 	访问时间和时区
    $request 	请求的URI和HTTP协议
    $http_host 	请求地址,即浏览器中你输入的地址(IP或域名)
    $status 	HTTP请求状态
    $upstream_status 	upstream状态
    $body_bytes_sent 	发送给客户端文件内容大小
    $http_referer 	url跳转来源
    $http_user_agent 	用户终端浏览器等信息
    $ssl_protocol 	SSL协议版本
    $ssl_cipher 	交换数据中的算法
    $upstream_addr 	后台upstream的地址,即真正提供服务的主机地址
    $request_time 	整个请求的总时间
    $upstream_response_time 	请求过程中,upstream响应时间
    
  11. 在负载均衡模式下,将真实地址返回到客户端(在测试环境下帮助问题定位)

    add_header Upstream-Addr $upstream_addr;
    
  12. 反向代理非80端口有时丢失端口

    proxy_set_header   Host             $host:$server_port;
    
  13. 反向代理传递将来源host、客户端ip

    proxy_set_header X-Forwarded-Host $host;
    proxy_set_header   X-Real-IP        $remote_addr;
    proxy_set_header   X-Forwarded-For  $proxy_add_x_forwarded_for;
    
  14. 判断文件或者目录是否存在

    • -f和!-f用来判断是否存在文件
    • -d和!-d用来判断是否存在目录
    • -e和!-e用来判断是否存在文件或目录
    • -x和!-x用来判断文件是否可执行
    if  ( !-e $request_filename ) { # if后面需要有空格!!
        rewrite ^/data/attachment/forum/(.*)$ http://img.xxx.com/forum/$1 permanent;
    }
    if^(^$host^!=^‘www.0xcafebaby.com‘^){ # ^表示空格
    }
    

    redirect为302临时重定向;permanent为301永久重定向;

  15. 几个host: $proxy_host $host $http_host

    如果客户端发过来的header中有Host字段,则$http_host和$host都是原始的Host字段;
    如果客户端发过来的header中没有Host字段,则$host表示请求中的server name;

    $proxy_host默认是upstream解析的ip地址(proxy_set_header Host $proxy_host;),也就是如果反向代理没有设置proxy_set_header,则默认使用upstream的ip作为$proxy_host。
    因此,如果upstream是域名且也是类似反向代理,就需要设置proxy_set_header。
    如果需要传递端口,则:````proxy_set_header Host $host:$proxy_port```

  16. nginx压测

    安装:
    ubuntu: apt-get install apache2-utils
    centos: yum install httpd-tools

    使用:1000个并发,进行连接1000次 ab -c 1000 -n 1000 http://localhost/ab.html

  17. 正向代理

    server {
        access_log /var/log/nginx/access.log;
        listen          8087;
    
        resolver 114.114.114.114;
        location / {
                proxy_pass http://$http_host$request_uri;
        }
    }
    
    
  18. 限流及ip白名单

    geo $whiteiplist {
        default 1;
        10.10.1.111 0;
        10.10.1.111 1;
    }
    map $whiteiplist $limitbyip {
        1 $binary_remote_addr;
        0 "";
    }
    # 限制同一个ip连接数
    limit_conn_zone $binary_remote_addr zone=somename1:10m;
    # 限制同一个ip每分钟1个请求
    limit_req_zone $limitbyip zone=somename2:3m rate=1r/m;
    
    http {
        limit_conn somename1 1;
    

   limit_req zone=somename1 burst=5 nodelay;
# 限速500kB每秒,限速对象是单个连接
limit_rate 500k;
# 和limit_rate配合使用表示在下载的文件大小达到设定数后开启限速效果
limit_rate_after 50m;
}

```
burst=5:重点说明一下这个配置,burst爆发的意思,这个配置的意思是设置一个大小为5的缓冲区当有大量请求(爆发)过来时,超过了访问频次限制的请求可以先放到这个缓冲区内等待,但是这个等待区里的位置只有5个,超过的请求会直接报503的错误然后返回。
nodelay:如果设置,会在瞬时提供处理(burst + rate)个请求的能力,请求超过(burst + rate)的时候就会直接返回503,永远不存在请求需要等待的情况。(这里的rate的单位是:r/s)
如果没有设置,则所有请求会依次等待排队。(摘自:https://blog.csdn.net/hellow__world/article/details/78658041)

其他链接:

  1. Nginx+upstream针对后端服务器容错的运维笔记
  2. nginx proxy_next_upstream
posted @ 2018-04-19 23:08  liqipeng  阅读(415)  评论(0编辑  收藏  举报