Nginx, Apache, Tomcat 中间件文档集
深入了解MiddlewareDocs - Nginx, Apache, Tomcat的综合指南，包括从基础安装到高级配置的所有步骤。
开始使用

总字符数: 8.92K

代码: 2.68K, 文本: 3.27K

预计阅读时间: 26 分钟

examples目录中的示例模拟了工作中的一些常用实战场景,并且都可以通过脚本一键式启动,让您可以快速看到演示效果.

Nginx 简介

什么是 Nginx

Nginx (engine x) 是一款轻量级的 Web 服务器 、反向代理服务器及电子邮件(IMAP/POP3)代理服务器.

什么是反向代理

反向代理(Reverse Proxy)方式是指以代理服务器来接受 internet 上的连接请求,然后将请求转发给内部网络上的服务器,并将从服务器上得到的结果返回给 internet 上请求连接的客户端,此时代理服务器对外就表现为一个反向代理服务器.

Ngnix 特点

  • 模块化设计:良好的扩展性,可以通过模块方式进行功能扩展.
  • 高可靠性:主控进程和 worker 是同步实现的,一个 worker 出现问题,会立刻启动另一个 worker.
  • 内存消耗低:一万个长连接(keep-alive),仅消耗 2.5MB 内存.
  • 支持热部署:不用停止服务器,实现更新配置文件,更换日志文件、更新服务器程序版本.
  • 并发能力强:官方数据每秒支持 5 万并发;
  • 功能丰富:优秀的反向代理功能和灵活的负载均衡策略

Nginx 功能

  • 支持静态资源的 web 服务器.
  • http,smtp,pop3 协议的反向代理服务器、缓存、负载均衡;
  • 支持 FASTCGI(fpm)
  • 支持模块化,过滤器(让文本可以实现压缩,节约带宽),ssl 及图像大小调整.
  • 内置的健康检查功能
  • 基于名称和 ip 的虚拟主机
  • 定制访问日志
  • 支持平滑升级
  • 支持 KEEPALIVE
  • 支持 url rewrite
  • 支持路径别名
  • 支持基于 IP 和用户名的访问控制.
  • 支持传输速率限制,支持并发数限制.

Nginx 性能

Nginx 的高并发,官方测试支持 5 万并发连接.实际生产环境能到 2-3 万并发连接数.10000 个非活跃的 HTTP keep-alive 连接仅占用约 2.5MB 内存.三万并发连接下,10 个 Nginx 进程,消耗内存 150M.淘宝 tengine 团队测试结果是”24G 内存机器上,处理并发请求可达 200 万”.

Ngnix 架构

主从模式

Nginx

采用一主多从的主从架构

但是这里 master 是使用 root 身份启动的,因为 nginx 要工作在 80 端口.而只有管理员才有权限启动小于低于 1023 的端口.master 主要是负责的作用只是启动 worker,加载配置文件,负责系统的平滑升级.其它的工作是交给 worker.那么当 worker 被启动之后,也只是负责一些 web 最简单的工作,而其他的工作都是有 worker 中调用的模块来实现的.

模块之间是以流水线的方式实现功能的.流水线,指的是一个用户请求,由多个模块组合各自的功能依次实现完成的.比如:第一个模块只负责分析请求首部,第二个模块只负责查找数据,第三个模块只负责压缩数据,依次完成各自工作.来实现整个工作的完成.

他们是如何实现热部署的呢?其实是这样的,我们前面说 master 不负责具体的工作,而是调用 worker 工作,他只是负责读取配置文件,因此当一个模块修改或者配置文件发生变化,是由 master 进行读取,因此此时不会影响到 worker 工作.在 master 进行读取配置文件之后,不会立即的把修改的配置文件告知 worker.而是让被修改的 worker 继续使用老的配置文件工作,当 worker 工作完毕之后,直接Down掉这个子进程,更换新的子进程,使用新的规则.

sendfile 机制

Nginx

支持 sendfile 机制

所谓 Sendfile 机制,是指:用户将请求发给内核,内核根据用户的请求调用相应用户进程,进程在处理时需要资源.此时再把请求发给内核(进程没有直接 IO 的能力),由内核加载数据.内核查找到数据之后,会把数据复制给用户进程,由用户进程对数据进行封装,之后交给内核,内核在进行 tcp/ip 首部的封装,最后再发给客户端.这个功能用户进程只是发生了一个封装报文的过程,却要绕一大圈.因此 nginx 引入了 sendfile 机制,使得内核在接受到数据之后,不再依靠用户进程给予封装,而是自己查找自己封装,减少了一个很长一段时间的浪费,这是一个提升性能的核心点.

以上内容摘自网友发布的文章,简单一句话是资源的处理,直接通过内核层进行数据传递,避免了数据传递到应用层,应用层再传递到内核层的开销.

目前高并发的处理,一般都采用 sendfile 模式.通过直接操作内核层数据,减少应用与内核层数据传递.

I/O 复用机制

Nginx

通信模型采用 I/O 复用机制

开发模型:epoll 和 kqueue.

支持的事件机制:kqueue、epoll、rt signals、/dev/poll 、event ports、select 以及 poll.

支持的 kqueue 特性包括 EV_CLEAR、EV_DISABLE、NOTE_LOWAT、EV_EOF,可用数据的数量,错误代码.

支持 sendfile、sendfile64 和 sendfilev;文件 AIO;DIRECTIO;支持 Accept-filters 和 TCP_DEFER_ACCEP.

以上概念较多,大家自行百度或谷歌,知识领域是网络通信(BIO,NIO,AIO)和多线程方面的知识.

Nginx 负载均衡(SLB)

nginx 的负载均衡策略可以划分为两大类:内置策略和扩展策略.内置策略包含加权轮询和 ip hash,在默认情况下这两种策略会编译进 nginx 内核,只需在 nginx 配置中指明参数即可.扩展策略有很多,如 fair、通用 hash、consistent hash 等,默认不编译进 nginx 内核.由于在 nginx 版本升级中负载均衡的代码没有本质性的变化,因此下面将以 nginx 1.0.15 稳定版为例,从源码角度分析各个策略.

加权轮询

Nginx

支持加权轮询（Weighted Round Robin）负载均衡.

轮询的原理很简单,首先我们介绍一下轮询的基本流程.如下是处理一次请求的流程图:

图中有两点需要注意,第一,如果可以把加权轮询算法分为先深搜索和先广搜索,那么 nginx 采用的是先深搜索算法,即将首先将请求都分给高权重的机器,直到该机器的权值降到了比其他机器低,才开始将请求分给下一个高权重的机器;第二,当所有后端机器都 down 掉时,nginx 会立即将所有机器的标志位清成初始状态,以避免造成所有的机器都处在 timeout 的状态,从而导致整个前端被夯住.

Ip Hash

Nginx

支持 Ip Hash 负载均衡

通过 Ip Hash 这种负载均衡策略,可以实现会话粘滞.

Fair

fair 策略是扩展策略,默认不被编译进 nginx 内核.其原理是根据后端服务器的响应时间判断负载情况,从中选出负载最轻的机器进行分流.这种策略具有很强的自适应性,但是实际的网络环境往往不是那么简单,因此要慎用.

通用 Hash、一致性 Hash

这两种也是扩展策略,在具体的实现上有些差别,通用 hash 比较简单,可以以 nginx 内置的变量为 key 进行 hash,一致性 hash 采用了 nginx 内置的一致性 hash 环,可以支持 memcache.

Nginx 场景

Ngnix 一般作为入口负载均衡或内部负载均衡,结合反向代理服务器使用.以下架构示例,仅供参考,具体使用根据场景而定.

入口负载均衡架构

Ngnix 服务器在用户访问的最前端.根据用户请求再转发到具体的应用服务器或二级负载均衡服务器(LVS)

内部负载均衡架构

LVS 作为入口负载均衡,将请求转发到二级 Ngnix 服务器,Ngnix 再根据请求转发到具体的应用服务器.

Ngnix 高可用

分布式系统中,应用只部署一台服务器会存在单点故障,负载均衡同样有类似的问题.一般可采用主备或负载均衡设备集群的方式节约单点故障或高并发请求分流.

Ngnix 高可用,至少包含两个 Ngnix 服务器,一台主服务器,一台备服务器,之间使用 Keepalived 做健康监控和故障检测.开放 VIP 端口,通过防火墙进行外部映射.

DNS 解析公网的 IP 实际为 VIP.

Nginx 入门

Nginx安装

普通安装

Windows 安装

(1)进入官方下载地址,选择合适版本(nginx/Windows-xxx).

(2)解压到本地

(3)启动

下面以 C 盘根目录为例说明下:

1
2
start nginx
nginx.exe -s stop

注:Nginx / Win32 是运行在一个控制台程序,而非 windows 服务方式的.服务器方式目前还是开发尝试中.

Linux 安装

rpm 包方式
1
2
3
4
5
6
7
8
9
10
11
12
13
# 进入工作目录
cd /opt
# 进入下载页面:http://nginx.org/packages/选择合适版本下载
wget http://nginx.org/packages/centos/7/noarch/RPMS/nginx-release-centos-7-0.el7.ngx.noarch.rpm
# 安装 nginx rpm 包  nginx rpm 包实际上安装的是 nginx 的 yum 源.
rpm -ivh nginx-*.rpm
# 正式安装 rpm 包
yum install nginx -y
# 启动nginx
systemctl start nginx.service
# 防火墙放行80端口
firewall-cmd --zone=public --add-port=80/tcp --permanent
firewall-cmd --reload
源码编译方式
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
# Nginx 源码的编译依赖于 gcc 以及一些库文件,所以必须提前安装.
yum install -y deltarpm gcc gcc-c++ unixODBC-devel httpd mysql-devel libcurl libcurl-devel libevent libevent-devel curl-devel libxml2  libxml2-devel  net-snmp-devel pcre-devel  java-devel openssl-devel perl-ExtUtils-Embed at python subversion gperf make rpm-build git bzip2-devel gd gd-devel t1lib t1lib-devel GeoIP-devel libatomic_ops-devel zlib-devel unzip libstdc++* net-snmp net-snmp* gmp gmp-devel openldap openldap-devel libpcap-devel glib2-devel GeoIP-devel vim wget git libtool make automake mlocate pam-devel unzip screen openssl iptables-services bash-completion*  libxslt*  curl net-tools libssh2-devel

# 进入官网下载地址:http://nginx.org/en/download.html ,选择合适的版本下载.
cd /opt
wget http://nginx.org/download/nginx-1.12.2.tar.gz
# 解压
tar -zxvf nginx-1.12.2.tar.gz
# 进入目录
cd nginx-1.12.2/
# 编译安装
./configure \
    --prefix=/usr/local/nginx \
    --pid-path=/var/run/nginx/nginx.pid \
    --lock-path=/var/lock/nginx.lock \
    --error-log-path=/var/log/nginx/error.log \
    --http-log-path=/var/log/nginx/access.log \
    --with-http_gzip_static_module \
    --http-client-body-temp-path=/var/temp/nginx/client \
    --http-proxy-temp-path=/var/temp/nginx/proxy \
    --http-fastcgi-temp-path=/var/temp/nginx/fastcgi \
    --http-uwsgi-temp-path=/var/temp/nginx/uwsgi \
    --http-scgi-temp-path=/var/temp/nginx/scgi
# 安装
make && make install
# 放行防火墙
firewall-cmd --zone=public --add-port=80/tcp --permanent
firewall-cmd --reload

# 启动 Nginx 安装成功后,直接执行 nginx 命令即可启动 nginx.
nginx

Docker 安装

  • 官网镜像:https://hub.docker.com/_/nginx/

  • 下载镜像:docker pull nginx

  • 启动容器:docker run -d -p 80:80 --name my-nginx nginx

  • 重新加载配置(目前测试无效,只能重启服务):docker exec -it my-nginx nginx -s reload

  • 停止服务:docker exec -it my-nginx nginx -s stop 或者:docker stop my-nginx

  • 重新启动服务:docker restart my-nginx

  • 查看正在运行的容器:docker ps

脚本

CentOS7 环境安装脚本:软件运维配置脚本集合

安装说明

  • 采用编译方式安装 Nginx, 并将其注册为 systemd 服务
  • 安装路径为:/usr/local/nginx
  • 默认下载安装 1.16.0 版本

使用方法

  • 默认安装 - 执行以下任意命令即可:
1
wget -qO- https://gitee.com/turnon/linux-tutorial/raw/master/codes/linux/soft/nginx-install.sh | bash
  • 自定义安装 - 下载脚本到本地,并按照以下格式执行:
1
sh nginx-install.sh [version]

Nginx常用命令

nginx 的使用比较简单,就是几条命令.

常用到的命令如下:

1
2
3
4
5
6
7
8
nginx -s stop       快速关闭Nginx,可能不保存相关信息,并迅速终止web服务.
nginx -s quit       平稳关闭Nginx,保存相关信息,有安排的结束web服务.
nginx -s reload     因改变了Nginx相关配置,需要重新加载配置而重载.
nginx -s reopen     重新打开日志文件.
nginx -c filename   为 Nginx 指定一个配置文件,来代替缺省的.
nginx -t            不运行,仅仅测试配置文件.nginx 将检查配置文件的语法的正确性,并尝试打开配置文件中所引用到的文件.
nginx -v            显示 nginx 的版本.
nginx -V            显示 nginx 的版本,编译器版本和配置参数.

如果不想每次都敲命令,可以在 nginx 安装目录下新添一个启动批处理文件startup.bat,双击即可运行.内容如下:

1
2
3
4
5
6
7
8
9
10
11
12
@echo off
rem 如果启动前已经启动nginx并记录下pid文件,会kill指定进程
nginx.exe -s stop

rem 测试配置文件语法正确性
nginx.exe -t -c conf/nginx.conf

rem 显示版本信息
nginx.exe -v

rem 按照指定配置去启动nginx
nginx.exe -c conf/nginx.conf

如果是运行在 Linux 下,写一个 shell 脚本,大同小异

快来参与讨论吧~