高并发场景下,Nginx如何抗住千万级流量?
ahcoder 2025-06-28 11:41 1 浏览
关注△mikechen△,十余年BAT架构经验倾囊相授!
大家好,我是mikechen。
Nginx在大型架构被广泛使用,下面我就重点来详解Nginx高并发技术@mikechen
文章来源:mikechen.cc
Nginx如何应对高并发
在现代互联网中,高并发流量是许多应用的常态,尤其在:秒杀系统、直播平台,还是大型电商活动。
这些场景会带来技术挑战,所以,就需要来解决高并发流量。
Nginx 不仅仅是一个 Web 服务器,它是 现代互联网系统的流量总管,在高并发架构中扮演着至关重要的角色。
Nginx 能够支撑高并发流量,背后有几项关键技术支撑:
多进程 + 事件驱动架构
使用 Master-Worker 多进程模型,主进程负责管理,子进程负责处理请求;
Master 进程的职责:
- 管理 Worker 进程: Master 进程负责启动、停止和重启 Worker 进程,确保系统的稳定运行。
- 加载配置文件: 它负责读取和解析 Nginx 的配置文件(nginx.conf),并将配置信息传递给 Worker 进程。
Worker 进程的职责:
- 处理客户端请求: Worker 进程是实际处理客户端请求的进程。
- 执行网络 I/O 操作: 它负责接收和发送网络数据,处理 HTTP 请求和响应。
- 每个 Worker 进程都是独立的: 这意味着它们之间互不干扰,即使某个 Worker 进程出现问题,也不会影响其他进程的运行。
异步非阻塞处理机制
通过 epoll 和非阻塞 I/O 的结合使用,Nginx 能够高效地处理大量的并发连接。
它能够在一个线程中同时处理多个连接,从而提高了系统的并发处理能力。
单线程高效处理连接:
每个 Worker 进程都是单线程的,这避免了多线程上下文切换的开销,提高了性能。
为了高效地处理大量并发连接,Nginx 使用了 epoll(在 Linux 系统上)等多路复用技术。
epoll 的作用:
epoll 是一种 I/O 多路复用技术,它允许一个线程同时监听多个文件描述符(例如,网络连接)。
当某个文件描述符上有事件发生(例如,数据到达),epoll 会通知线程,线程再进行处理。
epoll相比于select,poll,在大数量连接的情况下,性能会更好。
非阻塞 I/O:
Nginx 使用非阻塞 I/O,这意味着当线程执行 I/O 操作时,不会等待操作完成,而是立即返回。
线程可以继续执行其他任务,当 I/O 操作完成后,通过事件通知机制进行处理。
非阻塞IO,可以避免线程在等待IO的时候,被阻塞。
Nginx高并发配置实战
1. 启用多进程并发 + 高效事件模型
worker_processes auto; worker_cpu_affinity auto;
events { use epoll; # Linux 平台推荐使用 epoll worker_connections 10240; multi_accept on; }
worker_processes auto
:自动设置为 CPU 核心数,充分利用多核优势。
- use epoll
- :Linux 下的高性能事件驱动模型。
- worker_connections
- :单个 worker 支持的最大连接数(理论并发 = workers × connections)。
- multi_accept on
- :允许 worker 一次接受多个连接,提高接入效率。
实战建议:在压力测试中逐步调整 worker_connections 以找到最佳吞吐点。
2. 提升 TCP 连接效率(长连接+连接复用)
keepalive_timeout 65; keepalive_requests 1000; tcp_nodelay on; tcp_nopush on;
- keepalive_timeout
- :保持连接存活时间,减少频繁建立/释放的开销。
- keepalive_requests
- :单连接最大请求数,配合 upstream keepalive 使用。
- tcp_nodelay
- :加速小包传输,避免延迟。
- tcp_nopush
- :优化响应包发送,减少数据包数量。
3.. 开启缓存机制,减轻后端压力
proxy_cache_path /data/nginx/cache levels=1:2 keys_zone=static_cache:50m inactive=1h max_size=2g;
server { location /static/ { proxy_cache static_cache; proxy_pass http://backend_servers; proxy_cache_valid 200 1h; proxy_cache_use_stale error timeout updating; } }
- proxy_cache_path
- :设置缓存路径、层级结构、大小上限;
- proxy_cache_valid
- :为不同状态码配置缓存时间;
- proxy_cache_use_stale
- :后端出问题时使用过期缓存兜底,提升系统容错。
5. 设置限流防护,抵御突发流量冲击
limit_conn_zone $binary_remote_addr zone=addr_limit:10m;
limit_conn addr_limit 20;
limit_req_zone $binary_remote_addr zone=req_limit:10m rate=10r/s; limit_req zone=req_limit burst=20 nodelay;
- limit_conn
- :限制单 IP 最大连接数;
- limit_req
- :限制请求速率(如:每秒10次),防止恶意刷接口。
场景举例:
- 防止爬虫恶意抓取;
- 限制高频 API 调用;
- 缓解峰值时段突发请求。
6. 优化文件传输性能:
sendfile on; aio on; output_buffers 1 512k;
- sendfile
- :启用零拷贝机制,减少磁盘 → 网络的数据搬运消耗;
- aio
- :启用异步文件 IO,提升大文件传输效率。
7. 启用 Gzip 压缩减少带宽占用
gzip on; gzip_types text/plain application/json application/javascript text/css; gzip_comp_level 5;
- 适用于静态资源、JSON 接口响应等场景;
- 在带宽紧张时非常有效,但注意不要压缩已压缩格式(如 .zip, .jpg)。
以上
文章来源:mikechen.cc
相关推荐
- Nginx的http块sendfile,keepalive_timeout的配置指令说明,
-
sendfile是用来设置Ngnix服务的一种静态资源的写法sendfile:用来设置Nginx服务器是否使用sendfile()传输文件,该属性可以大大提高Nginx处理静态资源的性能这里send...
- Docker安装和配置Nginx(docker-compose部署nginx)
-
下载镜像dockerpullnginx检查Nginx镜像dockerimages创建挂载目录mkdir-p/home/docker-nginx/confmkdir-p/home/doc...
- 记:Nginx 如何配置SSL证书(nginx添加ssl证书)
-
引言最近,有几个其他项目团队的同事问了我几个类似问题:“钦哥,我们微信小程序微信支付,怎么回调不没反应?”“钦哥,我们的项目怎么无法通过https访问的?”然后就有想把配置ssl证书的过程,记录一...
- 多项目nginx部署配置(nginx多站点配置示例)
-
在前后端分离的项目中,前端部署大部分都采用nginx部署。在我参与的一个项目中,后台管理前端和业务应用前端是作为两个独立项目开发的。以往部署时通过不同端口来访问这两个项目,这就导致前端存储的token...
- NGINX最佳缓存配置策略(nginx最佳缓存配置策略有哪些)
-
Nginx可以配置的参数有很多,今天我们来看一下Nginx的缓存如何配置。no-cache和no-store“no-cache”表示必须先与服务器确认返回的响应是否发生了变化,然后才能使用该响应来满足...
- 通过 docker 学习 nginx,附全部配置及 API 测试,使用 apifox 直接打开
-
本篇文章以前端的视角,介绍下nginx的常见配置,并通过docker的方式学习nginx,这保证所有实例配置都能正常运行。我将本文所有关于docker/nginx的配置放置在simple...
- nginx配置负载均衡 以及宕机了后,怎么配置高可用
-
Nginx负载均衡配置是一个分发请求的过程。可以通过将同一个服务的多个实例配置到不同的服务器上,通过Nginx代理请求,将请求分发到这些实例上实现负载均衡。下面详细介绍Nginx负载均衡的配置过程和宕...
- nginx反向代理加https证书和自动跳转配置
-
nginx反向代理加https证书和自动跳转配置如果对运维课程感兴趣,可以在b站上搜索我的账号:运维实战课程,可以关注我,学习更多免费的运维实战技术视频1.机器规划:nginx代理机器:192.16...
- 【Nginx基础】Nginx常见负载均衡策略配置示例
-
下面是一些常用的Nginx负载均衡策略及其配置示例:轮询(RoundRobin)这是默认的负载均衡策略,它将请求依次分配给不同的后端服务器。upstreambackend{server...
- nginx中配置固定的JSON响应(nginx指定conf)
-
前提在进行性能测试时,使用mock接口是一种非常有效的方法,可以帮助您模拟真实服务的行为,从而避免对外部系统的依赖。使用Nginx作为mock接口的返回源不仅可以快速配置,还能确保mock接口本身不...
- Nginx基本安全配置(防盗连、隐藏版本号、防嵌套等)
-
在生产环境中nginx有很多安全方案,我在为生产环境部署中得到很多经验,收集到的一些常用配置,简单记录一下。安装Nginx正常安全Nginx大家应该都会,但是各位要知道在安全要求很高的生产环境中,是无...
- nginx如何配置跨域(nginx配置解决跨域)
-
要在Nginx中配置跨域,可以使用add_header指令来添加Access-Control-Allow-*头信息,如下所示:location/api{if($reques...
- Nginx合集-限流配置方案参考(nginx lua限流)
-
Nginx为我们提供了请求限制模块(ngx_http_limit_req_module)、基于令牌桶算法的流量限制模块(ngx_stream_limit_conn_module),可以方便的控制令牌速...
- 韩国站群服务器Nginx反向代理多IP配置指南
-
在站群服务器的运营中,Nginx反向代理技术如同一座智能调度中心,既能隐藏真实服务器架构,又能实现流量精准分发。尤其对于部署在韩国数据中心的站群而言,合理配置多IP反向代理,可显著提升SEO安全性与服...
- Nginx配置前后端服务(nginx配置前端页面部署)
-
nginx安装完成后,可以通过命令查看配置文件nginx-t配置文件nginx.conf,是总的配置,有的人会把配置全部配置到这个文件中,如果服务很多,这个文件变得非常庞大,我见过一个配置很大的,在...
- 一周热门
- 最近发表
-
- Nginx的http块sendfile,keepalive_timeout的配置指令说明,
- Docker安装和配置Nginx(docker-compose部署nginx)
- 记:Nginx 如何配置SSL证书(nginx添加ssl证书)
- 多项目nginx部署配置(nginx多站点配置示例)
- NGINX最佳缓存配置策略(nginx最佳缓存配置策略有哪些)
- 通过 docker 学习 nginx,附全部配置及 API 测试,使用 apifox 直接打开
- nginx配置负载均衡 以及宕机了后,怎么配置高可用
- nginx反向代理加https证书和自动跳转配置
- 【Nginx基础】Nginx常见负载均衡策略配置示例
- nginx中配置固定的JSON响应(nginx指定conf)
- 标签列表
-
- linux 远程 (37)
- u盘 linux (32)
- linux 登录 (34)
- linux 路径 (33)
- linux 文件命令 (35)
- linux 是什么 (35)
- linux 界面 (34)
- 查看文件 linux (35)
- linux 语言 (33)
- linux代码 (32)
- linux 查看命令 (33)
- 关闭linux (34)
- root linux (33)
- 删除文件 linux (35)
- linux 主机 (34)
- linux与 (33)
- linux 函数 (35)
- linux .ssh (35)
- cpu linux (35)
- 查看linux 系统 (32)
- linux 防火墙 (33)
- linux 镜像 (34)
- linux ip地址 (34)
- linux 用户查看 (33)
- nginx配置 解析 (37)