2023年11月25日发(作者:)

Nginx重试机制,浏览器重复请求两次多次

场景还原

问题 ⽤户再浏览器⾥执⾏了⼀次http请求,结果后端服务器执⾏了两遍,如果这次请求是Insert操作,可想⽽知,会多出⼀条⼀模⼀样的记

录来。

⽹关⽤Nginx做了反向代理和,Nginx下挂着两台阿⾥云ECS服务器,每台机器上都装着Tomcat,⽤户打开浏览器,点击页⾯,访问后

端接⼝,查看Nginx,结果这⼀条请求打在了两台服务器上。

问题剖析

nginx的重试机制就是容错的⼀种,在nginx的配置⽂件中,proxy_next_upstream项定义了什么情况下进⾏重试,官⽹⽂档中给出的说明如

下:

Syntax: proxy_next_upstream error | timeout | invalid_header | http_500 | http_502 | http_503 | http_504 | http_403 | http_404 | off

Default: proxy_next_upstream error timeout;

Context: http, server, location

默认情况下,当请求服务器发⽣错误或超时时,会尝试到下⼀台服务器。

问题找到了,原因是Nginx配置⽂件中,超时时间太短了:proxy_connect_timeout 20;;在Nginx的默认配置是:在客户端请求服务器

超时的情况下,Nginx会⾃动转发该请求到另外⼀台服务器上,这是Nginx的⼀种容错机制,所以Nginx的访问⽇志中会出现同⼀条请

求⽽两台服务器都执⾏了⼀遍的情况,这样以来,程序如果没有做幂等性操作的话数据库会出现两条记录。

还有⼀个参数影响了重试的次数:proxy_next_upstream_tries,官⽅⽂档中给出的说明如下:

Syntax: proxy_next_upstream_tries number;

Default: proxy_next_upstream_tries 0;

Context: http, server, location

This directive appeared in version 1.7.5.

调整

本来就是Nginx的⼀种容错机制,这种机制在查询操作还是挺好的,如果是插⼊操作,那就有点问题了,如果这条插⼊的请求特别耗时,并

且时间超过Nginxproxy_connect_timeout时间设置,Nginx会⾃动将该请求转发集群中的另外⼀台服务器的。但是我们不能将这种机制关

闭,关闭以后会影响Nginx效率的,那怎么办哪?于是想出了⼀个临时解决⽅案,专门针对耗时时间长的⼏个接⼝做⼀下过滤,也就是说,

Nginxserver配置标签中,专门对⼏个特定的url过过滤,关闭Nginx的重试机制,配置如下

server {

location ~ /api/insertData {

proxy_connect_timeout 60;

proxy_send_timeout 60;

proxy_read_timeout 60;

proxy_next_upstream off;

}

}

也可以直接关闭重试机制

proxy_next_upstream off;

nginx timeout 配置 全局timeout 局部timeout web timeout

nginx⽐较强⼤,可以针对单个域名请求做出单个连接超时的配置.

⽐如些动态解释和静态解释可以根据业务的需求配置

proxy_connect_timeout :后端服务器连接的超时时间_发起握⼿等候响应超时时间

proxy_read_timeout:连接成功后_等候后端服务器响应时间_其实已经进⼊后端的排队之中等候处理(也可以说是后端服务器处理请求的时

间)

proxy_send_timeout :后端服务器数据回传时间_就是在规定时间之内后端服务器必须传完所有的数据

nginx使⽤proxy模块时,默认的读取超时时间是60s

1、请求超时

http {

include ;

server_names_hash_bucket_size 512;

default_type application/octet-stream;

sendfile on;

keepalive_timeout 65; #保持

tcp_nodelay on;

client_header_timeout 15;

client_body_timeout 15;

send_timeout 25;

include vhosts/*.conf;

}

2、后端服务器处理请求的时间设置(页⾯等待服务器响应时间)

location / {

...

proxy_read_timeout 150; #

...

}

nginx常⽤的超时配置说明---timeout参数

1. 常规timeout参数

send_timeout

语法:send_timeout time

默认值:60s

配置区域:http server location

说明:设置响应传输到客户端的超时时间。仅在两个连续的写操作之间设置超时,⽽不是为整个

响应的传输。如果客户端在此时间内未收到任何内容,则会关闭连接。

client_header_timeout

语法:client_header_timeout time

默认值:60s

配置区域:http server

说明:指定等待client发送⼀个请求头的超时时间(例如:GET / HTTP/1.1.仅当在⼀次read中,没有收到请求头,才会算成超时。如果在

超时时间内,client没发送任何东西,nginx返回HTTP状态码408(“Request timed out”)

client_body_timeout

语法:client_body_timeout time

默认值:60s

配置区域:http server location

说明:该指令设置请求体(request body)的读超时时间。仅当在⼀次readstep中,没有得到请求体,就会设为超时。超时后,nginx返回

HTTP状态码408(“Request timed out”)

keepalive_timeout

语法:keepalive_timeout timeout [ header_timeout ]

默认值:75s

配置区域:http server location

说明:第⼀个参数指定了与clientkeep-alive连接超时时间。服务器将会在这个时间后关闭连接。可选的第⼆个参数指定了在响应头Keep-

Alive: timeout=time中的time值。这个头能够让⼀些浏览器主动关闭连接,这样服务器就不必要去关闭连接了。没有这个参数,nginx不会发

Keep-Alive响应头(尽管并不是由这个头来决定连接是否“keep-alive”

两个参数的值可并不相同

注意不同浏览器怎么处理“keep-alive”

MSIEOpera忽略掉"Keep-Alive: timeout=" header.

MSIE保持连接⼤约60-65秒,然后发送TCP RST

Opera永久保持长连接

Mozilla keeps the connection alive for N plus about 1-10 seconds.

Konqueror保持长连接N

lingering_timeout

语法:lingering_timeout time

默认值:5s

配置区域:http server location

说明:lingering_close⽣效后,在关闭连接前,会检测是否有⽤户发送的数据到达服务器,如果超过lingering_timeout时间后还没有数据可

读,就直接关闭连接;否则,必须在读取完连接缓冲区上的数据并丢弃掉后才会关闭连接。

resolver_timeout

语法:resolver_timeout time

默认值:30s

配置区域:http server location

说明:该指令设置DNS解析超时时间

2. fastcgitimeout设置

配置区域:http

fastcgi_connect_timeout

fastcgi连接超时时间,默认60

fastcgi_send_timeout

nginx进程向fastcgi进程发送请求过程的超时时间,默认值60

fastcgi_read_timeout

fastcgi进程向nginx进程发送输出过程的超时时间,默认值60

3. proxy转发模块的timeout设置

proxy_connect_timeout

语法:proxy_connect_timeout time

默认值:60s

配置区域:http server location

说明:该指令设置与upstream server的连接超时时间,有必要记住,这个超时不能超过75秒。

这个不是等待后端返回页⾯的时间,那是由proxy_read_timeout声明的。如果你的upstream服务器起来了,但是hanging住了(例如,没有

⾜够的线程处理请求,所以把你的请求放到请求池⾥稍后处理),那么这个声明是没有⽤的,由于与upstream服务器的连接已经建⽴了。

proxy_read_timeout

语法:proxy_read_timeout time

默认值:60s

配置区域:http server location

说明:该指令设置与代理服务器的读超时时间。它决定了nginx会等待多长时间来获得请求的响应。这个时间不是获得整个response的时

间,⽽是两次reading操作的时间。

proxy_send_timeout

语法:proxy_send_timeout time

默认值:60s

配置区域:http server location

说明:这个指定设置了发送请求给upstream服务器的超时时间。超时设置不是为了整个发送期间,⽽是在两次write操作期间。如果超时

后,upstream没有收到新的数据,nginx会关闭连接

proxy_upstream_fail_timeoutfail_timeout

语法:server address [fail_timeout=30s]

默认值:10s

配置区域:upstream

说明:Upstream模块下 server指令的参数,设置了某⼀个upstream后端失败了指定次数(max_fails)后,该后端不可操作的时间,默认为

10

4. 负载均衡配置timeout时的2个参数

fail_timeout:默认10s

max_fails:默认1

2个参数⼀起配合,来控制在fail_timeout的时间内nginx怎样认为upstream中的某个server是失效的,某个server连接失败了max_fails次,

nginx会认为该server不⼯作了。同时,在接下来的 fail_timeout时间内,nginx不再将请求分发给失效的server。如果不设置这2个参

数,fail_timeout默认为10smax_fails默认为1。就是说,只要某个server失效⼀次,则在接下来的10s内,就不会分发请求到该server

调整缓存区⼤⼩

有时因为http请求和响应的数据量⽐较⼤,导致超出nginx默认缓存⽽返回504这类情况,可以适当调整各类缓冲区⼤⼩来满⾜实际需求:

fastcgi_buffers 8 128k;

client_max_body_size 10m;

client_body_buffer_size 128k;

proxy_buffer_size 4k;

proxy_buffers 32 4k;

proxy_busy_buffers_size 64k;