问题发现
最近在做文件解析服务的压测,发现jmeter 基本有所有的错误反馈都是504,大概有1%左右的请求报504。由于文件解析服务耗时相对比较长,所以导致等待超时。
分析
nginx访问出现504 Gateway Time-out,一般是由于程序执行时间过长导致响应超时,例如程序需要执行90秒,而nginx最大响应等待时间为30秒,这样就会出现超时。
通常有以下几种情况导致
- 程序在处理大量数据,导致等待超时。
- 程序中调用外部请求,而外部请求响应超时。
- 连接数据库失败而没有停止,死循环重新连。
出现这种情况,我们可以先优化程序,缩短执行时间。假如是文件解析这种本身就耗时比较长的任务,则可以调大nginx超时限制的参数,使程序可以正常执行。
修改nginx配置
nginx.conf中,设置以下几个参数,增加超时时间
http {
...
fastcgi_connect_timeout 3000;
fastcgi_send_timeout 3000;
fastcgi_read_timeout 3000;
...
}
fastcgi_connect_timeoutfastcgi连接超时时间,默认60秒
fastcgi_send_timeoutnginx 进程向 fastcgi 进程发送请求过程的超时时间,默认值60秒
fastcgi_read_timeoutfastcgi 进程向 nginx 进程发送输出过程的超时时间,默认值60秒
server {
listen 8888;
location / {
proxy_pass http://pdfs;
proxy_connect_timeout 18000;
proxy_send_timeout 18000;
proxy_read_timeout 18000;
}
}
- proxy_connect_timeout 1800s;#nginx跟后端服务器连接超时时间(代理连接超时)
- proxy_send_timeout 1800s;#后端服务器数据回传时间(代理发送超时)
- proxy_read_timeout 1800s;#连接成功后,后端服务器响应时间(代理接收超时)