Nginx反向代理DNS缓存问题

冷不防 2022-10-09 00:44 336阅读 0赞

## Nginx反向代理DNS缓存问题 ##

### 背景 ###

内网环境通过`Nginx`反向代理访问外网，`Nginx`配置完成，启动后的一段时间内接口访问正常，一段时间之后，访问拒绝。`./nginx -s reload` 重新加载，或者`./nginx -s stop`，`./nginx -c nginx.conf`重新启动后，接口访问正常，一段时间后又访问拒绝。

### 问题分析 ###

内网环境通过代理访问外网，由于`DNS`缓存`IP`地址信息，服务端（高德相关接口）`IP`切换，或者服务动态上下线，导致`DNS`缓存的IP地址不可用，从而访问拒绝 `404`。

### 代理服务器网络排查 ###

> curl -H “Content-Type: application/json” -X POST -d ‘\{“origins”:“118.2316,32.5033”,“destination”:“118.2249,32.4972”,“output”:“JSON”,“key”:“dd310ade0c3789edf5d066bfc89f3383”,“type”:“0”\}’ “https://restapi.amap.com/v3/distance?origins=118.2316,32.5033&destination=118.2249,32.4972&output=JSON&key=dd310ade0c3789edf5d066bfc89f3383&type=0”

正常响应

> \{“info”:“INVALID\_USER\_IP”,“infocode”:“10005”,“status”:“0”,“sec\_code\_debug”:“d41d8cd98f00b204e9800998ecf8427e”,“key”:“dd310ade0c3789edf5d066bfc89f3383”,“sec\_code”:“d41d8cd98f00b204e9800998ecf8427e”\}

###### 结论：代理服务器网络策略已开通，并且验证无误 ######

### 查询 Nginx日志 ###

`access.log`  
日志打印其他代理接口访问正常  
`error.log`  
访问拒绝

> \[error\] 30749\#0: 23011 connection() failed (111: connection refused) while connecting to upstream,client 10.0.xxx.xxx,server: , request:“POST /v3/geocode/geo?address=xxxxxxxxxxxxxx HTTP/1.1”, upstream: "  
> https://106.11.43.113:443/v3/geocode/geo?address=xxxxx&output=xxxxxx&key=xxxxx", host: “10.4.xx.xxx:10055”

###### 结论：域名解析到的IP访问拒绝 ######

> 正在连接106.11.43.113…无法打开到主机的连接。 在端口 443: 连接失败

### 问题处理 ###

描述：现在已经明确网络没有问题，代理正常启动，接口联通正常；出现`404`的原因在于域名解析到的`IP`不可用。  
解决：`Nginx`所使用的的`DNS`缓存时间是否可以调整，或者说失败到达一定次数之后尝试解析新的`IP`

#### 方案一 ####

1.  默认`nginx`会通过操作系统设置的`DNS`服务器(`/etc/resolv.conf`)去解析域名
2.  `nginx`还可以通过自身设置DNS服务器，而不用去找操作系统的`DNS`
3.  `resolver` 配置

server {
           listen      10055;
           server_name localhost;
           resolver 114.114.114.114 8.8.8.8 valid=1800s;
           resolver_timeout 3s;
           set $amap"restapi.amap.com;
           location / {
              proxy_pass http://$amap;
              proxy_buffers 256 4k;
              proxy_max_temp_file_size 0k;
              proxy_connect_timeout 30;
              proxy_send_timeout 60;
              proxy_read_timeout 60;
              proxy_next_upstream error timeout invalid_header http_502;
           }
       }

#### 方案二 ####

1.  `upstream` 的`max_fails` 和 `fail_timeout`参数，配置失败转移

upstream amap{
        least_conn;
        server restapi.amap.com:443 max_fails=3 fail_timeout=10s;
    }
    
    server {
        location / {
            proxy_pass http://amap;
            proxy_buffers 256 4k;
            proxy_max_temp_file_size 0k;
            proxy_connect_timeout 30;
            proxy_send_timeout 60;
            proxy_read_timeout 60;
            proxy_next_upstream error timeout invalid_header http_502;
        }
    }

### 总结 ###

以上两种均在不同场景下解决`Nginx`本地域名解析缓存IP，导致访问拒绝的问题。