健康检查 100% 失败但服务正常 | 探针源 IP 怎么查

陆零云 8 0
凌晨两点收到告警,负载均衡把八台后端全部摘除,业务整体 502 持续四分钟。登上去 curl 本机 8080,返回 200,进程和端口都正常。 先看健康检查的失败原因,控制台只写连接超时,100% 失败。在机器上抓包,探针源地址是 100.64.3.21,目标 8080,SYN 进来了,SYN-ACK 也回了,之后探针又发一次 SYN,像是没收到回包。 查 iptables,INPUT 链只放行 10.0.0.0/8 和几个固定地址,100.64 这段不在...

内网访问自家域名回环 3.2 秒超时 | hairpin NAT 怎么确认

陆零云 35 0
内网办公网打开自家官网一直转圈,三秒多报超时。同一时间外网访问正常,从办公网 curl 公网 IP 也是 3.2 秒超时,说明问题只出在内网到自家公网地址这一段。 第一反应是负载均衡没放行内网网段。查 ACL,10.10.0.0/16 整段都在白名单里,没问题。在网关两侧同时抓包,内网侧看到 SYN 出去,公网侧只有 DNAT 之后的那一份,回包一份都没有。 到这一步基本能定性,是 NAT 回环没做完整。请求被 DNAT 到内网服务器,服务器看到源地址是内...

FTP 被动模式报 425 连不上 nf_nat_ftp 模块怎么加载

陆零云 33 0
内网一台 FTP 服务器经 iptables 做 SNAT 出去,内网访问 21 端口一切正常。外网同事登录也能成功,一执行 ls 就卡住,十几秒后报 425 Failed to establish connection。 看服务端日志,PASV 命令返回的是 227 Entering Passive Mode,后面跟着 192.168.30.21 和一个随机端口。这是内网地址,外网客户端拿到之后当然连不上。 第一反应是让客户端切主动模式。结果客户端办公网...

ping 通但网页一直打不开 MSS clamping 和 MTU 怎么查

陆零云 49 0
现象 服务器能 ping 通网关,也能 ping 通 8.8.8.8,延迟正常,但访问 HTTPS 页面一直转圈,curl -v 停在 TLS handshake 之后没有下文。同机房的另一台机器却正常,SSH 登录偶尔也卡在输入密码之后,小流量命令没问题,传文件就断。 原因 链路中间存在 PPPoE、VPN 或隧道,实际可用 MTU 小于 1500,大包被丢弃,而告知发送方减小分片的 ICMP 报文又被安全策略拦掉,于是发送端一直按 1500 发包。表现...

iptables 加了一条 DROP 443 规则后业务不通 计数器怎么查

陆零云 36 0
现象 为了拦掉某段扫描流量,在 INPUT 链上追加了一条针对 443 端口的 DROP 规则,结果正常用户的 HTTPS 请求也全部超时。规则看起来只匹配了一个源网段,但 telnet 443 从任何地方都连不上,服务本身并没有停。 原因 规则顺序决定一切。iptables 按顺序匹配,前面若有一条更宽泛的 ACCEPT 或 DROP,后面的规则永远轮不到;反过来,新加的 DROP 如果放在了 ACCEPT 之前,就会把所有 443 流量一起拦掉。另一个...