香港服务器开了防御,访问为什么变慢了?
香港服务器开了DDoS防护以后,不少人会碰到同一个现象:之前从广州、上海ping过去三四十毫秒,换成高防之后变成六七十,有时候打开网页还要先转一下圈。第一反应往往是“防御把速度拖慢了”。这个说法不算错,但太笼统。防护本身不会让数据包跑得更慢,让它变慢的是防护带来的几样变化:流量走的路变了,路上多了处理环节,被打的时候链路变挤了,还有一部分是自己的配置造成的。分清楚是哪一种,才知道该去找机房,还是该改自己的设置。
流量绕了路
影响最大的通常是路径。高防的基本做法是先把流量牵引到清洗节点,过滤掉攻击包,再把干净的流量送回服务器。清洗节点如果就在香港本地,多出来的只是几跳设备转发,一般是个位数毫秒。麻烦在于清洗点不在香港的时候。
光在光纤里传输,往返每100公里大约要1毫秒。香港到新加坡两千多公里,流量要是被牵过去洗一遍再回来,什么都不做就多出二三十毫秒;牵到美国西海岸,多出来的是一百毫秒以上。这部分是物理距离决定的,靠调参数省不掉。
所以看高防产品,防护峰值之外,更该问清楚的是:大陆用户的流量平时在哪里被处理,被攻击时又被牵到哪里。用全球任播(Anycast)网络做清洗的方案,攻击流量可以在离攻击源最近的节点就地拦下,这是它扛大流量的优势;但正常用户会被引到哪个节点,取决于他所在运营商的路由,不同地区、不同运营商的结果可能不一样。这一点没有统一答案,只能实测。
还有一种方案是平时直连、被打了才牵引。没有攻击时延迟和普通服务器差不多,攻击一来路由切到清洗网络,延迟跳一下;攻击结束切回来,又跳一下。路由切换的那几秒到几十秒里,还可能伴随短暂丢包。用户反馈的“刚才突然卡了一下”,有不少就是这个原因。
回程线路,往往比去程更关键
ping值是一来一回的总时间。大陆访问香港,很多人只盯着去程,其实回程走什么线路影响更大。普通香港服务器可以走CN2 GIA、CMI、联通精品网这类线路回国,开了高防以后,回国流量有可能改从清洗网络出口出去,回程线路也就跟着变了。如果变成普通国际线路,白天可能看不出差别,晚高峰的延迟和丢包就会拉开。
另外,高防套餐里的回国精品带宽,通常比国际带宽小得多。攻击流量被滤掉之后,干净的流量照样要挤这条线。平时够用,到了促销、开服,或者被打期间重传增多的时候,带宽一跑满,数据包就开始排队,延迟随之上升。这和防御强不强没有关系,是带宽估小了。选型时按大陆用户的高峰流量估一下精品带宽,比事后补救省事。
被打的时候:链路拥挤、丢包、重传
即使清洗做得很好,攻击流量在到达清洗节点之前,也要先经过运营商和机房的上联链路。大流量攻击会把其中某些链路挤满,正常的数据包只能跟着排队,甚至被丢掉。
丢包对体验的影响,常常比延迟数字大得多。TCP丢了一个包,要等重复确认或者超时才重传,一次重传就可能多出几百毫秒。所以攻击期间经常出现这种情况:ping值只涨了十几毫秒,网页却慢了好几秒。看监控的时候,丢包率比平均延迟更值得盯。
再往上一步,是攻击超过了套餐的防护值。很多机房为了保护整个网络,会直接把被攻击的IP黑洞掉,这时候已经不是延迟问题,而是完全访问不了。买高防之前,最好问清楚超出防护值之后怎么处理:是临时扩容,还是直接黑洞,黑洞多久解封。
CC防护多出来的那几次验证
DDoS清洗主要过滤网络层的流量,对延迟的影响相对固定。CC防护不一样,它要判断每个HTTP请求是不是真人发的,常用手段是JS验证、Cookie校验、跳转和验证码。这些验证不会抬高ping值,但会给首次访问多加一到几个往返,用户的感受就是“打开前多转了一下”。规则开得越严,被拦下来做验证的正常用户越多。
按单个IP限制请求频率时要格外小心。打开一个网页,浏览器会同时请求几十个图片、脚本和接口,每秒十几次的上限很容易误伤正常访客。大陆的移动网络有大量用户共用同一个出口IP,公司网络也是如此,阈值卡得太死,会让一批人同时被拦。比较稳妥的做法是先观察业务高峰时正常用户的单IP请求量,在这个基础上留出余量再设阈值;静态资源交给CDN,限频规则只加在登录、搜索、下单这类真正容易被刷的接口上。
有些变慢,其实是服务器自己的问题
DDoS清洗在机房上游完成,不占用服务器的CPU。但如果CC防护是在服务器本机做的,比如宝塔防火墙、Nginx限流模块、fail2ban,这些规则就要在本机运行,攻击期间CPU和连接数一起往上走,正常请求也跟着变慢,配置偏低的机器尤其明显。能把CC防护前移到上游清洗或WAF的,尽量前移。
防火墙规则的数量,影响通常没有想象中大。iptables是逐条匹配的,几十上百条基本感觉不到;但如果封了几万个IP、每个IP一条规则,开销就上来了,这时候换成ipset按集合匹配就能解决。
用高防IP保护源站时,还要留意回源方式。流量先到高防节点,再转发回源站,如果用GRE隧道回源,封装会让数据包变大,MTU没调好就容易出现分片或丢包,表现为小请求正常、大文件和HTTPS握手偶尔卡住。源站和高防节点最好在同一个地区,离得远了,回源这一段又会把延迟加回去。
怎么判断是哪一种原因
先别只看ping。不少清洗网络会对ICMP限速或降低优先级,ping值高不一定代表业务慢。用tcping测业务端口,用mtr看每一跳的延迟和丢包,用curl看首字节时间(TTFB),三个数放在一起看更准。
然后对比有攻击和没攻击的时段。没有攻击时延迟就偏高,问题多半在路径或回程线路;只在攻击时变高,重点看链路拥塞和丢包;ping正常但网页慢,就去查CC验证规则和服务器负载。
测试最好从你的用户所在地发起。北京电信、广州移动、上海联通测出来的结果可能完全不同,用多地拨测工具测一轮,比在自己办公室测一次可靠得多。最后,把mtr的结果发给机房。丢包从哪一跳开始,机房一看就能判断是上联、清洗节点还是服务器本身的问题。
至于增加多少算正常,取决于架构,没有一个通用数字。清洗在香港本地、回程线路不变的情况下,平时多出几毫秒到十几毫秒比较常见;清洗点在外地,多出几十毫秒是架构决定的,谈不上故障;攻击期间出现短时波动也属正常。如果没有攻击,延迟却比开防护前高出一大截,就值得找服务商要一个说法。
在SellBGP怎么选
SellBGP香港高防服务器是部署在香港机房的独立物理服务器,防护接入Cloudflare的全球清洗网络,攻击流量在边缘节点就近过滤,覆盖L3/L4到L7层。基础防护为10G到50G,可以按需升级。线路是“回国精品带宽+国际带宽”的组合:精品线路走CN2、移动、联通三网直连,承担大陆用户的访问,国际带宽面向海外用户。
前面说过,路径和回程这类问题只有实测才能回答,所以比起看宣传数字,更建议直接测。产品页提供了精品线路和国际线路两个测试IP,可以从你的用户所在的地区和运营商去测延迟、丢包和路由走向;对防护能力有疑问,也可以联系客服申请授权范围内的压力测试。服务器遭到攻击时,后台能看到攻击类型、峰值流量和清洗记录,方便判断某一次变慢到底是不是攻击引起的。
源站已经在别家机房、暂时不打算迁移的,可以先用SellBGP香港高防IP,把访问入口挪到清洗节点后面,源站不要求是SellBGP的机器。按上文的道理,源站最好也放在香港,回源这一段才不会把延迟加回去。
开防御之后慢一点,大多是可以接受的代价;慢了很多,通常能找到一个具体原因可以找出来。先测清楚,再决定是调配置、扩带宽,还是换方案。