屏蔽了几个国外蜘蛛UA之后CPU瞬间下降80%

net909

@Ta 2020-12-20 879点击

最近几天彩虹云主机香港节点，CPU一直很高，mysql占用大概有70～90%，（CPU是E5的x2，总共24核）。

然而并没有攻击，各种排查，最后通过分析日志发现是有个网站，被一堆蜘蛛抓取，特别频繁，大概1秒好几次，后来发现不只是这一个网站。

然后我就把以下几个蜘蛛的UA在kangle请求控制屏蔽了一下，服务器CPU总算占用不高了
AhrefsBot
DotBot
SemrushBot
MJ12bot

回复列表(4)

1

yao

@Ta / 2020-12-20

http://www.1kmb.com
2

无道

@Ta / 2020-12-20

第二三个太眼熟了，我也遇到过
红米Note7 高配版(黑色)
3

水木易安

@Ta / 2020-12-21

流量也直下90%
小米MIX2s(白)
4

cnhong

@Ta / 2020-12-21

也许有些还是假蜘蛛
荣耀9（奶奶灰）

添加新回复

回复需要登录。

[聊天-此处没基佬] 穴儿：@方爷，恭喜出狱 -喜欢就啪啪啪啊表白有什么用- blog:LDXW.TOP