大量的蜘蛛爬行抓取造成网站访问速度慢(包括恶意的蜘蛛)

标题:大量的蜘蛛爬行抓取造成网站访问速度慢(包括恶意的蜘蛛)

问题现象:网站开启后CPU2-5秒即达到100%使用率,短期内网站可以正常访问,1-2天后网站无法打开,或者打开加载特慢。
网站访问速度慢

原因:大量的蜘蛛爬行抓取造成网站访问速度慢
处理方法:
1、登陆宝塔下载LOG日志
大量的蜘蛛爬行抓取造成网站访问速度慢

2、使用notepad++打开日志信息分析查看
大量的蜘蛛爬行抓取造成网站访问速度慢

3、Notepad++打开了以后发现大量的同IP段的访问。为了更直观的处理问题,将访问日志,全选后复制到excel表格内。
大量的蜘蛛爬行抓取造成网站访问速度慢

4、新建一例使用excel函数=MID(B1,1,10)提取后一单元格内的1-10数据。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值