遭遇腾讯SOSO爬虫攻击

晚间老婆公司一台服务器非常慢,页面几乎打不开,CPU占用率也非常高,还以为收到攻击呢,晚间正是Google、baidu搜索网站的时间,网站如此慢肯定不行的,通过网关的防火墙查看到如此深夜来自于58.61.164.142、58.61.164.140、58.61.164.138这三个IP访问量奇高无比而且频率非常快,Google一下发现是SOSO的爬虫,以前见识过baidu的爬虫扒网站速度奇快导致流量很高、网站无反应,谁知道腾讯这个烂公司的无良程序员也写出这种攻击式的爬虫程序(它速度快了,其它爬虫就慢了,例如baidu、google)。

设置一个条件封锁所有来自58.61.164.*的流量,顿时服务器恢复正常。对应iptable语句为:
iptables -A FORWARD -j DROP -p tcp -s 58.61.164.1/24

apache的.htaccess文件设置如下也可:
order allow,deny
deny from 58.61.164.
allow from all

如果只需要封锁soso爬虫的5个ip,可以用58.61.164.136/29。

最奇怪的是soso上面写着搜索结果有Google提供,怎么自己也弄个爬虫呢,太变态了。有没有一个网站列出所有这些无良爬虫的IP哦。

不知道做一个这样的网站会不会被干掉。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值