Chinaunix首页 | 论坛 | 博客
  • 博客访问: 312398
  • 博文数量: 97
  • 博客积分: 3145
  • 博客等级: 中校
  • 技术积分: 1890
  • 用 户 组: 普通用户
  • 注册时间: 2008-12-15 12:52
文章分类
文章存档

2016年(8)

2015年(3)

2014年(1)

2013年(5)

2012年(4)

2011年(9)

2010年(12)

2009年(43)

2008年(12)

我的朋友

发布时间:2016-08-18 12:08:40

  问题:       最近发现很多大并发爬我们网站部分接口的爬虫,导致经常性带宽异常和服务异常,为了暂时性偷懒,写脚本自动封禁这些IP。 思路和方法:       经过日志排查,发现这些爬虫IP不多,但是并发很大,基本在10-20并发之间,正常的单IP请求几乎很少有10并发以.........【阅读全文】

阅读(8641) | 评论(0) | 转发(0)
给主人留下些什么吧!~~
留言热议
请登录后留言。

登录 注册