Wention 发表于 2016-3-18 15:49:22

军哥大神求组，网站被蜘蛛爬死，如何用useragent屏蔽 指...

RT，不知道是不是被蜘蛛爬死，我传一下日志，大神麻烦看下，谢谢了

licess 发表于 2016-3-18 21:25:23

通过useragent 把你觉得非常消耗资源的蜘蛛屏蔽了就行
nginx上的设置

      if ($http_user_agent ~* abcde|fghijk|lmno) {
            return 444;
      }
页: [1]
查看完整版本: 军哥大神求组，网站被蜘蛛爬死，如何用useragent屏蔽 指...