学习笔记

您现在的位置是:首页 > 技术教程 > 正文

技术教程

防止百度google爬死服务器

weizhe2021-05-20技术教程1976
#防止百度google爬死服务器

#防止百度google爬死服务器

acl AntiBaidu req_header User-Agent Baiduspider
http_access deny AntiBaidu

acl AntiGoogle req_header User-Agent Googlebot
http_access deny AntiGoogle


这些设置会影响到百度的收录,也可以用以下方法解决

maxconn ACL 指来自客户 IP 地址的大量同时连接。某些 squid 管理员发现这是个有用的方法,用以阻止用户滥用代理或者消耗过多资源。
maxconn ACL 在请求超过指定的数量时,会匹配这个请求。因为这个理由,你应该仅仅在 deny 规则里使用 maxconn。
在配置文件加入:

acl OverConnLimit maxconn 4
http_access deny OverConnLimit
在该情况中,squid 允许来自每个 IP 地址的同时连接数最大为 4 个。当某个客户发起第五个连接时,OverConnLimit ACL 被匹配,http_access 规则拒绝该请求。

发表评论

评论列表

  • 这篇文章还没有收到评论,赶紧来抢沙发吧~