我收到来自Mediapartners-Google crowler的成千上万的垃圾邮件请求,这些页面不存在,请求是公开的。几乎每秒钟来两次。
这会影响我的网站和……
将Mediapartners-Google添加到Robots.txt并禁止它
在robots.txt中添加这两行
User-agent: Mediapartners-Google Disallow: /