某段时间我的网站做大幅调整 导致百度蜘蛛抓取压力非常大 我们想先拒绝百度蜘蛛访问 又不能进行封禁 该
某段时间我的网站做大幅调整,导致百度蜘蛛抓取压力非常大,我们想先拒绝百度蜘蛛访问,又不能进行封禁,该怎么办?
参考解答
这种情况使用502Bad Gateway就可以
相似问题
关于大站更换域名 seo涉及到的工作有哪些?
关于大站更换域名,seo涉及到的工作有哪些?
网站用户每天发同样的信息 为了防止被搜索引擎判为重复该如何处理?
网站用户每天发同样的信息,为了防止被搜索引擎判为重复该如何处理?
网站404出现很多压缩包页面该如何处理?
网站404出现很多压缩包页面该如何处理?
目录和二级域名哪个好?
目录和二级域名哪个好?
什么是URL重定向?
什么是URL重定向?
