域名注册 网站制作
您现在的位置:首页 >> 常见问题 >> 内容

站点突然被大量抓取,是否可以通过闭站工具拒绝百度蜘蛛访问

时间:2014/12/26 11:28:15 点击:442

摘要:站点突然被大量抓取,是否可以通过闭站工具拒绝百度蜘蛛访问 具体说:我们的站点突然被大量抓取,包括百度蜘蛛和其它不知名蜘蛛,我们不想做UA封禁和IP封禁,这种情况下是否可以使用闭站工具暂时拒绝百度蜘蛛...

站点突然被大量抓取,是否可以通过闭站工具拒绝百度蜘蛛访问

具体说:我们的站点突然被大量抓取,包括百度蜘蛛和其它不知名蜘蛛,我们不想做UA封禁IP封禁,这种情况下是否可以使用闭站工具暂时拒绝百度蜘蛛?

答:闭站保护没有这个功能,你希望达到的效果是:不让蜘蛛访问;但用户可以正常访问。但闭站保护工具的要求是:蜘蛛和用户都不能访问。

转载请保留原文地址: https://www.k5118.com/show-374.html

责编:王丽 作者:不详 来源:网络