站点突然被大量抓取,是否可以通过闭站工具拒

seo优化 2018-10-28 11:52www.1681989.comseo排名
站点突然被大量抓取,是否可以通过闭站工具拒绝百度蜘蛛访问
  具体说我们的站点突然被大量抓取,包括百度蜘蛛和其它不知名蜘蛛,我们不想做UA封禁和IP封禁,这种情况下是否可以使用闭站工具暂时拒绝百度蜘蛛?
  答闭站保护没有这个功能,你希望达到的效果是不让蜘蛛访问;但用户可以正常访问。但闭站保护工具的要求是蜘蛛和用户都不能访问。

Copyright © 2016-2025 www.1681989.com 推火网 版权所有 Power by