蜘蛛抓取有好多动态链接是否有影响？要怎么处
seo优化 2022-07-27 11:52www.1681989.comseo排名
我的网站显示的蜘蛛抓取，有好多动态链接是否有影响？是否需要处理。该如何处理?
11-29.123.
如果不是自己网站本身实际存在的url，很可能是网站由于被人刷，导致的。
对应这些动态链接，可以在robots文件中，写一个屏蔽抓取动态链接的语法。
User-agent:
Disallow: /?
更详细的robots设置方法，可以看下面链接课程
https://ke.seowhy./play/9492.html
推火专家搜外网
上一篇：什么是模拟蜘蛛抓取
下一篇：如何查看网站被搜索引擎蜘蛛抓取的次数