360搜索对Robots协议的支持
seo优化 2022-07-27 12:20www.1681989.comseo排名
360搜索支持Robots协议的主要命令，推火网以下为具体说明
1. user-agent
360搜索各产品的爬虫user-agent为
- 网页搜索 360Spider
- 图片搜索 360Spider-Image
- 视频搜索 360Spider-Video
2. Allow
站长可通过Allow命令指定建议收录的文件、目录 。
3. Disallow
站长可通过Disallow命令指定不建议收录的文件、目录。
上一篇：Sitemap文件标准格式和大小说明
下一篇：百度移动搜索建站优化白皮书