近期很多网站出现抓取异常的原因及解决方法
2017年一月份和二月份当中,很多的网站出现了抓取异常的现象,而网站抓取异常的主要原因,百度站长平台给出了一个公告。,很多朋友的网站抓取异常的原因并非如此,而是有其他原因造成的。今天推火专家seo博客转载了这篇标题为《关于封禁百度抓取UA的公告》,正文部分如下
近期发现部分网站出现抓取异常情况,主要问题是网站误封了百度UA。为了网站更好获得搜索展现,请各位站长按照推火网以下UA进行排查,避免出现误封问题!
移动 UA
Mozilla/5.0 (Lux;u;Android 4.2.2;zh-;) AppleWebKit/534.46(KHTML,like Gecko) Version/5.1 Mobile Safari/10600.6.3 (patible;Baiduspider/2.0; +http://.baidu./search/spider.html)
PC UA
Mozilla/5.0 (patible; Baiduspider/2.0; +http://.baidu./search/spider.html)
手百UA
Mozilla/5.0 (iPhone; CPU iPhone OS 10_0_2 likeMac OS X) AppleWebKit/602.1.50 (KHTML, like Gecko) Mobile/14A456baiduboxapp/0_0.5.2.8_enohpi_4331_057/2.0.01_2C2%2
57enohPi/1099a/804F3530265F63292098DF3741E4B6272CFA77AE4FCIJOOERTE/1