黑帽联盟

标题: 百度Spider新增渲染抓取UA [打印本页]

作者: heimao    时间: 2017-3-26 16:19
标题: 百度Spider新增渲染抓取UA

为了给搜索用户更好的体验、对站点实现更好地索引和呈现,百度搜索需要访问网站的CSS、Javascript和图片信息,以便更精准地理解页面内容,实现搜索结果最优排名,百度搜索会全面启用最新UA来访问站点的上述资源。请尽量不要对UA进行封禁,以免造成不可逆转的损失。


最新UA如下:


PC:Mozilla/5.0 (compatible; Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)


移动:Mozilla/5.0 (iPhone; CPU iPhone OS 9_1 like Mac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko) Version/9.0 Mobile/13B143 Safari/601.1 (compatible; Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)


以上内容如果有大量的UA标识抓取你的网站,不要封禁哈,不然你的网站就那个什么了

转载自:百度站长平台

作者: 583558386    时间: 2017-4-27 23:16
学习了啊  真厉害管理




欢迎光临 黑帽联盟 (https://bbs.cnblackhat.com/) Powered by Discuz! X2.5