2022-06-28 分类: 网站建设
蜘蛛会不会抓取百度推广链接?今日发现百度统计的SEO建议要求修改百度推广链接后面的谷歌分析参数,说是“在静态页面上使用动态参数,会造成spider多次和重复抓取”。
但是推广链接并不是24小时都存在的,百度蜘蛛是否真的会抓取推广链接?
自己解决了。
查看了下百度首页的robots.txt,发现百度禁止了蜘蛛抓取百度……
User-agent: Baiduspider
Disallow: /baidu
Disallow: /s?
所以推广链接是不会被百度蜘蛛抓取到的。
本文题目:百度会不会抓取百度推广链接?
本文地址:/news29/172479.html
成都网站建设公司_创新互联,为您提供营销型网站建设、响应式网站、网站设计、定制网站、虚拟主机、微信公众号
声明:本网站发布的内容(图片、视频和文字)以用户投稿、用户转载内容为主,如果涉及侵权请尽快告知,我们将会在第一时间删除。文章观点不代表本网站立场,如需处理请联系客服。电话:028-86922220;邮箱:631063699@qq.com。内容未经允许不得转载,或转载时需注明来源: 创新互联
猜你还喜欢下面的内容