屏蔽蜘蛛不同情况不同对待

2016-11-02    分类: 网站建设

网站优化就要跟搜索引擎套近乎,因为搜索引擎的智能化并不像人,它们是没有一点人情味在里面的。有些时候我们为了做好网站优化,要适当地屏蔽蜘蛛,成都网站建设小编就来简单介绍一下。
因为网站模板和图片的出现,网站建设就方便的多了,蜘蛛对这些网站是有些排斥的,搜索引擎就会认为你的网站是在作弊,所有想要屏蔽蜘蛛,就要使用images目录,这种目录可以有效的屏蔽蜘蛛。
蜘蛛很好吃,你喂给它东西吃,它是不会有喊饱的,前面分析了蜘蛛饲养要点。如果网站缓存目录中有内容,蜘蛛也是不会放过的。目录里的内容跟网站中的内容是一样的,这样的话,蜘蛛抓取了同样的内容,百度算法也是不会放过你的,这会给网站权重带去影响。为了避免这样的情况发生,建站程序的缓存目录都是不同的,所以每个不同网站的程序要有相应的缓存目录去有效屏蔽蜘蛛。
另外一种酒是CSS目录和RSS页也会让搜索引擎发生错误判断,CSS目录对蜘蛛没什么大的作用,相反抓取完了之后会影响它的判断。这个时候就可以使用robots.txt文件屏蔽。RSS页这种建站程序也是重复的内容,所以也需要屏蔽。
一般来说双页面网站还是比较少的,如果是动态静态双页面,那么网站最好能屏蔽动态页面。网站很多种URL都能指向同一个页面,如果不屏蔽的话,这两个页面就会被抓取,这样的话就是很明显的作弊,所以一定要屏蔽动态页面。

名称栏目:屏蔽蜘蛛不同情况不同对待
网址分享:/news33/58183.html

成都网站建设公司_创新互联,为您提供网站设计标签优化微信小程序响应式网站微信公众号用户体验

广告

声明:本网站发布的内容(图片、视频和文字)以用户投稿、用户转载内容为主,如果涉及侵权请尽快告知,我们将会在第一时间删除。文章观点不代表本网站立场,如需处理请联系客服。电话:028-86922220;邮箱:631063699@qq.com。内容未经允许不得转载,或转载时需注明来源: 创新互联

手机网站建设