介绍:7080SEO承接网站建设、网站优化外包服务、关键词快速排名、整站优化、长尾关键词优化等SEO排名,专业研究百度搜索引擎优化的SEO技术团队!有关网站建设、网站优化业务合作。

Robots和Sitemap该怎么设置才更有利于排名

SEO知识 7080SEO团队 733浏览
Robots和Sitemap该怎么设置才更有利于排名

当网站做好准备开始优化以后,第一件要准备的就是面向搜索引擎的内部优化了,Robots和Sitemap都肩负了重要的作用,Robots用来告诉蜘蛛该爬行哪些页面不该爬行哪些页面,就像公园的路牌指示标,告诉搜索引擎哪条路可以走,哪条路不可以走。而Sitemap更像是公园的地图,告诉搜索引擎路线到底该怎么走。那么到底该怎么设置和优化Robots和Sitemap文件才能让搜索引擎的蜘蛛更喜欢你的网站,希望你看完这篇文章,有一个更好的判断。

什么是Robots.txt文件?

搜索引擎使用spider程序自动访问互联网上的网页并获取网页信息。spider在访问一个网站时,会首先会检查该网站的根域下是否有一个叫做 robots.txt的纯文本文件,这个文件用于指定spider在您网站上的抓取范围。您可以在您的网站中创建一个robots.txt,在文件中声明 该网站中不想被搜索引擎收录的部分或者指定搜索引擎只收录特定的部分。

百度站长平台关于Robots的指导:http://zhanzhang.baidu.com/wiki/44

对于需要禁止百度搜索引擎的蜘蛛抓取的网页可以写在Robots里,这样网页就不会在搜索结果里出现,比如网站的后台地址以及程序目录等,但是,一般情况下并不建议为正在进行优化的网站设计Robots,因为这样可能会产生搜索引擎抓取不力,甚至网页快照有缺失的现象。

什么是Sitemap.xml文件?

Sitemap可方便网站管理员通知搜索引擎他们网站上有哪些可供抓取的网页。最简单的 Sitemap 形式,就是XML文件,在其中列出网站中的网址以及关于每个网址的其他元数据(上次更新的时间、更改的频率以及相对于网站上其他网址的重要程度为何等),以便搜索引擎可以更加智能地抓取网站。

百度站长平台关于Sitemap的指导:http://zhanzhang.baidu.com/wiki/93

建议正在优化的网站都要合理设置Sitemap文件,这样可以让搜索引擎更为准确和快速的抓取网站,Sitemap列表中可以以 网站首页-网站目录-网站页面 为区分顺序设置,网站首页的changefreq建议设置为always,priority建议设置为1.0,网站栏目的changefreq建议设置为daily,priority建议设置为0.9,网站页面的changefreq建议设置为weekly,priority建议设置为0.8。

正确的设置Robots和Sitemap文件可以让搜索引擎更透彻更清晰更快速的抓取网站内容,让Robots和Sitemap为百度搜索引擎的蜘蛛指路,照亮你网站的排名!关注7080SEO,干货不停歇!