网站SEO检查-网站地图sitemap和robots文件

背景：对于SEO从业者来说，当入职某个企业并负责一个网站的搜索引擎优化时，第一步就是对网站的SEO检查，查看网站是否设置sitemap文件和robots文件，如果没有这些文件我们该如何设置和操作呢？进入某个企业，负责网站SEO的项目，对于一个已经完工上线的网站，seo从业者首先要做的就是对该网站作检查，查看网站是否符合优化基础，是否已经做过SEO的相关设置，并查看其设置能否符合要求，本文就简要介绍网站SEO检查中比较基础的sitemap地图和robots文件。

sitemap网站地图

sitemap网站地图的意义：建站公司设置的网站地图一般是html格式的静态列表页面，其作用主要是方便浏览者查看网站的主要内容并作出归类和引导，而对于一个SEO从业者来说，我们所说的网站地图是服务搜索引擎蜘蛛或者爬虫的。Google、雅虎、和微软都支持一个被称为xml网站地图（xml Sitemaps）的协议，而百度Sitemap是指百度支持的收录标准，在原有协议上做出了扩展。百度sitemap的作用是通过Sitemap告诉百度蜘蛛全面的站点链接，优化自己的网站。百度Sitemap分为三种格式：txt文本格式、xml格式、Sitemap索引格式。这些对应的sitemap可以更好的向搜索引擎展示站内链接，也更好的给予蜘蛛爬虫抓取提示，当然并不是说sitemap里面的链接都会被收录，但是SEO本来就是一个细节决定成败，量变产生质变的过程，一个有利的方法都是可取的。

网站sitemap文件的检查：网站地图文件基本放置在根目录中，所以直接在你的网站域名后添加“/sitemap.xml”或者“sitemap.txt”，就可以知道网站是否建立sitemap地图文件，如下图所示：

如何建立一个sitemap地图文件：在检查的时如果没有发现网站地图文件，咱们就得建立一个。如果网站内链不多可以一条一条编辑，具体编辑方法这里不做赘述，因为枭帅也不推荐，很容易出错，枭帅建议使用第三方sitemap地图制作软件，比如超人气的sitemapx,或者老站长常用的爱站SEO工具，傻瓜式操作，基本默认就可以。下面以爱站SEO工具来介绍，不限定，看个人爱好。进入工具包选择网站地图如图所示，添加分类和域名，这一步可以默认选项；

第二步则是XML设置，建议权重分配以0.1逐级递减，每页最大网页数按照自己需求设定，修改频率尽量符合你的网站更新频率即可；

第三步则是网站robots文件设置，具体规则可点击查询，此工具包在设置网站地图时则顺带添加了这个文件，具体的作用和编辑方法后续介绍，最后高级设置对于新手用不着，点击抓爬，抓爬完成后打开其文件目录，将所有文件上传至网站根目录即可，注意文件目录中sitemap.xsl文网站地图的样式文件，也要一并上传，否则会出现打开空白或乱码的情况。

网站robots文件

网站地图文件是方便搜索引擎查询网站，为收录提供便利，那么robot.txt文件就类似定义搜索引擎抓爬规则的协议。robots.txt是搜索引擎中访问网站的时候要查看的第一个文件。robots.txt文件告诉蜘蛛程序在服务器上什么文件是可以被查看的。那么问题来了，哪些文件或者目录是不希望搜索引擎抓取和访问的呢？网站是否包含robots.txt文件查看方法和网站地图方法一致，在域名后添加“/robots.txt”。在你网站的FTP中，哪些网页文件是应该定义不被访问的呢？比如网站后台登录地址,JS代码文件夹,插件或者图片文件夹，再或者任何你不需要搜索引擎访问的文件和文件夹，设置方法和规则上面已经介绍了，如果不清楚可以默认该文件，后期会陆续更新具体的设置方法和协议书写规则。

此篇文章适用于新手接触到网站SEO基础检查，如果有任何疑问或者建议可在下方留言，枭帅会在后期更新最详细的操作方法，并尽量解答相关的疑问。

转载请备注：“转自《网站SEO检查-网站地图sitemap和robots文件》-枭帅SEO百科 | 互联网营销知识的殿堂”