网站地图，很多网站的连接层次比较深，爬虫很难抓取到，站点地图可以方便爬虫抓取网站页面，通过抓取网站页面，清晰了解网站的架构，网站地图一般存放在根目录下并命名sitemap，为爬虫指路，增加网站重要内容页面的收录。
sitemap一般分为三种表现形式，sitamp.xml、sitemap.txt、sitemap.html，站点地图包含了该网站的所有连接，一般提交给爬虫去爬，我们最常见的就是sitemap.xml地图。
二、如何利用sitemap进行收录的增加
1、网站地图建设为搜索引擎提供一些链接，链接指向层级深、蜘蛛难以到达的页面上。
2、sitemap的建设能为蜘蛛提供整个网站的链接，用于搜索引擎蜘蛛的抓取，蜘蛛顺着sitemap中的链接进行抓取内容，所以我们要定时的更新sitemap地图，保证网站中的链接不丢失。
3、网站首页中存在一个sitemap网站地图链接地址，可以点击，可以让蜘蛛进行抓取的，有利于蜘蛛的多次抓取页面。
4、设置一个404页面，在404页面中添加返回首页的链接；搜索引擎蜘蛛以及用户也好，试图访问网站所在域内并不存在的URL，那么这个访问者就会被转到“无法找到文件”的错误页面，而网站地图可以作为该页面的“准”内容。
三、sitemap网站地图怎么建设生成
网上有很多sitemap地图生成的方法，比如在线生成、软件生成等，sitemap地图可以提交给各大搜索引擎，从而使搜索引擎更好的对网站页面进行收录，我们也可以通过robots.txt来告诉搜索引擎地图的位置，让搜索引擎蜘蛛优先抓取sitemap地图
四、网站地图文件上传到哪
网站地图上传至网站根目录下，最关键是把网站地图链接地址加入在robots文件中以及做好网站地图在首页中要体现出来sitemap的链接地址。
