网站优化从开始设计网站地图，网站地图优化不是为了迎合搜索引擎的抓取，开始的目的是方便用户的浏览设置，尤其是在许多大型门户网站，因为页面内容是不同的，具体的分类，具有良好的用户体验，可以迅速从主页的内容页面，你需要明确建立网站地图结构模型。而网站良好的用户体验也更容易吸引搜索引擎的注意。
1、制作网站地图
从上面我们了解到，网站地图对于提高网站的包容性有很好的效果。在大多数网站中，往往有大量的内页没有被包括在内，因为搜索引擎很难抓取内页的内容，所以它们不能自然的被包括在内。另一方面，网站地图将这些页面放在搜索引擎的爬虫程序前面，引导它们逐一爬行，从而提高网站的整体收集率。因此，网站地图对于网站的收录和完善是不可少的，并且做出了很大的贡献。
搜索引擎的工作机制是，蜘蛛爬虫每天都会到互联网上抓取网站的新页面内容，从而对网站的页面进行排名。和其他一些因素会让蜘蛛爬虫很难完成爬行网站所有页面，网站地图是很好的解决问题，蜘蛛爬行网站首先机器人可以访问文件，机器人在网站地址将首先引导蜘蛛爬行站点地图，和网站地图蜘蛛爬取的了良好的道路，这样你就可以获取更全面的蜘蛛爬虫网页内容，从而提高网站内容。
2、添加网站地图
首先，蜘蛛抓取内容从上到下，所以我们通常把重要参数的URL在网站页面的顶部，底部的网站地图数据，所以它是方便蜘蛛爬行网站，突出网站的主要内容，并且不会浪费蜘蛛抓取内容的机会。
其次，定期更新网站地图对蜘蛛爬行识别效果有很好的提升。同时，网站地图应采用标准的w3c格式的网站地图，并应采用分页的形式，并保持网站地图的整洁统一，不出现不必要的重复衔接，从而大限度地发挥网站地图的效果。
此外，一些页面的网站经常出现一些特殊符号混合站点地图的URL，站点地图和不能充分认识特殊符号，所以有些页面不是主要内容的反映，URL应该删除，这样蜘蛛抓取内容更关注网站的主要内容。
