评论：蜘蛛爬行经常决定站点的集合。因此，在正常的优化工作中，我们将更加关注IIS日志。我们可以通过观察日志来获取蜘蛛爬行网站的动态，并通过分析蜘蛛动态来监控网站优化的进展。




但是大多数时候，站长会看到他的IIS日志显示蜘蛛爬得很差，尽管他们认为网站优化是完美的，原因是什么
事情必须发生。蜘蛛只是机器人。它们由程序代码组成。他们必须遵守他们的规则来抓取网站。如果有一些网站的陷阱，他们会让蜘蛛爬行受阻，从而导致一系列的问题。什么网站是绊脚石蜘蛛爬行下面我来简单谈谈。

{陷阱1 }：站点地图不正确
网站地图是一个非常有用的网站工具。为用户和蜘蛛，一个完整的、正确的网站地图可以把整个网站的结构，从而更好的浏览和抓取网站。因为一些业主不熟悉的代码，和网站的框架不熟悉，你只是选择了一个坏的权威工具产生一对不完整或不正确的网站地图，最后的结果就是让蜘蛛在爬行，最终失去了；。
# #解决方案：选择一个权威的很好的工具来创建一个网站地图，比如百度网站管理员工具的站长平台工具，如果他们的网站更熟悉，最好能手工制作，并亲自多次测试确保站点地图的正确性和完整性。

{陷阱}：站点上死链接的数量是巨大的。
所谓死链接就是把代码返回到404的错误页面链接，这种链接通常是在网站反转后产生的，或者是域名替换后的站点。死链接的存在对用户体验和蜘蛛爬行非常不利。死链接无疑会阻碍蜘蛛的爬行。当蜘蛛反复遇到这些未出现的死链接时，它们会造成对网站的不信任，最终放弃爬行网站。
# #溶液：
（1）提交一个死链接。使用百度站长平台链；提交工具提交网站链，详情请参考百度站长工具。
（2）重定向或删除死链接。如果死链接的位置不是很重要，它可以重定向到首页。如果位置更重要，数量更多，它可以选择删除死链接，并使用工具删除它们。

{陷阱三}：URL包含太多参数
虽然百度优化指南显示百度搜索引擎也可以包含动态站点，比如谷歌机器人，但是静态URL网站总是比动态URL更强大，因此，如果你的网站像下面的网站，它可能会导致蜘蛛爬行。
解决方案：在# #建站程序的选择，我们必须考虑程序是否支持网站URL静态和维修后的几天要注意网站的URL是静态的，放弃实践包含参数的动态URL。

{陷阱四}：网站锚文本太多。
网站锚文本太多，造成内链链轮。外链相信每个人都知道它，但是内部链接也能产生链轮。很多站长为了提高关键字的排名，不要犹豫地使用太多锚文本，然后造成页面之间的链接反复效果。最后，让蜘蛛进入无底坑，不能出去。
# #解：过去的去除，采用交叉链接的锚文本，并尽量做锚文本的添加锚文本，滥用只会让百度的蜘蛛更一步不认可你的网站。
百度搜索引擎蜘蛛永远是一个机器人，它的智能从来没有比我们更好，但我们应该尊重它，为它的网络爬行提供一个平滑的环境，以确保我们的网站能够持续健康的发展。