许多站长都有查看网站http://www.yixiin.com/spread/日志的习惯，当然其中多数站长也只是简单的了解一下当天蜘蛛爬行的次数，有时候，我们会觉得自己的网站已经相当完美了，蜘蛛却对此不感冒。了解原理就很容易理解，它唯一所能依据的线索就是链接了，找到新的链接后，根据复杂的算法最终对网站进行排名，然而蜘蛛不访问网站的因素有很多，下面我们一起总结一下：
图片、flash等内容过多，去年google就推出了图片搜索功能，能够分析图片的色彩、像素比例而找到图片的出处。然而这项技术对于搜索引擎完全的识别图片中的信息还有不小的差距，页面中嵌入大量高清图片、flash，即使你的网站内容再好，蜘蛛也无法知道。
网站死链接过多，蜘蛛兴高采烈的来到你的网站，开始逐个链接的搜寻，以为发现了一堆好的内容，然而却是一堆打不开的链接等着她，所以她生气了，就再也不会访问你的页面了。大部分的网站都存在死链接，只要我们能够及时的发现并清除掉就没有问题了。http://www.yixiin.com/news/list-6934.html
外链与nofollow，其他网站上存在你网站的链接。想要蜘蛛更频繁的光临，在建立外链时就应该考虑外链网站权重，另外有些百度无良站长在做友情链接时，会有意设置nofollow。
网站逻辑结构复杂，正确的网站逻辑结构应该是扁平状的树形结构，蜘蛛通过首页访问，能够达到任何一个栏目页，通过栏目页又能达到任何一个内容页
