1、蜘蛛本身就是模拟用户行为进行爬行读取。影响实际用户体验的同时,肯定也同时会影响到模拟用户体验的蜘蛛。当一个网站打开速度慢的时候,蜘蛛会对这个网站的评分降低,进而影响到读取、收录等一系列行为。http://www.yixiin.com/quote/list/3471/
2、蜘蛛抓取页面数量=停留总时间/单个页面停留时间先不管打开速度慢蜘蛛会不会提前撤退的问题。如果页面打开时间变慢,则总停留时间除以单个页面的停留时间即蜘蛛抓取的页面数量就会变少,抓取的量变少,相应的被收录的量肯定也会变少。http://www.yixiin.com/quote/list/3480/
3、网站打开时间变慢之后,慢慢的就会来的次数变少甚至不再来爬取。当一个网站没有蜘蛛爬取的时候,收录量变少也是理所当然的事情了。一个网站要想收录好,必需得到蜘蛛的青睐才行,一方面要让蜘蛛爬取频繁,一方面需要蜘蛛抓取更多的页面。打好了蜘蛛频繁爬取和抓取的地基之后,一定要回头看看网站的打开速度是不是会影响蜘蛛的行为。http://www.yixiin.com/quote/