前段时间seowhy开启未登陆用户禁止访问论坛的权限，让我想到的是，如果用户未登陆不能查看帖子，那百度蜘蛛能否索引到内容呢，我简单的理解为百度蜘蛛的爬行其实就是顺着网站中的锚文本链接爬行，然后形成一张大网，但如果论坛禁止未登陆用户访问，那么蜘蛛爬行的链接就是死链，就抓取不到内容，发帖就没有效果，其实我的想法是错误的，百度蜘蛛其独特的爬行机制不是我们想象的那么简单。
前日（10月22日），我修改公司网站的数据库，而后测试发布了一篇以“啊啊”为标题、内容的信息，前台并没有生成页面，也就是说这篇文章只有数据库中存在，前台没有它的一点信息（因为我有数据库洁癖，为了不让文章ID错乱，想着不用删除，等第二天更新文章修改掉就行，反正也没生成页面），第二天（10月23日），我把这条测试文章修改了，又发不了一篇新的文章，等待收录查看快照是这样的。
服务器是网站生存的基础，不论是什么原因造成的服务器封禁，都直接影响蜘蛛的抓取，影响网站的用户体验，不利于seo工作的展开。我其将以自己的亲身经历，结合网络上一些朋友对这类问题的分析，总结出造成服务器封禁的三点主要原因：
一、服务器不稳定
现在的服务器多如牛毛，价格也各不相同，质量方面也是相差甚远，站长们往往在选择的时候都是“只认价不认质”， 有的空间商为了节省资源，故意屏蔽掉spider（蜘蛛）的IP，导致spider抓取失败，网站页面就无法被搜索引擎收录。
解决方法：选择有实力的正规空间商，尽可能保证您的网站稳定。服务器和空间的稳定性需要一定的技术实力来保障，一些没有实力的空间商，可能无力提供良好的服务，服务的稳定性无法保证。我们可以很形像的打个比喻：如果将“人”比喻为网站内容，那么服务器就是我们的“家”，它为我们挡风避雨，为我们的生存提供了一个优良的环境，而服务器的好坏将影响我们所能承受的风险。我想，谁都不愿意住在没有安全保障的屋子里，拿自己的生命开玩笑，同理，网站也是如此！如果您现在的服务器不理想，有必要另选时，请暂时让旧服务器能够使用一段时间，并且做301跳转，尽量减少更换服务器带来的一系列损失。
许多站长都有查看网站日志的习惯，这么做的主要目的就是为了分析蜘蛛爬行网站的情况，当然其中多数站长也只是简单的了解一下当天蜘蛛爬行的次数，这一 点就足够发现问题了。有时候，我们会觉得自己的网站已经相当完美了，而正常优化过程中，蜘蛛却对此不感冒，让人很是着急。
了解原理就很容易理解，搜索引擎借助蜘蛛在互联网这张大网中搜寻“猎物”，它唯一所能依据的线索就是链接了，找到新的链接后，根据复杂的算法最终对网 站进行排名，储存在数据库中。很多网站可能会因为网站结构混乱失去蜘蛛到访的机会，然而蜘蛛不访问网站的因素有很多，下面我们一起总结一下：
