如果客户端发送了一个带条件的 GET 请求且该请求已被允许，而文档的内容（自上次访问以来或者根据请求的条件）并没有改变，则服务器应当返回304状态码。
意思是你的这个网页自百度蜘蛛上次访问之后内容没有改变，就会返回304，就是告诉百度蜘蛛不需要在爬一次了。。
另外，IIS日志是最准确的。百度蜘蛛，是百度搜索引擎的一个自动程序。它的作用是访问收集整理互联网上的网页、、视频等内容，然后分门别类建立索引数据库， 使用户能在百度搜索引擎中搜索到您网站的网页、、视频等内容。
一、百度蜘蛛的运行原理。
（1）通过百度蜘蛛下载回来的网页放到补充数据区，通过各种程序计算过后才放到检索区，才会形成稳定的排名，所以说只要下载回来的东西都可以通过指令找到，补充数据是不稳定的，有可能在各种计算的过程中给k掉，检索区的数据排名是相对比较稳定的，百度目 前是缓存机制和补充数据相结合的，正在向补充数据转变，这也是目 前百度收录困难的原因，也是很多站点今天给k了明天又放出来的原因。
（2）深度优先和权重优先，百度蜘蛛抓页面的时候从起始站点（即种子站点指的是一些门户站点）是广度优先抓取是为了抓取更多的网址，深度优先抓取的目的是为了抓取高质量的网页，这个策略是由调度来计算和分配的，百度蜘蛛只负责抓取，权重优先是指反向连接较多的页面的优先抓取，这也是调度的一种策略，一般情况下网页抓取抓到40%是正常范围，60%算很好，100%是不可能的，当然抓取的越多越好。提取这些页面链接，然后做成死链接文件上传到网站根目录中。在通过百度资源平台的死链提交工具进行提交！
也可以直接制作404页面放入站点根目录里，然后在服务器上设置好404页面，这样对网站优化来说就没有太大的影响了！
百度蜘蛛喜欢什么样的网站？蜘蛛是模拟用户的习惯来抓取的。通过解决几个问题来说明：搜索引擎的蜘蛛，来抓取我们的网站，我们必须具备哪一些条件。
从以下几个方面来看：
第一点：网站的流畅性
影响网站流畅性的因素有哪些：
1、程序方面的因素
A：网页的的优化: 有三个方面的优化
第一个：必须要对进行压缩和处理；建议最好不要有背景，如果有轮展图，控制大小和轮展的张数，要吸引眼球，轮展不要超过三张；
第二个：一定要进行高宽的定位，在定位的时候，如果不在页面里定义高和宽的话，会导致搜索引擎加载两次，多次渲染，所以我们一定要定义他的高和宽；
第三个：我们要用CSS进行位置的截取，在优化小型例如电话QQ等小图，要统一到一张大图上，然后用CSS进行位置截取，这是个重点。
B、CSS和JS的问题：
1、CSS（css也是用一个文件单独调用的）
a、如果有多个CSS文件（css文件如果很多是不好的），能够合并成一个的，一定要合并成一个，否则会造成多次加载；
b、CSS一定要放到，head的头部里面，而不要放在body中间，如果放在body中间，百度会加载两次，会对页面的加载速度造成影响(建议使用火狐浏览器，有firebug插件会很容易看元素)。
2、js的问题
a、位置问题，一定要放在底部，如果放在头部，打开页面会先加载JS，如果放在底部，会先加载网站正文，再加载JS,建议放在底部；
b、尽量少用天气，时间等js外部调用，(js也强烈建议合并，冗余代码也应该减少，去掉)。
B：页面方面的要求：
1、页面缓存的要求：百度是一周，论坛一般为一天，建议用seo软件工具；
2、网速要求有哪些弊端。
第二点：服务器本身的因素和服务器设置问题
服务器和空间的因素：网站经常会传出一个20064问题（网站不出现这个问题是不可能的，但是大量出现就是问题了）这个问题是由什么引起的呢？
原因：
是由于不同的服务器而导致的，（服务器分为电信的服务器和网通的服务器）如果网通服务器的蜘蛛来爬去电信的网站，如果网速慢，便会会导致评分降低；如何解决：
第一个解决的方法是：放到一个vps，针对空间不断的测试的评分达到85分以上就可以算是优质的空间。
第二个解决的方法是：如果服务器还是有压力，买一个CDN加速，一下就解决了；
第三个解决的方法是：如果没有这些资源，可以买正规的双线服务器。
每位站长都知道搜索引擎是通过蜘蛛的形式来进行抓取我们网站的内容，从而提交到搜索引擎进行展示。所以从这点我们可以看出来蜘蛛对于一个网站的友好程度是至关重要的，一般也就是说蜘蛛常常光顾的站点权重都不会差，然而对于那些蜘蛛百年都不光顾一次的网站，排名就不用说了。所以我们要“蜘蛛”养好，那么该如何养好呢？
网站提交。
对于新站而言大家都知道搜索引擎蜘蛛不是很感兴趣，而且不容易被发现收录，所以我们首先要做的就是把自己的网站分别提交到各个搜索引擎，从而让搜索引擎知道你的网站建立，然后在经过搜索引擎蜘蛛进行爬行获取你网站的信息从而进行考核期，在到收录，网站正常运转。
用外链让蜘蛛更频繁的爬行网站。
对于新站来讲，就算搜索引擎进行了收录站点，但是快照往往都是不正常的，所以说在我们给搜索引擎提交过网站之后，我们还是需要主动出击，让蜘蛛快速的认识我们的网站。那么我们就需要开始我们的外链工作咯，大量的去一些权重较好的论坛和博客进行发布一些外链来进行吸引蜘蛛通过外链爬行到我们的网站，这样我们的目的就已经达到了，但是切记一点就是外链是一个长久坚持的工作，站长们切勿三天打鱼两天晒网哦。
用新鲜的文章喂好喂饱蜘蛛。
除了使用外链的形式来吸引蜘蛛之外，我们网站本身的内容也是要求十分高的，因为大家都知道搜索引擎对于高质量的原创内容是相当的喜爱，给予的权重也是极高的，所以我们在做外链的同时一定要给自己的网站内容也要做好，切勿使用采集工具进行大量采集其他站点的内容，否则很容易被降权惩罚，在这里笔者比较推荐原创和伪原创形式的文章哦。还有就是我们可以适当的在文章中参入一些网站内链，从而使得蜘蛛更好的爬行与网站内部之间。
4友情链接很重要。
除了外链之外，我们还需要做好友情链接，因为友链在外链当中属于最为高质量的一种，它引导着站点与站点权重的分享，所以说我们要给自己的网站增加好的友情是非常必要的，但是一定要切记要好的，网站相关的，如果站长朋友有资本的话也可以选择购买一些高权重门户站点链接那样也是非常不错的哦。
5网站地图的重要性。
除了我们内链等等的工作之外，我们还需要给自己网站建立一个地图系统，因为地图是为了方便蜘蛛游览的，它里面包含了我们网站内部所有的链接，所以说在我们网站建设当中我们还是非常的有必要给自己站点建立一个地图的。
如何喂养好百度蜘蛛
百度蜘蛛是站长们的宠物, 不过, 要喂养好他可不是件容易的事 百度蜘蛛是个很敏感的动物机器, 你千万不要低估他的智力 而且, 到目前为止, 所有站长们都没有搞熟他的脾气, 所以你要有足够的耐心陪他玩, 目前, 站长们很少有人能不要他, 你不要他, 他就会毫不留情抛弃你, 所以, 人在屋檐下, 不能不低头, 他只能围着他转, 最好不要得罪他(除非你买了**发了大财)
结合我的经验我来谈谈如何喂养好百度蜘蛛。
分析一下，要想百度蜘蛛经常光顾自己的站，首先要先把蜘蛛引过来。怎么引最简单有效的办法是你自己创造个关键字，注意要保证关键字的唯一性(如：钟情一见)，百度搜索到的结果相关性要低。那关键字要在你首页出现，而且有相关解释，目的是围绕关键字做相关内容。然后去百度更新快的地方，发布相关信息。 你发表的文章要围绕你创造的关键字写，关键字可以使用一两次加粗，色彩，或者下划线等，关键字连接到你首页地址，内容里再加一两次你首页地址(传说中的软文)。 最关键字加好了，信息也发布了，最关键的就是要触发百度检测数据库，使百度蜘蛛会顺着那些新内容找到你首页!怎么触发还用问吗刚做的关键字，具有唯一性，而且相关性低。如果有人搜索那关键字，百度蜘蛛检索时候会优先考虑最合适的页面，也许百度暂时没显示收录你的站，但是百度蜘蛛肯定已经闻风而动了。
原理已经介绍了一些，吸引蜘蛛还有许多方法，简单的总结一下：
一、 增加原创的文字，适当围绕关键字优化，强烈建议在title里也加一下。这里的原创不是说纯自己写的就完事了，你还要搜索一下别人是不是写过类似的，如果有劝你还是另换话题吧。
二、在百度权重高，更新快的地方，比如说站长网，发布围绕关键字相关内容的信息和你站点连接，让百度蜘蛛能够从多个地方转到你的站上去。
三、围绕这个关键字进行推广，发布大量外链，让检索结果定位到你的站。
网站快照更新是每个站长都关心的事情，如果搜索引擎频繁的
新你的网站快照这就预示着你的网站很受搜索引擎欢迎，那么排名也会提高，分析一下，要想百度更新自己的站，首先要让百度爬到自己的站。但是百度不来怎么办那么我们想办法牵着他来!怎么牵继续看!现在最简单的 办法，你自己创造个关键字，比如“牛不喝奶”，“奶不是牛”。一定要保证关键字的唯一性，百度搜索到的结果相关性达到最低，关键字要在你首页出现，而且有相关解释，目的是围绕关键字做相关内容。然后去百度更新快的地方，发布相关信息。 你发表的文章要围绕你创造的关键字写，关键字可以使用一两次加粗，色彩，或者下划线等，关键字连接到你首页地址，内容里再加一两次你首页地址。不要太过分 就可以。
最重要的到了，关键字加好了，信息也发布了，现在应该做的是触发百度检测数据库，从而百度会顺着那些新内容找到你首页!怎么触发还用问吗刚做的 关键字，具有唯一性，而且相关性低。如果有人搜索那关键字，百度检索时候会优先考虑最合适的页面，也许百度暂时没有去你站，但是百度肯定能分析到新收录的 信息，继而，从新收录的信息相关连接爬到你站，更新!
怎么触发百度搜索自己创造的关键字方法太多了!去一些热门的论坛，发表一些容易让人回复的帖子，关键字指向你站，也可以是关键字XXX搜索地址。 可以去QQ论坛发布消息，问别人关键字XXX到底是什么意思 送100QB啊!可以去百度知道发布，高分求
关键字XXX的解释!还有其他很多方法，自己想!动动脑子!要去人气多的地方!比如去站长类的论坛发布“百度 被黑，搜索关键字XXX连接地址全部指向GOOGLE!”也可以去其他论坛发布“百度新闻，明天XXXXXXX!”总之引导网友去触发你那关键字，相信不 用多，十几个人足够了!
以上方法是利用让百度用其它的关键字去更新，朋友站已经用这个方法实验了，成功!估计成功率应该在80%以上，主要是看你 *** 作了! 至于百度更新快的地方很多，只是这个地址在这里不方便公布。相必聪明人也想到了。当然，还有其他很多权重高的站和论坛，百度每天都去爬一次。
给大家理一下头绪，不明白的继续看，明白的就可以走人了! 一： 增加原创的文字，适当围绕关键字优化，强烈建议在title里也加一下。
二： 在百度权重高，更新快的地方发布围绕关键字相关内容的信息和你站点连接，让百度爬着找到你，牵着百度去你站! 三： 引导别人去查找这个关键字，触发百度重新检索数据库，最后根据检索结果定位到你的站。
通过三，百度会优先考虑二，通过二，找到一。然后百度会重新抓你站!更新!问题解决!目的达到!任务完成!第一步完全可行，第二部你自己根据关键字做一些内容发十几个地方，被百度收录一个，也算
成功!三是重点，看你怎么 *** 作了!哄骗都可以啊!去人气多的地方诱导!
个人经验，百度不更新，最长的能给你拖四个月。google好点，拖的话一般不超过一个月。以上方法可以解决百度不更新，百度快照不更新的问题。对新站点，百度没有收录的站点同样有效! 重复一下：对新站点，百度没有收录的站点同样有效!
欢迎分享，转载请注明来源：内存溢出
微信扫一扫
支付宝扫一扫
评论列表（0条）