鲨鱼：如何通过日志分析搜索引擎蜘蛛跟踪

来源:王朝搜索

今天来随便扯扯，怎么通过日志，分析搜索引擎蜘蛛对网站的收录情况和排名情况。大家都知道，看日志最重要的要看http的状态码，看看里面有没有404, 304, 200。通过状态码分析网站的架

看到这个标题，想必大家会不屑一顾，“需要分析IIS日志吗?我有流量统计、51yes、cnzz、51la等等一大堆，功能全面，用起来也方便”，在这里请大家先别急着下结论，看

做为一个seoer来说每天观察日志文件是一个必须的过程，今天我也就想对于搜索引擎蜘蛛的爬行来说说自己的一点自己的理解. 看日志都看什么?这个大家都知道要看http的状态码，分析里面返回的2

对于各位站长来说，百度的收录是关心的重中之重。了解百度蜘蛛的爬行规律从而更好的改善收录情况也是必须要掌握的。很多网站目前使用的都是虚拟空间，都能够提供日志。日志是指在网站根目录下的logfiles

为了更好的观察网站被蜘蛛爬行的规律，我租用的服务器又没有提供访问日志，不得已，花了不少时间编写了一个基于PHP的专门分析蜘蛛爬行纪录的程序，经过三个月的对几个目标网站的观察，得出以下几个小经验给大

搜索引擎可以给网站带来可观的来路，所以搜索引擎对一个网站的收录相当重要，这不用再多说。但我们一般不太清楚搜索引擎蜘蛛何时第一次来到咱们的网站，也不太清楚第一次来过之后，蜘蛛随后再来的频率等等。

作为一个站长必须要学会分析iis日志，不会分析iis日志的算不上一个合格的seoer!确实如此，通过几次的实践让我初步懂得了分析iis日志的重要性。通过对iis日志的分析发现，百度给我返回了大量的

一个固定大小的蛋糕，分蛋糕的人越多，吃到的蛋糕就越少。网站就是这样一个蛋糕，网站的权重通常都集中在首页，由首页再分配到目录页最后到内页。而权重的分配是通过链接完成的，在首页的内页链接越多，每个页面

标题:关于网站IIS日志分析搜索引擎爬虫说明正文:iis默认的日志文件在C:\WINDOWS\system32\LogFiles中，下面是Seoer惜缘的服务器日志，通过查看，就可以了解

每位站长都知道搜索引擎是通过蜘蛛的形式来进行抓取我们网站的内容，从而提交到搜索引擎进行展示。所以从这点我们可以看出来蜘蛛对于一个网站的友好程度是至关重要的，一般也就是说蜘蛛常常光顾的站点权重都不会

免责声明：本文为网络用户发布，其观点仅代表作者个人观点，与本站无关，本站仅提供信息存储服务。文中陈述内容未经本站证实，其真实性、完整性、及时性本站不作任何保证或承诺，请读者仅作参考，并请自行核实相关内容。