对于每一个优化人员来说都需要具备一定的分析能力，分析用户的搜索行为、分析站点的数据流量等等。只有合理的分析好这一些数据才可以更好的制定我们的优化策略。其中在我们的站内分析中不可缺少的一项就是分析搜索引擎蜘蛛的抓取爬行行为。搜索引擎蜘蛛是我们肉眼所不能看到的，我们要如何分析它的爬行行为呢?我们可以通过分析我们站点的IIS日志。
一：那么从分析IIS日志我们可以从我们的站点上得到什么信息
1：在外链的建设中我们知道网站上的每一个外链都是搜索引擎蜘蛛进入我们网站的入口，对此我们可以观察日志上的蜘蛛的造访情况，就可以从另一角度查看我们的外链是否能够更好的吸引到蜘蛛，以此制定一个更加合理的外链建设策略。
2：站点的空间问题是很多站长棘手的问题之一，站点打不开很可能使我们的站点一夜回到解放前。那么对于我们的站点来说如何最快最早的了解发现问题呢。对此同样可以通过分析该日志上的搜索蜘蛛爬行情况，因为站点空间除了什么问题的第一反应就是搜索引擎蜘蛛。
3：通过该日志我们也可以分析蜘蛛对于页面内容的爬行情况。了解搜索引擎更加喜欢我们站点上的什么内容。我们可以根据这些数据在内容上的布局或者微调，是搜索引擎更加的爱上我们的内容。
二：如何获得我们站点的IIS日志及IIS日志的设置
首先，我们的站点空间需要支持站点的日志下载。对于这点我们在购买站点空间的时候可以先与空间商进行咨询，是否支持该功能，如果支持的话，一般日志文件置于weblog文件中，我们可以直接FTP到本地。对于IIS日志的记录设置，笔者认为一般如果站点的内容较多，结构较复杂的可以设置成一小时生成一次，而内容较少的话可以设置成一天更新一次，这样可以避免我们的IIS日志出现信文件过大的问题。
三：如何分析我们站点的IIS日志
1：对IIS日志文件的拆分分析
我们使用FTP把日志下载本地后，可以通过记事本打开文件，同时搜索主要的搜索引擎蜘蛛名称，其中的百度的蜘蛛名为BaiduSpider、谷歌的蜘蛛名为Googlebot 。如下图所示
百度蜘蛛
评论