我从事SEO网站优化以来，一直关注网站日志，每天做的第一件事就是分析网站日志。我每天到公司的第一件事就是分析昨天的网站日志。也许有些网站管理员不会分析网站日志，但也有一些人觉得分析网站日志是浪费时间，每天看那些数据有什么影响。认为至少有四点我们可以理解。
    
     通过URL日志，我们可以直接看到页面出了什么问题，服务器响应代码正常。一般来说，返回的状态代码是200，表示正常，404，表示页面有问题。
    
     从网站日志中，我们可以直接看到蜘蛛到我们的站点爬行的数量，越是爬行，蜘蛛对我们的站点就越友好。
    
     从上面的图片中我们可以直接看到在我们的站点上爬行的蜘蛛的数量，但是里面也有假蜘蛛，所以我们还需要通过客户IP确认哪些是真的蜘蛛，哪些是假的。
    
     对于第一个，我们可以看到哪些页面是直接爬取的，哪些不是。随着算法的不断更新，新站点的检查周期越来越长，以至于新站长更新的许多文章不会通过站点显示：域名。这主要是因为搜索引擎没有及时发布。
    
     一般来说，成功的爬行返回代码是20000返回，如果返回状态显示30400网站没有更新，蜘蛛来了，但没有爬行。如果是200064，不用担心，这只是一些动态页面抓取。
    
     对于上面的第三个，如果服务器返回到状态，例如，200表示正常访问。404表示页面不存在。304网站尚未更新。这些可以通过web日志中的代码直接看到。对于这404页，我们可以使用Roopts.txt协议来阻止这些页面，而不是让搜索引擎爬行这个页面。
    
     这篇文章是由皇冠网络http://www. HG-SEO .com /黄冠SEO /120 .HTML操作编译和发布的。本文推出皇冠营销网络-专注于SEO，SEM优化发展趋势，分享营销推广技巧博客，转载请离开原链接，谢谢合作。