大家好，我是日成传媒小杨君，我来为大家解答以上问题。
网站建设日志文件的功能是:
1。获取网站目录的抓取信息
当蜘蛛到你的网站上爬行收录内容时，你的网站日志会对蜘蛛的行为会进行自动的记录，因此只要你去分析网站的日志，你就会发现蜘蛛到你的网站上爬取了那些目录，另外也可以知道蜘蛛是否到那些不会提升网站权重的目录（例如：图标目录，下载目录，留言目录，广告页面）上进行了爬行。另外对于网站的数据库，后台目录也完全不需要被蜘
当有蜘蛛爬上你的网站采集内容时，你的网站日志会自动记录蜘蛛的行为，所以只要你分析网站日志，就会发现蜘蛛爬上了你网站的那些目录，你也可以知道蜘蛛是否爬上了那些不会提升网站权重的目录(比如图标目录、下载目录、消息目录、广告页面)。另外，对于网站的数据库，根本不需要找后台目录。
2。分析网站的内容抓取情况
一个页面是否被蜘蛛抓取是我们网站分析的重要一环，通过网站日志我们可以很容易的分析出很多有帮助的信息。比如我们的网站上是否有垃圾页面被抓取，多个url链接的抓取，哪些页面被频繁抓取，哪些是抓取频率较高的高价值页面，这样就可以适当增加我们想要优化但抓取频率较低的页面的曝光度；需要屏蔽一些垃圾页面，防止网站因为抓取的垃圾页面太多而被降级；也可以分析高质量的内容页面，多写这样的内容，吸引蜘蛛来抓取。爬得越多，权重就越高。
3。分析网站状态代码信息
状态码有两种，一种是蜘蛛状态码，一种是用户状态码。通过蜘蛛状态码，可以准确的检查网站是否存在抓取问题。比如404代表错误页，301，302代表重定向，还有一些状态码:504，500等。值得一提的是，除了状态码200，其他状态码都要注明。当然，如果只是个别的几个，就不需要关注了。但是如果量太大，网站就会出现问题。
相关标签：
