简要分析一下日志数据分析的相关问题

1、每个目录、每个搜索引擎的抓取量

上边两步把整体抓取量、不重复抓取量记录下去了，尔后咱们要阐发出每个搜索引擎对每个目录的抓取情况是怎么的，这样利于发展分块优化，比如当你网站 广而告之流量上升时，你梗概晓得是哪个目录的流量上升了，尔后再往下推，看看是哪个目录的抓取量上升了，哪个目录的抓取量降落了，为甚么降落，均梗概发展 阐发的，尔后在网站中发展适当的链接构造调停，比如使用nofollow标签等。

2、记录搜索引擎蜘蛛的不重复抓取量

上一步咱们把蜘蛛的抓取量数据给阐发进去了，尔后咱们要发展去重，也即是搜索引擎的唯一不重复抓取量，实在对于收录来讲，许多页面只要抓取一次即梗 概了，可是在理论操纵的过程傍边，许多页面但凡被重复抓取的，谷歌的技能对照昆裔一些，重复抓取率梗概会低一些，可是百度等搜索引擎，重复抓取率却非常 高，你经过网站广而告之日志阐发即梗概看进去了，一天若是抓取量上百万，梗概好几万次但凡抓取首页的，以是许多数据你定然要去阐发的，当你阐发了后，你才 会晓得问题的老火性。

3、每个搜索引擎的整体抓取量(以及趋势)

在日志文件中，懂得的记录了每个搜索引擎的抓取量，比如百度、谷歌、搜狗等搜索引擎的抓取记录，咱们均梗概发展记录，使用DOS命令梗概Linux 命令均梗概去实现的，搜索引擎的收录是由抓取量以及文章品质来决定的，当文章品质坚强的情况下，蜘蛛抓取量越大，那么收录的就会越多，咱们在发展日志阐发 时辰，定然要清楚的晓得网站广而告之蜘蛛每天的抓取量后果是一个甚么情况，并且每天都要记录，梗概相对值注明不了甚么，咱们梗概去看它的网络营销趋势，当 某一天抓取量的趋势在降落时，咱们就要去找缘由了。

4、统计搜索引擎蜘蛛来的次数、来的时间

咱们梗概使用一些日志阐发器材，设定一个规范，比如光年日志阐发器材，梗概统计出每个搜索引擎蜘蛛每天来的次数，一天一共在咱们网站停留了多久，有 不有IP蜘蛛一天24小时都在咱们网站始终的抓取，这样的蜘蛛越多越好，常常是你网站广而告之权重汲引的体现。这样的数据梗概每天都记录下去，在定然的时 间段内，发展对照阐发，看看停留的时间是否是增加了，来的次数是否是增长了，这样梗概判断出网站广而告之权重是上升照旧降落。互易中国

5、统计搜索引擎抓取的形状码

当搜索引擎抓取了你的页面后，不但抓取了你的内容，并且还会有一个抓取前往码的，这些前往码咱们要记录下去，分外是一些沟通301、404、500 等这些形状码，咱们从这些形状码中咱们找出网站广而告之的一些荫蔽的问题，比如为甚么会呈现很多404页面，是顺叙缘由，照旧搜索引擎在抓取外链的时辰提 取差错，实在咱们梗概在谷歌筹划员器材中看到这些数据的，里边还会提醒你的差错的404页面呈此刻那处那边，对于一些301形状码咱们也要留意了，看下这 些301是否是根据咱们所祈望的那样跳转的，网站广而告之中要尽量的少用跳转，页面在跳转的时辰，常常会延长页面的加载时间，最常见的301梗概即是网页 URL不带"/"的跳转到带“/”的情况了，咱们在网站中，要尽量的防备呈现这样的情况。

相关文章推荐：1.谈谈企业在建站的时候怎样去选择合适的空间

2.浅谈网站推广优化如何做