对于做优化的人来说,网站日志的分析再熟悉不过了。日志分析包含了对网站整体数据的诊断,可以方便我们检查分析网站的各种因素。SEO的网站数据分析包括蜘蛛的日志分析。分析结果表明,蜘蛛爬行网站要经过文件和链接及其蜘蛛IP状态码,这也是网站的必经之路。SEO优化网站想要提升搜索引擎对网站的兴趣,展示高质量的内容,丢弃不利于优化排名的内容。满足蜘蛛爬行需求;
什么是网站蜘蛛日志:
网站蜘蛛日志是网站web服务器收到的处理器请求和操作的原始信息记录。一般是以日志后缀结尾的文件。准确地说,它应该用于自动捕获记录。(简单来说,就是蜘蛛每天对网站的访问)
为什么要分析网站日志?
网站的蜘蛛日志分析可以展示网站的不足,以及网站的运行情况,网站服务器上是否有异常的蜘蛛爬行,停留时间,爬行了哪些页面,用户的访问时间,访问的页面,访问的ip,网站代码是否异常等等。
如何进行日志分析?
一般网站日志存储在服务器根目录的日志文件中;下载后,使用日志分析工具分析蜘蛛对数据的抓取动态!
网站蜘蛛的名称:
百度爬虫名称(Baiduspider)
谷歌爬虫名称(Googlebot)
雅虎爬虫名称(雅虎思乐普)
Yodao蜘蛛名称(YodaoBot)
搜狗蜘蛛名称(蜘蛛)
MSN的蜘蛛名:msnbot
网站状态代码
网站中的状态服务代码:
200-服务器成功返回网页。
404-请求的网页不存在。
53-服务器暂时不可用
50-服务器出现错误。
如何通过SEO分析网站蜘蛛日志;
61.135.168.22--[11/2/2018 :04:02:45 0800]'/seouhua/161 . html HTTP/1.1 ' 200 8450 '-' Baiduspider(https://www.baidu.com/search/蜘蛛. htm)'以上代码是我从自己空间下载的日志。现在和大家一起分析一下。本规范的具体含义如下:
61.135.168.22:路由的IP,也就是进入我们网站的这个用户或者蜘蛛的IP。
1/2/2018 :04:023:45:2018年2月11日凌晨4: 02: 45
20: 00表示您可以正常访问您的网站。
850:表示这次加载了8450字节。
Baiduspider:百度蜘蛛的全称。
以上就是网站日志分析的细节,所以以上内容中有两点需要注意,也是我们在分析的过程中需要记住的。那就是状态码和程序名的解析。
如何让网站蜘蛛频繁光顾网站:
那么蜘蛛就会频繁光顾。SEO了解数据后,发现网站蜘蛛日志中访问量很少。然后我们需要吸引蜘蛛。蜘蛛是贪婪的家伙,所以我们需要做好三件事,蜘蛛会频繁光顾。
1.定期更新:如果是博客网站或者小网站,不需要定期更新内容,要定期进行1-3篇文章,养成蜘蛛的爬行习惯;如果是大型网站,需要大量更新,具体看网站情况;
2.网站地图:吸引蜘蛛抓取网站,通过网站地图引导蜘蛛。一般蜘蛛在抓取网站的时候,都会先抓取机器人的文件,所以把地图放在机器人里面就是引导蜘蛛抓取地图,从而抓取网站内容;
3.外链指导:网站优化让蜘蛛可以从外部进入自己的网站页面。利用外链平台,发布纯文本链接,蜘蛛抓取平台页面时会进入我们的网站页面,引导蜘蛛抓取网站;
网站蜘蛛日志分析是SEO通过数据优化网站,从而针对蜘蛛处理错误的一项基础技术。网站的改造一定要通过SEO网站的蜘蛛日志来分析。网站上有很多蜘蛛不喜欢抓取的文件和文档,需要系统的剔除。