7-15天上首页 不达标不收费

| 注册

seo优化关键词快速排名搜索引擎优化 > SEO算法 > 【谷歌seo学习】利用服务器日志分析seo

【谷歌seo学习】利用服务器日志分析seo

星乐SEO SEO算法 2021年02月05日

这篇文章将教你如何使用网站服务器日志作为SEO分析工具,以更好地理解搜索引擎机器人和网站之间的互动。本文只关注Googlebot和Googlebot智能手机。所以,从现在开始,每当提到机器人,都是指谷歌。(本教程适用于百度)

同样值得注意的是,服务器日志通常包含其他交互数据,但这里我们只参考搜索引擎机器人流量。

什么是服务器日志文件?

简而言之,服务器日志文件是由服务器自动生成的记录,它列出了搜索引擎机器人和其中包含的页面/资源之间的每一次交互。简而言之,每次导航器在服务器上请求页面时,都会创建一个日志条目,其中显示各种数据点,例如:

*警告:行话区*

请求了什么页面或资源?

需要什么样的资源?(HTML,JavaScript等。)

用什么方法?(获取或发布)

请求是什么时候发生的?

请求的响应代码是什么?(200,301,404,500等。)

还有最重要的数据点...……*鼓声* & # 8230;是哪个搜索引擎机器人提出的请求,有多少个请求!(Googlebot,Googlebot智能手机,Bingbot,百度等。)

为什么机器人抓取如此重要?

它可以清楚地确定机器人在一段时间内请求哪些页面,这使我们能够识别潜在的“问题”页面。

什么是问题页面?

我将这些页面定义为在特定时间范围(至少一个月或三个月)内几乎没有机器人请求的页面。出于测量的目的,假设一个月内有10个或更少漫游请求的任何页面都是潜在的“问题”页面。由于这是一个可扩展的规模,请从这个数字开始,根据网站大小继续进入列表(例如,小于10、小于30、小于50等。).

机器人流量低的原因是什么?

页面位于网站导航的深处,这导致机器人平均需要更长时间才能到达。

跨多个页面的内容稀缺或重复,导致漫游器请求页面时缺乏紧迫性或重要性。

该页面不包含在XML网站地图中,因此导航器仅依赖自然爬行进行搜索。

缺乏页面的内部/外部链接使得机器人很难找到它们。

技术问题,如畸形的robots.txt文件,阻止bot在网站的某些区域爬行。

机器人流量低有什么影响?

页面根本不会被挑选和索引。

如果页面内容在索引页面上更新,则检索和索引刷新的内容可能需要更长时间,这意味着网站的访问者可能会看到过时的内容。

话虽如此,但需要注意的是,漫游流量低的页面并不总是能吸引人们的注意力。这只是帮助识别潜在问题页面的晴雨表,并不保证实际上有任何错误。

网站大小如何影响机器人爬行?

大号& # 8211;如果一个大型网站包含超过1000个页面,机器人可能会遇到一个问题,那就是通过自然的爬行进度继续到达更深的页面。这些可能是将与日志文件一起审查以确定重要性和优先级的页面。

广告位
标签: SEO学习   SEO基础