Categories


Tags


网站日志分析能反馈什么?

一个seo工作人员,特别是那些大型网站的seo人员来说,能独立分析网站日志是一种必不可少的技能,因为大型的网站栏目结构以及页面非常的繁杂,蜘蛛也是少不了会频繁访问,从蜘蛛给网站留下的一些痕迹上面能够掌控网站不少的信息,这对网站优化运营是一种非常必要的参考,前面小星星的文章里面也对蜘蛛状态码也进行了初步的介绍,这篇文章也对网站日志能读取到的信息作出了总结:

分析网站日志能获取到的信息总结:

一、可以看出网站页面有哪些搜索引擎的蜘蛛抓取

从网站日志里面可以看出网站被哪些蜘蛛所抓取,每个类型的蜘蛛也都属于自己的特殊标头,各大搜索引擎的标头特征如下所示:

百度蜘蛛:baiduspider

谷歌蜘蛛:Googlebot

360蜘蛛:360Spider

SOSO蜘蛛:Sosospider

雅虎蜘蛛:“Yahoo! Slurp China”或者Yahoo!

有道蜘蛛:YoudaoBot,YodaoBot

搜狗蜘蛛:Sogou News Spider

MSN蜘蛛:msnbot,msnbot-media

必应蜘蛛:bingbot

提醒:网站的日志里面也有可能会出现一些其它私人开发的抓取器所抓取,由此我们可能会发现一些奇怪的蜘蛛抓取痕迹。另外百度也有属于自己的匿名蜘蛛,我们也要注意区分注意。

二、可以统计网站目录蜘蛛抓取的总量

通过抓取总量的分析可以对比出网站哪个目录更受搜索引擎的关注,一般来说蜘蛛抓取越频繁的目录,site网站此目录的排名会相对靠前,我们也可通过目录的蜘蛛访问量来适当调整目录的结构,对于那些抓取压力较大但是不怎么重要的目录也可适当缩减链接入口,以免阻碍给其它重要目录的抓取。

三、网站页面的抓取。

可以从中看出哪个页面蜘蛛是否抓取了一些没有被收录价值的页面,或者老是重复的抓取了这些页面等,那么同理要先采取措施予以频闭,要么是运用到nofollow标签,要么是robots文件等,这样就会降低因为搜索引擎抓取到大量相关性低或者质量度差的页面而影响到页面的权重传递这样的不利影响。

四、蜘蛛平均抓取页面的次数、页面平均停留时间以及抓取的数量。

(1)、平均每次抓取页面数=总抓取量/访问次数

(2)、单页抓取停留时间

(3)、页面平均停留时间=总停留时间/访问次数

从以上的分析能够很清晰的看出蜘蛛是否频繁关注自己的网站,而且抓取的页面越多,深度越足也能反映出网站的活跃度高,而且在停留的时间上面也能初步看出网站的页面和文章是否新颖或者原创,这是页面质量度的一个体现。

五、可以一览蜘蛛方面各网页的状态码

状态码是网站日志里面最重要的一个方面了,这是蜘蛛对于网站页面状态最直观的反映,从这些状态码中可以看出更多详细的信息。

六、了解网站日志蜘蛛的来访时间

对网站日常日志分析总结中,可以很直观的看出每天具体是哪个时间段是蜘蛛访问的高峰时期,我们为了迎合搜索引擎,也可以相应调整网站的更新时间,争取在蜘蛛活跃度最高的时间段更新文章,这样对自己网站的收录会有非常大的帮助,甚至还有可能达到秒收的效果!

总之,分析网站日志是一个非常有意义的技能,特别是网站建立的初期和运营遇到状况的时候,分析日志这个方面就更是尤为重要,当然再碰到信息量特别大的时候,单手动看效果是不好的,这里推荐光年日志分析工具,功能非常强大,基本能很好的满足一般网站的分析需求。

来源:搜外网


Public @ 2010-01-05 15:32:50

什么是回归用户体验

一个用户自身拥有SEO网站,订阅大量SEO博客,这点搜索引擎可以通过流量统计服务和RSS阅读器判断。这个至少对SEO比较关注、很可能是SEO专家的用户,在搜索引擎搜索“SEO”点击第一个结果后10秒钟就按返回按钮重新来到搜索结果页面,点击了第三个结果,在这个网站上访问了10个页面,停留了30分钟,然后每过几天,这个用户都会再访问排在第三名的网站,并停留较长时间,访问多个页面。这样一种行为模式如果多

Public @ 2017-08-13 15:20:06

Google Adsense蜘蛛抓取的网页在搜索中出现

Google AdSense蜘蛛抓取的网页在搜索结果中出现,这是因为Google蜘蛛通过抓取网页的方式来确定网页的内容及相关信息,并将其加入到搜索引擎的索引中。当用户在搜索引擎中搜索相关的关键词时,搜索引擎会根据索引中的网页内容和相关性进行排序,并将最相关的网页显示在搜索结果中。 Google AdSense是一种广告发布网络,它允许网站主在其网站上显示Google广告,并通过用户点击这些广告来

Public @ 2023-07-29 01:50:19

服务器日志是什么?如何查看服务器日志?

服务器日志是什么服务器日志(server log)是一个或多个由服务器自动创建和维护的日志文件,其中包含其所执行活动的列表。简单来说,服务器的日记就是记录网站被访问的全过程,什么时间到什么时间有哪些人来过,什么搜索引擎来过,有没有收录你的网页,从你的网站工作的第一天你的日记就有了。搜索引擎对一个网站存在的影响可谓是方方面面。如果要做好SEO,不论是前台的前端开发、页面设计、产品交互,还是后端的运维

Public @ 2021-04-24 15:32:51

做网站SEO优化,网站日志分析是必备的技能

网站的SEO优化过程中不免会分析网站日志,网站日志的分析和诊断就像给网站看病一样,我们通过网站日志的分析,可以更加清楚的知道网站的健康状况,使用这些数据更有利于开展网站SEO优化。通过网站日志可以清楚的得知用户在什么IP、什么时间、用什么操作系统、什么浏览器、什么分辨率显示器的情况下访问了你网站的哪个页面,是否访问成功。对于专业从事搜索引擎优化工作者而言,网站日志可以记录各搜索引擎蜘蛛机器人爬行网

Public @ 2012-07-16 15:32:52

更多您感兴趣的搜索

0.504754s