分析网站日志能获取到的信息总结

一、可以看出网站页面有哪些搜索引擎的蜘蛛抓取

从网站日志里面可以看出网站被哪些蜘蛛所抓取，每个类型的蜘蛛也都属于自己的特殊标头，各大搜索引擎的标头特征如下所示：

蜘蛛抓取网站信息

百度蜘蛛:baiduspider

谷歌蜘蛛：Googlebot

360蜘蛛：360Spider

SOSO蜘蛛：Sosospider

雅虎蜘蛛：“Yahoo! Slurp China”或者Yahoo!

有道蜘蛛：YoudaoBot，YodaoBot

搜狗蜘蛛：Sogou News Spider

MSN蜘蛛：msnbot，msnbot-media

必应蜘蛛：bingbot

提醒：网站的日志里面也有可能会出现一些其它私人开发的抓取器所抓取，由此我们可能会发现一些奇怪的蜘蛛抓取痕迹。另外百度也有属于自己的匿名蜘蛛，我们也要注意区分注意。

二、可以统计网站目录蜘蛛抓取的总量

通过抓取总量的分析可以对比出网站哪个目录更受搜索引擎的关注，一般来说蜘蛛抓取越频繁的目录，site网站此目录的排名会相对靠前，我们也可通过目录的蜘蛛访问量来适当调整目录的结构，对于那些抓取压力较大但是不怎么重要的目录也可适当缩减链接入口，以免阻碍给其它重要目录的抓取。

三、网站页面的抓取。

可以从中看出哪个页面蜘蛛是否抓取了一些没有被收录价值的页面，或者老是重复的抓取了这些页面等，那么同理要先采取措施予以频闭，要么是运用到nofollow标签，要么是robots文件等，这样就会降低因为搜索引擎抓取到大量相关性低或者质量度差的页面而影响到页面的权重传递这样的不利影响。

四、蜘蛛平均抓取页面的次数、页面平均停留时间以及抓取的数量。

（1）、平均每次抓取页面数=总抓取量/访问次数

（2）、单页抓取停留时间

（3）、页面平均停留时间=总停留时间/访问次数

从以上的分析能够很清晰的看出蜘蛛是否频繁关注自己的网站，而且抓取的页面越多，深度越足也能反映出网站的活跃度高，而且在停留的时间上面也能初步看出网站的页面和文章是否新颖或者****，这是页面质量度的一个体现。

五、可以一览蜘蛛方面各网页的状态码

状态码是网站日志里面****重要的一个方面了，这是蜘蛛对于网站页面状态****直观的反映，从这些状态码中可以看出更多详细的信息，前面有一篇文章对各种蜘蛛状态码上面给出了非常详细的介绍。

光年日志分析工具界面

六、了解网站日志蜘蛛的来访时间

对网站日常日志分析总结中，可以很直观的看出每天具体是哪个时间段是蜘蛛访问的高峰时期，我们为了迎合搜索引擎，也可以相应调整网站的更新时间，争取在蜘蛛活跃度的时间段更新文章，这样对自己网站的收录会有非常大的帮助，甚至还有可能达到秒收的效果！

南通智讯网络科技有限公司是一家网站建设，网站优化为主的网络公司，欢迎大家咨询选择！

ite网站首页不在*的原因有哪些？

这段时间在网上看到很多人提到关于在百度中site自己的网站，很多人就发现网站的首页不在*，从而认为网站排名下降，网站被降权了，或者直接说是被K了。到处咨询SEO高手找原因，这段时间本人特意做了实验证明以上所说毫无根据，也就是说site首页不在*与排名没任何依存关系，也不是说被K掉了，那么site网站首页不在*的原因是什么呢？

　　原因：其实跟简单，你的网站首页被人举报了，或者说你的网站首页被恶意攻击了。或许有的人在网上找到的原因是一、网站服务器原因；二、网站外链原因；三、网站友情链接原因。这些原因虽然有作用，但是根本不是*的原因!

   我相信大家看了这篇博文就能理解为什么site网站首页不在*的原因了。

南通智讯网络科技有限公司是一家网站建设，网站优化为主的网络公司，欢迎大家咨询选择！

有必要参加 SEO 培训

EO培训和SEO外包是不同的概念，SEO外包只是一个简单的安排名收费的交易，它仅仅是以排名为结果的。

SEO他是对网站、项目的一个优化，这个优化可以使得网站在搜索引擎（搜索引擎的概念是很广的，整个互联网可以说就是一个搜索引擎，并不****于百度、谷歌......）有好的排名，但他的的本质是将项目做得****，获得用户得到认可，****终获得搜索引擎的认可，这是非常重要的，除非你的互联网项目不需要通过搜索，但即使如此，也还是需要对项目一个很好的优化，毕竟你要把项目做的****，获得用户，实现价值。

外包，他只是以排名为效果收费，因此他没有把网站做的****的义务。

但****为运营商，是要通过SEO将项目做的****，****终成为某一垂直领域的*，进而获得目标用户的认可，获得搜索引擎的认可。

所以SEO他只是一个概念，就像大家长谈的SEM、营销等等等等，这些仅仅只是概念，在你学习深入阶段，你会发现他们都是相通的。

SEO在国内时间并不长，而*SEO做得好的，还是很少的，但是我们现在回头看看，很多*互联网长辈都在很久做了这个事情，不论他们是否当时知道这个SEO概念：

比如，阿里巴巴，特别是英文站，早期就通过大量的英文排名（产品等长尾）获得大量的流量而在国外声名鹊起；

比如亚马逊、当当......，通过数以十万计的长尾，获得长尾效应，以至于当年我们搜索他们所经营的很多产品，书名，就可以看到他们。

现在互联网上，排名好的，至少是获得搜索引擎认可的网站，我们都可以从SEO的角度来分析他们，解释他们，除去本身的一些偶然因素、机率等，多说排名，他们并非偶然，即使有些运营者甚至并不知道SEO这个概念。

......

如果你在互联网上（当然并不****于互联网）做一个事情来实现价值，那么对于这个项目的整个策划等很多策略上、战略上以及细节上的东西都是要不断的完善的，特别是你有一个平台（或者你有很好的产品），我们首先想到的是如何去告诉别人，那么SEO就是*之一，可以说SEO就是全部（因为SEO并不是仅仅只限于搜索引擎，而搜索引擎也并不仅****于百度、google......、它贯穿于整个项目）

所以，一定要系统的掌握，深刻的认识并用于实践。

怎么掌握？

学习必定是要靠自己的。但是学习的途径很多，“培训是其中一个很重要的部分”，至少需要找一个平台系统的学习，让自己系统的建立基础，建立基本的概念和思维，至于不同的项目的操作固然有所不同，完全可以发挥自己的想象，但是这些都是建立在成熟系统的SEO思维之上的。

你现在有这样的疑问，也就是说你对SEO首先还是欠缺认识和了解的，我们换个角度，去了解一下那些seo培训所讲的究竟是什么，为什么有那么多的人在谈论seo，去亲自了解吧，不断的向自己将要发现的真理靠近~

南通智讯网络科技有限公司是一家网站建设，网站优化为主的网络公司，欢迎大家咨询选择！