胶南做网站robots与IIS日志不得不在意的东西
  发表时间:2017-05-04 02:11:26

来SEOWHY之前也曾听说常看IIS日志对于一个合格的SEOER来说是有必要的,但我就没有那习惯,从来不看日志!所以我觉得我这个SEOWHY合格生是假的,不能说是个真正的SEO合格生。但是,从今天起胶南做网站公司小编觉得我应该可以算是名副其实的合格生了,开始有了看IIS日志的习惯。不看不知道,一看还真吓了一跳。


一个月前我做了个新站,排名上升很理想。长尾词排名都很好,网站权重也在慢慢的增加。半个月前我来到SEOWHY参加系统培训,发布之前做的远远不够,排名可能是因为新站效应或是其它运气之类的条件给我的结果。只有一点我可以理解是对排名有帮助的,那就是因为站内的文章全部都是我原创的,而且算是有价值的一些资源、。除此之外我就不知道我排名好的其它原因了

5月初,我开始正式系统学习夫唯老师的系统思维,经过两天的了解教研室的内容之后,发现之前的我对SEO知知甚少,就这样下了一个决定。想全面的学习真正的SEO知识,于是放弃了之前的网站的一切。进行全方面改版。除了域名没换之外其它都换掉,空间换了,程序换了,内容全部重新弄。换空间是因为之前的空间不稳定,换程序及全新改版是因为之前的程序结构不利于优化,再加之后面所了解到的四处一词,站内定向锚文本,次导航,关键词密度,之类的知识促使我认为一切重来是完全有必要的。

自从更换程序之后我发现网站收录减少,权重下降,流量就随之锐减。而且出现了首页SITE不在第一位,站名搜索100名以外了,但奇怪的是。快照还是天天更新(注:爱站工具查询的结果),昨天在YY上听到有学友问到一个类似问题,夫唯老师建议用120.SEOWHY.COM这个工具查询一下,正好我也有这样的需求,于是昨晚上完课之后。用SEOWHY的这个工具查询一下发现提示快照很久没有更新过了,感觉好奇怪,爱站工具查询出来的明明是天天有更新。后面就想来教研室发个贴问候一下,但在今天中午我去百度一下SITE我的域名  发现快照显示13号,明明有更新,但SEOWHY的工具查询却是没有更新的,于是我带着好奇心点了一下百度快照,进去一看,内容居然是5月初刚进行改版那天的内容,这时候才恍然大悟。网站的内容在百度快照中的缓存没有及时更新,毫无疑问就只得去投诉快照了,不过有没有效果现在还不知道。死马当活马医吧

下午闲来无事,去服务器查看了一下IIS日志,发现日志中百度蜘蛛抓取的频率并没有减少,但收录和快照却是很纠结的。仔细观察一下才发现,蜘蛛老在抓取网站改版之前留下的残余路径,也就是我们说的死链接。虽然说我做了404页面,但蜘蛛它还是老纠结着这些死链接来抓取,这时候才发现IIS日志真的是有必要看的。这样还不够,又去看了一下robots文件,打开一看很多需要屏弊的地方没做好,所以就在robots里面又把刚才在IIS日志中发现蜘蛛抓取的那些路径都给加上了,但愿它明天来的时候不要再去抓取那些链接了。