-
Sep4日
-
很久不曾自己写内容,冷弦个人平常比较懒散,基本上不写东西,都是看到哪个好复制过来留作备忘,最近无意中发现快速更新快照并改变SITE不在首页第一的现象,暂时自己经过试验可用,没有得到专家级的正是认证,欢迎提出个人意见。
近期公司网站改版,由于有5个子公司的独立网站加一个整合网站总共6个网站和一个论坛,由于是外包制作,网站大体成型后就挂到服务器上开始测试修改,但是网站制作公司并没有考虑网站SEO方面的问题,网站结果比较混乱,由于我的失误并没有及时使用robots.txt文件禁止搜索引擎收录,也就是因为这个原因,等有一天想起这个问题的时候已经出现4个站点被百度降权,都是首页SITE不在首页第一,快照停止更新。(注明的是,这7个网站都被搜索引擎收录,由此可见现在搜索引擎收录的效率比较高,没有提交就主动收录)
发现这个情况后就紧急处理,首先想打的方法是用robots.txt禁止所有搜索引擎收录,主要防止新站刚上线就被K,那就糟糕了,毕竟公司很重视,通知网站制作方做好这一工作后,又忙于别的工作也就没再在意,毕竟网站还没有交付也不能做什么。
但是几天以后出现了特别现象,想起用robots.txt禁止收录,想看看有什么效果,发现百度快照竟然更新了,还是最新的,同时SITE也是百度首页第一了,对于此想象感觉比较诧异,就查找了一些资料没有相关记录,也不是robots写错了。所以就琢磨是什么原因让百度更新快照和SITE的,最后把定位点落在robots.txt上,难道是这个文件起作用了?但是不是说是禁止吗?
鉴于上述猜疑,冷弦决定拿一个网站做实验看看到底不是robots的作用,正好此时手中有一个网站眨巴网是新站上线,由于折腾了几次这个网站被百度疑似降权了,现象就是不收录网页,快照消失(没有百度快照),百度首页site不在首页,只需很长时间。
然后就用这个网站做实验,在robots中加入禁止百度索引,静观实验结果,应该是3天后在看的时候百度重新索引了网站首页(也就是说有两个标题不同的首页快照),快照日期变成9月1号,但是软件检测还不显示,在此基础上的第二天再查看软件也已经能检测出来快照了,并且同时site首页第一了,紧接着就是收录从60左右剧增到105,并且收录日期都是8月十几号左右的,这就说明百度已经索引了网站网页,只是没有放出来。
到此这个简单的试验就结束了,由此的出来我个人的总结是:robots在影响百度收录快照方面应该有一定的作用,要不不会同样的现象同时出现在几个网站上,本身robots是禁止收录的却起到这种意想不到的妙用,真是奇迹,也由此说明国内的部分搜索引擎不按照规律出牌的习惯,但是此方法不一定真的准确,欢迎同行人士给出指正,并提出更有利的试验结果。
本文首发冷弦博月 转播请注明出处
一家之言,欢迎同行交流
原创文章请注明转载自冷弦博月,本文地址:http://www.lengxian.org/web/robotsmiaoyong.html


- 评论:(0)
- 引用通告
【已有0位网友发表了看法】点击这里获取该日志的TrackBack引用地址