河南22选5开奖规则

成都seo博客

蔡江博客

robots协议最容易忽略的小细节

作者:choi 日期:2019-03-03 16:17 浏览:

  在我看来robots协议就是站长行使网站支配权的执行文件,这是我们作为站长最基本的权利。它是搜索引擎蜘蛛爬取网站之前要面对的第一道关口,所以robots协议的重要性也是可想而知了。都说细节决定成败,那么越重要的东西细节就 […]

  在我看来robots协议就是站长行使网站支配权的执行文件,这是我们作为站长最基本的权利。它是搜索引擎蜘蛛爬取网站之前要面对的第一道关口,所以robots协议的重要性也是可想而知了。都说细节决定成败,那么越重要的东西细节就显得尤为重要,往往自己一不小心忽略的一个细节到最后就可能会成为你的致命一击。本人之所以会这么说,是因为我差点就成了这个问题的反面教材了,还好发现的及时也算是亡羊补牢吧!之所以想立即分享给大家,就是希望大家以后自己做站的时候要避免犯类似的错误。

  事情其实就发生在今天,经过是这样的:因为重庆SEO博客也刚做好不久,前几天网站上线之后发现还有很多小问题需要处理,为了避免网站还在调整的过程中就被搜索引擎抓取到,所以我在robots协议里面写了禁止所有搜索引擎爬取网站任何部分的指令,网站的调整一直?#20013;?#20102;几天(之所以会弄这么长时间是因为我是一个不能容忍瑕疵的人,不知道这算不算强迫症的一种),直?#38454;?#22825;也就是2月3号才全面竣工,但是这期间我每天都在坚持添加原创文章。昨天网站检查完?#24076;?#20840;部问题都解决好以后,我就把robots协议重新更换了过来,并且发了一篇帖子引了蜘蛛希望爬虫能快点过来爬我的网站。就这样,到了今天早上发现网站还是没有被?#31456;跡?#20110;是我就去百度站长工具?#25945;?#30475;一下我的网站到底是个什么情况,进去一看吓我一跳,因为我看到了下面一则(如图所示)信息:

  我的网站竟然对百度进行了全面封禁,检测时间是在今天(2月4号)早上凌晨5点整的时候,这让我像丈二的和尚摸不着头脑了,太不科学了,因为我在昨天2月3号上午已经把网站的robots协议更改过来了,真的是太奇怪了。就在我百思不得其解的时候总算是通过站长?#25945;?#24037;具的“robots检测”找到了答

  原来百度蜘蛛早就在我网站蜘蛛上线后的第三天抓取了我网站的robots协议,所以当前生效的协议也就是当时它抓取到的我把蜘蛛全部屏?#38382;?#30340;那个,而本站最新的robot协议还没有生效。这下?#26131;?#31639;是明白了过来了,既然弄清楚了原因那事情就好办了。于是我立即把协议提交更新了一下


文章来源?#20309;?#30693;
文章标题:robots协议最容易忽略的小细节
本文地址:http://www.kxspq.tw/seo/5813.html
相关文章
「网站SEO优化」?#27809;?#36716;化率才能体现网络推广的价值 「网站SEO优化」?#27809;?#36716;化率才能体现网络推广的价值

网络营销占据了大半营销市场,传统营销的渠道能够给企业带来的效益变得越来越多,现如今做好网络营销才能够真正帮助企

成都SEO要抓住?#27809;?#30340;痛点,并达成共识! 成都SEO要抓住?#27809;?#30340;痛点,并达成共识!

做网络优化推广的时候,要想从搜索引擎中获得更多的?#27809;?#27969;量,这就需要各位站长找到?#27809;?#30340;痛点,?#39029;?#21738;些东西是?#27809;?#26368;

哪种类型的网站建设才会受?#27809;?#30340;喜爱? 哪种类型的网站建设才会受?#27809;?#30340;喜爱?

随着网络营销的不断发展,很多传统的营销模式?#23545;?#36798;不到人们的需求,因此做网站建设的企业也会变得越来越多,同时现今

网站降权是由哪些因素导致的呢? 网站降权是由哪些因素导致的呢?

相信很多seoer对网站降权这个词并不?#21543;?#22240;为这都是所有的站长最不愿因看到发生的事情。如果网站被降权,那么就会导致

网站优化过度?怎么判断网站关键词是否有堆砌? 网站优化过度?怎么判断网站关键词是否有堆砌?

我们都知道,网站过度优化会给网站排名带来很严重的影响,轻则网站被降权,重则网站被K,相信这是很多站长都十分不愿

浅析SEO如何规避可能存在的风险 浅析SEO如何规避可能存在的风险

在做网站优化的时候,要想网站能够在搜索引擎上有一个较好的排名,需要考虑到的因素有很多,同时还需了解可能预见的一

网站权重如何快速提升,了解这些方法,或许有帮助 网站权重如何快速提升,了解这些方法,或许有帮助

我们来评判一个网站,首先查看网站权重,权重越高,代表网站质量越好,我们在优化过程中如何快速提升网站权重? 网站权

促进新网站内页?#31456;?#30340;技巧分析 促进新网站内页?#31456;?#30340;技巧分析

一个新站做网站优化,多久时间才能够让内页?#31456;?#21602;?对于一个网站的站长来说,网站的?#31456;?#36895;度与数量对网站是有很大影响

为何他人网站seo排名好,而你的却不愠不火? 为何他人网站seo排名好,而你的却不愠不火?

如今,从事搜索引擎优化的企业有很多,很多行业的优化竞争变得越来越大。如今很多企业网站都会出现关键词排名坐不上首

响应式的网站对网络SEO?#24515;?#20123;优势? 响应式的网站对网络SEO?#24515;?#20123;优势?

随着网络时代的高速发展,现今网络市场?#24076;?#31227;动端的?#27809;?#27969;量早已超越了PC端,因此会有很多企业开始重视移动端的网络营

  • 精彩推荐
  • 最近发布
分享到:
Copyright © 2016-2021 「蔡江博客」版权所有
蜀ICP备15028159号  
网站地图 | 技术支持:点瑞网络
河南22选5开奖规则 庆南fc对全北现代 外围广东快乐10分 湖北快3爱彩乐 全民欢乐捕鱼好玩吗 山西麻将牌九玩法 09年12生肖幸运数字 重庆时时彩技巧 重庆时时彩开奖历史 pc蛋蛋幸运28预测 好多糖果免费试玩