在我看来robots和谈就是站长利用网站支配权的履行文件，这是咱们作为站长最根本的权力。它是搜索引擎蜘蛛爬取网站之前要面临的第一道关隘，以是robots和谈的重要性也是可想而知了。皆道细节决定成败，那么越紧张的器材细节便 […]
在我看来robots和谈就是站长利用网站支配权的履行文件，这是咱们作为站长最根本的权力。它是搜索引擎蜘蛛爬取网站之前要面临的第一道关隘，以是robots和谈的重要性也是可想而知了。皆道细节决定成败，那么越紧张的器材细节便显得尤为重要，常常本人一不小心疏忽的一个细节到最初便能够会成为您的致命一击。自己之所以会这么道，是因为我差点便成了这个问题的反面教材了，还好发明的实时也算是亡羊补牢吧！之所以念立刻分享给各人，就是愿望各人当前本人做站的时间要制止犯近似的毛病。
工作实在便产生正在明天，颠末是如许的：由于搜索引擎优化也刚做好不久，前几天网站上线之后发明另有良多小问题须要处置惩罚，为了制止网站借正在调剂的进程中便被搜索引擎抓取到，以是我正在robots和谈内里写了制止一切搜索引擎爬取网站任何部门的指令，网站的调剂始终连续了几天（之所以会弄这么长时间是因为我是一个不能容忍瑕疵的人，没有晓得那算不算强迫症的一种），直到昨天也就是2月3号才周全完工，可是那时代我天天皆正在保持增添原创文章。昨天网站搜检终了，悉数问题皆办理好当前，我便把robots和谈从头改换了过去，而且发了一篇帖子引了蜘蛛愿望爬虫能快点过去爬我的网站。便如许，到了明天早上发明网站仍是不被收录，因而我便来百度站长对象平台看一下我的网站究竟是个甚么环境，出来一看吓我一跳，由于我看到了上面一则（如图所示）信息：
我的网站居然对百度停止了周全封禁，检测时间是正在明天（2月4号）早上清晨5点整的时间，那让我像丈二的僧人摸不着头脑了，太没有迷信了，由于我正在昨天2月3号上午曾经把网站的robots和谈变动过去了，真的是太新鲜了。便正在我百思不得其解的时间总算是经由过程站长平台对象的“robots检测”找到了谜底，看
