歡迎訪問 珠海seo培訓教程_seo輕松上手學習優化技術教程(www.aubergegb.com)

網站地圖 | 偽原創工具
    珠海大白SEO--用心做好每一個站!

當前位置:主頁 > 網絡推廣 >

robots協議最容易忽略卻很致命的小細節

日期:2019-05-16 分類:網絡推廣

在我看來robots協議就是站長行使網站支配權的執行文件,這是我們作為站長最基本的權利。它是搜索引擎蜘蛛爬取網站之前要面對的第一道關口,所以robots協議的重要性也是可想而知了。都說細節決定成敗,那么越重要的東西細節就 […]

在我看來robots協議就是站長行使網站支配權的執行文件,這是我們作為站長最基本的權利。它是搜索引擎蜘蛛爬取網站之前要面對的第一道關口,所以robots協議的重要性也是可想而知了。都說細節決定成敗,那么越重要的東西細節就顯得尤為重要,往往自己一不小心忽略的一個細節到最后就可能會成為你的致命一擊。本人之所以會這么說,是因為我差點就成了這個問題的反面教材了,還好發現的及時也算是亡羊補牢吧!之所以想立即分享給大家,就是希望大家以后自己做站的時候要避免犯類似的錯誤。

事情其實就發生在今天,經過是這樣的:因為小明SEO博客也剛做好不久,前幾天網站上線之后發現還有很多小問題需要處理,為了避免網站還在調整的過程中就被搜索引擎抓取到,所以我在robots協議里面寫了禁止所有搜索引擎爬取網站任何部分的指令,網站的調整一直持續了幾天(之所以會弄這么長時間是因為我是一個不能容忍瑕疵的人,不知道這算不算強迫癥的一種),直到昨天也就是2月3號才全面竣工,但是這期間我每天都在堅持添加原創文章。昨天網站檢查完畢,全部問題都解決好以后,我就把robots協議重新更換了過來,并且發了一篇帖子引了蜘蛛希望爬蟲能快點過來爬我的網站。就這樣,到了今天早上發現網站還是沒有被收錄,于是我就去百度站長工具平臺看一下我的網站到底是個什么情況,進去一看嚇我一跳,因為我看到了下面一則(如圖所示)信息:

我的網站竟然對百度進行了全面封禁,檢測時間是在今天(2月4號)早上凌晨5點整的時候,這讓我像丈二的和尚摸不著頭腦了,太不科學了,因為我在昨天2月3號上午已經把網站的robots協議更改過來了,真的是太奇怪了。就在我百思不得其解的時候總算是通過站長平臺工具的“robots檢測”找到了答案,看下圖:

原來百度蜘蛛早就在我網站蜘蛛上線后的第三天抓取了我網站的robots協議,所以當前生效的協議也就是當時它抓取到的我把蜘蛛全部屏蔽時的那個,而本站最新的robot協議還沒有生效。這下我總算是明白了過來了,既然弄清楚了原因那事情就好辦了。于是我立即把協議提交更新了一下,如下圖:

更新以后一分鐘內協議就更新過來了,如下圖:

可以看到,當前本站最新的robots已經開始生效了,就這樣到了下午,當我再次進入百度站長平臺就收到了新消息,如下圖所示:

至此網站已經解除了robots協議對百度的全面封禁,檢測時間顯示的是今天下午兩點整。到了晚上也差不多就是在三個多小時以前,當我再次檢查網站收錄情況的時候,網站首頁已經被收錄了。如下圖:

關鍵詞: robots,協議,容易,忽略,致命,細節
blogger

聯系方式

    seo微信

    咨詢熱線①:13924653475

    咨詢熱線②:15361814538

    銷售熱線①:18138295927

    銷售熱線②:15361814016

博客統計

  • 共有文章:1079篇
  • 文章閱讀:132420人次
  • 今日更新:篇
QQ
QQ在線咨詢
SEO優化熱線
1377-3668-165
手機掃一掃 與博主直接溝通
珠海大白SEO有多年的SE0快排優化經驗,豐富技術優化團隊,是你值得托付信賴的網站seo優化排名平臺
sitemap地圖 | 在線投稿
Copyright ? 2002-2017 版權所有

信用卡

輿情處理

輿情

順時科技

NB危機處理

百度負面處理

紅警公關

最新一本书道DVD版