*
您的位置:鄭州SEO網站優化 > 網站內部SEO優化 > 內容詳情

網站錯誤的使用robots該怎麽辦

发布时间:2016-08-30 17:02 來源:互聯網 編輯:本站編輯 浏覽次數:20人

在我們開始做SEO優化的時候,就已經認識到一些網站特殊的屬性的應用,比如robots.txt、nofollow標簽、h標簽等等一類的,而robots.txt文件在網站優化也是很重要,同時又是很容易被忽視的一個細節。很多站長在優化過程中過于忽視或者錯誤的設置了robots.txt文件而造成了很多不必要的損失。那麽在網站錯誤的使用了robots該怎麽辦呢?是否有挽回辦法呢?今天就有我憑借自身的經驗來爲大家分享一下我的觀點。

首先要說起我在做這個博客的時候,剛開始建設的時候。我直接是網站上線狀態安裝修改的,因爲之前有一定了解,所以我首先給網站添加了一個robots.txt文件,以此方式在防止在網站沒有完全修改好的情況下被百度抓取到測試改版的頁面。

網站修改了大概半個月的時間,正式上線了,因爲之前填充了足夠的內容,相信百度很快就會收錄,因爲一些其他的工作,也沒有即是的關注博客百度的收錄情況,大概這樣過了三天的樣子,我滿懷喜悅的通過站長工具去查看百度收錄的狀況,當看到收錄爲0的時候整個人瞬間都不好了。因爲網站填充了很多文章,按照這樣的方法應該上線不久就會有很多收錄的。而且文章都是我原創的,相信應該不會是被百度判定爲重複過高的內容或者垃圾內容了,這個時候我馬上查看網站日志,奇迹的一幕發生了,居然沒有蜘蛛來訪問。

通過分析我首先把實現鎖定了robots.txt的設置上,雖然說在網站正式上線的時候我解除了robots的禁止抓取設置,但是百度因爲我網站長時間處于禁止抓取狀態,蜘蛛抓取網站的頻率從而大大的減少,也就是原來一天抓取N次,現在變成可能N天才抓取一次。

找到問題就要想處理辦法:

  1. 修改robots封禁爲允許,然後到百度站長後台檢測並更新robots。
  2. 在百度站長後台抓取檢測,觸發蜘蛛抓取站點。
  3. 將百度站長後台的抓取頻次申請上調。
  4. 更新sitemap網站地圖,並手工提交到百度。
  5. 百度站長後台鏈接提交處設置數據主動推送。
  6. 發布外鏈將引蜘蛛爬行文章頁面,如何建設外鏈在我另一篇文章()

鄭州SEO點評:

通過以上的辦法處理,剩下的就是更新內容與等待收錄了,慶幸的是在兩天後,網站的收錄開始慢慢增加,吊著的小心髒終于落下來了。通過上面的問題提醒大家,robots一定要合理的使用,否則會對網站造成不必要的損失。

未经允许不得转载: »

最新文章

  • 1使用自媒體平台做SEO優化成未來趨勢
  • 2直播都那麽火爲什麽還一直堅持做
  • 3百度將近一個月的瘋狂更新,今天終
  • 4洛陽優化公司教你關于搜索引擎優化
  • 5SEO從業者學習免費自助建站的三個思
  • 6洛陽seo教你怎樣才能做好SEO管理者?
  • 7图片外链有什么用 可以提高网站的排
  • 8驚爆!有關SEO文章收錄的問題,詳情
  • 9數據庫遷移造成網站兩三天內打不開
  • 10新鄉SEO感想篇:SEO基礎五要素回顧
  • 11教你通過逆向思維實施SEO達成目的
  • 12新鄉網站優化網站一直不收錄怎麽辦
  • 13新鄉SEO告訴你網站如何進行圖片搜索
  • 14新鄉SEO告訴你新站怎樣快速獲得百度
  • 15開封裝修公司案例-開封漢東裝飾設計
  • 16開封SEO案例-開封婚紗攝影工作室
  • 17開封SEO案例-蔬菜大棚,大棚骨架
  • 18開封SEO優化案例-開封大衆婚慶公司
  • 19開封優化案例-開封大衆搬家公司
  • 20開封SEO案例-開封美的空調維修