沒有建好的網頁應返回503狀態碼 避免被百度刪除
發表日期:2013-04-22 瀏覽次數:2342次
近期,百度站長平臺發現有一些網站把未建好的頁面放到線上,并且這些頁面在被百度抓取的時候返回碼是404,于是頁面被百度抓取后,會被當成死鏈直接刪除。但是這個頁面在第二天或者過幾天就會建好,并上線到網站內展現出來,但是由于之前已經被百度當做死鏈刪除,所以要再次等這些鏈接被發現,然后抓取,才能展現,這樣的操作最終會導致一些頁面在一段時間內不會在百度出現。
對于這樣的問題,百度官方建議網站合理使用返回碼,即使用503返回碼,這樣百度的抓取器接到503返回碼后,會在隔一段時間再去訪問這個地址,在您的頁面建好上線后,就又能被重新抓取,保證頁面及時被抓取和索引,避免未建好的內容設為404后帶來不必要的收錄和流量損失。
503返回碼的含義是“Service Unavailable”,百度會認為該網頁臨時不可訪問,通常網站臨時關閉,帶寬有限等會產生這種情況。對于網頁返回503,百度spider不會把這條url直接刪除,短期內會再訪問。屆時如果網頁已恢復,則正常抓取;如果繼續返回503,短期內還會反復訪問幾次。但是如果網頁長期返回503,那么這個url仍會被百度認為是失效鏈接,從搜索結果中刪除。
503狀態碼的設置方法:給需要設置的站點創建獨立的應用程序池,然后把該站點設置來使用這個應用程序池,確保網站能正常訪問,然后單獨關閉該池。那么網站運營的時候就會直接全站報503錯誤。這樣的做法適合短時間臨時關閉全站的網站。