百度蜘蛛的referrer有什么用？

2013-11-18 分類：網站建設

　　百度蜘蛛的referrer是什么來的?在SEO優化中需要站長去留意嗎?今天跟著創新互聯SEO，我們一同來探討這個問題。

百度蜘蛛的referrer

　　百度蜘蛛的referrer，是指當百度蜘蛛訪問網站某一個URL的時候，在HTTP頭中標識的referrer字段。請注意，這個定義和百度最近聲明去除referrer中關鍵詞數據沒有任何關系。

　　對于站長的意義：

　　如果你關心百度從哪個頁面上發現了當前這個URL的話(可以理解為抓取軌跡)，那么這個字段是唯一的參考依據。如果你發現有一批URL報錯(4xx或者5xx)，但是一直找不到入口在哪，也就是說你不明白百度蜘蛛是從哪里發現這些錯誤URL的。這個字段可以幫助你迅速定位。

　　下面看一個具體例子：

　　比如我們的SEO日志分析系統中可以看到，符合下面這種URL Pattern的路徑每天有6萬到10萬的抓取而且全部報404。

百度蜘蛛的referrer

　　從發現問題至今過了1個月，查遍整個網站我也沒找到入口。今天偶然仔細查了一下日志，想起了百度蜘蛛的referrer，馬上就能定位問題了。這些404的URL來自于一套沒人維護也沒人關注的頁面(往往是這樣)。收錄流量都不錯。由于最近公司圖片系統更新，圖片的URL全部更改了，但這套頁面并沒有跟著更新。

　　通過上面的例子，以后如果大家的站點遇到了類似的問題，不妨嘗試通過百度蜘蛛的referrer來試著解決。

聲明：本網站發布的內容（圖片、視頻和文字）以用戶投稿、用戶轉載內容為主，如果涉及侵權請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網站立場，如需處理請聯系客服。電話：028-86922220；郵箱：631063699@qq.com。內容未經允許不得轉載，或轉載時需注明來源：創新互聯

猜你還喜歡下面的內容