我看到幾個常見的錯誤彈出。一個錯誤的設法，索引頁，你應該阻止抓取路徑。有意義的，對不合錯誤?如不美觀你不想要的頁面索引，為什么你會但愿它爬?不幸的是，雖然這聽起來合乎邏輯的，也是完全錯誤的。讓我們來看看一個例子...

　　例如：產物評論

　　假設我們有一個體面的年夜型電子商務網站，與怪異的產物1000頁。這些網頁看起來像這樣：

　　每個產物都有自己的URL頁面，當然，這些網址如下結構：

　　http://www.***.com/product/1

　　http://www.***.com/product/2

　　http://www.***.com/product/3

　　http://www.***.com/product/1000

　　此刻讓我們說，每個這些產物的網頁鏈接到該產物的評論頁：

　　這些審查的網頁也有自己的，怪異的網址(并列產物ID)，像這樣：

　　http://www.***.com/review/1

　　http://www.***.com/review/2

　　http://www.***.com/review/3

　　http://www.***.com/review/1000

　　不幸的是，我們剛剛剝離出1000個一再的網頁，每次評審的頁面是真的只是一種形式，有沒有怪異的內容。這些審查的網頁有沒有搜索價值，只是稀釋我們的索引。是以，我們抉擇是時辰采納步履......

　　“修復”，第1部門

　　我們但愿這些網頁了，所以我們抉擇使用noindex元(元機械人)標簽。因為我們真的，真的要完全頁面，我們也抉擇nofollow的審查鏈接。我們初度考試考試修復竣事，看起來像這樣：

　　概況上，它是有事理的。這佬?罾υ?題，雖然 - 那些紅色箭頭正在削減路徑，可能阻止蜘蛛。如不美觀蜘蛛審查頁面永遠不會回去，他們永遠也讀了NOINDEX，他們不會去索引的網頁。最好的情形下，它會需要很長時刻(已去指數化的時刻太長，對年夜型網站)。

　　修復，第2部門

　　相反，讓我們分開路徑(我們應遵循的鏈接)。這種體例，將繼續爬蟲訪謁的頁面，一再審查的URL應該逐漸消逝蹤：

　　堅持下去，在這個過程中仍然需要一段時刻(周，在年夜年夜都情形下)。看管您的索引(在“site：”操作符)每日 - 你要找的跟著時刻的推移逐漸削減。如不美觀這發生，你是在精采的狀況。PRO提醒：不要采納任何一天的“網站：”算太嚴重 - 它可所以不成靠的，不時。跟著時刻的推移的趨向看。以上內容由 www.guhele.com 飲食攝生網在admin5首發，轉載請保留網址，感謝!