重復的內容是兩個或多個包含相同或非常相似文本的頁面。重復的內容會分割鏈接權限，從而削弱頁面對自然搜索結果進行排名的能力。

假設一個網(wǎng)站有兩個相同的頁面，每個頁面都有10個外部入站鏈接。該網(wǎng)站本可以利用20個鏈接的強度來提高單個頁面的排名。而是，該站點有兩個包含10個鏈接的頁面。兩者都不會排名很高。

重復的內容還會損害抓取預算，否則會使搜索引擎的索引膨脹。

電子商務網(wǎng)站創(chuàng)建重復的內容。它是平臺設置和技術決策的副產(chǎn)品。以下是從搜索引擎索引中刪除重復內容的兩種好方法  -以及避免的六種方法。

一、刪除索引重復內容

要更正編入索引的重復內容，（i）將鏈接權限合并到單個頁面中，以及（ii）提示搜索引擎從其索引中刪除重復的頁面。有兩種好的方法可以做到這一點。

（1）301重定向是最好的選擇。301重定向以合并鏈接權限，提示取消索引，還將用戶重定向到新頁面。Google已聲明，它使用301重定向將100％的鏈接權限分配給新頁面。但是必應和其他搜索引擎的口碑更為嚴格。無論如何，僅當頁面已被永久刪除時，才使用301重定向。

（2）規(guī)范標簽。“規(guī)范”是一個被認為是唯一真理的花哨詞。在搜索引擎優(yōu)化中，規(guī)范標簽可識別應為哪個頁面建立索引并分配鏈接權限。標簽是對搜索引擎的建議，而不是諸如301重定向之類的命令。搜索引擎通常會使用規(guī)范標簽來真正復制內容。

當（i）301重定向不切實際或（ii）重復頁面需要保持可訪問性時，例如，如果您有兩個產(chǎn)品網(wǎng)格頁面，一個從高到低排序，另一個低-至高，您不想將一個重定向到另一個。

二、避免的8種方法

根據(jù)我的經(jīng)驗，建議不要使用某些選項（或聲稱要刪除）從搜索索引中重復的內容。

（1）302重定向信號。表示臨時移動而非永久移動。多年來，Google一直說302重定向通過了100％的鏈接授權。但是，302不會提示取消索引。由于它們執(zhí)行與301相同的工作量，因此僅當重定向確實是臨時的并且有朝一日將被刪除時，才應使用302重定向。

Google認為JavaScript重定向是有效的，經(jīng)過幾天或幾周才能完成渲染。但是沒有理由使用JavaScript重定向，除非您缺乏301的服務器訪問權限。

（2）網(wǎng)頁加載速度。在瀏覽器加載新頁面之前，購物者可以在屏幕上看到短暫的提示或幾秒鐘的頁面加載，從而看到元刷新。由于令人討厭的用戶體驗以及Google需要將它們作為重定向處理的渲染時間，因此，它們是一個糟糕的選擇。

（3）404錯誤。顯示請求的文件不在服務器上，提示搜索引擎對該頁面進行索引刪除。但是404也會刪除頁面的關聯(lián)鏈接權限。如果可以，請嘗試301重定向已刪除的頁面。

當服務器302將錯誤的URL重定向到看起來像錯誤頁面的URL時，就會出現(xiàn)軟404錯誤，然后該錯誤頁面將返回200 OK服務器標頭響應。例如，例如example.com/page/已被刪除，應返回404錯誤。相反，它302重定向到看起來像錯誤頁面的頁面（例如www.example.com/error-page/），但返回200 OK響應。

302響應無意中告訴搜索引擎www.example.com/page/已經(jīng)消失，但可能會回來，因此該頁面應該保持索引。此外，200響應告訴搜索引擎www.example.com/error-page/是用于索引的有效頁面。因此，軟404不僅導致索引了一個錯誤的URL，而且還導致了兩個錯誤，從而使索引進一步膨脹。

（4）搜索引擎工具。 Google和Bing提供了刪除URL的工具。但是，由于兩者都要求提交的URL返回有效的404錯誤，因此從服務器刪除頁面后，這些工具是備份步驟。

（5）Meta robots noindex標記  位于HTML文件的開頭。該NOINDEX屬性告訴漫游器不要對網(wǎng)頁進行索引。在將頁面編入索引后應用時，它最終可能導致取消索引，但這可能要花費幾個月的時間。不幸的是，鏈接授權因引擎索引頁面的能力而消失。并且由于搜索引擎必須繼續(xù)爬網(wǎng)頁面以驗證noindex屬性是否仍然存在，因此該選項不會減少索引的靜態(tài)頁面。（請注意，順便說一句，meta robots標記的nofollow屬性對該頁面的索引沒有影響。）

（6）Robots.txt disallow  不會提示取消索引。被索引的頁面不允許再被搜索引擎機器人抓取，但是它們可能會或可能不會保持索引。除非通過URL搜索，否則這些頁面不太可能出現(xiàn)在搜索結果中，因為搜索引擎將不再抓取該頁面。

雖然他們不是理想的去除索引內容，薈萃機器人NOINDEX和的robots.txt 不允許既要防止被索引新的重復內容。但是，其應用要求在啟動新站點之前識別重復的內容，并且它們并不是100％有效的。

如果您需要確定的取消索引方法，最好的選擇是301重定向或404錯誤，因為服務器不再加載該頁面上找到的內容。如果您需要為頁面取消索引并利用鏈接權限，請使用301重定向。