重復內容對搜尋引擎優(yōu)化SEO的影響很多時候被誤解，對排名的影響低估了。有些人說 “重復內容” 會引致被搜尋引擎懲罰 Search Engine Penalty。最近人說：想在網(wǎng)頁內利用 CSS 設定不同的桌面和手機排版布局，有需要將同一段內容重復，會否因重復內容而被搜尋引擎懲罰？搜尋引擎是不會簡單對有重復內容的網(wǎng)頁懲罰。所謂懲罰是指搜尋引擎公司將該頁面從索引數(shù)據(jù)庫中抽走。網(wǎng)站的內重復內容更多情況是影響搜尋排名的質量評分令，排名下降。

重復內容是互聯(lián)網(wǎng)上常態(tài)

首先互聯(lián)網(wǎng)的世界就是充責著很多很多的重復內容。有些針對重復內容研究說 20% – 30% 左右。例如：

當某網(wǎng)頁引用其他網(wǎng)站的內容時，不免會重復對方網(wǎng)頁上的一些內容。

又例如：當 Donald John Trump贏出成為美國總統(tǒng)，很多媒體都可能是直接抄襲引用官方的生平簡介。

網(wǎng)店很多時候亦會出現(xiàn)重復內容，例如：相同的產(chǎn)品描述出現(xiàn)在該產(chǎn)品頁和產(chǎn)品分類下的該產(chǎn)品頁。只要URL網(wǎng)址不同搜尋引擎就可能看成不同的頁面。這種情況下的重復對SEO排名是非常不利的，要使用rel=“canonical”來處理。

更普遍的例子是同一網(wǎng)站支援加密連線HTTPS和非加密連線HTTP,由于HTTP和HTTPS被搜尋引擎看作不同網(wǎng)址，所以亦可看作重復內容。這種情況下的重復對SEO排名亦是非常不利。

何為搜尋引擎懲罰？

搜尋引擎是不會簡單對有重復的內容的網(wǎng)頁懲罰處理，原因是普通用戶難以消除重復的內容。搜尋引擎旨在懲罰那些存心操縱SEO排名的人，而不是那些無心犯錯誤的普通用戶。所謂懲罰是指搜尋引擎公司將該頁面從索引數(shù)據(jù)庫 Indexing Database 中抽走，導致搜尋用戶不可能從任何搜尋查詢中找到該網(wǎng)頁。再進一步 (在極端的情況下) ，當整個網(wǎng)站被懲罰時搜尋引擎公司會將該網(wǎng)站的全部網(wǎng)頁從索引數(shù)據(jù)庫中抽走，導致搜尋用戶不可能從任何搜尋查詢中找到該網(wǎng)站的任何網(wǎng)頁。搜尋引擎發(fā)現(xiàn)網(wǎng)頁或網(wǎng)站涉及不當?shù)娜藶椴倏厮褜そY果排名，而將網(wǎng)頁原應有的排名為下調，亦一般被視作搜尋引擎懲罰。

不懲罰不等于搜尋引擎喜歡

搜尋引擎不喜歡重復的網(wǎng)頁內容。理由是：搜尋引擎認為Query Deserves Diversity(QDD)，應份給予搜尋用戶多樣性的搜尋引擎結果頁SERP結果。搜尋引擎認為：對搜尋用戶提出的查詢列出的相同答案 (只是網(wǎng)址不同，內容大致是相同) 是浪費搜尋排名結果頁面。對重復的網(wǎng)頁內容搜尋引擎認為列出一個就足夠了。所以搜尋引擎只會從相同答案中抽取最好 (best similar answer) 的一個網(wǎng)址放入搜尋排名結果頁面，其他相同答案被篩走。而這個篩走結果常常被誤解為搜尋引擎懲罰。

一般只有當網(wǎng)站內容大量是一字一句抄襲其他網(wǎng)站而對用戶毫無價值并且目標是操控 SEO排名時，搜尋引擎才會引入懲罰。

重復內容會損害網(wǎng)站質量評分

網(wǎng)站的內重復的內容更多情況是影響搜尋排名的質量評分。一般相信搜尋引擎亦會對搜尋排名結果就質量進行過濾，這是以前Panda搜尋算法更生做的工作，自Panda 4.2已經(jīng)整合在搜尋引擎的算法內?？梢曌鳛樗褜ひ嬲J為：Query Deserves Quality 的一種類型。所以如果將相同一段內容在同一網(wǎng)頁上重復很多次，質量評分和用戶體驗都自然下降，自然不利搜尋排名。

網(wǎng)站內重復的內容另一種傷害是：如果是本身網(wǎng)站內的網(wǎng)頁內容重復，你希望就目標關鍵字是用網(wǎng)頁A排名，而搜尋引擎可能覺得重復內容網(wǎng)頁B更適合，并使用網(wǎng)頁B在SERP結果。這就是cannibalization關鍵字競食問題。結果導致關鍵字搜尋排名下降。

重復的內容不利搜尋引擎索引

但先前有人說又說不一樣。理由是相同段落一個版本是給桌上計算機，一個是給手機。而當搜尋引擎的索引機械人Googlebots檢索你的網(wǎng)站時，現(xiàn)在身份是扮作桌上計算機。但由于手機瀏覽量已經(jīng)超過桌上計算機，不久將來索引機械人會是扮作手機，這就是所謂Mobile First Indexing。由于索引機械人身份只有一個，所以根本不會看到相同內容。

當搜尋引擎發(fā)現(xiàn)兩個網(wǎng)頁大多是重覆的內容時、搜尋引擎可能會選擇放棄索引被視為重復的內容的網(wǎng)頁。例如：一個客戶網(wǎng)站是銷售洗衣器，產(chǎn)品分為電解水 、超聲波、旋渦等。基本的產(chǎn)品內容是相同的。搜尋引擎會選擇放棄其中兩個。解決方法是在中繼描述 Meta Description 中加入屬性資料，使內容不被視為重覆的內容。當然，在網(wǎng)店中洗衣器屬性是否應設置為產(chǎn)品項目又是另一回事。

如何檢查網(wǎng)站內重復的內容？

網(wǎng)站太多重復的內容不利搜尋排名。理由是：搜尋引擎會覺得網(wǎng)站質量不好。有些工具例如：siteliner可以幫助檢查重復內容。

其他網(wǎng)站抄襲內容

重復的內容最大的傷害是其他網(wǎng)站抄襲你的內容，而導致搜尋引擎因為QDD 篩走你的原創(chuàng)內容而不是抄襲者的內容。了解搜尋引擎從一籃子相同內容，但不同網(wǎng)址中以什么條件篩選最好網(wǎng)頁，可能有助你跳過冗長DMCA上訴程序將抄襲者擊敗。其中一個條件當然是網(wǎng)站權威性。原創(chuàng)性不是搜尋引擎的主要考慮，所以發(fā)布日期更先者不一定被篩選出來。理由搜尋引擎認為后發(fā)布者可能對內容有所改進而值得被篩選出來。這是Query Deserves Freshness的概念。加入結構描述schema可能有點幫助但亦非絕對。

多語言版本做成的重復內容

對于一些服務全球的網(wǎng)站，網(wǎng)站有多語言版本，例如：英文、中文正體、中文簡體等等。甚至乎中文正體亦可能由于某些原因有不同的版本。例如：一個酒店集團管理的酒店網(wǎng)絡遍布中國、臺灣、香港、馬來西亞，網(wǎng)站內容可能會針對不同地區(qū)就內容上稍作調整。比如香港和臺灣版本內容基本一樣，但為了更佳的用戶體驗，之間只是詞匯稍作本地化改動。但搜尋引擎可能會認為臺灣和香港是重復的內容。

一種做法是通過hreflang標記通知搜尋引擎不同語言版本的語言代碼和網(wǎng)址。好處是：搜尋引擎不會認為不同語言版本是重復內容搜尋引擎當成功判斷搜尋用戶的來源地后，能將適合的語言版本列出在搜尋排名結果頁面中。

在上面的例子中，頁面告訴搜尋引擎還有有英文版本(hreflang=”en”)、中文正體 (hreflang=”zh-Hant”)、中文簡體 (hreflang=”zh-Hans”) 和韓文 (hreflang=”ko”) 版本。