在SEO產業裡待久了,偶而會遇到一些特殊狀況需要處理,例如網站中毒、網站挾持、網站排名消失事件等等,而本次主題是針對網站排名消失事件來進行探討。
網站排名消失的原因
常見以下幾點原因,都有可能導致網站消失或是排名消失
- Robots.txt設定錯誤:相信大家都了解robots.txt的功用,當你網站突然消失時,務必先去檢查你的網站是否在robots.txt檔案上設定了阻擋語法。
註解:「robots.txt檔案」檔案可告知搜尋引擎是否可以存取您網站的某些部份,進而對這些部分進行檢索。
延伸閱讀:robots.txt用途與使用範例教學,釐清SEO收錄觀念! - 伺服器狀況:有時候因為主機本身不穩定,在搜尋引擎蜘蛛來訪時都無法順利及正常打開網頁
- 作弊手法:由於採用了不正當的手法(例如:填塞大量關鍵字、隱藏文字等等),因此嚴重觸犯搜尋引擎的規則,所以被搜尋引擎排除在索引之外。
- 搜尋引擎重大更新:在過去可能使用了灰帽的SEO手法在優化網站,但在新一波的搜尋引擎規則更新中卻是屬於違規事項。
- 網站改版:短期內對網站的改變過於頻繁,或者是網站整個打掉重練,而失去搜尋引擎的信賴度。
延伸閱讀:網站改版,不可輕忽的10個SEO優化項目
網站消失案例一:
網站被Google索引資料庫排除
在2012年的1月份我們發現到,公司自行經營的網站,突然從Google裡的索引庫裡消失了(使用site:domain.com.tw都找不到),在當下我們就先針對網站狀況進行評估,依照上述所提到的部分一點一點去做檢核,robots.txt我們並沒有去設定阻擋搜尋引擎索引,而平時我們就有透過Montastic網站連線追蹤工具,所以想當然爾的網站連線是處於正常連線的狀態,並且在那段時間前後並未進行過網站改版,更沒有使用所謂的SEO作弊手法。
那是什麼原因造成我們的網站被Google排除在索引之外,且只有同一台虛擬主機內的網站出現這樣的狀況,後來我們想到有一種可能性是Googlebot被限制存取此台主機,因此使用反向追蹤的方式去觀察在相同虛擬主機內的其他公司網站是否也有相同情形,利用bing所提供的IP指令(IP:ip位置)去查詢有誰共用此台虛擬主機,再透過site指令來判斷是否也被排除在外,果不其然,其餘網站也出現相同問題,故可大膽的推測是主機商那邊針對了某些IP進行阻擋,而不小心將Googlebot也一併擋掉了。
解決方法
透過反向 DNS 查詢確認該名稱是否屬於 googlebot.com 網域,然後再利用該 Googlebot 名稱進行正向 DNS 查詢。找到Gogolebot的IP位置後再請網站管理員加入許可清單即可。
網站消失案例二:
網站改版後排名在Bing上一蹶不振
在2011年9/15Yahoo自然排序正式轉換為bing搜尋引擎,相信這是大家都知道的新聞,但是在轉換當時並沒有聽到許多的慘案發生,直到去年中,才陸陸續續聽到以及碰到網站改版而造成自然搜尋流量下降、排名消失的慘劇,主要原因就在於網址的架構變動,但是通常我們都會使用301永久轉址來處理這一類的網址變動,但因為Bing搜尋引擎對於網頁索引時301永久性轉址&302暫時性轉址的判讀有額外的看法,所以才造就了這些事件的發生。
解決方法
目前尚未有快速的解決方法,除了做好301永久重定向以及標準連結元素(Canonical link element)設定之外,只能等待Bing慢慢認定你的新網址,以及累積新網址的信任度。
雖然說目前Bing Webmaster tool已有提供網站移動的功能,可以告知Bing網站的網址已變更過,但僅限於網域以及子目錄的移動通知。不過,或許能夠藉由Facebook的分享、按讚來加速累積頁面的權重。
網站消失案例三:
Bing認為此網站與色情相關導致所有頁面消失
最近聽聞到國內的一個大型網站,在一夜之間所有頁面都消失了,僅有將Bing搜尋引擎的安全搜尋模式改為關閉時,才能找到網站,由於Bing搜尋引擎的安全搜尋模式預設為中等,所以會過濾掉成人的內容,故我判斷此網站似乎被認定為色情網站,才導致網站搜尋不到。
該怎麼確定網站被誤判為色情網站?
其實我們可以透過Bing所提供的ip指令查詢,我們可以先了解到我們的鄰居到底有誰,而又有誰有類似的狀況產生。
就發現到此IP底下有一個網域是比較特別的(static.tfn.net.tw),此網域被使用者評定為”不可靠以及兒童安全性差”的等級(WOT工具),所以我又再透過site指令查詢此網域之後,發現到此主機有大量的色情網站內容,或許這就是網站被判定為色情網站的原因之一。因為在搜尋引擎規則中有一條是指”別讓壞鄰居影響你的網站”,舉凡毒品、色情、賭博等非法活動的網站。
是否有其他的可能性?
有的,有時候可能你的網站存放位置是很清白的,但是會被判斷為色情網站時,你就應該要去注意一下外部連結是否被色情、賭博、毒品等非法網站所連結,這時候可以透過open site explorer來查看外部連結到底有那些,其中又有哪些是低品質的連結?
另外一種可能性為圖片或影片與色情有相關,我們來看看Bing是怎麼說的~
Bing 提供安全搜尋設定,允許大多數使用者設定成人內容篩選類型來套用到搜尋結果。在大多數市場中,依預設所有搜尋皆設為「普通」,限制色情圖片的搜尋結果,但不限制色情文字內容。由於當地風俗或文化規範,某些國家 (地區) 可能針對顯示成人內容制定法律限制。因此,成人內容的認定標準可能因市場而異。
解決方法
- 1.換一台信譽優良的主機吧~
- 當你查詢到可疑連結時,可以透過Bing webmaster tool所提供的一項服務”拒絕接受連結”來將一些低品質的網站連結移除。
- 在圖片的處理上,建議將圖片另外分流,採用次網域的方式處理,避免圖片或影片影響到主網域權重,並且採用分散式儲存 OR 負載平衡技術好處在於能有效地降低網站Loading。
※不過就算做了上述的事情,網站能不能夠被判斷為非色情網站這到目前為止都還無法確認~
最後,網站排名消失的原因存在著太多的未知數,除了本文一開始提到的5點以及後續所補充的3點案例之外,尚存其餘的不定因素,當網站真的發生此狀況時,除了四處尋找解決方法之外,還要多多的去嘗試,把有可能的原因都歸納出來,在一項一項地去排除,畢竟搜尋引擎的規則沒有人能夠真正的了解,唯有嘗試與修正才是解決之道。
看完上述內容之後,如果還是無法解開您的問題,歡迎跟awoo聯絡XD