?
seo培訓
關注微信公眾號
隨時掌握最新SEO技術

seo實戰培訓

報名咨詢客服QQ:2287933288

網站優化咨詢QQ:804079888

SEO如何避免蜘蛛陷阱

ID:438

作者:seo培訓  來源:未知  2020-03-18 09:47

    對于SEO來說,有一些網站設計技術對搜索引擎來說很不友好,不利于蜘蛛爬行和抓取,這些技術被稱為蜘蛛陷阱。那么常見的蜘蛛陷阱到底包括那些呢?
 
  FlaSh
 
      在網頁的某一小部分使用Flsh增強視覺效果是很正常的,比如用Flash做成的廣告、圖標等。這種小Flash和圖片是一樣的,只是HTML代碼中的很小一部分,頁面上還有其他以文字為主的內容,所以對搜索引擎抓取和收錄沒有影響。
 
      但是有的網站整個首頁就是一個大的Flash文件,這就構成了蜘蛛陷阱。搜索引擎抓取的HTML代碼只有一個連向Flash文件的鏈接,沒有其他文字內容。搜索引擎是無法讀取Flash文件中的文字內容和鏈接的。這種整個就是一個大Flash的網站,可能視覺效果做得精彩異常,可惜搜索引擎看不到.不能索引出任何文字信息,也就無從判斷相關性。
 
  SessionID
 
  搜索引擎蜘蛛的每一次訪問也會被當成一個新的用戶,URL中會加上一個不同的sessionID,這樣搜索引擎蜘蛛每次來訪問時所得到的同一個頁面的URL將不一樣,后面帶著一個不一樣的sessionID。這也是常見的蜘蛛陷阱之一。
 
  搜索引擎遇到這種長長的SessionID,會嘗試判斷字符出是SessionID還是正常參數,成功判斷出SessionID就可以去掉SessionID,收錄正常URL。但也經常判斷不出來,要么不愿意收錄,要么收錄多個帶有不同SesionID的URL,內容卻完全一樣,形成大量復制內容,這兩種情況對網站優化都不利。
 
  各種跳轉
 
  有些網站用戶訪問首頁時會被自動轉向到某個目錄下的頁面。如果是按用戶地理位置轉向至最適合的目錄,那倒情有可原。但大部分這種首頁轉向看不出任何理由和目這樣的轉向能避免則避免。
 
  框架結構
 
  使用框架結構設計頁面,在網站誕生初期曾經挺流行,因為對網站的頁面更新維護有一定方便性。不過現在的網站已經很少使用框架了,不利于搜索引擎抓取是框架越來越不流行的重要原因之一。對搜索引擎來說,訪問一個使用框架的網址所抓取的HTML只包含調用其他HTML文件的代碼,并不包含任何文字息,搜索引擎根本無法判斷這個網址的內容是什么。
 
  雖然蜘蛛可以跟蹤框架中所調用的其他HTML文件,但是這些文件經常是不完整的頁面,比如沒有導航只是正文。搜索引擎也無法判斷框架中的頁面建容應該屬于王框架,還是屬于框架調用的文件。
 
   動態URL
 
    動態URL指的是數據庫驅動的網站所生成的、帶有問號、等號及參數的網址。目前搜素引擎抓取動態ULR都沒有任何問題,但一般來說帶有過多參數的動態URL還是不利于搜索引擎蜘蛛爬行,也不利于用戶體驗,應該盡量避免。后面對動態URL及其靜態化還有更詳細的討論。
 
  JavaScript鏈接
 
      據我觀察,雖然有的搜索引擎在技術上可以獲得JavaScript:腳本中包含的鏈接,甚至可以執行腳本并跟蹤鏈接,但對一些權重比較低的網站,搜索引擎覺得沒有必要,不會費那個勁。所以網站上的鏈接必須使用最簡單標準的HTML鏈接,尤其是導航系統。用CSS做導航系統一樣可以實現很多視覺效果。
 
     JavaScript鏈接在SEO中也有特殊用途,那就是站長不希望被收錄的頁面(比如沒有排名意義的頁面,重復內容頁面等),不希望傳遞權重的鏈接,可以使用JavaScript腳本加上robots文件阻擋搜索引擎爬行。
 
  要求登錄
 
  有些網站內容放在需要用戶登錄之后才能看到的會員區域,這部分內容搜索引擎無法看到。蜘蛛不能填寫用戶名、密碼,也不會注冊。
 
  強制使用CookieS
 
      有些網站為了實現某種功能,如記住用戶登錄信息、跟蹤用戶訪問路徑等,強制用戶使用CookieS,用戶瀏覽器如果沒有啟用CookieS,頁面顯示不正常。搜索引擎蜘蛛就相當于一個禁用了CookieS的瀏覽器,強制使用Cookie只能造成搜索引擎蜘蛛無法正常訪問。
 
  

<<SEO網站結構優化 SEO禁止抓取與收錄機制>>

天蛛網絡專注 SEO培訓 ,大量學員已受益。

從建站到seo優化,一站式培訓,歡迎您來參加。報名QQ:2287933288。

? ? ?
seo實戰培訓
? 黄网站色视频免费毛片