廣州網站優化告訴你必須知道的蜘蛛陷阱

發布時間:2019-10-19 來源:向日葵下载app官方下载廣州網站優化 瀏覽次數:512


對於網站優化老手來說,蜘蛛陷阱肯定是不陌生的,但是對於一些剛剛從事網站優化工作的新手來說,可能還不知道什麽是蜘蛛陷阱。根據百度百科對蜘蛛陷阱的介紹:蜘蛛陷阱是阻止蜘蛛程序爬行網站的障礙物,通常是那些顯示網頁的技術方法,目前很多瀏覽器在設計的時候考慮過這些因素,所以可能網頁界麵看起來非常正常,但這些蜘蛛陷阱會對蜘蛛程序造成障礙,如果消除這些蜘蛛陷阱,可以使蜘蛛程序收錄更多的網頁。

那麽常見的蜘蛛陷阱有哪些呢?

今天向日葵下载app官方下载廣州網站優化告訴你必須知道的蜘蛛陷阱

1、Flash動畫

有的朋友會問,為什麽Flash是蜘蛛陷阱的一種,其實這個問題很簡單,就是因為蜘蛛識別不了Flash,很多網站喜歡在首頁做一個Flash動畫然後再跳向HTML頁麵,用戶可以訪問網站看完片頭後被轉向得真正的HTML網頁。但搜索引擎蜘蛛呢?蜘蛛是不能通過這個Flash跟蹤到HTML版本頁麵的。這就是一個陷阱,阻擋了蜘蛛繼續抓取網站。如果Flash效果是必需的,向日葵下载app苹果廣州網站優化建議在首頁Flash文件之外加上一個通往HTML版本的鏈接,這樣蜘蛛可以跟蹤這個鏈接抓取後麵得HTML頁麵。

2、JS鏈接

Javascript可以創造出很多吸引人得視覺效果,有些網站喜歡使用Javascript腳本生成導航係統。這也是比較嚴重得蜘蛛陷阱之一。蜘蛛對於js也是識別不了的,對於js特效可以加入網站,也可以將不需要被抓取的鏈接放入js,但是需要進行爬行抓取的鏈接一定不能放入JS,這會造成蜘蛛不能繼續爬行,同時js也不要太多,可以專門建一個js文件。

3、 動態URL

向日葵下载app下载安卓說現在蜘蛛是可以抓取部分URL鏈接的,但是動態URL是數據庫直接生成的,有的帶了問號、等號等多個參數。這類網址不僅不利於搜索引擎蜘蛛爬行,而且還可能造成蜘蛛的死循環,這是一個致命的蜘蛛陷阱。所以大多數情況都是建議大家網址靜態化。

4、Session ID

有些網站為了跟蹤用戶訪問使用Session ID,每個用戶訪問網站時都會生成獨特唯一得Session ID,也即ID。這個ID都是加在URL中,搜索引擎蜘蛛的每一次訪問也會被當成一個新得用戶在URL中會加上一個不同的ID,這樣蜘蛛每次來訪問時所得到的同一個頁麵會是一個不一樣的URL。結果就很明顯,這樣一來會產生複製內容頁麵,造成了高度重複的內容頁。

5、Frame框架

框架結構對蜘蛛來說和Flash、js一樣都是一道牆,框架結構也會阻礙搜索引擎蜘蛛的爬行和抓取,讓蜘蛛掉進陷阱。

6、要求登錄

這個是很常見的,有些網站內容放在需要用戶登錄之後才能看到得到,設置有的整個網站隻能登陸進入後才能看,這對於用戶當然沒什麽,而對於蜘蛛就造成陷阱,為什麽?因為蜘蛛不能填寫用戶名、密碼、也不會注冊,自然而然,蜘蛛不能進來抓取你的內容,所以除非是VIP內容或者是不需要蜘蛛抓取的內容,其它的應該對蜘蛛公開,這樣才能抓取。

7、強製使用Cookies

有些網站為了實現某種功能、如記住用戶登錄信息、跟蹤用戶訪問路徑等、強製用戶使用Cookies、用戶瀏覽器如果沒有啟用Cookies、頁麵顯示不正常。搜索引擎蜘蛛就相當於一個禁用Cookies得瀏覽器、強製使用Cookies隻能造成搜索引擎蜘蛛無法正常訪問

8、各種跳轉

目前比較建議的網站跳轉就是301、302重定向,而其它跳轉,蜘蛛是非常的敏感。因為黑帽最喜歡用跳轉這種手段了,黑了別人的網站,然後在別人的網站上掛上一個指向自己網站的跳轉。像js跳轉、代碼跳轉等都不建議大家隨便用,特別是如果在做404頁麵一定要用代碼跳轉,那建議時間在5秒以上。

9、網站鏈接結構

對於蜘蛛而言,向日葵下载app网址最污主要說的就是網站的鏈接結構,其實網站的鏈接結構就等於一個房子,鏈接就是門,而蜘蛛就是向日葵下载app官方下载邀請而來的朋友,網站鏈接結構槽糕混亂就相當於朋友來到你家後根本就分不清楚東南西北,找不到入口出口。連對應的鏈接都找不到,蜘蛛怎麽進行抓爬?所以鏈接結構還是需要呈扁平樹狀結構。

本文由廣州網站優化SEO優化團隊向日葵下载app官方下载網絡整編而成,如需了解更多SEO優化技巧、案例、各種網站優化知識可以聯係廣州網站優化公司向日葵下载app下载安卓網絡專業優化師進行一對一問答

本文地址:廣州網站優化告訴你必須知道的蜘蛛陷阱:http://www.getlivetrends.com/article/93.html

做網站優化選向日葵下载app官方下载網絡

為什麽企業都在做SEO優化?