蜘蛛陷阱指的是不利于搜索引擎蜘蛛爬行和抓取的網(wǎng)站設(shè)計技術(shù)。這些技術(shù)對搜索引擎來說很不友好。我們行內(nèi)稱作為蜘蛛陷阱。常見的蜘蛛陷阱分為下面幾種。
1、Flash
網(wǎng)站上某個小部分使用flash增強視覺效果是沒有問題的,因為這只是眾多html代碼中的一小部分,不會影響搜索引擎正常的文字抓取。但如果整個網(wǎng)站頁面就是一個大的flash文件,就會造成蜘蛛陷阱。這樣的頁面看起來精美結(jié)論,但是對于搜索引擎來說,它們什么都沒有,是空的;搜索引擎并不能在這個頁面中索引出任何文字信息。
2、Session ID
某些網(wǎng)站使用Session ID(會話ID)跟蹤訪問用戶,這會使每個用戶來訪問網(wǎng)站都會生成一個Session ID加在url中。搜索引擎蜘蛛也不例外,每次訪問也會被當(dāng)作新用戶一樣生成一個Session ID,所以搜索引擎蜘蛛每次來訪問同一個頁面的時候url卻不一樣,造成了大量的復(fù)制內(nèi)容。這也是常見的蜘蛛陷阱之一,不利于網(wǎng)站整站營銷。
3、跳轉(zhuǎn)
記住,除了301跳轉(zhuǎn)是搜索引擎所推薦的,其他所有的跳轉(zhuǎn)方式,不管是302跳轉(zhuǎn)、Js跳轉(zhuǎn)還是Flash跳轉(zhuǎn)等等都對蜘蛛爬行不利。所以不到情非得已,千萬不要使用301跳轉(zhuǎn)之外的跳轉(zhuǎn),很容易進(jìn)入蜘蛛陷阱。
4、框架結(jié)構(gòu)
框架結(jié)構(gòu)在網(wǎng)站誕生初期的時候是很流行的,用起來非常的方便,不過現(xiàn)在很少有人用框架了,畢竟它不利于搜索引擎抓取。如果你不知道什么是框架結(jié)構(gòu),那么恭喜你成功的避免了這個蜘蛛陷阱。你也可以忘了這件事,不要浪費時間去研究什么是框架結(jié)構(gòu)。
5、動態(tài)url
動態(tài)url指的是帶有問號、等號等參數(shù)的url,動態(tài)的url不利于搜索引擎蜘蛛抓取,會造成蜘蛛陷阱。不過這是以前的搜索引擎了,現(xiàn)在的搜索引擎對于抓取動態(tài)url沒有太大的問題,但是我們還是盡量避免網(wǎng)站產(chǎn)生大量的動態(tài)url。
6、Js鏈接
Js(java sceipt)可以制造出很多精美的視覺效果,對于用戶欣賞網(wǎng)站有著很好的體驗,不過js跟flash一樣,小部分使用沒有問題,整個頁面都是js就會使得搜索引擎無內(nèi)容可抓取。導(dǎo)致蜘蛛陷阱。
7、要求登錄
某些網(wǎng)站需要用戶登錄才能查看網(wǎng)站內(nèi)容。但是搜索引擎是不會注冊,不會填寫用戶名以及密碼的,所以這部分內(nèi)容搜索引擎也看不到。這也是常見的蜘蛛陷阱之一。
8、強制用戶使用cookies
某些網(wǎng)站為了記住用戶的登入信息、或者用戶訪問路徑等,強制用戶使用cookies。但強制使用cookies會造成搜索引擎蜘蛛無法正常訪問。
p0