在我們優(yōu)化的過(guò)程當(dāng)中，有一些網(wǎng)站設(shè)計(jì)技術(shù)對(duì)搜索引擎來(lái)說(shuō)是很不討喜歡的。因?yàn)檫@些都不利于搜索引擎蜘蛛的爬行與抓取。下面給大家簡(jiǎn)單的介紹幾種常見的蜘蛛陷阱，希望能幫助些新手SEOer，寫的不好，還要請(qǐng)大家多多支持!
首先搜索引擎最常見的一種陷阱是Flash。在網(wǎng)頁(yè)的某一小部分使用Flash增強(qiáng)視覺效果是和很正常的，比如用Flash做成廣告，圖標(biāo)等。這樣的Flash對(duì)搜索引擎的爬行與抓取是沒有什么影響的。但是，萬(wàn)萬(wàn)不可在首頁(yè)使用一個(gè)大大的Flash文件，因?yàn)檫@樣就形成一個(gè)蜘蛛陷阱。當(dāng)搜索引擎抓取的HTML代碼只有一個(gè)連向Flash文件的連接，沒有其他的文字內(nèi)容。如果Flash效果是必須滴，那也要在首頁(yè)加上一個(gè)通往HTML版本的鏈接。這個(gè)鏈接要在Flash文件之外的HTML代碼中，搜索引擎跟蹤這個(gè)鏈接可以抓取后面的HTML版本頁(yè)面。
再一個(gè)常見的蜘蛛陷阱就是Session ID(會(huì)話ID)。有些網(wǎng)站使用Session ID跟蹤用戶反問(wèn)，每個(gè)用戶訪問(wèn)網(wǎng)站時(shí)都會(huì)生成獨(dú)特唯一的Session ID，加在URL中。搜索引擎蜘蛛的每一次訪問(wèn)也會(huì)被當(dāng)成一個(gè)新的用戶，URL中會(huì)加上一個(gè)不同的Session ID，這樣搜索引擎蜘蛛每次來(lái)訪問(wèn)時(shí)所得到的同一個(gè)頁(yè)面的URL將不一樣，后面帶著一個(gè)不一樣的Session ID也是一個(gè)蜘蛛陷阱。
各種跳轉(zhuǎn)也是蜘蛛陷阱之一，除了301轉(zhuǎn)向以外，搜索引擎對(duì)其他形式的跳轉(zhuǎn)都比較敏感，如：302跳轉(zhuǎn)，JavaScript跳轉(zhuǎn)，F(xiàn)lash跳轉(zhuǎn)，Meta Refresh跳轉(zhuǎn)。有些網(wǎng)站用戶訪問(wèn)首頁(yè)時(shí)會(huì)被自動(dòng)轉(zhuǎn)向到某個(gè)目錄下的頁(yè)面。但大部分這種首頁(yè)轉(zhuǎn)向看不出任何理由和目的，像這樣的轉(zhuǎn)向應(yīng)能勉則勉，不到萬(wàn)不得已，盡量不要使用301轉(zhuǎn)向以外的跳轉(zhuǎn)。
框架結(jié)構(gòu)也可以算是一種蜘蛛陷阱，如果你還在使用框架結(jié)構(gòu)的設(shè)計(jì)，本人菜鳥SEO2014 在這里建議大家立馬停止。不要浪費(fèi)時(shí)間如研究怎么讓搜索引擎去收錄框架結(jié)構(gòu)網(wǎng)站。因?yàn)樗阉饕鏌o(wú)法判斷框架中的頁(yè)面內(nèi)容應(yīng)屬于主框架還是框架調(diào)用的文件。
動(dòng)態(tài)URL不利于搜索引擎蜘蛛爬行，應(yīng)該盡量避免。
JavaScript鏈接可以創(chuàng)造出很多好的視覺效果，但是，這也是一種蜘蛛陷阱。在這里，菜鳥SEO2014 告訴大家，用CSS做導(dǎo)航系統(tǒng)一樣能創(chuàng)造出好的視覺效果，所以，大家可以用CSS來(lái)代替JavaScript，可能會(huì)事半功倍哦!
有些網(wǎng)站內(nèi)容必須用戶登陸之后才能看到，我們可以試著猜想一下，如果是搜索引擎想要抓取該頁(yè)面內(nèi)容呢，難道也要先登陸嗎，要清楚，搜索引擎是不會(huì)填寫登陸資料和注冊(cè)會(huì)員的。所以，我們也要避免這種蜘蛛陷阱的產(chǎn)生
最后給大家介紹一種非常值得大家注意的蜘蛛陷阱，那就是當(dāng)一個(gè)網(wǎng)站為了實(shí)現(xiàn)某種功能，如記住用戶登陸信息，跟蹤用戶訪問(wèn)路徑等，強(qiáng)制用戶使用Cookies,如果用戶的瀏覽器沒有啟用Cookies，頁(yè)面的顯示就會(huì)不正常。這個(gè)問(wèn)題直接就指向了搜索引擎，因?yàn)樗阉饕嬷┲刖拖喈?dāng)于一個(gè)禁用Cookies的瀏覽器，如果強(qiáng)制搜索引擎蜘蛛使用Cookies的話就會(huì)造成無(wú)法正常訪問(wèn)。
溫馨提示:這些蜘蛛陷阱菜鳥SEO2014 在這里嚴(yán)重提醒大家在做SEO的時(shí)候要格外注意，不要讓搜索引擎蜘蛛掉進(jìn)了自己設(shè)置的陷阱之中。我們不能把希望寄托在搜索引擎身上，指望它能自己克服困難，我們能做的是要讓搜索引擎的爬行與抓取工作盡量簡(jiǎn)單容易，大家可千萬(wàn)不要鉆牛角尖哦!)
