亚洲无人区一区二区三区_农村玉米地少妇野战亚洲_国产欧美日韩VA另类在线播放_免费人成视频网站在线_国产在线精品一区二区高清不卡

什么是SEO優(yōu)化蜘蛛陷阱？搜索引擎蜘蛛陷阱有著怎樣的危害呢？我們又該如何去避免這些蜘蛛陷阱呢？今日就和大家聊聊關(guān)于如何避免SEO優(yōu)化蜘蛛陷阱的那些事兒。

什么是SEO優(yōu)化蜘蛛陷阱？

有一些網(wǎng)站設(shè)計(jì)做的對(duì)于搜索引擎來說很不友好，就導(dǎo)致了不利于蜘蛛的爬行和抓取，其實(shí)這樣就構(gòu)成了一個(gè)蜘蛛陷阱。官方說法，“蜘蛛陷阱”是阻止蜘蛛程序爬行網(wǎng)站的障礙物，通常是那些顯示網(wǎng)頁的技術(shù)方法，目前很多瀏覽器在設(shè)計(jì)的時(shí)候考慮過這些因素，所以可能網(wǎng)頁界面看起來非常正常，但這些蜘蛛陷阱會(huì)對(duì)蜘蛛程序造成障礙，如果消除這些蜘蛛陷阱，可以使蜘蛛程序收錄更多的網(wǎng)頁。SEO工作中，網(wǎng)頁被收錄是基礎(chǔ)工作，但對(duì)于搜索引擎來講，極少情況會(huì)100%收錄你網(wǎng)站的所有網(wǎng)頁，搜索引擎的爬蟲程序設(shè)計(jì)的再精巧，也難以逾越所謂的蜘蛛陷阱。

搜索引擎蜘蛛陷阱有著怎樣的危害呢？

搜索引擎蜘蛛陷阱導(dǎo)致了不利于蜘蛛的爬行和抓取，從而導(dǎo)致網(wǎng)站收錄情況不佳，最終影響網(wǎng)站關(guān)鍵詞排名。

搜索引擎蜘蛛陷阱的主要類別

1、登錄要求

有些企業(yè)站和個(gè)人站的設(shè)置一定要注冊(cè)登錄后才能看到相關(guān)的文章內(nèi)容，這種對(duì)蜘蛛不是很友好，蜘蛛不會(huì)注冊(cè)、也不會(huì)登錄。

2、動(dòng)態(tài)URL

什么叫動(dòng)態(tài)URL、什么叫靜態(tài)URL，簡單的說就是帶有問號(hào)、等號(hào)及參數(shù)的網(wǎng)址就是動(dòng)態(tài)URL，動(dòng)態(tài)URL不利于搜索引擎蜘蛛的爬行和抓取。

3、強(qiáng)制用Cookies

部分站長為了讓用戶記住登陸信息，強(qiáng)迫用戶使用Cookies如果未開啟，則無法進(jìn)行訪問，訪問頁面顯示的也不會(huì)正常，這種方式會(huì)讓蜘蛛無法進(jìn)行訪問。

4、框架結(jié)構(gòu)

首先各位站長你知道什么叫框架結(jié)構(gòu)的世界嗎？如果你不知道恭喜你，這個(gè)蜘蛛陷阱你已經(jīng)躲避了，也不要去了解，所以有關(guān)框架結(jié)構(gòu)的設(shè)計(jì)不做任何的介紹。雖然說框架結(jié)構(gòu)對(duì)網(wǎng)站的維護(hù)和更新有一定的方便性。但是，它不利于搜索引擎蜘蛛抓取。這也就是現(xiàn)在框架結(jié)構(gòu)不流行的因素之一。

5、各種跳轉(zhuǎn)

對(duì)搜素引擎來說只對(duì)301跳轉(zhuǎn)相對(duì)來說比較友好，對(duì)其他形式的跳轉(zhuǎn)都是比較敏感，例如：JavaScrit跳轉(zhuǎn)、MetaRefresh跳轉(zhuǎn)、Flash跳轉(zhuǎn)、302跳轉(zhuǎn)。

有些網(wǎng)站的做法很讓人無奈，當(dāng)你打開網(wǎng)頁后會(huì)自動(dòng)轉(zhuǎn)向其他頁面，就算打開的頁面和你要找的頁面主體先關(guān)也算過得去。但是很大部分的網(wǎng)站轉(zhuǎn)向讓你無任何理由和目的這種轉(zhuǎn)向不推薦大家使用，如果你非要做轉(zhuǎn)向，只推薦用301永久跳轉(zhuǎn)，可以將權(quán)重進(jìn)行傳遞，除了此轉(zhuǎn)向其他都不推薦，因?yàn)楹芏嗟恼加闷渌D(zhuǎn)向欺騙用戶和搜索引擎，也是heimao的一種手段，所以建議大家不要使用，以免網(wǎng)站被K。

6、Flash

有的網(wǎng)站頁面使用Flash視覺效果是很正常的，比如用Flash做的Logo、廣告、圖表等，這些對(duì)搜索引擎抓取和收錄是沒有問題的，很多網(wǎng)站的首頁是一個(gè)大的Flash文件，這種就叫蜘蛛陷阱，在蜘蛛抓取時(shí)HTML代碼中只是一個(gè)鏈接，并沒有文字，雖然大的Flash效果看上去很好，外觀看著也很漂亮，但可惜搜素引擎看不到，無法讀取任何內(nèi)容所以為了能體現(xiàn)網(wǎng)站優(yōu)化的最好效果，不提倡這種Flash做首頁圖片。

7、Javascript鏈接

因?yàn)镴S有很多吸引人們眼球的驚人的各種效果，很多站長呢，就用Javascript腳本做一些導(dǎo)航。其實(shí)，Javascript同樣也是比較嚴(yán)重的蜘蛛陷阱之一。

當(dāng)然，有的搜索引擎是可以獲得Javascript上的鏈接，甚至可以執(zhí)行腳本并跟蹤鏈接。但對(duì)于一些權(quán)重比較低的網(wǎng)站來說，還是大可不必浪費(fèi)時(shí)間，不如多更新一些高質(zhì)量的文章，多做幾個(gè)外鏈。

8、Session ID

如果我們的網(wǎng)站使用Session ID跟蹤用戶訪問，這樣就會(huì)出現(xiàn)一種現(xiàn)象，搜索引擎每一次訪問我們的頁面時(shí)出現(xiàn)一個(gè)不一樣的Session ID，即使訪問的是同一個(gè)頁面，它也會(huì)出現(xiàn)不一樣的ID，但是內(nèi)容卻是一樣的，就形成了大量的重復(fù)性內(nèi)容，這也就形成了一個(gè)蜘蛛陷阱，也不利于網(wǎng)站的優(yōu)化。那么我們通常建議大家使用cookies而不要生成Session ID。

如何避免搜索引擎蜘蛛陷阱？

1、采用session id的頁面，有的銷售類站點(diǎn)為了分析用戶的某些信息會(huì)采用會(huì)話ID來跟蹤用戶，訪問站點(diǎn)的時(shí)候每個(gè)用戶訪問都會(huì)增加一次session id而加入到URL中，同樣蜘蛛的每一次訪問也會(huì)被當(dāng)做為一個(gè)新用戶,每次蜘蛛來訪問的URL中都會(huì)加入一個(gè)session id，這樣就會(huì)產(chǎn)生了同一個(gè)頁面但URL不同的情況，這種的一來會(huì)產(chǎn)生復(fù)制內(nèi)容頁面，造成了高度重復(fù)的內(nèi)容頁，同時(shí)也是最常見的蜘蛛陷阱之一。比如說有的網(wǎng)站的為了提高銷售業(yè)績，而進(jìn)行彈窗會(huì)話等，比如說您好來自XXX地的朋友等。

2、常識(shí)性的蜘蛛陷阱，采用強(qiáng)制注冊(cè)或登錄才能訪問的頁面，這種的對(duì)于蜘蛛來說就相當(dāng)為難了，因?yàn)橹┲霟o法提交注冊(cè)，更無法輸入用戶名和密碼登錄查看內(nèi)容，對(duì)于蜘蛛來說我們直接點(diǎn)擊查看到的內(nèi)容也是蜘蛛所能看到的內(nèi)容。

3、喜歡采用flash的站點(diǎn)，之所以說是喜歡采用flash的站點(diǎn)是因?yàn)閷?duì)于一些中小型企業(yè)來說，因?yàn)閒lash本身可以做很多種效果，尤其是放在導(dǎo)航上視覺效果強(qiáng)，所以不少企業(yè)站喜歡弄個(gè)flash來展示自己公司的實(shí)力，文化，產(chǎn)品等，甚至一些企業(yè)站點(diǎn)的網(wǎng)站首頁就是一個(gè)flash，要么是在多長時(shí)間后通過flash跳轉(zhuǎn)到另外一個(gè)頁面，要么就是通過flash上的鏈接讓用戶自己點(diǎn)擊后進(jìn)入一個(gè)新的頁面，但是對(duì)于蜘蛛來說一來是很難讀取flash中的內(nèi)容，所以蜘蛛也很難點(diǎn)擊flash上的鏈接。

4、動(dòng)態(tài)URL，在url中加入過多的符號(hào)或者網(wǎng)址參數(shù)等，這種蜘蛛陷阱我在url優(yōu)化中曾經(jīng)有提到，雖然說隨著搜索引擎的的技術(shù)發(fā)展，動(dòng)態(tài)url對(duì)于蜘蛛的抓取已經(jīng)越來越不是問題了，但是從搜索引擎友好度上來講，靜態(tài)哪怕是偽靜態(tài)url相對(duì)來說都比動(dòng)態(tài)url要好，可以看下很多SEO同行對(duì)于url中的處理方式。

5、框架，在早期框架到處被泛濫使用，而現(xiàn)在框架網(wǎng)頁很多網(wǎng)站已經(jīng)很少使用了，一是因?yàn)楝F(xiàn)在隨著各大CMS系統(tǒng)的開發(fā)問世，網(wǎng)站維護(hù)相對(duì)也越來越簡單了，早期網(wǎng)站使用框架是因?yàn)閷?duì)網(wǎng)站頁面的維護(hù)有一定的便利性了，現(xiàn)在已經(jīng)大可不必了，而且不利于搜索引擎收錄也是框架越來越少被使用的原因之一。

6、JS，雖然現(xiàn)在搜索引擎對(duì)于javascript里的鏈接是可以跟蹤甚至在嘗試拆解分析的，但是我們最好不要寄望于搜索引擎自己克服困難，雖然說通過js可以做一些效果不錯(cuò)的導(dǎo)航，但是css同樣可以做到；為了提高網(wǎng)站對(duì)搜索引擎的友好度建議使網(wǎng)頁能夠更好的蜘蛛爬行，就盡量不要采用js，當(dāng)然在seo中，js有一個(gè)好處就是站長不希望被收錄的頁面或者友情鏈接可以采用js。還有一種方法可以消除JavaScript 蜘蛛程序陷阱，即使用<noscript>標(biāo)簽。<noscript>標(biāo)簽是為不支持JavaScript 的瀏覽器提供備選的代碼。蜘蛛程序不會(huì)執(zhí)行JavaScript, 因此他們通過處理<noscript>代碼來代替。

7、深層次的網(wǎng)頁，有的網(wǎng)頁沒有入口，而且距離網(wǎng)站的首頁又很遠(yuǎn)，這種頁面就相對(duì)較難被蜘蛛爬行到，當(dāng)然對(duì)于那些權(quán)重高的網(wǎng)站可能會(huì)另當(dāng)別論了。網(wǎng)站的頁面要被收錄，首先要需要基本的權(quán)重，首頁的權(quán)重一般是最高的，然后首頁的權(quán)重是可以傳遞到內(nèi)頁的，當(dāng)內(nèi)部頁面的權(quán)重上升到可以被收錄的門檻，頁面就會(huì)被收錄，按照這種理論，頁面之間的權(quán)重傳遞是會(huì)遞減的，因此，內(nèi)頁和首頁的點(diǎn)擊距離越近，越容易得到更多的首頁權(quán)重傳遞。良好的網(wǎng)站結(jié)構(gòu)可以讓網(wǎng)站更多的頁面被收錄。

8、強(qiáng)制使用cookies，對(duì)于搜索引擎來說是相當(dāng)于直接禁用了cookies的，而有些網(wǎng)站為了實(shí)現(xiàn)某些功能會(huì)采取強(qiáng)制cookies，比如說跟蹤用戶訪問路徑，記住用戶信息，甚至是盜取用戶隱私等，如果用戶在訪問這類站點(diǎn)時(shí)沒有啟用cookies，所顯示的頁面就會(huì)不正常，所以對(duì)于蜘蛛來講同樣的網(wǎng)頁無法正常訪問。

9、各種形式的跳轉(zhuǎn)，對(duì)于301重定向相信很多seo童鞋已經(jīng)非常熟悉了，但是對(duì)于其他302，或者meta refresh，javascript，flash等跳轉(zhuǎn)，蜘蛛是很反感的，而且301也是不到萬不得已的時(shí)候采用，任何跳轉(zhuǎn)都會(huì)在一定程度上給蜘蛛的爬行帶來障礙，所以你懂得。

10、robots.txt書寫錯(cuò)誤和各種各樣的作弊手法，比如說隱藏文字，隱藏鏈接等，采用偽裝網(wǎng)頁在判斷來訪者是蜘蛛還是普通瀏覽器者而顯示不同的網(wǎng)頁，使用默認(rèn)錯(cuò)誤的404頁面等，同樣會(huì)給蜘蛛帶來爬行障礙。

11、要求登錄：有些網(wǎng)站內(nèi)容放在需要用戶登錄之后才能看到的會(huì)員區(qū)域，這部分內(nèi)容搜索引擎無法看到。蜘蛛不能填寫用戶名、密碼，也不會(huì)注冊(cè)。