搜素引擎抓取網(wǎng)站頁面主要靠的是蜘蛛程序也就是我們常說的爬蟲。正是因?yàn)橛辛诉@個程序,我們的網(wǎng)站才能被搜索引擎收錄和查到。做seo,就是把網(wǎng)站設(shè)置的對蜘蛛程序更友好。

那么,網(wǎng)站對搜索引擎蜘蛛不友好的10點(diǎn)因素有哪些呢?
1、動態(tài)url
動態(tài)url就是數(shù)據(jù)庫驅(qū)動的網(wǎng)站所生成的帶有符號、隨機(jī)的url。相比靜態(tài)url,動態(tài)url不利于搜索引擎蜘蛛的爬行及抓取。這也就是網(wǎng)站seo優(yōu)化時需要靜態(tài)化或者偽靜態(tài)化url的原因,因?yàn)楣P者只用過wp,之前也只提到過wp網(wǎng)站seo優(yōu)化如何偽靜態(tài)化url。
2、死鏈
通俗的講,死鏈就是無法打開的鏈接。搜索引擎蜘蛛如果在網(wǎng)站內(nèi)爬行,卻屢屢遭受無法打開頁面的煎熬。顯然,如此一來該網(wǎng)站對于搜索引擎蜘蛛來說正在逐漸的失去信任。
3、各種跳轉(zhuǎn)
這個指的是通過不同的技術(shù)或指令,自動將一個網(wǎng)頁跳轉(zhuǎn)到另一個網(wǎng)頁。目前搜索引擎比較支持的是301跳轉(zhuǎn),但是這往往被黑帽seo所利用,從而導(dǎo)致搜索引擎蜘蛛對其比較敏感。
4、flash動畫
很多網(wǎng)站都會在頁面上添加flash動畫,但是搜索引擎蜘蛛說到底只是一個程序,它不能像人一樣觀看flash動畫的內(nèi)容。雖然搜索引擎一直在這方面努力,但是以目前的搜索引擎蜘蛛技術(shù)還不能完全有效的抓取flash的內(nèi)容。
另外,如果在網(wǎng)站上出現(xiàn)了flash動畫,搜索引擎都建議添加相應(yīng)的文字描述,以便搜索引擎蜘蛛較直觀的了解flash動畫內(nèi)容。
5、js代碼
搜索引擎蜘蛛對抓取js代碼也是比較困難的,大量的js代碼會嚴(yán)重影響搜索引擎蜘蛛抓取的速度。所以,網(wǎng)站seo優(yōu)化時要盡量避免,或者少用js代碼。
6、框架結(jié)構(gòu)
使用框結(jié)構(gòu)設(shè)計(jì)網(wǎng)頁流行于互聯(lián)網(wǎng)誕生初期,但是由于不便于搜索引擎蜘蛛的抓取而被拋棄。在做網(wǎng)站seo優(yōu)化時,應(yīng)當(dāng)完全摒棄框架結(jié)構(gòu),甚至不需要了解它。
7、必須登錄瀏覽網(wǎng)站。很多網(wǎng)站有部分甚至全部內(nèi)容需要注冊登陸后才能瀏覽,大部分社會化媒體(如sns網(wǎng)站、微博等)即是如此。但是搜索引擎蜘蛛不會填寫用戶名密碼,更不會注冊。
8、sessionid
sessionid是為了跟蹤每一位訪問用戶,生成唯一的sessionid,并加在url中。而這種僅僅sessionid不同的url的實(shí)際頁面內(nèi)容是相同的,從而會導(dǎo)致搜索引擎蜘蛛的重復(fù)收錄。
9、強(qiáng)制使用cookies
搜索引擎蜘蛛實(shí)際是禁用cookies的,如果不啟用cookies就無法正常顯示內(nèi)容的話,搜索引擎蜘蛛就無法看見網(wǎng)頁的內(nèi)容。
10、不穩(wěn)定的服務(wù)器
如果網(wǎng)站因?yàn)榉?wù)器的問題經(jīng)常性的無法正常訪問,久而久之,搜索引擎蜘蛛爬到你的域名上卻時常“碰壁”,搜索引擎蜘蛛自然而然的就會認(rèn)為這個網(wǎng)站不靠譜。如此一來,網(wǎng)站也將失去搜索引擎蜘蛛的信任。






