說(shuō)起蜘蛛，大家可能就會(huì)想到，會(huì)織網(wǎng)的讓人恐怖的八條腿蜘蛛，這里我介紹的是網(wǎng)路蜘蛛。網(wǎng)路蜘蛛它有自己的個(gè)性和評(píng)判標(biāo)準(zhǔn)。為了提高網(wǎng)絡(luò)排名，我們的網(wǎng)站對(duì)它都是敞開(kāi)大門(mén)等著盼著要見(jiàn)它，它可不是誰(shuí)家都肯隨便光顧的，這要看你的網(wǎng)站合不合他的口味。
說(shuō)白了網(wǎng)絡(luò)蜘蛛就是一個(gè)程序，對(duì)于網(wǎng)絡(luò)蜘蛛的程序來(lái)說(shuō)是有它的特點(diǎn)的，我們應(yīng)該根據(jù)它的特點(diǎn)去研究怎樣去建設(shè)推廣網(wǎng)站，怎樣迎合他的口味把它吸引過(guò)來(lái)，所以你的網(wǎng)站建設(shè)推廣方法要符合蜘蛛的口味，給它喜歡的網(wǎng)絡(luò)食物它才會(huì)一一收集帶走，送 到大本營(yíng)(數(shù)據(jù)庫(kù))去儲(chǔ)備。你的信息才能從大本營(yíng)中搜索出來(lái)。在建設(shè)天下藏品網(wǎng)www.txsc100.com 時(shí)我從中悟到了幾點(diǎn)網(wǎng)絡(luò)蜘蛛的爬行特性，下面我就給大家介紹一下怎樣才能應(yīng)對(duì)好這只網(wǎng)絡(luò)蜘蛛。
蜘蛛口味一，不喜歡深潛
據(jù)統(tǒng)計(jì)數(shù)據(jù)來(lái)看，容量最大的搜索引擎數(shù)據(jù)庫(kù)也只是抓取了整個(gè)互聯(lián)網(wǎng)網(wǎng)頁(yè)的百分之四十左右，最大的原因就是為了避免數(shù)據(jù)數(shù)據(jù)量過(guò)大，影響搜索效率，所以，蜘蛛根據(jù)自己的“習(xí)性”只是抓取那些重要的網(wǎng)頁(yè)，它的評(píng)判依據(jù)就是網(wǎng)頁(yè)鏈接的深度，首先它會(huì)抓取初始網(wǎng)頁(yè)鏈接的所有網(wǎng)頁(yè)，然后再選擇其中一個(gè)鏈接網(wǎng)頁(yè)繼續(xù)抓取，當(dāng)然它不會(huì)無(wú)休止的抓下去，它認(rèn)為淺度鏈接才是優(yōu)質(zhì)的網(wǎng)頁(yè)，這也符合我們考慮問(wèn)題的習(xí)慣，總把重要的東西擺在最前面。
蜘蛛的心聲，在建設(shè)網(wǎng)站或者選擇網(wǎng)絡(luò)模板是時(shí)，要做淺度鏈接，不要做深度鏈接，蜘蛛不喜歡潛的太深。
蜘蛛口味二，喜靜不喜動(dòng)
動(dòng)態(tài)網(wǎng)站是由程序生成的頁(yè)面，維護(hù)比較簡(jiǎn)單，不需要專業(yè)人員去操作，而且交互性比較強(qiáng)，這也是動(dòng)態(tài)網(wǎng)站不斷增多的原因。但是這會(huì)給蜘蛛的抓取帶來(lái)一些麻煩，相對(duì)于動(dòng)態(tài)而言，由于靜態(tài)網(wǎng)頁(yè)沒(méi)有數(shù)據(jù)庫(kù)，的蜘蛛會(huì)直接在頁(yè)面抓取信息，它比較難于處理的是一些腳本語(yǔ)言生成的動(dòng)態(tài)網(wǎng)頁(yè)。尤其是銷(xiāo)售性質(zhì)的一些網(wǎng)站，產(chǎn)品上傳要不斷的生成新的頁(yè)面。網(wǎng)站的發(fā)展趨勢(shì)和蜘蛛的喜好產(chǎn)生了很大矛盾。
蜘蛛的心聲，在建站時(shí)針對(duì)網(wǎng)站的特點(diǎn)，重要的內(nèi)容和固定的信息做成靜態(tài)網(wǎng)頁(yè)，如公司簡(jiǎn)介，聯(lián)系我們。對(duì)于時(shí)常需要發(fā)布商品信息，網(wǎng)站內(nèi)容不斷更新的網(wǎng)頁(yè)，我們可以通過(guò)相應(yīng)的技術(shù)不定期的轉(zhuǎn)化成偽靜態(tài)網(wǎng)頁(yè)。
蜘蛛口味三，取重棄輕，喜新厭舊
蜘蛛在更新收納的網(wǎng)站數(shù)據(jù)時(shí)，不是把整個(gè)網(wǎng)站的網(wǎng)頁(yè)從新抓取一遍，而是判斷網(wǎng)站的更新日期，拿來(lái)同上次抓取的進(jìn)行對(duì)比，如果日期沒(méi)有更新，那么它是不會(huì)去理會(huì)的。
前面提到了，蜘蛛喜歡淺度爬行，那么對(duì)于權(quán)重，和PR值不同的網(wǎng)站她來(lái)的頻率和爬行深淺度是不一樣的，這有它自己的計(jì)算方式。權(quán)重高的網(wǎng)站可能幾小時(shí)甚至幾分鐘就爬行一次，權(quán)重低的幾天甚至半月也不光顧一回。對(duì)于爬行深度，比如你的網(wǎng)站權(quán)重是2，那么它的爬行深度就只到第一層或者第二層鏈接，對(duì)于第三層，第四層它也是不去理會(huì)的。
蜘蛛的心聲，要不斷的更新網(wǎng)站內(nèi)容，讓蜘蛛帶走更多的新鮮數(shù)據(jù)到數(shù)據(jù)庫(kù)。要想蜘蛛爬的更深那就要辛勤耕作，想盡一切辦法提高網(wǎng)站權(quán)重，和PR值，讓蜘蛛來(lái)的更勤，這樣達(dá)到一個(gè)良性循環(huán)網(wǎng)站排名自然會(huì)不斷上升。此文章來(lái)自天下藏品網(wǎng)www.txsc100.com 原創(chuàng)，首發(fā)A5轉(zhuǎn)載請(qǐng)注明出處及鏈接，文責(zé)自負(fù)，尊重原創(chuàng)，謝謝合作!
推薦閱讀
大家好，我是木子成舟。對(duì)于SEO我們每天都會(huì)有站長(zhǎng)分享自己的技術(shù)，其實(shí)技術(shù)這一塊，認(rèn)真的花個(gè)幾個(gè)月研究下就都能摸透，很多人可能就會(huì)覺(jué)得SEO技術(shù)很簡(jiǎn)單，其實(shí)不是的。說(shuō)簡(jiǎn)單其實(shí)SEO真的能夠很簡(jiǎn)單，因?yàn)镾EO就是每>>>詳細(xì)閱讀
本文標(biāo)題：淺談搜索引擎蜘蛛的口味
地址：http://m.sdlzkt.com/a/34/20120209/29197.html
網(wǎng)友點(diǎn)評(píng)
精彩導(dǎo)讀
科技快報(bào)
品牌展示