今日,站長之家用戶wxg8899通過新浪博客robots.txt(http://blog.sina.com.cn/robots.txt)文件發(fā)現(xiàn),新浪已經(jīng)在robots.txt文件中設置相關(guān)命令,屏蔽百度的蜘蛛爬蟲,禁止百度蜘蛛獲取網(wǎng)頁信息。這也意味著,通過新浪博客獲取百度外鏈的方式將不可取了。
長期以來新浪博客因其權(quán)重高、收錄快的特點,一直被許多站長視為增加網(wǎng)站外鏈的寶地。新浪博客一度成為了外鏈推廣基地,被站長作為增加外鏈的最好途徑之一。不過這也導致了新浪博客存在大量的軟文和垃圾內(nèi)容。而新浪博客屏蔽百度蜘蛛將有利于改善這一問題,減少無價值內(nèi)容的產(chǎn)生。
進入論壇>>(責任編輯:嫻子)聲明:IT商業(yè)新聞網(wǎng)登載此文出于傳遞更多信息之目的,并不意味著贊同其觀點或證實其描述。文章內(nèi)容僅供參考。新聞咨詢:(010)68023640.推薦閱讀
GoogleGroup論壇用戶克里斯·懷特(ChrisWhite)公布了具體的操作方法。首先,用瀏覽器打開Twitter共享鏈接(http://twitter.com/share?url=),在用戶想要發(fā)表的Twitter信息前加上“url=”,例如“http://twitter.com/s>>>詳細閱讀
本文標題:新浪博客屏蔽百度蜘蛛 百度將無法抓取
地址:http://m.sdlzkt.com/a/01/20111231/237137.html