<b>全自動監控網站關鍵詞排名(Python實現)</b>

作者:Lgo100 來源:未知 2012-04-17 23:33:58 閱讀 我要評論 直達商品

c.setopt(TIMEOUT, 120)

for key in kwargs:

c.setopt(locals()[key], kwargs[key])

c.setopt(URL, url)

c.setopt(WRITEFUNCTION, s.write)

if ‘USERAGENT’ not in kwargs:

c.setopt(USERAGENT, useragent)

if ‘REFERER’ not in kwargs:

c.setopt(REFERER, url)

while 1:

try:

c.perform()

break

except:

if retry:

time.sleep(delay)

else:

return False

return s.getvalue()

  對于簡單的采集瑯縵沔需要用到的下載功能,已經被整合在了這個模塊之中。如User-agent輪換、自動301/302跳轉等、使用當前URL作為REFERER的有些取巧的體例等。這個模塊的代碼可以日后再慢慢理解,此刻只要知道它的用法即可。

  首先到放置Python劇本的目錄,將前面一段代碼保留為curl.py,然后在統一目錄下建樹一個新文件,輸入以下測試代碼:

# -*- coding:utf-8 -*-

import curl

print curl.curl('http://g.cn/') #這樣即下載了一個網頁

#以下是斗勁保險的下載體例,因為各類原因,就算總體很不變的網站也偶然會呈現網頁且則無法打開的情形

#當網頁下載犯錯時,如不美觀retry為True,則會不竭重試,直到下載完網頁

#delay則指定了幾回重試之間的侍舊肅離,以秒為單元

print curl.curl('http://g.cn/', retry=True, delay=1)

#以下用到了一些Curl的參數,具體聲名可見:http://curl.haxx.se/libcurl/c/curl_easy_setopt.html

print curl.curl('http://g.cn/', FOLLOWLOCATION=False, COOKIE='mycookie')


  推薦閱讀

  <b>合格SEOER的白帽操作手冊:SEO效果最大化</b>

巨匠好,我是虛子雨。不知道巨匠對于白帽seo關注度有若干好多,小我因為喜歡進行白帽seo操作,對于這個辭書關注度就斗勁高,而且也倡導我四周的伴侶進行白帽seo,因為黑帽seo有時辰雖然短時刻內有不錯的效不美觀,可>>>詳細閱讀


本文標題:<b>全自動監控網站關鍵詞排名(Python實現)</b>

地址:http://m.sdlzkt.com/a/34/20120417/51890.html

頂一下

樂購科技部分新聞及文章轉載自互聯網,供讀者交流和學習,若有涉及作者版權等問題請及時與我們聯系,以便更正、刪除或按規定辦理。感謝所有提供資訊的網站,歡迎各類媒體與樂購科技進行文章共享合作。

網友點評
我的評論: 人參與評論
驗證碼: 匿名回答
網友評論(點擊查看更多條評論)
友情提示: 登錄后發表評論,可以直接從評論中的用戶名進入您的個人空間,讓更多網友認識您。
自媒體專欄

評論

熱度

主站蜘蛛池模板: 久久亚洲最大成人网4438| 依依成人精品视频在线观看| 久久久久亚洲AV成人无码电影| 成人免费观看视频高清视频| 成人爽a毛片在线视频网站| 日本成人在线网址| 国产成人综合久久亚洲精品| 国产成人免费ā片在线观看老同学 | 国产精品成人自拍| 亚洲精品成人图区| 青青国产成人久久激情91麻豆| 久久婷婷成人综合色| 成人永久免费高清| 四虎影视成人永久在线播放| 草莓视频成人在线观看| 国产麻豆成人传媒免费观看| 久久亚洲精品成人综合| 国产激情一区二区三区成人91| 亚洲国产精品成人综合久久久| 成人看的午夜免费毛片| 91成人试看福利体验区| 免费一级成人毛片| 国产成人综合色视频精品| 久久亚洲精品成人777大小说| 国产一级一级一级成人毛片| 成人免费在线视频| 欧美成人一区二区三区| 国产成人无码一二三区视频| 亚洲成人第一页| 成人午夜免费福利| 欧美国产成人在线| 中文国产成人精品久久app| 成人韩免费网站| 欧美成人免费公开播放欧美成人免费一区在线播放 | 日韩成人免费视频| 69国产成人精品午夜福中文| 亚洲av成人一区二区三区在线观看 | 国产成人一区二区三区视频免费| 国产成人免费ā片在线观看| 国产成人亚洲综合无| 六月丁香激情综合成人|