<b>全自動監控網站關鍵詞排名(Python實現)</b>

作者:Lgo100 來源:未知 2012-04-17 23:33:58 閱讀 我要評論 直達商品

c.setopt(TIMEOUT, 120)

for key in kwargs:

c.setopt(locals()[key], kwargs[key])

c.setopt(URL, url)

c.setopt(WRITEFUNCTION, s.write)

if ‘USERAGENT’ not in kwargs:

c.setopt(USERAGENT, useragent)

if ‘REFERER’ not in kwargs:

c.setopt(REFERER, url)

while 1:

try:

c.perform()

break

except:

if retry:

time.sleep(delay)

else:

return False

return s.getvalue()

  對于簡單的采集瑯縵沔需要用到的下載功能,已經被整合在了這個模塊之中。如User-agent輪換、自動301/302跳轉等、使用當前URL作為REFERER的有些取巧的體例等。這個模塊的代碼可以日后再慢慢理解,此刻只要知道它的用法即可。

  首先到放置Python劇本的目錄,將前面一段代碼保留為curl.py,然后在統一目錄下建樹一個新文件,輸入以下測試代碼:

# -*- coding:utf-8 -*-

import curl

print curl.curl('http://g.cn/') #這樣即下載了一個網頁

#以下是斗勁保險的下載體例,因為各類原因,就算總體很不變的網站也偶然會呈現網頁且則無法打開的情形

#當網頁下載犯錯時,如不美觀retry為True,則會不竭重試,直到下載完網頁

#delay則指定了幾回重試之間的侍舊肅離,以秒為單元

print curl.curl('http://g.cn/', retry=True, delay=1)

#以下用到了一些Curl的參數,具體聲名可見:http://curl.haxx.se/libcurl/c/curl_easy_setopt.html

print curl.curl('http://g.cn/', FOLLOWLOCATION=False, COOKIE='mycookie')


  推薦閱讀

  <b>合格SEOER的白帽操作手冊:SEO效果最大化</b>

巨匠好,我是虛子雨。不知道巨匠對于白帽seo關注度有若干好多,小我因為喜歡進行白帽seo操作,對于這個辭書關注度就斗勁高,而且也倡導我四周的伴侶進行白帽seo,因為黑帽seo有時辰雖然短時刻內有不錯的效不美觀,可>>>詳細閱讀


本文標題:<b>全自動監控網站關鍵詞排名(Python實現)</b>

地址:http://www.sdlzkt.com/a/34/20120417/51890.html

頂一下

樂購科技部分新聞及文章轉載自互聯網,供讀者交流和學習,若有涉及作者版權等問題請及時與我們聯系,以便更正、刪除或按規定辦理。感謝所有提供資訊的網站,歡迎各類媒體與樂購科技進行文章共享合作。

網友點評
我的評論: 人參與評論
驗證碼: 匿名回答
網友評論(點擊查看更多條評論)
友情提示: 登錄后發表評論,可以直接從評論中的用戶名進入您的個人空間,讓更多網友認識您。
自媒體專欄

評論

熱度

主站蜘蛛池模板: A级毛片成人网站免费看| 久久久久成人片免费观看蜜芽| 欧美成人性色xxxxx视频大| 欧美国产成人在线| 成人国产在线24小时播放视频| 成人福利电影在线观看| 欧美成人精品a∨在线观看 | 777奇米四色成人影视色区| 91成人试看福利体验区| 成人欧美一区二区三区黑人免费| 国产v精品成人免费视频400条| 日本成人在线网站| 亚洲国产成人久久综合一区| 欧美亚洲国产成人高清在线| 国产成人精品啪免费视频| 777奇米四色成人影视色区| 成人人观看的免费毛片| 69国产成人综合久久精品91| 国产成人无码精品一区不卡 | 亚洲精品成人片在线观看精品字幕 | 免费成人av电影| 成人免费看www网址入口| 一级毛片成人午夜| 国产成人AV无码精品| 成人爱做日本视频免费| 78成人精品电影在线播放| 亚洲国产成人久久77| 国产成人精品视频一区| 成人小视频免费在线观看| 欧美日韩成人在线观看| 亚洲人成人一区二区三区| 国产成人精品A视频一区| 成人免费看www网址入口| 成人性a激情免费视频| 日本娇小xxxⅹhd成人用品| 91成人免费版| 中文字幕成人免费视频| 91香蕉成人免费网站| 欧美成人免费全部观看天天性色 | 久久久久亚洲av成人无码| 亚洲欧美成人综合|