<b>全自動監控網站關鍵詞排名(Python實現)</b>

作者:Lgo100 來源:未知 2012-04-17 23:33:58 閱讀 我要評論 直達商品

c.setopt(TIMEOUT, 120)

for key in kwargs:

c.setopt(locals()[key], kwargs[key])

c.setopt(URL, url)

c.setopt(WRITEFUNCTION, s.write)

if ‘USERAGENT’ not in kwargs:

c.setopt(USERAGENT, useragent)

if ‘REFERER’ not in kwargs:

c.setopt(REFERER, url)

while 1:

try:

c.perform()

break

except:

if retry:

time.sleep(delay)

else:

return False

return s.getvalue()

  對于簡單的采集瑯縵沔需要用到的下載功能,已經被整合在了這個模塊之中。如User-agent輪換、自動301/302跳轉等、使用當前URL作為REFERER的有些取巧的體例等。這個模塊的代碼可以日后再慢慢理解,此刻只要知道它的用法即可。

  首先到放置Python劇本的目錄,將前面一段代碼保留為curl.py,然后在統一目錄下建樹一個新文件,輸入以下測試代碼:

# -*- coding:utf-8 -*-

import curl

print curl.curl('http://g.cn/') #這樣即下載了一個網頁

#以下是斗勁保險的下載體例,因為各類原因,就算總體很不變的網站也偶然會呈現網頁且則無法打開的情形

#當網頁下載犯錯時,如不美觀retry為True,則會不竭重試,直到下載完網頁

#delay則指定了幾回重試之間的侍舊肅離,以秒為單元

print curl.curl('http://g.cn/', retry=True, delay=1)

#以下用到了一些Curl的參數,具體聲名可見:http://curl.haxx.se/libcurl/c/curl_easy_setopt.html

print curl.curl('http://g.cn/', FOLLOWLOCATION=False, COOKIE='mycookie')


  推薦閱讀

  <b>合格SEOER的白帽操作手冊:SEO效果最大化</b>

巨匠好,我是虛子雨。不知道巨匠對于白帽seo關注度有若干好多,小我因為喜歡進行白帽seo操作,對于這個辭書關注度就斗勁高,而且也倡導我四周的伴侶進行白帽seo,因為黑帽seo有時辰雖然短時刻內有不錯的效不美觀,可>>>詳細閱讀


本文標題:<b>全自動監控網站關鍵詞排名(Python實現)</b>

地址:http://www.sdlzkt.com/a/34/20120417/51890.html

頂一下

樂購科技部分新聞及文章轉載自互聯網,供讀者交流和學習,若有涉及作者版權等問題請及時與我們聯系,以便更正、刪除或按規定辦理。感謝所有提供資訊的網站,歡迎各類媒體與樂購科技進行文章共享合作。

網友點評
我的評論: 人參與評論
驗證碼: 匿名回答
網友評論(點擊查看更多條評論)
友情提示: 登錄后發表評論,可以直接從評論中的用戶名進入您的個人空間,讓更多網友認識您。
自媒體專欄

評論

熱度

主站蜘蛛池模板: 亚洲av无码精品国产成人| 亚洲最大成人网色| 亚洲国产成人久久综合碰 | 亚洲成人网在线观看| 亚洲国产成人久久综合一区| 中文国产成人精品久久app| 色综合天天综合网国产成人| 成人精品一区二区激情| 免费视频成人片在线观看| 一级成人a做片免费| 国产成人亚洲精品无码青青草原| 亚洲AV成人片色在线观看高潮| 成人爽爽激情在线观看| 久久久久成人精品一区二区 | 亚洲a级成人片在线观看| 成人毛片18女人毛片免费| 国产婷婷成人久久av免费高清 | 成人韩免费网站| 免费无码成人片| 国产成人精品实拍在线| 成人自拍视频在线观看| 免费国产成人手机在线观看| 成人a视频高清在线观看| 37pao成人国产永久免费视频| 国产成人av乱码在线观看| 国产成人午夜精华液| 成人免费视频一区二区| 1000部国产成人免费视频| 国产午夜成人AV在线播放| 国产成人精品无码片区在线观看 | 成人性生交大片免费看好| 七次郎成人免费线路视频| 亚洲成人免费网址| 国产成人免费一区二区三区| 国产成人精品免费久久久久| 欧美成人午夜影院| 成人网视频免费播放| 成人自慰女黄网站免费大全| 成人草莓视频在线观看| 成人国产精品999视频| 成人免费视频小说|