第PythonPycurl的屬性與方法案例詳解Pycurl包是一個(gè)libcurl的Python接口，由C語(yǔ)言編寫(xiě)的，功能強(qiáng)大，速度快。由于pycurl的屬性和方法太多了，寫(xiě)這篇博文記錄一下pycurl的屬性和方法。

pipinstallpycurl

如果出現(xiàn)問(wèn)題，可以按照系統(tǒng)版本搜索安裝方法，比如centos7.1安裝pycurl

通用請(qǐng)求方法

importpycurl,urllib

fromioimportBytesIO

url=''

headers=[

"User-Agent:Mozilla/5.0(iPhone;CPUiPhoneOS5_0likeMacOSX)AppleWebKit/534.46(KHTML,likeGecko)Version/5.1Mobile/9A334Safari/7534.48.3",

data={

"cityListName":"",

"trade":""

c=pycurl.Curl()#通過(guò)curl方法構(gòu)造一個(gè)對(duì)象

#c.setopt(pycurl.REFERER,'/')#設(shè)置referer

c.setopt(pycurl.FOLLOWLOCATION,True)#自動(dòng)進(jìn)行跳轉(zhuǎn)抓取

c.setopt(pycurl.MAXREDIRS,5)#設(shè)置最多跳轉(zhuǎn)多少次

c.setopt(pycurl.CONNECTTIMEOUT,60)#設(shè)置鏈接超時(shí)

c.setopt(pycurl.TIMEOUT,120)#下載超時(shí)

c.setopt(pycurl.ENCODING,'gzip,deflate')#處理gzip內(nèi)容

#c.setopt(c.PROXY,ip)#代理

c.fp=BytesIO()

c.setopt(pycurl.URL,url)#設(shè)置要訪問(wèn)的URL

c.setopt(pycurl.HTTPHEADER,headers)#傳入請(qǐng)求頭

c.setopt(pycurl.POST,1)

c.setopt(pycurl.POSTFIELDS,urllib.urlencode(data))#傳入POST數(shù)據(jù)

c.setopt(c.WRITEFUNCTION,c.fp.write)#回調(diào)寫(xiě)入字符串緩存

c.perform()

code=c.getinfo(c.HTTP_CODE)#返回狀態(tài)碼

html=c.fp.getvalue()#返回源代碼

printc.getinfo(c.TOTAL_TIME)

GET請(qǐng)求方法

c=pycurl.Curl()#通過(guò)curl方法構(gòu)造一個(gè)對(duì)象

c.setopt(pycurl.FOLLOWLOCATION,True)#自動(dòng)進(jìn)行跳轉(zhuǎn)抓取

c.setopt(pycurl.MAXREDIRS,5)#設(shè)置最多跳轉(zhuǎn)多少次

c.setopt(pycurl.CONNECTTIMEOUT,60)#設(shè)置鏈接超時(shí)

c.setopt(pycurl.TIMEOUT,120)#下載超時(shí)

c.setopt(pycurl.ENCODING,'gzip,deflate')#處理gzip內(nèi)容

#c.setopt(c.PROXY,ip)#代理

c.fp=BytesIO()

c.setopt(pycurl.URL,url)#設(shè)置要訪問(wèn)的URL

c.setopt(pycurl.USERAGENT,ua)#傳入ua

#c.setopt(pycurl.HTTPHEADER,self.headers)#傳入請(qǐng)求頭

c.setopt(c.WRITEFUNCTION,c.fp.write)#回調(diào)寫(xiě)入字符串緩存

c.perform()

code=c.getinfo(c.HTTP_CODE)#返回狀態(tài)碼

html=c.fp.getvalue()#返回源代碼

POST請(qǐng)求方法

c=pycurl.Curl()#通過(guò)curl方法構(gòu)造一個(gè)對(duì)象

c.setopt(pycurl.FOLLOWLOCATION,True)#自動(dòng)進(jìn)行跳轉(zhuǎn)抓取

c.setopt(pycurl.MAXREDIRS,5)#設(shè)置最多跳轉(zhuǎn)多少次

c.setopt(pycurl.CONNECTTIMEOUT,60)#設(shè)置鏈接超時(shí)

c.setopt(pycurl.TIMEOUT,120)#下載超時(shí)

c.setopt(pycurl.ENCODING,'gzip,deflate')#處理gzip內(nèi)容

#c.setopt(c.PROXY,ip)#代理

c.fp=BytesIO()

c.setopt(pycurl.URL,url)#設(shè)置要訪問(wèn)的URL

c.setopt(pycurl.USERAGENT,ua)#傳入U(xiǎn)ser-Agent

#c.setopt(pycurl.HTTPHEADER,headers)#傳入請(qǐng)求頭

c.setopt(pycurl.POST,1)

c.setopt(pycurl.POSTFIELDS,urllib.parse.urlencode(data))

c.setopt(c.WRITEFUNCTION,c.fp.write)#回調(diào)寫(xiě)入字符串緩存

c.perform()

code=c.getinfo(c.HTTP_CODE)#返回狀態(tài)碼

html=c.fp.getvalue()#返回源代碼

windows訪問(wèn)https

windows訪問(wèn)https的方法，需要證書(shū)

importcertifi

c.setopt(pycurl.CAINFO,certifi.where())

獲取網(wǎng)頁(yè)多重跳轉(zhuǎn)之后的地址

c.getinfo(pycurl.EFFECTIVE_URL)獲取網(wǎng)頁(yè)的最終地址

記錄Cookie

c.setopt(pycurl.COOKIEFILE,"cookie_file_etherscan")#讀取cookie

c.setopt(pycurl.COOKIEJAR,"cookie_file_etherscan")#設(shè)置cookie

pycurl的部分API:

pycurl.Curl()#創(chuàng)建一個(gè)pycurl對(duì)象的方法

pycurl.Curl(pycurl.URL,.hk)#設(shè)置要訪問(wèn)的URL

pycurl.Curl().setopt(pycurl.MAXREDIRS,5)#設(shè)置最大重定向次數(shù)

pycurl.Curl().setopt(pycurl.CONNECTTIMEOUT,60)

pycurl.Curl().setopt(pycurl.TIMEOUT,300)#連接超時(shí)設(shè)置

pycurl.Curl().setopt(pycurl.USERAGENT,"Mozilla/4.0(compatible;MSIE6.0