第通過python爬蟲mechanize庫爬取本機(jī)ip地址的方法目錄需求分析實現(xiàn)分析實際使用完整代碼演示

需求分析

最近，各平臺更新的ip屬地功能非?；鸨?，因此呢，也出現(xiàn)了許多新的網(wǎng)絡(luò)用語，比如說xx加幾分，xx扣大分等等，非常的有趣啊

可是呢，最近一個小伙伴和我說，仙草哥哥，我也想查看一下自己的ip地址，可是我不會啊，我應(yīng)該怎么樣才能查看到自己的ip地址呢？

關(guān)于如何查看自己的ip地址，這個我記得我在很早之前已經(jīng)寫過了，有興趣的話可以查看一下我的這篇文章，當(dāng)然這次呢，我會換一個復(fù)古的方式，使用mechanize進(jìn)行爬取

實現(xiàn)分析

python中的mechanize算是一個比較古老的庫了，在python2的時代中，使用的多一些，在python3以后就很少使用了，現(xiàn)在已經(jīng)是2202年了，可能很多人都沒聽說過mechanize，這不要緊，我們先來簡單的講解一下，如何使用mechanize

其實，mechanize的使用方法，和內(nèi)置的urllib使用方法非常的相似，也就是說，只要你學(xué)會了如何使用urllib，那么就能夠順利的使用mechanize

首先，我們需要導(dǎo)入mechanize，并且創(chuàng)建一個Browser

importmechanize

browser=mechanize.Browser()

然后通過open方法，直接打開一個網(wǎng)址，這個和urllib中的設(shè)想都是一樣的，也就說，像打開本機(jī)文件那樣，輕松的打開一個遠(yuǎn)程的文件

file=br.open(url)

然后，我們需要通過read()方法，讀取這個文件中的內(nèi)容

content=file.read()

但是需要注意的是，和以二進(jìn)制的方法打開一個文件相似，通過read()讀取得到的內(nèi)容，是二進(jìn)制的形式，必須要通過decode()方法，進(jìn)行解碼

html=content.decode()

當(dāng)然，這個時候可能有的小伙伴要問了，默認(rèn)的user-agent是什么樣的呢？如何修改user-agent呢？其實使用mechanize的時候，設(shè)置user-agent并不困難，只需要通過addheaders就可以了

brower.addheaders=[("user-agent","Mozilla/5.0")]

另外，別忘記了要設(shè)置是否遵守robots.txt協(xié)議，通過set_handle_robots()完成這項設(shè)置

brower.set_handle_robots(False)

這樣，我們的基本操作就已經(jīng)完成了，可以實際使用一下了

實際使用

比如說，我們通過mechanize發(fā)起一個請求

importmechanize

importjson

frombase64importb64decode

br=mechanize.Browser()

url=b64decode("aHR0cDovL2h0dHBiaW4ub3JnL2dldA==").decode()

r=br.open(url).read().decode()

r=json.loads(r)

print("當(dāng)前請求頭：",r["headers"]["User-Agent"])

從這里，我們可以看出，使用mechanize發(fā)起請求的時候，默認(rèn)的請求頭就是urllib，也就是說，這段代碼實際上相當(dāng)于

importjson

fromurllib.requestimporturlopen

frombase64importb64decode

url=b64decode("aHR0cDovL2h0dHBiaW4ub3JnL2dldA==").decode()

r=urlopen(url).read().decode()

r=json.loads(r)

print("當(dāng)前請求頭：",r["headers"]["User-Agent"])

完整代碼演示

那么，下面就是完整的通過mechanize查詢本機(jī)ip地址的方法

importmechanize

importjson

frombase64importb64decode

br=mechanize.Browser()

br.addheaders=[("user-agent","Mozilla/5.0")]

br.set_handle_robots(False)

url=b64decode("aHR0cDovL2h0dHBiaW4ub3JnL2dldA==").decode()

r=br.open(url).read().decode()

r=json.loads(r)

print("當(dāng)前請求頭：",r["headers"]["User-Agent"])

print("當(dāng)前ip地址：",r["origin"])

這個