用requests實(shí)現(xiàn)簡單的客戶端訪問

1、目錄認(rèn)識(shí)requests庫HTTP協(xié)議用urllib實(shí)現(xiàn)簡單的客戶端訪問環(huán)境搭建用requests實(shí)現(xiàn)簡單的客戶端訪問目錄用requests庫發(fā)送請求帶參數(shù)的請求請求的異常處理響應(yīng)的基本API下載圖片和文本文件目錄Requests庫示例匯總HTTP認(rèn)證Session和Cookies爬蟲引發(fā)的Robots協(xié)議用requests庫和RE模塊完成淘寶比價(jià)用requests實(shí)現(xiàn)簡單的客戶端訪問51.1 Requests庫1.2Requests庫和urllib的不同1.1Requests庫案例一：簡單的requestsRequests庫import requestsURL_IP = http:/127.

2、0.0.1:8000/ipdef use_simple_requests(): response = requests.get(URL_IP) print REsponse Headers print response.headers print Response Body: print response.textif _name_ = _main_: print Use simple request: use_simpe_requests()Requests庫分析代碼：和前面的urllib庫相比，requests庫的方法更透明：如requests.get(URL_IP)，不再是open,而是

3、http中g(shù)et/post/delete等方法的直接調(diào)用。同時(shí)print response.text，對內(nèi)容的顯示，也無需按行處理，而是直接調(diào)用text方法就可以得到url對象的主體內(nèi)容。Requests庫運(yùn)行結(jié)果如下：Requests庫案例二：帶參數(shù)的requestsRequests庫import requestsURL_GET = :8000/getdef use_params_requests(): params = param1:hello,param2:word print Params response = requests.get(URL_GET,p

4、arams=params) print REsponse Headers print response.headers print Response coder print response.status_code print Response Body: print response.json()if _name_ = _main_: print Use params request: use_params_requests()Requests庫分析代碼：response = requests.get(URL_GET,params=params)這里get 請求加參數(shù)，不需要做字符串的拼接，

5、只需在get方法中加參數(shù)即可，print response.json()按json對象展示內(nèi)容，當(dāng)然也可以用response.text方法。只是json速度更快效率更高些。Requests庫運(yùn)行結(jié)果如下：Requests庫總結(jié)如下：Requests庫的API對用戶透明，使用方便，如果后期涉及認(rèn)證等內(nèi)容時(shí)，會(huì)發(fā)現(xiàn)它的優(yōu)勢并明顯。Requests庫1.2Requests庫和urllib的不同下面來比較下urllib庫和requests庫的區(qū)別，以下兩圖是header部分的內(nèi)容，首先可以看到user-agent不同。Requests庫和urllib的不同同時(shí)也可以看到connection部分不同，由于requests庫用到urllib3，對于單次連接可以keep-alive,后續(xù)報(bào)文可以共用這次連接，故而資源開銷更小，效率更高。Requests庫和urllib的不同還可以看到accept-encoding：瀏覽器發(fā)給服務(wù)器聲明瀏覽器支持的編碼類型。當(dāng)使用