第一種方式:res = requests.get(url, params=data, headers = headers)
第二種方式:res = requests.get(url, data=data, headers = headers)
注意:
1.url格式入參只支持第一種方式訪問(params=data),json格式入參,只支持第二種方式(data=data)訪問,
form-data格式入參可以使用第一種與第二種方式訪問。
2.不管是哪種格式的入參,data入參格式都是{“key”:“vaue”,“key1”:“vaue1"},注意參數最好用 " 而不是 ' 。
3.如果是url與form-data入參,data參數必須為字典類型,如果json入參,data必須為字符類型,字典轉字符方法如下:data =json.dumps(data,ensure_ascii=False);
4.參數headers必須為字典類型,字符轉字典方法如下:json.loads(headers),判斷是否是字典方法如:isinstance(data,dict)
模擬post方式訪問:
第一種方式:res = requests.post(url, params=data, headers = headers)
第二種方式:res = requests.post(url, data=data, headers = headers)
注意:
1.url格式入參只支持第一種方式訪問(params=data),json格式入參,只支持第二種方式(data=data)訪問,
form-data格式入參可以使用第一種與第二種方式訪問。
2.不管是哪種格式的入參,data入參格式都是{“key”:“vaue”,“key1”:“vaue1"},注意參數最好用 " 而不是 ' 。
3.如果是url與form-data入參,data參數必須為字典類型,如果json入參,data必須為字符類型,字典轉字符方法如下:data =json.dumps(data,ensure_ascii=False);
4.參數headers必須為字典類型,字符轉字典方法如下:json.loads(headers),判斷是否是字典方法如:isinstance(data,dict)
常用響應方法
- res.text:查看響應內容,返回的是Unicode格式的數據
- res.content:查看響應內容,返回的字節流數據(主要用于存儲圖片)
- res.url:查看完整訪問url地址
- res.encoding:查看響應頭部字符編碼
- res.status_code:查看響應碼
session與cookies
cookies操作步驟:
1.訪問:res = requests.get(url)
2.返回cookie對象:cookiejar = res.cookies
3.轉為字典:cookiedict = requests.utils.dict_from_cookiejar(cookiejar)
session操作步驟:
1. 創建session對象:ssion = requests.session()
2. 設置 headers:headers = {"key": "vaule"}
3. 設置登錄入參:{"loginName":"sss", "userPass":"sss"}
4. 發送附帶用戶名和密碼的請求,并獲取登錄后的Cookie值,保存至sesion:ssion.post(url, data = data,headers=headers)
5. 直接訪問需要登錄的頁面:ssion.get("https://www.sss.cn/preview/c_clg_web?d=233444")
ssl不驗證
#https協議默認verify = True需要證書驗證,verify = False表示不驗證證書
res = requests.get(url,verify = False)
源碼舉例
import requests
import json
from _ast import Try
from django.template.context_processors import request
class send():
#1.get方式,無參數訪問接口
def send_get(self,url,data,headers = None):
res = requests.get(url,params=data,headers = headers)
return res
#2.post方式,url格式入參訪問接口
def send_post_url(self,url,data,headers = None):
res = requests.post(url, params=data, headers = headers)
return res
#3.post方式,form-data格式入參訪問接口
def send_post_fdata(self,url,data,headers = None):
res = requests.post(url, params=data, headers = headers)
return res
#4.post方式,josn格式入參訪問接口
def send_post_json(self,url,data,headers = {'content-type': 'Application/json'}):
json_data =json.dumps(data,ensure_ascii=False)
#特別注意,當文件頭是json時 ,發送post請求參數data=值,值必須是json(字符型)
res = requests.post(url, data=json_data, headers = headers)
return res
def cookies(self,url):
res = requests.get(url)
#保存CookieJar對象:
cookiejar = res.cookies
#將Cookie轉為字典:
cookiedict = requests.utils.dict_from_cookiejar(cookiejar)
return cookiedict
def session(self):
# 1. 創建session對象
ssion = requests.session()
# 2. 設置headers
headers = {"User-Agent": "Mozilla/5.0 (windows NT 6.2; WOW64; Trident/7.0; rv:11.0) like Gecko",
"Accept":"image/gif, image/jpeg, image/pjpeg, application/x-ms-application, application/xaml+xml, application/x-ms-xbap, */*",
"Accept-Language":"zh-Hans-CN,zh-Hans;q=0.5"}
# 3. 設置登錄入參
data = {"loginName":"sss", "userPass":"sss"}
# 4. 發送附帶用戶名和密碼的請求,并獲取登錄后的Cookie值,保存至sesion
ssion.post("https://passport.sss.cn/login/login", data = data,headers=headers)
# 5. 直接訪問需要登錄的頁面
res = ssion.get("https://www.sss.cn/preview/c_clg_web?d=233444")
return res
def ssl(self):
#https協議默認verify = True需要證書驗證,verify = False表示不驗證證書
res = requests.get("https://www.12306.cn/index/",verify = False)
return res
if __name__ == '__main__':
#1.get方式,無參數訪問接口
res1 = send().send_get('http://127.0.0.1:8888/index',{})
print('1.get方式,無參數訪問接口,返回值:')
#響應內容json格式轉字典
print(res1.json())
print('-------開始打印request常見響應方法內容---------------')
print('查看響應內容,res.text 返回的是Unicode格式的數據')
print(res1.text)
print('查看響應內容,res.content返回的字節流數據(主要用于存儲圖片)')
print(res1.content)
print('查看完整url地址,res.url')
print(res1.url)
print('查看響應頭部字符編碼,res.encoding')
print(res1.encoding)
print('查看響應碼,res.status_code')
print(res1.status_code)
print('-------結束打印request常見響應方法內容---------------')
#2.post方式,url格式入參訪問接口
res2 = send().send_post_url('http://127.0.0.1:8888/article',{'id':'12589','token':'ASDE23EEE9'})
print('2.post方式,url格式入參訪問接口,返回值:')
print(res2.json())
#3.post方式,form-data格式入參訪問接口
res3 = send().send_post_fdata('http://127.0.0.1:8888/login',{'usrname':'test','pwd':'123456'})
print('3.post方式,form-data格式入參訪問接口,返回值:')
print(res3.json())
#4.post方式,josn格式入參訪問接口
res4 = send().send_post_json('http://127.0.0.1:8888/loginjosn',{"usrname": "test","pwd": "123456"})
print('4.post方式,josn格式入參訪問接口,返回值:')
print(res4.json())
res5 = send().cookies('http://www.baidu.com')
print('5.訪問百度打印colies,返回值:')
print(res5)
res6 = send().session()
print('6.需要登錄才可以看到資源,通過session可直接查看,返響應狀態碼:')
print(res6.status_code)
res7 = send().ssl()
print('7.訪問12306,設置不驗證ssl,verify = False,返響應狀態碼:')
print(res7.status_code)
運行結果
1.get方式,無參數訪問接口,返回值:
{'msg': '成功訪問首頁', 'msg_code': 200}
-------開始打印request常見響應方法內容---------------
查看響應內容,res.text 返回的是Unicode格式的數據
{"msg": "成功訪問首頁", "msg_code": 200}
查看響應內容,res.content返回的字節流數據(主要用于存儲圖片)
b'{"msg": "xe6x88x90xe5x8ax9fxe8xaexbfxe9x97xaexe9xa6x96xe9xa1xb5", "msg_code": 200}'
查看完整url地址,res.url
http://127.0.0.1:8888/index
查看響應頭部字符編碼,res.encoding
utf-8
查看響應碼,res.status_code
200
-------結束打印request常見響應方法內容---------------
2.post方式,url格式入參訪問接口,返回值:
{'msg': '成功訪問文章', 'msg_code': 200}
3.post方式,form-data格式入參訪問接口,返回值:
{'msg': '登錄成功', 'msg_code': 200}
4.post方式,josn格式入參訪問接口,返回值:
{'msg': '登錄成功', 'msg_code': 200}
5.訪問百度打印colies,返回值:
{'BDORZ': '27315'}
6.需要登錄才可以看到資源,通過session可直接查看,返回值:
200
D:Python/ target=_blank class=infotextkey>Pythonazlibsite-packagesurllib3connectionpool.py:997: InsecureRequestWarning: Unverified HTTPS request is being made to host 'www.12306.cn'. Adding certificate verification is strongly advised. See: https://urllib3.readthedocs.io/en/latest/advanced-usage.html#ssl-warnings
warnings.warn(
7.訪問12306,設置不驗證ssl,verify = False,返響應狀態碼:
200
三、問題
1. json轉字典,json格式入參問題
問題描述,發送get請求,響應內容轉字典,如requests.get(url).json(),報錯:json.decoder.JSONDecodeError: Expecting value: line 1 column 1 (char 0)
原因:
1.響應內容不是json{key:vaule}格式;
2.json格式入參,如res = requests.post(url, data=data, headers = headers),入參data值為字典類型
3.字符轉字典,字符個數不是key-value個數,或者key-vaule用的是單引號,如json.loads('key':'value')
解決方案:
1.響應內容必須是json格式才可以調用josn轉字典json()方法
2.json格式入參,如res = requests.post(url, data=data, headers = headers),入參data值必須轉換為字符類型
3.字符轉字典,必須保證是key-vaule,并且參數引號必須用雙引號,如json.loads("key":"value")
2. 接口無法訪問
問題描述:發送get請求,requests.get(url),報錯如下:
requests.exceptions.ConnectionError: HTTPConnectionPool(host='127.0.0.1', port=8888): Max retries exceeded with url: /index (Caused by NewConnectionError('<urllib3.connection.HTTPConnection object at 0x0000025527634A00>: Failed to establish a new connection: [WinError 10061] 由于目標計算機積極拒絕,無法連接。'))
原因:1.8888端口無法訪問;2.接口服務未開啟
解決方案:1.設置8888端口可訪問;2.開啟接口服務
3. 發送個get/post失敗
問題描述:發送get:request.get("http://www.baidu.com"),報錯如下:
AttributeError: 'function' object has no attribute 'get'
原因:1.代碼錯誤;2.變量名與系統(包括擴展庫或者保留字)的重復
解決方法:本例是代碼錯誤,request改為requests