日韩久久久精品,亚洲精品久久久久久久久久久,亚洲欧美一区二区三区国产精品 ,一区二区福利

Python3網絡爬蟲之請求庫requests的使用(五)

系統 1810 0

requests庫的安裝:

ubuntu和windows下安裝requests庫:pip install requests

requests的介紹:

Requests是一個優雅而簡單的Python HTTP庫

requests的文檔:

中文版:http://cn.python-requests.org/zh_CN/latest/

英文版:http://docs.python-requests.org/en/master/api/

requests的基本用法:

Get請求:

(一)創建一個基本實例

            
              import requests

response = requests.get('https://httpbin.org/get')#創建一個基本的get請求實例
print(response.text)
            
          

這是返回的運行結果截圖

Python3網絡爬蟲之請求庫requests的使用(五)_第1張圖片

(二)在請求中帶參數

            
              import requests
data = {
	'name':'Dacyuan',
	'age':'23'
}
response = requests.get('https://httpbin.org/get',params=data)#帶參數
print(response.text) 

            
          

Python3網絡爬蟲之請求庫requests的使用(五)_第2張圖片

網頁的返回類型實際上是 str 類型,但是它很特殊,是 JSON 格式的 所以,如果想直接解析返回結果,得到一個字典格式的話,可以直接調用 json ()方法。

(三)兩個小Demo:爬取知乎的網頁,爬取二進制數據。

            
              import requests
headers = {
    'User-Agent':'Mozilla/5.0(Macintosh; Intel Mac OS X 10_11_4) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/52.0.2743.116 Safari/537.36'
}
response = requests.get('https://www.zhihu.com/explore',headers=headers)
print(response.text)

            
          

返回的結果

Python3網絡爬蟲之請求庫requests的使用(五)_第3張圖片

注:如果不添加headers字段會顯示錯誤(這是因為知乎禁止爬取),加了headers字段后,其中包含了User-Agent字段信息,也就是瀏覽器標識信息,這樣就闊以爬取知乎的網頁了。如圖 Python3網絡爬蟲之請求庫requests的使用(五)_第4張圖片

--------------------------------------------------------

            
              import requests
response = requests.get('https://github.com/favicon.ico')
print(response.content)#response.conten獲取的二進制數據

            
          

這是返回的結果為二進制數據。

Post請求:

和Get請求類似:

            
              import requests

data = {'name':'Dacyuan','age':'23'}
args={'name':'Dacyuan','age':'23'}

response = requests.post('http://httpbin.org/post',data=data,params=args)
print(response.text)

            
          

運行后的截圖:

Python3網絡爬蟲之請求庫requests的使用(五)_第5張圖片

?

requests的高級用法:

?

?

?

?

?


更多文章、技術交流、商務合作、聯系博主

微信掃碼或搜索:z360901061

微信掃一掃加我為好友

QQ號聯系: 360901061

您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描下面二維碼支持博主2元、5元、10元、20元等您想捐的金額吧,狠狠點擊下面給點支持吧,站長非常感激您!手機微信長按不能支付解決辦法:請將微信支付二維碼保存到相冊,切換到微信,然后點擊微信右上角掃一掃功能,選擇支付二維碼完成支付。

【本文對您有幫助就好】

您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描上面二維碼支持博主2元、5元、10元、自定義金額等您想捐的金額吧,站長會非常 感謝您的哦!!!

發表我的評論
最新評論 總共0條評論
主站蜘蛛池模板: 衡阳市| 敦化市| 普洱| 崇州市| 南充市| 海林市| 武乡县| 浙江省| 巍山| 绥德县| 义乌市| 麦盖提县| 江永县| 昆山市| 玉树县| 东港市| 巴东县| 仲巴县| 崇明县| 文登市| 韩城市| 读书| 阿荣旗| 抚顺市| 河池市| 宁陕县| 普兰县| 驻马店市| 定安县| 六安市| 营口市| 民丰县| 象州县| 苏州市| 永胜县| 临安市| 十堰市| 伊宁市| 兴城市| 临泽县| 司法|