日韩久久久精品,亚洲精品久久久久久久久久久,亚洲欧美一区二区三区国产精品 ,一区二区福利

python遞歸下載文件夾下所有文件

系統(tǒng) 1846 0

最近想備份網(wǎng)站,但是php下載文件的大小是有大小限制的,而我也懶得裝ftp再下載了,就想著暫時(shí)弄個(gè)二級(jí)域名站,然后用python(python3)的requests庫(kù)直接下載網(wǎng)站根目錄下的所有文件以及文件夾。(0-0就是這么任性)

1.安裝requests庫(kù)

            
pip install requests
          

2.下載文件夾下所有文件及文件夾

這里需要處理的地方主要是文件夾,這里我們判斷出該鏈接是文件夾時(shí),自動(dòng)創(chuàng)建文件夾,并遞歸繼續(xù)進(jìn)行操作,否則判斷該鏈接是文件,直接使用requests get方法下載,話(huà)不多說(shuō),看代碼

            
####春江暮客 www.bobobk.com
import requests
import re
import os
import sys
def help(script):
 text = 'python3 %s https://www.bobobk.com ./' % script

 print(text)
def get_file(url,path):##文件下載函數(shù)
  content = requests.get(url)
  print("write %s in %s" % (url,path))
  filew = open(path+url.split("/")[-1],'wb')
  for chunk in content.iter_content(chunk_size=512 * 1024): 
    if chunk: # filter out keep-alive new chunks
      filew.write(chunk)
  filew.close()
def get_dir(url,path): #文件夾處理邏輯
  content = requests.get(url).text
  if "
          

至此,就在本地目錄完全還原下載原網(wǎng)站的路徑和文件了。

以上就是本文的全部?jī)?nèi)容,希望對(duì)大家的學(xué)習(xí)有所幫助,也希望大家多多支持腳本之家。


更多文章、技術(shù)交流、商務(wù)合作、聯(lián)系博主

微信掃碼或搜索:z360901061

微信掃一掃加我為好友

QQ號(hào)聯(lián)系: 360901061

您的支持是博主寫(xiě)作最大的動(dòng)力,如果您喜歡我的文章,感覺(jué)我的文章對(duì)您有幫助,請(qǐng)用微信掃描下面二維碼支持博主2元、5元、10元、20元等您想捐的金額吧,狠狠點(diǎn)擊下面給點(diǎn)支持吧,站長(zhǎng)非常感激您!手機(jī)微信長(zhǎng)按不能支付解決辦法:請(qǐng)將微信支付二維碼保存到相冊(cè),切換到微信,然后點(diǎn)擊微信右上角掃一掃功能,選擇支付二維碼完成支付。

【本文對(duì)您有幫助就好】

您的支持是博主寫(xiě)作最大的動(dòng)力,如果您喜歡我的文章,感覺(jué)我的文章對(duì)您有幫助,請(qǐng)用微信掃描上面二維碼支持博主2元、5元、10元、自定義金額等您想捐的金額吧,站長(zhǎng)會(huì)非常 感謝您的哦?。?!

發(fā)表我的評(píng)論
最新評(píng)論 總共0條評(píng)論
主站蜘蛛池模板: 大同县| 财经| 仁怀市| 雷山县| 涪陵区| 武隆县| 嫩江县| 华池县| 内乡县| 普宁市| 深圳市| 商城县| 荣成市| 鱼台县| 嘉峪关市| 屏边| 娱乐| 青州市| 沈丘县| 佳木斯市| 同德县| 泽库县| 关岭| 福建省| 托克逊县| 甘孜| 依兰县| 吴江市| 思南县| 波密县| 阜新| 股票| 葵青区| 沙坪坝区| 济阳县| 博湖县| 宝丰县| 邹城市| 平远县| 桓台县| 濮阳县|