日韩久久久精品,亚洲精品久久久久久久久久久,亚洲欧美一区二区三区国产精品 ,一区二区福利

Python實現(xiàn)的批量下載RFC文檔

系統(tǒng) 1758 0

RFC文檔有很多,有時候在沒有聯(lián)網(wǎng)的情況下也想翻閱,只能下載一份留存本地了。
看了看地址列表,大概是這個范圍:
http://www.networksorcery.com/enp/rfc/rfc1000.txt
...
http://www.networksorcery.com/enp/rfc/rfc6409.txt

哈哈,很適合批量下載,第一個想到的就是迅雷……
可用的時候發(fā)現(xiàn)它只支持三位數(shù)的擴(kuò)展(用的是迅雷7),我想要下的剛好是四位數(shù)……
郁悶之下萌生自己做一個的想法!
這東西很適合用python做,原理很簡單,代碼也很少,先讀為快。
代碼如下:

復(fù)制代碼 代碼如下:

#! /usr/bin/python
'''
? File????? : getRFC.py
? Author??? : Mike
? E-Mail??? : Mike_Zhang@live.com
'''
import urllib,os,shutil,time

def downloadHtmlPage(url,tmpf = ''):
??? i = url.rfind('/')
??? fileName = url[i+1:]
??? if tmpf : fileName = tmpf
??? print url,"->",fileName
??? urllib.urlretrieve(url,fileName)
??? print 'Downloaded ',fileName???
??? time.sleep(0.2)
??? return fileName
???
# http://www.networksorcery.com/enp/rfc/rfc1000.txt
# http://www.networksorcery.com/enp/rfc/rfc6409.txt
if __name__ == '__main__':
??? addr = 'http://www.networksorcery.com/enp/rfc'???
??? dirPath = "RFC"
??? #startIndex = 1000
??? startIndex = int(raw_input('start : '))
??? #endIndex = 6409
??? endIndex = int(raw_input('end : '))
??? if startIndex > endIndex :
??????? print 'Input error!'???????
??? if False == os.path.exists(dirPath):
??????? os.makedirs(dirPath)???
??? fileDownloadList = []
??? logFile = open("log.txt","w")
??? for i in range(startIndex,endIndex+1):
??????? try:???????????
??????????? t_url = '%s/rfc%d.txt' % (addr,i)
??????????? fileName = downloadHtmlPage(t_url)
??????????? oldName = './'+fileName
??????????? newName = './'+dirPath+'/'+fileName
??????????? if True == os.path.exists(oldName):
??????????????? shutil.move(oldName,newName)
??????????????? print 'Moved ',oldName,' to ',newName
??????? except:
??????????? msgLog = 'get %s failed!' % (i)
??????????? print msgLog
??????????? logFile.write(msgLog+'\n')
??????????? continue
??? logFile.close()

除了RFC文檔,這個程序稍加修改也可以做其它事情:比如批量下載MP3、電子書等等。

好,就這些了,希望對你有幫助。


更多文章、技術(shù)交流、商務(wù)合作、聯(lián)系博主

微信掃碼或搜索:z360901061

微信掃一掃加我為好友

QQ號聯(lián)系: 360901061

您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描下面二維碼支持博主2元、5元、10元、20元等您想捐的金額吧,狠狠點擊下面給點支持吧,站長非常感激您!手機(jī)微信長按不能支付解決辦法:請將微信支付二維碼保存到相冊,切換到微信,然后點擊微信右上角掃一掃功能,選擇支付二維碼完成支付。

【本文對您有幫助就好】

您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描上面二維碼支持博主2元、5元、10元、自定義金額等您想捐的金額吧,站長會非常 感謝您的哦!!!

發(fā)表我的評論
最新評論 總共0條評論
主站蜘蛛池模板: 雅江县| 集安市| 莆田市| 乌兰浩特市| 日喀则市| 长岛县| 凤山县| 壤塘县| 宾阳县| 安陆市| 塔城市| 乃东县| 广州市| 十堰市| 山西省| 兴安县| 疏附县| 鹤壁市| 通化市| 榆中县| 宁海县| 镇康县| 滁州市| 三门峡市| 建水县| 桑日县| 灵武市| 襄汾县| 顺义区| 内丘县| 洪泽县| 龙游县| 公安县| 抚州市| 同江市| 龙江县| 金昌市| 筠连县| 静安区| 江津市| 辉县市|