Python版本是2.7.9,在win8上測(cè)試成功,就是抓取有點(diǎn)慢,本來(lái)想用多線程的,有事就罷了。模板之家的網(wǎng)站上的url參數(shù)與頁(yè)數(shù)不匹配,懶得去做分析了,就自己改代碼中的url吧。大神勿噴!
#!/usr/bin/env python
# -*- coding: utf-8 -*-
# by ustcwq
# 2015-03-15
?
import urllib,urllib2,os,time
from bs4 import BeautifulSoup
?
start = time.clock()
path = os.getcwd()+u'/模板之家抓取的模板/'
if not os.path.isdir(path):
??? os.mkdir(path)
?
url = "http://www.cssmoban.com/cssthemes/index_80.shtml"??? # 源網(wǎng)站中的index后面數(shù)字怎么編排的?
theme_url ='http://www.cssmoban.com/cssthemes/'
response = urllib2.urlopen(url)
soup = BeautifulSoup(response)
result = soup.select('p[class="title"] a')
print result
?
for item in result:
??? link = item['href']
??? # down_name = item.text?? # 文件名稱(chēng)
??? new_url = theme_url+link.split('/')[-1]
??? response = urllib2.urlopen(new_url)
??? soup = BeautifulSoup(response)
??? result = soup.select('.btn a')
??? down_url = result[1]['href']??? # 文件鏈接
?
??? local = path+time.strftime('%Y%m%d%H%M%S',time.localtime(time.time()))+'.zip'
??? urllib.urlretrieve(down_url, local) # 遠(yuǎn)程保存函數(shù)
?
end = time.clock()
print u'模板抓取完成!'
print u'一共用時(shí):',end-start,u'秒'
以上所述就是本文的全部?jī)?nèi)容了,希望大家能夠喜歡。
更多文章、技術(shù)交流、商務(wù)合作、聯(lián)系博主
微信掃碼或搜索:z360901061

微信掃一掃加我為好友
QQ號(hào)聯(lián)系: 360901061
您的支持是博主寫(xiě)作最大的動(dòng)力,如果您喜歡我的文章,感覺(jué)我的文章對(duì)您有幫助,請(qǐng)用微信掃描下面二維碼支持博主2元、5元、10元、20元等您想捐的金額吧,狠狠點(diǎn)擊下面給點(diǎn)支持吧,站長(zhǎng)非常感激您!手機(jī)微信長(zhǎng)按不能支付解決辦法:請(qǐng)將微信支付二維碼保存到相冊(cè),切換到微信,然后點(diǎn)擊微信右上角掃一掃功能,選擇支付二維碼完成支付。
【本文對(duì)您有幫助就好】元
