使用 selenium?瀏覽器自動(dòng)化測(cè)試框架 爬取網(wǎng)易云音樂(lè)電臺(tái)專欄

代碼

?

            #!/usr/bin/env python
# -*- coding: utf-8 -*-
# @Time    : 2019/7/9 21:02
# @Author  : nick
# @Site    : http://www.isscollege.com/
from selenium import webdriver
from selenium.webdriver.chrome.options import Options

# 實(shí)例化一個(gè)啟動(dòng)參數(shù)對(duì)象
chrome_options = Options()
# 設(shè)置瀏覽器以無(wú)界面方式運(yùn)行
# chrome_options.add_argument('--headless')
# browser = webdriver.Chrome(chrome_options=chrome_options)
browser = webdriver.Chrome()
browser.maximize_window()  # 窗口最大化
browser.get('https://music.163.com/#/discover/djradio')  # URL
browser.implicitly_wait(30)  # 隱示等待，為了等待充分加載好網(wǎng)址
browser.switch_to.frame("contentFrame")#轉(zhuǎn)換到我們需要的數(shù)據(jù)的frame,一定不要忘記
result_list = browser.find_element_by_class_name("f-fl").find_elements_by_class_name("itm")
#print(result_list)
#print(type(result_list))
# 打印列表中的類容
print("推薦節(jié)目")
for result in result_list:
    name = result.find_element_by_class_name("s-fc4").text  #電臺(tái)名
    subscribe = result.find_element_by_class_name("s-fc1").text  #簡(jiǎn)介
    type = result.find_element_by_class_name("u-type").text #類型
    url = result.find_element_by_class_name("s-fc1").get_attribute("href")  #鏈接
    print("電臺(tái)名:{},簡(jiǎn)介:{},類型:{},url:{}".format(name,subscribe,type,url))

print("節(jié)目排行榜")
result_list = browser.find_element_by_class_name("f-fr").find_elements_by_class_name("itm")
for result in result_list:
    rank = result.find_element_by_class_name("f-fs1").text  #排名
    name = result.find_element_by_class_name("s-fc1").text  #節(jié)目名
    url = result.find_element_by_class_name("f-fw0").get_attribute("href")  #鏈接
    print("排名:{},節(jié)目名:{},url:{}".format(rank,name,url))

          

?

?

運(yùn)行截圖：