日韩久久久精品,亚洲精品久久久久久久久久久,亚洲欧美一区二区三区国产精品 ,一区二区福利

Python爬蟲環境配置設置

系統 1907 0

1.原本安裝了Python,還有必要安裝Anaconda嗎?

有必要

Anaconda,其包含了conda、Python等180多個科學包及其依賴項,是一個開源的包、環境管理器,能夠在不同的環境之間切換.

2.什么是MongoDB?

MongoDB 是由C++語言編寫的,是一個基于分布式文件存儲的開源數據庫系統。在高負載的情況下,添加更多的節點,可以保證服務器性能。

3.什么是Robomogo?

MongoDB的可視化界面。下載Robomogo免費版就足夠用了

4.什么是Redis?

其遵守BSD協議,是一個高性能的key-value數據庫。

5.什么是RedisDesktopManager?

Redis的可視化界面

6.Python爬蟲常用庫有哪些?

?

urllib

提供了一系列用于操作URL的功能。urllib的 request 模塊可以非常方便地抓取URL內容,也就是發送一個GET請求到指定的頁面,然后返回HTTP的響應。

Re

執行正則表達式需要使用的模塊

selenium

此庫驅動瀏覽器獲取渲染后的網頁信息。

頁面渲染:加載-解析-渲染(構建渲染樹,對各個元素進行位置計算、樣式計算等等,然后根據渲染樹對頁面進行渲染(可以理解為“畫”元素))

注意:因為最新版本的selenium已經拋棄了舊版本的ChromeDriver ,所以,用2.幾版本的可以保證程序正常通過。

phantomjs

無界面瀏覽器,無需彈出瀏覽器進行爬蟲

lxml,?beautifulsour4?

可對網頁進行解析

pyquery?
pymysql?
pymongo?

分別對應最開始介紹的安裝軟件

flask?

代理設置


django?

Web服務器框架


jupyter?

日志文檔,可以在線跑代碼等
?

?


更多文章、技術交流、商務合作、聯系博主

微信掃碼或搜索:z360901061

微信掃一掃加我為好友

QQ號聯系: 360901061

您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描下面二維碼支持博主2元、5元、10元、20元等您想捐的金額吧,狠狠點擊下面給點支持吧,站長非常感激您!手機微信長按不能支付解決辦法:請將微信支付二維碼保存到相冊,切換到微信,然后點擊微信右上角掃一掃功能,選擇支付二維碼完成支付。

【本文對您有幫助就好】

您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描上面二維碼支持博主2元、5元、10元、自定義金額等您想捐的金額吧,站長會非常 感謝您的哦!!!

發表我的評論
最新評論 總共0條評論
主站蜘蛛池模板: 墨玉县| 额济纳旗| 古田县| 闽清县| 海盐县| 江永县| 平舆县| 商水县| 江阴市| 黄龙县| 镇安县| 化德县| 黄平县| 武隆县| 阿克| 潮州市| 镇安县| 古交市| 富源县| 翼城县| 新邵县| 阿拉尔市| 台南市| 松原市| 宜章县| 上思县| 永州市| 华坪县| 德庆县| 贵港市| 灌南县| 徐州市| 景泰县| 潞城市| 固阳县| 大方县| 江陵县| 兴城市| 和田市| 修武县| 育儿|