您好,登錄后才能下訂單哦!
Python 如何安裝Scrapy?相信很多沒有經驗的人對此束手無策,為此本文總結了問題出現的原因和解決方法,通過這篇文章希望你能解決這個問題。
安裝 Scrapy 與安裝其他 Python 包沒有區別,同樣使用如下命令來安裝:
pip install scrapy
如果在命令行窗口中運行該命令,將會看到程序并不立即下載、安裝 Scrapy,而是不斷地下載大量第三方包。
如果在命令行窗口中提示找不到 pip 命令,則也可以通過 python 命令運行 pip 模塊來安裝 Scrapy, 例如 python -m pip install scrapy。
這是因為 Scrapy 需要依賴、大量第三方包。典型的,Scrapy 需要依賴如下第三方包: pyOpenSSL:Python 用于支持 SSL(Security Socket Layer)的包。 cryptography:Python 用于加密的庫。 CFFI:Python 用于調用 C 的接口庫。 zope.interface:為 Python 缺少接口而提供擴展的庫。 lxml:一個處理 XML、HTML 文檔的庫,比 Python 內置的 xml 模塊更好用。 cssselect:Python 用于處理 CSS 選擇器的擴展包。 Twisted:為 Python 提供的基于事件驅動的網絡引擎包。 ......
如果在 Python 環境下沒有這些第三方包,那么 Python 會根據依賴自動下載并安裝它們。這個過程原本沒啥好講的,pip 通常會自動完成整個過程,我們只需要等待即可。但 pip 在自動下載、安裝 Twisted 時會提示以下錯誤:
error:Microsoft Visual C++ 14.0 is required. Get it with "Microsoft Visual C++ Build Tools":http://landinghub.visualstudio.com/visual-cpp-build-tools
按照上面的錯誤提示,我們需要先下載和安裝 Microsoft Visual C++ Build Tools 工具,然后才能安裝 Twisted。為了安裝一個小小的 Twisted 包,難道就需要安裝一個龐大的 Microsoft Visual C++ Build Tools?
答案是否定的,提示上面的錯誤只是因為 pip 自動下載的 Twisted 安裝包有一些缺陷,因此可以先自行下載 Twisted 安裝包。登錄 www.lfd.uci.edu/~gohlke/pythonlibs/ 站點,在該頁面中間查找“Twisted”項目,可以看到如圖 1 所示的下載鏈接。
從圖 1 所示的鏈接可以看到,當前 Twisted 的最新版是 18.9.0,Twisted 為 2.7、3.5、3.6、3.7 等不同版本的 Python 提供了對應的安裝包。由于本教程內容主要以 Python 3.6 為主,因此應該下載 Twisted 的 Python 3.6 版本,其中文件名帶 win32 的是 32 位版本,而帶 win_amd64 的則是 64 位版本,此處還需要根據操作系統的位數選擇對應的版本。
在下載了合適的 Twisted 安裝包后,會得到一個 Twisted-18.9.0-cp36-cp36m-win_amd64.whl 文件(針對 64 位系統的),該文件就是 Twisted 安裝包。
運行如下命令來安裝 Twisted 包。
pip install Twisted-18.9.0-cp36-cp36m-win_amd64.whl
在安裝過程中會自動檢查,如有必要,會自動下載并安裝 Twisted 所依賴的第三方包,如 zope.interface、Automat、incremental 等。
在安裝完成后,會提示如下安裝成功的信息:
Successfully installed Twisted-18.9.0
看完上述內容,你們掌握Python 如何安裝Scrapy的方法了嗎?如果還想學到更多技能或想了解更多相關內容,歡迎關注億速云行業資訊頻道,感謝各位的閱讀!
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。