python安裝scrapy,所需要安裝的包都安裝好了,但是在最後安裝scrapy時,老是出現錯誤

2021-05-04 18:38:47 字數 728 閱讀 1218

1樓:午夜

scapy安裝的錯誤有幾種型別。

因為版本衝突問題,導致你安裝scapy時無法完成安裝,或者是安裝無法正確使用

因為編譯的位數不同64位和32位不同,導致的問題

解決辦法:

耐心的解決辦法。把scrapy的原始碼拿過來,執行python setup.py install,遇到哪個包不好用,就替換掉。

辦法是將那個包的源**拿過來,先刪除site-packages裡的相應包,再手工執行python setup.py install。要有心理準備,很可能需要vc++ 2010的編譯器。

最簡單的辦法,使用pip install scrapy。 如果你是在ubuntu下面apt-get install python-scrapy就搞定了。

關於爬蟲框架,你可以看下這本書,裡面很詳細的講解到了這塊的東西,希望能夠解決你在學習python的過程中遇到的問題

2樓:毅縷漠雲

這個問題已經困擾我好幾天了。。。大兄弟後面是怎麼解決這個問題的?

python安裝scrapy出現問題 90

3樓:

先要安裝twisted,網頁連結,ctrl+f找到twisted相應版本的whl檔案,cd到儲存資料夾安裝whl

pip install  twisted‑18.7.0‑cp36‑cp36m‑win_amd64.whl

如何安裝python以及scrapy框架

scrapy是一個為了爬取 資料,提取結構性資料而編寫的應用框架。可以應用在包括資料探勘,資訊處理或儲存歷史資料等一系列的程式中。其最初是為了 頁面抓取 更確切來說,網路抓取 所設計的,也可以應用在獲取api所返回的資料 例如 amazon associates web services 或者通用的...

學Python爬蟲一定要學scrapy模組嗎

不一定。scrapy是個框架,很多輪子不用自己這寫了。不過scrapy比較 重 如果是小型 單一的爬蟲任務,我覺得自己重頭寫反而比較輕便快速,夠用就好。題主是不是剛開始學爬蟲,如果是,建議先理解爬蟲的幾個模組,理解了原理再學scrapy才會有效率。我理解的模組有如下幾個 訪問頁面,用requests...

python安裝後怎麼開啟,python的spyder怎麼開啟,或者具體的安裝教程

1 首先開啟安裝程式壓縮包,進行解壓縮,解壓到設定的位置,耐心等待解壓完成 2 在解壓後目錄中,雙擊執行副檔名為 msi 格式的檔案,稍等一下,就會進入安裝介面。3 安裝初始介面如下圖所示,選擇箭頭所指第一項 預設也是此項 接著單擊 next 進入下一步安裝介面。4 在下一步中,可以更改箭頭所指位置...