Scrapy是現在非常流行的一個python爬蟲框架 ， 而使用和運行這個框架就是要用它來創建項目才可以 。所以這一篇文章會同時介紹pycharm集成開發工具使用Scrapy爬蟲框架創建項目的方法、以及項目結構的含義和運行項目的方式 ， 想要使用它的小伙伴就繼續往下閱讀吧 。

一、創建Scrapy項目
1.運行Scrapy項目的前提就是將這個第三方框架給下載按照好 ， 使用系統自帶的命令行窗口或者是pycharm內的終端都可以執行pip命令 。下載安裝完成之后就是要打開終端來執行命令創建Scrapy項目了 ， 示例如下所示：
【Pycharm運行Scrapy項目怎么做？Pycharm編輯器如何運行Scrapy框架項目】scrapy startproject ScrapyTmp這個命令執行完畢之后會在當前打開文件的根目錄下生成對應的文件結構 ， 所以需要盡量保持文件目錄內沒有其他文件比較好 。


二、項目結構
這個命令執行完成之后生成項目結構很簡單 ， 其中spiders文件夾內放的就是Scrapy框架各個組件的文件 ， 而cfg文件是用來配置該框架項目的 。而其余的幾個文件按照順序分別為爬蟲程序數據模型、數據模型的中間件、爬蟲程序設置文件 ， 則具體實現python爬蟲操作的腳本就要另外去創建了 。


三、運行Scrapy項目
還是一樣需要打開pycharm編輯器終端 ， 這次執行的命令是在spiders文件夾下創建出來一個能夠執行python爬蟲操作的py文件 。之后也是通過這個文件來完成數據的抓取和處理操作 ， 兩個命令如下所示：
scrapy genspider baidu_spider baidu.comscrapy crawl baidu_spider以上就是關于“Pycharm運行Scrapy項目怎么做？Pycharm編輯器如何運行Scrapy框架項目”的全部內容了 ， 希望對你有所幫助 。

猜你喜歡

• Pycharm怎么創建Scrapy項目？Pycharm編輯器如何用Scrapy框架搭建項目
• Python爬蟲框架scrapy是如何運行的？爬蟲框架Scrapy執行流程詳解
• Python運行的按鈕在哪？Python代碼輸入完之后如何運行？
• pycharm沒有解釋器怎么設置？pycharm沒有解釋器設置教程
• pycharm怎么設置python執行環境？在pycharm中設置python執行環境的教程
• 電腦運行內存4g和6g的區別
• 華為自帶瀏覽器不能運行
• 華為手機怎么清理運行內存
• 華為手機相機停止運行怎么辦
• 華為手環如何一直后臺運行