Jupyter'de Scrapy projesi nasıl çalıştırılır?

Question

Mac'te, Jupyter yüklüydü ve Scrub projemin kök klasöründen jupyter notebook yazdığımda, not defterini açar. Bu noktada tüm proje dosyalarına göz atabilirim.

Projeyi dizüstü bilgisayardan nasıl yürütürüm? Ben Çalışan sekmesine tıklarsanız

, Terminalleri altında, görüyorum: yeni bir terminal açmak Dosyalar sekmesi altında

1. : iki ana Bunu başarmak için yolu vardır

There are no terminals running. 

Answer 1

: Yeni> Terminal
Eğer örümcek Sonra basitçe çalıştırın: scrapy crawl [options] <spider>

2. Yeni defter oluşturma ve bir hücrede çalıştırmak için CrawlerProcess veya CrawlerRunner sınıflarını kullanın:

from scrapy.crawler import CrawlerProcess 
from scrapy.utils.project import get_project_settings 

process = CrawlerProcess(get_project_settings()) 

process.crawl('your-spider') 
process.start() # the script will block here until the crawling is finished 

Scrapy docs - Run Scrapy from a script