标签:download sel crawler spider 方法 spi pip load scrapy
在spider中 主动关闭爬虫:
self.crawler.engine.close_spider(self, “cookie失效关闭爬虫”)
在pipeline 和downloadermiddlewares 主动关闭爬虫:
spider.crawler.engine.close_spider(spider, “全文结束关闭爬虫”)
标签:download sel crawler spider 方法 spi pip load scrapy
原文地址:https://www.cnblogs.com/du-jun/p/11447327.html