码迷,mamicode.com
首页 > 其他好文 > 详细

02-scrapy的cmdline命令

时间:2018-06-03 19:36:40      阅读:154      评论:0      收藏:0      [点我收藏+]

标签:usr   TE   port   spl   utf-8   方式   pre   line   /usr   

1.启动爬虫的命令为: scrapy crawl spidername(爬虫名)

2.我们还可以通过下述方式来启动爬虫

  步骤一:创建一个.py文件。startspider.py(这里文件的名称可以自己给定)

#!/usr/bin/env python
# -*- coding:utf-8 -*-
from scrapy import cmdline
# 方式一:注意execute的参数类型为一个列表
cmdline.execute(scrapy crawl spidername.split())
# 方式二:注意execute的参数类型为一个列表
cmdline.execute([scrapy, crawl, spidername])

  步骤二:通过python startspider.py来运行此文件即可

 

02-scrapy的cmdline命令

标签:usr   TE   port   spl   utf-8   方式   pre   line   /usr   

原文地址:https://www.cnblogs.com/houzichiguodong/p/9129878.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!