码迷,mamicode.com
首页 > 其他好文 > 详细

scrapy提交关键字请求

时间:2019-03-04 20:51:42      阅读:159      评论:0      收藏:0      [点我收藏+]

标签:spider   div   父类   yield   tsp   方法   star   com   www.   

提交查询关键字的请求

 1 import scrapy
 2 
 3 
 4 class PostSpider(scrapy.Spider):
 5     name = post
 6     # allowed_domains = [‘www.xxx.com‘]
 7     start_urls = [https://fanyi.baidu.com/sug]
 8 
 9     def start_requests(self):
10         data = {
11             kw:python
12         }
13         for url in self.start_urls:
14             yield scrapy.FormRequest(url=url,formdata=data,callback=self.parse)
15 
16     def parse(self, response):
17         print(response.text)

这里重写父类的start_requests方法

 

scrapy提交关键字请求

标签:spider   div   父类   yield   tsp   方法   star   com   www.   

原文地址:https://www.cnblogs.com/liaopeng123/p/10472768.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!