码迷,mamicode.com
首页 >  
搜索关键字:并且分别处理    ( 1个结果
爬虫框架scrapy 1个piplines 对应多个spider,并且分别处理
defprocess_item(self,item,spider):ifre.search(r‘***‘,item[‘lineContent‘].encode(‘utf8‘)):raiseDropItem("noneedin%s"%item[‘lineContent‘])else:ifspider.name==‘**‘:query=self.dbpool.runInteraction(self._conditional_insert,item)#query.addErrback(self.handle_err..
分类:其他好文   时间:2015-04-06 06:35:15    阅读次数:1264
1条  
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!