目录： scrapy-redis组件 scrapy-redis配置示例 scrapy-redis组件 一、scrapy-redis组件 1、scrapy-redis简介： scrapy-redis是一个基于redis的scrapy组件，通过它可以快速实现简单分布式爬虫程序，该组件本质上提供了三大功能 ...
分类：
编程语言 时间：
2017-10-30 14:37:03
阅读次数：
208
对于web开来说，用户登陆、注册、文件上传等是最基础的功能，针对不同的web框架，相关的文章非常多，但搜索之后发现大多都不具有完整性，对于web应用来说，包括数据库的创建，前端页面的开发，以及中间逻辑层的处理三部分。 本操作的环境： deepin linux 2013（基于ubuntu） pytho ...
分类：
Web程序 时间：
2017-10-30 14:23:12
阅读次数：
236
对于QQ截图，肯定是早就有认识了，只是一直没有去认真观察这个操作的具体实现步骤。所以这里将自己的记忆中的步骤简单的写一下： 习惯性用QQ或者TIM的人，一般是使用Ctrl+Alt+A 快捷键（热键）快速实现截图。 因为考虑到截图模式的时候 一般只能显示一个窗体 所以就考虑使用单例模式 在Screen ...
如果要以自动化的方式驱动Chrome进行数据抓取，必须实现Chrome Dev Protocol协议的客户端。这个协议本身并不复杂，我在之前的文章中也简单的介绍过一下。 Google本身有一个Node的实现chrome-remote-interface，对于其它语言，github上也有不少的实现，我 ...
分类：
其他好文 时间：
2017-10-05 00:23:15
阅读次数：
234
ViewPager是一个容器类，可以让用户左右滑动切换当前的View。 ...
分类：
移动开发 时间：
2017-09-27 13:31:48
阅读次数：
271
array_map()与array_column()用法如下： array_map();将回调函数作用到给定数组的单元上array_column();快速实现：将二维数组转为一维数组 array_column()函数格式为： array array_column ( array $input , m ...
分类：
Web程序 时间：
2017-09-21 11:29:15
阅读次数：
206
项目中有可能会碰到这样一种场景： 根据一个id，查询得到和id对应的完整数据信息存储对象，比如书籍id到书籍详细信息，用户id到用户详细信息等，详细信息字段可能包括几十甚至上百个数据字段，真正需要返回给调用方的字段实际上却只占其中一小部分，这是出于性能和带宽的考虑(甚至在有些场景中，处于隐私或者安全 ...
分类：
编程语言 时间：
2017-09-19 11:24:13
阅读次数：
148
tab切换是经常会在项目中可见的案例，怎么用简单的jquary代码来实现 ，其实也很简单，废话不多，来看这个案例，我先把布局写一下： 接下来，给布局添加css样式，也是很简单的样式，可优化： 最终，也是最重要的jquary来渲染实现效果了，前提一定要记得引用jquary.js，话不多说，看jquar ...
分类：
其他好文 时间：
2017-09-17 15:15:55
阅读次数：
94
scrapy-redis是一个基于redis的scrapy组件，通过它可以快速实现简单分布式爬虫程序，该组件本质上提供了三大功能： scheduler - 调度器 dupefilter - URL去重规则（被调度器使用） pipeline - 数据持久化 一、scrapy-redis组件 1. UR ...
分类：
其他好文 时间：
2017-09-06 18:23:28
阅读次数：
131
scrapy-redis是一个基于redis的scrapy组件，通过它可以快速实现简单分布式爬虫程序，该组件本质上提供了三大功能： scheduler - 调度器 dupefilter - URL去重规则（被调度器使用） pipeline - 数据持久化 scrapy-redis组件 1. URL去 ...
分类：
其他好文 时间：
2017-09-06 00:41:56
阅读次数：
102
