scrapy-redis是一个基于redis的scrapy组件,通过它可以快速实现简单分布式爬虫程序,该组件本质上提供了三大功能: scheduler - 调度器 dupefilter - URL去重规则(被调度器使用) pipeline - 数据持久化 scrapy-redis组件 1. URL去 ...
分类:
其他好文 时间:
2017-09-05 19:40:35
阅读次数:
197
同学面试时遇到一个问题,面试官问他,有一个现成的APP马上要上线了,怎么在不改原来代码,也不改xib、storyboard的情况下快速实现国际化。这里应同学请求写下此教程。反正国际化的步骤都要搞一遍,干脆写一个详细、全面的教程。 一、配置国际化语言 点击progect->info->localiza ...
分类:
移动开发 时间:
2017-09-03 10:00:46
阅读次数:
358
1.python语言简单、方便,其内部可以快速实现排列组合算法,下面做简单介绍、 2.一个列表数据任意组合 2.1主要是利用自带的库 1 2 3 4 5 6 7 8 9 1 2 3 4 5 6 7 8 9 3.排列的实现 1 2 3 4 5 6 7 8 9 1 2 3 4 5 6 7 8 9 可以根 ...
分类:
编程语言 时间:
2017-08-31 21:38:22
阅读次数:
264
hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供简单的sql查询功能,可以将sql语句转换为MapReduce、Tez任务进行运行。 其优点是学习成本低,可以通过类SQL语句快速实现简单的MapReduce统计,不必开发专门的MapReduce应用,十分 ...
分类:
其他好文 时间:
2017-08-27 13:32:39
阅读次数:
119
写在最后: 1、不要过份追求连接池,因为我们的PYTHON一般当脚本使用,不涉及到高并发,多线程,不需要连接池,只有一个连接,连续操作而以,以前的想法是误区,需要高并发使用LUA去! 2、感觉速度还是可以接受的,使用PYTHON就是因为它方便,能快速实现想法,这就够了! ...
分类:
数据库 时间:
2017-08-26 22:13:44
阅读次数:
296
上半年一直忙于工作,没有太多的时间去写文字,期间也比较关注 .net core 的发展,比较看好 asp.net core 的 OO 抽象设计,也参考了abp.zero 的设计。其实大多数情况平常的工作主要还是结合一些理论与技术框架快速实现;个人的时间就是成本,最近打算整理下 Spring Boot... ...
分类:
编程语言 时间:
2017-08-25 16:48:29
阅读次数:
311
前言: shiro因为其简单、可靠、实现方便而成为现在最常用的安全框架,那么这篇文章除了会用简洁明了的方式讲一下基于spring的shiro详细配置和登录注销功能使用之外,也会根据惯例在文章最后总结一下shiro的大致配置使用流程,希望本篇文章能够后能给大家一种原来shiro这么简单的错觉感觉。 注 ...
分类:
编程语言 时间:
2017-08-17 10:50:14
阅读次数:
357
1, hive简介 hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供简单的sql查询功能,可以将sql语句转换为MapReduce任务进行运行。 其优点是学习成本低,可以通过类SQL语句快速实现简单的MapReduce统计,不必开发专门的MapReduc ...
分类:
其他好文 时间:
2017-08-13 00:20:56
阅读次数:
193
转 :链接:http://www.jianshu.com/p/e7bb97218946 正则表达式,一个十分古老而又强大的文本处理工具,仅仅用一段非常简短的表达式语句,便能够快速实现一个非常复杂的业务逻辑。熟练地掌握正则表达式的话,能够使你的开发效率得到极大的提升。 正则表达式经常被用于字段或任意字 ...
分类:
其他好文 时间:
2017-07-29 15:23:52
阅读次数:
115
Epii.js 简约而不简单的JavaScript模板引擎 项目地址 https://github.com/epaii/epii.js 极低门槛,拿来即用,别忘记star 特性 一个轻量级模板引擎,可快速实现数据与ui绑定(数据变动,UI自动变动),快速实现事件绑定和处理,不依赖任何第三方库,仅仅8 ...
分类:
Web程序 时间:
2017-07-28 11:03:30
阅读次数:
359