pyspider示例代码官方网站是http://demo.pyspider.org/。上面的示例代码太多，无从下手。因此本人找出一下比较经典的示例进行简单讲解，希望对新手有一些帮助。 示例说明： pyspider爬取的内容通过回调的参数response返回，response有多种解析方式。1、res ...
分类：
Web程序 时间：
2018-09-09 20:07:02
阅读次数：
285
一：概念 二：动机 三：代码解析（建造房子） 四：模式定义 五：进一步优化（对象过于复杂，除了上面步骤还有其他方法和属性） 六：类图（结构） 七：要点总结 （一）Builder模式主要用于“分步骤构建一个复杂对象”。在这其中“分步骤”是一个稳定算法，而复杂对象的各个部分则经常变化。 （二）变化的点在 ...
分类：
其他好文 时间：
2018-08-26 20:07:16
阅读次数：
177
Javascript注意的地方有： a.在包含外部JavaScript文件时，必须将src属性设置为指向相应文件的URL.而这个文件既可以是与包含它的页面位于同一服务器上的文件，也可以是其他任何域中的文件。 b.所有<script>元素都会按照它们中出现的先后顺序依次被解析。在不使用defer和as ...
分类：
编程语言 时间：
2018-08-22 21:52:49
阅读次数：
147
背景 最近做项目，业务有几百个Excel文件需要上传到系统，由于是薪酬数据内容保密，原始文件不能提供，给了Excel 2007格式的测试数据。 用java代码解析Excel 2007格式，开发完成之后进入UAT，客户测试时说原始文件格式是Excel 2003版本的，给的文件是转化之后的，无奈之下 重 ...
分类：
其他好文 时间：
2018-08-19 18:27:01
阅读次数：
167
python爬虫 一.爬虫 WHAT 通过程序模拟浏览器请求站点的行为，把站点返回的HTML代码/JSON数据/二进制数据（图片/视频）爬到本地，进而提取自己所需的数据，存放起来使用。 二.爬虫 WAY 获取网络数据的方式： ①.浏览器提交请求→下载网页代码→解析成网页 ②.模拟浏览器发送请求（获取 ...
分类：
编程语言 时间：
2018-08-11 18:56:31
阅读次数：
168
一、深入JVM锁机制：synchronized synrhronized关键字简洁、清晰、语义明确，因此即使有了Lock接口，使用的还是非常广泛。其应用层的语义是可以把任何一个非null对象作为"锁"，当synchronized作用在方法上时，锁住的便是对象实例（this）；当作用在静态方法时锁住的 ...
分类：
其他好文 时间：
2018-08-10 23:19:38
阅读次数：
186
我们的学习爬虫的动力是什么？有人可能会说：如果我学好了，我可以找一个高薪的工作。有人可能会说：我学习编程希望能够为社会做贡献（手动滑稽）有人可能会说：为了妹子！.....其实我们会发现妹子才是第一生产力呀！今天咱们就是爬取今日头条，你要问我为什么要爬取今日头条？是因为爱嘛？是因为责任嘛？不，是因为头条里面的有很多美女图片，然后我们可以把她们都爬取下来！！！是不是想想都觉得很兴奋，是不是都要流鼻血了
分类：
编程语言 时间：
2018-08-08 16:10:24
阅读次数：
161
书接上文 我们先来看区块的结构 区块结构很清晰。 一个区块就是一个创建时间、描述字符、区块随机数字等数据组成。 我们要创建一个区块就是根据创建时间、描述字符、区块随机数字等数据来计算出一个哈希值(_CalculateHash函数的功能)。 由于_nNonce与创建时间是一值在变化的，_Calcula ...
分类：
其他好文 时间：
2018-08-06 11:46:52
阅读次数：
134
原帖地址：https://blog.csdn.net/hz5034/article/details/54630909 main()执行流程 main()代码解析 ...
分类：
其他好文 时间：
2018-08-06 00:35:33
阅读次数：
169
一、编写插件基类 1、目录结构 1、我是如何获知我有多少种系统？ 2、运行结果截图 cmd和state只要一执行就会自动去提取主机 二、获取主机列表 1、目录结构 2、代码解析 1、注册admin组件 2、创建超级用户进入后台创建测试数据 3、默认操作系统类型 4、判断输入的命令有没有超过边界 三、 ...
分类：
其他好文 时间：
2018-08-05 19:36:05
阅读次数：
156
