1.递归爬取解析多页页面数据 - 需求：将糗事百科所有页码的作者和段子内容数据进行爬取切持久化存储 - 需求分析：每一个页面对应一个url，则scrapy工程需要对每一个页码对应的url依次发起请求，然后通过对应的解析方法进行作者和段子内容的解析。 实现方案： 1.将每一个页码对应的url存放到爬虫 ...
分类：
其他好文 时间：
2018-12-19 11:05:16
阅读次数：
139
糗事百科实例 爬取糗事百科段子，假设页面的URL是: http://www.qiushibaike.com/8hr/page/1 要求： 参考代码 ...
分类：
编程语言 时间：
2018-12-18 02:15:41
阅读次数：
152
本章将结合先前所学的爬虫和正则表达式知识，做一个简单的爬虫案例，更多内容请参考:Python学习指南 现在拥有了正则表达式这把神兵利器，我们就可以进行对爬取到的全部网页源代码进行筛选了。 下面我们一起尝试一下爬取内涵段子网站： http://www.neihan8.com/article/list_ ...
分类：
编程语言 时间：
2018-12-17 23:59:16
阅读次数：
361
概述 KMP(Knuth Morris Pratt)算法是一种用来解决字符串匹配问题的算法，时间复杂度为O(n+m)，主要思想是当模式串与主串发生失配时，不必从头开始匹配，而是滑动到已经匹配的部分 next数组 在KMP算法中，next数组用来存储一段子串最大相等前后缀的长度加1，例如长度为i+1的 ...
分类：
编程语言 时间：
2018-12-16 17:10:11
阅读次数：
166
# 1.组内同学有问题及时反映给组长# 2.关于课上走神的问题： # 早睡 增加课间时间 课上的配合# 3.关于老师的进度# 4.关于课上的段子# 5.博客 —— 博客地址 ：# 代码为主，简单的注释# —— 项目地址# 6.复习# —— 给你们出题 跟着以往的进度# —— 画思维导图 # —— 基 ...
分类：
其他好文 时间：
2018-12-06 23:59:50
阅读次数：
254
数据库运维中盛传一个小段子，我误删除了数据库，改怎么办？有备份还原备份，没有备份就准备简历！听起来有趣但发生在谁身上，谁都笑不起来。接触了很多的客户发现90%客户的运维策略都不是很完善。本篇就分享一些常规的运维脚本，本篇没有涉及到的或不足的也请大家留言无私贡献深藏多年的脚本，谢谢！ 邮件 邮件主要用 ...
分类：
数据库 时间：
2018-12-04 15:40:29
阅读次数：
247
一.协作开发引发的问题 前端有个很流行的段子（其实前端有很多流行的段子）： 看完你们项目的源码，就知道你们团队有多少个人。 各种命名风格，各种冗余代码，各种缩进风格，各种奇葩注释和各种没有注释，眼中有码，心中无码，只有心累两个字，项目的整洁度会受到很多客观因素的影响，为了自己的身心健康，我们应该试图 ...
分类：
其他好文 时间：
2018-11-26 15:07:52
阅读次数：
184
准备爬取内涵段子的几则笑话，先查看网址：http://www.budejie.com/text/ 简单分析后发现每页的url呈加1趋势 第一页： http://www.budejie.com/text/1 第二页：http://www.budejie.com/text/2 ... 每页的笑话： <a ...
分类：
其他好文 时间：
2018-11-25 16:12:56
阅读次数：
156
第1章 课程概览介绍课程目标、开发内容、功能划分、开发顺序，开发所需要的前置知识及环境准备，并且介绍了与课程相关的前后端分离的思想，架构演进过程。1-1 课程导学1-2 功能划分和开发流程1-3 原料准备1-4 武功秘籍 第2章 开发准备演示前端工程环境搭建以及启动步骤，介绍了后台工程初始SSM框架 ...
分类：
编程语言 时间：
2018-11-25 13:16:32
阅读次数：
181
# python 3.7 from urllib.request import Request,urlopen import re,time class Neihan(object): def __init__(self): self.header={ 'Host': 'www.neihan8.co... ...
分类：
其他好文 时间：
2018-11-23 12:37:21
阅读次数：
375
