Spider Spider类定义了如何爬取某个(或某些)网站。包括了爬取的动作(例如:是否跟进链接)以及如何从网页的内容中提取结构化数据(爬取item)。 换句话说，Spider就是您定义爬取的动作及分析某个网页(或者是有些网页)的地方。 class scrapy.Spider是最基本的类，所有编写 ...
分类：
其他好文 时间：
2018-04-01 20:50:49
阅读次数：
179
{/* 上传图片配置项 */"imageActionName": "uploadimage", /* 执行上传图片的action名称 */"imageUrl":"http://upload.qiniu.com/","imageFieldName": "file", /* 提交的图片表单名称 */"i ...
分类：
Web程序 时间：
2018-03-26 10:52:46
阅读次数：
231
上一篇文章介绍了httpUrlConnection 访问网页 的java 代码 本篇文章介绍Jsoup 访问网页 首先 到官网上 https://jsoup.org/download 下载 Jsoup-1.11.2.jar 导入到项目中 新建一个类 jsoupCrawler 编写如下代码 运行后的结 ...
分类：
Web程序 时间：
2018-03-14 15:05:23
阅读次数：
224
安装echarts依赖 创建图表 全局引入 main.js // 引入echarts import echarts from 'echarts' Vue.prototype.$echarts = echarts Hello.vue <div id="myChart" :style="{width: ...
分类：
其他好文 时间：
2018-02-05 14:15:55
阅读次数：
161
1、对MVC的认识 1、启动项在Global.asax.cs文件中，RouteConfig.RegisterRoutes(RouteTable.Routes);定义路由事件，可以设置启动项【默认是Home/Index】； 2、Views/Home/Index.cshtml文件是页面内容，在@.... ...
分类：
Web程序 时间：
2018-01-30 12:26:12
阅读次数：
260
本程序在华为荣耀4A上测试可跳达3000分 工具：ADB 原理： 程序代码：（源码未经优化） ...
分类：
微信 时间：
2018-01-27 00:29:54
阅读次数：
339
canvas可以实现不同动画效果，本文主要记录几种不同节日烟花效果实现。 实现一 效果地址 html css js 实现二 效果地址 html css js 实现三 效果地址 html css js var canvas = document.getElementById("cas"); var o ...
分类：
其他好文 时间：
2018-01-23 00:54:00
阅读次数：
314
python3.5安装并测试Scrapy以及错误解决，Scrapy框架结构清晰，基于twisted的异步架构可以充分利用计算机资源，是做爬虫必备基础，本文将对Scrapy的安装作介绍。 ...
分类：
编程语言 时间：
2018-01-18 22:08:45
阅读次数：
261
用Python玩转数据 Data Processing Using Python - Coursera https://www.coursera.org/learn/hipython/home/welcome Python 爬虫学习系列教程 - 极客学院 http://wiki.jikexueyua ...
分类：
编程语言 时间：
2018-01-05 23:31:23
阅读次数：
200
