const request=require('request'); const cheerio=require('cheerio'); (function () { //页面信息==》简介相关 var getInfo=function (i) { var url='http://www.cnblog ...
分类：
其他好文 时间：
2017-12-10 14:37:49
阅读次数：
190
18.2 什么是机器人排除标准 《搜索引擎优化宝典(第2版)》第18章机器人、蜘蛛和爬虫，本章主要的内容有：什么是机器人、爬虫和蜘蛛；什么是机器人排除标准; Robots 元标签；用XML 网站地图使网页被收录。本节为大家介绍什么是机器人排除标准虫。 作者：马煜 译来源：清华大学出版社|2010-0 ...
分类：
其他好文 时间：
2017-12-09 23:57:03
阅读次数：
168
上篇对“国家标准全文公开系统”的国标进行抓取，本篇对食品领域的标准公开系统“食品安全国家标准数据检索平台”进行抓取。 平台地址：http://bz.cfsa.net.cn/db 一、标准列表 第一步还是去获取标准列表，通过高级搜索，输入空查询条件，则查询出全部的标准记录。 这时候可以看到，列表页的U ...
0x01 春节闲着没事(是有多闲)，就写了个简单的程序，来爬点笑话看，顺带记录下写程序的过程。第一次接触爬虫是看了这么一个帖子，一个逗逼，爬取煎蛋网上妹子的照片，简直不要太方便。于是乎就自己照猫画虎，抓了点图片。 科技启迪未来，身为一个程序员，怎么能干这种事呢，还是爬点笑话比较有益于身心健康。 0x ...
分类：
编程语言 时间：
2017-12-09 18:05:44
阅读次数：
271
参考资料：http://cuiqingcai.com/990.html 1.非面向对象模式 完整代码1： 注释1：糗事百科是不需要登录的，所以也没必要用到Cookie。 2.面向对象模式 上面代码是最核心的部分，下面我们要达到的目的是： 按下回车，读取一个段子，显示出段子的发布人，发布内容，点赞个数 ...
分类：
编程语言 时间：
2017-12-09 15:58:06
阅读次数：
277
Python的条件语句和循环语句的基础知识： 1.条件语句:包括单分支、双分支和多分支语句,if-elif-else 2.循环语句:while的使用及简单网络刷博器爬虫 3.循环语句:for的使用及遍历列表、元组、文件和字符串 在讲诉条件语句、循环语句和其他语句之前,先来补充语句块知识.(前面讲函数... ...
分类：
编程语言 时间：
2017-12-09 15:55:24
阅读次数：
193
如何用python下载一张图片 这里要用到的主要工具是 requests 这个工具，需要先安装这个库才能使用，该库衍生自 urllib 这个库，但是要比它更好用。多数人在做爬虫的时候选择它，是个不错的选择。 例如下载[http://p1.pstatp.com/large/4af100050861e2 ...
分类：
编程语言 时间：
2017-12-09 15:48:31
阅读次数：
179
Openpyx是一个用于读写Excel2010各种xlsx/xlsm/xltx/xltm文件的python库。 现在大多数用的都是office2010了，如果之前之前版本的可以使用xlrd读，xlwt写，这里就不介绍了。 入门范例 简单操作 创建一个workbook 一般创建workbook后至少会 ...
分类：
编程语言 时间：
2017-12-09 14:05:05
阅读次数：
188
