import requestsfrom bs4 import BeautifulSouprespone=requests.get('https://www.autohome.com.cn/news/')respone.encoding='gbk'# print(respone.text)soup=B ...
分类：
编程语言 时间：
2019-10-31 18:51:20
阅读次数：
187
数据分析三剑客之: Numpy 一丶Numpy的使用 ? numpy 是Python语言的一个扩展程序库,支持大维度的数组和矩阵运算.也支持针对数组运算提供大量的数学函数库 创建ndarray 使用np的routines函数创建 nadarray的属性 二丶ndarray的基本操作 索引 ? 维与列 ...
分类：
编程语言 时间：
2019-10-29 09:59:31
阅读次数：
128
2019年3月27日，继开学到现在以来，开了软件工程和信息系统设计，想来想去也没什么好的题目，干脆就想弄一个实用点的，于是产生了做“学生服务系统”想法。相信各大高校应该都有本校APP或超级课程表之类的软件，在信息化的时代能快速收集/查询自己想要的咨询也是种很重要的能力，所以记下了这篇博客，用于总结我 ...
分类：
编程语言 时间：
2019-10-28 16:15:53
阅读次数：
138
在公司做分布式深网爬虫，搭建了一套稳定的代理池服务，为上千个爬虫提供有效的代理，保证各个爬虫拿到的都是对应网站有效的代理IP，从而保证爬虫快速稳定的运行，当然在公司做的东西不能开源出来。不过呢，闲暇时间手痒，所以就想利用一些免费的资源搞一个简单的代理池服务。 1、问题 代理IP从何而来？ 刚自学爬虫 ...
分类：
编程语言 时间：
2019-10-26 17:18:25
阅读次数：
86
假设学生系统中数据为固定格式：(名字，年龄，性别，邮箱)(‘jack‘,‘16‘,‘male‘,‘jack3001@gmail.com‘)(‘eric‘,‘17‘,‘male‘,‘eric@qq.com‘)(‘xander‘,‘16‘,‘female‘,‘lucy123@yahoo.com‘)方案一：fromenumimportIntEnumNAME,AGE,SEX,EMAIL=range(4)s
分类：
编程语言 时间：
2019-10-25 23:32:51
阅读次数：
125
原文链接：https://www.cnblogs.com/zhaof/p/6898138.html 在上文中我们说了：爬虫就是请求网站并提取数据的自动化程序。其中请求，提取，自动化是爬虫的关键！下面我们分析爬虫的基本流程 爬虫的基本流程 发起请求通过HTTP库向目标站点发起请求，也就是发送一个Req ...
分类：
编程语言 时间：
2019-10-25 09:26:50
阅读次数：
84
原文链接：https://www.cnblogs.com/zhaof/p/6897393.html 整理这个文档的初衷是自己开始学习的时候没有找到好的教程和文本资料，自己整理一份这样的资料希望能对小伙伴有帮助 什么是爬虫？ 网络爬虫（又被称为网页蜘蛛，网络机器人，在FOAF社区中间，更经常的称为网页 ...
分类：
编程语言 时间：
2019-10-25 09:19:58
阅读次数：
88
这个错误，在使用List<T>的First函数遇到。 Sequence contains no elements? From "Fixing LINQ Error: Sequence contains no elements": When you get the LINQ error "Sequen ...
分类：
其他好文 时间：
2019-10-22 12:58:20
阅读次数：
158
Python爬虫，自动登录京东网站，查询商品库存，价格，显示购物车详情等。可以指定抢购商品，自动购买下单，然后手动去京东付款就行。 ...
分类：
编程语言 时间：
2019-10-20 11:19:22
阅读次数：
631
好久没更新博客了。打算写一个python的爬虫系列及数据分析。falg也不能随便立，以免打脸。 python爬取内容，是过程，分析数据是结果，最终得出结论才是目的。python爬虫爬取了内容，一般都是从网页上获取，那我们从html页面中如何提取出自己想要的信息呢？那就需要解析。目前常用的有Beaut ...
分类：
编程语言 时间：
2019-10-18 19:29:16
阅读次数：
103
