前一篇小文中就提到了python的requests库可以获取网络编码中的所有内容，我们获取了自然就必须对它进行加工处理，就像我们学习一样，一本书，我们可以轻易的获取，但是它究竟是在讲哲学还是讲历史呢还是其他云云，需要我们认真分析，取其精华去其糟粕。而在python当然也有做这个工作的’人‘，就是我们 ...
分类：
编程语言 时间：
2017-07-31 20:05:32
阅读次数：
446
总结起来，有俩点最重要： 1）scrapy使用twisted异步网络框架，类似nodejs，性能高； 2）scrapy内置的selector比beautifulsoup效率要高很多； ...
分类：
其他好文 时间：
2017-07-30 18:01:48
阅读次数：
125
原题链接 题意：求[l,r]中高位%低位等于0的数字个数。(不含0)分析：此题有三种方法。1.暴搜，毕竟最多才10个位。2.数位dp，预处理好整体的，再处理细节。 dp[i][j]表示第i位上的数字位j的情况数，dp[i][j]+=dp[i-1][k](j%k==0) 3.猜想这样的数字并不多，于是 ...
分类：
其他好文 时间：
2017-07-29 11:27:36
阅读次数：
203
from urllib.request import urlopen from bs4 import BeautifulSoup import re class doubanSpider(): def __init__(self): """ 初始化, 页码,URL,存储数据, """ self.pa... ...
分类：
编程语言 时间：
2017-07-28 19:26:58
阅读次数：
143
beautiful number Time Limit: 2000/1000 MS (Java/Others) Memory Limit: 32768/32768 K (Java/Others)Total Submission(s): 801 Accepted Submission(s): 518 ...
分类：
其他好文 时间：
2017-07-27 22:42:21
阅读次数：
1322
题目地址：http://acdream.info/problem?pid=1216 这题一開始用的是线段树。后来发现查询的时候还须要DP处理。挺麻烦。。也就不了了之了。。后来想到，这题事实上就是一个二维的最长上升子序列。。 要先排序，先按左边的数为第一keyword进行升序排序。再按右边的数为第二k ...
分类：
其他好文 时间：
2017-07-27 15:44:00
阅读次数：
169
# Python 爬虫项目1 ● Python 网页请求 requests POST GET 网页状态码 通过标签匹配内容 通过浏览器复制 copy selector title 的类型还是 标签 Tag soup.body.div.div.a 方式获取 python 使用代理发送网页请求 ...
分类：
编程语言 时间：
2017-07-27 13:39:27
阅读次数：
302
# Python 爬虫基础知识 ● Python 爬虫基础知识 安装爬虫库 beautifulsoup4 pip install beautifulsoup4 lxml HTML 解析器 pip install html5lib html5lib pip install html5lib ● 使用库 ...
分类：
编程语言 时间：
2017-07-27 09:35:31
阅读次数：
158
'''从web抓取数据:webbrowser:是python自带的,打开浏览器获取指定页面.requests:从因特网上下载文件和网页.Beautiful Soup:解析HTML,即网页编写的格式.selenium:启动并控制一个Web浏览器.selenium能够填写表单,并模拟鼠标在这个浏览器中点 ...
分类：
编程语言 时间：
2017-07-26 22:06:33
阅读次数：
282
