爬虫之request模块 request简介 基于GET请求 基本请求 带参数的get请求 headers 请求头 User Agent 我们要用爬虫来爬取数据究其本质就是通过脚本模拟浏览器来进行操作，在任何一个html界面我们通过f12来调用代码，通过network选项来找到请求头进行操作! 一般 ...
分类：
其他好文 时间：
2018-01-11 20:31:35
阅读次数：
219
from urllib import request from lxml import etree # url = '''http://bangumi.tv/anime/browser?sort=rank''' # response = request.urlopen(url) # html = r... ...
分类：
其他好文 时间：
2018-01-11 19:14:49
阅读次数：
179
引入Web模块 当前的pom.xml内容如下，仅引入了两个模块： spring-boot-starter：核心模块，包括自动配置支持、日志和YAML spring-boot-starter-test：测试模块，包括JUnit、Hamcrest、Mockito 引入Web模块，需添加spring-bo ...
分类：
编程语言 时间：
2018-01-11 18:22:22
阅读次数：
329
//控制器 [HttpPost] [Route("image/uploads")] public async Task<string[]> Uploads() { // 检查是否是 multipart/form-data if (!Request.Content.IsMimeMultipartCon ...
PHP超级全局变量PHP中预定义了几个超级全局变量（superglobals），这意味着它们在一个脚本的全部作用域中都可用。你不需要特别说明，就可以在函数及类中使用。PHP超级全局变量列表:$GLOBALS$_SERVER$_REQUEST$_POST$_GET$_FILES$_ENV$_COOKIE$_SESSION本章节我们将讲解几个常用的超级全局变量,其余变量我们在接下来几个章节会介绍到。P
分类：
Web程序 时间：
2018-01-11 15:47:50
阅读次数：
266
一直以为都在纳闷，为啥我的其他app崩溃次数几乎为0，而单单这个App的崩溃次数简直逆天了，我都不敢相信。 每天都有至少上千次crash。。。我也是服的 不甘心，趁着这次重构的机会，把代码好好捋了1下 看获取json，看绑定，看数据模型，貌似都没啥问题啊。 于是就把代码分块注释掉，看看哪一部分有bu ...
分类：
移动开发 时间：
2018-01-11 15:33:14
阅读次数：
209
第一种解决方案 ： 在控制器调用的方法上添加[ValidateInput(false)] 第二种解决方案 ： 在对应的asp.net web页面上加上ValidateRequest="false" requestValidationMode="2.0" ...
分类：
Web程序 时间：
2018-01-11 15:32:22
阅读次数：
171
重新装了虚拟机中的Linux系统后，在mac下ssh就连不上虚拟机了 localhost:~ zhouqian$ ssh root@172.17.9.19 @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ @ WARNING: R ...
分类：
系统相关 时间：
2018-01-11 15:23:24
阅读次数：
195
爬取过程，首先通过urllib.request.urlopen(url).read(),读取对应网页的全部源代码，然后根据上面的第一个正则表达式进行第一次信息过滤，过滤完成后，进行第二次过滤，找出所有目标的图片链接，将这些链接地址存储到一个列表中，然后遍历该列表，并将对应链接通过urllib.req ...
分类：
其他好文 时间：
2018-01-11 15:23:18
阅读次数：
88
import requests from requests import cookies # requests 更为强大，方便 url = 'http://www.baidu.com' session = requests.Session() #初始化一个session get,post,put s... ...
分类：
其他好文 时间：
2018-01-11 11:36:33
阅读次数：
140
