基本Get请求： #-*- coding:utf-8 -*- import requests url = 'http://www.baidu.com' r = requests.get(url) print r.text 带参数Get请求： #-*- coding:utf-8 -*- import ...
分类：
其他好文 时间：
2019-01-25 17:51:52
阅读次数：
198
import json import time from urllib.parse import quote from urllib import request import requests """ 1.综合 2.视屏 3.资讯 4.小视屏 5.图片 6.用户 7.音乐 8.问答 9.微头条 1 ...
分类：
移动开发 时间：
2019-01-25 17:36:19
阅读次数：
830
相关连接： 创建于合并分支：https://www.liaoxuefeng.com/wiki/0013739516305929606dd18361248578c67b8067c8c017b000/001375840038939c291467cc7c747b1810aab2fb8863508000 g ...
分类：
其他好文 时间：
2019-01-25 12:50:10
阅读次数：
208
第75节：Java中的JSP,EL和JSTL 哭吧看不完的!!! 和`Session 请求转发和重定向的区别: 1. 地址不一样 2. 请求次数也不一样 3. 数据无法传递 4.跳转范围有限制 5. 效率 请求转发请求1次,只能对当前项目跳转,重定向请求2次.重定向是无法传递的,重定向对跳转范围没有 ...
分类：
编程语言 时间：
2019-01-25 00:16:30
阅读次数：
212
# -*- coding: utf-8 -*- import json import time import scrapy from inline_requests import inline_requests class CoscoSpider(scrapy.Spider): name = 'co... ...
分类：
其他好文 时间：
2019-01-24 18:50:36
阅读次数：
398
快速上手(官网地址：http://www.python-requests.org/en/master/user/quickstart/） 发送请求 首先导入Requests模块 试着获取一个网页 返回的 r 是 Response 对象，可以从这个对象中获得所有信息。 Requests 简单的 API ...
分类：
编程语言 时间：
2019-01-24 11:04:42
阅读次数：
231
第1章 课程介绍介绍课程的主要内容，课程内容安排。1-1 最火python3玩转实用小工具课程导学。 试看 第2章 自主研发-购书比价工具首先做好知识储备，讲解JSON、xpath、requests等用法以及字符串的高级用法。然后结合所学知识逐步分析当当、淘宝、京东、1号店的数据结构，实现数据爬取， ...
分类：
编程语言 时间：
2019-01-24 00:30:36
阅读次数：
271
引入 在学习爬虫之前可以先大致的了解一下HTTP协议~ HTTP协议：https://www.cnblogs.com/peng104/p/9846613.html 爬虫的基本流程 简介 简介：Requests是用python语言基于urllib编写的，采用的是Apache2 Licensed开源协议 ...
分类：
其他好文 时间：
2019-01-23 22:36:33
阅读次数：
206
Downloader Middleware处理的过程主要在调度器发送requests请求的时候以及网页将response结果返回给spider的时候, 所以说下载中间件是结余Scrapy的request/response处理的钩子, 用于修改Scrapy request和response. 编写自己 ...
分类：
编程语言 时间：
2019-01-23 20:31:52
阅读次数：
273
selenium模块 什么是selenium？selenium是Python的一个第三方库，对外提供的接口可以操作浏览器，然后让浏览器完成自动化的操作。 selenium最初是一个自动化测试工具,而爬虫中使用它主要是为了解决requests无法直接执行JavaScript代码的问题 selenium ...
分类：
其他好文 时间：
2019-01-23 00:17:17
阅读次数：
218
