自己在学习React-Native过程中整理的一份学习指南,包含 教程、开源app和资源网站等,还在不断更新中。欢迎pull requests! React-Native学习指南本指南汇集React-Native各类学习资源,给大家提供便利。指南正在不断的更新,大家有好的资源欢迎Pull Reque ...
分类:
Web程序 时间:
2018-10-02 17:18:12
阅读次数:
262
常见的状态码 简单的模拟登陆 保存cookie信息 使用cookie登录 ...
分类:
其他好文 时间:
2018-10-02 13:56:18
阅读次数:
188
requests库 get请求: 1.通过requests.get()来调用: 2.添加header和查询参数: 如传入参数的get请求: 查询参数: response.text和response.content的区别: 1.response.content:这个是直接从网络上面抓取的数据。没有经过 ...
分类:
其他好文 时间:
2018-10-01 12:25:39
阅读次数:
133
本文来自网易云社区 作者:王涛 此处我们给出几个常用的代码例子,包括get,post(json,表单),带证书访问:Get 请求 Fiddler 抓到的报文请求头: POST JSON数据请求 Fiddler 抓到的报文请求头: POST Form表单数据请求 Fiddler 抓到的报文请求头: 添 ...
分类:
编程语言 时间:
2018-09-30 16:36:29
阅读次数:
248
1. HTTP协议 2. Requests库的7个主要方法 3. Robot协议 4. 网页解析 BeautifulSoup的解析器- 类的基本元素- 遍历功能 5. 正则表达式 6. 爬虫框架Scrapy 框架结构- 数据流 7. 分布式爬虫 多线程爬虫 多进程爬虫 8. 异步网站数据擦剂 9.爬 ...
分类:
其他好文 时间:
2018-09-30 15:03:37
阅读次数:
132
概述 近年来,随着网络应用的逐渐扩展和深入,如何高效的获取网上数据成为了无数公司和个人的追求,在大数据时代,谁掌握了更多的数据,谁就可以获得更高的利益,而网络爬虫是其中最为常用的一种从网上爬取数据的手段。 网络爬虫,即Web Spider,是一个很形象的名字。如果把互联网比喻成一个蜘蛛网,那么Spi ...
分类:
其他好文 时间:
2018-09-30 12:54:38
阅读次数:
183
简介 selenium最初是一个自动化测试工具,而爬虫中使用它主要是为了解决requests无法直接执行JavaScript代码的问题 selenium本质是通过驱动浏览器,完全模拟浏览器的操作,比如跳转、输入、点击、下拉等,来拿到网页渲染之后的结果,可支持多种浏览器 安装 1 下载驱动 if ma ...
分类:
其他好文 时间:
2018-09-30 12:46:10
阅读次数:
173
原因没有安装requests模块, 可以切换到python的安装目录找到 script文件夹 example: 进入cmd窗口切换到上面的目录直接运营下面两个命令中的一个 1. > Path\pip install requests 2. > Path\easy_install.exe reques ...
分类:
编程语言 时间:
2018-09-28 23:00:22
阅读次数:
472
1 import json 2 import os 3 from urllib.parse import urlencode 4 import pymongo 5 import requests 6 from bs4 import BeautifulSoup 7 from requests.exce... ...
分类:
数据库 时间:
2018-09-27 18:01:58
阅读次数:
207
打印后的结果为: 准备爬取:阳光下校花美女迷人桃花眼嘴http://img.7160.com/uploads/allimg/180913/13-1P913102541.jpghttp://img.7160.com/uploads/allimg/180913/13-1P913102541-50.jpg ...
分类:
其他好文 时间:
2018-09-27 12:04:18
阅读次数:
619