爬虫固定套路 1.提取数据(1.找到需要爬取的url,通过http请求获取html页面) 2.解析数据(1.数据筛选,2.数据过滤,3.获取有效数据) 最难搞的就是这一步,因为你要去分析解析人家前端页面Html的格式,这里也就是爬虫功放战的主要战场 3.数据入库 一、提取数据 1.找到需要爬取页面的 ...
分类:
其他好文 时间:
2020-06-22 13:04:10
阅读次数:
56
pytest.fixture 使用说明: 1,函数之间的通信是通过 pytest.fixture来实现的 2,pytest.fixture 可以实现在函数、类、模块或整个测试会话范围内重复使用fixture 3,request 使用fixture标记函数后,函数将默认接入一个request参数,它将 ...
分类:
其他好文 时间:
2020-06-22 10:55:04
阅读次数:
75
我们已经抓取了一个HTML页面,接下来,我们使用BeautifulSoup来分析页面。 import requests from bs4 import BeautifulSoup page = requests.get("https://kevinhwu.github.io/demo/python- ...
分类:
编程语言 时间:
2020-06-22 10:52:00
阅读次数:
56
1、多态性严格来讲有两种描述形式:。 方法的多态性: |- 方法的重载:同一个方法名称,会根据传入参数的类型及个数不同执行不同的方法。 |- 方法的覆写:同一个方法,会根据子类的不同,实现不同的功能。 对象的多态性:指的是发生在继承关系类之中,子类和父类之间的转换 |- 向上转型(自动完成):父类 ...
分类:
编程语言 时间:
2020-06-22 10:50:07
阅读次数:
47
Selenium WebDriver 提供了web自动化各种语言(java python ruby等等) 调用接口库 提供 各种浏览器的驱动(web driver) 来驱动浏览器的 特点 测试程度可以使用多种语言 自动化效率高, 自动化的功能全面 对web页面有良好的支持 支持分布式测试用例执行 S ...
分类:
其他好文 时间:
2020-06-22 00:55:21
阅读次数:
85
###java类加载到内存中的顺序 如果以new作为例子 Person p = new Person(20),其顺序为: new用到了Person.class,所以会找到Person.class文件并加载 执行该类中的static代码块,即给Person.class类进行初始化 在堆内存中开辟空间, ...
分类:
编程语言 时间:
2020-06-21 17:58:28
阅读次数:
72
Field[] getFields() 返回包含一个数组Field对象反射由此表示的类或接口的所有可访问的公共字段类对象。 public class ReflectDemo01 { public static void main(String[] args) throws ClassNotFound ...
分类:
其他好文 时间:
2020-06-21 15:51:18
阅读次数:
67
渲染 从上面这个图上,我们可以看到,浏览器渲染过程如下: 解析HTML,生成DOM树,解析CSS,生成CSSOM树 将DOM树和CSSOM树结合,生成渲染树(Render Tree) Layout(回流):根据生成的渲染树,进行回流(Layout),得到节点的几何信息(位置,大小) Painting ...
分类:
Web程序 时间:
2020-06-21 11:34:15
阅读次数:
81
demo.ts class Header { constructor() { const elem = document.createElement('div'); elem.innerText = 'This is Header'; document.body.appendChild(elem); ...
分类:
其他好文 时间:
2020-06-21 10:06:11
阅读次数:
50
""" 在实际开发中,对象的某些属性或方法可能只希望在对象的内部使用,而不希望在外部被访问到 私有属性就是对象不希望公开的属性 私有方法就是对象不希望公开的方法 定义方法: 在定义属性或方法时,在属性名或者方法名前增加两个下划线,定义的就是私有属性或方法 """ class Women(): def ...
分类:
其他好文 时间:
2020-06-21 00:32:16
阅读次数:
78