由于多线程爬取数据比单线程的效率要高，尤其对于爬取数据量大的情况，效果更好，所以这次采用多线程进行爬取。具体代码和流程如下： import math import re from concurrent.futures import ThreadPoolExecutor import requests ...
分类：
编程语言 时间：
2021-05-24 12:04:44
阅读次数：
0
1.判断目录是否存在 在Python中，有时需要判断给定的目录是否存在，这时可以使用os.path模块提供的exists()函数实现。 os.path.exists(path) 其中，path为要判断的目录，可以是绝对路径，也可以采用相对路径。如果给定的路径存在，则返回true，否则返回false。 ...
分类：
编程语言 时间：
2021-05-24 12:03:48
阅读次数：
0
代码： 1 import time 2 import traceback 3 import requests 4 from lxml import etree 5 import re 6 from bs4 import BeautifulSoup 7 from lxml.html.diff impo ...
分类：
数据库 时间：
2021-05-24 12:00:17
阅读次数：
0
关键字参数 关键字参数允许我们在传入必选参数外，还可以接受关键字参数kw： def person(name, age, **kw) prit('name:', name, 'age:', age, 'other', kw) 这里的name, age是必须的，kw可选，意味着第三个参数开始我们可以传入 ...
分类：
编程语言 时间：
2021-05-24 11:11:59
阅读次数：
0
这篇文章主要是对python中的数据进行认识，对于很多初学者来讲，其实数据的认识是最重要的，也是最容易出错的。本文结合数据与内存形态讲解python中的数据，内容包括： 引用与对象 可变数据类型与不可变数据类型 引用传递与值传递 深拷贝与浅拷贝 （id函数：你可以通过python的内置函数 id() ...
分类：
编程语言 时间：
2021-05-24 11:08:14
阅读次数：
0
如果要限制关键字参数的名字，就可以用命名关键字参数，例如，只接收city和job作为关键字参数。 这种方式定义的函数如下： def person(name, age, *, city, job) print(name, age, city, job) # 调用 person('city', 22, ...
分类：
编程语言 时间：
2021-05-24 11:07:39
阅读次数：
0
批量修改文件名 python 对文件进行批量改名用到的是 os 模块中的 listdir 方法和 rename 方法。 os.listdir(dir)：获取指定目录下的所有子目录和文件名 os.rename(原文件名，新文件名）：对文件或目录改名 把混乱的文件名改成有序的文件名: import os ...
分类：
编程语言 时间：
2021-05-24 10:50:28
阅读次数：
0
Python3.7.3环境下通过RobotFramework-Ride运行自动化测试案例时，控制台信息显示乱码 进入到python的安装路径下： \Python-3.7.3\Lib\site-packages\robotide\contrib\testrunner 编辑testrunnerplugi ...
分类：
其他好文 时间：
2021-05-24 10:36:13
阅读次数：
0
1. 继承 继承使得你可以定义一个通用的类(即父类)，之后扩充该类为一个更加特定 的类(即子类)。 Java 术语中，如果类 C1 扩展自另一个类 C2, 那么就将 C1 称为次类(subclass ), C2 称为超类(superclass )。超类也称为父类 ( parent class) 或基 ...
分类：
其他好文 时间：
2021-05-24 10:22:57
阅读次数：
0
面向对象程序设计(OOP) 就是使用对象进行程序设计。对象(object) 代表现实世界中可以明确标识的一个实体。 一个对象的狀态(state，也称为特征（property) 或属性(attribute)) 是由具有当前值的数据域来表示的。— 个对象的行为(behavior, 也称为动作(actio ...
分类：
其他好文 时间：
2021-05-24 10:22:43
阅读次数：
0
