数据去重 生成指纹：利用hashlib的sha1，对request的请求体、请求url、请求方法进行加密，返回一个40位长度的16进制的字符串，称为指纹 进队： 如果请求需要过滤，并且当前请求的指纹已经在指纹集合中存在了，就不能进入队列了 如果请求需要过滤，并且请求的指纹是一个新的指纹，进入队列 如 ...
分类：
其他好文 时间：
2019-08-03 21:11:24
阅读次数：
75
importhashlibdef_verfy_ac(private_key,params):items=sorted(params.items(),key=lambdax:x[0])params_data=""foriinitems:params_data=params_data+i[0]+i[1]params_data=params_data+private_keysign=hashlib.sh
分类：
编程语言 时间：
2019-08-01 15:58:28
阅读次数：
128
模块 json pickle os sys hashlib collections 1. 序列化模块 ? 推荐使用json json是各种语言通用的 pickle(python私有) 1.定义:就是将一个常用的数据化结构转化成一个特殊的序列,并且将这个特殊的序列还可以反解回去 2. 主要用途: 1. ...
分类：
其他好文 时间：
2019-07-31 14:54:51
阅读次数：
79
import socketserver, os , json , struct, hashlib codes = { "文件已存在":1001, "文件不存在":1002 } File_Path = r'C:\Users\17303\Desktop\电脑的组成.avi' #需要传的文件路径 File... ...
分类：
其他好文 时间：
2019-07-30 18:52:36
阅读次数：
102
序列化,os,sys,hashlib,collections 1.序列化 什么是序列化?序列化的本质就是将一种数据结构(如字典,列表)等转换成一个特殊的序列(字符串或者bytes)的过程就叫做序列化. 2.os os模块:程序员通过python向操作系统发送指令(与操作系统交互的接口) 3.sys ...
分类：
其他好文 时间：
2019-07-29 10:04:48
阅读次数：
91
序列化 os sys hashlib collections ...
分类：
其他好文 时间：
2019-07-26 19:08:34
阅读次数：
68
包、logging模块、hashlib模块、openpyxl模块、深浅拷贝 一、包 1、模块与包 模块的三种来源： 1、内置的 2、第三方的 3、自定义的 模块的四种表现形式： 1、py文件 2、共享库 3、文件夹（一系列模块的结合体），即包 4、C++编译的连接到Python内置的 2、模块的导入 ...
分类：
其他好文 时间：
2019-07-23 00:04:46
阅读次数：
127
阅读目录 认识模块 什么是模块 模块的导入和使用 常用模块一 collections模块 时间模块 random模块 os模块 sys模块 序列化模块 re模块 常用模块二 hashlib模块 configparse模块 logging模块 认识模块 返回顶部 什么是模块 什么是模块？ 常见的场景： ...
分类：
其他好文 时间：
2019-07-22 09:44:41
阅读次数：
81
一、loggin模 2. 默认级别为warning，默认打印到终端 3. 为logging模块指定全局配置，针对所有logger有效，控制打印到文件中 可在logging.basicConfig()函数中通过具体参数来更改logging模块默认行为，可用参数有 filename：用指定的文件名创建F ...
分类：
其他好文 时间：
2019-07-21 20:03:54
阅读次数：
97
1 包 首次导入包: 先产生一个执行文件的名称空间 1.创建包下面的__init__.py文件的名称空间 2.执行包下面的__init__.py文件中的代码 将产生的名字放入包下面的__init__.py文件名称空间中 3.在执行文件中拿到一个指向包下面的__init__.py文件名称空间的名字 在 ...
分类：
其他好文 时间：
2019-07-20 21:34:36
阅读次数：
116
