前言 反爬虫是网站为了维护自己的核心安全而采取的抑制爬虫的手段，反爬虫的手段有很多种，一般情况下除了百度等网站，反扒机制会常常更新以外。为了保持网站运行的高效，网站采取的反扒机制并不是太多，今天分享几个我在爬虫过程中遇到的反扒机制，并简单介绍其解决方式。 基于User-Agent反爬 简介：服务器后 ...
分类：
编程语言 时间：
2020-04-20 18:56:50
阅读次数：
90
tf.data.Dataset API非常丰富，主要包括创建数据集、应用transform、数据迭代等。 一、Dataset类初览 最简单的方法是根据python列表来创建： 处理文件数据，利用tf.data.TextLineDataset: 对于TFRecord格式可以利用TFRecordData ...
分类：
其他好文 时间：
2020-04-20 18:54:56
阅读次数：
236
我使用Python中字典dict()方法来存储图结构（这里使用的是邻接表） 举个例子，比如，将一个无向加权图（无向网）进行存储，如下图所示： 该图所对应的邻接表为： 此时，让字典中的键表示各个结点，值则表示各个结点的对应链表（即各个邻接点）。 其中，链表用列表list()来进行存储，而链表中的各个结 ...
分类：
编程语言 时间：
2020-04-19 19:36:15
阅读次数：
105
# 统计字典或者json字符串的深度 def depth(x): if type(x) is dict and x: return 1 + max(depth(x[a]) for a in x) if type(x) is list and x: return 1 + max(depth(a) fo ...
分类：
Web程序 时间：
2020-04-19 17:43:11
阅读次数：
93
1.打开题目，点击click 2.下载附件后，发现是一个密码字典，考虑该题为账号密码爆破 3.根据基础认证相关知识，Burp打开，输入admin/admin看下登录请求 4.将YWRtaW46YWRtaW4=解密内容为：admin:admin 5.需要使用python编写脚本将密码加密，脚本如下： ...
分类：
Web程序 时间：
2020-04-19 16:19:43
阅读次数：
473
"""本文件：研究内置函数：globals locals"""a = 1b = 2def func(): name = 'alex'age = 73print(globals()) # 返回的是字典：字典里面的键值对：全局作用域的所有内容。print(locals()) # 返回的是字典：字典里面的 ...
分类：
编程语言 时间：
2020-04-19 15:08:17
阅读次数：
74
Python实现字典dict Python字典dict实现原理 作为 dict 的 key 必须是可哈希的，也就是说不能是 list 等可变对象 可变对象在生命周期里面hash的值是会改变的，所以不能用 ...
分类：
编程语言 时间：
2020-04-19 14:42:33
阅读次数：
55
题目描述： 给定一个非空字符串 s 和一个包含非空单词列表的字典 wordDict，判定 s 是否可以被空格拆分为一个或多个在字典中出现的单词。 说明： 拆分时可以重复使用字典中的单词。你可以假设字典中没有重复的单词。示例 1： 输入: s = "leetcode", wordDict = ["le ...
分类：
其他好文 时间：
2020-04-19 14:35:57
阅读次数：
60
import json python转为json：json.dumps(obj) json转为python：json.loads(obj) import json """ json python [] : json中的数组 列表 list {} ： json中的对象 字典dict true True ...
分类：
编程语言 时间：
2020-04-19 01:20:01
阅读次数：
85
1、基础数据类型：string、int、float 2、格式化打印 3、条件判断：if elif else 4、循环：for、while 5、列表 6、字典 ...
分类：
编程语言 时间：
2020-04-19 00:40:27
阅读次数：
56
