在爬取的过程中发现,访问频率太快会导致网站弹出滑动验证,所以设定了时间随机时间延迟,这样子就能保证爬取的信息完整,我选的是青岛市的小区,后续也可以添加输入市名爬取相关内容,二级页面的房子的平均价格是动态生成的,需要发送一个请求得到一个json,请求的url比较复杂,而且还要再发送一次请求,因此直接在 ...
分类:
其他好文 时间:
2019-10-27 11:10:15
阅读次数:
216
function uuid() { const s = []; const hexDigits = "0123456789abcdef"; for (let i = 0; i < 36; i++) { s[i] = hexDigits.substr(Math.floor(Math.random() ...
分类:
Web程序 时间:
2019-10-26 10:56:12
阅读次数:
102
在博客园搜素全局唯一有序ID,罗列出来的文章大致讲述了以下几个问题,常见的生成全局唯一id的常见方法 :使用数据库自动增长序列实现 ; 使用UUID实现; 使用redis实现; 使用Twitter的snowflake算法实现;使用数据库+本地缓存实现。作为一个记录性质的博客,简单总结一下。 在实际的 ...
分类:
其他好文 时间:
2019-10-25 13:22:27
阅读次数:
67
今年双11,该怎么玩?要如何拼团? 小编研究了N遍的活动规则之后,终于得出了一套“通关攻略”来给各位参考。 ...
分类:
其他好文 时间:
2019-10-24 19:51:38
阅读次数:
105
HTTPS数据加密是否可以防止重放攻击? 否,加密可以有效防止明文数据被监听,但是却防止不了重放攻击。 防重放机制 我们在设计接口的时候,最怕一个接口被用户截取用于重放攻击。重放攻击是什么呢?就是把你的请求原封不动地再发送一次,两次...n次,一般正常的请求都会通过验证进入到正常逻辑中,如果这个正常 ...
EF在处理并发上并不是很好,很多时候我们需要手动写sql操作数据库。但是在基类中我们如何获取当前服务上下问操作的表呢? 使用正则是其中一种解决办法 其中sql= SELECT "Extent1"."uuid", "Extent1"."imageid", "Extent1"."description" ...
分类:
其他好文 时间:
2019-10-23 13:20:27
阅读次数:
72
## 磁盘分区 1、MBR 1982年 分区不超过2T 分区方式:柱面 临时配置ip 底子 ip a a ip/mask dev ens160 dd 命令? declare -i 2、GPT分区 支持128分区,使用64位,支持8Z-64Z。 使用128位UUID ## 分区 1、parted 分区 ...
分类:
其他好文 时间:
2019-10-21 09:39:16
阅读次数:
81
分区两种分区格式:MBR、GPTMBR分区MBR分区磁盘的分区表信息存放在硬盘0磁道第0个扇区内总共512字节前446字节为bootloader中间64位为磁盘分区表信息,每个分区信息占16个字节,总计存放4个分区。(这段就是需要备份出来的数据)最后的55AA为结束标志位MBR分区结构1.硬盘主引导记录MBR由4个部分组成2.主引导程序(偏移地址0000H--0088H),它负责从活动分区中装载,
分类:
其他好文 时间:
2019-10-20 09:17:23
阅读次数:
85
1. 虚拟机设置 1.1 编辑-->虚拟机网络编辑器-->VMnet8-->更改设置-->DHCP设置取消打勾 -->选择NAT模式,查看网关IP 2. 本地网络设置 更改适配器选项-->选择VMware...VMnet8-->更改协议版本4-->设置固定IP(IP为上面的网关ip) 3. Cent ...
分类:
其他好文 时间:
2019-10-17 14:10:35
阅读次数:
104