前序 最近在研究反爬虫策略，写了一个大众点评评论采集的程序，途中遇到了一些坑有感而发分享给大家，大众点评是基于css机制实现的字体加密技术来阻碍我的进行准确数据的抓取 正文 图1 根据图1我们可以看出部分文字在源码中是无法得到正常显示的，对应的我们解析也只能得到一些无用的svg标签,且又由于文字本身 ...
分类：
编程语言 时间：
2020-09-04 17:42:55
阅读次数：
70
1.对查询进行优化，应尽量避免全表扫描，首先应考虑在where及orderby涉及的列上建立索引。2.应尽量避免在where子句中使用!=或<>操作符，否则将引擎放弃使用索引而进行全表扫描。3.应尽量避免在where子句中对字段进行null值判断，否则将导致引擎放弃使用索引而进行全表扫描，如：selectidfromtwherenumisnull可以在num上设置默认值0，确保表中nu
分类：
数据库 时间：
2020-08-26 19:01:29
阅读次数：
65
#!/usr/bin/env python# -*- coding:utf-8 -*-# Author:guozhen.zhangimport MySQLdbimport timeimport os# 创建备份binlog目录project_path = '/data/binlog_back' # ...
分类：
数据库 时间：
2020-08-25 15:45:56
阅读次数：
71
无盘工作站其实就是把硬盘和主机分离，无盘工作站只执行操作不执行存储。 无盘工作站之所以能够启动，是由硬件（工作站端）和软件（服务器端）共同配合的结果。软件上，就是服务器上的远程启动相关服务和无盘系统软件；硬件上，则是工作站网卡上的BootROM芯片。 ...
分类：
其他好文 时间：
2020-08-18 14:01:21
阅读次数：
154
文章推荐1大牛坐镇|高端JAVA纯技术群你要加入吗？2SpringCloud中微服务之间调用的安全性(下篇)3SpringCloud中微服务之间调用的安全性4知识点-SpringBoot统一异常处理汇总5SpringBoot1.X和2.X优雅重启实战前言前后端分离的开发方式，我们以接口为标准来进行推动，定义好接口，各自开发自己的功能，最后进行联调整合。无论是开发原生的APP还是webapp还是PC
某些具体程序要求待未发送完的数据发送出去后再关闭socket，可通过设置让程序满足要求： struct linger { u_short l_onoff; u_short l_linger; }; struct linger m_sLinger; m_sLinger.l_onoff = 1; //在 ...
分类：
其他好文 时间：
2020-08-02 12:49:38
阅读次数：
84
背景 小编最近接触了Mysql数据库表反射生成java实体类（POJO）和映射文件（xml文件），使用Netbeans上的jeddict插件生成JPA(JPA是Java Persistence API的简称，中文名Java持久层API，是JDK 5.0注解或XML描述对象－关系表的映射关系，并将运行 ...
分类：
数据库 时间：
2020-07-30 22:09:10
阅读次数：
76
__buildin_expect 功能是将分支转移信息提供给编译器，这样编译器可以对代码进行优化，以减少指令跳转带来的性能下降。 __buildin_expect 是 gcc 引入的指令，它允许编码人员将最有可能 的分支告诉编译器。写法为： __buildin_expect(exp, n) 意为 e ...
分类：
其他好文 时间：
2020-07-30 22:06:14
阅读次数：
66
import requests; import re; import os; import parsel; 1.请求网页 header = { "user-agent":'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_5) AppleWebKit/537. ...
分类：
编程语言 时间：
2020-07-29 21:38:42
阅读次数：
68
今天用jdbc连接MySQL 怎么连接都是Communications link failure，网上查了一圈资料，基本都是mysql﹥ show global variables like 'wait_timeout'; wait_timeout的设置问题，按照他们的改了后，还是failure，我 ...
分类：
数据库 时间：
2020-07-28 22:13:05
阅读次数：
80
