爬虫的具备条件 jdbc：操作数据库。 ehcache(redis)：重复url判断。 log4j：日志记录。 httpclient：发送http请求。 jsoup：解析返回的网页内容。 Maven的使用： （1）log4j 的使用； 1. 使用 Maven 下载 log4j 的 Jar 包 2. ...
分类：
其他好文 时间：
2020-06-11 16:23:52
阅读次数：
63
日志库需求分析 1. 支持往不同的地方输出日志 2. 日志分级别 Debug Trace Info Warning Error Fatal 3. 日志要支持开关控制 4. 完整的日志记录要包含时间、行号、文件名、日志级别、日志信息 5. 日志文件要切割 按文件大小切割 按riq切割 具体实现 目录结 ...
分类：
编程语言 时间：
2020-06-11 13:45:43
阅读次数：
73
慢日子查询 MySQL的慢查询日志是MySQL提供的一种日志记录，它用来记录在MySQL中响应时间超过阀值的语句，具体指运行时间超过long_query_time值的SQL，则会被记录到慢查询日志中。 当然，如果不是调优需要的话，一般不建议启动该参数，因为开启慢查询日志会或多或少带来一定的性能影响。 ...
分类：
数据库 时间：
2020-06-11 00:33:42
阅读次数：
66
MySQL备份一般采用全库备份加日志备份的方式，根据业务的需要，可以采用每周日凌晨1点进行完全备份以及每小时进行一次增量备份，这样在MySQL故障后可以使用完全备份和日志备份尽可能的去恢复最完整的数据。一、binlog日志恢复MySQL的二进制日志记录着该数据库所有增删改的操作日志（前提是需要自己开启binlog），还包括了这些操作的执行时间，binlog的使用场景无外乎就是主从同步以及恢复数据库
分类：
数据库 时间：
2020-06-08 12:35:39
阅读次数：
117
tracing 什么是 Tracing 图片来源 Metrics, tracing, and logging Wikipedia 中，对 Tracing 的定义 是，在软件工程中，Tracing 指使用特定的日志记录程序的执行信息，与之相近的还有两个概念，它们分别是 Logging 和 Metric ...
分类：
其他好文 时间：
2020-06-07 09:13:37
阅读次数：
80
场景：整个系统的DML操作需要记录日志 记录内容：1 操作人 2 操作时间 3 操作类型（登录 新增 修改 删除） 4 操作描述 5 详细请求数据（varchar2（）） 6 操作IP ==>日志表 实现： 原来方式：在每个方法的里面编写记录日志代码； 缺点：代码重复 ，与原有逻辑耦合度高。 AOP ...
分类：
其他好文 时间：
2020-06-03 23:24:58
阅读次数：
75
任何一个系统都需要日志记录功能，以便开发调试，线上环境追溯问题。 常用的日志记录框架Log4j。其是apache的一个开源日志组件。 #生产环境使用info #log4j.rootLogger = info,stdout,logfile #开发环境使用debug log4j.rootLogger = ...
分类：
其他好文 时间：
2020-06-03 00:58:58
阅读次数：
92
log4j定义了8个级别的log（除去OFF和ALL，可以说分为6个级别），优先级从高到低依次为：OFF、FATAL、ERROR、WARN、INFO、DEBUG、TRACE、 ALL。 ALL：最低等级的，用于打开所有日志记录。 TRACE： designates finer-grained inf ...
分类：
其他好文 时间：
2020-05-30 21:47:46
阅读次数：
76
最近公司要做一个用户访问日志记录统计分析的功能，需要记录日志，但是公司的产品一天大概产生百万级的日志信息， 本身日志记录信息就比较固化和简单（基本不会存在改动），平时没有什么用，就是在统计分析时需要查用一下，另外日志需要长期存储不删除！ 于是问题的难点是：如何存储大量的日志信息和在此基础上做查询分析 ...
分类：
数据库 时间：
2020-05-30 20:17:04
阅读次数：
82
在许多Go语言项目中，我们需要一个好的日志记录器能够提供下面这些功能： 能够将事件记录到文件中，而不是应用程序控制台。 日志切割-能够根据文件大小、时间或间隔等来切割日志文件。 支持不同的日志级别。例如INFO，DEBUG，ERROR等。 能够打印基本信息，如调用文件/函数名和行号，日志时间等。 G ...
分类：
编程语言 时间：
2020-05-28 19:29:46
阅读次数：
87
