在认识binlog日志三种模式前，先了解一下解析binlog日志的命令工mysqlbinlog。mysqlbinlog工具的作用是解析mysql的二进制binlog日志内容，把二进制日志解析成可以在MySQL数据库里执行的SQL语句。binlog日志原始数据是以二进制形式存在的，需要使用mysqlb ...
分类：
数据库 时间：
2018-09-06 02:28:05
阅读次数：
237
一、错误日志解析： (1) 【ERROR】1452:无法在外键的表插入参考主键没有的数据 1452:无法在外键的表插入或更新参考主键没有的数据。由于item_discovery.itemid字段(外键)参考了items.itemid字段(主键)，当要在item_discovery表插数据时，如果it ...
分类：
数据库 时间：
2018-08-31 10:54:00
阅读次数：
226
一、调优参数设置 JVM的GC日志的主要参数包括如下几个： -XX:+PrintGC 输出GC日志 -XX:+PrintGCDetails 输出GC的详细日志 -XX:+PrintGCTimeStamps 输出GC的时间戳（以基准时间的形式） -XX:+PrintGCDateStamps 输出GC的 ...
分类：
其他好文 时间：
2018-08-10 01:26:56
阅读次数：
206
官方地址：https://www.elastic.co/guide/en/logstash-versioned-plugins/current/index.html 配置文件写法: # 日志导入input {}# 日志筛选匹配处理filter {}# 日志匹配输出output {} 日志解析配置文件 ...
分类：
其他好文 时间：
2018-08-05 13:09:11
阅读次数：
778
JVM 在Java应用程序优化中是不可缺少的一大重项，如何合理配置Java参数，如果验证配置参数的有效性，从GC日志中可以获得很重要的提示，以下是笔者对GC垃圾收集器默认开启的组合日志的部分的解析，希望能帮到想学习的同学O(∩_∩)O~~ JVM 在Java应用程序优化中是不可缺少的一大重项，如何合 ...
分类：
编程语言 时间：
2018-07-28 11:56:12
阅读次数：
244
在讲解binlog日志三种模式前，先了解一下解析binlog日志的命令工mysqlbinlog。mysqlbinlog工具的作用是解析mysql的二进制binlog日志内容，把二进制日志解析成可以在MySQL数据库里执行的SQL语句。binlog日志原始数据是以二进制形式存在的，需要使用mysqlbinlog工具转换成SQL语句形式。mysql的binlog日志作用是用来记录mysql内部增删改等
分类：
数据库 时间：
2018-07-25 22:01:18
阅读次数：
242
Oracle监听器是驻留在Oracle实例所在服务器上的独立进程。作为客户端进程连接实例的重要沟通组件，Oracle监听器扮演着重要的地位。本篇将从监听器日志入手，分析阅读监听器日志和日常监听器常见行为。 1、Oracle监听器功能 在笔者《说说Oracle监听器》（http://space.itp ...
分类：
数据库 时间：
2018-05-09 12:14:14
阅读次数：
178
Otter: otter是阿里开源的一个分布式数据库同步系统，尤其是在跨机房数据库同步方面，有很强大的功能。它是基于数据库增量日志解析，实时将数据同步到本机房或跨机房的mysql/oracle数据库。 环境：(由于环境隐私原因，环境中使用的外部IP隐藏)网络图：实验环境：A机房（公司内网）《===》B机房（云服务环境内网） 数据源（mysq
分类：
其他好文 时间：
2018-05-07 16:42:37
阅读次数：
799
"问题：从windows通过flume传输到kafka的日志（GBK），然后再logstash消费，用json解析。有些日志解析报错：ctrl-code1(SOH文本头)。分析：在终端上用gbk编码查看会有方框的字符，可以判断该字符就是json无法识别的控制字符（SOH）。但是不知道kafka消费的时候显示成什么字符，如果知道这个（SOH）然后替换成，json可以解析的字符就可以了。解决
分类：
Web程序 时间：
2018-01-09 15:19:15
阅读次数：
213
DataFrame提供了一条联结所有主流数据源并自动转化为可并行处理格式的渠道，通过它Spark能取悦大数据生态链上的所有玩家，无论是善用R的数据科学家，惯用SQL的商业分析师，还是在意效率和实时性的统计工程师。 以一个常见的场景 -- 日志解析为例，有时我们需要用到一些额外的结构化数据（比如做IP ...
分类：
数据库 时间：
2017-10-27 01:30:36
阅读次数：
353
