1，现象 写的一个storm应用，主要是通过mysql的binlog来同步表到hbase。运行一段时间后发现，经常会出现cpu使用率飙升到200%以上，然后各种消息堆积报警等等出现各种问题 2，调研过程 cpu使用率很高，所以首先找到该进程，通过top命令，监控该进程的使用率，然后通过H，查看各个线 ...
分类：
编程语言 时间：
2016-05-29 21:12:59
阅读次数：
165
Mysql的binlog相关：注：mysql的binlog在mysql恢复时用得到，不要轻易取消另手动清理过程中mysql会暂停使用，建议通过设置过期时间让它自己清理删除2016年03月31日23点59分之前的binlog文件：>purgebinarylogsbefore‘2016-03-3123:59:00‘;删除文件序号“mysql-bin.000500”..
分类：
数据库 时间：
2016-05-10 15:25:23
阅读次数：
191
理论上，应该在配置文件/etc/my.cnf中加上binlog过期时间的配置项，expire_logs_days = 10 但是如果没有加这一项，随着产生越来越多的binlog，磁盘被吃掉了不少。可以直接删除binlog文件，但是可以通过mysql提供的工具来删除更安全。因为purge会更新mysq
分类：
数据库 时间：
2016-03-15 13:33:07
阅读次数：
171
前言：
有一个mysql学生说他们因为binlog产生太大了，需要把日志路径放到另外的磁盘上面去，问我有啥时机的操作方案，share弄了一个mysql的binlog的日志路径切换的例子给他。正好今天有空，就拿mysql5.6.12来做个实例，给大家演示一下。 1，查看binlog地址[root@wgq_idc_mon_1_12 ~]# more /usr/local/mysql/my.cn...
分类：
数据库 时间：
2015-12-11 15:18:35
阅读次数：
259
mysqlbinlog命令作用：mysqlbinlog是用来解析mysql的binlog日志的。[root@MySQLdata]#filemysql-bin.000001mysql-bin.000001:MySQLreplicationlog[root@MySQLdata]#mysqlbinlog日志无法直接用cat查看，需要用mysqlbinlog命令转换为普通文件才能查看也只有用mysqlbinlog命令把bi..
分类：
数据库 时间：
2015-10-01 01:49:24
阅读次数：
246
原创地址：http://blog.chinaunix.net/uid-16844903-id-3896711.htmlbinlog介绍binlog,即二进制日志,它记录了数据库上的所有改变.改变数据库的SQL语句执行结束时,将在binlog的末尾写入一条记录,同时通知语句解析器,语句执行完毕.bin...
分类：
数据库 时间：
2015-09-21 01:18:57
阅读次数：
306
binlog与redolog区别1、首先2者都是记录数据的改变，不同的是，binlog是记录所有数据的改变信息，而innodb的redolog只是记录所有innodb表数据的变化。2、binlog是记录已经提交完毕之后的dml以及ddlsql语句，而innodbredolog是正在执行中的dml以及ddl语句3、binlog可以作为恢复..
分类：
数据库 时间：
2015-05-14 20:47:30
阅读次数：
282
内存数据持久化的两种常见方法：1.将内存数据定期dump到磁盘优点：效率高，操作简便缺点：会损失部分数据2.利用类似于mysql的binlog日志的方式，记录更新操作，需要时回放数据优点：可保证数据完整性缺点：会损失部分性能，实现稍微复杂点redis实现了这两种方式
分类：
其他好文 时间：
2015-02-27 13:10:42
阅读次数：
153
MySQL通过binlog来记录整个数据的变更过程，因此我们只要有MySQL的binlog日志即可完整的还原数据库。MySQL binlog日志记录有3种不同的方式，即：STATEMENT，MIXED，ROW。对于不同的日志模式，生成的binlog有不同的记录方式。对于MIXED(部分SQL语句)和ROW模式是以base-64方式记录，无法看到真实的SQL语句。因此我们需要使用base64-out...
分类：
数据库 时间：
2014-12-19 22:04:54
阅读次数：
279
[转载]mysql的binlog安全删除理论上，应该在配置文件/etc/my.cnf中加上binlog过期时间的配置项，expire_logs_days = 10但是如果没有加这一项，随着产生越来越多的binlog，磁盘被吃掉了不少。可以直接删除binlog文件，但是可以通过mysql提供的工具来删...
分类：
数据库 时间：
2014-12-19 19:00:46
阅读次数：
222
