介绍通过利用filebeat来收集mysql的慢查询日志，logstash解析后推送到elasticsearch，并创建自定义的索引，最终通过kibana进行web展示。环境介绍：操作系统版本：CentOSLinuxrelease7.3.1611(Core)64bitMysql版本：5.6.28Logstash版本:logstash5.3.0Elasticsearch版本：elastic..
分类：
数据库 时间：
2017-04-21 15:01:58
阅读次数：
3759
Mysql日志错误日志：记录mysql服务器启动，关闭以及运行错误等信息二进制日志：已二进制文件的方式记录数据库中除select以外的所有操作（最重要的日志）查询日志：记录查询的信息慢查询日志：记录执行时间超过指定时间的操作中继日志：备库将主库的日志复制到自己的中继日志中..
分类：
数据库 时间：
2017-04-20 11:45:09
阅读次数：
229
1.你任务目前的系统业务量增加10倍可能出现瓶颈的业务节点时什么？（根据自己的业务思考，10倍压力不够的，那就100倍吧，100倍在不需要的话辞职吧）对客户来说，直观感觉应该在如下三方面感觉不好登录页面缓慢查询访问缓慢增删改缓慢一：流量，如果是10倍或者是100倍，我们最大..
分类：
其他好文 时间：
2017-04-17 22:30:37
阅读次数：
174
Redis实现为双链表结构, 列表键的底层实现之一就是链表, 发布与订阅, 慢查询, 监视器等功能都用到了链表. Redis本身也使用链表维持多个客户端. 节点定义, 位于 adlist.h/listNode 链表结构定义, 位于adlist.h/list Redis链表特性总结 : ...
分类：
其他好文 时间：
2017-04-14 23:51:42
阅读次数：
276
1、没有索引或者没有用到索引(这是查询慢最常见的问题，是程序设计的缺陷) 2、I/O吞吐量小，形成了瓶颈效应。 3、没有创建计算列导致查询不优化。 4、内存不足 5、网络速度慢 6、查询出的数据量过大（可以采用多次查询，其他的方法降低数据量） 7、锁或者死锁(这也是查询慢最常见的问题，是程序设计的缺 ...
分类：
数据库 时间：
2017-04-14 17:11:04
阅读次数：
195
mysql版本号是mysql5.6.22。安装环境windows7。 1.使用该查询日志能够找到有效率问题的sql语句。并记录下来,进行监控。 能够使用例如以下语句查询和设置慢查询日志 (1) 查看慢查询日志是否开启 SHOW VARIABLES LIKE '%show_query_log%'; 或 ...
分类：
数据库 时间：
2017-04-14 12:42:28
阅读次数：
323
MYSQL慢查询一、查看系统所有参数状态：mysql>showvariables二、查看慢查询的定义：mysql>showvariableslike‘%quer%‘;|log_slow_queries|ON||long_query_time|5.000000|mysql>showvariableslike‘slow%‘;+---------------------+-------------------------------+|Vari..
分类：
数据库 时间：
2017-04-11 00:12:24
阅读次数：
184
数据库层面：应用系统层面优化SQL优化SQL优化一般通过分析慢查询日志来抓取长事务高消耗的sql，通过结合具体业务，对sql逻辑进行分析and精简，or重写sql。通过配置slow_query_log=1和log_queries_not_using_indexes=1启动慢查询日志记录和记录下没有使用索引的查询,后者会让慢..
分类：
数据库 时间：
2017-04-09 21:27:34
阅读次数：
215
redis调优总结 1、相应的参数调优 加内存2、redis使用结构调优3、使用合理的数据类型说明：redis存储的数据为redis hash(字符映射表) 单key多字段结构。 1)调整配置文件中配置项的值(修改文件：redis.conf)1)调整memory大小 redis.conf 中maxm ...
分类：
其他好文 时间：
2017-04-08 21:35:00
阅读次数：
282
开启general log会将所有到达MySQL Server的SQL语句记录下来。一般不会开启开功能，因为log的量会非常庞大。但个别情况下可能会临时的开一会儿general log以供排障使用。 相关参数一共有3：general_log、log_output、general_log_file s ...
分类：
数据库 时间：
2017-04-05 00:53:17
阅读次数：
228
