Q:Linux怎么查端口?端口被占用怎么办? Q:Linux怎么查看日志? Q:Linux如何找到 java 程序 CPU 使用率100%的原因? 待补充。 ...
分类:
编程语言 时间:
2019-01-18 00:59:14
阅读次数:
181
在MySQL命令行中查看慢查询日志是否打开了: 从上面可以看出没有打开慢查询日志的功能,现在我们打开一下,修改配置文件即可,修改后重启服务器。慢查询还有一个值比较重要,就是知道慢查询的时间: 现在修改为两秒: 现在我们执行一个超过2秒的命令,看看效果: 现在我们查看一下慢查询日志; ...
分类:
数据库 时间:
2019-01-17 21:25:32
阅读次数:
261
起因:客户需求,数据库正常每天总的日志切换是20以内,有一天日志切换总数,达到30,客户建议使用Logminer进行日志挖掘分析,到底什么应用导致的问题。 说明:使用logminer进行日志挖掘,只能挖掘出什么对象表,dml操作多少次,而无法明确得到什么应用占用的日志最多。只能提供很单项的东西,某个 ...
分类:
其他好文 时间:
2019-01-13 17:05:44
阅读次数:
158
一.MQ介绍 message deque,消息队列,现如今有很多消息队列,比如rabbitMQ,kafka,rocketMQ 二.消息队列的应用场景 为什么要使用消息队列呢,适用于什么场景呢。 1.异步处理 如果以下三步操作,注册用户,注册成功后,发送短信给客户,发送邮件给客户 假设一个操作的时间未 ...
分类:
其他好文 时间:
2019-01-11 00:47:11
阅读次数:
263
如果安装时或者工作中有问题,可以看错误日志分析问题原因: 1005:创建表失败 1006:创建数据库失败 1007:数据库已存在,创建数据库失败 1008:数据库不存在,删除数据库失败 1009:不能删除数据库文件导致删除数据库失败 1010:不能删除数据目录导致删除数据库失败 1011:删除数据库 ...
分类:
数据库 时间:
2019-01-11 00:45:05
阅读次数:
164
为什么用到ELK: 一般我们需要进行日志分析场景:直接在日志文件中 grep、awk 就可以获得自己想要的信息。但在规模较大的场景中,此方法效率低下,面临问题包括日志量太大如何归档、文本搜索太慢怎么办、如何多维度查询。需要集中化的日志管理,所有服务器上的日志收集汇总。常见解决思路是建立集中式日志收集 ...
分类:
其他好文 时间:
2019-01-10 15:37:36
阅读次数:
140
一、ELK搭建篇 官网地址:https://www.elastic.co/cn/ 官网权威指南:https://www.elastic.co/guide/cn/elasticsearch/guide/current/index.html 安装指南:https://www.elastic.co/gui ...
分类:
其他好文 时间:
2019-01-10 15:35:16
阅读次数:
219
有两个海量日志文件存储在hdfs上, 其中登陆日志格式:user,ip,time,oper(枚举值:1为上线,2为下线); 访问之日格式为:ip,time,url,假设登陆日志中上下线信息完整,切同一上下线时间段内是用的ip唯一, 计算访问日志中独立user数量最多的前10个url,用MapRedu... ...
分类:
其他好文 时间:
2019-01-09 23:33:20
阅读次数:
343
介绍:&emsp本次项目是基于企业大数据经典案例项目(大数据日志分析),全方位、全流程讲解大数据项目的业务分析、技术选型、架构设计、集群规划、安装部署、整合继承与开发和web可视化交互设计。一、业务需求 (一)捕获用户浏览日志信息 (二)实时分析前20名流量最高的新闻话题 (三)实时统计当前线上已曝光的新闻话题&
分类:
Web程序 时间:
2019-01-09 20:29:53
阅读次数:
245
这个脚本是基于pt-query-digest做的日志分析脚本,变成可视化的格式。 目录结构是 ./mysql_data/log./mysql_data/log/tmp./slow_query 解析之后显示的结果: ...
分类:
数据库 时间:
2019-01-08 12:17:08
阅读次数:
232