mysql的日志分为错误日志、二进制日志、慢查询日志、查询日志 1.错误日志 可以通过以下命令,来查看错误日志的文件: show variables like 'log_error'; 通过上面的命令可以定位到错误日志位置,然后通过查看错误日志文档来分析问题 2.慢查询日志 所谓的慢查询日志就是用来 ...
分类:
数据库 时间:
2018-02-06 20:11:11
阅读次数:
209
课程介绍 课程名称: 点击流日志分析 1、什么是点击流系统?记录用户在网站上的操作,用户行为轨迹。 2、日志有哪些需要注意的地方,如何采集日志(flume),日志格式,日志包含的信息量(字段) 3、分析什么? 网址来源,TOPK 客户端流量占比 Android、IOS、..... 网页热力图 课程目 ...
分类:
其他好文 时间:
2018-02-04 14:42:10
阅读次数:
2154
OSSEC是一款开源的多平台的主机入侵检测系统,它可以运行在Windows、Linux、OpenBSD、FreeBSD、 以及 MacOS等操作系统。包括了日志分析,全面检测,root-kit检测等功能。
分类:
其他好文 时间:
2018-02-01 10:40:10
阅读次数:
354
为什么用到ELK: 一般我们需要进行日志分析场景:直接在日志文件中 grep、awk 就可以获得自己想要的信息。但在规模较大的场景中,此方法效率低下,面临问题包括日志量太大如何归档、文本搜索太慢怎么办、如何多维度查询。需要集中化的日志管理,所有服务器上的日志收集汇总。常见解决思路是建立集中式日志收集 ...
分类:
其他好文 时间:
2018-01-31 11:39:13
阅读次数:
143
CK2255-以慕课网日志分析为例 进入大数据 Spark SQL 的世界 新年伊始,学习要趁早,点滴记录,学习就是进步! 随笔背景:在很多时候,很多入门不久的朋友都会问我:我是从其他语言转到程序开发的,有没有一些基础性的资料给我们学习学习呢,你的框架感觉一下太大了,希望有个循序渐进的教程或者视频来 ...
分类:
数据库 时间:
2018-01-24 00:41:19
阅读次数:
326
博主前面因为太忙没有时间更新博文,从今天开始博主会用博文记录自己学习Hadoop的整个过程,欢迎感兴趣的朋友关注! Hadoop是什么? Hadoop是一个开源框架,可编写和运行分布式应用处理大规模数据。分布式计算是一个宽泛并且不断变化的领域,Hadoop的优势在于: 1) 方便:Hadoop运行在 ...
分类:
其他好文 时间:
2018-01-21 12:35:47
阅读次数:
291
19. crontab 定时任务 通过crontab 命令,我们可以在固定的间隔时间执行指定的系统指令或 shell script脚本。时间间隔的单位可以是分钟、小时、日、月、周及以上的任意组合。这个命令非常适合周期性的日志分析或数据备份等工作。 19.1. 命令格式 crontab [-u use... ...
分类:
其他好文 时间:
2018-01-19 15:39:30
阅读次数:
199
大家在做分部署系统开发的时候是不是经常因为查找日志而头疼,因为各服务器各应用都有自己日志,但比较分散,查找起来也比较麻烦,今天就给大家推荐一整套方便的工具ELK,ELK是Elastic公司开发的一整套完整的日志分析技术栈,它们是Elasticsearch,Logstash,和Kibana,简称ELK ...
分类:
其他好文 时间:
2018-01-15 00:28:02
阅读次数:
267
sarg对squid的日志流量分析报表(按小时,天,周生成) 1.SARG介绍 SARG的全称是:Squid Analysis Report GeneratorSARG非常好用的Squid日志分析工具,它输出html格式,可以详细列出了每一位用户访问internet的站点信息,时间占用信息,排名,连 ...
分类:
其他好文 时间:
2018-01-12 00:00:04
阅读次数:
264
一、查看进程信息 目标: 本例要求掌握查看进程信息的操作,使用必要的命令工具完成下列任务: 找出进程 gdm 的 PID 编号值 列出由进程 gdm 开始的子进程树结构信息 找出进程 sshd 的父进程的 PID 编号/进程名称 查看当前系统的CPU负载/进程总量信息 查看进程的主要命令工具: ps ...
分类:
系统相关 时间:
2018-01-11 22:15:05
阅读次数:
256