面试过程惨不忍睹，问到的几个问题都没有答上来。现回忆几个面试问题： 1.自我介绍 2.数据库中索引的概念，怎么追查索引是否被执行 3.linux上如何部署的环境？jar包和war包分别放在什么位置？ 4.是否会查看日志，分析日志？ 5.用过selenium的这个工具吗？ 6.代码编写量是什么数量级？ ...
分类：
其他好文 时间：
2018-05-22 00:52:33
阅读次数：
194
1、awstats介绍AWStats是一款免费的功能强大的工具，它以图形方式生成高级web、流、FTP或邮件服务器统计信息。可以以CGI或从命令行方式运行，并在几个图形网页中显示日志包含的所有可能信息。本文主要介绍centos6.9下安装、配置awstats，并统计nginx访问日志2、环境准备1.1nginx日志格式设定：[root@webdata]#vim/usr/local/nginx/co
分类：
其他好文 时间：
2018-05-19 00:11:35
阅读次数：
208
MySQL中的日志包括：错误日志、二进制日志、通用查询日志、慢查询日志等等。这里主要介绍下比较常用的两个功能：通用查询日志和慢查询日志。 1）通用查询日志：记录建立的客户端连接和执行的语句。 2）慢查询日志：记录所有执行时间超过long_query_time秒的所有查询或者不使用索引的查询 （1）通 ...
分类：
数据库 时间：
2018-05-18 13:59:14
阅读次数：
224
Spark 实践——基于 Spark Streaming 的实时日志分析系统 本文基于《Spark 最佳实践》第6章 Spark 流式计算。 我们知道网站用户访问流量是不间断的，基于网站的访问日志，即 Web log 分析是典型的流式实时计算应用场景。比如百度统计，它可以做流量分析、来源分析、网站分 ...
分类：
其他好文 时间：
2018-05-15 22:43:43
阅读次数：
509
一．Mysql Binlog格式介绍 Mysql binlog日志有三种格式，分别为Statement,MiXED,以及ROW！ 1.Statement：每一条会修改数据的sql都会记录在binlog中。 优点：不需要记录每一行的变化，减少了binlog日志量，节约了IO，提高性能。(相比row能节 ...
分类：
数据库 时间：
2018-05-15 15:53:52
阅读次数：
162
log_format用来设置日志的记录格式：log_formatnameformatname表示格式名称，format表示等义的格式。log_format有一个默认的无需设置的combined日志格式，相当于apache的combined日志格式，如下所示：log_formatcombined‘$remote_addr-$remote_user[$time_local]‘‘"$request"$s
分类：
其他好文 时间：
2018-05-14 11:03:27
阅读次数：
148
默认情况下，IIS会产生日志文件，不过，还是有些参数值得我们关注。 IIS的设置界面如下（本文以 IIS 8 的界面为例）。 在IIS管理器中，选择某个网站，双击【日志】图标，请参考下图： 将里面的日志文件拷贝出来分析。 日志文件是txt格式，我们可以通过两种方法处理它：直接复制在excel中；用l ...
分类：
其他好文 时间：
2018-05-11 12:41:36
阅读次数：
155
日志分析 目的： 生产中会生成大量的系统日志、应用程序日志、安全日志等日志，通过对日志的分析可以了解数据库的负载、健康状况，可以分析客户的分布情况、客户的行为，甚至基于这些分析可以做出预测。 一般流程： 日志产出-->采集（Logstash、Flume、Scribe）-->存储（落地，可不落地直接分 ...
分类：
其他好文 时间：
2018-05-07 20:54:45
阅读次数：
244
系统目的： 1.技术练习：把平时不用的，重要技术栈，在此项目中打磨（java、python、算法、系统构架） 2.新技术（工具）应用：有些平时想做，想实现的技术，可以在这里实现。而且以微服务的方式，轻量级的接入（日志分析、爬虫） 3.做一款能提高开发效率的工具（脚手架、代码模版、辅助工具），为以后的 ...
分类：
其他好文 时间：
2018-05-07 16:10:52
阅读次数：
113
日志分析业务中会生成大量的系统日志、应用程序日志、安全日志等，通过对日志的分析可以了解服务器的负载、健康状况，可以分析客户的分布情况、客户的行为，甚至基于这些分析可以做出预测一般采集流程日志产出->采集（Logstash、Flume、Scribe）->存储->分析->存储（数据库、NoSQL）->可视化开源实时日志分析ELK平台Logstash收集日志，并存放到Ela
分类：
编程语言 时间：
2018-05-06 18:48:51
阅读次数：
235
