ELK+Filebeat+Kafka+ZooKeeper 构建海量日志分析平台 参考:http://www.tuicool.com/articles/R77fieA 我在做ELK日志平台开始之初选择为ELK+Redis直接构建,在采集nginx日志时一切正常,当我采集我司业务报文日志类后,logst ...
分类:
其他好文 时间:
2018-01-11 11:38:31
阅读次数:
236
一、总设计 二、技术实现 appium脚本、robotium脚本的运行 -> junit命令行 屏幕同步 ->minicap 设备事件控制 ->minitouch js 基于坐标的录制 ->js 基于控件的录制 ->字节码插桩 日志分析 三、 ...
分类:
其他好文 时间:
2018-01-10 20:17:06
阅读次数:
149
前面一篇应该算是比较详细的介绍了spark的基础知识,在了解了一些spark的知识之后相必大家对spark应该不算陌生了吧!如果你之前写过MapReduce,现在对spark也很熟悉的话我想你再也不想用MapReduce去写一个应用程序了,不是说MapReduce有多繁琐(相对而言),还有运行的效率 ...
分类:
Web程序 时间:
2018-01-07 20:19:04
阅读次数:
225
阅读目录 1.1 简述用户访网站流程 1.2 HTTP协议知识介绍 1.3 http协议原理过程 1.4 HTTP协议状态码 2.1 媒体资源 2.2 网页资源种类 2.3 网站流量度量术语 2.4 IP PV UV 统计度量的方法 2.5 网站并发连接说明 2.6 知名网站访问量信息参考 2.7 ...
分类:
Web程序 时间:
2018-01-06 22:09:23
阅读次数:
406
ELK=Elasticsearch+Logstash+kibana ...
分类:
其他好文 时间:
2018-01-04 11:08:52
阅读次数:
203
rsyslog+loganalyzer通过web查看日志转发
分类:
其他好文 时间:
2018-01-02 23:21:02
阅读次数:
188
一、三言片语Hadoop Hadoop起源于谷歌的三篇论文:GFS、MapReduce、BigTable hadoop擅长日志分析,facebook就用Hive来进行日志分析,2009年时facebook就有非编程人员的30%的人使用HiveQL进行数据分析;淘宝搜索中的自定义筛选也使用的Hive; ...
分类:
其他好文 时间:
2017-12-25 18:15:32
阅读次数:
222
1. 简介 在上一篇介绍<Java GC - 垃圾回收机制>, 本文将介绍如何监控 Javc GC 行为,同时涉及一些GUI工具的使用(虽然有些已经很老并不再更新),监控GC在于判断JVM是否在良好高效地工作并且是否需要投入性能调优(主要包括应用程序优化与JVM参数优化),关注的数据大概有: 1. ...
分类:
编程语言 时间:
2017-12-20 14:08:14
阅读次数:
236
零、绪论事件应急是指在系统出现问题的第一时间进行错误排查、入侵过程还原取证,入侵源追踪等紧急处理。知识点1、常见的分析入手点(1)文件分析(2)进程分析(3)网络分析(4)命令分析(5)日志分析一般而言:命令分析中的一部分也是文件分析的一部分,也就是说命令分析中有一点是对命令源文件进行hash校验防 ...
分类:
系统相关 时间:
2017-12-18 01:18:48
阅读次数:
188
-- 登陆总次数 每天 建议查最近一月 select to_char(t.create_on, 'yyyy-mm-dd'),count(1) from base_login_log t where t.create_on>to_date('2017-12-01 00:00:00','yyyy-mm-... ...
分类:
其他好文 时间:
2017-12-14 04:28:01
阅读次数:
211