随着公司业务发展,对大数据的获取和实时处理的要求就会越来越高,日志处理、用户行为分析、场景业务分析等等,传统的写日志方式根本满足不了业务的实时处理需求,所以本人准备开始着手改造原系统中的数据处理方式,重新搭建一个实时流处理平台,主要是基于hadoop生态,利用Kafka作为中转,SparkStrea ...
分类:
其他好文 时间:
2018-06-08 23:16:51
阅读次数:
256
参考《全栈性能测试修炼宝典JMeter实战》第六章 JMeter 元件详解中第六节断言断言用来对服务器的响应数据做验证,常用的断言是响应断言,支持正则表达式。 一、BeanShell Assertion 用来访问JMeter的属性: log对象,可以利用此对象写日志 SampleResult对象,从 ...
分类:
其他好文 时间:
2018-06-08 22:07:26
阅读次数:
1107
Kubernetes部分Volume类型介绍及yaml示例--emptyDir(本地数据卷)说明EmptyDir类型的volume创建于pod被调度到某个宿主机上的时候,而同一个pod内的容器都能读写EmptyDir中的同一个文件。一旦这个pod离开了这个宿主机,EmptyDir中的数据就会被永久删除。所以目前EmptyDir类型的volume主要用作临时空间,比如Web服务器写日志或者tmp文件
分类:
Web程序 时间:
2018-06-05 16:21:35
阅读次数:
1669
import loggingfrom logging import handlersclass MyLogger(): def __init__(self,file_name,level='info',backCount=5,when='D'): logger = logging.getLogger ...
分类:
其他好文 时间:
2018-06-01 13:30:31
阅读次数:
179
import loggingfrom logging import handlersclass MyLogger(): def __init__(self,file_name,level='info',backCount=5,when='D'): logger = logging.getLogger ...
分类:
其他好文 时间:
2018-05-30 17:32:56
阅读次数:
158
编写日志输出环境配置文件 在开发过程中,最重要的就是在控制台查看程序输出的日志信息,在这里我们选择使用 log4j 工具来输出: 准备工作: 将【MyBatis】文件夹下【lib】中的 log4j 开头的 jar 包都导入工程并添加依赖。 在【src】下新建一个文件 log4j.properties ...
分类:
其他好文 时间:
2018-05-22 16:40:48
阅读次数:
223
一、简介 在上一篇的主从复制中:http://www.cnblogs.com/lay2017/p/9043985.html 我们了解到,mysql通过master写日志,slave读取并执行日志内容从而达到slave数据与master的一致。那么基于这个原理,我们可以实现两台master的复制功能。 ...
分类:
数据库 时间:
2018-05-16 15:17:26
阅读次数:
180
原因查找: 此服务器上有写日志的操作,在写的同时我把要写入的文件删除了。。因为在写操作不能创建文件的时候会写硬盘的block,这样会使硬盘利用率越来越低,可以使用lsof -n |grep delete 来查看哪些进程在对磁盘进行写操作。 一般都是程序打开了已经删除的文件,导致磁盘未释放该文件。ls ...
分类:
系统相关 时间:
2018-05-14 14:10:12
阅读次数:
254
原文地址:传送门 之前也看了 linezero 大佬写的教程,但是总是没有成功写入日志文件。按照 曲廉卿 的已成功,以下正文: 最近研究了一下NLog的使用方式,简单的入了一下门。 实现的功能,对于不同的日志,进行不同的记录,分别有系统运行日志,和个人在程序中写的异常日志。发布之后放在了IIS上。进 ...
分类:
Web程序 时间:
2018-05-10 14:25:12
阅读次数:
596
编写日志输出环境配置文件 在开发过程中,最重要的就是在控制台查看程序输出的日志信息,在这里我们选择使用 log4j 工具来输出: 准备工作: 将【MyBatis】文件夹下【lib】中的 log4j 开头的 jar 包都导入工程并添加依赖。 在【src】下新建一个文件 log4j.properties ...
分类:
其他好文 时间:
2018-04-18 20:15:02
阅读次数:
181