近期在做kafka metrics. 参考了几个开源的项目,诸如kafka manager, Burrow, kafkaOffsetMonitor,东西都很不错,可惜没有一个是用java编写的,最终自己去仿照kafka源码写了个java版的adminclient,拿到了自己需要的metrics数据。 ...
分类:
其他好文 时间:
2016-12-24 01:21:14
阅读次数:
586
redis benchmark How many requests per second can I get out of Redis? Using New Relic to Understand Redis Performance: The 7 Key Metrics ...
分类:
其他好文 时间:
2016-12-15 11:15:28
阅读次数:
193
不多说,直接上代码。 2016-12-12 21:54:04,509 INFO [org.apache.hadoop.metrics.jvm.JvmMetrics] - Initializing JVM Metrics with processName=JobTracker, sessionId=2 ...
[0] 概括地说,软件质量就是“软件与明确的和隐含的定义的需求相一致的程度”。 具体地说,软件质量是软件符合明确叙述的功能和性能需求、文档中明确描述的开发标准、以及所有专业开发的软件都应具有的和隐含特征相一致的程度。 [1] 软件开发正在越来越多地根据既定的工程和科学原理完成。为使软件工程真正成为一 ...
分类:
其他好文 时间:
2016-12-12 23:04:03
阅读次数:
209
不多说,直接上代码。 2016-12-12 17:04:32,012 INFO [org.apache.hadoop.metrics.jvm.JvmMetrics] - Initializing JVM Metrics with processName=JobTracker, sessionId=2 ...
分类:
编程语言 时间:
2016-12-12 19:21:22
阅读次数:
277
问题详情是 2016-12-10 23:24:13,317 INFO [org.apache.hadoop.metrics.jvm.JvmMetrics] - Initializing JVM Metrics with processName=JobTracker, sessionId=2016-1 ...
InfluxDB是一个开源分布式时序、事件和指标数据库。使用Go语言编写,无需外部依赖。其设计目标是实现分布式和水平伸缩扩展。它有三大特性:1.TimeSeries(时间序列):你可以使用与时间有关的相关函数(如最大,最小,求和等)2.Metrics(度量):你可以实时对大量数据进行计算..
分类:
数据库 时间:
2016-12-09 08:52:38
阅读次数:
672
问题1:在DFS Lcation 上不能多文件进行操作: 在Hadoop上的每个节点上修改该文件 conf/mapred-site.xml 增加: <property> <name>dfs.permissions</name> <value>false</value> </property> 关闭权 ...
分类:
其他好文 时间:
2016-12-04 00:07:25
阅读次数:
168
shuffle。。。相当重要,为什么咩,因为shuffle的性能优劣直接决定了整个计算引擎的性能和吞吐量。相比于Hadoop的MapReduce,可以看到Spark提供多种计算结果处理方式,对shuffle过程进行了优化。 那么我们从RDD的iterator方法开始: 我们可以看到,它调用了cach ...
分类:
其他好文 时间:
2016-11-25 07:21:09
阅读次数:
263