我们知道，一个典型的Map-Reduce过程包 括：Input->Map->Partition->Reduce->Output。Partition负责把Map任务输出的中间结果 按key分发给不同的Reduce任务进行处理。Hadoop 提供了一个很有用的partitioner类KeyFieldBa...
分类：
编程语言 时间：
2014-06-18 17:00:55
阅读次数：
332
sqoop版本为1.4.4，hadoop版本为2.2.0，hive版本为0.11.0，hive元数据存放位置为mysql，当使用sqoop 从mysql往hive中导入数据时，总是提示找不到所指定的hive数据库，事实上hive中已存在该数据库，sqoop中也设置了hive路 径，/etc/pro....
分类：
数据库 时间：
2014-06-18 15:06:57
阅读次数：
248
memcached部署完成之后，对当前缓存中数据的监控就显得比较迫切，这里看到网上开源的memadmin比较小巧好用，决定用它来查看监控memcached。下载memadmin1.0.11，地址：https://github.com/junstor/memadmin因为这个开源的程序是使用php开发...
分类：
Web程序 时间：
2014-06-18 14:45:36
阅读次数：
257
1、问题：start-all.sh结果jps发现namenode没有启动，其它进程都启动2、查看日志，没有namenode生产的日志3、奇了，检查其它进程的日志，都在重新连接namenode Zzzzzzz.....4、记得虚拟机是直接关机的，未执行stop-all.sh5、删除tmp目录（metd...
分类：
其他好文 时间：
2014-06-18 13:49:33
阅读次数：
252
如何在nagios监控tomcat，是一个比较简单又复杂的事情，简单是因为如果只监控web应用服务器的一个tomcat服务是否正常运行，那么比较简单；如果要监控tomcat的其他比如连接数比如jvm内存使用率等就比较复杂，google没有适合的监控脚本；如果要监控web应用上面的多个tomcat服务器，而且很多tomcat服务都是跳转式的，那就需要多做很多事情。 一般通常都使用tcp tomcat...
分类：
移动开发 时间：
2014-06-17 23:21:12
阅读次数：
392
5.1、处理器拦截器简介Spring Web MVC的处理器拦截器（如无特殊说明，下文所说的拦截器即处理器拦截器）类似于Servlet开发中的过滤器Filter，用于对处理器进行预处理和后处理。5.1.1、常见应用场景1、日志记录：记录请求信息的日志，以便进行信息监控、信息统计、计算PV（Page ...
分类：
编程语言 时间：
2014-06-17 20:32:11
阅读次数：
280
上一篇讲解了钩子程序的攻防实战，并实现了一套对框架页的监控方案，将防护作用到所有子页面。到目前为止，我们防护的深度已经差不多，但广度还有所欠缺。例如，我们的属性钩子只考虑了 setAttribute，却忽视还有类似的 setAttributeNode。尽管从来不用这方法，但并不意味人家不能使用。例如...
分类：
其他好文 时间：
2014-06-17 19:43:00
阅读次数：
233
概况Hadoop Streaming 是一个工具， 代替编写Java的实现类，而利用可执行程序来完成map-reduce过程。一个最简单的程序$HADOOP_HOME/bin/hadoop jar $HADOOP_HOME/hadoop-streaming.jar-input myInputDirs...
分类：
其他好文 时间：
2014-06-17 15:33:54
阅读次数：
330
十九. 和系统运行进程相关的Shell命令:1. 进程监控命令(ps): 要对进程进行监测和控制，首先必须要了解当前进程的情况，也就是需要查看当前进程，而ps命令就是最基本同时也是非常强大的进程查看命令。使用该命令可以确定有哪些进程正在运行和运行的状态、进程是否结束、进程有没有僵死、哪些进程占用了过...
分类：
系统相关 时间：
2014-06-17 14:32:23
阅读次数：
306
