lk@lk-virtual-machine:~/hadoop-1.0.1/bin$ ./hadoop dfs -rmr output
Deleted hdfs://localhost:9000/user/lk/output
lk@lk-virtual-machine:~/hadoop-1.0.1/bin$ ./hadoop jar ~/mytopk.jar top.Top input out...
分类：
其他好文 时间：
2014-05-13 06:53:12
阅读次数：
448
环境说明
1、硬件说明
使用三台PC机，角色分配如下
2、软件说明
约定所有软件都放在/usr/local/路径下
准备工作
1、安装jdk
2、配置SSH
Storm集群安装
安装流程图
1、安装Zookeeper集群
2、安装Storm依赖
zeromq、jzmq、pytho...
分类：
其他好文 时间：
2014-05-13 05:44:31
阅读次数：
345
lk@lk-virtual-machine:~/hadoop-1.0.1/bin$ ./hadoop jar ~/hadoop-1.0.1/to.jar top.Top input output
14/05/12 03:44:37 WARN mapred.JobClient: Use GenericOptionsParser for parsing the arguments. Applicat...
分类：
其他好文 时间：
2014-05-13 05:38:18
阅读次数：
291
此脚本可以做一个定时的检测，超出设定的值，即往邮箱发送警告脚本用到bc，sendmail，163邮箱，yuminstallbc#!/bin/bash
#SystemMonitoringScript
while[1]
do
#本机需开启postfix或sendmail服务。
#报警邮件地址设置
MAILFROM=root@localhost
MAILTO=your_mail@163.com
#设置..
分类：
系统相关 时间：
2014-05-13 05:05:29
阅读次数：
649
AVAST!简介来自捷克的avast!（中文名为爱维士），已有数十年的历史，它在国外市场一直处于领先地位。avast!分为家庭版、商业版、手机版以及专为Linux和Mac设计的版本等等众多版本。avast!的实时监控功能十分强大，免费版的avast!免费杀毒软件拥有八大防护模块：文件系统防护、..
分类：
其他好文 时间：
2014-05-13 04:14:10
阅读次数：
309
Nload：linux的一款网络流量实时监控软件。下载地址：Cnetos/RHEL632bit：http://apt.sw.be/redhat/el6/en/i386/rpmforge/RPMS/nload-0.7.4-1.el6.rf.i686.rpmCentos/RHEL664bit：http://apt.sw.be/redhat/el6/en/x86_64/rpmforge/RPMS/nload-0.7.4-1.el6.rf.x86_64.rpm更多版..
分类：
系统相关 时间：
2014-05-13 02:56:14
阅读次数：
526
2014-05-12注定是春光灿烂猪八戒的一天，历史595无故障的hadoop服务器，终于还是出了问题，事前无人登陆操作服务器，此故障属于自发行为，目前未知发生原因。细节描述：namenode无法启动.先贴出错误信息2014-05-1207:17:39,447INFOorg.apache.hadoop.hdfs.server.namenode.Name..
分类：
其他好文 时间：
2014-05-13 02:55:12
阅读次数：
394
这个脚本是监控系统各方面资源，需要改动的不多，如果网卡不对，稍微修改一下，邮箱写自己的163邮箱，默认是一小时给邮箱发一份邮件，里面监控内容可自己添加修改，这里是cpu、内存、进程、连接数、网卡流量、磁盘IO等信息，的脚本，系统为CentOS6.464位。发送邮件用mutt，所以..
分类：
系统相关 时间：
2014-05-13 02:44:56
阅读次数：
436
#!/usr/bin/envpythonimporttime,MySQLdbfromsubprocessimportPopenfromsubprocessimportPIPEimportdns.queryimportdns.messageimportdns.tsigimportdns.tsigkeyringimportdns.updatedefset_dns(ip_list):key=dns.tsigkeyring.from_text({"cui.com":"SIvcwHj3goqYl0vKS6yOtdugx..
分类：
数据库 时间：
2014-05-13 02:04:53
阅读次数：
377
在我们选择硬件的时候，往往需要考虑应用得到的性能和经费开支。为此，我们必须在满足实际需要和经济可行上找到一个完美的平衡。下面，以Hadoop集群应用为了例子，说明需要考虑的要素。
1. I/O绑定的工作负荷。
Hadoop涉及到的I/O操作，主要包括下列几项：
索引（Indexing）
群化（Grouping）
数据导入和导出（Data importing...
分类：
其他好文 时间：
2014-05-12 23:47:04
阅读次数：
536
