单词计数是最简单也是最能体现MapReduce思想的程序之一,可以称为MapReduce版"Hello
World",该程序的完整代码可以在Hadoop安装包的"src/examples"目录下找到。单词计数主要完成功能是:统计一系列文本文件中每个单词出现的次数,如下图所示。现在我们以"hadoop...
分类:
其他好文 时间:
2014-05-10 01:54:48
阅读次数:
445
Linux系统监控实用工具GlancesGlances安装Glances安装要求:python
>= 2.6 和 psutil >=
0.4.11、第一步,安装了python->2.62、第二步,安装了psutil->0.4.1#tar -zxvf psutil.包。#cd
psutil包#pyth...
分类:
系统相关 时间:
2014-05-10 01:08:54
阅读次数:
490
1,下载orabbix插件包(插件包同时满足在大部分POSIX-linux及unix和大部分版本的windows下运行,玩转类似但不等同于Tomcat)
wget http://www.smartmarmot.com/downloads/orabbix-1.2.3.zip2,解压插件包部署(插件包....
分类:
数据库 时间:
2014-05-09 12:33:21
阅读次数:
593
Hadoop
MapReduce开发最佳实践(上篇)本文是Hadoop最佳实践系列第二篇,上一篇为《Hadoop管理员的十个最佳实践》。MapRuduce开发对于大多数程序员都会觉得略显复杂,运行一个WordCount(Hadoop中hello
word程序)不仅要熟悉MapRuduce模型,还要了...
分类:
其他好文 时间:
2014-05-08 21:45:46
阅读次数:
640
根据监控宝分布在北京、上海、深圳等12个国内监测点,对电子商务、在线教育、视频、金融服务、网页游戏等五个行业的网站响应时间和网站可用率监控结果,以下是最近两周(2014年4月1日——4月14日)各行业网站性能指数分析,如图所示:数据说明:电商行业网站可用率100%,响应时间平均指数为576.929....
分类:
Web程序 时间:
2014-05-08 21:45:13
阅读次数:
377
dataguru访问地址:http://f.dataguru.cn/?fromuid=99611课程优惠码:C4B6这段时间一直在dataguru(炼数成金)上学习《hadoop数据分析平台(第十四期)》,说说我对炼数成金的印象。最开始听说dataguru是通过它的广告邮件中的链接,发送的对象是it...
分类:
其他好文 时间:
2014-05-08 21:19:30
阅读次数:
727
Hadoop集群(第9期)_MapReduce初级案例 - 虾皮 - 博客园1、数据去重
"数据去重"主要是为了掌握和利用并行化思想来对数据进行有意义的筛选。统计大数据集上的数据种类个数、从网站日志中计算访问地等这些看似庞杂的任务都会涉及数据去重。下面就进入这个实例的MapReduce程序设计。1....
分类:
其他好文 时间:
2014-05-08 20:38:16
阅读次数:
669
原文地址:http://www.haiyun.me/archives/linux-snmp-oid.html收集整理一些Linux下snmp常用的OID,用做服务器监控很不错。服务器负载:1231
minute Load: .1.3.6.1.4.1.2021.10.1.3.15 minute Loa...
分类:
系统相关 时间:
2014-05-08 20:17:02
阅读次数:
616
import java.io.IOException;import
java.util.Iterator;import java.util.StringTokenizer;import
org.apache.hadoop.conf.Configuration;import org.apache.ha...
分类:
其他好文 时间:
2014-05-07 19:14:58
阅读次数:
416
很多Windows下的应用需要访问和监控Linux下的目录,本文便介绍如何实现。只需要搭建配置samba服务,即可将Linux下的目录变得如同Windows下共享可写。1、服务查询默认情况下,Linux系统在默认安装中已经安装了Samba服务包的一部分
,为了对整个过程有一个完整的了解,在此先将这部...
分类:
Web程序 时间:
2014-05-07 09:57:32
阅读次数:
362