码迷,mamicode.com
首页 >  
搜索关键字:hadoop mapreduce(flowcount) java编程    ( 16423个结果
Hadoop single Node cluster
目的:本文描述怎么安装和配置一个单结点的Hadoop,以便搭建能快速简单操作和使用Hadoop的MapReduce和Hadoop的分布式文件系统(HDFS);先决条件:支持的平台GNU/Linux 可用作开发和生产平台. Hadoop 在GNU/Linux clusters with 2000 no...
分类:其他好文   时间:2014-07-22 23:14:55    阅读次数:435
java异常
一.异常的定义在《java编程思想》中这样定义异常:阻止当前方法或作用域继续执行的问题。虽然java中有异常处理机制,但是要明确一点,决不应该用"正常"的态度来看待异常。绝对一点说异常就是某种意义上的错误,就是问题,它可能会导致程序失败。之所以java要提出异常处理机制,就是要告诉开发人员,你的程序...
分类:编程语言   时间:2014-07-22 23:08:53    阅读次数:236
Ganglia安装配置
基础配置:Hadoop 2.2.0,Hbase 0.96。四台集群机器,一台master,三台slave。三台slave上分别装gmond;namenode机器上设置datasource。客户端:安装wget:sudo yum -y install wget安装epel库: a) 下载epel r....
分类:其他好文   时间:2014-07-22 23:08:34    阅读次数:573
YCSB-0.1.3安装使用
1. 下载YCSB 0.1.3:wget https://github.com/brianfrankcooper/YCSB/archive/0.1.3.tar.gz2. 解压缩:tar zxvf 0.1.3.tar.gz3.安装ant:sudo yum install ant4.把hadoop和hb...
分类:其他好文   时间:2014-07-22 23:08:34    阅读次数:412
CentOS 6.4 64位 源码编译hadoop 2.2.0
CentOS 6.4 64位 源码编译hadoop 2.2.0搭建环境:Centos 6.4 64bit1、安装JDK参考这里2、安装mavenmaven官方下载地址,可以选择源码编码安装,这里就直接下载编译好的wget http://mirror.bit.edu.cn/apache/maven/m...
分类:其他好文   时间:2014-05-01 15:17:23    阅读次数:524
Hadoop的文件读写操作流程
以下主要讲解了Hadoop的文件读写操作流程:读文件 读文件时内部工作机制参看下图: 客户端通过调用FileSystem对象(对应于HDFS文件系统,调用DistributedFileSystem对象)的open()方法来打开文件(也即图中的第一步),DistributedFileSystem通.....
分类:其他好文   时间:2014-04-30 13:39:04    阅读次数:375
JAVA操作properties文件
java中的properties文件是一种配置文件,主要用于表达配置信息,文件类型为*.properties,格式为文本文件,文件的内容是格式是"键=值"的格式,在properties文件中,可以用"#"来作注释,properties文件在Java编程中用到的地方很多,操作很方便。一、propert...
分类:编程语言   时间:2014-04-30 01:25:07    阅读次数:567
Hbase时间同步
如果Hbase的时间没有同步,启动主节点会起来,子节点的regionServer就不会起来。错误日志如下:aused by: org.apache.hadoop.hbase.ipc.RemoteWithExtrasException(org.apache.hadoop.hbase.ClockOutO...
分类:其他好文   时间:2014-04-30 00:50:16    阅读次数:565
hadoop配置错误
no datanode to stop; no namenode to stop; Bad connection to FS. command aborted.; 网络时断时许错误;
分类:其他好文   时间:2014-04-29 20:35:45    阅读次数:637
Hadoop 2.x 重新编译
本文记录Hadoop 2.x在Linux x64下重新编译的过程。环境:Centos 6.5 x64 &Hadoop 2.2一、安装编译包yum install svnyum install autoconfautomake libtool cmakeyum install ncurses-deve...
分类:其他好文   时间:2014-04-29 19:19:52    阅读次数:451
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!