码迷,mamicode.com
首页 >  
搜索关键字:hadoop mapreduce java编程    ( 18089个结果
Hadoop的文件读写操作流程
以下主要讲解了Hadoop的文件读写操作流程:读文件 读文件时内部工作机制参看下图: 客户端通过调用FileSystem对象(对应于HDFS文件系统,调用DistributedFileSystem对象)的open()方法来打开文件(也即图中的第一步),DistributedFileSystem通.....
分类:其他好文   时间:2014-04-30 13:39:04    阅读次数:375
Hadoop 介绍
1.Hadoop简介Hadoop[h?du:p]实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS。HDFS有高容错性的特点,并且设计用来部署在低廉的(low-cost)硬件上;而且它提供高传输率(high throughput)来访问应用程序的数...
分类:其他好文   时间:2014-04-30 03:17:00    阅读次数:604
JAVA操作properties文件
java中的properties文件是一种配置文件,主要用于表达配置信息,文件类型为*.properties,格式为文本文件,文件的内容是格式是"键=值"的格式,在properties文件中,可以用"#"来作注释,properties文件在Java编程中用到的地方很多,操作很方便。一、propert...
分类:编程语言   时间:2014-04-30 01:25:07    阅读次数:567
Hbase时间同步
如果Hbase的时间没有同步,启动主节点会起来,子节点的regionServer就不会起来。错误日志如下:aused by: org.apache.hadoop.hbase.ipc.RemoteWithExtrasException(org.apache.hadoop.hbase.ClockOutO...
分类:其他好文   时间:2014-04-30 00:50:16    阅读次数:565
hadoop配置错误
no datanode to stop; no namenode to stop; Bad connection to FS. command aborted.; 网络时断时许错误;
分类:其他好文   时间:2014-04-29 20:35:45    阅读次数:637
Hadoop 2.x 重新编译
本文记录Hadoop 2.x在Linux x64下重新编译的过程。环境:Centos 6.5 x64 &Hadoop 2.2一、安装编译包yum install svnyum install autoconfautomake libtool cmakeyum install ncurses-deve...
分类:其他好文   时间:2014-04-29 19:19:52    阅读次数:451
mapreduce任务出错最大尝试次数
一个任务出现失败时,tasktracker会将此任务的失败信息报告给jobtracker,jobtracker会分配新的节点执行此任务。这种情况下不会影响整个作业的完整执行。但是如果容易任务出现多次失败,且失败次数超出失败的最大指定次数,那么作业会在未完成的情况下被终止。mapred-site.xm...
分类:其他好文   时间:2014-04-29 16:47:48    阅读次数:521
Hadoop:Windows 7 32 Bit 编译与运行
所需工具1.Windows 7 32 Bit OS(你懂的)2.Apache Hadoop 2.2.0-bin(hadoop-2.2.0.tar.gz)3.Apache Hadoop 2.2.0-src(hadoop-2.2.0-src.tar.gz)3.JDK 1.74.Maven 3.2.1(a...
分类:Windows程序   时间:2014-04-28 08:33:25    阅读次数:1187
Java技术的特点
Java技术是一套完整的IT行业解决方案,其中包含了很多技术。最初是从解决家电设备联网通讯的方案发展起来的,其特点适用于Internet,于是在Internet广泛应用的环境下,迅速发展成为一种计算机语言、一个平台、一个网络计算的架构。 从整体上划分,Java技术可分成Java编程语言和Jav...
分类:编程语言   时间:2014-04-27 21:12:05    阅读次数:876
18089条   上一页 1 ... 1807 1808 1809
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!