码迷,mamicode.com
首页 >  
搜索关键字:hadoop 大数据 云计算    ( 28457个结果
Spark安装
记录安装Spark环境的过程。前提是Hadoop集群已经安装,详见:Hadoop 2.X 集群安装环境:Centos 6.4 X64 & Hadoop 2.2(三节点集群) & Spark 1.01、获取Spark源码,可以去官网下载,解压。2、编译源码。1)先安装Maven。2)进入源码目录,执行...
分类:其他好文   时间:2014-07-16 19:28:29    阅读次数:180
hadoop1.0.3学习笔记
回 到 目 录最近要从网上抓取数据下来,然后hadoop来做存储和分析。每晚尽量更新呆毛王赛高月子酱赛高小唯酱赛高目录 安装hadoop1.0.3 HDFS wordcount mapreduce去重 mapreduce算平均分 mapreduce排序安装hadoop1.0.3 1 u...
分类:其他好文   时间:2014-07-14 15:14:34    阅读次数:279
分布式计算 网格计算 并行计算 云计算
先说分布式计算和并行计算的异同:解决对象上:都是大任务化为小任务,这是他们共同之处。 但是分布式的任务包互相之间有独立性,上一个任务包的结果未返回或者是结果处理错误,对下一个任务包的处理几乎没有什么影响。因此,分布式的实时性要求不高,而且允许存在计算错误(因为每个计算任务给好几个参与者计算,上传结....
分类:其他好文   时间:2014-07-14 15:03:29    阅读次数:243
Hadoop - YARN 通信协议
Hadoop YARN组件间的主要通信协议简介。...
分类:其他好文   时间:2014-07-14 14:04:13    阅读次数:221
Hadoop - YARN 概述
Hadoop YARN 简介...
分类:其他好文   时间:2014-07-14 13:13:55    阅读次数:329
Hadoop - YARN 启动流程
Hadoop YARN启动流程详述。...
分类:其他好文   时间:2014-07-14 12:58:12    阅读次数:220
Hadoop -YARN 应用程序设计概述
Hadoop YARN ApplicationMaster程序设计概述。...
分类:其他好文   时间:2014-07-14 11:27:32    阅读次数:267
Hadoop - MapReduce MRAppMaster-剖析
Hadoop MapReduce On YARN的实现 --- MRAppMaster内部组件剖析。...
分类:移动开发   时间:2014-07-14 11:26:56    阅读次数:340
用python + hadoop streaming 编写分布式程序(三) -- 自定义功能
又是期末又是实训TA的事耽搁了好久……先把写好的放上博客吧前文:用python + hadoop streaming 编写分布式程序(一) -- 原理介绍,样例程序与本地调试用python + hadoop streaming 编写分布式程序(二) -- 在集群上运行与监控使用额外的文件假如你跑的j...
分类:编程语言   时间:2014-07-14 10:59:55    阅读次数:335
hadoop 出现FATAL conf.Configuration: error parsing conf file,异常
FATAL conf.Configuration: error parsing conf file: com.sun.org.apache.xerces.internal.impl.io.MalformedByteSequenceException: Invalid byte 1 of 1-byte UTF-8 sequence. 14/07/12 23:51:40 ERROR namenode....
分类:其他好文   时间:2014-07-13 18:40:22    阅读次数:291
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!