现在大家可以跟我一起来实现Ubuntu 12.04下Hadoop 2.2.0
集群搭建,在这里我使用了两台服务器,一台作为master即namenode主机,另一台作为slave即datanode主机,增加更多的slave只需重复slave部分的内容即可。系统版本:master:Ubuntu
12....
分类:
其他好文 时间:
2014-06-10 22:01:07
阅读次数:
423
vs2008打开aspx文件时设计界面死机的解决一、突然有一天,在使用vs2008从源视图向设计视图切换时,界面出现了假死现象,重装后亦无效。我从网上搜索原因,发现很多朋友都有类似的问题,但解决方案各异,原因更是众说纷纭。下面我就我所看到的和我的切身经历,对vs2008设计视图假死的原因及解决方案....
分类:
Web程序 时间:
2014-06-10 21:32:11
阅读次数:
353
hadoop上进行kmeans聚类,一次迭代只使用一个mapreduce...
分类:
其他好文 时间:
2014-06-10 14:01:32
阅读次数:
236
1HDFS概述HDFS是Hadoop应用用到的一个最主要的分布式存储系统。一个HDFS集群主要由一个NameNode和很多个Datanode组成:Namenode管理文件系统的元数据,而Datanode存储
了实际的数据。本文档主要关注用户以及管理员怎样和HDFS进行交互。基本上,客户端联系Name...
分类:
其他好文 时间:
2014-06-10 12:40:13
阅读次数:
275
本文旨在介绍通过两台物理节点,实现完全分布式hadoop程序的安装部署。
分类:
其他好文 时间:
2014-06-10 10:13:49
阅读次数:
313
以红帽Linux为例,由于修改了inittab内容,导致系统无法启动。
解决办法:启动时修改grub参数,进入单用户模式,将inittab文件恢复,重新启动系统即可。而且该方法不需要关盘启动,特别适合虚拟机下的inittab等文件的恢复。
解决步骤:
1、修改grub参数。
在启动Linux时,按上下键,进入启动参数选择模式。
2、按e键进入grub参数编辑模式。
3、选择启动...
分类:
系统相关 时间:
2014-06-10 08:08:34
阅读次数:
272
Map-reduce是一种优雅的数据处理方式,本文通过三个例子介绍如何用python在linux的管道进行map-reduce编程,本文写的所有map-reduce程序都可以原封不动的放在Hadoop下运行,很容易在大数据集上扩展。
分类:
其他好文 时间:
2014-06-09 19:11:44
阅读次数:
253
由于着急,处理过程中也没有截图,这里简单的描写叙述下整个过程吧。IBM pcserver x3850
可能是机器太热的原因,中午无故掉电,导致esxi无法正常启动启动时报错bank5 invalid configurationno hypervistor
found启动盘里面有保留原来的datast...
分类:
其他好文 时间:
2014-06-09 14:34:49
阅读次数:
438
百亿数量级的大数据项目,软硬件总体预算只有30万左右,需求是进行复杂分析查询,性能要求多数分析请求达到秒级响应。
遇到这样的项目需求,预算不多的情况,似乎只能考虑基于Hadoop来实施。
理论上Hadoop撑住百亿数量级没问题,但想要秒级响应各种查询分析就不行了。我们先大概分析一下Hadoop的优缺...
分类:
其他好文 时间:
2014-06-09 14:32:39
阅读次数:
509
问题与现象在启用本地Internet连接共享给VMware的虚拟网卡时,出现了如下错误提示,导致无法启用(如图一示):Internet连接共享访问被启用时,出现了一个错误。依赖服务或组无法启动图一原因探讨Internet连接共享依赖于
Internet Connection sharing(ICS)...
分类:
Web程序 时间:
2014-06-09 13:42:41
阅读次数:
466