注意：以下安装步骤在Centos6.5操作系统中进行，安装步骤同样适于其他操作系统，如有同学使用Ubuntu等其他Linux操作系统，只需注意个别命令略有不同。 注意一下不同用户权限的操作，比如关闭防火墙，需要用root权...
分类：
其他好文 时间：
2015-04-14 13:08:45
阅读次数：
154
0、前言 3月31日是 Spark 五周年纪念日，从第一个公开发布的版本开始，Spark走过了不平凡的5年：从刚开始的默默无闻，到13年的鹊起，14年的大爆发。Spark核心之上有分布式的机器学习，SQL，streaming和图计算库。...
分类：
其他好文 时间：
2015-04-02 06:53:45
阅读次数：
273
今天总算是把hadoop2.4的整个开发环境弄好了，包括 windows7上eclipse连接hadoop，eclipse的配置和測试弄得烦躁的一逗比了~先上一张成功的图片，hadoop的伪分布式安装配置，仅仅要依照步骤来，有点基础的 基本没什么问题的。。eclipse的配置 弄了非常长一段时间才弄...
分类：
其他好文 时间：
2015-03-29 19:17:35
阅读次数：
103
配置环境 准备： 三台虚拟机 配置主节点： 1. 查看当前使用网卡 [root@localhost ~]# dmesg | grep -i eth
Bluetooth: BNEP (Ethernet Emulation) ver 1.3
eth0: no IPv6 routers present dmesg是显示开机启动信息...
分类：
系统相关 时间：
2015-03-29 15:15:19
阅读次数：
251
各位真的不好意思。上次的博文有误。上次的应该是HBase的伪分布式安装。这次本人保证是完全分布式安装。 首先是HBase的完成分布式安装。这次部署的环境是hadoop-1.2.1+hbase-0.98.X。因为这个版本的HBase是直接对应hadoop-1.2.1，故也就省去了覆盖jar包...
分类：
数据库 时间：
2015-03-05 14:17:32
阅读次数：
146
Zookeeper 初体验之——伪分布式安装简介Apache Zookeeper 是由 Apache Hadoop 的 Zookeeper 子项目发展而来，现在已经成为了 Apache 的顶级项目。Zookeeper 为分布式系统提供了高效可靠且易于使用的协同服务，它可以为分布式应用提供相当多的服务...
分类：
其他好文 时间：
2015-03-02 14:50:32
阅读次数：
101
软件：
hadoop1.1.2、pietty(在windows系统下登录到linux虚拟机的远程登录软件)、winscp（在本地与远程计算机间安全的复制文件）、jdk-6u24-linux-i586.bin、virtualbox上安装的centos
系统（安装过程这里不说了）
安装步骤：
注：避免安装过程出现文件操作权限导致的问题，以下操作在root用户下进行。
1.安装ssh...
分类：
其他好文 时间：
2015-03-01 15:46:13
阅读次数：
173
1：配置静态IP地址重启网卡命令：service network restart验证：ifconfig2：修改主机名称 2.1、修改当前会话中的主机名命令：hostname hadoop 2.2、修改配置文件中的主机名：vi /etc/sysconfig/network验证：重启机器后查看主机名.....
分类：
其他好文 时间：
2015-02-28 16:18:59
阅读次数：
153
本篇介绍两种HBase的安装方式：本地安装方式和伪分布式安装方式。安装的前提条件是已经安装成功了hadoop，并且hadoop的版本号要和hbase的版本号相匹配。我将要安装的hbase是hbase-0.94.11版本号，须要的hadoop是hadoop-1.2.1版本号。hbase下载地址：htt...
分类：
其他好文 时间：
2015-02-28 15:59:59
阅读次数：
173
一、HBase(NoSQL)的数据模型
1.1 表(table)，是存储管理数据的。
1.2 行键(row key)，类似于MySQL中的主键，行键是HBase表天然自带的，创建表时不需要指定
1.3 列族(column family)，列的集合。
一张表中有多个行健，一个行健读取出来的是一条记录，列族和MySQL中的列差不多，但是它是列的集合
HBase中列族是需要在定义表时指定的，列...
分类：
其他好文 时间：
2015-02-13 21:15:33
阅读次数：
217
