org.apache.hadoop.hbase.TableExistsException: hbase:namespace 异常...
分类:
其他好文 时间:
2015-04-10 15:35:15
阅读次数:
759
一、Eclipse 新建Other-》Map/Reduce Project工程工程自动包含了相关hadoop的jar包,另外还需分别导入以下hive和连接mysql的jar包:hive/lib/*.jarmysql-connector-java-5.1.24-bin.jar二、启运HiveServe...
分类:
数据库 时间:
2015-04-08 18:00:36
阅读次数:
285
《Hadoop大数据零基础高端实战培训系列配文本挖掘项目(七大亮点、十大目标)》 课程讲师:迪伦 课程分类:大数据 适合人群:初级 课时数量: 300课时 用到技术:部署Hadoop集群 涉及项目:京东商城、百度、阿里巴巴 咨询QQ:779591710 下载地址: 链接:http://pan.bai...
分类:
其他好文 时间:
2015-04-01 11:02:36
阅读次数:
124
一 Hadoop集群部署 点这里 二 Zookeeper集群部署 zookeeper配置
分类:
其他好文 时间:
2015-03-31 21:44:55
阅读次数:
131
MapReduce是Hadoop中的完成数据计算任务的核心框架1. MapReduce 组成实体 (1)Client节点:此节点上运行MapReduce程序和JobClient实例对象,负责提交MapReduce作业。 (2)JobTracker:协调调度,主控节点,一个Hadoop集群仅有一个.....
分类:
其他好文 时间:
2015-03-30 20:52:21
阅读次数:
127
负载均衡有以下几种方式:
一、基于客户端方式:
每个客户程序都具有一定的服务器集群的知识,进而把以负载均衡的方式将请求发到不同的服务器。这种方式比较原始,现在一些老系统还在使用这种方式,客户端简单的使用轮询实现负载均衡。这种方式的可靠性,可维护性都很低,加重客户端开发的难度。
结构图如下:
二、基于DNS(DNS服务器)
...
分类:
其他好文 时间:
2015-03-28 18:46:08
阅读次数:
215
Hadoop配置主要事项
1、 保证Master和Slave能够ping通;
2、 配置/etc/hosts文件;
3、 能够ssh无密码切换各台主机;
4、 安装sun公司的jdk,在/etc/profile中设置好环境变量;
5、 下载Hadoop,安装、配置、搭建Hadoop集群;
1.Hadoop简介
Hadoop是Apache软件基金会旗下的一个开源分布式计算平台。...
分类:
其他好文 时间:
2015-03-28 17:25:24
阅读次数:
173
通过eclipse方法来操作Hadoop集群上cassandra数据库(包括配置cassandra,创建Keyspace对象以及往数据库写入数据);
创建map/reduce工程,命名为CassandraPro,需要把cassandra的lib目录下的jar包拷贝到hadoop的lib目录下;然后创建class,命名为TestClient;...
分类:
数据库 时间:
2015-03-28 14:21:59
阅读次数:
151
0.上传日志文件到linux中,通过flume将文件收集到hdfs中。
执行命令/home/cloud/flume/bin/flume-ng agent -n a4 -c conf -f /home/cloud/flume/conf/a4.conf -Dflume.root.logger=DEBUG,console
1.建立hive表
create external table bb...
分类:
Web程序 时间:
2015-03-28 08:51:36
阅读次数:
156
Hadoop集群配置往往按照网上教程就可以"配置成功",但是你自己在操作的时候会有很多奇奇怪怪的问题出现,我在这里整理了一下常见的问题与处理方法:1.配置/etc/hosts这个文件至关重要,他决定了各个节点是否能够成功通信,有两个地方要注意 1.127.0.0.1 localhost 要配置在其他...
分类:
其他好文 时间:
2015-03-17 00:39:11
阅读次数:
119