介绍之前具体写了一篇HBase过滤器的文章。今天把基础的表和数据相关操作补上。本文档參考最新（截止2014年7月16日）的官方Ref Guide、Developer API编写。全部代码均基于“hbase0.96.2-hadoop2”版本号编写，均实測通过。欢迎转载，请注明来源：http://blo...
分类：
其他好文 时间：
2015-12-16 19:29:39
阅读次数：
185
转载地址：http://blog.csdn.net/zhangzhaokun/article/details/44313531（1）安装环境 操作系统：Linux（centos6.5） JDK版本：1.7.0_45 Hadoop版本：hadoop2.2.0 Sqoop版本：s...
分类：
其他好文 时间：
2015-12-16 00:19:45
阅读次数：
347
准备Linux环境【JAVA,IP,hostname,hosts,iptables,chkconfig,ssh】 不会配置的找1.0下面的伪分布环境搭建下载稳定版2.2.0修改etc/hadoop目录下的配置文件core-site.xml,hdfs-site.xml,yarn-site.xml,ma...
分类：
其他好文 时间：
2015-12-16 00:10:24
阅读次数：
193
为什么会出现Hadoop2？Hadoop1的问题hdfs的namenode和mapreduce的jobtracker都是单点。namenode所在的服务器的内存不够用时，那么集群就不能工作了。mapreduce集群的资源利用率比较低。Hadoop1和Hadoop2对比MapReduce 资源管理和数...
分类：
其他好文 时间：
2015-12-15 21:15:49
阅读次数：
262
hadoop下载地址wgethttp://hadoop.f.dajiangtai.com/hadoop2.2/hadoop-2.2.0-x64.tar.gz0、创建用户useradd–mhadoop1、下载hadoop并解压2、为hadoop文件分配角色chown-Rhadoop:hadoophadoop组名：角色名文件名3、ls-l查看详细信息角色分配是否成功4、创建hadoop需要的文件目?.
分类：
其他好文 时间：
2015-12-15 10:35:55
阅读次数：
108
问题导读：1.如何配置各个节点之间无密码互通？2.启动hadoop，看不到进程的原因是什么？3.配置hadoop的步骤是什么？4.有哪些配置文件需要修改？5.如果没有配置文件，该如何找到该配置文件？6.环境变量配置了，但是不生效的原因是什么？7.如何查看hadoop2监控页面首先说一下这个安装过程需...
分类：
其他好文 时间：
2015-12-09 21:36:52
阅读次数：
257
一直在搞spark，也没时间弄hadoop，不过Hadoop基本的编程我觉得我还是要会吧，看到一篇不错的文章,不过应该应用于hadoop2.0以前，因为代码中有 conf.set("mapred.job.tracker","192.168.1.2:9001");新框架中已改为 Yarn-site.x...
分类：
其他好文 时间：
2015-12-09 00:24:20
阅读次数：
256
[root@node1 aas]# lsch02 ch03 spark-1.2.1-bin-hadoop2.4 spark-1.2.1-bin-hadoop2.4.tgz[root@node1 aas]# cd spark-1.2.1-bin-hadoop2.4[root@node1 spar...
分类：
其他好文 时间：
2015-12-06 11:15:35
阅读次数：
172
鲁春利的工作笔记，谁说程序员不能有文艺范？MapReduce中maptask任务的数量是由spli分片决定，那么reducetask的数量由什么来确定的呢？就是这里要讨论的MapReduce分区。默认情况下，MapReduce中使用的是HashPartitioner。/**Partitionkeysbytheir{@linkObject#hashCode()}.*/
p..
分类：
其他好文 时间：
2015-12-06 01:56:37
阅读次数：
428
目前关于Hadoop的安装配置教程书上、官方教程、博客都有很多，但由于对Linux环境的不熟悉以及各种教程或多或少有这样那样的坑，很容易导致折腾许久都安装不成功（本人就是受害人之一）。经过几天不断尝试，终于成功了。现将整个关于Hadoop的安装配置步骤分享出来，一方面为了希望能对有需要的朋友有所帮....
分类：
系统相关 时间：
2015-12-05 12:38:42
阅读次数：
292
