目前hadoop1的稳定版本是1.2.1,我们以版本1.2.1为例详细的介绍hadoop1的安装,此过程包括OS安装与配置,JDK的安装,用户和组的配置,这些过程在hadoop2也有可能用到。Hadoop 
版本:1.2.1OS 版本: Centos6.4Jdk 版本: jdk1.6.0_32环境配置...
                            
                            
                                分类:
其他好文   时间:
2014-05-16 22:21:50   
                                阅读次数:
435
                             
                         
                    
                        
                            
                            
                                hadoop dfsadmin -safemode leave
                            
                            
                                分类:
其他好文   时间:
2014-05-16 22:18:40   
                                阅读次数:
325
                             
                         
                    
                        
                            
                            
                                Step1:关闭防火墙 service iptables stop[status] service 
iptables status chkconfig --list |grep iptables chkconfig iptables offStep2:修改IP 
(重启网卡:se...
                            
                            
                                分类:
其他好文   时间:
2014-05-16 21:22:50   
                                阅读次数:
318
                             
                         
                    
                        
                            
                            
                                创建表:
hive> CREATE TABLE pokes (foo INT, bar STRING); 
        Creates a table called pokes with two columns, the first being an integer and the other a string
创建一个新表,结构与其他一样
hive> create table n...
                            
                            
                                分类:
其他好文   时间:
2014-05-15 07:07:58   
                                阅读次数:
303
                             
                         
                    
                        
                            
                            
                                本篇的配置环境是基于HDFS HA系列实验之二:HA+JournalNode+zookeeper  上进行的。1:原理图   A:实验环境之组成DNS:productserverHA1(nameservices为cluster1):product201、product202HA2(nameservices为cluster2):product211、product212DN:product203、p...
                            
                            
                                分类:
其他好文   时间:
2014-05-15 05:59:29   
                                阅读次数:
323
                             
                         
                    
                        
                            
                            
                                简介
 Encrypted Shuffle capability (加密洗牌功能?)允许用HTTPS 和 可选的客户端验证 (也称作双向的 HTTPS, 或有客户端证书的 HTTPS) 去加密 MapReduce shuffle.它包括:
在HTTP 和 HTTPS 之间绑定 shuffle 的一个 Hadoop 配置用来指定 keystore 和 truststore 属性的Hado...
                            
                            
                                分类:
其他好文   时间:
2014-05-15 04:59:35   
                                阅读次数:
301
                             
                         
                    
                        
                            
                            
                                一、 创建表 
    在官方的wiki里,example是这样的:
Sql代码  
CREATE [EXTERNAL] TABLE [IF NOT EXISTS] table_name    [(col_name data_type [COMMENT col_comment], ...)]    [COMMENT table_comment]    [PARTITION...
                            
                            
                                分类:
数据库   时间:
2014-05-14 14:50:27   
                                阅读次数:
463
                             
                         
                    
                        
                            
                            
                                基于HBase实现的手机数据备份系统,实现了手机关键信息的备份,如短信、联系人等。包括服务器端(Server)和客户端(Client)Server运行环境:Hadoop+HBase+TomcatClient运行环境: 
Eclipse+Android2.3Server端介绍:接收客户端请求的Actio...
                            
                            
                                分类:
移动开发   时间:
2014-05-14 13:18:12   
                                阅读次数:
374
                             
                         
                    
                        
                            
                            
                                Microsoft发布了他们自己对Apache 
Avro通信协议的实现。Avro被描述为“紧凑的二进制数据序列化格式,类似于Thrift或者Protocol 
Buffers”,同时还有像Hadoop这样的分布式处理环境所需要的额外功能。 为了让该协议尽可能地快,Microsoft Avro类库会在运...
                            
                            
                                分类:
其他好文   时间:
2014-05-14 10:59:37   
                                阅读次数:
336