Hadoop集群实施成功后,再次格式化名称节点。环境:OS:Centos 6.5 x64 & 
Soft:Hadoop 1.2.11、格式化之前hadoop集群正常。[huser@master hadoop-1.2.1]$ jps7927 
SecondaryNameNode7773 NameNode8...
                            
                            
                                分类:
其他好文   时间:
2014-05-06 00:52:59   
                                阅读次数:
491
                             
                    
                        
                            
                            
                                随着3.0正式版的发布,有必要开始对其进行一番研究。首先就从环境搭建以及基本的配置开始。其实在cocos2d-x的官方wiki中已经有了比较详细的介绍,只不过是英文的,这里针对实际操作给大家简单翻译说明一下。创建一个cocos2d-x项目1.1 
环境需要Android 2.3 或更新版本ios 5....
                            
                            
                                分类:
其他好文   时间:
2014-05-06 00:47:07   
                                阅读次数:
363
                             
                    
                        
                            
                            
                                控制namenode检查点发生的频率。环境:OS:Centos 6.5 x64 & 
Soft:Hadoop 1.2.11、修改core-site.xml,设置参数。 fs.checkpoint.period 
1802、重启集群,查看namenode下文件更新频率,每隔180秒更新一次。[huser@...
                            
                            
                                分类:
其他好文   时间:
2014-05-06 00:26:48   
                                阅读次数:
429
                             
                    
                        
                            
                            
                                声明:1)本文由我bitpeach原创撰写,转载时请注明出处,侵权必究。 
2)本小实验工作环境为Ubuntu操作系统,hadoop1-2-1,jdk1.8.0。 
3)统计词频工作在单节点的伪分布上,至于真正实际集群的配置操作还没有达到,希望能够由本文抛砖引玉。(一)Hadoop的配置修正 网上有很多...
                            
                            
                                分类:
其他好文   时间:
2014-05-05 21:54:47   
                                阅读次数:
456
                             
                    
                        
                            
                            
                                在Hadoop集群环境下安装Mahout。环境:OS:Centos 6.5 x64 & 
Soft:Hadoop 1.2.1 & Mahout 
0.91、简介mahout项目主页:https://mahout.apache.org/下载二进制包,上传到服务器。2、安装用集群环境用户安装,解压二进制包。...
                            
                            
                                分类:
其他好文   时间:
2014-05-05 21:35:23   
                                阅读次数:
429
                             
                    
                        
                            
                            
                                在windows下通过安装cygwin模拟linux环境,然后再安装hadoop,是一种简单方便的方式。为hadoop准备的windows下cygwin环境安装过程如下:
- 下载安装文件
最新的cygwin安装文件setup.exe下载地址在这里:http://cygwin.com/install.html。用最新版本的cygwin就可以,我用的是2.774版本的安装程序。
- 安装cyg...
                            
                            
                         
                    
                        
                            
                            
                                能够将热爱的技术应用于实际生活生产中,是做技术人员向往和乐之不疲的事。
           现将前期手里面的一个项目做一个大致的总结,与大家一起分享、交流、进步。项目现在正在线上运行,项目名——基于Hadoop的数据分析综合管理平台。
                         
      项目流程整体比较清晰,爬取数据(txt文本)-->数据清洗-->文本模型训练-->文本分类-...
                            
                            
                                分类:
其他好文   时间:
2014-05-04 00:22:05   
                                阅读次数:
476
                             
                    
                        
                            
                            
                                centos 配置hadoop 2.2. 非常全面...
                            
                            
                                分类:
其他好文   时间:
2014-05-03 16:39:17   
                                阅读次数:
369
                             
                    
                        
                            
                            
                                本文主要介绍了MapReduce中的Combiner操作。在MapReduce的执行步骤中,我们一共分了8步,其中Map中的最后一步规约操作就是今天要讲的Combiner。首先看一下前文中的计数器:我们可以发现,其中有两个计数器:Combineoutputrecords和Combineinputrecords,他们的计数都是0,这是..
                            
                            
                                分类:
其他好文   时间:
2014-05-03 15:00:55   
                                阅读次数:
323
                             
                    
                        
                            
                            
                                本文主要介绍了MapReduce中的自定义计数器的相关内容。在上次的单词统计例子中,我们可以看到MapReduce在执行过程中会有很多的控制台输出信息,其中有一个很关键的内容:计数器。如下图:可以看到最上方的关键字:Counters,这就表示计数器。在这里,只有一个制表符缩进的表示..
                            
                            
                                分类:
其他好文   时间:
2014-05-03 14:56:19   
                                阅读次数:
336