控制namenode检查点发生的频率。环境：OS：Centos 6.5 x64 &
Soft：Hadoop 1.2.11、修改core-site.xml，设置参数。 fs.checkpoint.period
1802、重启集群，查看namenode下文件更新频率，每隔180秒更新一次。[huser@...
分类：
其他好文 时间：
2014-05-06 00:26:48
阅读次数：
429
在上一章中提到了编码压缩，讲了一个简单的DataBlockEncoding.PREFIX算法，它用的是前序编码压缩的算法，它搜索到时候，是全扫描的方式搜索的，如此一来，搜索效率实在是不敢恭维，所以在hbase当中单独拿了一个工程出来实现了Trie的数据结果，既达到了压缩编码的效果，亦达到了方便查询的...
分类：
其他好文 时间：
2014-05-05 23:30:15
阅读次数：
434
一般的书或者教程上的安装步骤是：（需要是-g，即全局安装）npm install -g
express
//全局安装而我们应该多多关注下express的文档，github地址：https://github.com/visionmedia/express#quick-start提示express的安....
分类：
Web程序 时间：
2014-05-05 22:33:19
阅读次数：
422
PHP简介安装PHP解决依赖关系# 请配置好yum源（系统安装源及epel源）后执行如下命令：yum
-y groupinstall "Desktop Platform Development"yum -y install bzip2-devel
libmcrypt-devel mhash-deve...
分类：
Web程序 时间：
2014-05-05 22:14:58
阅读次数：
404
在windows下通过安装cygwin模拟linux环境，然后再安装hadoop，是一种简单方便的方式。为hadoop准备的windows下cygwin环境安装过程如下：
- 下载安装文件
最新的cygwin安装文件setup.exe下载地址在这里：http://cygwin.com/install.html。用最新版本的cygwin就可以，我用的是2.774版本的安装程序。
- 安装cyg...
能够将热爱的技术应用于实际生活生产中，是做技术人员向往和乐之不疲的事。
现将前期手里面的一个项目做一个大致的总结，与大家一起分享、交流、进步。项目现在正在线上运行，项目名——基于Hadoop的数据分析综合管理平台。
项目流程整体比较清晰，爬取数据（txt文本）-->数据清洗-->文本模型训练-->文本分类-...
分类：
其他好文 时间：
2014-05-04 00:22:05
阅读次数：
476
centos 配置hadoop 2.2. 非常全面...
分类：
其他好文 时间：
2014-05-03 16:39:17
阅读次数：
369
原理：利用python的win32模块，注册服务，让代码在后台运行，检测光盘并拷贝文件
启动的方法就是直接在cmd下，main.py install ，然后去windows 的服务下就可以看到The smallestpossible Python Service 这个服务，你可以启动，停止，还可以设置成开机自动启动。启动服务后，会自动检测光盘并在后台拷贝文件
main.py
import...
分类：
其他好文 时间：
2014-05-03 15:58:45
阅读次数：
235
本文主要介绍了MapReduce中的Combiner操作。在MapReduce的执行步骤中，我们一共分了8步，其中Map中的最后一步规约操作就是今天要讲的Combiner。首先看一下前文中的计数器：我们可以发现，其中有两个计数器：Combineoutputrecords和Combineinputrecords，他们的计数都是0，这是..
分类：
其他好文 时间：
2014-05-03 15:00:55
阅读次数：
323
