研究了两天vsftpd，从网上找了很多资料，不是出这问题就是那问题，幸好终于解决了，下面贴出我的配置过程。不喜勿喷。。。 一、安装vsftpd sudo apt-get install vsftpd 安装完以后大致的目录介绍 /etc/vsftpd/vs...
分类：
其他好文 时间：
2014-08-05 14:33:19
阅读次数：
252
http://www.cplusplus.com/forum/articles/10627/1.hpp文件hpp文件可以使用template函数和class静态函数（不含静态成员）a)不可包含全局对象和全局函数由于hpp本质上是作为.h被调用者include，所以当hpp文件中存在全局对象或者全局函...
分类：
编程语言 时间：
2014-08-03 17:49:55
阅读次数：
225
phpStorm中新建目录，但是打开文件夹，却没有提交到SVN，导致每次都必须手动加入。如果新增的文件夹或者文件较多目录较深，容易遗漏。（default7#zbphp.com）
解决办法：
安装SVN tortoiseSVN的时候必须勾选支持CMD命令！
然后在phpStorm中去掉SVN配置中的所有的这几个选项！...
分类：
Web程序 时间：
2014-07-23 18:08:36
阅读次数：
234
总结之前工作中遇到的一个问题。
背景：
运维用scribe从apache服务器推送过来的日志有重复记录，所以这边的ETL处理要去重，还有个需求是要按业务类型多目录输出，方便挂分区，后面的使用。
这两个需求单独处理都没有问题，但要在一个mapreduce里完成，需要一点技巧。
1、map输入数据，经过一系列处理，输出时：
if(ttype.equals("other"))...
分类：
其他好文 时间：
2014-07-11 00:20:13
阅读次数：
226
前言
在做需求时，经常遇到多个目录，也就是多个维度进行join，这里分析一下，数据是怎么流动的。
1、多目录输入
使用MultipleInputs.addInputPath() 对多目录制定格式和map
2、数据流分析
map按行读入数据，需要对不同的输入目录，打上不同的标记（这个方法又叫reduce端连接），map在输出后会进行partition和sort，按照key进行排序，然后输...
分类：
其他好文 时间：
2014-06-29 23:09:07
阅读次数：
348
使用MultipleInputs.addInputPath 对多个路径输入
现在假设有三个目录，并使用了三个mapper去处理，
经过map处理后，输出的结果会根据key 进行join，
如果使用TextPair，会根据第一个字段jion，第二个字段排序
然后在作为reduce的输入，进行计算...
分类：
其他好文 时间：
2014-06-26 07:49:51
阅读次数：
250
