Hadoop的MR作业支持链式处理，类似在一个生产牛奶的流水线上，每一个阶段都有特定的任务要处理，比如提供牛奶盒，装入牛奶，封盒，打印出厂日期，等等，通过这样进一步的分工，从而提高了生产效率，那么在我们的Hadoop的MapReduce中也是如此，支持链式的处理方式，这些Mapper像Linux管道...
分类：
移动开发 时间：
2014-08-15 12:43:28
阅读次数：
285
下面开始hadoop的安装与配置；（1）安装jdk我安装的是JDK1.7.0_40，windows x64版的下载完之后，直接点击安装，我的安装路径为默认路径：C:\Program Files\Java\jdk1.7.0_40；安装完毕后，设置环境变量：JAVA_HOME指向JDk安装目录PATH指...
简介
文件浏览系统（ViewFs）提供了一个管理多个Hadoop文件系统命名空间（或者叫Namespace Volume）的方式。它对于有多个NameNode的联邦集群特别有用。ViewFs与Unix/Linux系统中client side mount tables类似。ViewFs可被用来创建个人命名空间视图，也可以每个集群一个公共的试图。
本指南描述了，在有多个集群的Hadoop系统中，每...
分类：
其他好文 时间：
2014-08-15 09:34:27
阅读次数：
286
Hadoop学习笔记(8) ——实战 做个倒排索引 倒排索引是文档检索系统中最常用数据结构。根据单词反过来查在文档中出现的频率，而不是根据文档来，所以称倒排索引(Inverted Index)。结构如下: 这张索引表中， 每个单词都对应着一系列的出现该单词的文档，权表示该单词在该文档中出现的次数。....
分类：
其他好文 时间：
2014-08-14 23:43:36
阅读次数：
302
hadoop的运行环境应该是在linux环境。如果想在windows环境下安装和运行hadoop，一般有两种方式：一种是VM的方式linux操作系统，这样可以实现全linux环境的hadoop运行；另一种方式安装cygwin模拟linux环境，该方法相对比较简单方便。本文采取cywin的方式。下面将...
在执行mdrill创建表的时候报如下异常（蓝色部分为关键）：[mdrill@hadoop1101 bin]$ ./bluewhale mdrill create ./create.sql higo execute [create, ./create.sql]Exception in thread "...
分类：
其他好文 时间：
2014-08-14 23:05:46
阅读次数：
246
核心函数：cvFloodFill程序：代码：#include"cv.h"
#include"cxcore.h"
#include"highgui.h"
#include<iostream>
intfloodfill(intargc,char**argv)
{
IplImage*src=cvLoadImage("e:\\picture\\xibao.jpg");
cvNamedWindow("src");
cvShowImage("src",src);
cvFloodFill(..
分类：
其他好文 时间：
2014-08-14 21:09:20
阅读次数：
227
1.开运算：CV_MOP_OPEN，先腐蚀（cvErode）再膨胀(cvDilate)，去除亮点，可以将做了阀值化细胞图像的细胞分开2.闭运算：CV_MOP_CLOSE，先膨胀(cvDilate)再cvErode，去除暗点3.形态学梯度：cvDilate-cvErode，用于求边界4.礼帽：src-开运算，突出亮点5.黑帽：闭运算-src，突出暗..
分类：
其他好文 时间：
2014-08-14 21:09:10
阅读次数：
225
核心函数：cvSmooth程序：代码：#include"cv.h"
#include"cxcore.h"
#include"highgui.h"
#include<iostream>
intsmooth(intargc,char**argv)
{
IplImage*src=cvLoadImage("e:\\picture\\123.bmp",0);
cvNamedWindow("src");
cvShowImage("src",src);
IplImage*dst1=cvCr..
分类：
其他好文 时间：
2014-08-14 21:08:39
阅读次数：
249
核心函数：cvConvertImage程序：代码：#include"cv.h"
#include"cxcore.h"
#include"highgui.h"
#include<iostream>
intConvertImage(intargc,char**argv)
{
IplImage*src=cvLoadImage("e:\\picture\\4.jpg");
IplImage*dst=cvCreateImage(cvGetSize(src),8,1);
cvConver..
分类：
其他好文 时间：
2014-08-14 21:08:00
阅读次数：
247
