本文介绍在centos7上面通过hadoop2.4.1源码构建hadoop distribution 版本，即hadoop的运行版本。 为何要自己building，而不用Apache的distribution 【bin】版本，因为hadoop涉及到Linux系统的底层实现，如： hado...
分类：
其他好文 时间：
2014-07-30 23:41:25
阅读次数：
284
jpshadoop namenode -formatdfs directory : /home/hadoop/dfs --data --current/VERSION#Wed Jul 30 20:41:03 CST 2014storageID=DS-ab96ad90-7352-4cd5-a0de.....
分类：
其他好文 时间：
2014-07-30 23:16:25
阅读次数：
228
HDFS和MapReduce是Hadoop的两大核心。整个Hadoop体系结构主要是通过HDFS来实现分布式存储的底层支持的，并且通过MapReduce来实现分布式并行任务处理的程序支持。...
分类：
其他好文 时间：
2014-07-30 20:57:44
阅读次数：
238
代码测试环境：Hadoop2.4应用场景：在Reducer端一般是key排序，而没有value排序，如果想对value进行排序，则可以使用此技巧。应用实例描述：比如针对下面的数据：a,5
b,7
c,2
c,9
a,3
a,1
b,10
b,3
c,1如果使用一般的MR的话，其输出可能是这样的：a 1
a 3
a 5
b 3
b 10
b 7
c 1
c 9
c 2从数据中可以看到其键是排序的，但...
分类：
其他好文 时间：
2014-07-30 17:29:34
阅读次数：
358
敏捷数据科学：用Hadoop创建数据分析应用（数据分析最佳实践入门敏捷大数据首作分步骤|全流程演示思路、工具与方法）【美】Russell Jurney(拉塞尔·朱尔尼) 著 冯文中 朱洪波 译ISBN 978-7-121-23619-82014年7月出版定价：49.00元 184页16开编辑推荐对大...
分类：
其他好文 时间：
2014-07-30 17:21:04
阅读次数：
253
首先，SSH不是一个框架，而是多个框架（struts+spring+hibernate）的集成，是眼下较流行的一种Web应用程序开源集成框架，用于构建灵活、易于扩展的多层Web应用程序。集成SSH框架的系统从职责上分为四层：表示层、业务逻辑层、数据持久层和域模块层（实体层）。Struts作为系统的总...
分类：
其他好文 时间：
2014-07-30 17:18:04
阅读次数：
273
mapreduce中我们自定义的mapper和reducer程序在执行后有可能遇上出错退出的情况，mapreduce中jobtracker会全程追踪任务的执行情况，对于出错的任务mapreduce也定义了一套自己的处理方式。...
分类：
其他好文 时间：
2014-07-30 12:21:22
阅读次数：
209
一、环境搭建
Windows下环境搭建：
1.下载并安装jdk 及android
sdk；
2.下载Xamarin.VisualStudio，可以从官方下在线安装的，也可以下载3.0.54版本的离线安装包。
3.下载完毕运行安装程序，按照提示一步一步安装即可。
Mac下环境搭建：
官方在线安装
二、创建Xamarin.Forms项目
...
分类：
其他好文 时间：
2014-07-30 12:15:33
阅读次数：
249
h1.移动云OSS SDK测试方法，包含环境搭建android oss sdk 测试方法1、搭建测试环境1.Android模拟器需要jdk1.62.安装Android SDK1、下载Android SDK starter package，解压到本地目录（命名sdk）下载地址：http://www.c...
分类：
数据库 时间：
2014-07-30 12:11:13
阅读次数：
317
一、Impala简介
Cloudera Impala对你存储在Apache Hadoop在HDFS，HBase的数据提供直接查询互动的SQL。除了像Hive使用相同的统一存储平台，Impala也使用相同的元数据，SQL语法（Hive SQL），ODBC驱动程序和用户界面（Hue Beeswax）。Impala还提供了一个熟悉的面向批量或实时查询和统一平台。
二、Impala安装
1.安装要求...
分类：
其他好文 时间：
2014-07-30 09:59:03
阅读次数：
358
