积累了小一个月，终于搞定了64位Ubuntu14.4中的Hadoop集群环境安装。虽然只能算是囫囵吞枣，但是基本完成了预期的目标，接下来要细细品味所有的细节了。...
分类：
其他好文 时间：
2014-05-15 02:58:17
阅读次数：
297
hadoop分割与读取输入文件的方式被定义在InputFormat接口的一个实现中，TextInputFormat是默认的实现，当你想要一次获取一行内容作为输入数据时又没有确定的键，从TextInputFormat返回的键为每行的字节偏移量，但目前没看到用过
以前在mapper中曾使用LongWritable（键）和Text（值），在TextInputFormat中，因为键是字节偏移量，可以是L...
分类：
移动开发 时间：
2014-05-15 01:31:37
阅读次数：
454
本篇介绍MapReduce的一些高级特性，如计数器、数据集的排序和连接。计数器是一种收集作业统计信息的有效手段，排序是MapReduce的核心技术，MapReduce也能够执行大型数据集间的“”连接（join）操作。...
分类：
其他好文 时间：
2014-05-14 23:53:44
阅读次数：
553
php5.4.3如何连接sqlServer 2008 r21、下载
ntwdblib.dll，（http://yunpan.cn/QiRkGyLH2YYJy （提取码：edfc）），拷贝到 php安装路径的根目录下 和
Apache服务器安装路径的bin文件夹下；2、下载sqlsrv相关文件，（ht...
分类：
数据库 时间：
2014-05-14 23:31:49
阅读次数：
530
hive执行query语句时提示错误：org.apache.hadoop.ipc.RemoteException: java.io.IOException: java.io.IOException:...
分类：
编程语言 时间：
2014-05-14 21:49:08
阅读次数：
378
描述把文本读出的API，在手机上测试知识支持英文，中文库应该没有所以不支持
/*
* Copyright (C) 2009 The Android Open Source Project
*
* Licensed under the Apache License, Version 2.0 (the "License");
* you may not use this file exce...
分类：
移动开发 时间：
2014-05-14 21:34:49
阅读次数：
435
ReduceTask的运行
Reduce处理程序中需要执行三个类型的处理，
1.copy,从各map中copy数据过来
2.sort,对数据进行排序操作。
3.reduce,执行业务逻辑的处理。
ReduceTask的运行也是通过run方法开始，
通过mapreduce.job.reduce.shuffle.consumer.plugin.class配置shuffle的plugin,
...
分类：
其他好文 时间：
2014-05-14 20:23:57
阅读次数：
519
近来多次和百度、阿里、腾讯、中移动数据中心的架构师进行交流，同时也在网上的论坛/社区主导大数据分析范例的一些讨论，与互联网/云开发人员进行沟通。由此，我愉快地发现，大数据分析在中国非常普遍：不光是星巴克、纸牌屋等美国文化元素在中国广受追捧；Hadoop也受到广泛接纳，并且在中国的云开发人员的讨论中占据了主导地位。...
分类：
其他好文 时间：
2014-05-14 19:37:49
阅读次数：
255
6安装maven下载地址：http://maven.apache.org/download.cgi解压安装unzip–oapache-maven-3.2.1-bin.zipmvapache-maven-3.2.1maven配置环境变量MAVEN_HOME=/usr/local/mavenexportPATH=$MAVEN_HOME/bin:$PATH7java环境自动构建部署7.1新建job输入名称如下图输入SVN服务器地址?.
分类：
编程语言 时间：
2014-05-14 15:44:56
阅读次数：
460
