在2014年4月7日，Apache公布了Hadoop 2.4.0 。相比于hadoop 2.3.0，这个版本号有了一定的改进，突出的变化能够总结为下列几点（官方文档说明）：1 支持HDFS訪问控制列表（ACL，Access Control Lists） 这个特性攻克了在一定情况下，文件权限訪...
分类：
其他好文 时间：
2014-06-29 06:07:36
阅读次数：
299
摘要MapReduce是一个编程模型,和处理,产生大数据集的相关实现.用户指定一个map函数处理一个key/value对,从而产生中间的key/value对集.然后再指定一个reduce函数合并所有的具有相同中间key的中间value.下面将列举许多可以用这个模型来表示的现实世界的工作.以这种方式写...
分类：
其他好文 时间：
2014-06-29 00:17:14
阅读次数：
369
最近，由于工作的需要，学习了基于Hadoop的一个数据仓库工具hive。遇到并解决了一些问题，但是有个select语句的细微差别值得注意。 首先来看两条hql语句： SELECT * FROM MY_TABLE where dt=2014031205 limit 10 SELECT ID,NAM.....
分类：
其他好文 时间：
2014-06-28 23:54:20
阅读次数：
400
在《Java与WCF交互（一)：Java客户端调用WCF服务》一文中，我描述了用axis2的一个Eclipse控件生成WCF的Java客户端代理类，后来有朋友建议用Xfire、CXF，一直没有尝试，今天有朋友指出JDK6可以用java自带的一个WSImport工具，试了下，果然很爽，这是一个exe文...
分类：
编程语言 时间：
2014-06-28 23:40:25
阅读次数：
400
一、Links安装：推荐使用此种安装方式，因为它便于插件的管理。在eclipse根目录下新建文件夹links，这样就得到了eclipse\links在eclipse\links下新建一个link文件（需要为每个插件建一个.link文件），比如svn.link，在这里我的插件安装目录结构为F:\ecl...
分类：
系统相关 时间：
2014-06-28 23:33:06
阅读次数：
379
Could not create the view: An unexpected exception was thrown.解决办法：关闭myeclipse 原来工作空间的.metadata文件夹下出现com.genuitec.eclipse.ast.deploy.core.prefs错误提示---...
分类：
系统相关 时间：
2014-06-28 23:10:29
阅读次数：
349
Hadoop给我们提供了使用ｃ语言访问hdfs的API，下面进行简要介绍：环境：ubuntu14.04hadoop1.0.1jdk1.7.0_51访问hdfs的函数主要定义在hdfs.h文件中，该文件位于hadoop-1.0.1/src/c++/libhdfs/文件夹下，而相应的库文件是位于hado...
微软近期Open的职位:Job title: Software Development EngineerLocation: Beijing, ChinaAre you a talented developer who is passionate about mobile devices and re...
分类：
其他好文 时间：
2014-06-28 22:35:21
阅读次数：
369
一、在Ubuntu下创建hadoop组和hadoop用户增加hadoop用户组，同时在该组里增加hadoop用户，后续在涉及到hadoop操作时，我们使用该用户。1、创建hadoop用户组2、创建hadoop用户 sudo adduser -ingroup hadoop hadoop回车后会提示输入...
分类：
其他好文 时间：
2014-06-28 21:59:24
阅读次数：
257
Eclipse中调试的时候报错[2014-06-18 13:07:49 - DinnerBooker] The connection to adb is down, and a severe error has occured.[2014-06-18 13:07:49 - DinnerBooker]...
分类：
移动开发 时间：
2014-06-28 21:52:07
阅读次数：
287
