在2014年4月7日,Apache公布了Hadoop 2.4.0 。相比于hadoop 2.3.0,这个版本号有了一定的改进,突出的变化能够总结为下列几点(官方文档说明):1 支持HDFS訪问控制列表(ACL,Access Control Lists) 这个特性攻克了在一定情况下,文件权限訪...
分类:
其他好文 时间:
2014-06-29 06:07:36
阅读次数:
299
最近,由于工作的需要,学习了基于Hadoop的一个数据仓库工具hive。遇到并解决了一些问题,但是有个select语句的细微差别值得注意。 首先来看两条hql语句: SELECT * FROM MY_TABLE where dt=2014031205 limit 10 SELECT ID,NAM.....
分类:
其他好文 时间:
2014-06-28 23:54:20
阅读次数:
400
Hadoop给我们提供了使用c语言访问hdfs的API,下面进行简要介绍:环境:ubuntu14.04hadoop1.0.1jdk1.7.0_51访问hdfs的函数主要定义在hdfs.h文件中,该文件位于hadoop-1.0.1/src/c++/libhdfs/文件夹下,而相应的库文件是位于hado...
一、在Ubuntu下创建hadoop组和hadoop用户增加hadoop用户组,同时在该组里增加hadoop用户,后续在涉及到hadoop操作时,我们使用该用户。1、创建hadoop用户组2、创建hadoop用户 sudo adduser -ingroup hadoop hadoop回车后会提示输入...
分类:
其他好文 时间:
2014-06-28 21:59:24
阅读次数:
257
vi /etc/sysconfig/network-scripts/ifcfg-eth0加入 ONBOOT=yes //启动时网络接口是否有效这样就可以自动连接网络了/********************删除自带的apache:service ...
分类:
其他好文 时间:
2014-06-28 20:36:58
阅读次数:
258
****说明:先全部看一遍,再开始安装****获取PHP源码包 http://cn2.php.net/get/php-5.5.10.tar.gz/from/this/mirrorwget安装libxml2:wget ftp://xmlsoft.org/libxml2/libxml2-2.9.1.ta...
分类:
Web程序 时间:
2014-06-28 20:23:05
阅读次数:
238
作为一个.NET程序员,真心不喜欢Python以及PHP这种弱类型的语言。有人说,程序员应该多学几门语言,本想学习Java,无奈感觉Java的语法太啰嗦了。很多人都推荐Python,说它的语法简洁,执行效率高。趁这两天空闲,开始学习Python。先从搭建环境开始。作为一个Python初学者来说,一个...
分类:
编程语言 时间:
2014-06-28 20:13:28
阅读次数:
260
安装前准备工作:[root@bogon src]# yum -y install bison bison-devel ncurses ncurses-devel openssl openssl-develcmake下载安装http://www.cmake.org/files/v2.8/cmake-2...
分类:
数据库 时间:
2014-06-21 13:46:44
阅读次数:
188
安装环境为 CentOS 64位系统,大概分下面几个步奏,0. 安装JDK1. 配置SSH2. 配置/etc/hosts3. 拷贝hadoop包到没台机器上4. 修改hadoop配置文件5. 关闭每台机器的防火墙6. 格式化namenode7. 运行hadoop详细说每个步奏,0. 安装jdk下载J...
分类:
其他好文 时间:
2014-06-21 12:37:47
阅读次数:
272
搭建环境搭建Lucene的开发环境只需要加入Lucene的Jar包,要加入的jar包至少要有: lucene-core-3.0.1.jar(核心包) contrib\analyzers\common\lucene-analyzers-3.0.1.jar(分词器) contrib\highlighte...
分类:
其他好文 时间:
2014-06-21 12:36:18
阅读次数:
290