案例取自streaming-app项目package com.asiainfo.ocdc.streaming.toolsimport org.apache.hadoop.hbase.HBaseConfigurationimport org.apache.hadoop.conf.Configurati...
分类：
其他好文 时间：
2014-07-29 11:02:26
阅读次数：
1081
摘要：上次小编介绍了三位计算机领域的大神：计算机之父艾伦·麦席森·图灵、Hadoop之父Doug Cutting和Amazon AWS推动者Werner Vogels，他们分别因为超凡的创造力、顶级的成功技术、扬名天下的项目而被我们熟知。今天小编接着聊一聊那些我们终其一生都无法超越的程序员，当然，今天的会有所不同哦。
世界上第一个程序员是个女士
1815年出生于伦敦的阿达·洛芙...
分类：
其他好文 时间：
2014-07-28 15:47:53
阅读次数：
324
由于需要搭建hadoop平台，但是苦于没有现成可用的linux服务器，只好自己下载了CentOS 6.5从头装起，安装过程中遇到了很多问题，比如网络配置、时钟同步、环境变量配置、以及各种服务的启停，还有jdk的安装等（虽然系统自带JDK，但是本人过于低端，自带的JDK的安装路径都搞不明白，就干脆.....
分类：
系统相关 时间：
2014-07-28 15:34:13
阅读次数：
416
hadoop fs列出所有的命令hadoop fs -help ls列出某个命令的详细信息hadoop dfs -mkdir /data/weblogshadoop dfs -mkdir /data/dir1 /data/dir2 ...创建文件夹,可以递归创建,可同时创建多个目录echo "Hel...
分类：
其他好文 时间：
2014-07-28 15:08:23
阅读次数：
224
1、在打算做namenode的机器上，wget或其他方式下载hadoop的压缩包，并解压到本地指定目录 下载解压命令参考Linux常用命令。 2、配置namenode，修改site文件 修改core-site.xml <configuration>
??<property>
?...
分类：
其他好文 时间：
2014-07-28 00:48:29
阅读次数：
214
（1）为了操作方便，需获取root权限，否则每次sudo 然后输入密码，较为麻烦默认的root密码是随机的，设置新的root密码的方法: sudo passwd设置了新的密码后，su root 切换到root权限用户（2）haoop要求的是sun jdk， openjdk不可以
分类：
其他好文 时间：
2014-07-27 22:37:09
阅读次数：
243
Hadoop学习笔记(5) ——编写HelloWorld(2) 前面我们写了一个Hadoop程序，并让它跑起来了。但想想不对啊，Hadoop不是有两块功能么，DFS和MapReduce。没错，上一节我们写了一个MapReduce的HelloWorld程序，那这一节，我们就也学一学DFS程序的编写。....
分类：
其他好文 时间：
2014-07-27 22:24:49
阅读次数：
280
Hadoop学习笔记(4) ——搭建开发环境及编写Hello World 整个Hadoop是基于Java开发的，所以要开发Hadoop相应的程序就得用JAVA。在linux下开发JAVA还数eclipse方便。 下载 进入官网：http://eclipse.org/downloads/。 找到相应....
分类：
其他好文 时间：
2014-07-27 10:35:02
阅读次数：
209
1.前言 学习hadoop的童鞋，倒排索引这个算法还是挺重要的。这是以后展开工作的基础。首先，我们来认识下什么是倒拍索引： 倒排索引简单地就是：根据单词，返回它在哪个文件中出现过，而且频率是多少的结果。这就像百度里的搜索，你输入一个关键字，那么百度引擎就迅速的在它的服务器里找到有该关键字...
分类：
其他好文 时间：
2014-07-27 10:24:42
阅读次数：
266
前言: 作为Hadoop生态系统中重要的一员, HBase作为分布式列式存储, 在线实时处理的特性, 备受瞩目, 将来能在很多应用场景, 取代传统关系型数据库的江湖地位. 本篇主要讲述面向时间序列/面检索的应用场景时, 如何利用HBase的特性去处理和优化. 构造应用场景 某气象局对各个站点...
分类：
其他好文 时间：
2014-07-26 16:49:51
阅读次数：
381
