Hive是一个基于hadoop的数据仓库工具。Hive的查询语言是hive ql。一种类似sql的语言。
Hive支持的数据类型有
1整形:
Tinyint 1字节整型
Smallint 2字节整型
Bigint 8字节整型
2.布尔型
Boolean
3浮点型
Float
Double
4字符串类型
String
5.符合类型
...
分类:
其他好文 时间:
2014-07-22 23:03:34
阅读次数:
393
在AWS里用Elastic Map Reduce 开一个Cluster然后登陆master node并编译以下程序:import java.io.IOException;
import java.util.StringTokenizer;
import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.Path;
...
分类:
其他好文 时间:
2014-07-22 23:01:32
阅读次数:
405
该错误在入门例子中使用mvn clean test时出现该错误。原因:
测试用例应该放在src/test/java/...路径下,我是放在了src/main/java/..路径下了。 因为没有遵守其规则,才出现了该问题。
分类:
其他好文 时间:
2014-07-22 23:00:13
阅读次数:
5348
原pom.xml配置文件: 4.0.0 com.my.helloworld hello-world
1.0-SNAPSHOT Maven Hello World Project junit jun...
分类:
其他好文 时间:
2014-07-22 22:59:36
阅读次数:
374
本文以康哥的博客为基础进行修改和补充,详见:http://kangfoo.github.io/article/2014/01/hadoop1.x-wordcount-fen-xi/hadoop
mapreduce 过程粗略的分为两个阶段: 1.map; 2.redurce(copy, sor...
分类:
其他好文 时间:
2014-05-02 00:06:57
阅读次数:
553
1、环境: Maven :3.1.1 开发工具:Spring Tool Suite 数据库 :
Mysql 5.62、项目文件结构文件代码:2.1 、pom.xml 4.0.0 hibernate hibernate 0.0.1-SNAPSHOT jar
hibe...
分类:
系统相关 时间:
2014-05-01 19:43:40
阅读次数:
695
介绍SpringMVC是一款Web MVC框架。 它跟Struts框架类似,是目前主流的Web
MVC框架之一。本文通过实例来介绍SpringMVC的入门知识。实例本文所写的实例是一个员工的CRUD demo。 用idea编写,基于maven,
Web框架使用SpringMVC,视图采取Freema...
分类:
编程语言 时间:
2014-05-01 18:44:43
阅读次数:
370
主要是在批处理文件中调用mavn命令实现自动打包等一系列操作...
分类:
其他好文 时间:
2014-04-30 22:42:38
阅读次数:
399
前文描述的是在SDK下用Ant开发, 本文在此基础上尝试用Maven开发。这里需要用到maven-android-plugin。本文主要参考官方文档: https://code.google.com/p/maven-android-plugin/wiki/GettingStarted首先从这里下载例子工程:https://code.google.com/p/maven-android-plugin...
分类:
移动开发 时间:
2014-04-30 22:31:40
阅读次数:
412
很早以前有个Pig Spork分支,尝试把Pig迁移到Spark上,但是代码很久没有更新了。目前Pig on Spark应该是在Twitter内部进行着。
flare-spork是基于Spork对Pig和Spark的衔接,把Spark部分的代码迁移到了Pig 0.12.0上,并且升级了依赖和版本,升级为Scala 2.10.3,Spark 0.9.1,且兼容Hadoop 2.2.0。
目前项目在Github上,地址。打算参考Spork已经做的一些东西,继续Pig on Spark的开发。
Github...
分类:
其他好文 时间:
2014-04-30 22:15:39
阅读次数:
360