一、问题hive如何将a b 1a b 2a b 3c d 4c d 5c d 6变为：a b 1,2,3c d ...
分类：
其他好文 时间：
2015-03-28 15:34:17
阅读次数：
107
重要：在使用 JDBC 开发 Hive 程序时, 必须首先开启 Hive 的远程服务接口。使用下面命令进行开启:hive -service hiveserver &1). 测试数据userinfo.txt文件内容(每行数据之间用tab键隔开):1 xiapi2 xiaoxue3 qingqing.....
分类：
数据库 时间：
2015-03-28 14:15:15
阅读次数：
204
一、Hive数据导入导出1、hive数据导出 很多时候，我们在hive中执行select语句，希望将最终的结果保存到本地文件或者保存到hdfs系统中或者保存到一个新的表中，hive提供了方便的关键词，来实现上面所述的功能。 1.将select的结果放到一个的的表格中（首先要用create ...
分类：
其他好文 时间：
2015-03-28 12:51:52
阅读次数：
126
0.上传日志文件到linux中，通过flume将文件收集到hdfs中。
执行命令/home/cloud/flume/bin/flume-ng agent -n a4 -c conf -f /home/cloud/flume/conf/a4.conf -Dflume.root.logger=DEBUG,console
1.建立hive表
create external table bb...
分类：
Web程序 时间：
2015-03-28 08:51:36
阅读次数：
156
1.概述 上一章《那些年使用Hive踩过的坑》介绍了Hive的基本架构及原理，加下来介绍Hive的基本操作和一些注意事项。2.基本操作2.1Create Table2.1.1介绍? CREATE TABLE 创建一个指定名字的表。如果相同名字的表已经存在，则抛出异常；用户可以用 IF NOT EX....
分类：
其他好文 时间：
2015-03-20 20:06:05
阅读次数：
178
hive hive是基于hadoop的一个数据仓库工具，可将结构化的数据文件映射为一张数据库表，并提供完整的sql查询功能，可将sql转换为MapReduce任务运行。hive不适合用于联机事务处理，也不提供实时查询，他适合应用在基于大量不可变的批处理作业。 hive架构分为四个部分： 用户接口：....
分类：
其他好文 时间：
2015-03-20 18:03:51
阅读次数：
128
问题:14/10/2015:53:14[HiveServer2-Handler-Pool:Thread-53]:WARNthrift.ThriftCLIService:Errorfetchingresults:org.apache.hive.service.cli.HiveSQLException:Couldn‘tfindlogassociatedwithoperationhandle:OperationHandle[opType=EXECUTE_STATEMENT,getHandleIdentifier..
分类：
其他好文 时间：
2015-03-19 16:40:22
阅读次数：
2177
因为CDH上需要用它来建HIVE的元库。。。参考：http://www.cnblogs.com/mchina/archive/2012/06/06/2539003.html一、简介PostgreSQL 是一种非常复杂的对象-关系型数据库管理系统（ORDBMS），也是目前功能最强大，特性最丰富和最复杂...
分类：
数据库 时间：
2015-03-19 16:08:01
阅读次数：
242
业务保障部有一个需求，需要用hive实时计算上一小时的数据，比如现在是12点，我需要计算11点的数据，而且必须在1小时之后运行出来，但是他们用hive实现的时候发现就单个map任务运行都超过了1小时，根本没法满足需求，后来打电话让我帮忙优化一下，以下是优化过程：...
分类：
其他好文 时间：
2015-03-19 14:56:08
阅读次数：
246
原创不易，转载请务必注明，原创地址，谢谢配合!http://qindongliang.iteye.com/Pig系列的学习文档，希望对大家有用，感谢关注散仙！Apache
Pig的前世今生ApachePig如何自定义UDF函数？Apache
Pig5行代码怎么实现Hadoop的WordCount？Apache
Pig入门学习文档（一）ApachePig学习..
分类：
Web程序 时间：
2015-03-19 06:30:50
阅读次数：
204
