部署Hive后启动HiveServer2居然抛出了以下的异常：反复检查了配置文件，配置都是正确，就是启动失败，实在没有办法只能根据错误信息排查。* 找到HiveConf.java-->unitFor(String unit, TimeUnit defaultUnit)方法，通过代码可以看出是因为un...
分类：
编程语言 时间：
2015-02-12 15:31:51
阅读次数：
293
1 2 3 19 20 21 22 23 24 25 26 27 28 29 mapred.reduce.tasks 30 -1 31 The default number of reduce tasks per jo...
分类：
其他好文 时间：
2015-02-12 13:54:18
阅读次数：
1814
From:http://www.itnose.net/detail/6065872.html# 需要软件Hadoop-2.2.0（目前Apache官网最新的Stable版本）Hbase-0.96.2（这里就用这个版本，跟Hadoop-2.2.0是配套的，不用覆盖jar包什么的）Hive-0.13.1...
分类：
其他好文 时间：
2015-02-12 12:20:46
阅读次数：
255
+-------------------------------------------------------------------+
json
+-------------------------------------------------------------------+
{"store":
{"fruit"...
分类：
Web程序 时间：
2015-02-10 16:52:13
阅读次数：
301
Cloudera Impala需求为了达到预期的效果，Impala依赖于软件、硬件的可用性，以及下面章节描述的配置。继续阅读：支持的操作系统支持的Hadoop发布Hive Metastore及相关配置Java依赖关系包和库网络配置需求硬件需求用户帐户需求支持的操作系统支持的64位操作系统：Red H...
分类：
其他好文 时间：
2015-02-10 15:03:19
阅读次数：
319
安装与使用Cloudera ImpalaCloudera Impala提供快速的、交互式的SQL查询方式，直接基于Apache Hadoop存储在HDFS或HBase中的数据进行查询。除了使用与Apache Hive相同的统一存储平台外，Impala也使用了与Hive相同的元数据、SQL语法（Hiv...
分类：
其他好文 时间：
2015-02-10 13:06:32
阅读次数：
192
本教程介绍Impala的安装，使用和JDBC调用。为什么用 Impala？ 因为Hive 太慢了！Impala 也可以执行SQL，但是比Hive的速度快很多。为什么Impala可以比Hive快呢？因为Hive采用的是把你的sql转化成hadoop 的 MapReduce任务的代码，然后编译，打包成jar包，并分发到各个server上执行，这是一个相当慢的过程。而Impala根本就不用Hadoop的MapReduce机制，直接调用HDFS的API获取文件，在自己的内存中进行计算。...
分类：
其他好文 时间：
2015-02-09 20:20:39
阅读次数：
395
Hive提供了三种客户端访问接口：
1）Hive CLI（Hive Command Line，Hive命令行），客户端可以直接在命令行模式下进行操作。
2）hwi（Hive Web Interface，Hive Web接口），Hive提供了更直观的Web界面
3）hiveserver，Hive提供了Thrift服务，Thrift客户端目前支持C++/Java/PHP/Python...
分类：
其他好文 时间：
2015-02-09 20:19:27
阅读次数：
352
创建表：
hive> CREATE TABLE pokes (foo INT, bar STRING);
Creates a table called pokes with two columns, the first being an integer and the other a string
创建一个新表，结构与其他一样
hive> create table n...
分类：
其他好文 时间：
2015-02-09 20:18:08
阅读次数：
157
搞了一段时间，hive2solr的job终于可以稳定的跑了，实现使用hive向solr插数据，主要是实现RecordWriter接口，重写write方法和close方法。下面对遇到的问题一一列出：1.数据覆盖问题，使用原子更新参考：http://caiguangguang.blog.51cto.com/1652935/15991372.重复构建solrserv..
分类：
其他好文 时间：
2015-02-07 19:10:50
阅读次数：
186
