1.新增或者选择一个已有项目(project)后,将hive数据导入到kylin中,web界面的Model→Data source,导入数据 2.创建数据模型,数据模型是Cube的基础,它主要用于描述一个星形模型。有了数据模型以后,定义Cube的时候就可以直接从此模型定义的表和列中进行选择了,省去重 ...
分类:
其他好文 时间:
2019-03-21 12:02:17
阅读次数:
267
1)Hive下载:http://archive.cloudera.com/cdh5/cdh/5/ wget http://archive.cloudera.com/cdh5/cdh/5/hive-1.1.0-cdh5.7.0.tar.gz 2)解压 tar -zxvf hive-1.1.0-cdh5 ...
分类:
其他好文 时间:
2019-03-21 01:04:22
阅读次数:
180
1 安装hive 下载 http://mirrors.shu.edu.cn/apache/hive/hive-1.2.2/,红框中的不需要编译。 由于hive是默认将元数据保存在本地内嵌的 Derby 数据库中,但是这种做法缺点也很明显,Derby不支持多会话连接,因此本文将选择mysql作为元数据 ...
分类:
其他好文 时间:
2019-03-20 17:08:16
阅读次数:
167
网盘下载:DOOM启世录 pdf 下载 – 易分享电子书PDF资源网 作者: [美] 大卫·卡什诺 出版社: 电子工业出版社 原作名: Masters of Doom 译者: 孙振南 出版年: 2004-4 页数: 318 定价: 29.00元 装帧: 平装 ISBN: 9787505396814 ...
分类:
其他好文 时间:
2019-03-19 20:13:17
阅读次数:
248
一个简单的cmake例子CMakeLists.txt,生成动态库文件,可以指定发布目录。 尚不支持: 1、交叉编译环境配置 2、添加依赖库 1 #在当前目录新建一个build目录,然后cd build;cmake .. 2 #这样的好处是,可以将cmake生成的内容,和源码文件分离 3 4 #定义好 ...
分类:
其他好文 时间:
2019-03-19 20:04:31
阅读次数:
154
这几天又用到了该功能了,所以又改进了一版,增加了全量抽取和批量抽取两个参数。并且可以设置每批次抽取到记录数。 使用shell脚本可以直接方便到将hive中到表抽取到任何关系型数据库中。 shell脚本到demo如下: 执行文件目录结构如下: lib文件夹放所有依赖包,lib文件夹和shell脚本同层 ...
分类:
数据库 时间:
2019-03-19 18:42:21
阅读次数:
391
先说一下环境,我用的是hadoop3.1.1 + zookeeper3.4.6 + hive3.1.1。采用多用户模式搭建hive,建表、导入数据等很正常。select如果是hdfs操作也很正常,但如果涉及到MapReduce操作就有个很奇怪的现象:每次启动hive以后,第一次select的时候可以 ...
分类:
其他好文 时间:
2019-03-19 16:54:21
阅读次数:
431
启动Hive时出现: 解决方法: 初始化Hive时出现: 原因:在Hadoop和Hive中的 jline-2.12.jar 包冲突。 Hadoop: Hive: ...
分类:
其他好文 时间:
2019-03-19 01:22:49
阅读次数:
155
新浪微博开放平台提供了丰富的API接口,利用这些接口,开发者能够开发出独具特色的微博应用。但是,大部分接口都需要用户授权给应用,应用利用授权得到的Access Token来调用相应的接口来获取内容。 新浪微博的授权机制目前主要有3种应用场景: 本文主要介绍Web应用如何授权、获取Access Tok ...
Hive分区表数据的上传与导出 1. 前言 ? 经过前两篇的练习,我们练习了文件的上传与下载,以及Hive外部表数据的上传与导出。但是很多时候Hive的数据操作不仅仅是外部表,还有可能是对分区表的操作。接下来,就对分区表的数据操作进行练习。 2. 分区表的文件结构 1)创建一个分区表,分区字段为co ...
分类:
其他好文 时间:
2019-03-18 16:52:04
阅读次数:
516