目录 一、Spark SQL介绍 二、Spark和Hive的整合 三、Spark的thriftserve2/beeline/jdbc 四、shell方式使用SQL 一、Spark SQL介绍 官网：http://spark.apache.org/sql/ 学习文档：http://spark.apac ...
分类：
数据库 时间：
2019-12-24 23:44:13
阅读次数：
353
todo https://www.cnblogs.com/sinosoft/p/11642845.html https://www.cnblogs.com/zhunian/archive/2012/11/08/2760553.html ...
分类：
数据库 时间：
2019-12-24 23:42:46
阅读次数：
96
1. 摘要 对于大数据而言，数据仓库承载着整个企业的全业务的数据。早期数仓在关系型数据如Oracle，MySql上。到大数据时代，基于hadoop生态的大数据架构，数仓基本上都是基于hive的数仓。对于很多大数据开发者而言，特别是早期，很多开发者认为hive数仓就是和业务相关，隐射Hdfs数据文件的 ...
分类：
其他好文 时间：
2019-12-24 19:02:30
阅读次数：
109
刚好用到，转自http://blog.csdn.net/sinat_29581293/article/details/70214436 有空再整理： 先jps -ml 再sudo -u hive /usr/java/latest/bin/jstack 19661（此为进程号） > /tmp/jsta ...
分类：
Web程序 时间：
2019-12-24 15:34:12
阅读次数：
127
anaconda历史版本安装： anaconda所有版本链接：https://repo.continuum.io/archive/ 清华大学开源软件镜像站：https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/ ...
分类：
其他好文 时间：
2019-12-23 00:53:32
阅读次数：
1810
Hive与HBase的区别与联系 二者区别 Hive：Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的sql查询功能。 HBase：HBase是Hadoop的数据库，一个分布式、可扩展、大数据的存储。 二者联系 Hbase和Hive在大数据架构中处 ...
分类：
其他好文 时间：
2019-12-22 18:19:49
阅读次数：
84
由于把hadoop的以下配置项 <property> <name>fs.defaultFS</name> <value>hdfs://localhost:9000</value> </property> 改为 <property> <name>fs.defaultFS</name> <value>h ...
分类：
其他好文 时间：
2019-12-20 20:56:44
阅读次数：
92
参考: https://dbaplus.cn/news-11-1983-1.html 1/连接参数 hive.server2.thrift.min.worker.threads 5 hive.server2.thrift.max.worker.threads 150 在emr中hive-hivese ...
分类：
其他好文 时间：
2019-12-20 16:47:36
阅读次数：
210
一，hive 权限授权模型 1、Storage Based Authorization in the Metastore Server基于存储的授权（也就是HDFS的授权模型） - 可以对Metastore中的元数据进行保护，但是没有提供更加细粒度的访问控制（例如：列级别、行级别）。2、SQL St ...
分类：
其他好文 时间：
2019-12-20 13:52:44
阅读次数：
104
SQL on Hadoop 技术 | 备注 | Apache Hive | Cloudera Impala | Facebook Presto | Apache Drill | Spark SQL | Apache Phoenix | ...
分类：
数据库 时间：
2019-12-20 01:16:13
阅读次数：
124
