要看这一节。。。 第二步：开机之后进行磁盘挂载 分区，格式化，挂载新磁盘 磁盘挂载 df -lh fdisk -l 开始分区 fdisk /dev/sdb 这个命令执行后依次输 n p 1 回车 回车 w fdisk -l 格式化我们的分区 mkfs -t ext4 -c /dev/sdb1 格式化 ...
分类：
系统相关 时间：
2019-07-03 00:34:56
阅读次数：
139
1. impala安装软件下载： http://archive.cloudera.com/cdh5/repo-as-tarball/5.14.0/ 2. linux磁盘的挂载： [root@node03 ~]# df -lhFilesystem Size Used Avail Use% Mounte ...
分类：
系统相关 时间：
2019-07-03 00:08:37
阅读次数：
144
转自https://www.cnblogs.com/zlslch/p/6785207.html?utm_source=itdadao&utm_medium=referral Impala和Hive的关系 Impala是基于Hive的大数据实时分析查询引擎，直接使用Hive的元数据库Metadata, ...
分类：
其他好文 时间：
2019-05-29 11:56:02
阅读次数：
176
目录 "项目吐槽" "遇到的问题" "1.mysql函数group_contact()返回值限制" "2. Impala使用in语句存在限制" "解决方案" "优化MySQL函数递归调用方案" "将Impala的in查询转换为等值查询" "总结" 项目吐槽 其实，涉及部门层级关系的问题在很多情形下都 ...
分类：
其他好文 时间：
2019-04-26 22:48:07
阅读次数：
226
Apache Hadoop的服务的部署比較繁琐。须要手工编辑配置文件、下载依赖包等。Cloudera Manager以GUI的方式的管理CDH集群，提供向导式的安装步骤。因为须要对Hive,HBase,Impala,Spark进行功能測试，就採用了Cloudera Manager方式进行安装。 Cl ...
分类：
其他好文 时间：
2019-04-23 09:17:26
阅读次数：
362
kkudu 提供了自己的api来对kudu进行操作，但是有的开发人员习惯用jdbc来操作数据库，这里我们采用impala 来实现该功能， impala 安装积配置，请百度，我们的集群采用kerberos认证。 1.jdbc:impala 连接（impala 官方建议连接方式） 官网下载clouder ...
分类：
其他好文 时间：
2019-03-04 17:41:30
阅读次数：
195
前言 由于笔者很荣幸的参与了目前所在公司的登月计划，整个登月计划过程中收获也颇丰，在此之前，完全没有和数据打交道的经验，所以一些基本问题需要总结出来，以供自己日后参考；1、作为一名开发人员，我们不仅要懂得技术的实现要点，也需要懂得自己所处工作组的业务逻辑；2、作为处理数据的工程师，不仅要懂得写基本的 ...
分类：
其他好文 时间：
2019-03-02 00:47:05
阅读次数：
192
hive及其他组件（比如spark、impala等）都会依赖hive metastore，依赖的配置文件位于hive-site.xml hive metastore重要配置 hive.metastore.warehouse.dirhive2及之前版本默认为/user/hive/warehouse/， ...
分类：
Web程序 时间：
2019-01-21 19:24:11
阅读次数：
229
impala2.12 官方：http://impala.apache.org/ 一 简介 Apache Impala is the open source, native analytic database for Apache Hadoop. Impala is shipped by Cloude ...
分类：
其他好文 时间：
2019-01-21 15:59:03
阅读次数：
147
1.优点 1.1 快！ 主节点生成执行计划树并分发执行计划至各节点并行执行的拉式获取数据（MR：推式获取数据） 计算的中间结果不写入磁盘 1.2 便利 提供SQL语义，可以方便的进行复杂的数据分析任务 2.缺点 2.1 啃内存 对于内存的依赖过于严重，内存溢出直接导致技术任务的失败 2.2 SQL支 ...
分类：
其他好文 时间：
2019-01-20 23:33:03
阅读次数：
418
