这篇文章讲得很好: https://www.cnblogs.com/tracylee/archive/2012/10/15/2723816.html 这是总结一下, 1. 静态链接库直接被包含在最终生成的可执行文件中, 动态链接库(DLL)文件夹与可执行文件独立, 可执行文件可以动态地使用与卸载DL ...
分类:
其他好文 时间:
2019-12-31 00:50:04
阅读次数:
99
升级: mkdir /opt/apps/hivecd /opt/apps/hivewget http://emr.oss-cn-hangzhou.aliyuncs.com/ecm-repo/hive/opay/apache-hive-2.3.5-bin.tar.gzmd5sum apache-hiv ...
分类:
其他好文 时间:
2019-12-30 17:47:54
阅读次数:
87
一,hive介绍 1.来源 facebook的数据仓库计算框架,后来开源给了Apache 主要做离线计算即就是不要求实时获取结果 2.数据仓库 数据库一般分为:OLAP OLTP 就是通过以往的数据分析,对现在的业务或者发展发现提供数据的支持 就是从历史数据中心发掘价值 一般有一下几种模式 星型模式 ...
分类:
其他好文 时间:
2019-12-30 14:29:22
阅读次数:
114
<?xml version="1.0" encoding="UTF-8" standalone="no"?><?xml-stylesheet type="text/xsl" href="configuration.xsl"?><configuration> <property> <name>hive ...
分类:
其他好文 时间:
2019-12-30 00:23:05
阅读次数:
74
参考: hive参数: https://www.cnblogs.com/yinzhengjie/articles/11065409.html hive-site.xmlhive.async.log.enabled false #控制beeline跑时是否输出执行日志,默认是true hive:hiv ...
分类:
其他好文 时间:
2019-12-27 21:59:12
阅读次数:
76
在前一篇文章 python ChainMap 中我们介绍了关于python内置函数 ChainMap的使用,ChainMap函数和update函数类似,都是对字典操作,也是将多个字典合并,那么问题来了?ChainMap和update两者区别在哪呢? 一.update简介 python 字典(Dict ...
分类:
编程语言 时间:
2019-12-27 13:47:50
阅读次数:
79
1. 什么是Hive Hive:由Facebook开源用于解决海量结构化日志的数据统计。 Hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张表,并提供类SQL查询功能。 本质是:将HQL转化成MapReduce程序 1)Hive处理的数据存储在HDFS 2)Hive分析数 ...
分类:
其他好文 时间:
2019-12-27 13:08:13
阅读次数:
92
检查:1、Linux上1)Linux防火墙是否关闭了2)网络是否通,linux和windows是否网通,用 `ping ip`3)hiveServer2服务是否开启,10000端口。用`netstat -nlp | grep 进程` 2、windows上1)防火墙2)网络是否通,linux和wind ...
分类:
其他好文 时间:
2019-12-26 19:51:47
阅读次数:
81
报错Could not load org.apache.hadoop.hive.conf.HiveConf. Make sure HIVE_CONF_DIR is set correctly** 首先检查HiveConf类是否存在:[hadoop@hadoop01 app]$ cd apache-h ...
分类:
其他好文 时间:
2019-12-26 19:51:28
阅读次数:
72
pom中应该有hive-exec、hive-jdbc、hive-server的依赖: <properties> <hadoop.version>2.6.0-cdh5.7.0</hadoop.version> <hive.version>1.1.0-cdh5.7.0</hive.version></p ...
分类:
其他好文 时间:
2019-12-26 19:43:02
阅读次数:
104